Renamed GNUNET_OS_process_close to GNUNET_OS_process_destroy
[oweals/gnunet.git] / src / transport / plugin_transport_http_server.c
1 /*
2      This file is part of GNUnet
3      (C) 2002, 2003, 2004, 2005, 2006, 2007, 2008, 2009 Christian Grothoff (and other contributing authors)
4
5      GNUnet is free software; you can redistribute it and/or modify
6      it under the terms of the GNU General Public License as published
7      by the Free Software Foundation; either version 3, or (at your
8      option) any later version.
9
10      GNUnet is distributed in the hope that it will be useful, but
11      WITHOUT ANY WARRANTY; without even the implied warranty of
12      MERCHANTABILITY or FITNESS FOR A PARTICULAR PURPOSE.  See the GNU
13      General Public License for more details.
14
15      You should have received a copy of the GNU General Public License
16      along with GNUnet; see the file COPYING.  If not, write to the
17      Free Software Foundation, Inc., 59 Temple Place - Suite 330,
18      Boston, MA 02111-1307, USA.
19 */
20
21 /**
22  * @file transport/plugin_transport_http.c
23  * @brief http transport service plugin
24  * @author Matthias Wachs
25  */
26
27 #include "plugin_transport_http.h"
28
29 #define HTTP_ERROR_RESPONSE "<!DOCTYPE HTML PUBLIC \"-//IETF//DTD HTML 2.0//EN\"><HTML><HEAD><TITLE>404 Not Found</TITLE></HEAD><BODY><H1>Not Found</H1>The requested URL was not found on this server.<P><HR><ADDRESS></ADDRESS></BODY></HTML>"
30 #define _RECEIVE 0
31 #define _SEND 1
32
33 static struct Plugin * p;
34
35 struct ServerConnection
36 {
37   /* _RECV or _SEND */
38   int direction;
39
40   /* should this connection get disconnected? GNUNET_YES/NO  */
41   int disconnect;
42
43   struct Session *session;
44   struct MHD_Connection *mhd_conn;
45 };
46
47 /**
48  * Function that queries MHD's select sets and
49  * starts the task waiting for them.
50  * @param plugin plugin
51  * @param daemon_handle the MHD daemon handle
52  * @param now schedule now or with MHD delay
53  * @return gnunet task identifier
54  */
55 static GNUNET_SCHEDULER_TaskIdentifier
56 server_schedule (struct Plugin *plugin,
57                  struct MHD_Daemon *daemon_handle,
58                  int now);
59
60 static void
61 server_log (void *arg, const char *fmt, va_list ap)
62 {
63   char text[1024];
64
65   vsnprintf (text, sizeof (text), fmt, ap);
66   va_end (ap);
67   GNUNET_log (GNUNET_ERROR_TYPE_DEBUG, "Server: %s\n", text);
68 }
69
70 /**
71  * Check if incoming connection is accepted.
72  * NOTE: Here every connection is accepted
73  * @param cls plugin as closure
74  * @param addr address of incoming connection
75  * @param addr_len address length of incoming connection
76  * @return MHD_YES if connection is accepted, MHD_NO if connection is rejected
77  *
78  */
79 static int
80 server_accept_cb (void *cls, const struct sockaddr *addr, socklen_t addr_len)
81 {
82   struct Plugin *plugin = cls;
83
84   if (plugin->cur_connections <= plugin->max_connections)
85     return MHD_YES;
86   else
87   {
88     GNUNET_log (GNUNET_ERROR_TYPE_ERROR,
89                 "Server: Cannot accept new connections\n");
90     return MHD_NO;
91   }
92 }
93
94
95 #if BUILD_HTTPS
96 static char *
97 server_load_file (const char *file)
98 {
99   struct GNUNET_DISK_FileHandle *gn_file;
100   uint64_t fsize;
101   char *text = NULL;
102
103   if (GNUNET_OK != GNUNET_DISK_file_size (file,
104       &fsize, GNUNET_NO, GNUNET_YES))
105     return NULL;
106   text = GNUNET_malloc (fsize + 1);
107   gn_file =
108       GNUNET_DISK_file_open (file, GNUNET_DISK_OPEN_READ,
109                              GNUNET_DISK_PERM_USER_READ);
110   if (gn_file == NULL)
111   {
112     GNUNET_free (text);
113     return NULL;
114   }
115   if (GNUNET_SYSERR == GNUNET_DISK_file_read (gn_file, text, fsize))
116   {
117     GNUNET_free (text);
118     GNUNET_DISK_file_close (gn_file);
119     return NULL;
120   }
121   text[fsize] = '\0';
122   GNUNET_DISK_file_close (gn_file);
123   return text;
124 }
125 #endif
126
127
128 #if BUILD_HTTPS
129
130 static int
131 server_load_certificate (struct Plugin *plugin)
132 {
133   int res = GNUNET_OK;
134
135   char *key_file;
136   char *cert_file;
137
138   /* Get crypto init string from config
139    * If not present just use default values */
140
141   GNUNET_assert (GNUNET_OK ==
142                  GNUNET_CONFIGURATION_get_value_string (plugin->env->cfg,
143                                                         plugin->name,
144                                                         "CRYPTO_INIT",
145                                                         &plugin->crypto_init));
146
147   if (GNUNET_OK !=
148       GNUNET_CONFIGURATION_get_value_filename (plugin->env->cfg, plugin->name,
149                                                "KEY_FILE", &key_file))
150   {
151     key_file = GNUNET_strdup ("https_key.key");
152   }
153
154   if (GNUNET_OK !=
155       GNUNET_CONFIGURATION_get_value_filename (plugin->env->cfg, plugin->name,
156                                                "CERT_FILE", &cert_file))
157   {
158     GNUNET_asprintf (&cert_file, "%s", "https_cert.crt");
159   }
160
161   /* read key & certificates from file */
162   GNUNET_log (GNUNET_ERROR_TYPE_DEBUG,
163               "Loading TLS certificate from key-file `%s' cert-file`%s'\n",
164               key_file, cert_file);
165
166   plugin->key = server_load_file (key_file);
167   plugin->cert = server_load_file (cert_file);
168
169   if ((plugin->key == NULL) || (plugin->cert == NULL))
170   {
171     struct GNUNET_OS_Process *cert_creation;
172
173     GNUNET_free_non_null (plugin->key);
174     plugin->key = NULL;
175     GNUNET_free_non_null (plugin->cert);
176     plugin->cert = NULL;
177
178 #if VERBOSE_SERVER
179     GNUNET_log (GNUNET_ERROR_TYPE_DEBUG,
180                 "No usable TLS certificate found, creating certificate\n");
181 #endif
182     errno = 0;
183     cert_creation =
184         GNUNET_OS_start_process (GNUNET_NO, NULL, NULL,
185                                  "gnunet-transport-certificate-creation",
186                                  "gnunet-transport-certificate-creation",
187                                  key_file, cert_file, NULL);
188     if (cert_creation == NULL)
189     {
190       GNUNET_log_from (GNUNET_ERROR_TYPE_ERROR, plugin->name,
191                        _
192                        ("Could not create a new TLS certificate, program `gnunet-transport-certificate-creation' could not be started!\n"));
193       GNUNET_free (key_file);
194       GNUNET_free (cert_file);
195
196       GNUNET_free_non_null (plugin->key);
197       plugin->key = NULL;
198       GNUNET_free_non_null (plugin->cert);
199       plugin->cert = NULL;
200       GNUNET_free_non_null (plugin->crypto_init);
201       plugin->crypto_init = NULL;
202
203       return GNUNET_SYSERR;
204     }
205     GNUNET_assert (GNUNET_OK == GNUNET_OS_process_wait (cert_creation));
206     GNUNET_OS_process_destroy (cert_creation);
207
208     plugin->key = server_load_file (key_file);
209     plugin->cert = server_load_file (cert_file);
210   }
211
212   if ((plugin->key == NULL) || (plugin->cert == NULL))
213   {
214     GNUNET_log_from (GNUNET_ERROR_TYPE_ERROR, plugin->name,
215                      _
216                      ("No usable TLS certificate found and creating one failed!\n"),
217                      "transport-https");
218     GNUNET_free (key_file);
219     GNUNET_free (cert_file);
220
221     GNUNET_free_non_null (plugin->key);
222     plugin->key = NULL;
223     GNUNET_free_non_null (plugin->cert);
224     plugin->cert = NULL;
225     GNUNET_free_non_null (plugin->crypto_init);
226     plugin->crypto_init = NULL;
227
228     return GNUNET_SYSERR;
229   }
230   GNUNET_free (key_file);
231   GNUNET_free (cert_file);
232   GNUNET_log (GNUNET_ERROR_TYPE_DEBUG, "TLS certificate loaded\n");
233   return res;
234 }
235 #endif
236
237
238 /**
239  * Reschedule the execution of both IPv4 and IPv6 server
240  * @param plugin the plugin
241  * @param server which server to schedule v4 or v6?
242  * @param now GNUNET_YES to schedule execution immediately, GNUNET_NO to wait
243  * until timeout
244  */
245
246 static void
247 server_reschedule (struct Plugin *plugin, struct MHD_Daemon *server, int now)
248 {
249   if ((server == plugin->server_v4) && (plugin->server_v4 != NULL))
250   {
251     if (plugin->server_v4_task != GNUNET_SCHEDULER_NO_TASK)
252     {
253       GNUNET_SCHEDULER_cancel (plugin->server_v4_task);
254       plugin->server_v4_task = GNUNET_SCHEDULER_NO_TASK;
255     }
256     plugin->server_v4_task = server_schedule (plugin, plugin->server_v4, now);
257   }
258
259   if ((server == plugin->server_v6) && (plugin->server_v6 != NULL))
260   {
261     if (plugin->server_v6_task != GNUNET_SCHEDULER_NO_TASK)
262     {
263       GNUNET_SCHEDULER_cancel (plugin->server_v6_task);
264       plugin->server_v6_task = GNUNET_SCHEDULER_NO_TASK;
265     }
266     plugin->server_v6_task = server_schedule (plugin, plugin->server_v6, now);
267   }
268 }
269
270 /**
271  * Callback called by MessageStreamTokenizer when a message has arrived
272  * @param cls current session as closure
273  * @param client clien
274  * @param message the message to be forwarded to transport service
275  */
276 static void
277 server_receive_mst_cb (void *cls, void *client,
278                        const struct GNUNET_MessageHeader *message)
279 {
280   struct Session *s = cls;
281
282   GNUNET_assert (NULL != p);
283   if (GNUNET_NO == exist_session(p, s))
284     return;
285
286   struct Plugin *plugin = s->plugin;
287   struct GNUNET_TIME_Relative delay;
288
289   delay = http_plugin_receive (s, &s->target, message, s, s->addr, s->addrlen);
290
291   s->next_receive =
292       GNUNET_TIME_absolute_add (GNUNET_TIME_absolute_get (), delay);
293
294   if (delay.rel_value > 0)
295   {
296     GNUNET_log_from (GNUNET_ERROR_TYPE_DEBUG, plugin->name,
297                      "Server: peer `%s' address `%s' next read delayed for %llu ms\n",
298                      GNUNET_i2s (&s->target),
299                      http_plugin_address_to_string (NULL, s->addr, s->addrlen),
300                      delay);
301   }
302 }
303
304 /**
305  * Callback called by MHD when it needs data to send
306  * @param cls current session
307  * @param pos position in buffer
308  * @param buf the buffer to write data to
309  * @param max max number of bytes available in buffer
310  * @return bytes written to buffer
311  */
312 static ssize_t
313 server_send_callback (void *cls, uint64_t pos, char *buf, size_t max)
314 {
315   struct Session *s = cls;
316   GNUNET_assert (NULL != p);
317   if (GNUNET_NO == exist_session(p, s))
318     return 0;
319
320   struct HTTP_Message *msg;
321   int bytes_read = 0;
322
323   //static int c = 0;
324   msg = s->msg_head;
325   if (msg != NULL)
326   {
327     /* sending */
328     if ((msg->size - msg->pos) <= max)
329     {
330       memcpy (buf, &msg->buf[msg->pos], (msg->size - msg->pos));
331       bytes_read = msg->size - msg->pos;
332       msg->pos += (msg->size - msg->pos);
333     }
334     else
335     {
336       memcpy (buf, &msg->buf[msg->pos], max);
337       msg->pos += max;
338       bytes_read = max;
339     }
340
341     /* removing message */
342     if (msg->pos == msg->size)
343     {
344       if (NULL != msg->transmit_cont)
345         msg->transmit_cont (msg->transmit_cont_cls, &s->target, GNUNET_OK);
346       GNUNET_CONTAINER_DLL_remove (s->msg_head, s->msg_tail, msg);
347       GNUNET_free (msg);
348     }
349   }
350
351   struct Plugin *plugin = s->plugin;
352   GNUNET_log_from (GNUNET_ERROR_TYPE_DEBUG, plugin->name,
353                    "Server: %X: sent %u bytes\n", s, bytes_read);
354
355   return bytes_read;
356 }
357
358 static struct ServerConnection *
359 server_lookup_session (struct Plugin *plugin,
360                        struct MHD_Connection *mhd_connection, const char *url,
361                        const char *method)
362 {
363   struct Session *s = NULL;
364   struct Session *t;
365   struct ServerConnection *sc = NULL;
366   const union MHD_ConnectionInfo *conn_info;
367   struct GNUNET_ATS_Information ats;
368   struct IPv4HttpAddress a4;
369   struct IPv6HttpAddress a6;
370   struct sockaddr_in *s4;
371   struct sockaddr_in6 *s6;
372   void *a;
373   size_t a_len;
374   struct GNUNET_PeerIdentity target;
375   int check = GNUNET_NO;
376   uint32_t tag = 0;
377   int direction = GNUNET_SYSERR;
378
379   conn_info =
380       MHD_get_connection_info (mhd_connection,
381                                MHD_CONNECTION_INFO_CLIENT_ADDRESS);
382   if ((conn_info->client_addr->sa_family != AF_INET) &&
383       (conn_info->client_addr->sa_family != AF_INET6))
384     return MHD_NO;
385
386   if ((strlen (&url[1]) >= 105) && (url[104] == ';'))
387   {
388     char hash[104];
389     char *tagc = (char *) &url[105];
390
391     memcpy (&hash, &url[1], 103);
392     hash[103] = '\0';
393     if (GNUNET_OK ==
394         GNUNET_CRYPTO_hash_from_string ((const char *) &hash,
395                                         &(target.hashPubKey)))
396     {
397       tag = strtoul (tagc, NULL, 10);
398       if (tagc > 0)
399         check = GNUNET_YES;
400     }
401   }
402
403   if (0 == strcmp (MHD_HTTP_METHOD_PUT, method))
404     direction = _RECEIVE;
405   else if (0 == strcmp (MHD_HTTP_METHOD_GET, method))
406     direction = _SEND;
407   else
408   {
409     GNUNET_break_op (0);
410     goto error;
411   }
412
413
414   if (check == GNUNET_NO)
415     goto error;
416
417   plugin->cur_connections++;
418   GNUNET_log_from (GNUNET_ERROR_TYPE_DEBUG, plugin->name,
419                    "Server: New %s connection from %s with tag %u\n",
420                    method,
421                    GNUNET_i2s (&target), tag);
422
423   /* find duplicate session */
424   t = plugin->head;
425   while (t != NULL)
426   {
427     if ((t->inbound) &&
428         (0 == memcmp (&t->target, &target, sizeof (struct GNUNET_PeerIdentity)))
429         &&
430         /* FIXME add source address comparison */
431         (t->tag == tag))
432       break;
433     t = t->next;
434   }
435   if (t != NULL)
436   {
437     GNUNET_log_from (GNUNET_ERROR_TYPE_DEBUG, plugin->name,
438                      "Server: Duplicate session, dismissing new connection from peer `%s'\n",
439                      GNUNET_i2s (&target));
440     goto error;
441   }
442
443   /* find semi-session */
444   t = plugin->server_semi_head;
445
446   while (t != NULL)
447   {
448     /* FIXME add source address comparison */
449     if ((0 == memcmp (&t->target, &target, sizeof (struct GNUNET_PeerIdentity)))
450         && (t->tag == tag))
451     {
452       break;
453     }
454     t = t->next;
455   }
456
457   if (t == NULL)
458     goto create;
459   GNUNET_log_from (GNUNET_ERROR_TYPE_DEBUG, plugin->name,
460                    "Server: Found existing semi-session for `%s'\n",
461                    GNUNET_i2s (&target));
462
463   if ((direction == _SEND) && (t->server_send != NULL))
464   {
465     GNUNET_log_from (GNUNET_ERROR_TYPE_DEBUG, plugin->name,
466                      "Server: Duplicate GET session, dismissing new connection from peer `%s'\n",
467                      GNUNET_i2s (&target));
468     goto error;
469   }
470   else
471   {
472     s = t;
473     GNUNET_CONTAINER_DLL_remove (plugin->server_semi_head,
474                                  plugin->server_semi_tail, s);
475     GNUNET_CONTAINER_DLL_insert (plugin->head, plugin->tail, s);
476     GNUNET_log_from (GNUNET_ERROR_TYPE_DEBUG, plugin->name,
477                      "Server: Found matching semi-session, merging session for peer `%s'\n",
478                      GNUNET_i2s (&target));
479
480     plugin->inbound_sessions ++;
481     GNUNET_STATISTICS_set (plugin->env->stats,
482         "# HTTP inbound sessions",
483         plugin->inbound_sessions,
484         GNUNET_NO);
485
486     goto found;
487   }
488   if ((direction == _RECEIVE) && (t->server_recv != NULL))
489   {
490     GNUNET_log_from (GNUNET_ERROR_TYPE_DEBUG, plugin->name,
491                      "Server: Duplicate PUT session, dismissing new connection from peer `%s'\n",
492                      GNUNET_i2s (&target));
493     goto error;
494   }
495   else
496   {
497     s = t;
498     GNUNET_CONTAINER_DLL_remove (plugin->server_semi_head,
499                                  plugin->server_semi_tail, s);
500     GNUNET_CONTAINER_DLL_insert (plugin->head, plugin->tail, s);
501     GNUNET_log_from (GNUNET_ERROR_TYPE_DEBUG, plugin->name,
502                      "Server: Found matching semi-session, merging session for peer `%s'\n",
503                      GNUNET_i2s (&target));
504     plugin->inbound_sessions ++;
505     GNUNET_STATISTICS_set (plugin->env->stats,
506         "# HTTP inbound sessions",
507         plugin->inbound_sessions,
508         GNUNET_NO);
509
510     goto found;
511   }
512
513 create:
514 /* create new session */
515   GNUNET_log_from (GNUNET_ERROR_TYPE_DEBUG, plugin->name,
516                    "Server: Creating new session for peer `%s' \n",
517                    GNUNET_i2s (&target));
518   switch (conn_info->client_addr->sa_family)
519   {
520   case (AF_INET):
521     s4 = ((struct sockaddr_in *) conn_info->client_addr);
522     a4.u4_port = s4->sin_port;
523     memcpy (&a4.ipv4_addr, &s4->sin_addr, sizeof (struct in_addr));
524     a = &a4;
525     a_len = sizeof (struct IPv4HttpAddress);
526     ats = plugin->env->get_address_type (plugin->env->cls, (const struct sockaddr *) s4, sizeof (struct sockaddr_in));
527     break;
528   case (AF_INET6):
529     s6 = ((struct sockaddr_in6 *) conn_info->client_addr);
530     a6.u6_port = s6->sin6_port;
531     memcpy (&a6.ipv6_addr, &s6->sin6_addr, sizeof (struct in6_addr));
532     a = &a6;
533     a_len = sizeof (struct IPv6HttpAddress);
534     ats = plugin->env->get_address_type (plugin->env->cls, (const struct sockaddr *) s6, sizeof (struct sockaddr_in6));
535     break;
536   default:
537     GNUNET_break (0);
538     goto error;
539   }
540   s = create_session (plugin, &target, a, a_len, NULL, NULL);
541   s->ats_address_network_type = ats.value;
542
543   s->inbound = GNUNET_YES;
544   s->next_receive = GNUNET_TIME_absolute_get_zero ();
545   s->tag = tag;
546   if (0 == strcmp (MHD_HTTP_METHOD_PUT, method))
547     s->server_recv = s;
548   if (0 == strcmp (MHD_HTTP_METHOD_GET, method))
549     s->server_send = s;
550   GNUNET_CONTAINER_DLL_insert (plugin->server_semi_head,
551                                plugin->server_semi_tail, s);
552   goto found;
553
554 error:
555   GNUNET_log_from (GNUNET_ERROR_TYPE_DEBUG, plugin->name,
556                    "Server: Invalid connection request\n");
557   return NULL;
558
559 found:
560   sc = GNUNET_malloc (sizeof (struct ServerConnection));
561   sc->mhd_conn = mhd_connection;
562   sc->direction = direction;
563   sc->session = s;
564   if (direction == _SEND)
565     s->server_send = sc;
566   if (direction == _RECEIVE)
567     s->server_recv = sc;
568
569 #if MHD_VERSION >= 0x00090E00
570   int to = (GNUNET_CONSTANTS_IDLE_CONNECTION_TIMEOUT.rel_value / 1000);
571
572   GNUNET_log_from (GNUNET_ERROR_TYPE_DEBUG, plugin->name,
573                    "Server: Setting timeout for %X to %u sec.\n", sc, to);
574   MHD_set_connection_option (mhd_connection, MHD_CONNECTION_OPTION_TIMEOUT, to);
575
576   struct MHD_Daemon *d = NULL;
577
578   if (s->addrlen == sizeof (struct IPv6HttpAddress))
579     d = plugin->server_v6;
580   if (s->addrlen == sizeof (struct IPv4HttpAddress))
581     d = plugin->server_v4;
582
583   server_reschedule (plugin, d, GNUNET_NO);
584 #endif
585   return sc;
586 }
587
588 /**
589  * Process GET or PUT request received via MHD.  For
590  * GET, queue response that will send back our pending
591  * messages.  For PUT, process incoming data and send
592  * to GNUnet core.  In either case, check if a session
593  * already exists and create a new one if not.
594  */
595 static int
596 server_access_cb (void *cls, struct MHD_Connection *mhd_connection,
597                   const char *url, const char *method, const char *version,
598                   const char *upload_data, size_t * upload_data_size,
599                   void **httpSessionCache)
600 {
601
602   struct Plugin *plugin = cls;
603   struct ServerConnection *sc = *httpSessionCache;
604   struct Session *s = NULL;
605
606   int res = MHD_YES;
607   struct MHD_Response *response;
608
609   GNUNET_assert (cls != NULL);
610   /* new connection */
611   if (sc == NULL)
612   {
613     sc = server_lookup_session (plugin, mhd_connection, url, method);
614     if (sc != NULL)
615       (*httpSessionCache) = sc;
616     else
617     {
618       response =
619           MHD_create_response_from_data (strlen (HTTP_ERROR_RESPONSE),
620                                          HTTP_ERROR_RESPONSE, MHD_NO, MHD_NO);
621       res = MHD_queue_response (mhd_connection, MHD_HTTP_NOT_FOUND, response);
622       MHD_destroy_response (response);
623       return res;
624     }
625   }
626
627   /* existing connection */
628   sc = (*httpSessionCache);
629   s = sc->session;
630
631   /* connection is to be disconnected */
632   if (sc->disconnect == GNUNET_YES)
633   {
634     /* Sent HTTP/1.1: 200 OK as PUT Response\ */
635     response =
636         MHD_create_response_from_data (strlen ("Thank you!"), "Thank you!",
637                                        MHD_NO, MHD_NO);
638     res = MHD_queue_response (mhd_connection, MHD_HTTP_OK, response);
639     MHD_destroy_response (response);
640     return MHD_YES;
641   }
642
643   GNUNET_assert (s != NULL);
644   /* Check if both directions are connected */
645   if ((sc->session->server_recv == NULL) || (sc->session->server_send == NULL))
646   {
647     /* Delayed read from since not both semi-connections are connected */
648     return MHD_YES;
649   }
650
651   if (sc->direction == _SEND)
652   {
653     response =
654         MHD_create_response_from_callback (-1, 32 * 1024, &server_send_callback,
655                                            s, NULL);
656     MHD_queue_response (mhd_connection, MHD_HTTP_OK, response);
657     MHD_destroy_response (response);
658     return MHD_YES;
659   }
660   if (sc->direction == _RECEIVE)
661   {
662     if (*upload_data_size == 0)
663     {
664       GNUNET_log_from (GNUNET_ERROR_TYPE_DEBUG, plugin->name,
665                        "Server: Peer `%s' PUT on address `%s' connected\n",
666                        GNUNET_i2s (&s->target),
667                        http_plugin_address_to_string (NULL, s->addr,
668                                                       s->addrlen));
669       return MHD_YES;
670     }
671
672     /* Receiving data */
673     if ((*upload_data_size > 0))
674     {
675       GNUNET_log_from (GNUNET_ERROR_TYPE_DEBUG, plugin->name,
676                        "Server: peer `%s' PUT on address `%s' received %u bytes\n",
677                        GNUNET_i2s (&s->target),
678                        http_plugin_address_to_string (NULL, s->addr,
679                                                       s->addrlen),
680                        *upload_data_size);
681       struct GNUNET_TIME_Absolute now = GNUNET_TIME_absolute_get ();
682
683       if ((s->next_receive.abs_value <= now.abs_value))
684       {
685         GNUNET_log_from (GNUNET_ERROR_TYPE_DEBUG, plugin->name,
686                          "Server: %X: PUT with %u bytes forwarded to MST\n", s,
687                          *upload_data_size);
688         if (s->msg_tk == NULL)
689         {
690           s->msg_tk = GNUNET_SERVER_mst_create (&server_receive_mst_cb, s);
691         }
692             GNUNET_SERVER_mst_receive (s->msg_tk, s, upload_data,
693                                        *upload_data_size, GNUNET_NO, GNUNET_NO);
694
695 #if MHD_VERSION >= 0x00090E00
696         int to = (GNUNET_CONSTANTS_IDLE_CONNECTION_TIMEOUT.rel_value / 1000);
697         struct ServerConnection *t = NULL;
698
699         GNUNET_log_from (GNUNET_ERROR_TYPE_DEBUG, plugin->name,
700                          "Server: Received %u bytes\n", *upload_data_size);
701         /* Setting timeouts for other connections */
702         if (s->server_recv != NULL)
703         {
704           t = s->server_recv;
705           GNUNET_log_from (GNUNET_ERROR_TYPE_DEBUG, plugin->name,
706                            "Server: Setting timeout for %X to %u sec.\n", t,
707                            to);
708           MHD_set_connection_option (t->mhd_conn, MHD_CONNECTION_OPTION_TIMEOUT,
709                                      to);
710         }
711         if (s->server_send != NULL)
712         {
713           t = s->server_send;
714           GNUNET_log_from (GNUNET_ERROR_TYPE_DEBUG, plugin->name,
715                            "Server: Setting timeout for %X to %u sec.\n", t,
716                            to);
717           MHD_set_connection_option (t->mhd_conn, MHD_CONNECTION_OPTION_TIMEOUT,
718                                      to);
719         }
720         struct MHD_Daemon *d = NULL;
721
722         if (s->addrlen == sizeof (struct IPv6HttpAddress))
723           d = plugin->server_v6;
724         if (s->addrlen == sizeof (struct IPv4HttpAddress))
725           d = plugin->server_v4;
726         server_reschedule (plugin, d, GNUNET_NO);
727 #endif
728         (*upload_data_size) = 0;
729       }
730       else
731       {
732         GNUNET_log (GNUNET_ERROR_TYPE_DEBUG,
733                     "Server: %X no inbound bandwidth available! Next read was delayed by %llu ms\n",
734                     s, now.abs_value - s->next_receive.abs_value);
735       }
736       return MHD_YES;
737     }
738     else
739       return MHD_NO;
740   }
741   return res;
742 }
743
744 static void
745 server_disconnect_cb (void *cls, struct MHD_Connection *connection,
746                       void **httpSessionCache)
747 {
748   struct ServerConnection *sc = *httpSessionCache;
749   struct ServerConnection *tc = NULL;
750   struct Session *s = NULL;
751   struct Session *t = NULL;
752   struct Plugin *plugin = NULL;
753
754   if (sc == NULL)
755     return;
756
757   s = sc->session;
758   GNUNET_assert (NULL != p);
759   if (GNUNET_NO == exist_session(p, s))
760     return;
761
762   plugin = s->plugin;
763   if (sc->direction == _SEND)
764   {
765
766     GNUNET_log_from (GNUNET_ERROR_TYPE_DEBUG, plugin->name,
767                      "Server: %X peer `%s' GET on address `%s' disconnected\n",
768                      s->server_send, GNUNET_i2s (&s->target),
769                      http_plugin_address_to_string (NULL, s->addr, s->addrlen));
770
771     s->server_send = NULL;
772
773     if (s->server_recv != NULL)
774     {
775       tc = s->server_recv;
776       tc->disconnect = GNUNET_YES;
777 #if MHD_VERSION >= 0x00090E00
778       MHD_set_connection_option (sc->mhd_conn, MHD_CONNECTION_OPTION_TIMEOUT,
779                                  1);
780 #endif
781     }
782   }
783   if (sc->direction == _RECEIVE)
784   {
785     GNUNET_log_from (GNUNET_ERROR_TYPE_DEBUG, plugin->name,
786                      "Server: %X peer `%s' PUT on address `%s' disconnected\n",
787                      s->server_recv, GNUNET_i2s (&s->target),
788                      http_plugin_address_to_string (NULL, s->addr, s->addrlen));
789     s->server_recv = NULL;
790     if (s->server_send != NULL)
791     {
792       tc = s->server_send;
793       tc->disconnect = GNUNET_YES;
794 #if MHD_VERSION >= 0x00090E00
795       MHD_set_connection_option (sc->mhd_conn, MHD_CONNECTION_OPTION_TIMEOUT,
796                                  1);
797 #endif
798     }
799     if (s->msg_tk != NULL)
800     {
801       GNUNET_SERVER_mst_destroy (s->msg_tk);
802       s->msg_tk = NULL;
803     }
804   }
805   GNUNET_free (sc);
806
807   t = plugin->server_semi_head;
808   while (t != NULL)
809   {
810     if (t == s)
811     {
812       GNUNET_CONTAINER_DLL_remove (plugin->server_semi_head,
813                                    plugin->server_semi_tail, s);
814       GNUNET_CONTAINER_DLL_insert (plugin->head, plugin->tail, s);
815       break;
816     }
817     t = t->next;
818   }
819   plugin->cur_connections--;
820
821   struct MHD_Daemon *d = NULL;
822
823   if (s->addrlen == sizeof (struct IPv6HttpAddress))
824     d = plugin->server_v6;
825   if (s->addrlen == sizeof (struct IPv4HttpAddress))
826     d = plugin->server_v4;
827   server_reschedule (plugin, d, GNUNET_NO);
828
829   if ((s->server_send == NULL) && (s->server_recv == NULL))
830   {
831     GNUNET_log_from (GNUNET_ERROR_TYPE_DEBUG, plugin->name,
832                      "Server: peer `%s' on address `%s' disconnected\n",
833                      GNUNET_i2s (&s->target),
834                      http_plugin_address_to_string (NULL, s->addr, s->addrlen));
835     if (s->msg_tk != NULL)
836     {
837       GNUNET_SERVER_mst_destroy (s->msg_tk);
838       s->msg_tk = NULL;
839     }
840
841     GNUNET_assert (plugin->inbound_sessions > 0);
842     plugin->inbound_sessions --;
843     GNUNET_STATISTICS_set (plugin->env->stats,
844         "# HTTP inbound sessions",
845         plugin->inbound_sessions, GNUNET_NO);
846
847     notify_session_end (s->plugin, &s->target, s);
848   }
849 }
850
851 int
852 server_disconnect (struct Session *s)
853 {
854   struct Plugin *plugin = s->plugin;
855   struct Session *t = plugin->head;
856
857   while (t != NULL)
858   {
859     if (t->inbound == GNUNET_YES)
860     {
861       if (t->server_send != NULL)
862       {
863         ((struct ServerConnection *) t->server_send)->disconnect = GNUNET_YES;
864       }
865       if (t->server_send != NULL)
866       {
867         ((struct ServerConnection *) t->server_send)->disconnect = GNUNET_YES;
868       }
869     }
870     t = t->next;
871   }
872   return GNUNET_OK;
873 }
874
875 int
876 server_send (struct Session *s, struct HTTP_Message *msg)
877 {
878   GNUNET_CONTAINER_DLL_insert (s->msg_head, s->msg_tail, msg);
879
880   if (s->addrlen == sizeof (struct IPv4HttpAddress))
881   {
882     server_reschedule (s->plugin, s->plugin->server_v4, GNUNET_YES);
883   }
884   else if (s->addrlen == sizeof (struct IPv6HttpAddress))
885   {
886     server_reschedule (s->plugin, s->plugin->server_v6, GNUNET_YES);
887   }
888   else
889     return GNUNET_SYSERR;
890   return GNUNET_OK;
891 }
892
893
894
895 /**
896  * Call MHD IPv4 to process pending requests and then go back
897  * and schedule the next run.
898  * @param cls plugin as closure
899  * @param tc task context
900  */
901 static void
902 server_v4_run (void *cls, const struct GNUNET_SCHEDULER_TaskContext *tc)
903 {
904   struct Plugin *plugin = cls;
905
906   GNUNET_assert (cls != NULL);
907
908   plugin->server_v4_task = GNUNET_SCHEDULER_NO_TASK;
909
910   if (0 != (tc->reason & GNUNET_SCHEDULER_REASON_SHUTDOWN))
911     return;
912 #if 0
913   GNUNET_log_from (GNUNET_ERROR_TYPE_DEBUG, plugin->name,
914                    "Running IPv4 server\n");
915 #endif
916   GNUNET_assert (MHD_YES == MHD_run (plugin->server_v4));
917   if (plugin->server_v4 != NULL)
918     plugin->server_v4_task =
919         server_schedule (plugin, plugin->server_v4, GNUNET_NO);
920 }
921
922
923 /**
924  * Call MHD IPv6 to process pending requests and then go back
925  * and schedule the next run.
926  * @param cls plugin as closure
927  * @param tc task context
928  */
929 static void
930 server_v6_run (void *cls, const struct GNUNET_SCHEDULER_TaskContext *tc)
931 {
932   struct Plugin *plugin = cls;
933
934   GNUNET_assert (cls != NULL);
935
936   plugin->server_v6_task = GNUNET_SCHEDULER_NO_TASK;
937
938   if (0 != (tc->reason & GNUNET_SCHEDULER_REASON_SHUTDOWN))
939     return;
940 #if 0
941   GNUNET_log_from (GNUNET_ERROR_TYPE_DEBUG, plugin->name,
942                    "Running IPv6 server\n");
943 #endif
944   GNUNET_assert (MHD_YES == MHD_run (plugin->server_v6));
945   if (plugin->server_v6 != NULL)
946     plugin->server_v6_task =
947         server_schedule (plugin, plugin->server_v6, GNUNET_NO);
948 }
949
950 /**
951  * Function that queries MHD's select sets and
952  * starts the task waiting for them.
953  * @param plugin plugin
954  * @param daemon_handle the MHD daemon handle
955  * @return gnunet task identifier
956  */
957 static GNUNET_SCHEDULER_TaskIdentifier
958 server_schedule (struct Plugin *plugin, struct MHD_Daemon *daemon_handle,
959                  int now)
960 {
961   GNUNET_SCHEDULER_TaskIdentifier ret;
962   fd_set rs;
963   fd_set ws;
964   fd_set es;
965   struct GNUNET_NETWORK_FDSet *wrs;
966   struct GNUNET_NETWORK_FDSet *wws;
967   struct GNUNET_NETWORK_FDSet *wes;
968   int max;
969   unsigned long long timeout;
970   static unsigned long long last_timeout = 0;
971   int haveto;
972
973   struct GNUNET_TIME_Relative tv;
974
975   ret = GNUNET_SCHEDULER_NO_TASK;
976   FD_ZERO (&rs);
977   FD_ZERO (&ws);
978   FD_ZERO (&es);
979   wrs = GNUNET_NETWORK_fdset_create ();
980   wes = GNUNET_NETWORK_fdset_create ();
981   wws = GNUNET_NETWORK_fdset_create ();
982   max = -1;
983   GNUNET_assert (MHD_YES == MHD_get_fdset (daemon_handle, &rs, &ws, &es, &max));
984   haveto = MHD_get_timeout (daemon_handle, &timeout);
985   if (haveto == MHD_YES)
986   {
987     if (timeout != last_timeout)
988     {
989 #if VERBOSE_SERVER
990       GNUNET_log_from (GNUNET_ERROR_TYPE_DEBUG, plugin->name,
991                        "SELECT Timeout changed from %llu to %llu\n",
992                        last_timeout, timeout);
993 #endif
994       last_timeout = timeout;
995     }
996     tv.rel_value = (uint64_t) timeout;
997   }
998   else
999     tv = GNUNET_TIME_UNIT_SECONDS;
1000   /* Force immediate run, since we have outbound data to send */
1001   if (now == GNUNET_YES)
1002     tv = GNUNET_TIME_UNIT_MILLISECONDS;
1003   GNUNET_NETWORK_fdset_copy_native (wrs, &rs, max + 1);
1004   GNUNET_NETWORK_fdset_copy_native (wws, &ws, max + 1);
1005   GNUNET_NETWORK_fdset_copy_native (wes, &es, max + 1);
1006
1007   if (daemon_handle == plugin->server_v4)
1008   {
1009     if (plugin->server_v4_task != GNUNET_SCHEDULER_NO_TASK)
1010     {
1011       GNUNET_SCHEDULER_cancel (plugin->server_v4_task);
1012       plugin->server_v4_task = GNUNET_SCHEDULER_NO_TASK;
1013     }
1014 #if 0
1015     GNUNET_log_from (GNUNET_ERROR_TYPE_DEBUG, plugin->name,
1016                      "Scheduling IPv4 server task in %llu ms\n", tv);
1017 #endif
1018     ret =
1019         GNUNET_SCHEDULER_add_select (GNUNET_SCHEDULER_PRIORITY_DEFAULT,
1020                                      tv, wrs, wws,
1021                                      &server_v4_run, plugin);
1022   }
1023   if (daemon_handle == plugin->server_v6)
1024   {
1025     if (plugin->server_v6_task != GNUNET_SCHEDULER_NO_TASK)
1026     {
1027       GNUNET_SCHEDULER_cancel (plugin->server_v6_task);
1028       plugin->server_v6_task = GNUNET_SCHEDULER_NO_TASK;
1029     }
1030 #if 0
1031     GNUNET_log_from (GNUNET_ERROR_TYPE_DEBUG, plugin->name,
1032                      "Scheduling IPv6 server task in %llu ms\n", tv);
1033 #endif
1034     ret =
1035         GNUNET_SCHEDULER_add_select (GNUNET_SCHEDULER_PRIORITY_DEFAULT,
1036                                      tv, wrs, wws,
1037                                      &server_v6_run, plugin);
1038   }
1039   GNUNET_NETWORK_fdset_destroy (wrs);
1040   GNUNET_NETWORK_fdset_destroy (wws);
1041   GNUNET_NETWORK_fdset_destroy (wes);
1042   return ret;
1043 }
1044
1045 int
1046 server_start (struct Plugin *plugin)
1047 {
1048   int res = GNUNET_OK;
1049   unsigned int timeout;
1050   p = plugin;
1051   GNUNET_assert (NULL != plugin);
1052
1053 #if BUILD_HTTPS
1054   res = server_load_certificate (plugin);
1055   if (res == GNUNET_SYSERR)
1056   {
1057     GNUNET_log_from (GNUNET_ERROR_TYPE_ERROR, plugin->name,
1058                      "Could not load or create server certificate! Loading plugin failed!\n");
1059     return res;
1060   }
1061 #endif
1062
1063
1064 #if MHD_VERSION >= 0x00090E00
1065   timeout = HTTP_NOT_VALIDATED_TIMEOUT.rel_value / 1000;
1066   GNUNET_log_from (GNUNET_ERROR_TYPE_DEBUG, plugin->name,
1067                    "MHD can set timeout per connection! Default time out %u sec.\n",
1068                    timeout);
1069 #else
1070   timeout = GNUNET_CONSTANTS_IDLE_CONNECTION_TIMEOUT.rel_value / 1000;
1071   GNUNET_log_from (GNUNET_ERROR_TYPE_WARNING, plugin->name,
1072                    "MHD cannot set timeout per connection! Default time out %u sec.\n",
1073                    timeout);
1074 #endif
1075   plugin->server_v4 = NULL;
1076   if (plugin->ipv4 == GNUNET_YES)
1077   {
1078     plugin->server_v4 = MHD_start_daemon (
1079 #if VERBOSE_SERVER
1080                                            MHD_USE_DEBUG |
1081 #endif
1082 #if BUILD_HTTPS
1083                                            MHD_USE_SSL |
1084 #endif
1085                                            MHD_NO_FLAG, plugin->port,
1086                                            &server_accept_cb, plugin,
1087                                            &server_access_cb, plugin,
1088                                            MHD_OPTION_SOCK_ADDR,
1089                                            (struct sockaddr_in *)
1090                                            plugin->server_addr_v4,
1091                                            MHD_OPTION_CONNECTION_LIMIT,
1092                                            (unsigned int)
1093                                            plugin->max_connections,
1094 #if BUILD_HTTPS
1095                                            MHD_OPTION_HTTPS_PRIORITIES,
1096                                            plugin->crypto_init,
1097                                            MHD_OPTION_HTTPS_MEM_KEY,
1098                                            plugin->key,
1099                                            MHD_OPTION_HTTPS_MEM_CERT,
1100                                            plugin->cert,
1101 #endif
1102                                            MHD_OPTION_CONNECTION_TIMEOUT,
1103                                            timeout,
1104                                            MHD_OPTION_CONNECTION_MEMORY_LIMIT,
1105                                            (size_t) (2 *
1106                                                      GNUNET_SERVER_MAX_MESSAGE_SIZE),
1107                                            MHD_OPTION_NOTIFY_COMPLETED,
1108                                            &server_disconnect_cb, plugin,
1109                                            MHD_OPTION_EXTERNAL_LOGGER,
1110                                            server_log, NULL, MHD_OPTION_END);
1111   }
1112   plugin->server_v6 = NULL;
1113   if (plugin->ipv6 == GNUNET_YES)
1114   {
1115     plugin->server_v6 = MHD_start_daemon (
1116 #if VERBOSE_SERVER
1117                                            MHD_USE_DEBUG |
1118 #endif
1119 #if BUILD_HTTPS
1120                                            MHD_USE_SSL |
1121 #endif
1122                                            MHD_USE_IPv6, plugin->port,
1123                                            &server_accept_cb, plugin,
1124                                            &server_access_cb, plugin,
1125                                            MHD_OPTION_SOCK_ADDR,
1126                                            (struct sockaddr_in6 *)
1127                                            plugin->server_addr_v6,
1128                                            MHD_OPTION_CONNECTION_LIMIT,
1129                                            (unsigned int)
1130                                            plugin->max_connections,
1131 #if BUILD_HTTPS
1132                                            MHD_OPTION_HTTPS_PRIORITIES,
1133                                            plugin->crypto_init,
1134                                            MHD_OPTION_HTTPS_MEM_KEY,
1135                                            plugin->key,
1136                                            MHD_OPTION_HTTPS_MEM_CERT,
1137                                            plugin->cert,
1138 #endif
1139                                            MHD_OPTION_CONNECTION_TIMEOUT,
1140                                            timeout,
1141                                            MHD_OPTION_CONNECTION_MEMORY_LIMIT,
1142                                            (size_t) (2 *
1143                                                      GNUNET_SERVER_MAX_MESSAGE_SIZE),
1144                                            MHD_OPTION_NOTIFY_COMPLETED,
1145                                            &server_disconnect_cb, plugin,
1146                                            MHD_OPTION_EXTERNAL_LOGGER,
1147                                            server_log, NULL, MHD_OPTION_END);
1148
1149   }
1150
1151   if ((plugin->ipv4 == GNUNET_YES) && (plugin->server_v4 == NULL))
1152   {
1153     GNUNET_log_from (GNUNET_ERROR_TYPE_ERROR, plugin->name,
1154                      "Failed to start %s IPv4 server component on port %u\n",
1155                      plugin->name, plugin->port);
1156     return GNUNET_SYSERR;
1157   }
1158   server_reschedule (plugin, plugin->server_v4, GNUNET_NO);
1159
1160   if ((plugin->ipv6 == GNUNET_YES) && (plugin->server_v6 == NULL))
1161   {
1162     GNUNET_log_from (GNUNET_ERROR_TYPE_ERROR, plugin->name,
1163                      "Failed to start %s IPv6 server component on port %u\n",
1164                      plugin->name, plugin->port);
1165     return GNUNET_SYSERR;
1166   }
1167   server_reschedule (plugin, plugin->server_v6, GNUNET_NO);
1168   GNUNET_log_from (GNUNET_ERROR_TYPE_DEBUG, plugin->name,
1169                    "%s server component started on port %u\n", plugin->name,
1170                    plugin->port);
1171   return res;
1172 }
1173
1174 void
1175 server_stop (struct Plugin *plugin)
1176 {
1177   struct Session *s = NULL;
1178   struct Session *t = NULL;
1179
1180   p = NULL;
1181
1182   struct MHD_Daemon *server_v4_tmp = plugin->server_v4;
1183
1184   plugin->server_v4 = NULL;
1185   struct MHD_Daemon *server_v6_tmp = plugin->server_v6;
1186
1187   plugin->server_v6 = NULL;
1188
1189   if (plugin->server_v4_task != GNUNET_SCHEDULER_NO_TASK)
1190   {
1191     GNUNET_SCHEDULER_cancel (plugin->server_v4_task);
1192     plugin->server_v4_task = GNUNET_SCHEDULER_NO_TASK;
1193   }
1194
1195   if (plugin->server_v6_task != GNUNET_SCHEDULER_NO_TASK)
1196   {
1197     GNUNET_SCHEDULER_cancel (plugin->server_v6_task);
1198     plugin->server_v6_task = GNUNET_SCHEDULER_NO_TASK;
1199   }
1200
1201   if (server_v6_tmp != NULL)
1202   {
1203     MHD_stop_daemon (server_v4_tmp);
1204   }
1205   if (server_v6_tmp != NULL)
1206   {
1207     MHD_stop_daemon (server_v6_tmp);
1208   }
1209
1210   /* cleaning up semi-sessions never propagated */
1211   s = plugin->server_semi_head;
1212   while (s != NULL)
1213   {
1214 #if VERBOSE_SERVER
1215     GNUNET_log_from (GNUNET_ERROR_TYPE_DEBUG, plugin->name,
1216                      "Deleting semi-sessions %p\n", s);
1217 #endif
1218     t = s->next;
1219     struct HTTP_Message *msg = s->msg_head;
1220     struct HTTP_Message *tmp = NULL;
1221
1222     while (msg != NULL)
1223     {
1224       tmp = msg->next;
1225
1226       GNUNET_CONTAINER_DLL_remove (s->msg_head, s->msg_tail, msg);
1227       if (msg->transmit_cont != NULL)
1228       {
1229         msg->transmit_cont (msg->transmit_cont_cls, &s->target, GNUNET_SYSERR);
1230       }
1231       GNUNET_free (msg);
1232       msg = tmp;
1233     }
1234
1235     delete_session (s);
1236     s = t;
1237   }
1238
1239 #if BUILD_HTTPS
1240   GNUNET_free_non_null (plugin->crypto_init);
1241   GNUNET_free_non_null (plugin->cert);
1242   GNUNET_free_non_null (plugin->key);
1243 #endif
1244
1245   GNUNET_log_from (GNUNET_ERROR_TYPE_DEBUG, plugin->name,
1246                    "%s server component stopped\n", plugin->name);
1247 }
1248
1249
1250
1251 /* end of plugin_transport_http.c */