fc0c9f3d43a6ec6f63ef1aef4dc8513d27b8fc0d
[oweals/gnunet.git] / src / transport / plugin_transport_http_server.c
1 /*
2      This file is part of GNUnet
3      (C) 2002, 2003, 2004, 2005, 2006, 2007, 2008, 2009 Christian Grothoff (and other contributing authors)
4
5      GNUnet is free software; you can redistribute it and/or modify
6      it under the terms of the GNU General Public License as published
7      by the Free Software Foundation; either version 3, or (at your
8      option) any later version.
9
10      GNUnet is distributed in the hope that it will be useful, but
11      WITHOUT ANY WARRANTY; without even the implied warranty of
12      MERCHANTABILITY or FITNESS FOR A PARTICULAR PURPOSE.  See the GNU
13      General Public License for more details.
14
15      You should have received a copy of the GNU General Public License
16      along with GNUnet; see the file COPYING.  If not, write to the
17      Free Software Foundation, Inc., 59 Temple Place - Suite 330,
18      Boston, MA 02111-1307, USA.
19 */
20
21 /**
22  * @file transport/plugin_transport_http.c
23  * @brief http transport service plugin
24  * @author Matthias Wachs
25  */
26
27 #include "plugin_transport_http.h"
28
29 #define HTTP_ERROR_RESPONSE "<!DOCTYPE HTML PUBLIC \"-//IETF//DTD HTML 2.0//EN\"><HTML><HEAD><TITLE>404 Not Found</TITLE></HEAD><BODY><H1>Not Found</H1>The requested URL was not found on this server.<P><HR><ADDRESS></ADDRESS></BODY></HTML>"
30 #define _RECEIVE 0
31 #define _SEND 1
32
33 struct ServerConnection
34 {
35   /* _RECV or _SEND */
36   int direction;
37
38   /* should this connection get disconnected? GNUNET_YES/NO  */
39   int disconnect;
40
41   struct Session *session;
42   struct MHD_Connection *mhd_conn;
43 };
44
45 /**
46  * Function that queries MHD's select sets and
47  * starts the task waiting for them.
48  * @param plugin plugin
49  * @param daemon_handle the MHD daemon handle
50  * @return gnunet task identifier
51  */
52 static GNUNET_SCHEDULER_TaskIdentifier
53 server_schedule (struct Plugin *plugin, struct MHD_Daemon *daemon_handle,
54                  int now);
55
56 static void
57 server_log (void *arg, const char *fmt, va_list ap)
58 {
59   char text[1024];
60
61   vsnprintf (text, sizeof (text), fmt, ap);
62   va_end (ap);
63   GNUNET_log (GNUNET_ERROR_TYPE_ERROR, "Server: %s\n", text);
64 }
65
66 /**
67  * Check if incoming connection is accepted.
68  * NOTE: Here every connection is accepted
69  * @param cls plugin as closure
70  * @param addr address of incoming connection
71  * @param addr_len address length of incoming connection
72  * @return MHD_YES if connection is accepted, MHD_NO if connection is rejected
73  *
74  */
75 static int
76 server_accept_cb (void *cls, const struct sockaddr *addr, socklen_t addr_len)
77 {
78   struct Plugin *plugin = cls;
79
80   if (plugin->cur_connections <= plugin->max_connections)
81     return MHD_YES;
82   else
83   {
84     GNUNET_log (GNUNET_ERROR_TYPE_ERROR,
85                 "Server: Cannot accept new connections\n");
86     return MHD_NO;
87   }
88 }
89
90
91 #if BUILD_HTTPS
92 static char *
93 server_load_file (const char *file)
94 {
95   struct GNUNET_DISK_FileHandle *gn_file;
96   struct stat fstat;
97   char *text = NULL;
98
99   if (0 != STAT (file, &fstat))
100     return NULL;
101   text = GNUNET_malloc (fstat.st_size + 1);
102   gn_file =
103       GNUNET_DISK_file_open (file, GNUNET_DISK_OPEN_READ,
104                              GNUNET_DISK_PERM_USER_READ);
105   if (gn_file == NULL)
106   {
107     GNUNET_free (text);
108     return NULL;
109   }
110   if (GNUNET_SYSERR == GNUNET_DISK_file_read (gn_file, text, fstat.st_size))
111   {
112     GNUNET_free (text);
113     GNUNET_DISK_file_close (gn_file);
114     return NULL;
115   }
116   text[fstat.st_size] = '\0';
117   GNUNET_DISK_file_close (gn_file);
118   return text;
119 }
120 #endif
121
122
123 #if BUILD_HTTPS
124
125 static int
126 server_load_certificate (struct Plugin *plugin)
127 {
128   int res = GNUNET_OK;
129
130   char *key_file;
131   char *cert_file;
132
133   /* Get crypto init string from config
134    * If not present just use default values */
135
136   GNUNET_assert (GNUNET_OK ==
137                  GNUNET_CONFIGURATION_get_value_string (plugin->env->cfg,
138                                                         plugin->name,
139                                                         "CRYPTO_INIT",
140                                                         &plugin->crypto_init));
141
142   if (GNUNET_OK !=
143       GNUNET_CONFIGURATION_get_value_filename (plugin->env->cfg, plugin->name,
144                                                "KEY_FILE", &key_file))
145   {
146     key_file = GNUNET_strdup ("https_key.key");
147   }
148
149   if (GNUNET_OK !=
150       GNUNET_CONFIGURATION_get_value_filename (plugin->env->cfg, plugin->name,
151                                                "CERT_FILE", &cert_file))
152   {
153     GNUNET_asprintf (&cert_file, "%s", "https_cert.crt");
154   }
155
156   /* read key & certificates from file */
157 #if VERBOSE_SERVER
158   GNUNET_log (GNUNET_ERROR_TYPE_DEBUG,
159               "Loading TLS certificate from key-file `%s' cert-file`%s'\n",
160               key_file, cert_file);
161 #endif
162
163   plugin->key = server_load_file (key_file);
164   plugin->cert = server_load_file (cert_file);
165
166   if ((plugin->key == NULL) || (plugin->cert == NULL))
167   {
168     struct GNUNET_OS_Process *cert_creation;
169
170     GNUNET_free_non_null (plugin->key);
171     plugin->key = NULL;
172     GNUNET_free_non_null (plugin->cert);
173     plugin->cert = NULL;
174
175 #if VERBOSE_SERVER
176     GNUNET_log (GNUNET_ERROR_TYPE_DEBUG,
177                 "No usable TLS certificate found, creating certificate\n");
178 #endif
179     errno = 0;
180     cert_creation =
181         GNUNET_OS_start_process (NULL, NULL,
182                                  "gnunet-transport-certificate-creation",
183                                  "gnunet-transport-certificate-creation",
184                                  key_file, cert_file, NULL);
185     if (cert_creation == NULL)
186     {
187       GNUNET_log_from (GNUNET_ERROR_TYPE_ERROR, plugin->name,
188                        _
189                        ("Could not create a new TLS certificate, program `gnunet-transport-certificate-creation' could not be started!\n"));
190       GNUNET_free (key_file);
191       GNUNET_free (cert_file);
192
193       GNUNET_free_non_null (plugin->key);
194       plugin->key = NULL;
195       GNUNET_free_non_null (plugin->cert);
196       plugin->cert = NULL;
197       GNUNET_free_non_null (plugin->crypto_init);
198       plugin->crypto_init = NULL;
199
200       return GNUNET_SYSERR;
201     }
202     GNUNET_assert (GNUNET_OK == GNUNET_OS_process_wait (cert_creation));
203     GNUNET_OS_process_close (cert_creation);
204
205     plugin->key = server_load_file (key_file);
206     plugin->cert = server_load_file (cert_file);
207   }
208
209   if ((plugin->key == NULL) || (plugin->cert == NULL))
210   {
211     GNUNET_log_from (GNUNET_ERROR_TYPE_ERROR, plugin->name,
212                      _
213                      ("No usable TLS certificate found and creating one failed!\n"),
214                      "transport-https");
215     GNUNET_free (key_file);
216     GNUNET_free (cert_file);
217
218     GNUNET_free_non_null (plugin->key);
219     plugin->key = NULL;
220     GNUNET_free_non_null (plugin->cert);
221     plugin->cert = NULL;
222     GNUNET_free_non_null (plugin->crypto_init);
223     plugin->crypto_init = NULL;
224
225     return GNUNET_SYSERR;
226   }
227   GNUNET_free (key_file);
228   GNUNET_free (cert_file);
229 #if DEBUG_HTTP
230   GNUNET_log (GNUNET_ERROR_TYPE_DEBUG, "TLS certificate loaded\n");
231 #endif
232
233   return res;
234 }
235 #endif
236
237
238 /**
239  * Reschedule the execution of both IPv4 and IPv6 server
240  * @param plugin the plugin
241  * @param now GNUNET_YES to schedule execution immediately, GNUNET_NO to wait
242  * until timeout
243  */
244
245 static void
246 server_reschedule (struct Plugin *plugin, int now)
247 {
248   if (plugin->server_v4 != NULL)
249   {
250     if (plugin->server_v4_task != GNUNET_SCHEDULER_NO_TASK)
251     {
252       GNUNET_SCHEDULER_cancel (plugin->server_v4_task);
253       plugin->server_v4_task = GNUNET_SCHEDULER_NO_TASK;
254     }
255     plugin->server_v4_task = server_schedule (plugin, plugin->server_v4, now);
256   }
257
258   if (plugin->server_v6 != NULL)
259   {
260     if (plugin->server_v6_task != GNUNET_SCHEDULER_NO_TASK)
261     {
262       GNUNET_SCHEDULER_cancel (plugin->server_v6_task);
263       plugin->server_v6_task = GNUNET_SCHEDULER_NO_TASK;
264     }
265     plugin->server_v6_task = server_schedule (plugin, plugin->server_v6, now);
266   }
267 }
268
269 /**
270  * Callback called by MessageStreamTokenizer when a message has arrived
271  * @param cls current session as closure
272  * @param client clien
273  * @param message the message to be forwarded to transport service
274  */
275 static void
276 server_receive_mst_cb (void *cls, void *client,
277                        const struct GNUNET_MessageHeader *message)
278 {
279   struct Session *s = cls;
280
281 #if VERBOSE_SERVER
282   struct Plugin *plugin = s->plugin;
283 #endif
284   struct GNUNET_TIME_Relative delay;
285
286   delay = http_plugin_receive (s, &s->target, message, s, s->addr, s->addrlen);
287
288   s->next_receive =
289       GNUNET_TIME_absolute_add (GNUNET_TIME_absolute_get (), delay);
290
291   if (delay.rel_value > 0)
292   {
293 #if VERBOSE_SERVER
294     GNUNET_log_from (GNUNET_ERROR_TYPE_DEBUG, plugin->name,
295                      "Server: peer `%s' address `%s' next read delayed for %llu ms\n",
296                      GNUNET_i2s (&s->target),
297                      http_plugin_address_to_string (NULL, s->addr, s->addrlen),
298                      delay);
299 #endif
300   }
301 }
302
303 /**
304  * Callback called by MHD when it needs data to send
305  * @param cls current session
306  * @param pos position in buffer
307  * @param buf the buffer to write data to
308  * @param max max number of bytes available in buffer
309  * @return bytes written to buffer
310  */
311 static ssize_t
312 server_send_callback (void *cls, uint64_t pos, char *buf, size_t max)
313 {
314   struct Session *s = cls;
315 #if VERBOSE_SERVER
316   GNUNET_log_from (GNUNET_ERROR_TYPE_ERROR, s->plugin->name,
317                    "Server: %X can sent maximum  %u \n", s, max);
318 #endif
319   struct HTTP_Message *msg;
320   int bytes_read = 0;
321
322   //static int c = 0;
323   msg = s->msg_head;
324   if (msg != NULL)
325   {
326     /* sending */
327     if ((msg->size - msg->pos) <= max)
328     {
329       memcpy (buf, &msg->buf[msg->pos], (msg->size - msg->pos));
330       bytes_read = msg->size - msg->pos;
331       msg->pos += (msg->size - msg->pos);
332     }
333     else
334     {
335       memcpy (buf, &msg->buf[msg->pos], max);
336       msg->pos += max;
337       bytes_read = max;
338     }
339
340     /* removing message */
341     if (msg->pos == msg->size)
342     {
343       if (NULL != msg->transmit_cont)
344         msg->transmit_cont (msg->transmit_cont_cls, &s->target, GNUNET_OK);
345       GNUNET_CONTAINER_DLL_remove (s->msg_head, s->msg_tail, msg);
346       GNUNET_free (msg);
347     }
348   }
349
350 #if VERBOSE_CLIENT
351   struct Plugin *plugin = s->plugin;
352   GNUNET_log_from (GNUNET_ERROR_TYPE_ERROR, plugin->name,
353                    "Server: %X: sent %u bytes\n", s, bytes_read);
354 #endif
355   return bytes_read;
356 }
357
358 static struct ServerConnection *
359 server_lookup_session (struct Plugin *plugin,
360                        struct MHD_Connection *mhd_connection, const char *url,
361                        const char *method)
362 {
363   struct Session *s = NULL;
364   struct Session *t;
365   struct ServerConnection *sc = NULL;
366   const union MHD_ConnectionInfo *conn_info;
367
368   struct IPv4HttpAddress a4;
369   struct IPv6HttpAddress a6;
370   struct sockaddr_in *s4;
371   struct sockaddr_in6 *s6;
372   void *a;
373   size_t a_len;
374   struct GNUNET_PeerIdentity target;
375   int check = GNUNET_NO;
376   uint32_t tag = 0;
377   int direction;
378
379   conn_info =
380       MHD_get_connection_info (mhd_connection,
381                                MHD_CONNECTION_INFO_CLIENT_ADDRESS);
382   if ((conn_info->client_addr->sa_family != AF_INET) &&
383       (conn_info->client_addr->sa_family != AF_INET6))
384     return MHD_NO;
385
386   if ((strlen (&url[1]) >= 105) && (url[104] == ';'))
387   {
388     char hash[104];
389     char *tagc = (char *) &url[105];
390
391     memcpy (&hash, &url[1], 103);
392     hash[103] = '\0';
393     if (GNUNET_OK ==
394         GNUNET_CRYPTO_hash_from_string ((const char *) &hash,
395                                         &(target.hashPubKey)))
396     {
397       tag = strtoul (tagc, NULL, 10);
398       if (tagc > 0)
399         check = GNUNET_YES;
400     }
401   }
402
403   if (0 == strcmp (MHD_HTTP_METHOD_PUT, method))
404     direction = _RECEIVE;
405   if (0 == strcmp (MHD_HTTP_METHOD_GET, method))
406     direction = _SEND;
407
408   if (check == GNUNET_NO)
409     goto error;
410
411   plugin->cur_connections++;
412
413 #if VERBOSE_SERVER
414   GNUNET_log_from (GNUNET_ERROR_TYPE_DEBUG, plugin->name,
415                    "Server: New inbound connection from %s with tag %u\n",
416                    GNUNET_i2s (&target), tag);
417 #endif
418   /* find duplicate session */
419
420   t = plugin->head;
421
422   while (t != NULL)
423   {
424     if ((t->inbound) &&
425         (0 == memcmp (&t->target, &target, sizeof (struct GNUNET_PeerIdentity)))
426         &&
427         /* FIXME add source address comparison */
428         (t->tag == tag))
429       break;
430     t = t->next;
431   }
432   if (t != NULL)
433   {
434 #if VERBOSE_SERVER
435     GNUNET_log_from (GNUNET_ERROR_TYPE_DEBUG, plugin->name,
436                      "Server: Duplicate session, dismissing new connection from peer `%s'\n",
437                      GNUNET_i2s (&target));
438 #endif
439     goto error;
440   }
441
442   /* find semi-session */
443   t = plugin->server_semi_head;
444
445   while (t != NULL)
446   {
447     /* FIXME add source address comparison */
448     if ((0 == memcmp (&t->target, &target, sizeof (struct GNUNET_PeerIdentity)))
449         && (t->tag == tag))
450     {
451       break;
452     }
453     t = t->next;
454   }
455
456   if (t == NULL)
457     goto create;
458
459 #if VERBOSE_SERVER
460   GNUNET_log_from (GNUNET_ERROR_TYPE_DEBUG, plugin->name,
461                    "Server: Found existing semi-session for `%s'\n",
462                    GNUNET_i2s (&target));
463 #endif
464
465   if ((direction == _SEND) && (t->server_send != NULL))
466   {
467 #if VERBOSE_SERVER
468     GNUNET_log_from (GNUNET_ERROR_TYPE_DEBUG, plugin->name,
469                      "Server: Duplicate GET session, dismissing new connection from peer `%s'\n",
470                      GNUNET_i2s (&target));
471 #endif
472     goto error;
473   }
474   else
475   {
476     s = t;
477     GNUNET_CONTAINER_DLL_remove (plugin->server_semi_head,
478                                  plugin->server_semi_tail, s);
479     GNUNET_CONTAINER_DLL_insert (plugin->head, plugin->tail, s);
480 #if VERBOSE_SERVER
481     GNUNET_log_from (GNUNET_ERROR_TYPE_DEBUG, plugin->name,
482                      "Server: Found matching semi-session, merging session for peer `%s'\n",
483                      GNUNET_i2s (&target));
484 #endif
485
486     goto found;
487   }
488   if ((direction == _RECEIVE) && (t->server_recv != NULL))
489   {
490 #if VERBOSE_SERVER
491     GNUNET_log_from (GNUNET_ERROR_TYPE_DEBUG, plugin->name,
492                      "Server: Duplicate PUT session, dismissing new connection from peer `%s'\n",
493                      GNUNET_i2s (&target));
494 #endif
495     goto error;
496   }
497   else
498   {
499     s = t;
500     GNUNET_CONTAINER_DLL_remove (plugin->server_semi_head,
501                                  plugin->server_semi_tail, s);
502     GNUNET_CONTAINER_DLL_insert (plugin->head, plugin->tail, s);
503 #if VERBOSE_SERVER
504     GNUNET_log_from (GNUNET_ERROR_TYPE_DEBUG, plugin->name,
505                      "Server: Found matching semi-session, merging session for peer `%s'\n",
506                      GNUNET_i2s (&target));
507 #endif
508     goto found;
509   }
510
511 create:
512 /* create new session */
513 #if VERBOSE_SERVER
514   GNUNET_log_from (GNUNET_ERROR_TYPE_DEBUG, plugin->name,
515                    "Server: Creating new session for peer `%s' \n",
516                    GNUNET_i2s (&target));
517 #endif
518
519   switch (conn_info->client_addr->sa_family)
520   {
521   case (AF_INET):
522     s4 = ((struct sockaddr_in *) conn_info->client_addr);
523     a4.u4_port = s4->sin_port;
524     memcpy (&a4.ipv4_addr, &s4->sin_addr, sizeof (struct in_addr));
525     a = &a4;
526     a_len = sizeof (struct IPv4HttpAddress);
527     break;
528   case (AF_INET6):
529     s6 = ((struct sockaddr_in6 *) conn_info->client_addr);
530     a6.u6_port = s6->sin6_port;
531     memcpy (&a6.ipv6_addr, &s6->sin6_addr, sizeof (struct in6_addr));
532     a = &a6;
533     a_len = sizeof (struct IPv6HttpAddress);
534     break;
535   default:
536     GNUNET_break (0);
537     goto error;
538   }
539
540   s = create_session (plugin, &target, a, a_len, NULL, NULL);
541
542   s->inbound = GNUNET_YES;
543   s->next_receive = GNUNET_TIME_absolute_get_zero ();
544   s->tag = tag;
545   if (0 == strcmp (MHD_HTTP_METHOD_PUT, method))
546     s->server_recv = s;
547   if (0 == strcmp (MHD_HTTP_METHOD_GET, method))
548     s->server_send = s;
549   GNUNET_CONTAINER_DLL_insert (plugin->server_semi_head,
550                                plugin->server_semi_tail, s);
551   goto found;
552
553 error:
554 #if VERBOSE_SERVER
555   GNUNET_log_from (GNUNET_ERROR_TYPE_DEBUG, plugin->name,
556                    "Server: Invalid connection request\n");
557 #endif
558   return NULL;
559
560 found:
561   sc = GNUNET_malloc (sizeof (struct ServerConnection));
562   sc->mhd_conn = mhd_connection;
563   sc->direction = direction;
564   sc->session = s;
565   if (direction == _SEND)
566     s->server_send = sc;
567   if (direction == _RECEIVE)
568     s->server_recv = sc;
569
570 #if MHD_VERSION >= 0x00090E00
571   int to = (GNUNET_CONSTANTS_IDLE_CONNECTION_TIMEOUT.rel_value / 1000);
572
573 #if VERBOSE_SERVER
574   GNUNET_log_from (GNUNET_ERROR_TYPE_DEBUG, plugin->name,
575                    "Server: Setting timeout for %X to %u sec.\n", sc, to);
576 #endif
577   MHD_set_connection_option (mhd_connection, MHD_CONNECTION_OPTION_TIMEOUT, to);
578   server_reschedule (plugin, GNUNET_NO);
579 #endif
580   return sc;
581 }
582
583 /**
584  * Process GET or PUT request received via MHD.  For
585  * GET, queue response that will send back our pending
586  * messages.  For PUT, process incoming data and send
587  * to GNUnet core.  In either case, check if a session
588  * already exists and create a new one if not.
589  */
590 static int
591 server_access_cb (void *cls, struct MHD_Connection *mhd_connection,
592                   const char *url, const char *method, const char *version,
593                   const char *upload_data, size_t * upload_data_size,
594                   void **httpSessionCache)
595 {
596
597   struct Plugin *plugin = cls;
598   struct ServerConnection *sc = *httpSessionCache;
599   struct Session *s = NULL;
600
601   int res = MHD_YES;
602   struct MHD_Response *response;
603
604   GNUNET_assert (cls != NULL);
605   /* new connection */
606   if (sc == NULL)
607   {
608     sc = server_lookup_session (plugin, mhd_connection, url, method);
609     if (sc != NULL)
610       (*httpSessionCache) = sc;
611     else
612     {
613       response =
614           MHD_create_response_from_data (strlen (HTTP_ERROR_RESPONSE),
615                                          HTTP_ERROR_RESPONSE, MHD_NO, MHD_NO);
616       res = MHD_queue_response (mhd_connection, MHD_HTTP_NOT_FOUND, response);
617       MHD_destroy_response (response);
618       return res;
619     }
620   }
621
622   /* existing connection */
623   sc = (*httpSessionCache);
624   s = sc->session;
625
626   /* connection is to be disconnected */
627   if (sc->disconnect == GNUNET_YES)
628   {
629     response =
630         MHD_create_response_from_data (strlen ("Thank you!"), "Thank you!",
631                                        MHD_NO, MHD_NO);
632     res = MHD_queue_response (mhd_connection, MHD_HTTP_OK, response);
633 #if VERBOSE_SERVER
634     GNUNET_log (GNUNET_ERROR_TYPE_DEBUG,
635                 "Sent HTTP/1.1: 200 OK as PUT Response\n");
636 #endif
637     MHD_destroy_response (response);
638     return MHD_YES;
639   }
640
641   GNUNET_assert (s != NULL);
642   /* Check if both directions are connected */
643   if ((sc->session->server_recv == NULL) || (sc->session->server_send == NULL))
644   {
645     return MHD_YES;
646   }
647
648   if (sc->direction == _SEND)
649   {
650     response =
651         MHD_create_response_from_callback (-1, 32 * 1024, &server_send_callback,
652                                            s, NULL);
653     res = MHD_queue_response (mhd_connection, MHD_HTTP_OK, response);
654     MHD_destroy_response (response);
655     return MHD_YES;
656   }
657   if (sc->direction == _RECEIVE)
658   {
659     if (*upload_data_size == 0)
660     {
661 #if VERBOSE_SERVER
662       GNUNET_log_from (GNUNET_ERROR_TYPE_DEBUG, plugin->name,
663                        "Server: Peer `%s' PUT on address `%s' connected\n",
664                        GNUNET_i2s (&s->target),
665                        http_plugin_address_to_string (NULL, s->addr, s->addrlen));
666 #endif
667       return MHD_YES;
668     }
669
670     /* Receiving data */
671     if ((*upload_data_size > 0))
672     {
673 #if VERBOSE_SERVER
674       GNUNET_log_from (GNUNET_ERROR_TYPE_DEBUG, plugin->name,
675                        "Server: peer `%s' PUT on address `%s' received %u bytes\n",
676                        GNUNET_i2s (&s->target),
677                        http_plugin_address_to_string (NULL,s->addr, s->addrlen),
678                        *upload_data_size);
679 #endif
680       struct GNUNET_TIME_Absolute now = GNUNET_TIME_absolute_get ();
681
682       if ((s->next_receive.abs_value <= now.abs_value))
683       {
684 #if VERBOSE_SERVER
685         GNUNET_log_from (GNUNET_ERROR_TYPE_DEBUG, plugin->name,
686                          "Server: %X: PUT with %u bytes forwarded to MST\n", s,
687                          *upload_data_size);
688 #endif
689         if (s->msg_tk == NULL)
690         {
691           s->msg_tk = GNUNET_SERVER_mst_create (&server_receive_mst_cb, s);
692         }
693         res =
694             GNUNET_SERVER_mst_receive (s->msg_tk, s, upload_data,
695                                        *upload_data_size, GNUNET_NO, GNUNET_NO);
696
697 #if MHD_VERSION >= 0x00090E00
698         int to = (GNUNET_CONSTANTS_IDLE_CONNECTION_TIMEOUT.rel_value / 1000);
699         struct ServerConnection *t = NULL;
700
701 #if VERBOSE_SERVER
702         GNUNET_log_from (GNUNET_ERROR_TYPE_DEBUG, plugin->name,
703                          "Server: Received %u bytes\n", *upload_data_size);
704 #endif
705
706         /* Setting timeouts for other connections */
707         if (s->server_recv != NULL)
708         {
709           t = s->server_recv;
710 #if VERBOSE_SERVER
711           GNUNET_log_from (GNUNET_ERROR_TYPE_DEBUG, plugin->name,
712                            "Server: Setting timeout for %X to %u sec.\n", t,
713                            to);
714 #endif
715           MHD_set_connection_option (t->mhd_conn, MHD_CONNECTION_OPTION_TIMEOUT,
716                                      to);
717         }
718         if (s->server_send != NULL)
719         {
720           t = s->server_send;
721 #if VERBOSE_SERVER
722           GNUNET_log_from (GNUNET_ERROR_TYPE_DEBUG, plugin->name,
723                            "Server: Setting timeout for %X to %u sec.\n", t,
724                            to);
725 #endif
726           MHD_set_connection_option (t->mhd_conn, MHD_CONNECTION_OPTION_TIMEOUT,
727                                      to);
728         }
729         server_reschedule (plugin, GNUNET_NO);
730 #endif
731         (*upload_data_size) = 0;
732       }
733       else
734       {
735 #if DEBUG_HTTP
736         GNUNET_log (GNUNET_ERROR_TYPE_DEBUG,
737                     "Server: %X no inbound bandwidth available! Next read was delayed by %llu ms\n",
738                     s, now.abs_value - s->next_receive.abs_value);
739 #endif
740       }
741       return MHD_YES;
742     }
743     else
744       return MHD_NO;
745   }
746   return res;
747 }
748
749 static void
750 server_disconnect_cb (void *cls, struct MHD_Connection *connection,
751                       void **httpSessionCache)
752 {
753   struct ServerConnection *sc = *httpSessionCache;
754   struct ServerConnection *tc = *httpSessionCache;
755   struct Session *s = NULL;
756   struct Session *t = NULL;
757   struct Plugin *plugin = NULL;
758
759   if (sc == NULL)
760     return;
761
762   s = sc->session;
763   plugin = s->plugin;
764   if (sc->direction == _SEND)
765   {
766 #if VERBOSE_SERVER
767     GNUNET_log_from (GNUNET_ERROR_TYPE_ERROR, plugin->name,
768                      "Server: %X peer `%s' GET on address `%s' disconnected\n",
769                      s->server_send, GNUNET_i2s (&s->target),
770                      http_plugin_address_to_string (NULL, s->addr, s->addrlen));
771 #endif
772     s->server_send = NULL;
773
774     if (s->server_recv != NULL)
775     {
776       tc = s->server_recv;
777       tc->disconnect = GNUNET_YES;
778 #if MHD_VERSION >= 0x00090E00
779       MHD_set_connection_option (sc->mhd_conn, MHD_CONNECTION_OPTION_TIMEOUT,
780                                  1);
781 #endif
782     }
783   }
784   if (sc->direction == _RECEIVE)
785   {
786 #if VERBOSE_SERVER
787     GNUNET_log_from (GNUNET_ERROR_TYPE_ERROR, plugin->name,
788                      "Server: %X peer `%s' PUT on address `%s' disconnected\n",
789                      s->server_recv, GNUNET_i2s (&s->target),
790                      http_plugin_address_to_string (NULL, s->addr, s->addrlen));
791 #endif
792     s->server_recv = NULL;
793     if (s->server_send != NULL)
794     {
795       tc = s->server_send;
796       tc->disconnect = GNUNET_YES;
797 #if MHD_VERSION >= 0x00090E00
798       MHD_set_connection_option (sc->mhd_conn, MHD_CONNECTION_OPTION_TIMEOUT,
799                                  1);
800 #endif
801     }
802     if (s->msg_tk != NULL)
803     {
804       GNUNET_SERVER_mst_destroy (s->msg_tk);
805       s->msg_tk = NULL;
806     }
807   }
808   GNUNET_free (sc);
809
810   t = plugin->server_semi_head;
811   while (t != NULL)
812   {
813     if (t == s)
814     {
815       GNUNET_CONTAINER_DLL_remove (plugin->server_semi_head,
816                                    plugin->server_semi_tail, s);
817       GNUNET_CONTAINER_DLL_insert (plugin->head, plugin->tail, s);
818       break;
819     }
820     t = t->next;
821   }
822   plugin->cur_connections--;
823
824   server_reschedule (plugin, GNUNET_NO);
825
826   if ((s->server_send == NULL) && (s->server_recv == NULL))
827   {
828 #if VERBOSE_SERVER
829     GNUNET_log_from (GNUNET_ERROR_TYPE_DEBUG, plugin->name,
830                      "Server: peer `%s' on address `%s' disconnected\n",
831                      GNUNET_i2s (&s->target),
832                      http_plugin_address_to_string (NULL, s->addr, s->addrlen));
833 #endif
834     if (s->msg_tk != NULL)
835     {
836       GNUNET_SERVER_mst_destroy (s->msg_tk);
837       s->msg_tk = NULL;
838     }
839
840     notify_session_end (s->plugin, &s->target, s);
841   }
842 }
843
844 int
845 server_disconnect (struct Session *s)
846 {
847   struct Plugin *plugin = s->plugin;
848   struct Session *t = plugin->head;
849
850   while (t != NULL)
851   {
852     if (t->inbound == GNUNET_YES)
853     {
854       if (t->server_send != NULL)
855       {
856         ((struct ServerConnection *) t->server_send)->disconnect = GNUNET_YES;
857       }
858       if (t->server_send != NULL)
859       {
860         ((struct ServerConnection *) t->server_send)->disconnect = GNUNET_YES;
861       }
862     }
863     t = t->next;
864   }
865   return GNUNET_OK;
866 }
867
868 int
869 server_send (struct Session *s, struct HTTP_Message *msg)
870 {
871   GNUNET_CONTAINER_DLL_insert (s->msg_head, s->msg_tail, msg);
872   server_reschedule (s->plugin, GNUNET_YES);
873   return GNUNET_OK;
874 }
875
876
877
878 /**
879  * Call MHD IPv4 to process pending requests and then go back
880  * and schedule the next run.
881  * @param cls plugin as closure
882  * @param tc task context
883  */
884 static void
885 server_v4_run (void *cls, const struct GNUNET_SCHEDULER_TaskContext *tc)
886 {
887   struct Plugin *plugin = cls;
888
889   GNUNET_assert (cls != NULL);
890
891   plugin->server_v4_task = GNUNET_SCHEDULER_NO_TASK;
892
893   if (0 != (tc->reason & GNUNET_SCHEDULER_REASON_SHUTDOWN))
894     return;
895 #if VERBOSE_SERVER
896   GNUNET_log_from (GNUNET_ERROR_TYPE_ERROR, plugin->name,
897                        "Running IPv4 server\n");
898 #endif
899   GNUNET_assert (MHD_YES == MHD_run (plugin->server_v4));
900   if (plugin->server_v4 != NULL)
901     plugin->server_v4_task =
902         server_schedule (plugin, plugin->server_v4, GNUNET_NO);
903 }
904
905
906 /**
907  * Call MHD IPv6 to process pending requests and then go back
908  * and schedule the next run.
909  * @param cls plugin as closure
910  * @param tc task context
911  */
912 static void
913 server_v6_run (void *cls, const struct GNUNET_SCHEDULER_TaskContext *tc)
914 {
915   struct Plugin *plugin = cls;
916
917   GNUNET_assert (cls != NULL);
918
919   plugin->server_v6_task = GNUNET_SCHEDULER_NO_TASK;
920
921   if (0 != (tc->reason & GNUNET_SCHEDULER_REASON_SHUTDOWN))
922     return;
923 #if VERBOSE_SERVER
924   GNUNET_log_from (GNUNET_ERROR_TYPE_ERROR, plugin->name,
925                        "Running IPv6 server\n");
926 #endif
927   GNUNET_assert (MHD_YES == MHD_run (plugin->server_v6));
928   if (plugin->server_v6 != NULL)
929     plugin->server_v6_task =
930         server_schedule (plugin, plugin->server_v6, GNUNET_NO);
931 }
932
933 /**
934  * Function that queries MHD's select sets and
935  * starts the task waiting for them.
936  * @param plugin plugin
937  * @param daemon_handle the MHD daemon handle
938  * @return gnunet task identifier
939  */
940 static GNUNET_SCHEDULER_TaskIdentifier
941 server_schedule (struct Plugin *plugin, struct MHD_Daemon *daemon_handle,
942                  int now)
943 {
944   GNUNET_SCHEDULER_TaskIdentifier ret;
945   fd_set rs;
946   fd_set ws;
947   fd_set es;
948   struct GNUNET_NETWORK_FDSet *wrs;
949   struct GNUNET_NETWORK_FDSet *wws;
950   struct GNUNET_NETWORK_FDSet *wes;
951   int max;
952   unsigned long long timeout;
953   static unsigned long long last_timeout = 0;
954   int haveto;
955
956   struct GNUNET_TIME_Relative tv;
957
958   ret = GNUNET_SCHEDULER_NO_TASK;
959   FD_ZERO (&rs);
960   FD_ZERO (&ws);
961   FD_ZERO (&es);
962   wrs = GNUNET_NETWORK_fdset_create ();
963   wes = GNUNET_NETWORK_fdset_create ();
964   wws = GNUNET_NETWORK_fdset_create ();
965   max = -1;
966   GNUNET_assert (MHD_YES == MHD_get_fdset (daemon_handle, &rs, &ws, &es, &max));
967   haveto = MHD_get_timeout (daemon_handle, &timeout);
968   if (haveto == MHD_YES)
969   {
970     if (timeout != last_timeout)
971     {
972 #if VERBOSE_SERVER
973       GNUNET_log_from (GNUNET_ERROR_TYPE_DEBUG, plugin->name,
974                        "SELECT Timeout changed from %llu to %llu\n",
975                        last_timeout, timeout);
976 #endif
977       last_timeout = timeout;
978     }
979     tv.rel_value = (uint64_t) timeout;
980   }
981   else
982     tv = GNUNET_TIME_UNIT_SECONDS;
983   /* Force immediate run, since we have outbound data to send */
984   if (now == GNUNET_YES)
985     tv = GNUNET_TIME_UNIT_MILLISECONDS;
986   GNUNET_NETWORK_fdset_copy_native (wrs, &rs, max + 1);
987   GNUNET_NETWORK_fdset_copy_native (wws, &ws, max + 1);
988   GNUNET_NETWORK_fdset_copy_native (wes, &es, max + 1);
989
990   if (daemon_handle == plugin->server_v4)
991   {
992     if (plugin->server_v4_task != GNUNET_SCHEDULER_NO_TASK)
993     {
994       GNUNET_SCHEDULER_cancel (plugin->server_v4_task);
995       plugin->server_v4_task = GNUNET_SCHEDULER_NO_TASK;
996     }
997 #if VERBOSE_SERVER
998   GNUNET_log_from (GNUNET_ERROR_TYPE_ERROR, plugin->name,
999                        "Scheduling IPv4 server task in %llu ms\n", tv);
1000 #endif
1001     ret =
1002         GNUNET_SCHEDULER_add_select (GNUNET_SCHEDULER_PRIORITY_DEFAULT,
1003                                      GNUNET_SCHEDULER_NO_TASK, tv, wrs, wws,
1004                                      &server_v4_run, plugin);
1005   }
1006   if (daemon_handle == plugin->server_v6)
1007   {
1008     if (plugin->server_v6_task != GNUNET_SCHEDULER_NO_TASK)
1009     {
1010       GNUNET_SCHEDULER_cancel (plugin->server_v6_task);
1011       plugin->server_v6_task = GNUNET_SCHEDULER_NO_TASK;
1012     }
1013 #if VERBOSE_SERVER
1014   GNUNET_log_from (GNUNET_ERROR_TYPE_ERROR, plugin->name,
1015                        "Scheduling IPv6 server task in %llu ms\n", tv);
1016 #endif
1017     ret =
1018         GNUNET_SCHEDULER_add_select (GNUNET_SCHEDULER_PRIORITY_DEFAULT,
1019                                      GNUNET_SCHEDULER_NO_TASK, tv, wrs, wws,
1020                                      &server_v6_run, plugin);
1021   }
1022   GNUNET_NETWORK_fdset_destroy (wrs);
1023   GNUNET_NETWORK_fdset_destroy (wws);
1024   GNUNET_NETWORK_fdset_destroy (wes);
1025   return ret;
1026 }
1027
1028 int
1029 server_start (struct Plugin *plugin)
1030 {
1031   int res = GNUNET_OK;
1032   unsigned int timeout;
1033
1034 #if BUILD_HTTPS
1035   res = server_load_certificate (plugin);
1036   if (res == GNUNET_SYSERR)
1037   {
1038     GNUNET_log_from (GNUNET_ERROR_TYPE_ERROR, plugin->name,
1039                      "Could not load or create server certificate! Loading plugin failed!\n");
1040     return res;
1041   }
1042 #endif
1043
1044
1045 #if MHD_VERSION >= 0x00090E00
1046   timeout = GNUNET_CONSTANTS_DISCONNECT_SESSION_TIMEOUT.rel_value / 1000;
1047   GNUNET_log_from (GNUNET_ERROR_TYPE_DEBUG, plugin->name,
1048                    "MHD can set timeout per connection! Default time out %u sec.\n",
1049                    timeout);
1050 #else
1051   timeout = GNUNET_CONSTANTS_IDLE_CONNECTION_TIMEOUT.rel_value / 1000;
1052   GNUNET_log_from (GNUNET_ERROR_TYPE_WARNING, plugin->name,
1053                    "MHD cannot set timeout per connection! Default time out %u sec.\n",
1054                    timeout);
1055 #endif
1056   plugin->server_v4 = NULL;
1057   if (plugin->ipv4 == GNUNET_YES)
1058   {
1059     plugin->server_v4 = MHD_start_daemon (
1060 #if VERBOSE_SERVER
1061                                            MHD_USE_DEBUG |
1062 #endif
1063 #if BUILD_HTTPS
1064                                            MHD_USE_SSL |
1065 #endif
1066                                            MHD_NO_FLAG, plugin->port,
1067                                            &server_accept_cb, plugin,
1068                                            &server_access_cb, plugin,
1069                                            MHD_OPTION_SOCK_ADDR,
1070                                            (struct sockaddr_in *)
1071                                            plugin->server_addr_v4,
1072                                            MHD_OPTION_CONNECTION_LIMIT,
1073                                            (unsigned int)
1074                                            plugin->max_connections,
1075 #if BUILD_HTTPS
1076                                            MHD_OPTION_HTTPS_PRIORITIES,
1077                                            plugin->crypto_init,
1078                                            MHD_OPTION_HTTPS_MEM_KEY,
1079                                            plugin->key,
1080                                            MHD_OPTION_HTTPS_MEM_CERT,
1081                                            plugin->cert,
1082 #endif
1083                                            MHD_OPTION_CONNECTION_TIMEOUT,
1084                                            timeout,
1085                                            MHD_OPTION_CONNECTION_MEMORY_LIMIT,
1086                                            (size_t) (2 *
1087                                                      GNUNET_SERVER_MAX_MESSAGE_SIZE),
1088                                            MHD_OPTION_NOTIFY_COMPLETED,
1089                                            &server_disconnect_cb, plugin,
1090                                            MHD_OPTION_EXTERNAL_LOGGER,
1091                                            server_log, NULL, MHD_OPTION_END);
1092   }
1093   plugin->server_v6 = NULL;
1094   if (plugin->ipv6 == GNUNET_YES)
1095   {
1096     plugin->server_v6 = MHD_start_daemon (
1097 #if VERBOSE_SERVER
1098                                            MHD_USE_DEBUG |
1099 #endif
1100 #if BUILD_HTTPS
1101                                            MHD_USE_SSL |
1102 #endif
1103                                            MHD_USE_IPv6, plugin->port,
1104                                            &server_accept_cb, plugin,
1105                                            &server_access_cb, plugin,
1106                                            MHD_OPTION_SOCK_ADDR,
1107                                            (struct sockaddr_in6 *)
1108                                            plugin->server_addr_v6,
1109                                            MHD_OPTION_CONNECTION_LIMIT,
1110                                            (unsigned int)
1111                                            plugin->max_connections,
1112 #if BUILD_HTTPS
1113                                            MHD_OPTION_HTTPS_PRIORITIES,
1114                                            plugin->crypto_init,
1115                                            MHD_OPTION_HTTPS_MEM_KEY,
1116                                            plugin->key,
1117                                            MHD_OPTION_HTTPS_MEM_CERT,
1118                                            plugin->cert,
1119 #endif
1120                                            MHD_OPTION_CONNECTION_TIMEOUT,
1121                                            timeout,
1122                                            MHD_OPTION_CONNECTION_MEMORY_LIMIT,
1123                                            (size_t) (2 *
1124                                                      GNUNET_SERVER_MAX_MESSAGE_SIZE),
1125                                            MHD_OPTION_NOTIFY_COMPLETED,
1126                                            &server_disconnect_cb, plugin,
1127                                            MHD_OPTION_EXTERNAL_LOGGER,
1128                                            server_log, NULL, MHD_OPTION_END);
1129
1130   }
1131
1132   if ((plugin->ipv4 == GNUNET_YES) && (plugin->server_v4 == NULL))
1133   {
1134     GNUNET_log_from (GNUNET_ERROR_TYPE_ERROR, plugin->name,
1135                      "Failed to start %s IPv4 server component on port %u\n",
1136                      plugin->name, plugin->port);
1137     return GNUNET_SYSERR;
1138   }
1139   if ((plugin->ipv6 == GNUNET_YES) && (plugin->server_v6 == NULL))
1140   {
1141     GNUNET_log_from (GNUNET_ERROR_TYPE_ERROR, plugin->name,
1142                      "Failed to start %s IPv6 server component on port %u\n",
1143                      plugin->name, plugin->port);
1144     return GNUNET_SYSERR;
1145   }
1146
1147   server_reschedule (plugin, GNUNET_NO);
1148
1149 #if DEBUG_HTTP
1150   GNUNET_log_from (GNUNET_ERROR_TYPE_DEBUG, plugin->name,
1151                    "%s server component started on port %u\n", plugin->name,
1152                    plugin->port);
1153 #endif
1154   return res;
1155 }
1156
1157 void
1158 server_stop (struct Plugin *plugin)
1159 {
1160   struct Session *s = NULL;
1161   struct Session *t = NULL;
1162
1163 #if VERBOSE_SERVER
1164   GNUNET_log_from (GNUNET_ERROR_TYPE_ERROR, plugin->name,
1165                    "server_stop\n");
1166 #endif
1167
1168   struct MHD_Daemon *server_v4_tmp = plugin->server_v4;
1169
1170   plugin->server_v4 = NULL;
1171   struct MHD_Daemon *server_v6_tmp = plugin->server_v6;
1172
1173   plugin->server_v6 = NULL;
1174
1175   if (plugin->server_v4_task != GNUNET_SCHEDULER_NO_TASK)
1176   {
1177     GNUNET_SCHEDULER_cancel (plugin->server_v4_task);
1178     plugin->server_v4_task = GNUNET_SCHEDULER_NO_TASK;
1179   }
1180
1181   if (plugin->server_v6_task != GNUNET_SCHEDULER_NO_TASK)
1182   {
1183     GNUNET_SCHEDULER_cancel (plugin->server_v6_task);
1184     plugin->server_v6_task = GNUNET_SCHEDULER_NO_TASK;
1185   }
1186
1187   if (server_v6_tmp != NULL)
1188   {
1189     MHD_stop_daemon (server_v4_tmp);
1190   }
1191   if (server_v6_tmp != NULL)
1192   {
1193     MHD_stop_daemon (server_v6_tmp);
1194   }
1195
1196   /* cleaning up semi-sessions never propagated */
1197   s = plugin->server_semi_head;
1198   while (s != NULL)
1199   {
1200 #if VERBOSE_SERVER
1201     GNUNET_log_from (GNUNET_ERROR_TYPE_ERROR, plugin->name,
1202                      "Deleting semi-sessions %p\n", s);
1203 #endif
1204     t = s->next;
1205     struct HTTP_Message * msg = s->msg_head;
1206     struct HTTP_Message * tmp = s->msg_head;
1207     while (msg != NULL)
1208     {
1209       tmp = msg->next;
1210
1211       GNUNET_CONTAINER_DLL_remove(s->msg_head,s->msg_tail, msg);
1212       if (msg->transmit_cont != NULL)
1213       {
1214         msg->transmit_cont(msg->transmit_cont_cls, &s->target, GNUNET_SYSERR);
1215       }
1216       GNUNET_free (msg);
1217       msg = tmp;
1218     }
1219
1220     delete_session (s);
1221     s = t;
1222   }
1223
1224 #if BUILD_HTTPS
1225   GNUNET_free_non_null (plugin->crypto_init);
1226   GNUNET_free_non_null (plugin->cert);
1227   GNUNET_free_non_null (plugin->key);
1228 #endif
1229
1230 #if DEBUG_HTTP
1231   GNUNET_log_from (GNUNET_ERROR_TYPE_DEBUG, plugin->name,
1232                    "%s server component stopped\n", plugin->name);
1233 #endif
1234 }
1235
1236
1237
1238 /* end of plugin_transport_http.c */