-doxygen, coding conventions
[oweals/gnunet.git] / src / transport / plugin_transport_http_server.c
1 /*
2      This file is part of GNUnet
3      (C) 2002-2013 Christian Grothoff (and other contributing authors)
4
5      GNUnet is free software; you can redistribute it and/or modify
6      it under the terms of the GNU General Public License as published
7      by the Free Software Foundation; either version 3, or (at your
8      option) any later version.
9
10      GNUnet is distributed in the hope that it will be useful, but
11      WITHOUT ANY WARRANTY; without even the implied warranty of
12      MERCHANTABILITY or FITNESS FOR A PARTICULAR PURPOSE.  See the GNU
13      General Public License for more details.
14
15      You should have received a copy of the GNU General Public License
16      along with GNUnet; see the file COPYING.  If not, write to the
17      Free Software Foundation, Inc., 59 Temple Place - Suite 330,
18      Boston, MA 02111-1307, USA.
19 */
20
21 /**
22  * @file transport/plugin_transport_http_server.c
23  * @brief HTTP/S server transport plugin
24  * @author Matthias Wachs
25  */
26
27 #include "platform.h"
28 #include "gnunet_util_lib.h"
29 #include "gnunet_statistics_service.h"
30 #include "gnunet_transport_plugin.h"
31 #include "gnunet_nat_lib.h"
32 #include "plugin_transport_http_common.h"
33 #include <microhttpd.h>
34
35
36
37 #if BUILD_HTTPS
38 #define PLUGIN_NAME "https_server"
39 #define LIBGNUNET_PLUGIN_TRANSPORT_INIT libgnunet_plugin_transport_https_server_init
40 #define LIBGNUNET_PLUGIN_TRANSPORT_DONE libgnunet_plugin_transport_https_server_done
41 #else
42 #define PLUGIN_NAME "http_server"
43 #define LIBGNUNET_PLUGIN_TRANSPORT_INIT libgnunet_plugin_transport_http_server_init
44 #define LIBGNUNET_PLUGIN_TRANSPORT_DONE libgnunet_plugin_transport_http_server_done
45 #endif
46
47 #define HTTP_ERROR_RESPONSE "<!DOCTYPE HTML PUBLIC \"-//IETF//DTD HTML 2.0//EN\"><HTML><HEAD><TITLE>404 Not Found</TITLE></HEAD><BODY><H1>Not Found</H1>The requested URL was not found on this server.<P><HR><ADDRESS></ADDRESS></BODY></HTML>"
48 #define _RECEIVE 0
49 #define _SEND 1
50
51
52 /* Enable output for debbuging URL's of incoming requests */
53 #define DEBUG_URL_PARSE GNUNET_NO
54
55
56 /**
57  * Encapsulation of all of the state of the plugin.
58  */
59 struct Plugin;
60
61 /**
62  * Session handle for connections.
63  */
64 struct Session
65 {
66   /**
67    * Stored in a linked list.
68    */
69   struct Session *next;
70
71   /**
72    * Stored in a linked list.
73    */
74   struct Session *prev;
75
76   /**
77    * To whom are we talking to (set to our identity
78    * if we are still waiting for the welcome message)
79    */
80   struct GNUNET_PeerIdentity target;
81
82   /**
83    * Pointer to the global plugin struct.
84    */
85   struct HTTP_Server_Plugin *plugin;
86
87   /**
88    * next pointer for double linked list
89    */
90   struct HTTP_Message *msg_head;
91
92   /**
93    * previous pointer for double linked list
94    */
95   struct HTTP_Message *msg_tail;
96
97   /**
98    * Message stream tokenizer for incoming data
99    */
100   struct GNUNET_SERVER_MessageStreamTokenizer *msg_tk;
101
102   /**
103    * Client send handle
104    */
105   struct ServerConnection *server_recv;
106
107   /**
108    * Client send handle
109    */
110   struct ServerConnection *server_send;
111
112   /**
113    * Address
114    */
115   void *addr;
116
117   /**
118    * Address length
119    */
120   size_t addrlen;
121
122   /**
123    * Unique HTTP/S connection tag for this connection
124    */
125   uint32_t tag;
126
127   /**
128    * ATS network type in NBO
129    */
130   uint32_t ats_address_network_type;
131
132   /**
133    * Was session given to transport service?
134    */
135   int session_passed;
136
137   /**
138    * Did we immediately end the session in disconnect_cb
139    */
140   int session_ended;
141
142   /**
143    * Are incoming connection established at the moment
144    */
145   int connect_in_progress;
146
147   /**
148    * Absolute time when to receive data again
149    * Used for receive throttling
150    */
151   struct GNUNET_TIME_Absolute next_receive;
152
153   /**
154    * Session timeout task
155    */
156   GNUNET_SCHEDULER_TaskIdentifier timeout_task;
157 };
158
159
160 struct ServerConnection
161 {
162   /* _RECV or _SEND */
163   int direction;
164
165   /* Should this connection get disconnected? GNUNET_YES/NO  */
166   int disconnect;
167
168   /* For PUT connections: Is this the first or last callback with size 0 */
169   int connected;
170
171   /* The session this server connection belongs to */
172   struct Session *session;
173
174   /* The MHD connection */
175   struct MHD_Connection *mhd_conn;
176
177   /* The MHD daemon */
178   struct MHD_Daemon *mhd_daemon;
179 };
180
181
182 /**
183  * Encapsulation of all of the state of the plugin.
184  */
185 struct HTTP_Server_Plugin
186 {
187   /**
188    * Our environment.
189    */
190   struct GNUNET_TRANSPORT_PluginEnvironment *env;
191
192   /**
193    * Linked list head of open sessions.
194    */
195
196   struct Session *head;
197
198   /**
199    * Linked list tail of open sessions.
200    */
201   struct Session *tail;
202
203   /**
204    * Plugin name
205    */
206   char *name;
207
208   /**
209    * Protocol
210    */
211   char *protocol;
212
213   /**
214    * My options to be included in the address
215    */
216   uint32_t options;
217
218   /**
219    * External address
220    */
221   char *external_hostname;
222
223   /**
224    * Verify external address
225    */
226   int verify_external_hostname;
227
228
229   /**
230    * Maximum number of sockets the plugin can use
231    * Each http inbound /outbound connections are two connections
232    */
233   unsigned int max_connections;
234
235   /**
236    * Current number of sockets the plugin can use
237    * Each http inbound /outbound connections are two connections
238    */
239   unsigned int cur_connections;
240
241   /**
242    * Did we immediately end the session in disconnect_cb
243    */
244   int in_shutdown;
245
246   /**
247    * Length of peer id
248    */
249   int peer_id_length;
250
251   /**
252    * External hostname the plugin can be connected to, can be different to
253    * the host's FQDN, used e.g. for reverse proxying
254    */
255   struct HttpAddress *ext_addr;
256
257   /**
258    * Notify transport only about external address
259    */
260   unsigned int external_only;
261
262   /**
263    * External address length
264    */
265   size_t ext_addr_len;
266
267   /**
268    * use IPv6
269    */
270   uint16_t use_ipv6;
271
272   /**
273    * use IPv4
274    */
275   uint16_t use_ipv4;
276
277   /**
278    * Port used
279    */
280   uint16_t port;
281
282   /**
283    * Task calling transport service about external address
284    */
285   GNUNET_SCHEDULER_TaskIdentifier notify_ext_task;
286
287   /**
288    * NAT handle & address management
289    */
290   struct GNUNET_NAT_Handle *nat;
291
292   /**
293    * List of own addresses
294    */
295
296   /**
297    * IPv4 addresses DLL head
298    */
299   struct HttpAddressWrapper *addr_head;
300
301   /**
302    * IPv4 addresses DLL tail
303    */
304   struct HttpAddressWrapper *addr_tail;
305
306   /**
307    * IPv4 server socket to bind to
308    */
309   struct sockaddr_in *server_addr_v4;
310
311   /**
312    * IPv6 server socket to bind to
313    */
314   struct sockaddr_in6 *server_addr_v6;
315
316   /**
317    * MHD IPv4 task
318    */
319   GNUNET_SCHEDULER_TaskIdentifier server_v4_task;
320
321   /**
322    * MHD IPv6 task
323    */
324   GNUNET_SCHEDULER_TaskIdentifier server_v6_task;
325
326   /**
327    * The IPv4 server is scheduled to run asap
328    */
329   int server_v4_immediately;
330
331   /**
332    * The IPv6 server is scheduled to run asap
333    */
334   int server_v6_immediately;
335
336   /**
337    * MHD IPv4 daemon
338    */
339   struct MHD_Daemon *server_v4;
340
341   /**
342    * MHD IPv4 daemon
343    */
344   struct MHD_Daemon *server_v6;
345
346 #if BUILD_HTTPS
347   /**
348    * Crypto related
349    *
350    * Example:
351    *
352    * Use RC4-128 instead of AES:
353    * NONE:+VERS-TLS1.0:+ARCFOUR-128:+SHA1:+RSA:+COMP-NULL
354    *
355    */
356   char *crypto_init;
357
358   /**
359    * TLS key
360    */
361   char *key;
362
363   /**
364    * TLS certificate
365    */
366   char *cert;
367 #endif
368
369 };
370
371
372 /**
373  * Wrapper to manage addresses
374  */
375 struct HttpAddressWrapper
376 {
377   /**
378    * Linked list next
379    */
380   struct HttpAddressWrapper *next;
381
382   /**
383    * Linked list previous
384    */
385   struct HttpAddressWrapper *prev;
386
387   struct HttpAddress *address;
388
389   size_t addrlen;
390 };
391
392
393 /**
394  *  Message to send using http
395  */
396 struct HTTP_Message
397 {
398   /**
399    * next pointer for double linked list
400    */
401   struct HTTP_Message *next;
402
403   /**
404    * previous pointer for double linked list
405    */
406   struct HTTP_Message *prev;
407
408   /**
409    * buffer containing data to send
410    */
411   char *buf;
412
413   /**
414    * amount of data already sent
415    */
416   size_t pos;
417
418   /**
419    * buffer length
420    */
421   size_t size;
422
423   /**
424    * HTTP/S specific overhead
425    */
426   size_t overhead;
427
428   /**
429    * Continuation function to call once the transmission buffer
430    * has again space available.  NULL if there is no
431    * continuation to call.
432    */
433   GNUNET_TRANSPORT_TransmitContinuation transmit_cont;
434
435   /**
436    * Closure for transmit_cont.
437    */
438   void *transmit_cont_cls;
439 };
440
441
442 /**
443  * The http_server plugin handle
444  */
445 static struct HTTP_Server_Plugin * p;
446
447
448 /**
449  * Start session timeout for session s
450  * @param s the session
451  */
452 static void
453 server_start_session_timeout (struct Session *s);
454
455
456 /**
457  * Increment session timeout due to activity for session s
458  * @param s the session
459  */
460 static void
461 server_reschedule_session_timeout (struct Session *s);
462
463
464 /**
465  * Cancel timeout for session s
466  * @param s the session
467  */
468 static void
469 server_stop_session_timeout (struct Session *s);
470
471
472 /**
473  * Disconnect a session  s
474  * @param s the session
475  */
476 static int
477 server_disconnect (struct Session *s);
478
479
480 /**
481  * Does session s exist?
482  *
483  * @param plugin the plugin handle
484  * @param s the session
485  * @return GNUNET_YES on success, GNUNET_NO on error
486  */
487 static int
488 server_exist_session (struct HTTP_Server_Plugin *plugin, struct Session *s);
489
490
491 /**
492  * Reschedule the execution of both IPv4 and IPv6 server
493  * @param plugin the plugin
494  * @param server which server to schedule v4 or v6?
495  * @param now GNUNET_YES to schedule execution immediately, GNUNET_NO to wait
496  * until timeout
497  */
498 static void
499 server_reschedule (struct HTTP_Server_Plugin *plugin, struct MHD_Daemon *server,
500                                    int now);
501
502
503 /**
504  * Function that can be used by the transport service to transmit
505  * a message using the plugin.   Note that in the case of a
506  * peer disconnecting, the continuation MUST be called
507  * prior to the disconnect notification itself.  This function
508  * will be called with this peer's HELLO message to initiate
509  * a fresh connection to another peer.
510  *
511  * @param cls closure
512  * @param session which session must be used
513  * @param msgbuf the message to transmit
514  * @param msgbuf_size number of bytes in 'msgbuf'
515  * @param priority how important is the message (most plugins will
516  *                 ignore message priority and just FIFO)
517  * @param to how long to wait at most for the transmission (does not
518  *                require plugins to discard the message after the timeout,
519  *                just advisory for the desired delay; most plugins will ignore
520  *                this as well)
521  * @param cont continuation to call once the message has
522  *        been transmitted (or if the transport is ready
523  *        for the next transmission call; or if the
524  *        peer disconnected...); can be NULL
525  * @param cont_cls closure for cont
526  * @return number of bytes used (on the physical network, with overheads);
527  *         -1 on hard errors (i.e. address invalid); 0 is a legal value
528  *         and does NOT mean that the message was not transmitted (DV)
529  */
530 static ssize_t
531 http_server_plugin_send (void *cls,
532                   struct Session *session,
533                   const char *msgbuf, size_t msgbuf_size,
534                   unsigned int priority,
535                   struct GNUNET_TIME_Relative to,
536                   GNUNET_TRANSPORT_TransmitContinuation cont, void *cont_cls)
537 {
538   struct HTTP_Server_Plugin *plugin = cls;
539   struct HTTP_Message *msg;
540   int bytes_sent = 0;
541   char *stat_txt;
542
543   GNUNET_assert (plugin != NULL);
544   GNUNET_assert (session != NULL);
545
546   if (GNUNET_NO == server_exist_session (plugin, session))
547   {
548       GNUNET_break (0);
549       return GNUNET_SYSERR;
550   }
551   if (NULL == session->server_send)
552   {
553      if (GNUNET_NO == session->connect_in_progress)
554      {
555       GNUNET_log_from (GNUNET_ERROR_TYPE_ERROR, session->plugin->name,
556                        "Session %p/connection %p: Sending message with %u bytes to peer `%s' with FAILED\n",
557                        session, session->server_send,
558                        msgbuf_size, GNUNET_i2s (&session->target));
559       GNUNET_break (0);
560       return GNUNET_SYSERR;
561      }
562   }
563   else
564   {
565       if (GNUNET_YES == session->server_send->disconnect)
566         return GNUNET_SYSERR;
567   }
568
569
570   GNUNET_log_from (GNUNET_ERROR_TYPE_DEBUG, session->plugin->name,
571                    "Session %p/connection %p: Sending message with %u to peer `%s' with \n",
572                    session, session->server_send,
573                    msgbuf_size, GNUNET_i2s (&session->target));
574
575   /* create new message and schedule */
576   bytes_sent = sizeof (struct HTTP_Message) + msgbuf_size;
577   msg = GNUNET_malloc (bytes_sent);
578   msg->next = NULL;
579   msg->size = msgbuf_size;
580   msg->pos = 0;
581   msg->buf = (char *) &msg[1];
582   msg->transmit_cont = cont;
583   msg->transmit_cont_cls = cont_cls;
584   memcpy (msg->buf, msgbuf, msgbuf_size);
585
586   GNUNET_CONTAINER_DLL_insert_tail (session->msg_head, session->msg_tail, msg);
587
588   GNUNET_asprintf (&stat_txt, "# bytes currently in %s_server buffers", plugin->protocol);
589   GNUNET_STATISTICS_update (plugin->env->stats,
590                             stat_txt, msgbuf_size, GNUNET_NO);
591   GNUNET_free (stat_txt);
592
593   if (NULL != session->server_send)
594   {
595       server_reschedule (session->plugin,
596                          session->server_send->mhd_daemon,
597                          GNUNET_YES);
598       server_reschedule_session_timeout (session);
599   }
600   return bytes_sent;
601 }
602
603
604
605 /**
606  * Function that can be used to force the plugin to disconnect
607  * from the given peer and cancel all previous transmissions
608  * (and their continuationc).
609  *
610  * @param cls closure
611  * @param target peer from which to disconnect
612  */
613 static void
614 http_server_plugin_disconnect (void *cls, const struct GNUNET_PeerIdentity *target)
615 {
616   struct HTTP_Server_Plugin *plugin = cls;
617   struct Session *next = NULL;
618   struct Session *pos = NULL;
619
620   GNUNET_log_from (GNUNET_ERROR_TYPE_DEBUG, plugin->name,
621                    "Transport tells me to disconnect `%s'\n",
622                    GNUNET_i2s (target));
623
624   next = plugin->head;
625   while (NULL != (pos = next))
626   {
627     next = pos->next;
628     if (0 == memcmp (target, &pos->target, sizeof (struct GNUNET_PeerIdentity)))
629     {
630       GNUNET_log_from (GNUNET_ERROR_TYPE_DEBUG, plugin->name,
631                        "Disconnecting session %p to `%s'\n",
632                        pos, GNUNET_i2s (target));
633       server_disconnect (pos);
634     }
635   }
636
637 }
638
639
640 /**
641  * Another peer has suggested an address for this
642  * peer and transport plugin.  Check that this could be a valid
643  * address.  If so, consider adding it to the list
644  * of addresses.
645  *
646  * @param cls closure
647  * @param addr pointer to the address
648  * @param addrlen length of addr
649  * @return GNUNET_OK if this is a plausible address for this peer
650  *         and transport
651  */
652 static int
653 http_server_plugin_address_suggested (void *cls, const void *addr,
654                 size_t addrlen)
655 {
656         struct HttpAddressWrapper *next;
657         struct HttpAddressWrapper *pos;
658         const struct HttpAddress *haddr = addr;
659
660         if ((NULL != p->ext_addr) &&
661                  GNUNET_YES == (http_common_cmp_addresses (addr, addrlen,
662                                                                  p->ext_addr, p->ext_addr_len)))
663         {
664                 /* Checking HTTP_OPTIONS_VERIFY_CERTIFICATE option for external hostname */
665                 if ((ntohl(haddr->options) & HTTP_OPTIONS_VERIFY_CERTIFICATE) !=
666                                 (p->options & HTTP_OPTIONS_VERIFY_CERTIFICATE))
667                         return GNUNET_NO; /* VERIFY option not set as required! */
668                 return GNUNET_OK;
669         }
670
671         next  = p->addr_head;
672         while (NULL != (pos = next))
673         {
674                 next = pos->next;
675                 if (GNUNET_YES == (http_common_cmp_addresses(addr,
676                                                                                                                                                                                                  addrlen,
677                                                                                                                                                                                                  pos->address,
678                                                                                                                                                                                                  pos->addrlen)))
679                         return GNUNET_OK;
680
681         }
682         return GNUNET_NO;
683 }
684
685
686 /**
687  * Creates a new outbound session the transport
688  * service will use to send data to the peer
689  *
690  * Since HTTP/S server cannot create sessions, always return NULL
691  *
692  * @param cls the plugin
693  * @param address the address
694  * @return always NULL
695  */
696 static struct Session *
697 http_server_plugin_get_session (void *cls,
698                                 const struct GNUNET_HELLO_Address *address)
699 {
700   return NULL;
701 }
702
703
704 /**
705  * Deleting the session
706  * Must not be used afterwards
707  *
708  * @param s the session to delete
709  */
710 static void
711 server_delete_session (struct Session *s)
712 {
713   struct HTTP_Server_Plugin *plugin = s->plugin;
714   server_stop_session_timeout(s);
715
716   GNUNET_CONTAINER_DLL_remove (plugin->head, plugin->tail, s);
717   struct HTTP_Message *msg = s->msg_head;
718   struct HTTP_Message *tmp = NULL;
719
720   while (msg != NULL)
721   {
722     tmp = msg->next;
723
724     GNUNET_CONTAINER_DLL_remove (s->msg_head, s->msg_tail, msg);
725     if (msg->transmit_cont != NULL)
726     {
727       msg->transmit_cont (msg->transmit_cont_cls, &s->target, GNUNET_SYSERR,
728                           msg->size, msg->pos + msg->overhead);
729     }
730     GNUNET_free (msg);
731     msg = tmp;
732   }
733
734   if (s->msg_tk != NULL)
735   {
736     GNUNET_SERVER_mst_destroy (s->msg_tk);
737     s->msg_tk = NULL;
738   }
739   GNUNET_free (s->addr);
740   GNUNET_free_non_null (s->server_recv);
741   GNUNET_free_non_null (s->server_send);
742   GNUNET_log_from (GNUNET_ERROR_TYPE_DEBUG, plugin->name,
743                    "Session %p destroyed\n", s);
744   GNUNET_free (s);
745 }
746
747
748 /**
749 * Cancel timeout for session s
750 *
751 * @param s the session
752 */
753 static void
754 server_stop_session_timeout (struct Session *s)
755 {
756  GNUNET_assert (NULL != s);
757
758  if (GNUNET_SCHEDULER_NO_TASK != s->timeout_task)
759  {
760    GNUNET_SCHEDULER_cancel (s->timeout_task);
761    s->timeout_task = GNUNET_SCHEDULER_NO_TASK;
762    GNUNET_log (TIMEOUT_LOG, "Timeout stopped for session %p\n", s);
763  }
764 }
765
766
767 /**
768  * Function that queries MHD's select sets and
769  * starts the task waiting for them.
770  * @param plugin plugin
771  * @param daemon_handle the MHD daemon handle
772  * @param now schedule immediately
773  * @return gnunet task identifier
774  */
775 static GNUNET_SCHEDULER_TaskIdentifier
776 server_schedule (struct HTTP_Server_Plugin *plugin,
777                                  struct MHD_Daemon *daemon_handle,
778                  int now);
779
780
781 /**
782  * Reschedule the execution of both IPv4 and IPv6 server
783  * @param plugin the plugin
784  * @param server which server to schedule v4 or v6?
785  * @param now GNUNET_YES to schedule execution immediately, GNUNET_NO to wait
786  * until timeout
787  */
788 static void
789 server_reschedule (struct HTTP_Server_Plugin *plugin, struct MHD_Daemon *server,
790                                    int now)
791 {
792   if ((server == plugin->server_v4) && (plugin->server_v4 != NULL))
793   {
794     if (GNUNET_YES == plugin->server_v4_immediately)
795       return; /* No rescheduling, server will run asap */
796
797     if (GNUNET_YES == now)
798       plugin->server_v4_immediately = GNUNET_YES;
799
800     if (plugin->server_v4_task != GNUNET_SCHEDULER_NO_TASK)
801     {
802       GNUNET_SCHEDULER_cancel (plugin->server_v4_task);
803       plugin->server_v4_task = GNUNET_SCHEDULER_NO_TASK;
804     }
805     plugin->server_v4_task = server_schedule (plugin, plugin->server_v4, now);
806   }
807
808   if ((server == plugin->server_v6) && (plugin->server_v6 != NULL))
809   {
810     if (GNUNET_YES == plugin->server_v6_immediately)
811       return; /* No rescheduling, server will run asap */
812
813     if (GNUNET_YES == now)
814       plugin->server_v6_immediately = GNUNET_YES;
815
816     if (plugin->server_v6_task != GNUNET_SCHEDULER_NO_TASK)
817     {
818       GNUNET_SCHEDULER_cancel (plugin->server_v6_task);
819       plugin->server_v6_task = GNUNET_SCHEDULER_NO_TASK;
820     }
821     plugin->server_v6_task = server_schedule (plugin, plugin->server_v6, now);
822   }
823 }
824
825
826 /**
827  * Disconnect session s
828  *
829  * @param s the session
830  * @return GNUNET_OK on success
831  */
832 static int
833 server_disconnect (struct Session *s)
834 {
835   struct ServerConnection * send = NULL;
836   struct ServerConnection * recv = NULL;
837
838   if (GNUNET_NO == server_exist_session (p, s))
839   {
840       GNUNET_break (0);
841       return GNUNET_SYSERR;
842   }
843
844   send = (struct ServerConnection *) s->server_send;
845   if (s->server_send != NULL)
846   {
847     GNUNET_log_from (GNUNET_ERROR_TYPE_DEBUG, s->plugin->name,
848                      "Server: %p / %p Terminating inbound PUT session to peer `%s'\n",
849                      s, s->server_send, GNUNET_i2s (&s->target));
850
851     send->disconnect = GNUNET_YES;
852 #if MHD_VERSION >= 0x00090E00
853       MHD_set_connection_option (send->mhd_conn, MHD_CONNECTION_OPTION_TIMEOUT,
854                                  1);
855 #endif
856     server_reschedule (s->plugin, send->mhd_daemon, GNUNET_YES);
857   }
858
859   recv = (struct ServerConnection *) s->server_recv;
860   if (recv != NULL)
861   {
862     GNUNET_log_from (GNUNET_ERROR_TYPE_DEBUG, s->plugin->name,
863                      "Server: %p / %p Terminating inbound GET session to peer `%s'\n",
864                      s, s->server_recv, GNUNET_i2s (&s->target));
865
866     recv->disconnect = GNUNET_YES;
867 #if MHD_VERSION >= 0x00090E00
868       MHD_set_connection_option (recv->mhd_conn, MHD_CONNECTION_OPTION_TIMEOUT,
869                                  1);
870 #endif
871     server_reschedule (s->plugin, recv->mhd_daemon, GNUNET_YES);
872   }
873   return GNUNET_OK;
874 }
875
876
877
878 /**
879  * Tell MHD that the connection should timeout after @a to seconds.
880  *
881  * @param plugin our plugin
882  * @param s session for which the timeout changes
883  * @param to timeout in seconds
884  */
885 static void
886 server_mhd_connection_timeout (struct HTTP_Server_Plugin *plugin, 
887                                struct Session *s,
888                                unsigned int to)
889 {
890 #if MHD_VERSION >= 0x00090E00
891     /* Setting timeouts for other connections */
892   if (NULL != s->server_recv)
893   {
894     GNUNET_log_from (GNUNET_ERROR_TYPE_DEBUG, plugin->name,
895                      "Setting timeout for %p to %u sec.\n",
896                      s->server_recv, to);
897     MHD_set_connection_option (s->server_recv->mhd_conn,
898                                MHD_CONNECTION_OPTION_TIMEOUT,
899                                to);
900     server_reschedule (plugin, s->server_recv->mhd_daemon, GNUNET_NO);
901   }
902   if (NULL != s->server_send)
903   {
904     GNUNET_log_from (GNUNET_ERROR_TYPE_DEBUG, plugin->name,
905                      "Setting timeout for %p to %u sec.\n",
906                      s->server_send, to);
907     MHD_set_connection_option (s->server_send->mhd_conn,
908                                MHD_CONNECTION_OPTION_TIMEOUT,
909                                to);
910     server_reschedule (plugin, s->server_send->mhd_daemon, GNUNET_NO);
911   }
912 #endif
913 }
914
915 /**
916  * Parse incoming URL for tag and target
917  *
918  * @param plugin plugin
919  * @param url incoming url
920  * @param target where to store the target
921  * @param tag where to store the tag
922  * @return GNUNET_OK on success, GNUNET_SYSERR on error
923  */
924
925 static int
926 server_parse_url (struct HTTP_Server_Plugin *plugin,
927                   const char *url,
928                   struct GNUNET_PeerIdentity *target, 
929                   uint32_t *tag)
930 {
931   char * tag_start = NULL;
932   char * tag_end = NULL;
933   char * target_start = NULL;
934   char * separator = NULL;
935   unsigned int hash_length;
936   unsigned long int ctag;
937
938   /* URL parsing
939    * URL is valid if it is in the form [prefix with (multiple) '/'][peerid[103];tag]*/
940
941   if (NULL == url)
942   {
943       GNUNET_break (0);
944       return GNUNET_SYSERR;
945   }
946   /* convert tag */
947
948   /* find separator */
949   separator = strrchr (url, ';');
950
951   if (NULL == separator)
952   {
953       if (DEBUG_URL_PARSE) GNUNET_break (0);
954       return GNUNET_SYSERR;
955   }
956   tag_start = separator + 1;
957
958   if (strlen (tag_start) == 0)
959   {
960     /* No tag after separator */
961     if (DEBUG_URL_PARSE) GNUNET_break (0);
962     return GNUNET_SYSERR;
963   }
964   ctag = strtoul (tag_start, &tag_end, 10);
965   if (ctag == 0)
966   {
967     /* tag == 0 , invalid */
968     if (DEBUG_URL_PARSE) GNUNET_break (0);
969     return GNUNET_SYSERR;
970   }
971   if ((ctag == ULONG_MAX) && (ERANGE == errno))
972   {
973     /* out of range: > ULONG_MAX */
974     if (DEBUG_URL_PARSE) GNUNET_break (0);
975     return GNUNET_SYSERR;
976   }
977   if (ctag > UINT32_MAX)
978   {
979     /* out of range: > UINT32_MAX */
980     if (DEBUG_URL_PARSE) GNUNET_break (0);
981     return GNUNET_SYSERR;
982   }
983   (*tag) = (uint32_t) ctag;
984   if (NULL == tag_end)
985   {
986       /* no char after tag */
987       if (DEBUG_URL_PARSE) GNUNET_break (0);
988       return GNUNET_SYSERR;
989   }
990   if (url[strlen(url)] != tag_end[0])
991   {
992       /* there are more not converted chars after tag */
993       if (DEBUG_URL_PARSE) GNUNET_break (0);
994       return GNUNET_SYSERR;
995   }
996   if (DEBUG_URL_PARSE)
997     GNUNET_log_from (GNUNET_ERROR_TYPE_DEBUG, plugin->name,
998        "Found tag `%u' in url\n", (*tag));
999
1000   /* convert peer id */
1001   target_start = strrchr (url, '/');
1002   if (NULL == target_start)
1003   {
1004       /* no leading '/' */
1005       target_start = (char *) url;
1006   }
1007   target_start++;
1008   hash_length = separator - target_start;
1009   if (hash_length != plugin->peer_id_length)
1010   {
1011       /* no char after tag */
1012       if (DEBUG_URL_PARSE) GNUNET_break (0);
1013       return GNUNET_SYSERR;
1014   }
1015   if (GNUNET_OK != 
1016       GNUNET_CRYPTO_ecc_public_sign_key_from_string (target_start,
1017                                                      hash_length,
1018                                                      &target->public_key))
1019     {
1020       /* hash conversion failed */
1021       if (DEBUG_URL_PARSE) GNUNET_break (0);
1022       return GNUNET_SYSERR;
1023   }
1024   GNUNET_log_from (GNUNET_ERROR_TYPE_DEBUG, 
1025                    plugin->name,
1026                    "Found target `%s' in URL\n", 
1027                    GNUNET_i2s_full (target));
1028   return GNUNET_OK;
1029 }
1030
1031
1032 /**
1033  * Lookup a mhd connection and create one if none is found
1034  *
1035  * @param plugin the plugin handle
1036  * @param mhd_connection the incoming mhd_connection
1037  * @param url incoming requested URL
1038  * @param method PUT or GET
1039  * @return the server connecetion
1040  */
1041 static struct ServerConnection *
1042 server_lookup_connection (struct HTTP_Server_Plugin *plugin,
1043                        struct MHD_Connection *mhd_connection, const char *url,
1044                        const char *method)
1045 {
1046   struct Session *s = NULL;
1047   struct ServerConnection *sc = NULL;
1048   const union MHD_ConnectionInfo *conn_info;
1049   struct GNUNET_ATS_Information ats;
1050   struct HttpAddress *addr;
1051   size_t addr_len;
1052   struct GNUNET_PeerIdentity target;
1053   uint32_t tag = 0;
1054   int direction = GNUNET_SYSERR;
1055   unsigned int to;
1056
1057   conn_info = MHD_get_connection_info (mhd_connection,
1058                                        MHD_CONNECTION_INFO_CLIENT_ADDRESS);
1059   if ((conn_info->client_addr->sa_family != AF_INET) &&
1060       (conn_info->client_addr->sa_family != AF_INET6))
1061     return NULL;
1062   GNUNET_log_from (GNUNET_ERROR_TYPE_DEBUG, plugin->name,
1063                    "New %s connection from %s\n", method, url);
1064
1065   if (GNUNET_SYSERR == server_parse_url (plugin, url, &target, &tag))
1066   {
1067       GNUNET_log_from (GNUNET_ERROR_TYPE_DEBUG, plugin->name,
1068                        "Invalid url %s\n", url);
1069       return NULL;
1070   }
1071   if (0 == strcmp (MHD_HTTP_METHOD_PUT, method))
1072     direction = _RECEIVE;
1073   else if (0 == strcmp (MHD_HTTP_METHOD_GET, method))
1074     direction = _SEND;
1075   else
1076   {
1077     GNUNET_log_from (GNUNET_ERROR_TYPE_DEBUG, plugin->name,
1078                      "Invalid method %s connection from %s\n", method, url);
1079     return NULL;
1080   }
1081
1082   plugin->cur_connections++;
1083   GNUNET_log_from (GNUNET_ERROR_TYPE_DEBUG, plugin->name,
1084                    "New %s connection from %s with tag %u (%u of %u)\n",
1085                    method,
1086                    GNUNET_i2s (&target), tag,
1087                    plugin->cur_connections, plugin->max_connections);
1088   /* find duplicate session */
1089   s = plugin->head;
1090   while (s != NULL)
1091   {
1092     if ((0 == memcmp (&s->target, &target, sizeof (struct GNUNET_PeerIdentity))) &&
1093         (s->tag == tag))
1094       break;
1095     s = s->next;
1096   }
1097   if (s != NULL)
1098   {
1099     if ((_RECEIVE == direction) && (NULL != s->server_recv))
1100     {
1101       GNUNET_log_from (GNUNET_ERROR_TYPE_DEBUG, plugin->name,
1102                        "Duplicate PUT connection from `%s' tag %u, dismissing new connection\n",
1103                        GNUNET_i2s (&target),
1104                        tag);
1105       return NULL;
1106
1107     }
1108     if ((_SEND == direction) && (NULL != s->server_send))
1109     {
1110         GNUNET_log_from (GNUNET_ERROR_TYPE_DEBUG, plugin->name,
1111                          "Duplicate GET connection from `%s' tag %u, dismissing new connection\n",
1112                          GNUNET_i2s (&target),
1113                          tag);
1114         return NULL;
1115     }
1116   }
1117   else
1118   {
1119     /* create new session */
1120     switch (conn_info->client_addr->sa_family)
1121     {
1122     case (AF_INET):
1123       addr = http_common_address_from_socket (plugin->protocol, conn_info->client_addr, sizeof (struct sockaddr_in));
1124       addr_len = http_common_address_get_size (addr);
1125       ats = plugin->env->get_address_type (plugin->env->cls, conn_info->client_addr, sizeof (struct sockaddr_in));
1126       break;
1127     case (AF_INET6):
1128       addr = http_common_address_from_socket (plugin->protocol, conn_info->client_addr, sizeof (struct sockaddr_in6));
1129       addr_len = http_common_address_get_size (addr);
1130       ats = plugin->env->get_address_type (plugin->env->cls, conn_info->client_addr, sizeof (struct sockaddr_in6));
1131       break;
1132     default:
1133         /* external host name */
1134       ats.type = htonl (GNUNET_ATS_NETWORK_TYPE);
1135       ats.type = htonl (GNUNET_ATS_NET_WAN);
1136       return NULL;
1137     }
1138
1139     s = GNUNET_malloc (sizeof (struct Session));
1140     memcpy (&s->target, &target, sizeof (struct GNUNET_PeerIdentity));
1141     s->plugin = plugin;
1142     s->addr = addr;
1143     s->addrlen = addr_len;
1144     s->ats_address_network_type = ats.value;
1145     s->next_receive = GNUNET_TIME_UNIT_ZERO_ABS;
1146     s->tag = tag;
1147     s->server_recv = NULL;
1148     s->server_send = NULL;
1149     s->session_passed = GNUNET_NO;
1150     s->session_ended = GNUNET_NO;
1151     s->connect_in_progress = GNUNET_YES;
1152     server_start_session_timeout(s);
1153     GNUNET_CONTAINER_DLL_insert (plugin->head, plugin->tail, s);
1154
1155     GNUNET_log_from (GNUNET_ERROR_TYPE_DEBUG, plugin->name,
1156                      "Creating new session %p for peer `%s' connecting from `%s'\n",
1157                      s, GNUNET_i2s (&target),
1158                      http_common_plugin_address_to_string (NULL, p->protocol, addr, addr_len));
1159   }
1160   sc = GNUNET_malloc (sizeof (struct ServerConnection));
1161   if (conn_info->client_addr->sa_family == AF_INET)
1162     sc->mhd_daemon = plugin->server_v4;
1163   if (conn_info->client_addr->sa_family == AF_INET6)
1164     sc->mhd_daemon = plugin->server_v6;
1165   sc->mhd_conn = mhd_connection;
1166   sc->direction = direction;
1167   sc->connected = GNUNET_NO;
1168   sc->session = s;
1169   if (direction == _SEND)
1170     s->server_send = sc;
1171   if (direction == _RECEIVE)
1172     s->server_recv = sc;
1173
1174   if ((NULL != s->server_send) && (NULL != s->server_recv))
1175   {
1176     s->connect_in_progress = GNUNET_NO; /* PUT and GET are connected */
1177     plugin->env->session_start (NULL, &s->target, PLUGIN_NAME, NULL, 0 ,s, NULL, 0);
1178   }
1179
1180 #if MHD_VERSION >= 0x00090E00
1181   if ((NULL == s->server_recv) || (NULL == s->server_send))
1182   {
1183     to = (HTTP_SERVER_NOT_VALIDATED_TIMEOUT.rel_value_us / 1000LL / 1000LL);
1184     MHD_set_connection_option (mhd_connection, 
1185                                MHD_CONNECTION_OPTION_TIMEOUT, to);
1186     server_reschedule (plugin, sc->mhd_daemon, GNUNET_NO);
1187   }
1188   else
1189   {
1190     GNUNET_log_from (GNUNET_ERROR_TYPE_DEBUG, plugin->name,
1191                      "Session %p for peer `%s' fully connected\n",
1192                      s, GNUNET_i2s (&target));
1193     to = (SERVER_SESSION_TIMEOUT.rel_value_us / 1000LL / 1000LL);
1194     server_mhd_connection_timeout (plugin, s, to);
1195   }
1196
1197   GNUNET_log_from (GNUNET_ERROR_TYPE_DEBUG, plugin->name,
1198                    "Setting timeout for %p to %u sec.\n", sc, to);
1199 #endif
1200   return sc;
1201 }
1202
1203
1204 /**
1205  * Lookup a session for a server connection
1206  *
1207  * @param plugin the plugin
1208  * @param sc the server connection
1209  * @return the session found or NULL
1210  */
1211 static struct Session *
1212 server_lookup_session (struct HTTP_Server_Plugin *plugin,
1213                        struct ServerConnection * sc)
1214 {
1215   struct Session *s;
1216
1217   for (s = plugin->head; NULL != s; s = s->next)
1218     if ((s->server_recv == sc) || (s->server_send == sc))
1219       return s;
1220   return NULL;
1221 }
1222
1223 int
1224 server_exist_session (struct HTTP_Server_Plugin *plugin, struct Session *s)
1225 {
1226   struct Session * head;
1227
1228   GNUNET_assert (NULL != plugin);
1229   GNUNET_assert (NULL != s);
1230
1231   for (head = plugin->head; head != NULL; head = head->next)
1232   {
1233     if (head == s)
1234       return GNUNET_YES;
1235   }
1236   return GNUNET_NO;
1237 }
1238
1239
1240 /**
1241  * Callback called by MHD when it needs data to send
1242  *
1243  * @param cls current session
1244  * @param pos position in buffer
1245  * @param buf the buffer to write data to
1246  * @param max max number of bytes available in buffer
1247  * @return bytes written to buffer
1248  */
1249 static ssize_t
1250 server_send_callback (void *cls, uint64_t pos, char *buf, size_t max)
1251 {
1252   struct Session *s = cls;
1253   ssize_t bytes_read = 0;
1254   struct HTTP_Message *msg;
1255   char *stat_txt;
1256
1257   GNUNET_assert (NULL != p);
1258   if (GNUNET_NO == server_exist_session (p, s))
1259     return 0;
1260   msg = s->msg_head;
1261   if (NULL != msg)
1262   {
1263     /* sending */
1264     bytes_read = GNUNET_MIN (msg->size - msg->pos,
1265                              max);
1266     memcpy (buf, &msg->buf[msg->pos], bytes_read);
1267     msg->pos += bytes_read;
1268
1269     /* removing message */
1270     if (msg->pos == msg->size)
1271     {
1272       GNUNET_CONTAINER_DLL_remove (s->msg_head, s->msg_tail, msg);
1273       if (NULL != msg->transmit_cont)
1274         msg->transmit_cont (msg->transmit_cont_cls, &s->target, GNUNET_OK,
1275                             msg->size, msg->size + msg->overhead);
1276       GNUNET_free (msg);
1277     }
1278   }
1279   if (0 < bytes_read)
1280   {
1281     GNUNET_log_from (GNUNET_ERROR_TYPE_DEBUG, s->plugin->name,
1282                    "Sent %u bytes to peer `%s' with session %p \n", bytes_read, GNUNET_i2s (&s->target), s);
1283     GNUNET_asprintf (&stat_txt, "# bytes currently in %s_server buffers", p->protocol);
1284     GNUNET_STATISTICS_update (p->env->stats,
1285                               stat_txt, -bytes_read, GNUNET_NO);
1286     GNUNET_free (stat_txt);
1287     GNUNET_asprintf (&stat_txt, "# bytes transmitted via %s_server", p->protocol);
1288     GNUNET_STATISTICS_update (p->env->stats,
1289                               stat_txt, bytes_read, GNUNET_NO);
1290     GNUNET_free (stat_txt);
1291   }
1292   return bytes_read;
1293 }
1294
1295
1296 /**
1297  * Callback called by MessageStreamTokenizer when a message has arrived
1298  *
1299  * @param cls current session as closure
1300  * @param client client
1301  * @param message the message to be forwarded to transport service
1302  * @return GNUNET_OK
1303  */
1304 static int
1305 server_receive_mst_cb (void *cls, void *client,
1306                        const struct GNUNET_MessageHeader *message)
1307 {
1308   struct Session *s = cls;
1309   struct HTTP_Server_Plugin *plugin = s->plugin;
1310   struct GNUNET_ATS_Information atsi;
1311   struct GNUNET_TIME_Relative delay;
1312   char *stat_txt;
1313
1314   GNUNET_assert (NULL != p);
1315   if (GNUNET_NO == server_exist_session(p, s))
1316     return GNUNET_OK;
1317
1318
1319   atsi.type = htonl (GNUNET_ATS_NETWORK_TYPE);
1320   atsi.value = s->ats_address_network_type;
1321   GNUNET_break (s->ats_address_network_type != ntohl (GNUNET_ATS_NET_UNSPECIFIED));
1322
1323
1324   delay = plugin->env->receive (plugin->env->cls,
1325                                 &s->target,
1326                                 message,
1327                                 s, NULL, 0);
1328
1329   plugin->env->update_address_metrics (plugin->env->cls,
1330                                        &s->target,
1331                                        NULL, 0, s, &atsi, 1);
1332
1333   GNUNET_asprintf (&stat_txt, "# bytes received via %s_server", plugin->protocol);
1334   GNUNET_STATISTICS_update (plugin->env->stats,
1335                             stat_txt, ntohs (message->size), GNUNET_NO);
1336   GNUNET_free (stat_txt);
1337
1338   s->session_passed = GNUNET_YES;
1339   s->next_receive = GNUNET_TIME_absolute_add (GNUNET_TIME_absolute_get (), delay);
1340   if (delay.rel_value_us > 0)
1341   {
1342     GNUNET_log_from (GNUNET_ERROR_TYPE_DEBUG, plugin->name,
1343                      "Peer `%s' address `%s' next read delayed for %s\n",
1344                      GNUNET_i2s (&s->target),
1345                      http_common_plugin_address_to_string (NULL,  p->protocol, s->addr, s->addrlen),
1346                      GNUNET_STRINGS_relative_time_to_string (delay,
1347                                                              GNUNET_YES));
1348   }
1349   server_reschedule_session_timeout (s);
1350   return GNUNET_OK;
1351 }
1352
1353
1354 /**
1355  * MHD callback for a new incoming connection
1356  *
1357  * @param cls the plugin handle
1358  * @param mhd_connection the mhd connection
1359  * @param url the requested URL
1360  * @param method GET or PUT
1361  * @param version HTTP version
1362  * @param upload_data upload data
1363  * @param upload_data_size sizeof upload data
1364  * @param httpSessionCache the session cache to remember the connection
1365  * @return MHD_YES if connection is accepted, MHD_NO on reject
1366  */
1367 static int
1368 server_access_cb (void *cls, struct MHD_Connection *mhd_connection,
1369                   const char *url, const char *method, const char *version,
1370                   const char *upload_data, size_t * upload_data_size,
1371                   void **httpSessionCache)
1372 {
1373   struct HTTP_Server_Plugin *plugin = cls;
1374   int res = MHD_YES;
1375
1376   struct ServerConnection *sc = *httpSessionCache;
1377   struct Session *s;
1378   struct MHD_Response *response;
1379
1380   GNUNET_log_from (GNUNET_ERROR_TYPE_DEBUG, plugin->name,
1381                    _("Access from connection %p (%u of %u) for `%s' `%s' url `%s' with upload data size %u\n"),
1382                    sc,
1383                    plugin->cur_connections, plugin->max_connections,
1384                    method, version, url, (*upload_data_size));
1385
1386   GNUNET_assert (cls != NULL);
1387   if (sc == NULL)
1388   {
1389     /* new connection */
1390     sc = server_lookup_connection (plugin, mhd_connection, url, method);
1391     if (sc != NULL)
1392     {
1393       (*httpSessionCache) = sc;
1394     }
1395     else
1396     {
1397       response = MHD_create_response_from_data (strlen (HTTP_ERROR_RESPONSE), HTTP_ERROR_RESPONSE, MHD_NO, MHD_NO);
1398       MHD_add_response_header (response,
1399                                MHD_HTTP_HEADER_CONTENT_TYPE,
1400                                "text/html");
1401       res = MHD_queue_response (mhd_connection, MHD_HTTP_NOT_FOUND, response);
1402       MHD_destroy_response (response);
1403       return res;
1404     }
1405   }
1406   else
1407   {
1408     /* 'old' connection */
1409     if (NULL == server_lookup_session (plugin, sc))
1410     {
1411       /* Session was already disconnected */
1412       return MHD_NO;
1413     }
1414   }
1415
1416   /* existing connection */
1417   sc = (*httpSessionCache);
1418   s = sc->session;
1419   GNUNET_assert (NULL != s);
1420   /* connection is to be disconnected */
1421   if (sc->disconnect == GNUNET_YES)
1422   {
1423     /* Sent HTTP/1.1: 200 OK as response */
1424     response = MHD_create_response_from_data (strlen ("Thank you!"),
1425                                        "Thank you!",
1426                                        MHD_NO, MHD_NO);
1427     MHD_queue_response (mhd_connection, MHD_HTTP_OK, response);
1428     MHD_destroy_response (response);
1429     return MHD_YES;
1430   }
1431   GNUNET_assert (s != NULL);
1432
1433   if (sc->direction == _SEND)
1434   {
1435     response = MHD_create_response_from_callback (MHD_SIZE_UNKNOWN,
1436                                                   32 * 1024,
1437                                                   &server_send_callback, s,
1438                                                   NULL);
1439     MHD_queue_response (mhd_connection, MHD_HTTP_OK, response);
1440     MHD_destroy_response (response);
1441     return MHD_YES;
1442   }
1443   if (sc->direction == _RECEIVE)
1444   {
1445     if ((*upload_data_size == 0) && (sc->connected == GNUNET_NO))
1446     {
1447       /* (*upload_data_size == 0) first callback when header are passed */
1448       GNUNET_log_from (GNUNET_ERROR_TYPE_DEBUG, plugin->name,
1449                        "Session %p / Connection %p: Peer `%s' PUT on address `%s' connected\n",
1450                        s, sc,
1451                        GNUNET_i2s (&s->target),
1452                        http_common_plugin_address_to_string (NULL,
1453                                                                                                                                                                     p->protocol,
1454                                                              s->addr,
1455                                                              s->addrlen));
1456       sc->connected = GNUNET_YES;
1457       return MHD_YES;
1458     }
1459     else if ((*upload_data_size == 0) && (sc->connected == GNUNET_YES))
1460     {
1461       /* (*upload_data_size == 0) when upload is complete */
1462       GNUNET_log_from (GNUNET_ERROR_TYPE_DEBUG, plugin->name,
1463                        "Session %p / Connection %p: Peer `%s' PUT on address `%s' finished upload\n",
1464                        s, sc,
1465                        GNUNET_i2s (&s->target),
1466                        http_common_plugin_address_to_string (NULL,
1467                                                                                                                                                                           p->protocol,
1468                                                              s->addr,
1469                                                              s->addrlen));
1470       sc->connected = GNUNET_NO;
1471       /* Sent HTTP/1.1: 200 OK as PUT Response\ */
1472       response = MHD_create_response_from_data (strlen ("Thank you!"),
1473                                          "Thank you!",
1474                                          MHD_NO, MHD_NO);
1475       MHD_queue_response (mhd_connection, MHD_HTTP_OK, response);
1476       MHD_destroy_response (response);
1477       return MHD_YES;
1478     }
1479     else if ((*upload_data_size > 0) && (sc->connected == GNUNET_YES))
1480     {
1481       /* (*upload_data_size > 0) for every segment received */
1482       GNUNET_log_from (GNUNET_ERROR_TYPE_DEBUG, plugin->name,
1483                        "Session %p / Connection %p: Peer `%s' PUT on address `%s' received %u bytes\n",
1484                        s, sc,
1485                        GNUNET_i2s (&s->target),
1486                        http_common_plugin_address_to_string (NULL,
1487                                                                                                                                                                     p->protocol,
1488                                                              s->addr,
1489                                                              s->addrlen),
1490                        *upload_data_size);
1491       struct GNUNET_TIME_Absolute now = GNUNET_TIME_absolute_get ();
1492
1493       if ((s->next_receive.abs_value_us <= now.abs_value_us))
1494       {
1495         GNUNET_log_from (GNUNET_ERROR_TYPE_DEBUG, plugin->name,
1496                          "PUT with %u bytes forwarded to MST\n",
1497                          *upload_data_size);
1498         if (s->msg_tk == NULL)
1499         {
1500           s->msg_tk = GNUNET_SERVER_mst_create (&server_receive_mst_cb, s);
1501         }
1502             GNUNET_SERVER_mst_receive (s->msg_tk, s, upload_data,
1503                                        *upload_data_size, GNUNET_NO, GNUNET_NO);
1504         server_mhd_connection_timeout (plugin, s,
1505                                        GNUNET_CONSTANTS_IDLE_CONNECTION_TIMEOUT.rel_value_us / 1000LL / 1000LL);
1506         (*upload_data_size) = 0;
1507       }
1508       else
1509       {
1510         GNUNET_log (GNUNET_ERROR_TYPE_DEBUG,
1511                     "Session %p / Connection %p: no inbound bandwidth available! Next read was delayed by %s\n",
1512                     s, sc,
1513                     GNUNET_STRINGS_relative_time_to_string (GNUNET_TIME_absolute_get_duration (s->next_receive),
1514                                                             GNUNET_YES));
1515       }
1516       return MHD_YES;
1517     }
1518     else
1519     {
1520       GNUNET_break (0);
1521       return MHD_NO;
1522     }
1523   }
1524   return res;
1525 }
1526
1527
1528 /**
1529  * Callback from MHD when a connection disconnects
1530  *
1531  * @param cls closure
1532  * @param connection the disconnected MHD connection
1533  * @param httpSessionCache the pointer to distinguish
1534  */
1535 static void
1536 server_disconnect_cb (void *cls, struct MHD_Connection *connection,
1537                       void **httpSessionCache)
1538 {
1539   struct ServerConnection *sc = *httpSessionCache;
1540   struct Session *s = NULL;
1541   struct Session *t = NULL;
1542   struct HTTP_Server_Plugin *plugin = NULL;
1543
1544   GNUNET_log_from (GNUNET_ERROR_TYPE_DEBUG, p->name,
1545                    "Disconnect for connection %p \n", sc);
1546
1547   if (sc == NULL)
1548     return;
1549
1550   if (NULL == (s = server_lookup_session (p, sc)))
1551     return;
1552
1553   GNUNET_assert (NULL != p);
1554   for (t = p->head; t != NULL; t = t->next)
1555   {
1556     if (t == s)
1557       break;
1558   }
1559   if (NULL == t)
1560     return;
1561
1562   plugin = s->plugin;
1563   if (sc->direction == _SEND)
1564   {
1565
1566     GNUNET_log_from (GNUNET_ERROR_TYPE_DEBUG, plugin->name,
1567                      "Peer `%s' connection  %p, GET on address `%s' disconnected\n",
1568                      GNUNET_i2s (&s->target), s->server_send,
1569                      http_common_plugin_address_to_string (NULL,  p->protocol, s->addr, s->addrlen));
1570     s->server_send = NULL;
1571     if (NULL != (s->server_recv))
1572     {
1573       s->server_recv->disconnect = GNUNET_YES;
1574       GNUNET_assert (NULL != s->server_recv->mhd_conn);
1575 #if MHD_VERSION >= 0x00090E00
1576       MHD_set_connection_option (s->server_recv->mhd_conn, MHD_CONNECTION_OPTION_TIMEOUT,
1577                                  1);
1578 #endif
1579       server_reschedule (plugin, s->server_recv->mhd_daemon, GNUNET_NO);
1580     }
1581   }
1582   if (sc->direction == _RECEIVE)
1583   {
1584     GNUNET_log_from (GNUNET_ERROR_TYPE_DEBUG, plugin->name,
1585                      "Peer `%s' connection %p PUT on address `%s' disconnected\n",
1586                      GNUNET_i2s (&s->target), s->server_recv,
1587                      http_common_plugin_address_to_string (NULL,  p->protocol, s->addr, s->addrlen));
1588     s->server_recv = NULL;
1589     /* Do not terminate session when PUT disconnects
1590     if (NULL != (s->server_send))
1591     {
1592         s->server_send->disconnect = GNUNET_YES;
1593       GNUNET_assert (NULL != s->server_send->mhd_conn);
1594 #if MHD_VERSION >= 0x00090E00
1595       MHD_set_connection_option (s->server_send->mhd_conn, MHD_CONNECTION_OPTION_TIMEOUT,
1596                                  1);
1597 #endif
1598       server_reschedule (plugin, s->server_send->mhd_daemon, GNUNET_NO);
1599     }*/
1600     if (s->msg_tk != NULL)
1601     {
1602       GNUNET_SERVER_mst_destroy (s->msg_tk);
1603       s->msg_tk = NULL;
1604     }
1605   }
1606
1607   GNUNET_free (sc);
1608   plugin->cur_connections--;
1609
1610   if ((s->server_send == NULL) && (s->server_recv == NULL))
1611   {
1612     GNUNET_log_from (GNUNET_ERROR_TYPE_DEBUG, plugin->name,
1613                      "Peer `%s' on address `%s' disconnected\n",
1614                      GNUNET_i2s (&s->target),
1615                      http_common_plugin_address_to_string (NULL,  p->protocol, s->addr, s->addrlen));
1616
1617     if ((GNUNET_YES == s->session_passed) && (GNUNET_NO == s->session_ended))
1618     {
1619         /* Notify transport immediately that this session is invalid */
1620         s->session_ended = GNUNET_YES;
1621         plugin->env->session_end (plugin->env->cls, &s->target, s);
1622     }
1623     server_delete_session (s);
1624   }
1625
1626 }
1627
1628
1629 /**
1630  * Check if incoming connection is accepted.
1631
1632  * @param cls plugin as closure
1633  * @param addr address of incoming connection
1634  * @param addr_len address length of incoming connection
1635  * @return MHD_YES if connection is accepted, MHD_NO if connection is rejected
1636  *
1637  */
1638 static int
1639 server_accept_cb (void *cls, const struct sockaddr *addr, socklen_t addr_len)
1640 {
1641   struct HTTP_Server_Plugin *plugin = cls;
1642
1643   if (plugin->cur_connections <= plugin->max_connections)
1644   {
1645     GNUNET_log_from (GNUNET_ERROR_TYPE_DEBUG, plugin->name,
1646                      _("Accepting connection (%u of %u) from `%s'\n"),
1647                      plugin->cur_connections, plugin->max_connections,
1648                      GNUNET_a2s (addr, addr_len));
1649     return MHD_YES;
1650   }
1651   else
1652   {
1653     GNUNET_log_from (GNUNET_ERROR_TYPE_WARNING, plugin->name,
1654                      _("Server reached maximum number connections (%u), rejecting new connection\n"),
1655                      plugin->max_connections);
1656     return MHD_NO;
1657   }
1658 }
1659
1660 static void
1661 server_log (void *arg, const char *fmt, va_list ap)
1662 {
1663   char text[1024];
1664
1665   vsnprintf (text, sizeof (text), fmt, ap);
1666   va_end (ap);
1667   GNUNET_log (GNUNET_ERROR_TYPE_DEBUG, "Server: %s\n", text);
1668 }
1669
1670
1671 /**
1672  * Call MHD IPv4 to process pending requests and then go back
1673  * and schedule the next run.
1674  * @param cls plugin as closure
1675  * @param tc task context
1676  */
1677 static void
1678 server_v4_run (void *cls, const struct GNUNET_SCHEDULER_TaskContext *tc)
1679 {
1680   struct HTTP_Server_Plugin *plugin = cls;
1681
1682   GNUNET_assert (cls != NULL);
1683
1684   plugin->server_v4_task = GNUNET_SCHEDULER_NO_TASK;
1685   if (0 != (tc->reason & GNUNET_SCHEDULER_REASON_SHUTDOWN))
1686     return;
1687 #if 0
1688   GNUNET_log_from (GNUNET_ERROR_TYPE_DEBUG, plugin->name,
1689                    "Running IPv4 server\n");
1690 #endif
1691   plugin->server_v4_immediately = GNUNET_NO;
1692   GNUNET_assert (MHD_YES == MHD_run (plugin->server_v4));
1693   server_reschedule (plugin, plugin->server_v4, GNUNET_NO);
1694 }
1695
1696
1697 /**
1698  * Call MHD IPv6 to process pending requests and then go back
1699  * and schedule the next run.
1700  * @param cls plugin as closure
1701  * @param tc task context
1702  */
1703 static void
1704 server_v6_run (void *cls, const struct GNUNET_SCHEDULER_TaskContext *tc)
1705 {
1706   struct HTTP_Server_Plugin *plugin = cls;
1707
1708   GNUNET_assert (cls != NULL);
1709   plugin->server_v6_task = GNUNET_SCHEDULER_NO_TASK;
1710   if (0 != (tc->reason & GNUNET_SCHEDULER_REASON_SHUTDOWN))
1711     return;
1712 #if 0
1713   GNUNET_log_from (GNUNET_ERROR_TYPE_DEBUG, plugin->name,
1714                    "Running IPv6 server\n");
1715 #endif
1716   plugin->server_v6_immediately = GNUNET_NO;
1717   GNUNET_assert (MHD_YES == MHD_run (plugin->server_v6));
1718   server_reschedule (plugin, plugin->server_v6, GNUNET_NO);
1719 }
1720
1721
1722 #define UNSIGNED_MHD_LONG_LONG unsigned MHD_LONG_LONG
1723
1724 /**
1725  * Function that queries MHD's select sets and
1726  * starts the task waiting for them.
1727  *
1728  * @param plugin plugin
1729  * @param daemon_handle the MHD daemon handle
1730  * @return gnunet task identifier
1731  */
1732 static GNUNET_SCHEDULER_TaskIdentifier
1733 server_schedule (struct HTTP_Server_Plugin *plugin,
1734                  struct MHD_Daemon *daemon_handle,
1735                  int now)
1736 {
1737   GNUNET_SCHEDULER_TaskIdentifier ret;
1738   fd_set rs;
1739   fd_set ws;
1740   fd_set es;
1741   struct GNUNET_NETWORK_FDSet *wrs;
1742   struct GNUNET_NETWORK_FDSet *wws;
1743   struct GNUNET_NETWORK_FDSet *wes;
1744   int max;
1745   UNSIGNED_MHD_LONG_LONG timeout;
1746   static unsigned long long last_timeout = 0;
1747   int haveto;
1748
1749   struct GNUNET_TIME_Relative tv;
1750
1751   if (GNUNET_YES == plugin->in_shutdown)
1752     return GNUNET_SCHEDULER_NO_TASK;
1753
1754   ret = GNUNET_SCHEDULER_NO_TASK;
1755   FD_ZERO (&rs);
1756   FD_ZERO (&ws);
1757   FD_ZERO (&es);
1758   wrs = GNUNET_NETWORK_fdset_create ();
1759   wes = GNUNET_NETWORK_fdset_create ();
1760   wws = GNUNET_NETWORK_fdset_create ();
1761   max = -1;
1762   GNUNET_assert (MHD_YES == MHD_get_fdset (daemon_handle, &rs, &ws, &es, &max));
1763   haveto = MHD_get_timeout (daemon_handle, &timeout);
1764   if (haveto == MHD_YES)
1765   {
1766     if (timeout != last_timeout)
1767     {
1768
1769       GNUNET_log_from (GNUNET_ERROR_TYPE_DEBUG, plugin->name,
1770                        "SELECT Timeout changed from %llu to %llu (ms)\n",
1771                        last_timeout, timeout);
1772       last_timeout = timeout;
1773     }
1774     if (timeout <= GNUNET_TIME_UNIT_SECONDS.rel_value_us / 1000LL)
1775       tv.rel_value_us = (uint64_t) timeout * 1000LL;
1776     else
1777       tv = GNUNET_TIME_UNIT_SECONDS;
1778   }
1779   else
1780     tv = GNUNET_TIME_UNIT_SECONDS;
1781   /* Force immediate run, since we have outbound data to send */
1782   if (now == GNUNET_YES)
1783     tv = GNUNET_TIME_UNIT_MILLISECONDS;
1784   GNUNET_NETWORK_fdset_copy_native (wrs, &rs, max + 1);
1785   GNUNET_NETWORK_fdset_copy_native (wws, &ws, max + 1);
1786   GNUNET_NETWORK_fdset_copy_native (wes, &es, max + 1);
1787
1788   if (daemon_handle == plugin->server_v4)
1789   {
1790     if (plugin->server_v4_task != GNUNET_SCHEDULER_NO_TASK)
1791     {
1792       GNUNET_SCHEDULER_cancel (plugin->server_v4_task);
1793       plugin->server_v4_task = GNUNET_SCHEDULER_NO_TASK;
1794     }
1795 #if 0
1796     GNUNET_log_from (GNUNET_ERROR_TYPE_DEBUG, plugin->name,
1797                      "Scheduling IPv4 server task in %llu ms\n", tv);
1798 #endif
1799     ret =
1800         GNUNET_SCHEDULER_add_select (GNUNET_SCHEDULER_PRIORITY_DEFAULT,
1801                                      tv, wrs, wws,
1802                                      &server_v4_run, plugin);
1803   }
1804   if (daemon_handle == plugin->server_v6)
1805   {
1806     if (plugin->server_v6_task != GNUNET_SCHEDULER_NO_TASK)
1807     {
1808       GNUNET_SCHEDULER_cancel (plugin->server_v6_task);
1809       plugin->server_v6_task = GNUNET_SCHEDULER_NO_TASK;
1810     }
1811 #if 0
1812     GNUNET_log_from (GNUNET_ERROR_TYPE_DEBUG, plugin->name,
1813                      "Scheduling IPv6 server task in %llu ms\n", tv);
1814 #endif
1815     ret =
1816         GNUNET_SCHEDULER_add_select (GNUNET_SCHEDULER_PRIORITY_DEFAULT,
1817                                      tv, wrs, wws,
1818                                      &server_v6_run, plugin);
1819   }
1820   GNUNET_NETWORK_fdset_destroy (wrs);
1821   GNUNET_NETWORK_fdset_destroy (wws);
1822   GNUNET_NETWORK_fdset_destroy (wes);
1823   return ret;
1824 }
1825
1826
1827 #if BUILD_HTTPS
1828 /**
1829  * Load ssl certificate from file
1830  *
1831  * @param file filename
1832  * @return content of the file
1833  */
1834 static char *
1835 server_load_file (const char *file)
1836 {
1837   struct GNUNET_DISK_FileHandle *gn_file;
1838   uint64_t fsize;
1839   char *text = NULL;
1840
1841   if (GNUNET_OK != GNUNET_DISK_file_size (file,
1842       &fsize, GNUNET_NO, GNUNET_YES))
1843     return NULL;
1844   text = GNUNET_malloc (fsize + 1);
1845   gn_file =
1846       GNUNET_DISK_file_open (file, GNUNET_DISK_OPEN_READ,
1847                              GNUNET_DISK_PERM_USER_READ);
1848   if (gn_file == NULL)
1849   {
1850     GNUNET_free (text);
1851     return NULL;
1852   }
1853   if (GNUNET_SYSERR == GNUNET_DISK_file_read (gn_file, text, fsize))
1854   {
1855     GNUNET_free (text);
1856     GNUNET_DISK_file_close (gn_file);
1857     return NULL;
1858   }
1859   text[fsize] = '\0';
1860   GNUNET_DISK_file_close (gn_file);
1861   return text;
1862 }
1863 #endif
1864
1865
1866 #if BUILD_HTTPS
1867 /**
1868  * Load ssl certificate
1869  *
1870  * @param plugin the plugin
1871  * @return GNUNET_OK on success, GNUNET_SYSERR on failure
1872  */
1873 static int
1874 server_load_certificate (struct HTTP_Server_Plugin *plugin)
1875 {
1876   int res = GNUNET_OK;
1877
1878   char *sh;
1879   char *key_file;
1880   char *cert_file;
1881
1882   /* Get crypto init string from config
1883    * If not present just use default values */
1884
1885   if (GNUNET_OK !=
1886                  GNUNET_CONFIGURATION_get_value_string (plugin->env->cfg,
1887                                                         "PATHS",
1888                                                         "SERVICEHOME",
1889                                                         &sh))
1890   {
1891       GNUNET_log_from (GNUNET_ERROR_TYPE_ERROR, plugin->name,
1892                        "Failed to get servicehome!\n");
1893       return GNUNET_SYSERR;
1894   }
1895
1896
1897   if (GNUNET_OK ==
1898                  GNUNET_CONFIGURATION_get_value_string (plugin->env->cfg,
1899                                                         plugin->name,
1900                                                         "CRYPTO_INIT",
1901                                                         &plugin->crypto_init))
1902       GNUNET_log_from (GNUNET_ERROR_TYPE_DEBUG, plugin->name,
1903                        "Using crypto init string `%s'\n",
1904                        plugin->crypto_init);
1905   else
1906     GNUNET_log_from (GNUNET_ERROR_TYPE_DEBUG, plugin->name,
1907                      "Using default crypto init string \n");
1908
1909   if (GNUNET_OK !=
1910       GNUNET_CONFIGURATION_get_value_filename (plugin->env->cfg, plugin->name,
1911                                                "KEY_FILE", &key_file))
1912   {
1913     GNUNET_break (0);
1914     GNUNET_asprintf (&key_file, "%s/%s", sh, "https_key.key");
1915   }
1916
1917
1918   if (GNUNET_OK !=
1919       GNUNET_CONFIGURATION_get_value_filename (plugin->env->cfg, plugin->name,
1920                                                "CERT_FILE", &cert_file))
1921   {
1922       GNUNET_break (0);
1923     GNUNET_asprintf (&cert_file, "%s/%s", sh, "https_cert.crt");
1924   }
1925   GNUNET_free (sh);
1926   /* read key & certificates from file */
1927   GNUNET_log (GNUNET_ERROR_TYPE_DEBUG,
1928               "Trying to loading TLS certificate from key-file `%s' cert-file`%s'\n",
1929               key_file, cert_file);
1930
1931   plugin->key = server_load_file (key_file);
1932   plugin->cert = server_load_file (cert_file);
1933
1934   if ((plugin->key == NULL) || (plugin->cert == NULL))
1935   {
1936     struct GNUNET_OS_Process *cert_creation;
1937
1938     GNUNET_free_non_null (plugin->key);
1939     plugin->key = NULL;
1940     GNUNET_free_non_null (plugin->cert);
1941     plugin->cert = NULL;
1942
1943     GNUNET_log (GNUNET_ERROR_TYPE_DEBUG,
1944                 "No usable TLS certificate found, creating certificate\n");
1945     errno = 0;
1946     cert_creation =
1947         GNUNET_OS_start_process (GNUNET_NO, GNUNET_OS_INHERIT_STD_OUT_AND_ERR, NULL, NULL,
1948                                  "gnunet-transport-certificate-creation",
1949                                  "gnunet-transport-certificate-creation",
1950                                  key_file, cert_file, NULL);
1951     if (cert_creation == NULL)
1952     {
1953       GNUNET_log_from (GNUNET_ERROR_TYPE_ERROR, plugin->name,
1954                        _
1955                        ("Could not create a new TLS certificate, program `gnunet-transport-certificate-creation' could not be started!\n"));
1956       GNUNET_free (key_file);
1957       GNUNET_free (cert_file);
1958
1959       GNUNET_free_non_null (plugin->key);
1960       plugin->key = NULL;
1961       GNUNET_free_non_null (plugin->cert);
1962       plugin->cert = NULL;
1963       GNUNET_free_non_null (plugin->crypto_init);
1964       plugin->crypto_init = NULL;
1965
1966       return GNUNET_SYSERR;
1967     }
1968     GNUNET_assert (GNUNET_OK == GNUNET_OS_process_wait (cert_creation));
1969     GNUNET_OS_process_destroy (cert_creation);
1970
1971     plugin->key = server_load_file (key_file);
1972     plugin->cert = server_load_file (cert_file);
1973   }
1974
1975   if ((plugin->key == NULL) || (plugin->cert == NULL))
1976   {
1977     GNUNET_log_from (GNUNET_ERROR_TYPE_ERROR, plugin->name,
1978                      _
1979                      ("No usable TLS certificate found and creating one failed!\n"),
1980                      "transport-https");
1981     GNUNET_free (key_file);
1982     GNUNET_free (cert_file);
1983
1984     GNUNET_free_non_null (plugin->key);
1985     plugin->key = NULL;
1986     GNUNET_free_non_null (plugin->cert);
1987     plugin->cert = NULL;
1988     GNUNET_free_non_null (plugin->crypto_init);
1989     plugin->crypto_init = NULL;
1990
1991     return GNUNET_SYSERR;
1992   }
1993   GNUNET_free (key_file);
1994   GNUNET_free (cert_file);
1995   GNUNET_log (GNUNET_ERROR_TYPE_DEBUG, "TLS certificate loaded\n");
1996   return res;
1997 }
1998 #endif
1999
2000
2001 /**
2002  * Start the HTTP server
2003  *
2004  * @param plugin the plugin handle
2005  * @return GNUNET_OK on success, GNUNET_SYSERR on failure
2006  */
2007 static int
2008 server_start (struct HTTP_Server_Plugin *plugin)
2009 {
2010   unsigned int timeout;
2011   char *msg;
2012   GNUNET_assert (NULL != plugin);
2013
2014 #if BUILD_HTTPS
2015   if (GNUNET_SYSERR == server_load_certificate (plugin))
2016   {
2017     GNUNET_log_from (GNUNET_ERROR_TYPE_ERROR, plugin->name,
2018                      "Could not load or create server certificate! Loading plugin failed!\n");
2019     return GNUNET_SYSERR;
2020   }
2021 #endif
2022
2023
2024 #if MHD_VERSION >= 0x00090E00
2025   timeout = HTTP_SERVER_NOT_VALIDATED_TIMEOUT.rel_value_us / 1000LL / 1000LL;
2026   GNUNET_log_from (GNUNET_ERROR_TYPE_DEBUG, plugin->name,
2027                    "MHD can set timeout per connection! Default time out %u sec.\n",
2028                    timeout);
2029 #else
2030   timeout = SERVER_SESSION_TIMEOUT.rel_value_us / 1000LL / 1000LL;
2031   GNUNET_log_from (GNUNET_ERROR_TYPE_WARNING, plugin->name,
2032                    "MHD cannot set timeout per connection! Default time out %u sec.\n",
2033                    timeout);
2034 #endif
2035
2036   plugin->server_v4 = NULL;
2037   if (plugin->use_ipv4 == GNUNET_YES)
2038   {
2039     plugin->server_v4 = MHD_start_daemon (
2040 #if VERBOSE_SERVER
2041                                            MHD_USE_DEBUG |
2042 #endif
2043 #if BUILD_HTTPS
2044                                            MHD_USE_SSL |
2045 #endif
2046                                            MHD_NO_FLAG, plugin->port,
2047                                            &server_accept_cb, plugin,
2048                                            &server_access_cb, plugin,
2049                                            MHD_OPTION_SOCK_ADDR,
2050                                            (struct sockaddr_in *)
2051                                            plugin->server_addr_v4,
2052                                            MHD_OPTION_CONNECTION_LIMIT,
2053                                            (unsigned int)
2054                                            plugin->max_connections,
2055 #if BUILD_HTTPS
2056                                            MHD_OPTION_HTTPS_PRIORITIES,
2057                                            plugin->crypto_init,
2058                                            MHD_OPTION_HTTPS_MEM_KEY,
2059                                            plugin->key,
2060                                            MHD_OPTION_HTTPS_MEM_CERT,
2061                                            plugin->cert,
2062 #endif
2063                                            MHD_OPTION_CONNECTION_TIMEOUT,
2064                                            timeout,
2065                                            MHD_OPTION_CONNECTION_MEMORY_LIMIT,
2066                                            (size_t) (2 *
2067                                                      GNUNET_SERVER_MAX_MESSAGE_SIZE),
2068                                            MHD_OPTION_NOTIFY_COMPLETED,
2069                                            &server_disconnect_cb, plugin,
2070                                            MHD_OPTION_EXTERNAL_LOGGER,
2071                                            server_log, NULL, MHD_OPTION_END);
2072     if (plugin->server_v4 == NULL)
2073     {
2074       GNUNET_log_from (GNUNET_ERROR_TYPE_ERROR, plugin->name,
2075                        "Failed to start %s IPv4 server component on port %u\n",
2076                        plugin->name, plugin->port);
2077     }
2078     else
2079         server_reschedule (plugin, plugin->server_v4, GNUNET_NO);
2080   }
2081
2082
2083   plugin->server_v6 = NULL;
2084   if (plugin->use_ipv6 == GNUNET_YES)
2085   {
2086     plugin->server_v6 = MHD_start_daemon (
2087 #if VERBOSE_SERVER
2088                                            MHD_USE_DEBUG |
2089 #endif
2090 #if BUILD_HTTPS
2091                                            MHD_USE_SSL |
2092 #endif
2093                                            MHD_USE_IPv6, plugin->port,
2094                                            &server_accept_cb, plugin,
2095                                            &server_access_cb, plugin,
2096                                            MHD_OPTION_SOCK_ADDR,
2097                                            (struct sockaddr_in6 *)
2098                                            plugin->server_addr_v6,
2099                                            MHD_OPTION_CONNECTION_LIMIT,
2100                                            (unsigned int)
2101                                            plugin->max_connections,
2102 #if BUILD_HTTPS
2103                                            MHD_OPTION_HTTPS_PRIORITIES,
2104                                            plugin->crypto_init,
2105                                            MHD_OPTION_HTTPS_MEM_KEY,
2106                                            plugin->key,
2107                                            MHD_OPTION_HTTPS_MEM_CERT,
2108                                            plugin->cert,
2109 #endif
2110                                            MHD_OPTION_CONNECTION_TIMEOUT,
2111                                            timeout,
2112                                            MHD_OPTION_CONNECTION_MEMORY_LIMIT,
2113                                            (size_t) (2 *
2114                                                      GNUNET_SERVER_MAX_MESSAGE_SIZE),
2115                                            MHD_OPTION_NOTIFY_COMPLETED,
2116                                            &server_disconnect_cb, plugin,
2117                                            MHD_OPTION_EXTERNAL_LOGGER,
2118                                            server_log, NULL, MHD_OPTION_END);
2119     if (plugin->server_v6 == NULL)
2120     {
2121       GNUNET_log_from (GNUNET_ERROR_TYPE_ERROR, plugin->name,
2122                        "Failed to start %s IPv6 server component on port %u\n",
2123                        plugin->name, plugin->port);
2124     }
2125     else
2126         server_reschedule (plugin, plugin->server_v6, GNUNET_NO);
2127   }
2128
2129         msg = "No";
2130   if ((plugin->server_v6 == NULL) && (plugin->server_v4 == NULL))
2131   {
2132     GNUNET_log_from (GNUNET_ERROR_TYPE_ERROR, plugin->name,
2133                      "%s %s server component started on port %u\n",
2134                      msg, plugin->name, plugin->port);
2135     sleep (10);
2136     return GNUNET_SYSERR;
2137   }
2138   else if ((plugin->server_v6 != NULL) && (plugin->server_v4 != NULL))
2139         msg = "IPv4 and IPv6";
2140   else if (plugin->server_v6 != NULL)
2141         msg = "IPv6";
2142   else if (plugin->server_v4 != NULL)
2143         msg = "IPv4";
2144   GNUNET_log_from (GNUNET_ERROR_TYPE_DEBUG, plugin->name,
2145                    "%s %s server component started on port %u\n",
2146                    msg, plugin->name, plugin->port);
2147   return GNUNET_OK;
2148 }
2149
2150
2151 void
2152 server_stop (struct HTTP_Server_Plugin *plugin)
2153 {
2154   if (plugin->server_v4 != NULL)
2155   {
2156     MHD_stop_daemon (plugin->server_v4);
2157     plugin->server_v4 = NULL;
2158   }
2159   if ( plugin->server_v6 != NULL)
2160   {
2161     MHD_stop_daemon (plugin->server_v6);
2162     plugin->server_v6 = NULL;
2163   }
2164
2165
2166   if (plugin->server_v4_task != GNUNET_SCHEDULER_NO_TASK)
2167   {
2168     GNUNET_SCHEDULER_cancel (plugin->server_v4_task);
2169     plugin->server_v4_task = GNUNET_SCHEDULER_NO_TASK;
2170   }
2171
2172   if (plugin->server_v6_task != GNUNET_SCHEDULER_NO_TASK)
2173   {
2174     GNUNET_SCHEDULER_cancel (plugin->server_v6_task);
2175     plugin->server_v6_task = GNUNET_SCHEDULER_NO_TASK;
2176   }
2177   p = NULL;
2178
2179 #if BUILD_HTTPS
2180   GNUNET_free_non_null (plugin->crypto_init);
2181   GNUNET_free_non_null (plugin->cert);
2182   GNUNET_free_non_null (plugin->key);
2183 #endif
2184
2185   GNUNET_log_from (GNUNET_ERROR_TYPE_DEBUG, plugin->name,
2186                    "%s server component stopped\n", plugin->name);
2187 }
2188
2189
2190 /**
2191  * Add an address to the server's set of addresses and notify transport
2192  *
2193  * @param cls the plugin handle
2194  * @param add_remove GNUNET_YES on add, GNUNET_NO on remove
2195  * @param addr the address
2196  * @param addrlen address length
2197  */
2198 static void
2199 server_add_address (void *cls, int add_remove, const struct sockaddr *addr,
2200                  socklen_t addrlen)
2201 {
2202   struct HTTP_Server_Plugin *plugin = cls;
2203   struct HttpAddressWrapper *w = NULL;
2204
2205   w = GNUNET_malloc (sizeof (struct HttpAddressWrapper));
2206   w->address = http_common_address_from_socket (plugin->protocol, addr, addrlen);
2207   if (NULL == w->address)
2208   {
2209     GNUNET_free (w);
2210     return;
2211   }
2212   w->addrlen = http_common_address_get_size (w->address);
2213
2214   GNUNET_CONTAINER_DLL_insert(plugin->addr_head, plugin->addr_tail, w);
2215   GNUNET_log_from (GNUNET_ERROR_TYPE_DEBUG, plugin->name,
2216                    "Notifying transport to add address `%s'\n",
2217                    http_common_plugin_address_to_string (NULL,  p->protocol, w->address, w->addrlen));
2218 #if BUILD_HTTPS
2219   plugin->env->notify_address (plugin->env->cls, add_remove, w->address, w->addrlen, "https_client");
2220 #else
2221   plugin->env->notify_address (plugin->env->cls, add_remove, w->address, w->addrlen, "http_client");
2222 #endif
2223 }
2224
2225
2226 /**
2227  * Remove an address from the server's set of addresses and notify transport
2228  *
2229  * @param cls the plugin handle
2230  * @param add_remove GNUNET_YES on add, GNUNET_NO on remove
2231  * @param addr the address
2232  * @param addrlen address length
2233  */
2234 static void
2235 server_remove_address (void *cls, int add_remove, const struct sockaddr *addr,
2236                     socklen_t addrlen)
2237 {
2238   struct HTTP_Server_Plugin *plugin = cls;
2239   struct HttpAddressWrapper *w = plugin->addr_head;
2240   size_t saddr_len;
2241   void * saddr = http_common_address_from_socket (plugin->protocol, addr, addrlen);
2242   if (NULL == saddr)
2243     return;
2244   saddr_len =  http_common_address_get_size (saddr);
2245
2246   while (NULL != w)
2247   {
2248       if (GNUNET_YES == http_common_cmp_addresses(w->address, w->addrlen, saddr, saddr_len))
2249         break;
2250       w = w->next;
2251   }
2252   GNUNET_free (saddr);
2253
2254   if (NULL == w)
2255     return;
2256
2257   GNUNET_log_from (GNUNET_ERROR_TYPE_DEBUG, plugin->name,
2258                    "Notifying transport to remove address `%s'\n",
2259                    http_common_plugin_address_to_string (NULL,  p->protocol, w->address, w->addrlen));
2260   GNUNET_CONTAINER_DLL_remove (plugin->addr_head, plugin->addr_tail, w);
2261 #if BUILD_HTTPS
2262   plugin->env->notify_address (plugin->env->cls, add_remove, w->address, w->addrlen, "https_client");
2263 #else
2264   plugin->env->notify_address (plugin->env->cls, add_remove, w->address, w->addrlen, "http_client");
2265 #endif
2266   GNUNET_free (w->address);
2267   GNUNET_free (w);
2268 }
2269
2270
2271
2272 /**
2273  * Our external IP address/port mapping has changed.
2274  *
2275  * @param cls closure, the 'struct LocalAddrList'
2276  * @param add_remove GNUNET_YES to mean the new public IP address, GNUNET_NO to mean
2277  *     the previous (now invalid) one
2278  * @param addr either the previous or the new public IP address
2279  * @param addrlen actual lenght of the address
2280  */
2281 static void
2282 server_nat_port_map_callback (void *cls, int add_remove, const struct sockaddr *addr,
2283                        socklen_t addrlen)
2284 {
2285   GNUNET_assert (cls != NULL);
2286   struct HTTP_Server_Plugin *plugin = cls;
2287
2288   GNUNET_log_from (GNUNET_ERROR_TYPE_DEBUG, plugin->name,
2289                    "NAT called to %s address `%s'\n",
2290                    (add_remove == GNUNET_NO) ? "remove" : "add",
2291                    GNUNET_a2s (addr, addrlen));
2292
2293   if (AF_INET == addr->sa_family)
2294   {
2295     struct sockaddr_in *s4 = (struct sockaddr_in *) addr;
2296
2297     if (GNUNET_NO == plugin->use_ipv4)
2298       return;
2299
2300     if ((NULL != plugin->server_addr_v4) &&
2301         (0 != memcmp (&plugin->server_addr_v4->sin_addr,
2302                       &s4->sin_addr, sizeof (struct in_addr))))
2303     {
2304         GNUNET_log_from (GNUNET_ERROR_TYPE_DEBUG, plugin->name,
2305                          "Skipping address `%s' (not bindto address)\n",
2306                          GNUNET_a2s (addr, addrlen));
2307       return;
2308     }
2309   }
2310
2311   if (AF_INET6 == addr->sa_family)
2312   {
2313     struct sockaddr_in6 *s6 = (struct sockaddr_in6 *) addr;
2314     if (GNUNET_NO == plugin->use_ipv6)
2315       return;
2316
2317     if ((NULL != plugin->server_addr_v6) &&
2318         (0 != memcmp (&plugin->server_addr_v6->sin6_addr,
2319                       &s6->sin6_addr, sizeof (struct in6_addr))))
2320     {
2321         GNUNET_log_from (GNUNET_ERROR_TYPE_DEBUG, plugin->name,
2322                          "Skipping address `%s' (not bindto address)\n",
2323                          GNUNET_a2s (addr, addrlen));
2324         return;
2325     }
2326   }
2327
2328   switch (add_remove)
2329   {
2330   case GNUNET_YES:
2331     server_add_address (cls, add_remove, addr, addrlen);
2332     break;
2333   case GNUNET_NO:
2334     server_remove_address (cls, add_remove, addr, addrlen);
2335     break;
2336   }
2337 }
2338
2339
2340 /**
2341  * Get valid server addresses
2342  *
2343  * @param plugin the plugin handle
2344  * @param service_name the servicename
2345  * @param cfg configuration handle
2346  * @param addrs addresses
2347  * @param addr_lens address length
2348  * @return number of addresses
2349  */
2350 static int
2351 server_get_addresses (struct HTTP_Server_Plugin *plugin,
2352                       const char *service_name,
2353                       const struct GNUNET_CONFIGURATION_Handle *cfg,
2354                       struct sockaddr ***addrs, socklen_t ** addr_lens)
2355 {
2356   int disablev6;
2357   unsigned long long port;
2358   struct addrinfo hints;
2359   struct addrinfo *res;
2360   struct addrinfo *pos;
2361   struct addrinfo *next;
2362   unsigned int i;
2363   int resi;
2364   int ret;
2365   struct sockaddr **saddrs;
2366   socklen_t *saddrlens;
2367   char *hostname;
2368
2369   *addrs = NULL;
2370   *addr_lens = NULL;
2371
2372   disablev6 = !plugin->use_ipv6;
2373
2374   port = 0;
2375   if (GNUNET_CONFIGURATION_have_value (cfg, service_name, "PORT"))
2376   {
2377     GNUNET_break (GNUNET_OK ==
2378                   GNUNET_CONFIGURATION_get_value_number (cfg, service_name,
2379                                                          "PORT", &port));
2380     if (port > 65535)
2381     {
2382       GNUNET_log (GNUNET_ERROR_TYPE_ERROR,
2383                   _
2384                   ("Require valid port number for service in configuration!\n"));
2385       return GNUNET_SYSERR;
2386     }
2387   }
2388   if (0 == port)
2389   {
2390     GNUNET_log_from (GNUNET_ERROR_TYPE_INFO, plugin->name,
2391                      "Starting in listen only mode\n");
2392     return -1; /* listen only */
2393   }
2394
2395
2396   if (GNUNET_CONFIGURATION_have_value (cfg, service_name, "BINDTO"))
2397   {
2398     GNUNET_break (GNUNET_OK ==
2399                   GNUNET_CONFIGURATION_get_value_string (cfg, service_name,
2400                                                          "BINDTO", &hostname));
2401   }
2402   else
2403     hostname = NULL;
2404
2405   if (hostname != NULL)
2406   {
2407     GNUNET_log_from (GNUNET_ERROR_TYPE_DEBUG, plugin->name,
2408                      "Resolving `%s' since that is where `%s' will bind to.\n",
2409                      hostname, service_name);
2410     memset (&hints, 0, sizeof (struct addrinfo));
2411     if (disablev6)
2412       hints.ai_family = AF_INET;
2413     if ((0 != (ret = getaddrinfo (hostname, NULL, &hints, &res))) ||
2414         (res == NULL))
2415     {
2416       GNUNET_log (GNUNET_ERROR_TYPE_ERROR, _("Failed to resolve `%s': %s\n"),
2417                   hostname, gai_strerror (ret));
2418       GNUNET_free (hostname);
2419       return GNUNET_SYSERR;
2420     }
2421     next = res;
2422     i = 0;
2423     while (NULL != (pos = next))
2424     {
2425       next = pos->ai_next;
2426       if ((disablev6) && (pos->ai_family == AF_INET6))
2427         continue;
2428       i++;
2429     }
2430     if (0 == i)
2431     {
2432       GNUNET_log (GNUNET_ERROR_TYPE_ERROR,
2433                   _("Failed to find %saddress for `%s'.\n"),
2434                   disablev6 ? "IPv4 " : "", hostname);
2435       freeaddrinfo (res);
2436       GNUNET_free (hostname);
2437       return GNUNET_SYSERR;
2438     }
2439     resi = i;
2440     saddrs = GNUNET_malloc ((resi + 1) * sizeof (struct sockaddr *));
2441     saddrlens = GNUNET_malloc ((resi + 1) * sizeof (socklen_t));
2442     i = 0;
2443     next = res;
2444     while (NULL != (pos = next))
2445     {
2446       next = pos->ai_next;
2447       if ((disablev6) && (pos->ai_family == AF_INET6))
2448         continue;
2449       if ((pos->ai_protocol != IPPROTO_TCP) && (pos->ai_protocol != 0))
2450         continue;               /* not TCP */
2451       if ((pos->ai_socktype != SOCK_STREAM) && (pos->ai_socktype != 0))
2452         continue;               /* huh? */
2453       GNUNET_log_from (GNUNET_ERROR_TYPE_DEBUG, plugin->name,
2454                        "Service will bind to `%s'\n", GNUNET_a2s (pos->ai_addr,
2455                                                                   pos->ai_addrlen));
2456       if (pos->ai_family == AF_INET)
2457       {
2458         GNUNET_assert (pos->ai_addrlen == sizeof (struct sockaddr_in));
2459         saddrlens[i] = pos->ai_addrlen;
2460         saddrs[i] = GNUNET_malloc (saddrlens[i]);
2461         memcpy (saddrs[i], pos->ai_addr, saddrlens[i]);
2462         ((struct sockaddr_in *) saddrs[i])->sin_port = htons (port);
2463       }
2464       else
2465       {
2466         GNUNET_assert (pos->ai_family == AF_INET6);
2467         GNUNET_assert (pos->ai_addrlen == sizeof (struct sockaddr_in6));
2468         saddrlens[i] = pos->ai_addrlen;
2469         saddrs[i] = GNUNET_malloc (saddrlens[i]);
2470         memcpy (saddrs[i], pos->ai_addr, saddrlens[i]);
2471         ((struct sockaddr_in6 *) saddrs[i])->sin6_port = htons (port);
2472       }
2473       i++;
2474     }
2475     GNUNET_free (hostname);
2476     freeaddrinfo (res);
2477     resi = i;
2478   }
2479   else
2480   {
2481     /* will bind against everything, just set port */
2482     if (disablev6)
2483     {
2484       /* V4-only */
2485       resi = 1;
2486       i = 0;
2487       saddrs = GNUNET_malloc ((resi + 1) * sizeof (struct sockaddr *));
2488       saddrlens = GNUNET_malloc ((resi + 1) * sizeof (socklen_t));
2489
2490       saddrlens[i] = sizeof (struct sockaddr_in);
2491       saddrs[i] = GNUNET_malloc (saddrlens[i]);
2492 #if HAVE_SOCKADDR_IN_SIN_LEN
2493       ((struct sockaddr_in *) saddrs[i])->sin_len = saddrlens[i];
2494 #endif
2495       ((struct sockaddr_in *) saddrs[i])->sin_family = AF_INET;
2496       ((struct sockaddr_in *) saddrs[i])->sin_port = htons (port);
2497     }
2498     else
2499     {
2500       /* dual stack */
2501       resi = 2;
2502       saddrs = GNUNET_malloc ((resi + 1) * sizeof (struct sockaddr *));
2503       saddrlens = GNUNET_malloc ((resi + 1) * sizeof (socklen_t));
2504       i = 0;
2505       saddrlens[i] = sizeof (struct sockaddr_in6);
2506       saddrs[i] = GNUNET_malloc (saddrlens[i]);
2507 #if HAVE_SOCKADDR_IN_SIN_LEN
2508       ((struct sockaddr_in6 *) saddrs[i])->sin6_len = saddrlens[0];
2509 #endif
2510       ((struct sockaddr_in6 *) saddrs[i])->sin6_family = AF_INET6;
2511       ((struct sockaddr_in6 *) saddrs[i])->sin6_port = htons (port);
2512       i++;
2513       saddrlens[i] = sizeof (struct sockaddr_in);
2514       saddrs[i] = GNUNET_malloc (saddrlens[i]);
2515 #if HAVE_SOCKADDR_IN_SIN_LEN
2516       ((struct sockaddr_in *) saddrs[i])->sin_len = saddrlens[1];
2517 #endif
2518       ((struct sockaddr_in *) saddrs[i])->sin_family = AF_INET;
2519       ((struct sockaddr_in *) saddrs[i])->sin_port = htons (port);
2520     }
2521   }
2522   *addrs = saddrs;
2523   *addr_lens = saddrlens;
2524   return resi;
2525 }
2526
2527
2528 /**
2529  * Ask NAT for addresses
2530  *
2531  * @param plugin the plugin handle
2532  */
2533 static void
2534 server_start_report_addresses (struct HTTP_Server_Plugin *plugin)
2535 {
2536   int res = GNUNET_OK;
2537   struct sockaddr **addrs;
2538   socklen_t *addrlens;
2539
2540   res = server_get_addresses (plugin,
2541                               plugin->name, plugin->env->cfg,
2542                               &addrs, &addrlens);
2543   GNUNET_log_from (GNUNET_ERROR_TYPE_DEBUG, plugin->name,
2544                    _("Found %u addresses to report to NAT service\n"), res);
2545
2546   if (GNUNET_SYSERR == res)
2547   {
2548     plugin->nat = NULL;
2549     return;
2550   }
2551
2552   plugin->nat =
2553       GNUNET_NAT_register (plugin->env->cfg, GNUNET_YES, plugin->port,
2554                            (unsigned int) res,
2555                            (const struct sockaddr **) addrs, addrlens,
2556                            &server_nat_port_map_callback, NULL, plugin);
2557   while (res > 0)
2558   {
2559     res--;
2560     GNUNET_assert (addrs[res] != NULL);
2561     GNUNET_free (addrs[res]);
2562   }
2563   GNUNET_free_non_null (addrs);
2564   GNUNET_free_non_null (addrlens);
2565 }
2566
2567
2568 /**
2569  * Stop NAT for addresses
2570  *
2571  * @param plugin the plugin handle
2572  */
2573 static void
2574 server_stop_report_addresses (struct HTTP_Server_Plugin *plugin)
2575 {
2576   /* Stop NAT handle */
2577   if (NULL != plugin->nat)
2578     GNUNET_NAT_unregister (plugin->nat);
2579
2580   /* Clean up addresses */
2581   struct HttpAddressWrapper *w;
2582
2583   while (plugin->addr_head != NULL)
2584   {
2585     w = plugin->addr_head;
2586     GNUNET_CONTAINER_DLL_remove (plugin->addr_head, plugin->addr_tail, w);
2587     GNUNET_free (w->address);
2588     GNUNET_free (w);
2589   }
2590 }
2591
2592
2593 /**
2594  * Check if IPv6 supported on this system
2595  *
2596  * @param plugin the plugin handle
2597  * @return GNUNET_YES on success, else GNUNET_NO
2598  */
2599 static int
2600 server_check_ipv6_support (struct HTTP_Server_Plugin *plugin)
2601 {
2602   struct GNUNET_NETWORK_Handle *desc = NULL;
2603   int res = GNUNET_NO;
2604
2605   /* Probe IPv6 support */
2606   desc = GNUNET_NETWORK_socket_create (PF_INET6, SOCK_STREAM, 0);
2607   if (NULL == desc)
2608   {
2609     if ((errno == ENOBUFS) || (errno == ENOMEM) || (errno == ENFILE) ||
2610         (errno == EACCES))
2611     {
2612       GNUNET_log_strerror (GNUNET_ERROR_TYPE_ERROR, "socket");
2613     }
2614     GNUNET_log_from (GNUNET_ERROR_TYPE_WARNING, plugin->name,
2615                      _
2616                      ("Disabling IPv6 since it is not supported on this system!\n"));
2617     res = GNUNET_NO;
2618   }
2619   else
2620   {
2621     GNUNET_break (GNUNET_OK == GNUNET_NETWORK_socket_close (desc));
2622     desc = NULL;
2623     res = GNUNET_YES;
2624   }
2625   GNUNET_log_from (GNUNET_ERROR_TYPE_DEBUG, plugin->name,
2626                    "Testing IPv6 on this system: %s\n",
2627                    (res == GNUNET_YES) ? "successful" : "failed");
2628   return res;
2629 }
2630
2631
2632 /**
2633  * Notify server about our external hostname
2634  *
2635  * @param cls plugin
2636  * @param tc task context (unused)
2637  */
2638 static void
2639 server_notify_external_hostname (void *cls, const struct GNUNET_SCHEDULER_TaskContext *tc)
2640 {
2641   struct HTTP_Server_Plugin *plugin = cls;
2642   unsigned int urlen;
2643   char *url;
2644
2645   plugin->notify_ext_task = GNUNET_SCHEDULER_NO_TASK;
2646   if (0 != (tc->reason & GNUNET_SCHEDULER_REASON_SHUTDOWN))
2647     return;
2648
2649   GNUNET_asprintf(&url, "%s://%s", plugin->protocol, plugin->external_hostname);
2650
2651   urlen = strlen (url) + 1;
2652   plugin->ext_addr = GNUNET_malloc (sizeof (struct HttpAddress) + urlen);
2653   plugin->ext_addr->options = htonl(plugin->options);
2654   plugin->ext_addr->urlen = htonl (urlen);
2655   plugin->ext_addr_len = sizeof (struct HttpAddress) + urlen;
2656   memcpy (&plugin->ext_addr[1], url, urlen);
2657   GNUNET_free (url);
2658   GNUNET_log_from (GNUNET_ERROR_TYPE_DEBUG, plugin->name,
2659                    "Notifying transport about external hostname address `%s'\n", plugin->external_hostname);
2660
2661 #if BUILD_HTTPS
2662   if (GNUNET_YES == plugin->verify_external_hostname)
2663     GNUNET_log_from (GNUNET_ERROR_TYPE_INFO, plugin->name,
2664                      "Enabling SSL verification for external hostname address `%s'\n", plugin->external_hostname);
2665   plugin->env->notify_address (plugin->env->cls, GNUNET_YES,
2666                                plugin->ext_addr, plugin->ext_addr_len,
2667                                "https_client");
2668 #else
2669   plugin->env->notify_address (plugin->env->cls, GNUNET_YES,
2670                                plugin->ext_addr, plugin->ext_addr_len,
2671                                "http_client");
2672 #endif
2673 }
2674
2675
2676 /**
2677  * Configure the plugin
2678  *
2679  * @param plugin plugin handle
2680  * @return GNUNET_OK on success, GNUNET_SYSERR on failure
2681  */
2682 static int
2683 server_configure_plugin (struct HTTP_Server_Plugin *plugin)
2684 {
2685   unsigned long long port;
2686   unsigned long long max_connections;
2687   char *bind4_address = NULL;
2688   char *bind6_address = NULL;
2689   char *eh_tmp = NULL;
2690   int external_hostname_use_port;
2691
2692   /* Use IPv4? */
2693   if (GNUNET_CONFIGURATION_have_value
2694       (plugin->env->cfg, plugin->name, "USE_IPv4"))
2695   {
2696     plugin->use_ipv4 =
2697         GNUNET_CONFIGURATION_get_value_yesno (plugin->env->cfg, plugin->name,
2698                                               "USE_IPv4");
2699   }
2700   else
2701     plugin->use_ipv4 = GNUNET_YES;
2702   GNUNET_log_from (GNUNET_ERROR_TYPE_DEBUG, plugin->name,
2703                    _("IPv4 support is %s\n"),
2704                    (plugin->use_ipv4 == GNUNET_YES) ? "enabled" : "disabled");
2705
2706   /* Use IPv6? */
2707   if (GNUNET_CONFIGURATION_have_value
2708       (plugin->env->cfg, plugin->name, "USE_IPv6"))
2709   {
2710     plugin->use_ipv6 =
2711         GNUNET_CONFIGURATION_get_value_yesno (plugin->env->cfg, plugin->name,
2712                                               "USE_IPv6");
2713   }
2714   else
2715     plugin->use_ipv6 = GNUNET_YES;
2716   GNUNET_log_from (GNUNET_ERROR_TYPE_DEBUG, plugin->name,
2717                    _("IPv6 support is %s\n"),
2718                    (plugin->use_ipv6 == GNUNET_YES) ? "enabled" : "disabled");
2719
2720   if ((plugin->use_ipv4 == GNUNET_NO) && (plugin->use_ipv6 == GNUNET_NO))
2721   {
2722     GNUNET_log_from (GNUNET_ERROR_TYPE_ERROR, plugin->name,
2723                      _
2724                      ("Neither IPv4 nor IPv6 are enabled! Fix in configuration\n"),
2725                      plugin->name);
2726     return GNUNET_SYSERR;
2727   }
2728
2729   /* Reading port number from config file */
2730   if ((GNUNET_OK !=
2731        GNUNET_CONFIGURATION_get_value_number (plugin->env->cfg, plugin->name,
2732                                               "PORT", &port)) || (port > 65535))
2733   {
2734     GNUNET_log_from (GNUNET_ERROR_TYPE_ERROR, plugin->name,
2735                      _("Port is required! Fix in configuration\n"),
2736                      plugin->name);
2737     return GNUNET_SYSERR;
2738   }
2739   plugin->port = port;
2740
2741   GNUNET_log_from (GNUNET_ERROR_TYPE_INFO, plugin->name,
2742                    _("Using port %u\n"), plugin->port);
2743
2744   if ((plugin->use_ipv4 == GNUNET_YES) &&
2745       (GNUNET_YES == GNUNET_CONFIGURATION_get_value_string (plugin->env->cfg,
2746                           plugin->name, "BINDTO", &bind4_address)))
2747   {
2748     GNUNET_log_from (GNUNET_ERROR_TYPE_DEBUG, plugin->name,
2749                      "Binding %s plugin to specific IPv4 address: `%s'\n",
2750                      plugin->protocol, bind4_address);
2751     plugin->server_addr_v4 = GNUNET_malloc (sizeof (struct sockaddr_in));
2752     if (1 != inet_pton (AF_INET, bind4_address,
2753                         &plugin->server_addr_v4->sin_addr))
2754     {
2755         GNUNET_log_from (GNUNET_ERROR_TYPE_ERROR, plugin->name,
2756                          _
2757                          ("Specific IPv4 address `%s' in configuration file is invalid!\n"),
2758                          bind4_address);
2759       GNUNET_free (bind4_address);
2760       GNUNET_free (plugin->server_addr_v4);
2761       plugin->server_addr_v4 = NULL;
2762       return GNUNET_SYSERR;
2763     }
2764     else
2765     {
2766       GNUNET_log_from (GNUNET_ERROR_TYPE_DEBUG, plugin->name,
2767                          _("Binding to IPv4 address %s\n"), bind4_address);
2768       plugin->server_addr_v4->sin_family = AF_INET;
2769       plugin->server_addr_v4->sin_port = htons (plugin->port);
2770     }
2771     GNUNET_free (bind4_address);
2772   }
2773
2774   if ((plugin->use_ipv6 == GNUNET_YES) &&
2775       (GNUNET_YES ==
2776        GNUNET_CONFIGURATION_get_value_string (plugin->env->cfg, plugin->name,
2777                                               "BINDTO6", &bind6_address)))
2778   {
2779     GNUNET_log_from (GNUNET_ERROR_TYPE_DEBUG, plugin->name,
2780                      "Binding %s plugin to specific IPv6 address: `%s'\n",
2781                      plugin->protocol, bind6_address);
2782     plugin->server_addr_v6 = GNUNET_malloc (sizeof (struct sockaddr_in6));
2783     if (1 !=
2784         inet_pton (AF_INET6, bind6_address, &plugin->server_addr_v6->sin6_addr))
2785     {
2786       GNUNET_log_from (GNUNET_ERROR_TYPE_ERROR, plugin->name,
2787                        _
2788                        ("Specific IPv6 address `%s' in configuration file is invalid!\n"),
2789                        bind6_address);
2790       GNUNET_free (bind6_address);
2791       GNUNET_free (plugin->server_addr_v6);
2792       plugin->server_addr_v6 = NULL;
2793       return GNUNET_SYSERR;
2794     }
2795     else
2796     {
2797       GNUNET_log_from (GNUNET_ERROR_TYPE_DEBUG, plugin->name,
2798                          _("Binding to IPv6 address %s\n"), bind6_address);
2799       plugin->server_addr_v6->sin6_family = AF_INET6;
2800       plugin->server_addr_v6->sin6_port = htons (plugin->port);
2801     }
2802     GNUNET_free (bind6_address);
2803   }
2804
2805   plugin->verify_external_hostname = GNUNET_NO;
2806 #if BUILD_HTTPS
2807   plugin->verify_external_hostname = GNUNET_CONFIGURATION_get_value_yesno (plugin->env->cfg, plugin->name,
2808                                                                                                                                                                 "VERIFY_EXTERNAL_HOSTNAME");
2809   if (GNUNET_SYSERR == plugin->verify_external_hostname)
2810         plugin->verify_external_hostname = GNUNET_NO;
2811   if (GNUNET_YES == plugin->verify_external_hostname)
2812         plugin->options |= HTTP_OPTIONS_VERIFY_CERTIFICATE;
2813 #endif
2814   external_hostname_use_port = GNUNET_CONFIGURATION_get_value_yesno (plugin->env->cfg, plugin->name,
2815                                                                                                                                                                 "EXTERNAL_HOSTNAME_USE_PORT");
2816   if (GNUNET_SYSERR == external_hostname_use_port)
2817         external_hostname_use_port = GNUNET_NO;
2818
2819
2820   if (GNUNET_YES == GNUNET_CONFIGURATION_get_value_string (plugin->env->cfg, plugin->name,
2821                                               "EXTERNAL_HOSTNAME", &eh_tmp))
2822   {
2823       char * tmp = NULL;
2824       char * pos = NULL;
2825       char * pos_url = NULL;
2826
2827       if (NULL != strstr(eh_tmp, "://"))
2828       {
2829           tmp = &strstr(eh_tmp, "://")[3];
2830       }
2831       else
2832                 tmp = eh_tmp;
2833
2834       if (GNUNET_YES == external_hostname_use_port)
2835       {
2836         if ( (strlen (tmp) > 1) && (NULL != (pos = strchr(tmp, '/'))) )
2837         {
2838                 pos_url = pos + 1;
2839                 pos[0] = '\0';
2840                 GNUNET_asprintf (&plugin->external_hostname, "%s:%u/%s", tmp, (uint16_t) port, (NULL == pos_url) ? "" : pos_url);
2841         }
2842         else
2843                 GNUNET_asprintf (&plugin->external_hostname, "%s:%u", tmp, (uint16_t) port);
2844       }
2845       else
2846         plugin->external_hostname = GNUNET_strdup (tmp);
2847       GNUNET_free (eh_tmp);
2848
2849       GNUNET_log_from (GNUNET_ERROR_TYPE_INFO, plugin->name,
2850                        _("Using external hostname `%s'\n"), plugin->external_hostname);
2851       plugin->notify_ext_task = GNUNET_SCHEDULER_add_now (&server_notify_external_hostname, plugin);
2852
2853       /* Use only configured external hostname */
2854       if (GNUNET_CONFIGURATION_have_value
2855           (plugin->env->cfg, plugin->name, "EXTERNAL_HOSTNAME_ONLY"))
2856       {
2857         plugin->external_only =
2858             GNUNET_CONFIGURATION_get_value_yesno (plugin->env->cfg, plugin->name,
2859                                                   "EXTERNAL_HOSTNAME_ONLY");
2860       }
2861       else
2862         plugin->external_only = GNUNET_NO;
2863
2864       if (GNUNET_YES == plugin->external_only)
2865         GNUNET_log_from (GNUNET_ERROR_TYPE_DEBUG, plugin->name,
2866                          _("Notifying transport only about hostname `%s'\n"), plugin->external_hostname);
2867   }
2868   else
2869     GNUNET_log_from (GNUNET_ERROR_TYPE_DEBUG, plugin->name,
2870                      "No external hostname configured\n");
2871
2872   /* Optional parameters */
2873   if (GNUNET_OK != GNUNET_CONFIGURATION_get_value_number (plugin->env->cfg,
2874                       plugin->name,
2875                       "MAX_CONNECTIONS", &max_connections))
2876     max_connections = 128;
2877   plugin->max_connections = max_connections;
2878
2879   GNUNET_log_from (GNUNET_ERROR_TYPE_DEBUG, plugin->name,
2880                    _("Maximum number of connections is %u\n"),
2881                    plugin->max_connections);
2882
2883
2884   plugin->peer_id_length = strlen (GNUNET_i2s_full (plugin->env->my_identity));
2885
2886   return GNUNET_OK;
2887 }
2888
2889
2890 /**
2891  * Session was idle, so disconnect it
2892  *
2893  * @param cls the session
2894  * @param tc task context
2895  */
2896 static void
2897 server_session_timeout (void *cls, const struct GNUNET_SCHEDULER_TaskContext *tc)
2898 {
2899   GNUNET_assert (NULL != cls);
2900   struct Session *s = cls;
2901
2902   s->timeout_task = GNUNET_SCHEDULER_NO_TASK;
2903   GNUNET_log (TIMEOUT_LOG,
2904               "Session %p was idle for %s, disconnecting\n",
2905               s, 
2906               GNUNET_STRINGS_relative_time_to_string (SERVER_SESSION_TIMEOUT,
2907                                                       GNUNET_YES));
2908
2909   /* call session destroy function */
2910  GNUNET_assert (GNUNET_OK == server_disconnect (s));
2911 }
2912
2913
2914 /**
2915 * Start session timeout for session s
2916 *
2917 * @param s the session
2918 */
2919 static void
2920 server_start_session_timeout (struct Session *s)
2921 {
2922  GNUNET_assert (NULL != s);
2923  GNUNET_assert (GNUNET_SCHEDULER_NO_TASK == s->timeout_task);
2924  s->timeout_task =  GNUNET_SCHEDULER_add_delayed (SERVER_SESSION_TIMEOUT,
2925                                                   &server_session_timeout,
2926                                                   s);
2927  GNUNET_log (TIMEOUT_LOG,
2928              "Timeout for session %p set to %s\n",
2929              s,
2930              GNUNET_STRINGS_relative_time_to_string (SERVER_SESSION_TIMEOUT,
2931                                                      GNUNET_YES));
2932 }
2933
2934
2935 /**
2936 * Increment session timeout due to activity session s
2937 *
2938 * @param s the session
2939 */
2940 static void
2941 server_reschedule_session_timeout (struct Session *s)
2942 {
2943  GNUNET_assert (NULL != s);
2944  GNUNET_assert (GNUNET_SCHEDULER_NO_TASK != s->timeout_task);
2945
2946  GNUNET_SCHEDULER_cancel (s->timeout_task);
2947  s->timeout_task =  GNUNET_SCHEDULER_add_delayed (SERVER_SESSION_TIMEOUT,
2948                                                   &server_session_timeout,
2949                                                   s);
2950  GNUNET_log (TIMEOUT_LOG,
2951              "Timeout rescheduled for session %p set to %s\n",
2952              s,
2953              GNUNET_STRINGS_relative_time_to_string (SERVER_SESSION_TIMEOUT,
2954                                                      GNUNET_YES));
2955 }
2956
2957
2958 /**
2959  * Exit point from the plugin.
2960  *
2961  * @param cls api
2962  * @return NULL
2963  */
2964 void *
2965 LIBGNUNET_PLUGIN_TRANSPORT_DONE (void *cls)
2966 {
2967   struct GNUNET_TRANSPORT_PluginFunctions *api = cls;
2968   struct HTTP_Server_Plugin *plugin = api->cls;
2969   struct Session *pos;
2970   struct Session *next;
2971
2972   if (NULL == api->cls)
2973   {
2974     /* Free for stub mode */
2975     GNUNET_free (api);
2976     return NULL;
2977   }
2978   plugin->in_shutdown = GNUNET_YES;
2979   GNUNET_log_from (GNUNET_ERROR_TYPE_DEBUG, plugin->name,
2980                    _("Shutting down plugin `%s'\n"),
2981                    plugin->name);
2982
2983   if (GNUNET_SCHEDULER_NO_TASK != plugin->notify_ext_task)
2984   {
2985       GNUNET_SCHEDULER_cancel (plugin->notify_ext_task);
2986       plugin->notify_ext_task = GNUNET_SCHEDULER_NO_TASK;
2987   }
2988
2989   if (NULL != plugin->ext_addr)
2990   {
2991       GNUNET_log_from (GNUNET_ERROR_TYPE_DEBUG, plugin->name,
2992                        "Notifying transport to remove address `%s'\n",
2993                        http_common_plugin_address_to_string (NULL,
2994                                   p->protocol,
2995                            plugin->ext_addr,
2996                            plugin->ext_addr_len));
2997 #if BUILD_HTTPS
2998       plugin->env->notify_address (plugin->env->cls,
2999                                    GNUNET_NO,
3000                                    plugin->ext_addr,
3001                                    plugin->ext_addr_len,
3002                                    "https_client");
3003 #else
3004   plugin->env->notify_address (plugin->env->cls,
3005                                GNUNET_NO,
3006                                plugin->ext_addr,
3007                                plugin->ext_addr_len,
3008                                "http_client");
3009 #endif
3010
3011   }
3012
3013   /* Stop to report addresses to transport service */
3014   server_stop_report_addresses (plugin);
3015   server_stop (plugin);
3016   next = plugin->head;
3017   while (NULL != (pos = next))
3018   {
3019       next = pos->next;
3020       GNUNET_log_from (GNUNET_ERROR_TYPE_DEBUG, plugin->name,
3021                        "Removing left over session %p\n", pos);
3022
3023       if ((GNUNET_YES == pos->session_passed) && (GNUNET_NO == pos->session_ended))
3024       {
3025         /* Notify transport immediately that this session is invalid */
3026         pos->session_ended = GNUNET_YES;
3027         plugin->env->session_end (plugin->env->cls, &pos->target, pos);
3028       }
3029
3030       server_delete_session (pos);
3031   }
3032
3033   /* Clean up */
3034   GNUNET_free_non_null (plugin->external_hostname);
3035   GNUNET_free_non_null (plugin->ext_addr);
3036   GNUNET_free_non_null (plugin->server_addr_v4);
3037   GNUNET_free_non_null (plugin->server_addr_v6);
3038
3039   GNUNET_log_from (GNUNET_ERROR_TYPE_DEBUG, plugin->name,
3040                    _("Shutdown for plugin `%s' complete\n"),
3041                    plugin->name);
3042
3043   GNUNET_free (plugin);
3044   GNUNET_free (api);
3045   return NULL;
3046 }
3047
3048 const char *http_plugin_address_to_string (void *cls,
3049                                            const void *addr,
3050                                            size_t addrlen)
3051 {
3052 #if BUILD_HTTPS
3053         return http_common_plugin_address_to_string (cls, PLUGIN_NAME, addr, addrlen);
3054 #else
3055         return http_common_plugin_address_to_string (cls, PLUGIN_NAME, addr, addrlen);
3056 #endif
3057
3058 }
3059
3060
3061 /**
3062  * Function obtain the network type for a session
3063  *
3064  * @param cls closure ('struct Plugin*')
3065  * @param session the session
3066  * @return the network type in HBO or GNUNET_SYSERR
3067  */
3068 static enum GNUNET_ATS_Network_Type
3069 http_server_get_network (void *cls,
3070                          struct Session *session)
3071 {
3072   GNUNET_assert (NULL != session);
3073   return ntohl (session->ats_address_network_type);
3074 }
3075
3076
3077 /**
3078  * Entry point for the plugin.
3079  *
3080  * @param cls env
3081  * @return api
3082  */
3083 void *
3084 LIBGNUNET_PLUGIN_TRANSPORT_INIT (void *cls)
3085 {
3086   struct GNUNET_TRANSPORT_PluginEnvironment *env = cls;
3087   struct GNUNET_TRANSPORT_PluginFunctions *api;
3088   struct HTTP_Server_Plugin *plugin;
3089
3090   plugin = GNUNET_malloc (sizeof (struct HTTP_Server_Plugin));
3091   plugin->env = env;
3092   p = plugin;
3093
3094   if (NULL == env->receive)
3095   {
3096     /* run in 'stub' mode (i.e. as part of gnunet-peerinfo), don't fully
3097        initialze the plugin or the API */
3098     api = GNUNET_malloc (sizeof (struct GNUNET_TRANSPORT_PluginFunctions));
3099     api->cls = NULL;
3100     api->address_to_string = &http_plugin_address_to_string;
3101     api->string_to_address = &http_common_plugin_string_to_address;
3102     api->address_pretty_printer = &http_common_plugin_address_pretty_printer;
3103     return api;
3104   }
3105
3106   api = GNUNET_malloc (sizeof (struct GNUNET_TRANSPORT_PluginFunctions));
3107   api->cls = plugin;
3108   api->send = &http_server_plugin_send;
3109   api->disconnect = &http_server_plugin_disconnect;
3110   api->check_address = &http_server_plugin_address_suggested;
3111   api->get_session = &http_server_plugin_get_session;
3112
3113   api->address_to_string = &http_plugin_address_to_string;
3114   api->string_to_address = &http_common_plugin_string_to_address;
3115   api->address_pretty_printer = &http_common_plugin_address_pretty_printer;
3116   api->get_network = &http_server_get_network;
3117
3118 #if BUILD_HTTPS
3119   plugin->name = "transport-https_server";
3120   plugin->protocol = "https";
3121 #else
3122   plugin->name = "transport-http_server";
3123   plugin->protocol = "http";
3124 #endif
3125
3126   /* Configure plugin */
3127   if (GNUNET_SYSERR == server_configure_plugin (plugin))
3128   {
3129       LIBGNUNET_PLUGIN_TRANSPORT_DONE (api);
3130       return NULL;
3131   }
3132
3133   /* Check IPv6 support */
3134   if (GNUNET_YES == plugin->use_ipv6)
3135     plugin->use_ipv6 = server_check_ipv6_support (plugin);
3136
3137   /* Report addresses to transport service */
3138   if (GNUNET_NO == plugin->external_only)
3139     server_start_report_addresses (plugin);
3140
3141   if (GNUNET_SYSERR == server_start (plugin))
3142   {
3143       LIBGNUNET_PLUGIN_TRANSPORT_DONE (api);
3144       return NULL;
3145   }
3146   return api;
3147 }
3148
3149 /* end of plugin_transport_http_server.c */