while running transport: valgrind showed memory leak due to not removed resolution...
[oweals/gnunet.git] / src / transport / plugin_transport_tcp.c
1 /*
2      This file is part of GNUnet
3      (C) 2002--2012 Christian Grothoff (and other contributing authors)
4
5      GNUnet is free software; you can redistribute it and/or modify
6      it under the terms of the GNU General Public License as published
7      by the Free Software Foundation; either version 3, or (at your
8      option) any later version.
9
10      GNUnet is distributed in the hope that it will be useful, but
11      WITHOUT ANY WARRANTY; without even the implied warranty of
12      MERCHANTABILITY or FITNESS FOR A PARTICULAR PURPOSE.  See the GNU
13      General Public License for more details.
14
15      You should have received a copy of the GNU General Public License
16      along with GNUnet; see the file COPYING.  If not, write to the
17      Free Software Foundation, Inc., 59 Temple Place - Suite 330,
18      Boston, MA 02111-1307, USA.
19 */
20 /**
21  * @file transport/plugin_transport_tcp.c
22  * @brief Implementation of the TCP transport service
23  * @author Christian Grothoff
24  */
25 #include "platform.h"
26 #include "gnunet_hello_lib.h"
27 #include "gnunet_constants.h"
28 #include "gnunet_connection_lib.h"
29 #include "gnunet_container_lib.h"
30 #include "gnunet_nat_lib.h"
31 #include "gnunet_os_lib.h"
32 #include "gnunet_protocols.h"
33 #include "gnunet_resolver_service.h"
34 #include "gnunet_server_lib.h"
35 #include "gnunet_service_lib.h"
36 #include "gnunet_signatures.h"
37 #include "gnunet_statistics_service.h"
38 #include "gnunet_transport_service.h"
39 #include "gnunet_transport_plugin.h"
40 #include "transport.h"
41
42 #define LOG(kind,...) GNUNET_log_from (kind, "transport-tcp",__VA_ARGS__)
43
44 #define PLUGIN_NAME "tcp"
45
46 /**
47  * How long until we give up on establishing an NAT connection?
48  * Must be > 4 RTT
49  */
50 #define NAT_TIMEOUT GNUNET_TIME_relative_multiply (GNUNET_TIME_UNIT_SECONDS, 10)
51
52
53 GNUNET_NETWORK_STRUCT_BEGIN
54
55 /**
56  * Address options
57  */
58 static uint32_t myoptions;
59
60 /**
61  * Initial handshake message for a session.
62  */
63 struct WelcomeMessage
64 {
65   /**
66    * Type is GNUNET_MESSAGE_TYPE_TRANSPORT_TCP_WELCOME.
67    */
68   struct GNUNET_MessageHeader header;
69
70   /**
71    * Identity of the node connecting (TCP client)
72    */
73   struct GNUNET_PeerIdentity clientIdentity;
74
75 };
76
77
78 /**
79  * Basically a WELCOME message, but with the purpose
80  * of giving the waiting peer a client handle to use
81  */
82 struct TCP_NAT_ProbeMessage
83 {
84   /**
85    * Type is GNUNET_MESSAGE_TYPE_TRANSPORT_TCP_NAT_PROBE.
86    */
87   struct GNUNET_MessageHeader header;
88
89   /**
90    * Identity of the sender of the message.
91    */
92   struct GNUNET_PeerIdentity clientIdentity;
93
94 };
95 GNUNET_NETWORK_STRUCT_END
96
97 /**
98  * Context for sending a NAT probe via TCP.
99  */
100 struct TCPProbeContext
101 {
102
103   /**
104    * Active probes are kept in a DLL.
105    */
106   struct TCPProbeContext *next;
107
108   /**
109    * Active probes are kept in a DLL.
110    */
111   struct TCPProbeContext *prev;
112
113   /**
114    * Probe connection.
115    */
116   struct GNUNET_CONNECTION_Handle *sock;
117
118   /**
119    * Message to be sent.
120    */
121   struct TCP_NAT_ProbeMessage message;
122
123   /**
124    * Handle to the transmission.
125    */
126   struct GNUNET_CONNECTION_TransmitHandle *transmit_handle;
127
128   /**
129    * Transport plugin handle.
130    */
131   struct Plugin *plugin;
132 };
133
134
135 GNUNET_NETWORK_STRUCT_BEGIN
136
137 /**
138  * Network format for IPv4 addresses.
139  */
140 struct IPv4TcpAddress
141 {
142         /**
143          * Optional options and flags for this address
144          */
145         uint32_t options;
146
147   /**
148    * IPv4 address, in network byte order.
149    */
150   uint32_t ipv4_addr GNUNET_PACKED;
151
152   /**
153    * Port number, in network byte order.
154    */
155   uint16_t t4_port GNUNET_PACKED;
156
157 };
158
159
160 /**
161  * Network format for IPv6 addresses.
162  */
163 struct IPv6TcpAddress
164 {
165         /**
166          * Optional flags for this address
167          */
168         uint32_t options;
169
170   /**
171    * IPv6 address.
172    */
173   struct in6_addr ipv6_addr GNUNET_PACKED;
174
175   /**
176    * Port number, in network byte order.
177    */
178   uint16_t t6_port GNUNET_PACKED;
179
180 };
181 GNUNET_NETWORK_STRUCT_END
182
183 /**
184  * Encapsulation of all of the state of the plugin.
185  */
186 struct Plugin;
187
188
189 /**
190  * Information kept for each message that is yet to
191  * be transmitted.
192  */
193 struct PendingMessage
194 {
195
196   /**
197    * This is a doubly-linked list.
198    */
199   struct PendingMessage *next;
200
201   /**
202    * This is a doubly-linked list.
203    */
204   struct PendingMessage *prev;
205
206   /**
207    * The pending message
208    */
209   const char *msg;
210
211   /**
212    * Continuation function to call once the message
213    * has been sent.  Can be NULL if there is no
214    * continuation to call.
215    */
216   GNUNET_TRANSPORT_TransmitContinuation transmit_cont;
217
218   /**
219    * Closure for transmit_cont.
220    */
221   void *transmit_cont_cls;
222
223   /**
224    * Timeout value for the pending message.
225    */
226   struct GNUNET_TIME_Absolute timeout;
227
228   /**
229    * So that the gnunet-service-transport can group messages together,
230    * these pending messages need to accept a message buffer and size
231    * instead of just a GNUNET_MessageHeader.
232    */
233   size_t message_size;
234
235 };
236
237
238 /**
239  * Session handle for TCP connections.
240  */
241 struct Session
242 {
243   /**
244    * To whom are we talking to (set to our identity
245    * if we are still waiting for the welcome message)
246    */
247   struct GNUNET_PeerIdentity target;
248
249   /**
250    * API requirement.
251    */
252   struct SessionHeader header;
253
254   /**
255    * Pointer to the global plugin struct.
256    */
257   struct Plugin *plugin;
258
259   /**
260    * The client (used to identify this connection)
261    */
262   struct GNUNET_SERVER_Client *client;
263
264   /**
265    * Task cleaning up a NAT client connection establishment attempt;
266    */
267   GNUNET_SCHEDULER_TaskIdentifier nat_connection_timeout;
268
269   /**
270    * Messages currently pending for transmission
271    * to this peer, if any.
272    */
273   struct PendingMessage *pending_messages_head;
274
275   /**
276    * Messages currently pending for transmission
277    * to this peer, if any.
278    */
279   struct PendingMessage *pending_messages_tail;
280
281   /**
282    * Handle for pending transmission request.
283    */
284   struct GNUNET_SERVER_TransmitHandle *transmit_handle;
285
286   /**
287    * ID of task used to delay receiving more to throttle sender.
288    */
289   GNUNET_SCHEDULER_TaskIdentifier receive_delay_task;
290
291   /**
292    * Session timeout task
293    */
294   GNUNET_SCHEDULER_TaskIdentifier timeout_task;
295
296   /**
297    * Address of the other peer (either based on our 'connect'
298    * call or on our 'accept' call).
299    *
300    * struct IPv4TcpAddress or struct IPv6TcpAddress
301    *
302    */
303   void *addr;
304
305   /**
306    * Length of connect_addr.
307    */
308   size_t addrlen;
309
310   /**
311    * Last activity on this connection.  Used to select preferred
312    * connection.
313    */
314   struct GNUNET_TIME_Absolute last_activity;
315
316   /**
317    * Are we still expecting the welcome message? (GNUNET_YES/GNUNET_NO)
318    */
319   int expecting_welcome;
320
321   /**
322    * Was this a connection that was inbound (we accepted)? (GNUNET_YES/GNUNET_NO)
323    */
324   int inbound;
325
326   /**
327    * Was this session created using NAT traversal?
328    */
329   int is_nat;
330
331   /**
332    * ATS network type in NBO
333    */
334   uint32_t ats_address_network_type;
335 };
336
337
338 /**
339  * Encapsulation of all of the state of the plugin.
340  */
341 struct Plugin
342 {
343   /**
344    * Our environment.
345    */
346   struct GNUNET_TRANSPORT_PluginEnvironment *env;
347
348   /**
349    * The listen socket.
350    */
351   struct GNUNET_CONNECTION_Handle *lsock;
352
353   /**
354    * Our handle to the NAT module.
355    */
356   struct GNUNET_NAT_Handle *nat;
357
358   /**
359    * Map from peer identities to sessions for the given peer.
360    */
361   struct GNUNET_CONTAINER_MultiHashMap *sessionmap;
362
363   /**
364    * Handle to the network service.
365    */
366   struct GNUNET_SERVICE_Context *service;
367
368   /**
369    * Handle to the server for this service.
370    */
371   struct GNUNET_SERVER_Handle *server;
372
373   /**
374    * Copy of the handler array where the closures are
375    * set to this struct's instance.
376    */
377   struct GNUNET_SERVER_MessageHandler *handlers;
378
379   /**
380    * Map of peers we have tried to contact behind a NAT
381    */
382   struct GNUNET_CONTAINER_MultiHashMap *nat_wait_conns;
383
384   /**
385    * List of active TCP probes.
386    */
387   struct TCPProbeContext *probe_head;
388
389   /**
390    * List of active TCP probes.
391    */
392   struct TCPProbeContext *probe_tail;
393
394   /**
395    * Handle for (DYN)DNS lookup of our external IP.
396    */
397   struct GNUNET_RESOLVER_RequestHandle *ext_dns;
398
399   /**
400    * How many more TCP sessions are we allowed to open right now?
401    */
402   unsigned long long max_connections;
403
404   /**
405    * How many more TCP sessions do we have right now?
406    */
407   unsigned long long cur_connections;
408
409   /**
410    * ID of task used to update our addresses when one expires.
411    */
412   GNUNET_SCHEDULER_TaskIdentifier address_update_task;
413
414   /**
415    * Port that we are actually listening on.
416    */
417   uint16_t open_port;
418
419   /**
420    * Port that the user said we would have visible to the
421    * rest of the world.
422    */
423   uint16_t adv_port;
424
425 };
426
427
428 /**
429  * Start session timeout
430  */
431 static void
432 start_session_timeout (struct Session *s);
433
434
435 /**
436  * Increment session timeout due to activity
437  */
438 static void
439 reschedule_session_timeout (struct Session *s);
440
441
442 /**
443  * Cancel timeout
444  */
445 static void
446 stop_session_timeout (struct Session *s);
447
448
449 /* DEBUG CODE */
450 static const char *
451 tcp_address_to_string (void *cls, const void *addr, size_t addrlen);
452
453
454 static unsigned int sessions;
455
456
457 static void 
458 inc_sessions (struct Plugin *plugin, struct Session *session, int line)
459 {
460   sessions++;
461   unsigned int size = GNUNET_CONTAINER_multihashmap_size(plugin->sessionmap);
462   if (sessions != size)
463     LOG (GNUNET_ERROR_TYPE_DEBUG, "Inconsistent sessions %u <-> session map size: %u\n",
464         sessions, size);
465   LOG (GNUNET_ERROR_TYPE_DEBUG, "%4i Session increased to %u (session map size: %u): `%s' `%s'\n",
466       line,
467       sessions,
468       size,
469       GNUNET_i2s (&session->target),
470       tcp_address_to_string (NULL, session->addr, session->addrlen));
471 }
472
473
474 static void 
475 dec_sessions (struct Plugin *plugin, struct Session *session, int line)
476 {
477   GNUNET_assert (sessions > 0);
478   unsigned int size = GNUNET_CONTAINER_multihashmap_size(plugin->sessionmap);
479   sessions--;
480   if (sessions != size)
481     LOG (GNUNET_ERROR_TYPE_DEBUG, "Inconsistent sessions %u <-> session map size: %u\n",
482       sessions, size);
483   LOG (GNUNET_ERROR_TYPE_DEBUG, "%4i Session decreased to %u (session map size: %u): `%s' `%s'\n",
484       line,
485       sessions,
486       size,
487       GNUNET_i2s (&session->target),
488       tcp_address_to_string (NULL, session->addr, session->addrlen));
489 }
490 /* DEBUG CODE */
491
492
493 /**
494  * Function to check if an inbound connection is acceptable.
495  * Mostly used to limit the total number of open connections
496  * we can have.
497  *
498  * @param cls the 'struct Plugin'
499  * @param ucred credentials, if available, otherwise NULL
500  * @param addr address
501  * @param addrlen length of address
502  * @return GNUNET_YES to allow, GNUNET_NO to deny, GNUNET_SYSERR
503  *   for unknown address family (will be denied).
504  */
505 static int
506 plugin_tcp_access_check (void *cls,
507                          const struct GNUNET_CONNECTION_Credentials *ucred,
508                          const struct sockaddr *addr, socklen_t addrlen)
509 {
510   struct Plugin *plugin = cls;
511   LOG (GNUNET_ERROR_TYPE_DEBUG,
512        "Accepting new incoming TCP connection from `%s'\n",
513        GNUNET_a2s (addr, addrlen));
514   if (plugin->cur_connections >= plugin->max_connections)
515     return GNUNET_NO;
516   plugin->cur_connections ++;
517   return GNUNET_YES;
518 }
519
520
521 /**
522  * Our external IP address/port mapping has changed.
523  *
524  * @param cls closure, the 'struct LocalAddrList'
525  * @param add_remove GNUNET_YES to mean the new public IP address, GNUNET_NO to mean
526  *     the previous (now invalid) one
527  * @param addr either the previous or the new public IP address
528  * @param addrlen actual lenght of the address
529  */
530 static void
531 tcp_nat_port_map_callback (void *cls, int add_remove,
532                            const struct sockaddr *addr, socklen_t addrlen)
533 {
534   struct Plugin *plugin = cls;
535   struct IPv4TcpAddress t4;
536   struct IPv6TcpAddress t6;
537   void *arg;
538   size_t args;
539
540   LOG (GNUNET_ERROR_TYPE_INFO,
541        "NAT notification to %s address `%s'\n",
542        (GNUNET_YES == add_remove) ? "add" : "remove",
543        GNUNET_a2s (addr, addrlen));
544   /* convert 'addr' to our internal format */
545   switch (addr->sa_family)
546   {
547   case AF_INET:
548     GNUNET_assert (addrlen == sizeof (struct sockaddr_in));
549     memset (&t4,0, sizeof (t4));
550     t4.options = htonl (myoptions);
551     t4.ipv4_addr = ((struct sockaddr_in *) addr)->sin_addr.s_addr;
552     t4.t4_port = ((struct sockaddr_in *) addr)->sin_port;
553     arg = &t4;
554     args = sizeof (t4);
555     break;
556   case AF_INET6:
557     GNUNET_assert (addrlen == sizeof (struct sockaddr_in6));
558     memset (&t6, 0, sizeof (t6));
559     memcpy (&t6.ipv6_addr, &((struct sockaddr_in6 *) addr)->sin6_addr,
560             sizeof (struct in6_addr));
561     t6.options = htonl (myoptions);
562     t6.t6_port = ((struct sockaddr_in6 *) addr)->sin6_port;
563     arg = &t6;
564     args = sizeof (t6);
565     break;
566   default:
567     GNUNET_break (0);
568     return;
569   }
570   /* modify our published address list */
571   plugin->env->notify_address (plugin->env->cls, add_remove, arg, args, "tcp");
572 }
573
574
575 /**
576  * Function called for a quick conversion of the binary address to
577  * a numeric address.  Note that the caller must not free the
578  * address and that the next call to this function is allowed
579  * to override the address again.
580  *
581  * @param cls closure ('struct Plugin*')
582  * @param addr binary address
583  * @param addrlen length of the address
584  * @return string representing the same address
585  */
586 static const char *
587 tcp_address_to_string (void *cls, const void *addr, size_t addrlen)
588 {
589   static char rbuf[INET6_ADDRSTRLEN + 12];
590   char buf[INET6_ADDRSTRLEN];
591   const void *sb;
592   struct in_addr a4;
593   struct in6_addr a6;
594   const struct IPv4TcpAddress *t4;
595   const struct IPv6TcpAddress *t6;
596   int af;
597   uint16_t port;
598   uint32_t options;
599
600   options = 0;
601   switch (addrlen)
602   {
603   case sizeof (struct IPv6TcpAddress):
604     t6 = addr;
605     af = AF_INET6;
606     port = ntohs (t6->t6_port);
607     options = ntohl (t6->options);
608     memcpy (&a6, &t6->ipv6_addr, sizeof (a6));
609     sb = &a6;
610     break;
611   case sizeof (struct IPv4TcpAddress): 
612     t4 = addr;
613     af = AF_INET;
614     port = ntohs (t4->t4_port);
615     options = ntohl (t4->options);
616     memcpy (&a4, &t4->ipv4_addr, sizeof (a4));
617     sb = &a4;
618     break;
619   case 0:
620     {
621       GNUNET_snprintf (rbuf, sizeof (rbuf), "%s",
622                 TRANSPORT_SESSION_INBOUND_STRING);
623       return rbuf;
624     }
625   default:
626     LOG (GNUNET_ERROR_TYPE_WARNING,
627                 _("Unexpected address length: %u bytes\n"),
628                 (unsigned int) addrlen);
629     return NULL;
630   }
631   if (NULL == inet_ntop (af, sb, buf, INET6_ADDRSTRLEN))
632   {
633     GNUNET_log_strerror (GNUNET_ERROR_TYPE_WARNING, "inet_ntop");
634     return NULL;
635   }
636   GNUNET_snprintf (rbuf, sizeof (rbuf), (af == AF_INET6) ? "%s.%u.[%s]:%u" : "%s.%u.%s:%u",
637                    PLUGIN_NAME, options, buf, port);
638   return rbuf;
639 }
640
641
642 /**
643  * Function called to convert a string address to
644  * a binary address.
645  *
646  * @param cls closure ('struct Plugin*')
647  * @param addr string address
648  * @param addrlen length of the address
649  * @param buf location to store the buffer
650  * @param added location to store the number of bytes in the buffer.
651  *        If the function returns GNUNET_SYSERR, its contents are undefined.
652  * @return GNUNET_OK on success, GNUNET_SYSERR on failure
653  */
654 static int
655 tcp_string_to_address (void *cls, const char *addr, uint16_t addrlen,
656     void **buf, size_t *added)
657 {
658   struct sockaddr_storage socket_address;
659   char *address;
660   char *plugin;
661   char *optionstr;
662   uint32_t options;
663
664   /* Format tcp.options.address:port */
665   address = NULL;
666   plugin = NULL;
667   optionstr = NULL;
668   options = 0;
669   if ((NULL == addr) || (addrlen == 0))
670   {
671     GNUNET_break (0);
672     return GNUNET_SYSERR;
673   }
674   if ('\0' != addr[addrlen - 1])
675   {
676     GNUNET_break (0);
677     return GNUNET_SYSERR;
678   }
679   if (strlen (addr) != addrlen - 1)
680   {
681     GNUNET_break (0);
682     return GNUNET_SYSERR;
683   }
684   plugin = GNUNET_strdup (addr);
685   optionstr = strchr (plugin, '.');
686   if (NULL == optionstr)
687   {
688     GNUNET_break (0);
689     GNUNET_free (plugin);
690     return GNUNET_SYSERR;
691   }
692   optionstr[0] = '\0';
693   optionstr ++;
694   options = atol (optionstr);
695   address = strchr (optionstr, '.');
696   if (NULL == address)
697   {
698     GNUNET_break (0);
699     GNUNET_free (plugin);
700     return GNUNET_SYSERR;
701   }
702   address[0] = '\0';
703   address ++;
704
705   if (GNUNET_OK !=
706       GNUNET_STRINGS_to_address_ip (address, strlen (address),
707                                     &socket_address))
708   {
709     GNUNET_break (0);
710     GNUNET_free (plugin);
711     return GNUNET_SYSERR;
712   }
713
714   GNUNET_free (plugin);
715   switch (socket_address.ss_family)
716   {
717   case AF_INET:
718     {
719       struct IPv4TcpAddress *t4;
720       struct sockaddr_in *in4 = (struct sockaddr_in *) &socket_address;
721       t4 = GNUNET_malloc (sizeof (struct IPv4TcpAddress));
722       t4->options =  htonl (options);
723       t4->ipv4_addr = in4->sin_addr.s_addr;
724       t4->t4_port = in4->sin_port;
725       *buf = t4;
726       *added = sizeof (struct IPv4TcpAddress);
727       return GNUNET_OK;
728     }
729   case AF_INET6:  
730     {
731       struct IPv6TcpAddress *t6;
732       struct sockaddr_in6 *in6 = (struct sockaddr_in6 *) &socket_address;
733       t6 = GNUNET_malloc (sizeof (struct IPv6TcpAddress));
734       t6->options = htonl (options);
735       t6->ipv6_addr = in6->sin6_addr;
736       t6->t6_port = in6->sin6_port;
737       *buf = t6;
738       *added = sizeof (struct IPv6TcpAddress);
739       return GNUNET_OK;
740     }
741   default:
742     return GNUNET_SYSERR;
743   }
744 }
745
746
747 struct SessionClientCtx
748 {
749   const struct GNUNET_SERVER_Client *client;
750   struct Session *ret;
751 };
752
753
754 static int 
755 session_lookup_by_client_it (void *cls,
756                              const struct GNUNET_HashCode * key,
757                              void *value)
758 {
759   struct SessionClientCtx *sc_ctx = cls;
760   struct Session *s = value;
761
762   if (s->client == sc_ctx->client)
763   {
764     sc_ctx->ret = s;
765     return GNUNET_NO;
766   }
767   return GNUNET_YES;
768 }
769
770
771 /**
772  * Find the session handle for the given client.
773  *
774  * @param plugin the plugin
775  * @param client which client to find the session handle for
776  * @return NULL if no matching session exists
777  */
778 static struct Session *
779 lookup_session_by_client (struct Plugin *plugin,
780                           const struct GNUNET_SERVER_Client *client)
781 {
782   struct SessionClientCtx sc_ctx;
783
784   sc_ctx.client = client;
785   sc_ctx.ret = NULL;
786   GNUNET_CONTAINER_multihashmap_iterate (plugin->sessionmap, &session_lookup_by_client_it, &sc_ctx);
787   return sc_ctx.ret;
788 }
789
790
791 /**
792  * Create a new session.  Also queues a welcome message.
793  *
794  * @param plugin the plugin
795  * @param target peer to connect to
796  * @param client client to use, reference counter must have already been increased
797  * @param is_nat this a NAT session, we should wait for a client to
798  *               connect to us from an address, then assign that to
799  *               the session
800  * @return new session object
801  */
802 static struct Session *
803 create_session (struct Plugin *plugin, const struct GNUNET_PeerIdentity *target,
804                 struct GNUNET_SERVER_Client *client, int is_nat)
805 {
806   struct Session *session;
807   struct PendingMessage *pm;
808   struct WelcomeMessage welcome;
809
810   if (GNUNET_YES != is_nat)
811     GNUNET_assert (NULL != client);
812   else
813     GNUNET_assert (NULL == client);
814
815   LOG (GNUNET_ERROR_TYPE_DEBUG, 
816        "Creating new session for peer `%4s'\n",
817        GNUNET_i2s (target));
818   session = GNUNET_malloc (sizeof (struct Session));
819   session->last_activity = GNUNET_TIME_absolute_get ();
820   session->plugin = plugin;
821   session->is_nat = is_nat;
822   session->client = client;
823   session->target = *target;
824   session->expecting_welcome = GNUNET_YES;
825   session->ats_address_network_type = htonl (GNUNET_ATS_NET_UNSPECIFIED);
826   pm = GNUNET_malloc (sizeof (struct PendingMessage) +
827                       sizeof (struct WelcomeMessage));
828   pm->msg = (const char *) &pm[1];
829   pm->message_size = sizeof (struct WelcomeMessage);
830   welcome.header.size = htons (sizeof (struct WelcomeMessage));
831   welcome.header.type = htons (GNUNET_MESSAGE_TYPE_TRANSPORT_TCP_WELCOME);
832   welcome.clientIdentity = *plugin->env->my_identity;
833   memcpy (&pm[1], &welcome, sizeof (welcome));
834   pm->timeout = GNUNET_TIME_UNIT_FOREVER_ABS;
835   GNUNET_STATISTICS_update (plugin->env->stats,
836                             gettext_noop ("# bytes currently in TCP buffers"),
837                             pm->message_size, GNUNET_NO);
838   GNUNET_CONTAINER_DLL_insert (session->pending_messages_head,
839                                session->pending_messages_tail, pm);
840   if (GNUNET_YES != is_nat)
841   {
842     GNUNET_STATISTICS_update (plugin->env->stats,
843                               gettext_noop ("# TCP sessions active"), 1,
844                               GNUNET_NO);
845   }
846   start_session_timeout (session);
847
848   return session;
849 }
850
851
852 /**
853  * If we have pending messages, ask the server to
854  * transmit them (schedule the respective tasks, etc.)
855  *
856  * @param session for which session should we do this
857  */
858 static void
859 process_pending_messages (struct Session *session);
860
861
862 /**
863  * Function called to notify a client about the socket
864  * being ready to queue more data.  "buf" will be
865  * NULL and "size" zero if the socket was closed for
866  * writing in the meantime.
867  *
868  * @param cls closure
869  * @param size number of bytes available in buf
870  * @param buf where the callee should write the message
871  * @return number of bytes written to buf
872  */
873 static size_t
874 do_transmit (void *cls, size_t size, void *buf)
875 {
876   struct Session *session = cls;
877   struct GNUNET_PeerIdentity pid;
878   struct Plugin *plugin;
879   struct PendingMessage *pos;
880   struct PendingMessage *hd;
881   struct PendingMessage *tl;
882   struct GNUNET_TIME_Absolute now;
883   char *cbuf;
884   size_t ret;
885
886   GNUNET_assert (NULL != session);
887   session->transmit_handle = NULL;
888   plugin = session->plugin;
889   if (NULL == buf)
890   {
891     LOG (GNUNET_ERROR_TYPE_DEBUG, 
892          "Timeout trying to transmit to peer `%4s', discarding message queue.\n",
893          GNUNET_i2s (&session->target));
894     /* timeout; cancel all messages that have already expired */
895     hd = NULL;
896     tl = NULL;
897     ret = 0;
898     now = GNUNET_TIME_absolute_get ();
899     while ((NULL != (pos = session->pending_messages_head)) &&
900            (pos->timeout.abs_value <= now.abs_value))
901     {
902       GNUNET_CONTAINER_DLL_remove (session->pending_messages_head,
903                                    session->pending_messages_tail, pos);
904       LOG (GNUNET_ERROR_TYPE_DEBUG,
905            "Failed to transmit %u byte message to `%4s'.\n",
906            pos->message_size, GNUNET_i2s (&session->target));
907       ret += pos->message_size;
908       GNUNET_CONTAINER_DLL_insert_after (hd, tl, tl, pos);
909     }
910     /* do this call before callbacks (so that if callbacks destroy
911      * session, they have a chance to cancel actions done by this
912      * call) */
913     process_pending_messages (session);
914     pid = session->target;
915     /* no do callbacks and do not use session again since
916      * the callbacks may abort the session */
917     while (NULL != (pos = hd))
918     {
919       GNUNET_CONTAINER_DLL_remove (hd, tl, pos);
920       if (pos->transmit_cont != NULL)
921         pos->transmit_cont (pos->transmit_cont_cls, &pid, GNUNET_SYSERR, pos->message_size, 0);
922       GNUNET_free (pos);
923     }
924     GNUNET_STATISTICS_update (plugin->env->stats,
925                               gettext_noop ("# bytes currently in TCP buffers"),
926                               -(int64_t) ret, GNUNET_NO);
927     GNUNET_STATISTICS_update (plugin->env->stats,
928                               gettext_noop
929                               ("# bytes discarded by TCP (timeout)"), ret,
930                               GNUNET_NO);
931     return 0;
932   }
933   /* copy all pending messages that would fit */
934   ret = 0;
935   cbuf = buf;
936   hd = NULL;
937   tl = NULL;
938   while (NULL != (pos = session->pending_messages_head))
939   {
940     if (ret + pos->message_size > size)
941       break;
942     GNUNET_CONTAINER_DLL_remove (session->pending_messages_head,
943                                  session->pending_messages_tail, pos);
944     GNUNET_assert (size >= pos->message_size);
945     LOG (GNUNET_ERROR_TYPE_DEBUG, 
946          "Transmitting message of type %u\n",
947          ntohs (((struct GNUNET_MessageHeader *) pos->msg)->type));
948     /* FIXME: this memcpy can be up to 7% of our total runtime */
949     memcpy (cbuf, pos->msg, pos->message_size);
950     cbuf += pos->message_size;
951     ret += pos->message_size;
952     size -= pos->message_size;
953     GNUNET_CONTAINER_DLL_insert_tail (hd, tl, pos);
954   }
955   /* schedule 'continuation' before callbacks so that callbacks that
956    * cancel everything don't cause us to use a session that no longer
957    * exists... */
958   process_pending_messages (session);
959   session->last_activity = GNUNET_TIME_absolute_get ();
960   pid = session->target;
961   /* we'll now call callbacks that may cancel the session; hence
962    * we should not use 'session' after this point */
963   while (NULL != (pos = hd))
964   {
965     GNUNET_CONTAINER_DLL_remove (hd, tl, pos);
966     if (pos->transmit_cont != NULL)
967       pos->transmit_cont (pos->transmit_cont_cls, &pid, GNUNET_OK, pos->message_size, pos->message_size); /* FIXME: include TCP overhead */
968     GNUNET_free (pos);
969   }
970   GNUNET_assert (hd == NULL);
971   GNUNET_assert (tl == NULL);
972   LOG (GNUNET_ERROR_TYPE_DEBUG, "Transmitting %u bytes\n",
973                    ret);
974   GNUNET_STATISTICS_update (plugin->env->stats,
975                             gettext_noop ("# bytes currently in TCP buffers"),
976                             -(int64_t) ret, GNUNET_NO);
977   GNUNET_STATISTICS_update (plugin->env->stats,
978                             gettext_noop ("# bytes transmitted via TCP"), ret,
979                             GNUNET_NO);
980   return ret;
981 }
982
983
984 /**
985  * If we have pending messages, ask the server to
986  * transmit them (schedule the respective tasks, etc.)
987  *
988  * @param session for which session should we do this
989  */
990 static void
991 process_pending_messages (struct Session *session)
992 {
993   struct PendingMessage *pm;
994
995   GNUNET_assert (session->client != NULL);
996   if (session->transmit_handle != NULL)
997     return;
998   if (NULL == (pm = session->pending_messages_head))
999     return;
1000
1001   session->transmit_handle =
1002       GNUNET_SERVER_notify_transmit_ready (session->client, pm->message_size,
1003                                            GNUNET_TIME_absolute_get_remaining
1004                                            (pm->timeout), &do_transmit,
1005                                            session);
1006 }
1007
1008
1009 /**
1010  * Functions with this signature are called whenever we need
1011  * to close a session due to a disconnect or failure to
1012  * establish a connection.
1013  *
1014  * @param session session to close down
1015  */
1016 static void
1017 disconnect_session (struct Session *session)
1018 {
1019   struct PendingMessage *pm;
1020   struct Plugin * plugin = session->plugin;
1021
1022   LOG (GNUNET_ERROR_TYPE_DEBUG, 
1023        "Disconnecting session of peer `%s' address `%s'\n",
1024        GNUNET_i2s (&session->target),
1025        tcp_address_to_string (NULL, session->addr, session->addrlen));
1026
1027   stop_session_timeout (session);
1028
1029   if (GNUNET_YES == GNUNET_CONTAINER_multihashmap_remove (plugin->sessionmap, &session->target.hashPubKey, session))
1030   {
1031     GNUNET_STATISTICS_update (session->plugin->env->stats,
1032                               gettext_noop ("# TCP sessions active"), -1,
1033                               GNUNET_NO);
1034     dec_sessions (plugin, session, __LINE__);
1035   }
1036   else GNUNET_assert (GNUNET_YES == GNUNET_CONTAINER_multihashmap_remove (plugin->nat_wait_conns, &session->target.hashPubKey, session));
1037
1038   /* clean up state */
1039   if (session->transmit_handle != NULL)
1040   {
1041     GNUNET_SERVER_notify_transmit_ready_cancel (session->transmit_handle);
1042     session->transmit_handle = NULL;
1043   }
1044   session->plugin->env->session_end (session->plugin->env->cls,
1045                                      &session->target, session);
1046
1047   if (GNUNET_SCHEDULER_NO_TASK != session->nat_connection_timeout)
1048   {
1049     GNUNET_SCHEDULER_cancel (session->nat_connection_timeout);
1050     session->nat_connection_timeout = GNUNET_SCHEDULER_NO_TASK;
1051   }
1052
1053   while (NULL != (pm = session->pending_messages_head))
1054   {
1055     LOG (GNUNET_ERROR_TYPE_DEBUG, 
1056          pm->transmit_cont !=
1057          NULL ? "Could not deliver message to `%4s'.\n" :
1058          "Could not deliver message to `%4s', notifying.\n",
1059          GNUNET_i2s (&session->target));
1060     GNUNET_STATISTICS_update (session->plugin->env->stats,
1061                               gettext_noop ("# bytes currently in TCP buffers"),
1062                               -(int64_t) pm->message_size, GNUNET_NO);
1063     GNUNET_STATISTICS_update (session->plugin->env->stats,
1064                               gettext_noop
1065                               ("# bytes discarded by TCP (disconnect)"),
1066                               pm->message_size, GNUNET_NO);
1067     GNUNET_CONTAINER_DLL_remove (session->pending_messages_head,
1068                                  session->pending_messages_tail, pm);
1069     if (NULL != pm->transmit_cont)
1070       pm->transmit_cont (pm->transmit_cont_cls, &session->target,
1071                          GNUNET_SYSERR, pm->message_size, 0);
1072     GNUNET_free (pm);
1073   }
1074   if (session->receive_delay_task != GNUNET_SCHEDULER_NO_TASK)
1075   {
1076     GNUNET_SCHEDULER_cancel (session->receive_delay_task);
1077     if (NULL != session->client)
1078       GNUNET_SERVER_receive_done (session->client, GNUNET_SYSERR);
1079   }
1080   if (NULL != session->client)
1081   {
1082     GNUNET_SERVER_client_disconnect (session->client);
1083     GNUNET_SERVER_client_drop (session->client);
1084     session->client = NULL;
1085   }
1086   GNUNET_free_non_null (session->addr);
1087   GNUNET_assert (NULL == session->transmit_handle);
1088   GNUNET_free (session);
1089 }
1090
1091
1092 struct FindSessionContext
1093 {
1094   struct Session *s;
1095   int res;
1096 };
1097
1098 int session_it (void *cls,
1099                const struct GNUNET_HashCode * key,
1100                void *value)
1101 {
1102   struct FindSessionContext *res = cls;
1103   if (res->s == value)
1104   {
1105     res->res = GNUNET_OK;
1106     return GNUNET_NO;
1107   }
1108   else
1109     return GNUNET_YES;
1110 }
1111
1112 int find_session (struct Plugin *plugin, struct Session *session)
1113 {
1114   struct FindSessionContext session_map_res;
1115   struct FindSessionContext nat_map_res;
1116
1117   session_map_res.s = session;
1118   session_map_res.res = GNUNET_SYSERR;
1119   GNUNET_CONTAINER_multihashmap_iterate (plugin->sessionmap, &session_it, &session_map_res);
1120
1121   nat_map_res.s = session;
1122   nat_map_res.res = GNUNET_SYSERR;
1123   GNUNET_CONTAINER_multihashmap_iterate (plugin->nat_wait_conns, &session_it, &nat_map_res);
1124
1125   if ((session_map_res.res == GNUNET_SYSERR) && (nat_map_res.res == GNUNET_SYSERR))
1126   {
1127     GNUNET_break (0);
1128     return GNUNET_SYSERR;
1129   }
1130   return GNUNET_OK;
1131 }
1132
1133
1134 /**
1135  * Function that can be used by the transport service to transmit
1136  * a message using the plugin.   Note that in the case of a
1137  * peer disconnecting, the continuation MUST be called
1138  * prior to the disconnect notification itself.  This function
1139  * will be called with this peer's HELLO message to initiate
1140  * a fresh connection to another peer.
1141  *
1142  * @param cls closure
1143  * @param session which session must be used
1144  * @param msgbuf the message to transmit
1145  * @param msgbuf_size number of bytes in 'msgbuf'
1146  * @param priority how important is the message (most plugins will
1147  *                 ignore message priority and just FIFO)
1148  * @param to how long to wait at most for the transmission (does not
1149  *                require plugins to discard the message after the timeout,
1150  *                just advisory for the desired delay; most plugins will ignore
1151  *                this as well)
1152  * @param cont continuation to call once the message has
1153  *        been transmitted (or if the transport is ready
1154  *        for the next transmission call; or if the
1155  *        peer disconnected...); can be NULL
1156  * @param cont_cls closure for cont
1157  * @return number of bytes used (on the physical network, with overheads);
1158  *         -1 on hard errors (i.e. address invalid); 0 is a legal value
1159  *         and does NOT mean that the message was not transmitted (DV)
1160  */
1161 static ssize_t
1162 tcp_plugin_send (void *cls,
1163     struct Session *session,
1164     const char *msgbuf, size_t msgbuf_size,
1165     unsigned int priority,
1166     struct GNUNET_TIME_Relative to,
1167     GNUNET_TRANSPORT_TransmitContinuation cont, void *cont_cls)
1168 {
1169   struct Plugin * plugin = cls;
1170   struct PendingMessage *pm;
1171
1172   GNUNET_assert (NULL != plugin);
1173   GNUNET_assert (NULL != session);
1174
1175   if (GNUNET_SYSERR == find_session(plugin, session))
1176   {
1177       LOG (GNUNET_ERROR_TYPE_ERROR,
1178            _("Trying to send with invalid session %p\n"));
1179       return GNUNET_SYSERR;
1180   }
1181
1182   /* create new message entry */
1183   pm = GNUNET_malloc (sizeof (struct PendingMessage) + msgbuf_size);
1184   pm->msg = (const char *) &pm[1];
1185   memcpy (&pm[1], msgbuf, msgbuf_size);
1186   pm->message_size = msgbuf_size;
1187   pm->timeout = GNUNET_TIME_relative_to_absolute (to);
1188   pm->transmit_cont = cont;
1189   pm->transmit_cont_cls = cont_cls;
1190
1191   LOG (GNUNET_ERROR_TYPE_DEBUG, 
1192        "Asked to transmit %u bytes to `%s', added message to list.\n",
1193        msgbuf_size, GNUNET_i2s (&session->target));
1194
1195   if (GNUNET_YES == GNUNET_CONTAINER_multihashmap_contains_value (plugin->sessionmap, 
1196                                                                   &session->target.hashPubKey, 
1197                                                                   session))
1198   {
1199     GNUNET_assert (session->client != NULL);
1200     reschedule_session_timeout (session);
1201     GNUNET_SERVER_client_set_timeout (session->client,
1202                                       GNUNET_CONSTANTS_IDLE_CONNECTION_TIMEOUT);
1203     GNUNET_STATISTICS_update (plugin->env->stats,
1204                               gettext_noop ("# bytes currently in TCP buffers"),
1205                               msgbuf_size, GNUNET_NO);
1206
1207     /* append pm to pending_messages list */
1208     GNUNET_CONTAINER_DLL_insert_tail (session->pending_messages_head,
1209                                       session->pending_messages_tail, pm);
1210
1211     process_pending_messages (session);
1212     return msgbuf_size;
1213   }
1214   else if (GNUNET_YES == GNUNET_CONTAINER_multihashmap_contains_value(plugin->nat_wait_conns, &session->target.hashPubKey, session))
1215   {
1216     LOG (GNUNET_ERROR_TYPE_DEBUG, 
1217          "This NAT WAIT session for peer `%s' is not yet ready!\n",
1218          GNUNET_i2s (&session->target));
1219     reschedule_session_timeout (session);
1220     GNUNET_STATISTICS_update (plugin->env->stats,
1221                               gettext_noop ("# bytes currently in TCP buffers"),
1222                               msgbuf_size, GNUNET_NO);
1223
1224     /* append pm to pending_messages list */
1225     GNUNET_CONTAINER_DLL_insert_tail (session->pending_messages_head,
1226                                       session->pending_messages_tail, pm);
1227     return msgbuf_size;
1228   }
1229   else
1230   {
1231     LOG (GNUNET_ERROR_TYPE_ERROR,
1232          "Invalid session %p\n", session);
1233     if (NULL != cont)
1234       cont (cont_cls, &session->target, GNUNET_SYSERR, pm->message_size, 0);
1235     GNUNET_break (0);
1236     GNUNET_free (pm);
1237     return GNUNET_SYSERR; /* session does not exist here */
1238   }
1239 }
1240
1241
1242 struct SessionItCtx
1243 {
1244   void *addr;
1245   size_t addrlen;
1246   struct Session *result;
1247 };
1248
1249
1250 static int 
1251 session_lookup_it (void *cls,
1252                    const struct GNUNET_HashCode *key,
1253                    void *value)
1254 {
1255   struct SessionItCtx * si_ctx = cls;
1256   struct Session * session = value;
1257 #if 0
1258   char * a1 = strdup (tcp_address_to_string(NULL, session->addr, session->addrlen));
1259   char * a2 = strdup (tcp_address_to_string(NULL, si_ctx->addr, si_ctx->addrlen));
1260   LOG (GNUNET_ERROR_TYPE_DEBUG,
1261        "Comparing: %s %u <-> %s %u\n",
1262        a1,
1263        session->addrlen,
1264        a2,
1265        si_ctx->addrlen);
1266   GNUNET_free (a1);
1267   GNUNET_free (a2);
1268 #endif
1269   if (session->addrlen != si_ctx->addrlen)
1270   {
1271     return GNUNET_YES;
1272   }
1273   if (0 != memcmp (session->addr, si_ctx->addr, si_ctx->addrlen))
1274   {
1275     return GNUNET_YES;
1276   }
1277 #if 0
1278   a1 = strdup (tcp_address_to_string(NULL, session->addr, session->addrlen));
1279   a2 = strdup (tcp_address_to_string(NULL, si_ctx->addr, si_ctx->addrlen));
1280   LOG (GNUNET_ERROR_TYPE_DEBUG,
1281        "Comparing: %s %u <-> %s %u , OK!\n",
1282        a1,
1283        session->addrlen,
1284        a2,
1285        si_ctx->addrlen);
1286   GNUNET_free (a1);
1287   GNUNET_free (a2);
1288 #endif
1289   /* Found existing session */
1290   si_ctx->result = session;
1291   return GNUNET_NO;
1292 }
1293
1294
1295 /**
1296  * Task cleaning up a NAT connection attempt after timeout
1297  */
1298 static void
1299 nat_connect_timeout (void *cls, const struct GNUNET_SCHEDULER_TaskContext *tc)
1300 {
1301   struct Session *session = cls;
1302
1303   session->nat_connection_timeout = GNUNET_SCHEDULER_NO_TASK;
1304   LOG (GNUNET_ERROR_TYPE_DEBUG,
1305        "NAT WAIT connection to `%4s' at `%s' could not be established, removing session\n",
1306        GNUNET_i2s (&session->target), tcp_address_to_string(NULL, session->addr, session->addrlen));
1307   disconnect_session (session);
1308 }
1309
1310
1311 /**
1312  * Create a new session to transmit data to the target
1313  * This session will used to send data to this peer and the plugin will
1314  * notify us by calling the env->session_end function
1315  *
1316  * @param cls closure
1317  * @param address pointer to the GNUNET_HELLO_Address
1318  * @return the session if the address is valid, NULL otherwise
1319  */
1320 static struct Session *
1321 tcp_plugin_get_session (void *cls,
1322                         const struct GNUNET_HELLO_Address *address)
1323 {
1324   struct Plugin *plugin = cls;
1325   struct Session *session = NULL;
1326   int af;
1327   const void *sb;
1328   size_t sbs;
1329   struct GNUNET_CONNECTION_Handle *sa;
1330   struct sockaddr_in a4;
1331   struct sockaddr_in6 a6;
1332   const struct IPv4TcpAddress *t4;
1333   const struct IPv6TcpAddress *t6;
1334   struct GNUNET_ATS_Information ats;
1335   unsigned int is_natd = GNUNET_NO;
1336   size_t addrlen;
1337
1338   GNUNET_assert (plugin != NULL);
1339   GNUNET_assert (address != NULL);
1340   addrlen = address->address_length;
1341   LOG (GNUNET_ERROR_TYPE_DEBUG, 
1342        "Trying to get session for `%s' address of peer `%s'\n",
1343        tcp_address_to_string(NULL, address->address, address->address_length),
1344        GNUNET_i2s (&address->peer));
1345
1346   /* look for existing session */
1347   if (GNUNET_YES == 
1348       GNUNET_CONTAINER_multihashmap_contains (plugin->sessionmap, 
1349                                               &address->peer.hashPubKey))
1350   {
1351     struct SessionItCtx si_ctx;
1352
1353     si_ctx.addr = (void *) address->address;
1354     si_ctx.addrlen = address->address_length;
1355
1356     si_ctx.result = NULL;
1357
1358     GNUNET_CONTAINER_multihashmap_get_multiple (plugin->sessionmap, 
1359                                                 &address->peer.hashPubKey, 
1360                                                 &session_lookup_it, &si_ctx);
1361     if (si_ctx.result != NULL)
1362     {
1363       session = si_ctx.result;
1364       LOG (GNUNET_ERROR_TYPE_DEBUG,
1365            "Found existing session for `%s' address `%s' session %p\n",
1366            GNUNET_i2s (&address->peer),
1367            tcp_address_to_string(NULL, address->address, address->address_length),
1368            session);
1369       return session;
1370     }
1371     LOG (GNUNET_ERROR_TYPE_DEBUG,
1372          "Existing sessions did not match address `%s' or peer `%s'\n",
1373          tcp_address_to_string(NULL, address->address, address->address_length),
1374          GNUNET_i2s (&address->peer));
1375   }
1376
1377   if (addrlen == sizeof (struct IPv6TcpAddress))
1378   {
1379     GNUNET_assert (NULL != address->address);     /* make static analysis happy */
1380     t6 = address->address;
1381     af = AF_INET6;
1382     memset (&a6, 0, sizeof (a6));
1383 #if HAVE_SOCKADDR_IN_SIN_LEN
1384     a6.sin6_len = sizeof (a6);
1385 #endif
1386     a6.sin6_family = AF_INET6;
1387     a6.sin6_port = t6->t6_port;
1388     if (t6->t6_port == 0)
1389       is_natd = GNUNET_YES;
1390     memcpy (&a6.sin6_addr, &t6->ipv6_addr, sizeof (struct in6_addr));
1391     sb = &a6;
1392     sbs = sizeof (a6);
1393   }
1394   else if (addrlen == sizeof (struct IPv4TcpAddress))
1395   {
1396     GNUNET_assert (NULL != address->address);     /* make static analysis happy */
1397     t4 = address->address;
1398     af = AF_INET;
1399     memset (&a4, 0, sizeof (a4));
1400 #if HAVE_SOCKADDR_IN_SIN_LEN
1401     a4.sin_len = sizeof (a4);
1402 #endif
1403     a4.sin_family = AF_INET;
1404     a4.sin_port = t4->t4_port;
1405     if (t4->t4_port == 0)
1406       is_natd = GNUNET_YES;
1407     a4.sin_addr.s_addr = t4->ipv4_addr;
1408     sb = &a4;
1409     sbs = sizeof (a4);
1410   }
1411   else
1412   {
1413     LOG (GNUNET_ERROR_TYPE_WARNING,
1414         _("Trying to create session for address of unexpected length %u (should be %u or %u)\n"),
1415                   addrlen, sizeof (struct IPv4TcpAddress), sizeof (struct IPv6TcpAddress));
1416     return NULL;
1417   }
1418
1419   ats = plugin->env->get_address_type (plugin->env->cls, sb ,sbs);
1420
1421   if ((is_natd == GNUNET_YES) && (addrlen == sizeof (struct IPv6TcpAddress)))
1422   {
1423     /* NAT client only works with IPv4 addresses */
1424     return NULL;
1425   }
1426
1427   if (plugin->cur_connections >= plugin->max_connections)
1428   {
1429     /* saturated */
1430     return NULL;
1431   }
1432
1433   if ((is_natd == GNUNET_YES) &&
1434       (GNUNET_YES ==
1435        GNUNET_CONTAINER_multihashmap_contains (plugin->nat_wait_conns,
1436                                                &address->peer.hashPubKey)))
1437   {
1438     /* Only do one NAT punch attempt per peer identity */
1439      return NULL;
1440   }
1441
1442   if ((is_natd == GNUNET_YES) && (NULL != plugin->nat) &&
1443       (GNUNET_NO ==
1444        GNUNET_CONTAINER_multihashmap_contains (plugin->nat_wait_conns,
1445                                                &address->peer.hashPubKey)))
1446   {
1447     LOG (GNUNET_ERROR_TYPE_DEBUG, 
1448          "Found valid IPv4 NAT address (creating session)!\n") ;
1449     session = create_session (plugin, &address->peer, NULL, GNUNET_YES);
1450     session->addrlen = 0;
1451     session->addr = NULL;
1452     session->ats_address_network_type = ats.value;
1453     session->nat_connection_timeout = GNUNET_SCHEDULER_add_delayed (NAT_TIMEOUT,
1454                                                                     &nat_connect_timeout,
1455                                                                     session);
1456     GNUNET_assert (session != NULL);
1457     GNUNET_assert (GNUNET_OK ==
1458                    GNUNET_CONTAINER_multihashmap_put (plugin->nat_wait_conns, 
1459                                                       &session->target.hashPubKey, 
1460                                                       session,
1461                                                       GNUNET_CONTAINER_MULTIHASHMAPOPTION_UNIQUE_ONLY));
1462
1463     LOG (GNUNET_ERROR_TYPE_DEBUG, 
1464          "Created NAT WAIT connection to `%4s' at `%s'\n",
1465          GNUNET_i2s (&session->target), GNUNET_a2s (sb, sbs));
1466
1467     if (GNUNET_OK == GNUNET_NAT_run_client (plugin->nat, &a4))
1468       return session;
1469     else
1470     {
1471       LOG (GNUNET_ERROR_TYPE_DEBUG, 
1472            "Running NAT client for `%4s' at `%s' failed\n",
1473            GNUNET_i2s (&session->target), GNUNET_a2s (sb, sbs));
1474       disconnect_session (session);
1475       return NULL;
1476     }
1477   }
1478
1479   /* create new outbound session */
1480   GNUNET_assert (plugin->cur_connections <= plugin->max_connections);
1481   sa = GNUNET_CONNECTION_create_from_sockaddr (af, sb, sbs);
1482   if (sa == NULL)
1483   {
1484     LOG (GNUNET_ERROR_TYPE_DEBUG, 
1485          "Failed to create connection to `%4s' at `%s'\n",
1486          GNUNET_i2s (&address->peer), GNUNET_a2s (sb, sbs));
1487     return NULL;
1488   }
1489   plugin->cur_connections++;
1490   if (plugin->cur_connections == plugin->max_connections)
1491         GNUNET_SERVER_suspend (plugin->server); /* Maximum number of connections rechead */
1492
1493   LOG (GNUNET_ERROR_TYPE_DEBUG,
1494        "Asked to transmit to `%4s', creating fresh session using address `%s'.\n",
1495        GNUNET_i2s (&address->peer), GNUNET_a2s (sb, sbs));
1496
1497   session = create_session (plugin,
1498                             &address->peer,
1499                             GNUNET_SERVER_connect_socket (plugin->server, sa),
1500                             GNUNET_NO);
1501   session->addr = GNUNET_malloc (addrlen);
1502   memcpy (session->addr, address->address, addrlen);
1503   session->addrlen = addrlen;
1504   session->ats_address_network_type = ats.value;
1505
1506   GNUNET_CONTAINER_multihashmap_put (plugin->sessionmap, 
1507                                      &session->target.hashPubKey, 
1508                                      session, GNUNET_CONTAINER_MULTIHASHMAPOPTION_MULTIPLE);
1509   inc_sessions (plugin, session, __LINE__);
1510   LOG (GNUNET_ERROR_TYPE_DEBUG,
1511        "Creating new session for `%s' address `%s' session %p\n",
1512        GNUNET_i2s (&address->peer),
1513        tcp_address_to_string(NULL, address->address, address->address_length),
1514        session);
1515   /* Send TCP Welcome */
1516   process_pending_messages (session);
1517
1518   return session;
1519 }
1520
1521
1522 static int 
1523 session_disconnect_it (void *cls,
1524                        const struct GNUNET_HashCode * key,
1525                        void *value)
1526 {
1527   struct Session *session = value;
1528
1529   GNUNET_STATISTICS_update (session->plugin->env->stats,
1530                             gettext_noop
1531                             ("# transport-service disconnect requests for TCP"),
1532                             1, GNUNET_NO);
1533   disconnect_session (session);
1534   return GNUNET_YES;
1535 }
1536
1537
1538 /**
1539  * Function that can be called to force a disconnect from the
1540  * specified neighbour.  This should also cancel all previously
1541  * scheduled transmissions.  Obviously the transmission may have been
1542  * partially completed already, which is OK.  The plugin is supposed
1543  * to close the connection (if applicable) and no longer call the
1544  * transmit continuation(s).
1545  *
1546  * Finally, plugin MUST NOT call the services's receive function to
1547  * notify the service that the connection to the specified target was
1548  * closed after a getting this call.
1549  *
1550  * @param cls closure
1551  * @param target peer for which the last transmission is
1552  *        to be cancelled
1553  */
1554 static void
1555 tcp_plugin_disconnect (void *cls, const struct GNUNET_PeerIdentity *target)
1556 {
1557   struct Plugin *plugin = cls;
1558
1559   LOG (GNUNET_ERROR_TYPE_DEBUG, 
1560        "Disconnecting peer `%4s'\n", GNUNET_i2s (target));
1561   GNUNET_CONTAINER_multihashmap_get_multiple (plugin->sessionmap, &target->hashPubKey, &session_disconnect_it, plugin);
1562   GNUNET_CONTAINER_multihashmap_get_multiple (plugin->nat_wait_conns, &target->hashPubKey, &session_disconnect_it, plugin);
1563 }
1564
1565
1566 /**
1567  * Running pretty printers: head
1568  */
1569 static struct PrettyPrinterContext *ppc_dll_head;
1570
1571 /**
1572  * Running pretty printers: tail
1573  */
1574 static struct PrettyPrinterContext *ppc_dll_tail;
1575
1576 /**
1577  * Context for address to string conversion.
1578  */
1579 struct PrettyPrinterContext
1580 {
1581         /**
1582          * DLL
1583          */
1584         struct PrettyPrinterContext *next;
1585
1586         /**
1587          * DLL
1588          */
1589         struct PrettyPrinterContext *prev;
1590
1591         /**
1592          * Timeout task
1593          */
1594         GNUNET_SCHEDULER_TaskIdentifier timeout_task;
1595
1596         /**
1597          * Resolver handle
1598          */
1599         struct GNUNET_RESOLVER_RequestHandle *resolver_handle;
1600
1601   /**
1602    * Function to call with the result.
1603    */
1604   GNUNET_TRANSPORT_AddressStringCallback asc;
1605
1606   /**
1607    * Clsoure for 'asc'.
1608    */
1609   void *asc_cls;
1610
1611   /**
1612    * Port to add after the IP address.
1613    */
1614   uint16_t port;
1615
1616   /**
1617    * IPv6 address
1618    */
1619   int ipv6;
1620
1621   /**
1622    * Options
1623    */
1624   uint32_t options;
1625 };
1626
1627
1628 void
1629 ppc_cancel_task (void *cls, const struct GNUNET_SCHEDULER_TaskContext *tc)
1630 {
1631         struct PrettyPrinterContext *ppc = cls;
1632         GNUNET_log (GNUNET_ERROR_TYPE_ERROR, "PPC %p was not removed!\n", ppc);
1633         ppc->timeout_task = GNUNET_SCHEDULER_NO_TASK;
1634         if (NULL != ppc->resolver_handle)
1635         {
1636                 GNUNET_RESOLVER_request_cancel (ppc->resolver_handle);
1637                 ppc->resolver_handle = NULL;
1638         }
1639
1640         GNUNET_CONTAINER_DLL_remove (ppc_dll_head, ppc_dll_tail, ppc);
1641         GNUNET_free (ppc);
1642 }
1643
1644
1645 /**
1646  * Append our port and forward the result.
1647  *
1648  * @param cls the 'struct PrettyPrinterContext*'
1649  * @param hostname hostname part of the address
1650  */
1651 static void
1652 append_port (void *cls, const char *hostname)
1653 {
1654   struct PrettyPrinterContext *ppc = cls;
1655   struct PrettyPrinterContext *cur;
1656   char *ret;
1657
1658   if (hostname == NULL)
1659   {
1660     ppc->asc (ppc->asc_cls, NULL);
1661     GNUNET_CONTAINER_DLL_remove (ppc_dll_head, ppc_dll_tail, ppc);
1662     GNUNET_SCHEDULER_cancel (ppc->timeout_task);
1663     ppc->timeout_task = GNUNET_SCHEDULER_NO_TASK;
1664     ppc->resolver_handle = NULL;
1665         /* GNUNET_log (GNUNET_ERROR_TYPE_ERROR, "PPC %p was removed!\n", ppc); */
1666     GNUNET_free (ppc);
1667     return;
1668   }
1669   for (cur = ppc_dll_head; (NULL != cur); cur = cur->next)
1670   {
1671         if (cur == ppc)
1672                 break;
1673   }
1674   if (NULL == cur)
1675   {
1676         GNUNET_log (GNUNET_ERROR_TYPE_ERROR, "Invalid callback for PPC %p \n", ppc);
1677         return;
1678   }
1679
1680   if (GNUNET_YES == ppc->ipv6)
1681     GNUNET_asprintf (&ret, "%s.%u.[%s]:%d", PLUGIN_NAME, ppc->options, hostname, ppc->port);
1682   else
1683     GNUNET_asprintf (&ret, "%s.%u.%s:%d", PLUGIN_NAME, ppc->options, hostname, ppc->port);
1684   ppc->asc (ppc->asc_cls, ret);
1685   GNUNET_free (ret);
1686 }
1687
1688
1689 /**
1690  * Convert the transports address to a nice, human-readable
1691  * format.
1692  *
1693  * @param cls closure
1694  * @param type name of the transport that generated the address
1695  * @param addr one of the addresses of the host, NULL for the last address
1696  *        the specific address format depends on the transport
1697  * @param addrlen length of the address
1698  * @param numeric should (IP) addresses be displayed in numeric form?
1699  * @param timeout after how long should we give up?
1700  * @param asc function to call on each string
1701  * @param asc_cls closure for asc
1702  */
1703 static void
1704 tcp_plugin_address_pretty_printer (void *cls, const char *type,
1705                                    const void *addr, size_t addrlen,
1706                                    int numeric,
1707                                    struct GNUNET_TIME_Relative timeout,
1708                                    GNUNET_TRANSPORT_AddressStringCallback asc,
1709                                    void *asc_cls)
1710 {
1711   struct PrettyPrinterContext *ppc;
1712   const void *sb;
1713   size_t sbs;
1714   struct sockaddr_in a4;
1715   struct sockaddr_in6 a6;
1716   const struct IPv4TcpAddress *t4;
1717   const struct IPv6TcpAddress *t6;
1718   uint16_t port;
1719   uint32_t options;
1720
1721
1722   options = 0;
1723   if (addrlen == sizeof (struct IPv6TcpAddress))
1724   {
1725     t6 = addr;
1726     memset (&a6, 0, sizeof (a6));
1727     a6.sin6_family = AF_INET6;
1728     a6.sin6_port = t6->t6_port;
1729     memcpy (&a6.sin6_addr, &t6->ipv6_addr, sizeof (struct in6_addr));
1730     port = ntohs (t6->t6_port);
1731     options = ntohl (t6->options);
1732     sb = &a6;
1733     sbs = sizeof (a6);
1734   }
1735   else if (addrlen == sizeof (struct IPv4TcpAddress))
1736   {
1737     t4 = addr;
1738     memset (&a4, 0, sizeof (a4));
1739     a4.sin_family = AF_INET;
1740     a4.sin_port = t4->t4_port;
1741     a4.sin_addr.s_addr = t4->ipv4_addr;
1742     port = ntohs (t4->t4_port);
1743     options = ntohl (t4->options);
1744     sb = &a4;
1745     sbs = sizeof (a4);
1746   }
1747   else if (0 == addrlen)
1748   {
1749     asc (asc_cls, TRANSPORT_SESSION_INBOUND_STRING);
1750     asc (asc_cls, NULL);
1751     return;
1752   }
1753   else
1754   {
1755     /* invalid address */
1756     GNUNET_break_op (0);
1757     asc (asc_cls, NULL);
1758     return;
1759   }
1760   ppc = GNUNET_malloc (sizeof (struct PrettyPrinterContext));
1761   if (addrlen == sizeof (struct IPv6TcpAddress))
1762     ppc->ipv6 = GNUNET_YES;
1763   else
1764     ppc->ipv6 = GNUNET_NO;
1765   ppc->asc = asc;
1766   ppc->asc_cls = asc_cls;
1767   ppc->port = port;
1768   ppc->options = options;
1769   ppc->timeout_task = GNUNET_SCHEDULER_add_delayed (GNUNET_TIME_relative_multiply(timeout, 2),
1770                 &ppc_cancel_task, ppc);
1771   GNUNET_CONTAINER_DLL_insert (ppc_dll_head, ppc_dll_tail, ppc);
1772         /* GNUNET_log (GNUNET_ERROR_TYPE_ERROR, "PPC %p was created!\n", ppc); */
1773         ppc->resolver_handle =  GNUNET_RESOLVER_hostname_get (sb, sbs, !numeric,
1774                         timeout, &append_port, ppc);
1775 }
1776
1777
1778 /**
1779  * Check if the given port is plausible (must be either our listen
1780  * port or our advertised port), or any port if we are behind NAT
1781  * and do not have a port open.  If it is neither, we return
1782  * GNUNET_SYSERR.
1783  *
1784  * @param plugin global variables
1785  * @param in_port port number to check
1786  * @return GNUNET_OK if port is either open_port or adv_port
1787  */
1788 static int
1789 check_port (struct Plugin *plugin, uint16_t in_port)
1790 {
1791   if ((in_port == plugin->adv_port) || (in_port == plugin->open_port))
1792     return GNUNET_OK;
1793   return GNUNET_SYSERR;
1794 }
1795
1796
1797 /**
1798  * Function that will be called to check if a binary address for this
1799  * plugin is well-formed and corresponds to an address for THIS peer
1800  * (as per our configuration).  Naturally, if absolutely necessary,
1801  * plugins can be a bit conservative in their answer, but in general
1802  * plugins should make sure that the address does not redirect
1803  * traffic to a 3rd party that might try to man-in-the-middle our
1804  * traffic.
1805  *
1806  * @param cls closure, our 'struct Plugin*'
1807  * @param addr pointer to the address
1808  * @param addrlen length of addr
1809  * @return GNUNET_OK if this is a plausible address for this peer
1810  *         and transport, GNUNET_SYSERR if not
1811  */
1812 static int
1813 tcp_plugin_check_address (void *cls, const void *addr, size_t addrlen)
1814 {
1815   struct Plugin *plugin = cls;
1816   struct IPv4TcpAddress *v4;
1817   struct IPv6TcpAddress *v6;
1818
1819   if ((addrlen != sizeof (struct IPv4TcpAddress)) &&
1820       (addrlen != sizeof (struct IPv6TcpAddress)))
1821   {
1822     GNUNET_break_op (0);
1823     return GNUNET_SYSERR;
1824   }
1825
1826
1827   if (addrlen == sizeof (struct IPv4TcpAddress))
1828   {
1829     v4 = (struct IPv4TcpAddress *) addr;
1830     if (0 != memcmp (&v4->options, &myoptions, sizeof (myoptions)))
1831     {
1832         GNUNET_break (0);
1833         return GNUNET_SYSERR;
1834     }
1835     if (GNUNET_OK != check_port (plugin, ntohs (v4->t4_port)))
1836       return GNUNET_SYSERR;
1837     if (GNUNET_OK !=
1838         GNUNET_NAT_test_address (plugin->nat, &v4->ipv4_addr,
1839                                  sizeof (struct in_addr)))
1840       return GNUNET_SYSERR;
1841   }
1842   else
1843   {
1844     v6 = (struct IPv6TcpAddress *) addr;
1845     if (IN6_IS_ADDR_LINKLOCAL (&v6->ipv6_addr))
1846     {
1847       GNUNET_break_op (0);
1848       return GNUNET_SYSERR;
1849     }
1850     if (0 != memcmp (&v6->options, &myoptions, sizeof (myoptions)))
1851     {
1852         GNUNET_break (0);
1853         return GNUNET_SYSERR;
1854     }
1855     if (GNUNET_OK != check_port (plugin, ntohs (v6->t6_port)))
1856       return GNUNET_SYSERR;
1857     if (GNUNET_OK !=
1858         GNUNET_NAT_test_address (plugin->nat, &v6->ipv6_addr,
1859                                  sizeof (struct in6_addr)))
1860       return GNUNET_SYSERR;
1861   }
1862   return GNUNET_OK;
1863 }
1864
1865
1866 /**
1867  * We've received a nat probe from this peer via TCP.  Finish
1868  * creating the client session and resume sending of queued
1869  * messages.
1870  *
1871  * @param cls closure
1872  * @param client identification of the client
1873  * @param message the actual message
1874  */
1875 static void
1876 handle_tcp_nat_probe (void *cls, struct GNUNET_SERVER_Client *client,
1877                       const struct GNUNET_MessageHeader *message)
1878 {
1879   struct Plugin *plugin = cls;
1880   struct Session *session;
1881   const struct TCP_NAT_ProbeMessage *tcp_nat_probe;
1882   size_t alen;
1883   void *vaddr;
1884   struct IPv4TcpAddress *t4;
1885   struct IPv6TcpAddress *t6;
1886   const struct sockaddr_in *s4;
1887   const struct sockaddr_in6 *s6;
1888
1889   LOG (GNUNET_ERROR_TYPE_DEBUG, "Received NAT probe\n");
1890
1891   /* We have received a TCP NAT probe, meaning we (hopefully) initiated
1892    * a connection to this peer by running gnunet-nat-client.  This peer
1893    * received the punch message and now wants us to use the new connection
1894    * as the default for that peer.  Do so and then send a WELCOME message
1895    * so we can really be connected!
1896    */
1897   if (ntohs (message->size) != sizeof (struct TCP_NAT_ProbeMessage))
1898   {
1899     GNUNET_break_op (0);
1900     GNUNET_SERVER_receive_done (client, GNUNET_SYSERR);
1901     return;
1902   }
1903
1904   tcp_nat_probe = (const struct TCP_NAT_ProbeMessage *) message;
1905   if (0 ==
1906       memcmp (&tcp_nat_probe->clientIdentity, plugin->env->my_identity,
1907               sizeof (struct GNUNET_PeerIdentity)))
1908   {
1909     /* refuse connections from ourselves */
1910     GNUNET_SERVER_receive_done (client, GNUNET_SYSERR);
1911     return;
1912   }
1913
1914   session =
1915       GNUNET_CONTAINER_multihashmap_get (plugin->nat_wait_conns,
1916                                          &tcp_nat_probe->
1917                                          clientIdentity.hashPubKey);
1918   if (session == NULL)
1919   {
1920     LOG (GNUNET_ERROR_TYPE_DEBUG, 
1921          "Did NOT find session for NAT probe!\n");
1922     GNUNET_SERVER_receive_done (client, GNUNET_OK);
1923     return;
1924   }
1925   LOG (GNUNET_ERROR_TYPE_DEBUG, 
1926        "Found session for NAT probe!\n");
1927
1928   if (session->nat_connection_timeout != GNUNET_SCHEDULER_NO_TASK)
1929   {
1930     GNUNET_SCHEDULER_cancel (session->nat_connection_timeout);
1931     session->nat_connection_timeout = GNUNET_SCHEDULER_NO_TASK;
1932   }
1933
1934   if (GNUNET_OK != GNUNET_SERVER_client_get_address (client, &vaddr, &alen))
1935   {
1936     GNUNET_break (0);
1937     GNUNET_SERVER_receive_done (client, GNUNET_SYSERR);
1938     disconnect_session (session);
1939     return;
1940   }
1941   GNUNET_assert (GNUNET_CONTAINER_multihashmap_remove
1942                  (plugin->nat_wait_conns,
1943                   &tcp_nat_probe->clientIdentity.hashPubKey,
1944                   session) == GNUNET_YES);
1945   GNUNET_CONTAINER_multihashmap_put (plugin->sessionmap,
1946                                      &session->target.hashPubKey, session, 
1947                                      GNUNET_CONTAINER_MULTIHASHMAPOPTION_MULTIPLE);  
1948   session->last_activity = GNUNET_TIME_absolute_get ();
1949   session->inbound = GNUNET_NO;
1950   LOG (GNUNET_ERROR_TYPE_DEBUG, 
1951        "Found address `%s' for incoming connection\n",
1952        GNUNET_a2s (vaddr, alen));
1953   switch (((const struct sockaddr *) vaddr)->sa_family)
1954   {
1955   case AF_INET:
1956     s4 = vaddr;
1957     t4 = GNUNET_malloc (sizeof (struct IPv4TcpAddress));
1958     t4->options = 0;
1959     t4->t4_port = s4->sin_port;
1960     t4->ipv4_addr = s4->sin_addr.s_addr;
1961     session->addr = t4;
1962     session->addrlen = sizeof (struct IPv4TcpAddress);
1963     break;
1964   case AF_INET6:
1965     s6 = vaddr;
1966     t6 = GNUNET_malloc (sizeof (struct IPv6TcpAddress));
1967     t6->options = 0;
1968     t6->t6_port = s6->sin6_port;
1969     memcpy (&t6->ipv6_addr, &s6->sin6_addr, sizeof (struct in6_addr));
1970     session->addr = t6;
1971     session->addrlen = sizeof (struct IPv6TcpAddress);
1972     break;
1973   default:
1974     GNUNET_break_op (0);
1975     LOG (GNUNET_ERROR_TYPE_DEBUG, 
1976          "Bad address for incoming connection!\n");
1977     GNUNET_free (vaddr);
1978     GNUNET_SERVER_receive_done (client, GNUNET_SYSERR);
1979     disconnect_session (session);
1980     return;
1981   }
1982   GNUNET_free (vaddr);
1983   GNUNET_break (NULL == session->client);
1984   GNUNET_SERVER_client_keep (client);
1985   session->client = client;
1986   inc_sessions (plugin, session, __LINE__);
1987   GNUNET_STATISTICS_update (plugin->env->stats,
1988                             gettext_noop ("# TCP sessions active"), 1,
1989                             GNUNET_NO);
1990   process_pending_messages (session);
1991   GNUNET_SERVER_receive_done (client, GNUNET_OK);
1992 }
1993
1994
1995 /**
1996  * We've received a welcome from this peer via TCP.  Possibly create a
1997  * fresh client record and send back our welcome.
1998  *
1999  * @param cls closure
2000  * @param client identification of the client
2001  * @param message the actual message
2002  */
2003 static void
2004 handle_tcp_welcome (void *cls, struct GNUNET_SERVER_Client *client,
2005                     const struct GNUNET_MessageHeader *message)
2006 {
2007   struct Plugin *plugin = cls;
2008   const struct WelcomeMessage *wm = (const struct WelcomeMessage *) message;
2009   struct Session *session;
2010   size_t alen;
2011   void *vaddr;
2012   struct IPv4TcpAddress *t4;
2013   struct IPv6TcpAddress *t6;
2014   const struct sockaddr_in *s4;
2015   const struct sockaddr_in6 *s6;
2016   struct GNUNET_ATS_Information ats;
2017
2018   if (0 ==
2019       memcmp (&wm->clientIdentity, plugin->env->my_identity,
2020               sizeof (struct GNUNET_PeerIdentity)))
2021   {
2022     /* refuse connections from ourselves */
2023     GNUNET_SERVER_receive_done (client, GNUNET_SYSERR);
2024     GNUNET_break (0);
2025     return;
2026   }
2027   LOG (GNUNET_ERROR_TYPE_DEBUG,
2028        "Received %s message from `%4s' %p\n", "WELCOME",
2029        GNUNET_i2s (&wm->clientIdentity), client);
2030   GNUNET_STATISTICS_update (plugin->env->stats,
2031                             gettext_noop ("# TCP WELCOME messages received"), 1,
2032                             GNUNET_NO);
2033   session = lookup_session_by_client (plugin, client);
2034   if (session != NULL)
2035   {
2036     if (GNUNET_OK == GNUNET_SERVER_client_get_address (client, &vaddr, &alen))
2037     {
2038       LOG (GNUNET_ERROR_TYPE_DEBUG,
2039            "Found existing session %p for peer `%s'\n",
2040            session,
2041            GNUNET_a2s (vaddr, alen));
2042       GNUNET_free (vaddr);
2043     }
2044   }
2045   else
2046   {
2047     GNUNET_SERVER_client_keep (client);
2048     if (plugin->service != NULL) /* Otherwise value is incremented in tcp_access_check */
2049         plugin->cur_connections++;
2050     if (plugin->cur_connections == plugin->max_connections)
2051         GNUNET_SERVER_suspend (plugin->server); /* Maximum number of connections rechead */
2052
2053     session = create_session (plugin, &wm->clientIdentity, client, GNUNET_NO);
2054     session->inbound = GNUNET_YES;
2055     if (GNUNET_OK == GNUNET_SERVER_client_get_address (client, &vaddr, &alen))
2056     {
2057       if (alen == sizeof (struct sockaddr_in))
2058       {
2059         s4 = vaddr;
2060         t4 = GNUNET_malloc (sizeof (struct IPv4TcpAddress));
2061         t4->options = htonl (0);
2062         t4->t4_port = s4->sin_port;
2063         t4->ipv4_addr = s4->sin_addr.s_addr;
2064         session->addr = t4;
2065         session->addrlen = sizeof (struct IPv4TcpAddress);
2066       }
2067       else if (alen == sizeof (struct sockaddr_in6))
2068       {
2069         s6 = vaddr;
2070         t6 = GNUNET_malloc (sizeof (struct IPv6TcpAddress));
2071         t6->options = htonl (0);
2072         t6->t6_port = s6->sin6_port;
2073         memcpy (&t6->ipv6_addr, &s6->sin6_addr, sizeof (struct in6_addr));
2074         session->addr = t6;
2075         session->addrlen = sizeof (struct IPv6TcpAddress);
2076       }
2077
2078       ats = plugin->env->get_address_type (plugin->env->cls, vaddr ,alen);
2079       session->ats_address_network_type = ats.value;
2080       LOG (GNUNET_ERROR_TYPE_DEBUG,
2081      "Creating new session %p for peer `%s'\n",
2082      session,
2083      GNUNET_a2s (vaddr, alen));
2084       GNUNET_free (vaddr);
2085       GNUNET_CONTAINER_multihashmap_put (plugin->sessionmap,
2086                                        &session->target.hashPubKey,
2087                                        session,
2088                                        GNUNET_CONTAINER_MULTIHASHMAPOPTION_MULTIPLE);
2089       inc_sessions (plugin, session, __LINE__);
2090     }
2091     else
2092     {
2093       LOG (GNUNET_ERROR_TYPE_DEBUG, 
2094            "Did not obtain TCP socket address for incoming connection\n");
2095       GNUNET_break (0);
2096     }
2097   }
2098
2099   if (session->expecting_welcome != GNUNET_YES)
2100   {
2101     GNUNET_break_op (0);
2102     GNUNET_SERVER_receive_done (client, GNUNET_SYSERR);
2103     GNUNET_break (0);
2104     return;
2105   }
2106   session->last_activity = GNUNET_TIME_absolute_get ();
2107   session->expecting_welcome = GNUNET_NO;
2108
2109   /* Notify transport and ATS about new session */
2110   if (GNUNET_YES == session->inbound)
2111   {
2112         plugin->env->session_start (NULL, &wm->clientIdentity, PLUGIN_NAME,
2113                 (GNUNET_YES == session->inbound) ? NULL : session->addr,
2114                   (GNUNET_YES == session->inbound) ? 0 : session->addrlen,
2115                   session, &ats, 1);
2116   }
2117
2118   process_pending_messages (session);
2119
2120   GNUNET_SERVER_client_set_timeout (client,
2121                                     GNUNET_CONSTANTS_IDLE_CONNECTION_TIMEOUT);
2122   GNUNET_SERVER_receive_done (client, GNUNET_OK);
2123 }
2124
2125
2126 /**
2127  * Task to signal the server that we can continue
2128  * receiving from the TCP client now.
2129  *
2130  * @param cls the 'struct Session*'
2131  * @param tc task context (unused)
2132  */
2133 static void
2134 delayed_done (void *cls, const struct GNUNET_SCHEDULER_TaskContext *tc)
2135 {
2136   struct Session *session = cls;
2137
2138   session->receive_delay_task = GNUNET_SCHEDULER_NO_TASK;
2139   reschedule_session_timeout (session);
2140
2141   GNUNET_SERVER_receive_done (session->client, GNUNET_OK);
2142 }
2143
2144
2145 /**
2146  * We've received data for this peer via TCP.  Unbox,
2147  * compute latency and forward.
2148  *
2149  * @param cls closure
2150  * @param client identification of the client
2151  * @param message the actual message
2152  */
2153 static void
2154 handle_tcp_data (void *cls, struct GNUNET_SERVER_Client *client,
2155                  const struct GNUNET_MessageHeader *message)
2156 {
2157   struct Plugin *plugin = cls;
2158   struct Session *session;
2159   struct GNUNET_TIME_Relative delay;
2160   uint16_t type;
2161
2162   type = ntohs (message->type);
2163   if ((GNUNET_MESSAGE_TYPE_TRANSPORT_TCP_WELCOME == type) ||
2164       (GNUNET_MESSAGE_TYPE_TRANSPORT_TCP_NAT_PROBE == type))
2165   {
2166     /* We don't want to propagate WELCOME and NAT Probe messages up! */
2167     GNUNET_SERVER_receive_done (client, GNUNET_OK);
2168     return;
2169   }
2170   session = lookup_session_by_client (plugin, client);
2171   if (NULL == session)
2172   {
2173     /* No inbound session found */
2174     void *vaddr;
2175     size_t alen;
2176     
2177     GNUNET_SERVER_client_get_address (client, &vaddr, &alen);
2178     LOG (GNUNET_ERROR_TYPE_ERROR, 
2179          "Received unexpected %u bytes of type %u from `%s'\n",
2180          (unsigned int) ntohs (message->size),
2181          (unsigned int) ntohs (message->type),
2182          GNUNET_a2s(vaddr, alen));
2183     GNUNET_break_op (0);
2184     GNUNET_SERVER_receive_done (client, GNUNET_SYSERR);
2185     GNUNET_free_non_null(vaddr);
2186     return;
2187   }
2188   else if (GNUNET_YES == session->expecting_welcome)
2189   {
2190     /* Session is expecting WELCOME message */
2191     void *vaddr;
2192     size_t alen;
2193
2194     GNUNET_SERVER_client_get_address (client, &vaddr, &alen);
2195     LOG (GNUNET_ERROR_TYPE_ERROR, 
2196          "Received unexpected %u bytes of type %u from `%s'\n",
2197          (unsigned int) ntohs (message->size),
2198          (unsigned int) ntohs (message->type),
2199          GNUNET_a2s(vaddr, alen));
2200     GNUNET_break_op (0);
2201     GNUNET_SERVER_receive_done (client, GNUNET_SYSERR);
2202     GNUNET_free_non_null(vaddr);
2203     return;
2204   }
2205
2206   session->last_activity = GNUNET_TIME_absolute_get ();
2207   LOG (GNUNET_ERROR_TYPE_DEBUG, 
2208                    "Passing %u bytes of type %u from `%4s' to transport service.\n",
2209                    (unsigned int) ntohs (message->size),
2210                    (unsigned int) ntohs (message->type),
2211                    GNUNET_i2s (&session->target));
2212
2213   GNUNET_STATISTICS_update (plugin->env->stats,
2214                             gettext_noop ("# bytes received via TCP"),
2215                             ntohs (message->size), GNUNET_NO);
2216   struct GNUNET_ATS_Information distance;
2217
2218   distance.type = htonl (GNUNET_ATS_NETWORK_TYPE);
2219   distance.value = session->ats_address_network_type;
2220   GNUNET_break (ntohl(session->ats_address_network_type) != GNUNET_ATS_NET_UNSPECIFIED);
2221
2222   GNUNET_assert (GNUNET_CONTAINER_multihashmap_contains_value (plugin->sessionmap,
2223       &session->target.hashPubKey,
2224       session));
2225
2226   delay = plugin->env->receive (plugin->env->cls,
2227                                 &session->target,
2228                                 message,
2229                                 session,
2230                                 (GNUNET_YES == session->inbound) ? NULL : session->addr,
2231                                 (GNUNET_YES == session->inbound) ? 0 : session->addrlen);
2232   plugin->env->update_address_metrics (plugin->env->cls,
2233                 &session->target,
2234                 (GNUNET_YES == session->inbound) ? NULL : session->addr,
2235                   (GNUNET_YES == session->inbound) ? 0 : session->addrlen,
2236                   session, &distance, 1);
2237
2238   reschedule_session_timeout (session);
2239
2240   if (delay.rel_value == 0)
2241   {
2242     GNUNET_SERVER_receive_done (client, GNUNET_OK);
2243   }
2244   else
2245   {
2246     LOG (GNUNET_ERROR_TYPE_DEBUG, 
2247          "Throttling receiving from `%s' for %llu ms\n",
2248          GNUNET_i2s (&session->target),
2249          (unsigned long long) delay.rel_value);
2250     GNUNET_SERVER_disable_receive_done_warning (client);
2251     session->receive_delay_task =
2252         GNUNET_SCHEDULER_add_delayed (delay, &delayed_done, session);
2253   }
2254 }
2255
2256
2257 /**
2258  * Functions with this signature are called whenever a peer
2259  * is disconnected on the network level.
2260  *
2261  * @param cls closure
2262  * @param client identification of the client
2263  */
2264 static void
2265 disconnect_notify (void *cls, struct GNUNET_SERVER_Client *client)
2266 {
2267   struct Plugin *plugin = cls;
2268   struct Session *session;
2269
2270   if (client == NULL)
2271     return;
2272   session = lookup_session_by_client (plugin, client);
2273   if (session == NULL)
2274     return;                     /* unknown, nothing to do */
2275   LOG (GNUNET_ERROR_TYPE_DEBUG,
2276        "Destroying session of `%4s' with %s due to network-level disconnect.\n",
2277        GNUNET_i2s (&session->target),
2278        (session->addr !=
2279         NULL) ? tcp_address_to_string (session->plugin,
2280                                        session->addr,
2281                                        session->addrlen) :
2282        "*");
2283
2284   if (plugin->cur_connections == plugin->max_connections)
2285         GNUNET_SERVER_resume (plugin->server); /* Resume server  */
2286
2287   if (plugin->cur_connections < 1)
2288         GNUNET_break (0);
2289   else
2290         plugin->cur_connections--;
2291
2292   GNUNET_STATISTICS_update (session->plugin->env->stats,
2293                             gettext_noop
2294                             ("# network-level TCP disconnect events"), 1,
2295                             GNUNET_NO);
2296   disconnect_session (session);
2297 }
2298
2299
2300 /**
2301  * We can now send a probe message, copy into buffer to really send.
2302  *
2303  * @param cls closure, a struct TCPProbeContext
2304  * @param size max size to copy
2305  * @param buf buffer to copy message to
2306  * @return number of bytes copied into buf
2307  */
2308 static size_t
2309 notify_send_probe (void *cls, size_t size, void *buf)
2310 {
2311   struct TCPProbeContext *tcp_probe_ctx = cls;
2312   struct Plugin *plugin = tcp_probe_ctx->plugin;
2313   size_t ret;
2314
2315   tcp_probe_ctx->transmit_handle = NULL;
2316   GNUNET_CONTAINER_DLL_remove (plugin->probe_head, plugin->probe_tail,
2317                                tcp_probe_ctx);
2318   if (buf == NULL)
2319   {
2320     GNUNET_CONNECTION_destroy (tcp_probe_ctx->sock);
2321     GNUNET_free (tcp_probe_ctx);
2322     return 0;
2323   }
2324   GNUNET_assert (size >= sizeof (tcp_probe_ctx->message));
2325   memcpy (buf, &tcp_probe_ctx->message, sizeof (tcp_probe_ctx->message));
2326   GNUNET_SERVER_connect_socket (tcp_probe_ctx->plugin->server,
2327                                 tcp_probe_ctx->sock);
2328   ret = sizeof (tcp_probe_ctx->message);
2329   GNUNET_free (tcp_probe_ctx);
2330   return ret;
2331 }
2332
2333
2334 /**
2335  * Function called by the NAT subsystem suggesting another peer wants
2336  * to connect to us via connection reversal.  Try to connect back to the
2337  * given IP.
2338  *
2339  * @param cls closure
2340  * @param addr address to try
2341  * @param addrlen number of bytes in addr
2342  */
2343 static void
2344 try_connection_reversal (void *cls, const struct sockaddr *addr,
2345                          socklen_t addrlen)
2346 {
2347   struct Plugin *plugin = cls;
2348   struct GNUNET_CONNECTION_Handle *sock;
2349   struct TCPProbeContext *tcp_probe_ctx;
2350
2351   /**
2352    * We have received an ICMP response, ostensibly from a peer
2353    * that wants to connect to us! Send a message to establish a connection.
2354    */
2355   sock = GNUNET_CONNECTION_create_from_sockaddr (AF_INET, addr, addrlen);
2356   if (sock == NULL)
2357   {
2358     /* failed for some odd reason (out of sockets?); ignore attempt */
2359     return;
2360   }
2361
2362   /* FIXME: do we need to track these probe context objects so that
2363    * we can clean them up on plugin unload? */
2364   tcp_probe_ctx = GNUNET_malloc (sizeof (struct TCPProbeContext));
2365   tcp_probe_ctx->message.header.size =
2366       htons (sizeof (struct TCP_NAT_ProbeMessage));
2367   tcp_probe_ctx->message.header.type =
2368       htons (GNUNET_MESSAGE_TYPE_TRANSPORT_TCP_NAT_PROBE);
2369   memcpy (&tcp_probe_ctx->message.clientIdentity, plugin->env->my_identity,
2370           sizeof (struct GNUNET_PeerIdentity));
2371   tcp_probe_ctx->plugin = plugin;
2372   tcp_probe_ctx->sock = sock;
2373   GNUNET_CONTAINER_DLL_insert (plugin->probe_head, plugin->probe_tail,
2374                                tcp_probe_ctx);
2375   tcp_probe_ctx->transmit_handle =
2376       GNUNET_CONNECTION_notify_transmit_ready (sock,
2377                                                ntohs (tcp_probe_ctx->
2378                                                       message.header.size),
2379                                                GNUNET_TIME_UNIT_FOREVER_REL,
2380                                                &notify_send_probe,
2381                                                tcp_probe_ctx);
2382
2383 }
2384
2385
2386 /**
2387  * Session was idle, so disconnect it
2388  */
2389 static void
2390 session_timeout (void *cls, const struct GNUNET_SCHEDULER_TaskContext *tc)
2391 {
2392   GNUNET_assert (NULL != cls);
2393   struct Session *s = cls;
2394
2395   s->timeout_task = GNUNET_SCHEDULER_NO_TASK;
2396   GNUNET_log (GNUNET_ERROR_TYPE_DEBUG,
2397               "Session %p was idle for %llu ms, disconnecting\n",
2398               s, (unsigned long long) GNUNET_CONSTANTS_IDLE_CONNECTION_TIMEOUT.rel_value);
2399   /* call session destroy function */
2400   disconnect_session(s);
2401 }
2402
2403
2404 /**
2405  * Start session timeout
2406  */
2407 static void
2408 start_session_timeout (struct Session *s)
2409 {
2410   GNUNET_assert (NULL != s);
2411   GNUNET_assert (GNUNET_SCHEDULER_NO_TASK == s->timeout_task);
2412   s->timeout_task =  GNUNET_SCHEDULER_add_delayed (GNUNET_CONSTANTS_IDLE_CONNECTION_TIMEOUT,
2413                                                    &session_timeout,
2414                                                    s);
2415   GNUNET_log (GNUNET_ERROR_TYPE_DEBUG,
2416               "Timeout for session %p set to %llu ms\n",
2417               s,  (unsigned long long) GNUNET_CONSTANTS_IDLE_CONNECTION_TIMEOUT.rel_value);
2418 }
2419
2420
2421 /**
2422  * Increment session timeout due to activity
2423  */
2424 static void
2425 reschedule_session_timeout (struct Session *s)
2426 {
2427   GNUNET_assert (NULL != s);
2428   GNUNET_assert (GNUNET_SCHEDULER_NO_TASK != s->timeout_task);
2429
2430   GNUNET_SCHEDULER_cancel (s->timeout_task);
2431   s->timeout_task =  GNUNET_SCHEDULER_add_delayed (GNUNET_CONSTANTS_IDLE_CONNECTION_TIMEOUT,
2432                                                    &session_timeout,
2433                                                    s);
2434   GNUNET_log (GNUNET_ERROR_TYPE_DEBUG,
2435               "Timeout rescheduled for session %p set to %llu ms\n",
2436               s, (unsigned long long) GNUNET_CONSTANTS_IDLE_CONNECTION_TIMEOUT.rel_value);
2437 }
2438
2439
2440 /**
2441  * Cancel timeout
2442  */
2443 static void
2444 stop_session_timeout (struct Session *s)
2445 {
2446   GNUNET_assert (NULL != s);
2447
2448   if (GNUNET_SCHEDULER_NO_TASK != s->timeout_task)
2449   {
2450     GNUNET_SCHEDULER_cancel (s->timeout_task);
2451     s->timeout_task = GNUNET_SCHEDULER_NO_TASK;
2452     GNUNET_log (GNUNET_ERROR_TYPE_DEBUG,
2453                 "Timeout stopped for session %p canceled\n",
2454                 s, (unsigned long long) GNUNET_CONSTANTS_IDLE_CONNECTION_TIMEOUT.rel_value);
2455   }
2456 }
2457
2458 /**
2459  * Function obtain the network type for a session
2460  *
2461  * @param cls closure ('struct Plugin*')
2462  * @param session the session
2463  * @return the network type in HBO or GNUNET_SYSERR
2464  */
2465 static enum GNUNET_ATS_Network_Type
2466 tcp_get_network (void *cls,
2467                  struct Session *session)
2468 {
2469   GNUNET_assert (NULL != session);
2470   return ntohl (session->ats_address_network_type);
2471 }
2472
2473
2474 /**
2475  * Entry point for the plugin.
2476  *
2477  * @param cls closure, the 'struct GNUNET_TRANSPORT_PluginEnvironment*'
2478  * @return the 'struct GNUNET_TRANSPORT_PluginFunctions*' or NULL on error
2479  */
2480 void *
2481 libgnunet_plugin_transport_tcp_init (void *cls)
2482 {
2483   static const struct GNUNET_SERVER_MessageHandler my_handlers[] = {
2484     {&handle_tcp_welcome, NULL, GNUNET_MESSAGE_TYPE_TRANSPORT_TCP_WELCOME,
2485      sizeof (struct WelcomeMessage)},
2486     {&handle_tcp_nat_probe, NULL, GNUNET_MESSAGE_TYPE_TRANSPORT_TCP_NAT_PROBE,
2487      sizeof (struct TCP_NAT_ProbeMessage)},
2488     {&handle_tcp_data, NULL, GNUNET_MESSAGE_TYPE_ALL, 0},
2489     {NULL, NULL, 0, 0}
2490   };
2491   struct GNUNET_TRANSPORT_PluginEnvironment *env = cls;
2492   struct GNUNET_TRANSPORT_PluginFunctions *api;
2493   struct Plugin *plugin;
2494   struct GNUNET_SERVICE_Context *service;
2495   unsigned long long aport;
2496   unsigned long long bport;
2497   unsigned long long max_connections;
2498   unsigned int i;
2499   struct GNUNET_TIME_Relative idle_timeout;
2500   int ret;
2501   int ret_s;
2502   struct sockaddr **addrs;
2503   socklen_t *addrlens;
2504
2505
2506   if (NULL == env->receive)
2507   {
2508     /* run in 'stub' mode (i.e. as part of gnunet-peerinfo), don't fully
2509        initialze the plugin or the API */
2510     api = GNUNET_malloc (sizeof (struct GNUNET_TRANSPORT_PluginFunctions));
2511     api->cls = NULL;
2512     api->address_pretty_printer = &tcp_plugin_address_pretty_printer;
2513     api->address_to_string = &tcp_address_to_string;
2514     api->string_to_address = &tcp_string_to_address;
2515     return api;
2516   }
2517
2518   GNUNET_assert (NULL != env->cfg);
2519   if (GNUNET_OK !=
2520       GNUNET_CONFIGURATION_get_value_number (env->cfg, "transport-tcp",
2521                                              "MAX_CONNECTIONS",
2522                                              &max_connections))
2523     max_connections = 128;
2524
2525   aport = 0;
2526   if ((GNUNET_OK !=
2527        GNUNET_CONFIGURATION_get_value_number (env->cfg, "transport-tcp", "PORT",
2528                                               &bport)) || (bport > 65535) ||
2529       ((GNUNET_OK ==
2530         GNUNET_CONFIGURATION_get_value_number (env->cfg, "transport-tcp",
2531                                                "ADVERTISED-PORT", &aport)) &&
2532        (aport > 65535)))
2533   {
2534     LOG (GNUNET_ERROR_TYPE_ERROR, 
2535          _
2536          ("Require valid port number for service `%s' in configuration!\n"),
2537          "transport-tcp");
2538     return NULL;
2539   }
2540   if (aport == 0)
2541     aport = bport;
2542   if (bport == 0)
2543     aport = 0;
2544   if (bport != 0)
2545   {
2546     service = GNUNET_SERVICE_start ("transport-tcp", env->cfg, GNUNET_SERVICE_OPTION_NONE);
2547     if (service == NULL)
2548     {
2549       LOG (GNUNET_ERROR_TYPE_WARNING,
2550            _("Failed to start service.\n"));
2551       return NULL;
2552     }
2553   }
2554   else
2555     service = NULL;
2556
2557   /* Initialize my flags */
2558   myoptions = 0;
2559
2560   plugin = GNUNET_malloc (sizeof (struct Plugin));
2561   plugin->sessionmap = GNUNET_CONTAINER_multihashmap_create (max_connections, GNUNET_YES);
2562   plugin->max_connections = max_connections;
2563   plugin->cur_connections = 0;
2564   plugin->open_port = bport;
2565   plugin->adv_port = aport;
2566   plugin->env = env;
2567   plugin->lsock = NULL;
2568   if ((service != NULL) &&
2569       (GNUNET_SYSERR !=
2570        (ret_s =
2571         GNUNET_SERVICE_get_server_addresses ("transport-tcp", env->cfg, &addrs,
2572                                              &addrlens))))
2573   {
2574     for (ret = ret_s-1; ret >= 0; ret--)
2575       LOG (GNUNET_ERROR_TYPE_INFO,
2576            "Binding to address `%s'\n", 
2577            GNUNET_a2s (addrs[ret], addrlens[ret]));
2578     plugin->nat =
2579         GNUNET_NAT_register (env->cfg, GNUNET_YES, aport, (unsigned int) ret_s,
2580                              (const struct sockaddr **) addrs, addrlens,
2581                              &tcp_nat_port_map_callback,
2582                              &try_connection_reversal, plugin);
2583     for (ret = ret_s -1; ret >= 0; ret--)
2584     {
2585       GNUNET_assert (addrs[ret] != NULL);
2586       GNUNET_free (addrs[ret]);
2587     }
2588     GNUNET_free_non_null (addrs);
2589     GNUNET_free_non_null (addrlens);
2590   }
2591   else
2592   {
2593     plugin->nat = GNUNET_NAT_register (plugin->env->cfg,
2594                                        GNUNET_YES, 0, 0, NULL, NULL, NULL,
2595                                        &try_connection_reversal, plugin);
2596   }
2597   api = GNUNET_malloc (sizeof (struct GNUNET_TRANSPORT_PluginFunctions));
2598   api->cls = plugin;
2599   api->send = &tcp_plugin_send;
2600   api->get_session = &tcp_plugin_get_session;
2601
2602   api->disconnect = &tcp_plugin_disconnect;
2603   api->address_pretty_printer = &tcp_plugin_address_pretty_printer;
2604   api->check_address = &tcp_plugin_check_address;
2605   api->address_to_string = &tcp_address_to_string;
2606   api->string_to_address = &tcp_string_to_address;
2607   api->get_network = &tcp_get_network;
2608   plugin->service = service;
2609   if (service != NULL)
2610   {
2611     plugin->server = GNUNET_SERVICE_get_server (service);
2612   }
2613   else
2614   {
2615     if (GNUNET_OK !=
2616         GNUNET_CONFIGURATION_get_value_time (env->cfg, "transport-tcp",
2617                                              "TIMEOUT", &idle_timeout))
2618     {
2619       GNUNET_log_config_missing (GNUNET_ERROR_TYPE_ERROR,
2620                                  "transport-tcp", "TIMEOUT");
2621       if (plugin->nat != NULL)
2622         GNUNET_NAT_unregister (plugin->nat);
2623       GNUNET_free (plugin);
2624       GNUNET_free (api);
2625       return NULL;
2626     }
2627     plugin->server =
2628         GNUNET_SERVER_create_with_sockets (&plugin_tcp_access_check, plugin,
2629                                            NULL, idle_timeout, GNUNET_YES);
2630   }
2631   plugin->handlers = GNUNET_malloc (sizeof (my_handlers));
2632   memcpy (plugin->handlers, my_handlers, sizeof (my_handlers));
2633   for (i = 0;
2634        i < sizeof (my_handlers) / sizeof (struct GNUNET_SERVER_MessageHandler);
2635        i++)
2636     plugin->handlers[i].callback_cls = plugin;
2637
2638   GNUNET_SERVER_add_handlers (plugin->server, plugin->handlers);
2639   GNUNET_SERVER_disconnect_notify (plugin->server, &disconnect_notify, plugin);
2640   plugin->nat_wait_conns = GNUNET_CONTAINER_multihashmap_create (16, GNUNET_YES);
2641   if (bport != 0)
2642     LOG (GNUNET_ERROR_TYPE_INFO, 
2643          _("TCP transport listening on port %llu\n"), bport);
2644   else
2645     LOG (GNUNET_ERROR_TYPE_INFO, 
2646          _
2647          ("TCP transport not listening on any port (client only)\n"));
2648   if (aport != bport)
2649     LOG (GNUNET_ERROR_TYPE_INFO, 
2650                      _
2651                      ("TCP transport advertises itself as being on port %llu\n"),
2652                      aport);
2653   /* Initially set connections to 0 */
2654   GNUNET_assert (NULL != plugin->env->stats);
2655   GNUNET_STATISTICS_set (plugin->env->stats,
2656                         gettext_noop ("# TCP sessions active"), 0,
2657                         GNUNET_NO);
2658   return api;
2659 }
2660
2661
2662 /**
2663  * Exit point from the plugin.
2664  */
2665 void *
2666 libgnunet_plugin_transport_tcp_done (void *cls)
2667 {
2668   struct GNUNET_TRANSPORT_PluginFunctions *api = cls;
2669   struct Plugin *plugin = api->cls;
2670   struct TCPProbeContext *tcp_probe;
2671   struct PrettyPrinterContext *cur;
2672   struct PrettyPrinterContext *next;
2673
2674   if (NULL == plugin)
2675   {
2676     GNUNET_free (api);
2677     return NULL;
2678   }
2679   LOG (GNUNET_ERROR_TYPE_DEBUG, "Shutting down TCP plugin\n");
2680
2681   /* Removing leftover sessions */
2682   GNUNET_CONTAINER_multihashmap_iterate(plugin->sessionmap, &session_disconnect_it, NULL);
2683   /* Removing leftover NAT sessions */
2684   GNUNET_CONTAINER_multihashmap_iterate(plugin->nat_wait_conns, &session_disconnect_it, NULL);
2685
2686   next = ppc_dll_head;
2687   for (cur = next; NULL != cur; cur = next)
2688   {
2689         next = cur->next;
2690         GNUNET_CONTAINER_DLL_remove (ppc_dll_head, ppc_dll_tail, cur);
2691         GNUNET_RESOLVER_request_cancel (cur->resolver_handle);
2692         GNUNET_SCHEDULER_cancel (cur->timeout_task);
2693         GNUNET_free (cur);
2694         GNUNET_break (0);
2695   }
2696
2697   if (plugin->service != NULL)
2698     GNUNET_SERVICE_stop (plugin->service);
2699   else
2700     GNUNET_SERVER_destroy (plugin->server);
2701   GNUNET_free (plugin->handlers);
2702   if (plugin->nat != NULL)
2703     GNUNET_NAT_unregister (plugin->nat);
2704   while (NULL != (tcp_probe = plugin->probe_head))
2705   {
2706     GNUNET_CONTAINER_DLL_remove (plugin->probe_head, plugin->probe_tail,
2707                                  tcp_probe);
2708     GNUNET_CONNECTION_destroy (tcp_probe->sock);
2709     GNUNET_free (tcp_probe);
2710   }
2711   GNUNET_CONTAINER_multihashmap_destroy (plugin->nat_wait_conns);
2712   GNUNET_CONTAINER_multihashmap_destroy (plugin->sessionmap);
2713   GNUNET_free (plugin);
2714   GNUNET_free (api);
2715   return NULL;
2716 }
2717
2718 /* end of plugin_transport_tcp.c */