src/transport/plugin_transport_tcp.c

   1 /*
   2  This file is part of GNUnet
   3  (C) 2002--2013 Christian Grothoff (and other contributing authors)
   4
   5  GNUnet is free software; you can redistribute it and/or modify
   6  it under the terms of the GNU General Public License as published
   7  by the Free Software Foundation; either version 3, or (at your
   8  option) any later version.
   9
  10  GNUnet is distributed in the hope that it will be useful, but
  11  WITHOUT ANY WARRANTY; without even the implied warranty of
  12  MERCHANTABILITY or FITNESS FOR A PARTICULAR PURPOSE.  See the GNU
  13  General Public License for more details.
  14
  15  You should have received a copy of the GNU General Public License
  16  along with GNUnet; see the file COPYING.  If not, write to the
  17  Free Software Foundation, Inc., 59 Temple Place - Suite 330,
  18  Boston, MA 02111-1307, USA.
  19  */
  20 /**
  21  * @file transport/plugin_transport_tcp.c
  22  * @brief Implementation of the TCP transport service
  23  * @author Christian Grothoff
  24  */
  25 #include "platform.h"
  26 #include "gnunet_hello_lib.h"
  27 #include "gnunet_constants.h"
  28 #include "gnunet_util_lib.h"
  29 #include "gnunet_nat_lib.h"
  30 #include "gnunet_protocols.h"
  31 #include "gnunet_resolver_service.h"
  32 #include "gnunet_signatures.h"
  33 #include "gnunet_statistics_service.h"
  34 #include "gnunet_transport_service.h"
  35 #include "gnunet_transport_plugin.h"
  36 #include "transport.h"
  37
  38 #define LOG(kind,...) GNUNET_log_from (kind, "transport-tcp",__VA_ARGS__)
  39
  40 #define PLUGIN_NAME "tcp"
  41
  42 #define EXTRA_CHECKS ALLOW_EXTRA_CHECKS
  43
  44 /**
  45  * How long until we give up on establishing an NAT connection?
  46  * Must be > 4 RTT
  47  */
  48 #define NAT_TIMEOUT GNUNET_TIME_relative_multiply (GNUNET_TIME_UNIT_SECONDS, 10)
  49
  50 GNUNET_NETWORK_STRUCT_BEGIN
  51
  52 /**
  53  * Address options
  54  */
  55 static uint32_t myoptions;
  56
  57 /**
  58  * Initial handshake message for a session.
  59  */
  60 struct WelcomeMessage
  61 {
  62   /**
  63    * Type is #GNUNET_MESSAGE_TYPE_TRANSPORT_TCP_WELCOME.
  64    */
  65   struct GNUNET_MessageHeader header;
  66
  67   /**
  68    * Identity of the node connecting (TCP client)
  69    */
  70   struct GNUNET_PeerIdentity clientIdentity;
  71
  72 };
  73
  74 /**
  75  * Basically a WELCOME message, but with the purpose
  76  * of giving the waiting peer a client handle to use
  77  */
  78 struct TCP_NAT_ProbeMessage
  79 {
  80   /**
  81    * Type is #GNUNET_MESSAGE_TYPE_TRANSPORT_TCP_NAT_PROBE.
  82    */
  83   struct GNUNET_MessageHeader header;
  84
  85   /**
  86    * Identity of the sender of the message.
  87    */
  88   struct GNUNET_PeerIdentity clientIdentity;
  89
  90 };
  91 GNUNET_NETWORK_STRUCT_END
  92
  93 /**
  94  * Context for sending a NAT probe via TCP.
  95  */
  96 struct TCPProbeContext
  97 {
  98
  99   /**
 100    * Active probes are kept in a DLL.
 101    */
 102   struct TCPProbeContext *next;
 103
 104   /**
 105    * Active probes are kept in a DLL.
 106    */
 107   struct TCPProbeContext *prev;
 108
 109   /**
 110    * Probe connection.
 111    */
 112   struct GNUNET_CONNECTION_Handle *sock;
 113
 114   /**
 115    * Message to be sent.
 116    */
 117   struct TCP_NAT_ProbeMessage message;
 118
 119   /**
 120    * Handle to the transmission.
 121    */
 122   struct GNUNET_CONNECTION_TransmitHandle *transmit_handle;
 123
 124   /**
 125    * Transport plugin handle.
 126    */
 127   struct Plugin *plugin;
 128 };
 129
 130 GNUNET_NETWORK_STRUCT_BEGIN
 131
 132 /**
 133  * Network format for IPv4 addresses.
 134  */
 135 struct IPv4TcpAddress
 136 {
 137   /**
 138    * Optional options and flags for this address
 139    */
 140   uint32_t options;
 141
 142   /**
 143    * IPv4 address, in network byte order.
 144    */
 145   uint32_t ipv4_addr GNUNET_PACKED;
 146
 147   /**
 148    * Port number, in network byte order.
 149    */
 150   uint16_t t4_port GNUNET_PACKED;
 151
 152 };
 153
 154 /**
 155  * Network format for IPv6 addresses.
 156  */
 157 struct IPv6TcpAddress
 158 {
 159   /**
 160    * Optional flags for this address
 161    */
 162   uint32_t options;
 163
 164   /**
 165    * IPv6 address.
 166    */
 167   struct in6_addr ipv6_addr GNUNET_PACKED;
 168
 169   /**
 170    * Port number, in network byte order.
 171    */
 172   uint16_t t6_port GNUNET_PACKED;
 173
 174 };
 175 GNUNET_NETWORK_STRUCT_END
 176
 177 /**
 178  * Encapsulation of all of the state of the plugin.
 179  */
 180 struct Plugin;
 181
 182 /**
 183  * Information kept for each message that is yet to
 184  * be transmitted.
 185  */
 186 struct PendingMessage
 187 {
 188
 189   /**
 190    * This is a doubly-linked list.
 191    */
 192   struct PendingMessage *next;
 193
 194   /**
 195    * This is a doubly-linked list.
 196    */
 197   struct PendingMessage *prev;
 198
 199   /**
 200    * The pending message
 201    */
 202   const char *msg;
 203
 204   /**
 205    * Continuation function to call once the message
 206    * has been sent.  Can be NULL if there is no
 207    * continuation to call.
 208    */
 209   GNUNET_TRANSPORT_TransmitContinuation transmit_cont;
 210
 211   /**
 212    * Closure for transmit_cont.
 213    */
 214   void *transmit_cont_cls;
 215
 216   /**
 217    * Timeout value for the pending message.
 218    */
 219   struct GNUNET_TIME_Absolute timeout;
 220
 221   /**
 222    * So that the gnunet-service-transport can group messages together,
 223    * these pending messages need to accept a message buffer and size
 224    * instead of just a GNUNET_MessageHeader.
 225    */
 226   size_t message_size;
 227
 228 };
 229
 230 /**
 231  * Session handle for TCP connections.
 232  */
 233 struct Session
 234 {
 235   /**
 236    * To whom are we talking to (set to our identity
 237    * if we are still waiting for the welcome message)
 238    */
 239   struct GNUNET_PeerIdentity target;
 240
 241   /**
 242    * API requirement.
 243    */
 244   struct SessionHeader header;
 245
 246   /**
 247    * Pointer to the global plugin struct.
 248    */
 249   struct Plugin *plugin;
 250
 251   /**
 252    * The client (used to identify this connection)
 253    */
 254   struct GNUNET_SERVER_Client *client;
 255
 256   /**
 257    * Task cleaning up a NAT client connection establishment attempt;
 258    */
 259   GNUNET_SCHEDULER_TaskIdentifier nat_connection_timeout;
 260
 261   /**
 262    * Messages currently pending for transmission
 263    * to this peer, if any.
 264    */
 265   struct PendingMessage *pending_messages_head;
 266
 267   /**
 268    * Messages currently pending for transmission
 269    * to this peer, if any.
 270    */
 271   struct PendingMessage *pending_messages_tail;
 272
 273   /**
 274    * Handle for pending transmission request.
 275    */
 276   struct GNUNET_SERVER_TransmitHandle *transmit_handle;
 277
 278   /**
 279    * ID of task used to delay receiving more to throttle sender.
 280    */
 281   GNUNET_SCHEDULER_TaskIdentifier receive_delay_task;
 282
 283   /**
 284    * Session timeout task
 285    */
 286   GNUNET_SCHEDULER_TaskIdentifier timeout_task;
 287
 288   struct GNUNET_HELLO_Address *address;
 289
 290   /**
 291    * Address of the other peer (either based on our 'connect'
 292    * call or on our 'accept' call).
 293    *
 294    * struct IPv4TcpAddress or struct IPv6TcpAddress
 295    */
 296   //void *addr;
 297   /**
 298    * Length of @e addr.
 299    */
 300   //size_t addrlen;
 301   /**
 302    * Last activity on this connection.  Used to select preferred
 303    * connection.
 304    */
 305   struct GNUNET_TIME_Absolute last_activity;
 306
 307   /**
 308    * Are we still expecting the welcome message? (#GNUNET_YES/#GNUNET_NO)
 309    */
 310   int expecting_welcome;
 311
 312   /**
 313    * Was this session created using NAT traversal?
 314    */
 315   int is_nat;
 316
 317   /**
 318    * ATS network type in NBO
 319    */
 320   enum GNUNET_ATS_Network_Type ats_address_network_type;
 321 };
 322
 323 /**
 324  * Encapsulation of all of the state of the plugin.
 325  */
 326 struct Plugin
 327 {
 328   /**
 329    * Our environment.
 330    */
 331   struct GNUNET_TRANSPORT_PluginEnvironment *env;
 332
 333   /**
 334    * The listen socket.
 335    */
 336   struct GNUNET_CONNECTION_Handle *lsock;
 337
 338   /**
 339    * Our handle to the NAT module.
 340    */
 341   struct GNUNET_NAT_Handle *nat;
 342
 343   /**
 344    * Map from peer identities to sessions for the given peer.
 345    */
 346   struct GNUNET_CONTAINER_MultiPeerMap *sessionmap;
 347
 348   /**
 349    * Handle to the network service.
 350    */
 351   struct GNUNET_SERVICE_Context *service;
 352
 353   /**
 354    * Handle to the server for this service.
 355    */
 356   struct GNUNET_SERVER_Handle *server;
 357
 358   /**
 359    * Copy of the handler array where the closures are
 360    * set to this struct's instance.
 361    */
 362   struct GNUNET_SERVER_MessageHandler *handlers;
 363
 364   /**
 365    * Map of peers we have tried to contact behind a NAT
 366    */
 367   struct GNUNET_CONTAINER_MultiPeerMap *nat_wait_conns;
 368
 369   /**
 370    * List of active TCP probes.
 371    */
 372   struct TCPProbeContext *probe_head;
 373
 374   /**
 375    * List of active TCP probes.
 376    */
 377   struct TCPProbeContext *probe_tail;
 378
 379   /**
 380    * Handle for (DYN)DNS lookup of our external IP.
 381    */
 382   struct GNUNET_RESOLVER_RequestHandle *ext_dns;
 383
 384   /**
 385    * How many more TCP sessions are we allowed to open right now?
 386    */
 387   unsigned long long max_connections;
 388
 389   /**
 390    * How many more TCP sessions do we have right now?
 391    */
 392   unsigned long long cur_connections;
 393
 394   /**
 395    * ID of task used to update our addresses when one expires.
 396    */
 397   GNUNET_SCHEDULER_TaskIdentifier address_update_task;
 398
 399   /**
 400    * Port that we are actually listening on.
 401    */
 402   uint16_t open_port;
 403
 404   /**
 405    * Port that the user said we would have visible to the
 406    * rest of the world.
 407    */
 408   uint16_t adv_port;
 409
 410 };
 411
 412 /**
 413  * Function called for a quick conversion of the binary address to
 414  * a numeric address.  Note that the caller must not free the
 415  * address and that the next call to this function is allowed
 416  * to override the address again.
 417  *
 418  * @param cls closure ('struct Plugin*')
 419  * @param addr binary address
 420  * @param addrlen length of the address
 421  * @return string representing the same address
 422  */
 423 static const char *
 424 tcp_address_to_string (void *cls, const void *addr, size_t addrlen);
 425
 426 /**
 427  * Function to check if an inbound connection is acceptable.
 428  * Mostly used to limit the total number of open connections
 429  * we can have.
 430  *
 431  * @param cls the `struct Plugin`
 432  * @param ucred credentials, if available, otherwise NULL
 433  * @param addr address
 434  * @param addrlen length of address
 435  * @return #GNUNET_YES to allow, #GNUNET_NO to deny, #GNUNET_SYSERR
 436  *   for unknown address family (will be denied).
 437  */
 438 static int
 439 plugin_tcp_access_check (void *cls,
 440     const struct GNUNET_CONNECTION_Credentials *ucred,
 441     const struct sockaddr *addr, socklen_t addrlen)
 442 {
 443   struct Plugin *plugin = cls;
 444   LOG(GNUNET_ERROR_TYPE_DEBUG,
 445       "Accepting new incoming TCP connection from `%s'\n",
 446       GNUNET_a2s (addr, addrlen));
 447   if (plugin->cur_connections >= plugin->max_connections)
 448     return GNUNET_NO;
 449   plugin->cur_connections++;
 450   return GNUNET_YES;
 451 }
 452
 453 /**
 454  * Our external IP address/port mapping has changed.
 455  *
 456  * @param cls closure, the 'struct Plugin'
 457  * @param add_remove #GNUNET_YES to mean the new public IP address, #GNUNET_NO to mean
 458  *     the previous (now invalid) one
 459  * @param addr either the previous or the new public IP address
 460  * @param addrlen actual lenght of the address
 461  */
 462 static void
 463 tcp_nat_port_map_callback (void *cls, int add_remove,
 464     const struct sockaddr *addr, socklen_t addrlen)
 465 {
 466   struct Plugin *plugin = cls;
 467   struct GNUNET_HELLO_Address *address;
 468   struct IPv4TcpAddress t4;
 469   struct IPv6TcpAddress t6;
 470   void *arg;
 471   size_t args;
 472
 473   LOG(GNUNET_ERROR_TYPE_INFO, "NAT notification to %s address `%s'\n",
 474       (GNUNET_YES == add_remove) ? "add" : "remove",
 475       GNUNET_a2s (addr, addrlen));
 476   /* convert 'addr' to our internal format */
 477   switch (addr->sa_family)
 478   {
 479   case AF_INET:
 480     GNUNET_assert(addrlen == sizeof(struct sockaddr_in));
 481     memset (&t4, 0, sizeof(t4));
 482     t4.options = htonl (myoptions);
 483     t4.ipv4_addr = ((struct sockaddr_in *) addr)->sin_addr.s_addr;
 484     t4.t4_port = ((struct sockaddr_in *) addr)->sin_port;
 485     arg = &t4;
 486     args = sizeof(t4);
 487     break;
 488   case AF_INET6:
 489     GNUNET_assert(addrlen == sizeof(struct sockaddr_in6));
 490     memset (&t6, 0, sizeof(t6));
 491     memcpy (&t6.ipv6_addr, &((struct sockaddr_in6 *) addr)->sin6_addr,
 492         sizeof(struct in6_addr));
 493     t6.options = htonl (myoptions);
 494     t6.t6_port = ((struct sockaddr_in6 *) addr)->sin6_port;
 495     arg = &t6;
 496     args = sizeof(t6);
 497     break;
 498   default:
 499     GNUNET_break(0);
 500     return;
 501   }
 502   /* modify our published address list */
 503   address = GNUNET_HELLO_address_allocate (plugin->env->my_identity,
 504       PLUGIN_NAME, arg, args, GNUNET_HELLO_ADDRESS_INFO_NONE);
 505   plugin->env->notify_address (plugin->env->cls, add_remove, address);
 506   GNUNET_HELLO_address_free(address);
 507 }
 508
 509 /**
 510  * Function called for a quick conversion of the binary address to
 511  * a numeric address.  Note that the caller must not free the
 512  * address and that the next call to this function is allowed
 513  * to override the address again.
 514  *
 515  * @param cls closure (`struct Plugin*`)
 516  * @param addr binary address
 517  * @param addrlen length of the address
 518  * @return string representing the same address
 519  */
 520 static const char *
 521 tcp_address_to_string (void *cls, const void *addr, size_t addrlen)
 522 {
 523   static char rbuf[INET6_ADDRSTRLEN + 12];
 524   char buf[INET6_ADDRSTRLEN];
 525   const void *sb;
 526   struct in_addr a4;
 527   struct in6_addr a6;
 528   const struct IPv4TcpAddress *t4;
 529   const struct IPv6TcpAddress *t6;
 530   int af;
 531   uint16_t port;
 532   uint32_t options;
 533
 534   switch (addrlen)
 535   {
 536   case sizeof(struct IPv6TcpAddress):
 537     t6 = addr;
 538     af = AF_INET6;
 539     port = ntohs (t6->t6_port);
 540     options = ntohl (t6->options);
 541     memcpy (&a6, &t6->ipv6_addr, sizeof(a6));
 542     sb = &a6;
 543     break;
 544   case sizeof(struct IPv4TcpAddress):
 545     t4 = addr;
 546     af = AF_INET;
 547     port = ntohs (t4->t4_port);
 548     options = ntohl (t4->options);
 549     memcpy (&a4, &t4->ipv4_addr, sizeof(a4));
 550     sb = &a4;
 551     break;
 552   case 0:
 553   {
 554     GNUNET_snprintf (rbuf, sizeof(rbuf), "%s",
 555         TRANSPORT_SESSION_INBOUND_STRING);
 556     return rbuf;
 557   }
 558   default:
 559     LOG(GNUNET_ERROR_TYPE_WARNING, _("Unexpected address length: %u bytes\n"),
 560         (unsigned int ) addrlen);
 561     return NULL ;
 562   }
 563   if (NULL == inet_ntop (af, sb, buf, INET6_ADDRSTRLEN))
 564   {
 565     GNUNET_log_strerror(GNUNET_ERROR_TYPE_WARNING, "inet_ntop");
 566     return NULL ;
 567   }
 568   GNUNET_snprintf (rbuf, sizeof(rbuf),
 569       (af == AF_INET6) ? "%s.%u.[%s]:%u" : "%s.%u.%s:%u", PLUGIN_NAME, options,
 570       buf, port);
 571   return rbuf;
 572 }
 573
 574 /**
 575  * Function called to convert a string address to
 576  * a binary address.
 577  *
 578  * @param cls closure (`struct Plugin*`)
 579  * @param addr string address
 580  * @param addrlen length of the address
 581  * @param buf location to store the buffer
 582  * @param added location to store the number of bytes in the buffer.
 583  *        If the function returns #GNUNET_SYSERR, its contents are undefined.
 584  * @return #GNUNET_OK on success, #GNUNET_SYSERR on failure
 585  */
 586 static int
 587 tcp_string_to_address (void *cls, const char *addr, uint16_t addrlen,
 588     void **buf, size_t *added)
 589 {
 590   struct sockaddr_storage socket_address;
 591   char *address;
 592   char *plugin;
 593   char *optionstr;
 594   uint32_t options;
 595
 596   /* Format tcp.options.address:port */
 597   address = NULL;
 598   plugin = NULL;
 599   optionstr = NULL;
 600   if ((NULL == addr) || (addrlen == 0))
 601   {
 602     GNUNET_break(0);
 603     return GNUNET_SYSERR;
 604   }
 605   if ('\0' != addr[addrlen - 1])
 606   {
 607     GNUNET_break(0);
 608     return GNUNET_SYSERR;
 609   }
 610   if (strlen (addr) != addrlen - 1)
 611   {
 612     GNUNET_break(0);
 613     return GNUNET_SYSERR;
 614   }
 615   plugin = GNUNET_strdup (addr);
 616   optionstr = strchr (plugin, '.');
 617   if (NULL == optionstr)
 618   {
 619     GNUNET_break(0);
 620     GNUNET_free(plugin);
 621     return GNUNET_SYSERR;
 622   }
 623   optionstr[0] = '\0';
 624   optionstr++;
 625   options = atol (optionstr);
 626   address = strchr (optionstr, '.');
 627   if (NULL == address)
 628   {
 629     GNUNET_break(0);
 630     GNUNET_free(plugin);
 631     return GNUNET_SYSERR;
 632   }
 633   address[0] = '\0';
 634   address++;
 635
 636   if (GNUNET_OK
 637       != GNUNET_STRINGS_to_address_ip (address, strlen (address),
 638           &socket_address))
 639   {
 640     GNUNET_break(0);
 641     GNUNET_free(plugin);
 642     return GNUNET_SYSERR;
 643   }
 644
 645   GNUNET_free(plugin);
 646   switch (socket_address.ss_family)
 647   {
 648   case AF_INET:
 649   {
 650     struct IPv4TcpAddress *t4;
 651     struct sockaddr_in *in4 = (struct sockaddr_in *) &socket_address;
 652     t4 = GNUNET_new (struct IPv4TcpAddress);
 653     t4->options = htonl (options);
 654     t4->ipv4_addr = in4->sin_addr.s_addr;
 655     t4->t4_port = in4->sin_port;
 656     *buf = t4;
 657     *added = sizeof(struct IPv4TcpAddress);
 658     return GNUNET_OK;
 659   }
 660   case AF_INET6:
 661   {
 662     struct IPv6TcpAddress *t6;
 663     struct sockaddr_in6 *in6 = (struct sockaddr_in6 *) &socket_address;
 664     t6 = GNUNET_new (struct IPv6TcpAddress);
 665     t6->options = htonl (options);
 666     t6->ipv6_addr = in6->sin6_addr;
 667     t6->t6_port = in6->sin6_port;
 668     *buf = t6;
 669     *added = sizeof(struct IPv6TcpAddress);
 670     return GNUNET_OK;
 671   }
 672   default:
 673     return GNUNET_SYSERR;
 674   }
 675 }
 676
 677 /**
 678  * Closure for #session_lookup_by_client_it().
 679  */
 680 struct SessionClientCtx
 681 {
 682   /**
 683    * Client we are looking for.
 684    */
 685   const struct GNUNET_SERVER_Client *client;
 686
 687   /**
 688    * Session that was found.
 689    */
 690   struct Session *ret;
 691 };
 692
 693 static int
 694 session_lookup_by_client_it (void *cls, const struct GNUNET_PeerIdentity *key,
 695     void *value)
 696 {
 697   struct SessionClientCtx *sc_ctx = cls;
 698   struct Session *s = value;
 699
 700   if (s->client == sc_ctx->client)
 701   {
 702     sc_ctx->ret = s;
 703     return GNUNET_NO;
 704   }
 705   return GNUNET_YES;
 706 }
 707
 708 /**
 709  * Find the session handle for the given client.
 710  * Currently uses both the hashmap and the client
 711  * context, as the client context is new and the
 712  * logic still needs to be tested.
 713  *
 714  * @param plugin the plugin
 715  * @param client which client to find the session handle for
 716  * @return NULL if no matching session exists
 717  */
 718 static struct Session *
 719 lookup_session_by_client (struct Plugin *plugin,
 720     struct GNUNET_SERVER_Client *client)
 721 {
 722   struct Session *ret;
 723   struct SessionClientCtx sc_ctx;
 724
 725   ret = GNUNET_SERVER_client_get_user_context (client, struct Session);
 726   sc_ctx.client = client;
 727   sc_ctx.ret = NULL;
 728   GNUNET_CONTAINER_multipeermap_iterate (plugin->sessionmap,
 729       &session_lookup_by_client_it, &sc_ctx);
 730   /* check both methods yield the same result */
 731   GNUNET_break(ret == sc_ctx.ret);
 732   return sc_ctx.ret;
 733 }
 734
 735 /**
 736  * Functions with this signature are called whenever we need
 737  * to close a session due to a disconnect or failure to
 738  * establish a connection.
 739  *
 740  * @param cls the `struct Plugin`
 741  * @param session session to close down
 742  * @return #GNUNET_OK on success
 743  */
 744 static int
 745 tcp_disconnect_session (void *cls, struct Session *session)
 746 {
 747   struct Plugin *plugin = cls;
 748   struct PendingMessage *pm;
 749
 750   LOG(GNUNET_ERROR_TYPE_DEBUG,
 751       "Disconnecting session of peer `%s' address `%s'\n",
 752       GNUNET_i2s (&session->target),
 753       tcp_address_to_string (NULL, session->address->address, session->address->address_length));
 754
 755   if (GNUNET_SCHEDULER_NO_TASK != session->timeout_task)
 756   {
 757     GNUNET_SCHEDULER_cancel (session->timeout_task);
 758     session->timeout_task = GNUNET_SCHEDULER_NO_TASK;
 759   }
 760
 761   if (GNUNET_YES
 762       == GNUNET_CONTAINER_multipeermap_remove (plugin->sessionmap,
 763           &session->target, session))
 764   {
 765     GNUNET_STATISTICS_update (session->plugin->env->stats,
 766         gettext_noop ("# TCP sessions active"), -1, GNUNET_NO);
 767   }
 768   else
 769   {
 770     GNUNET_assert(
 771         GNUNET_YES == GNUNET_CONTAINER_multipeermap_remove (plugin->nat_wait_conns, &session->target, session));
 772   }
 773   if (NULL != session->client)
 774     GNUNET_SERVER_client_set_user_context(session->client, (void *) NULL);
 775
 776   /* clean up state */
 777   if (NULL != session->transmit_handle)
 778   {
 779     GNUNET_SERVER_notify_transmit_ready_cancel (session->transmit_handle);
 780     session->transmit_handle = NULL;
 781   }
 782   session->plugin->env->session_end (session->plugin->env->cls,
 783       &session->target, session);
 784
 785   if (GNUNET_SCHEDULER_NO_TASK != session->nat_connection_timeout)
 786   {
 787     GNUNET_SCHEDULER_cancel (session->nat_connection_timeout);
 788     session->nat_connection_timeout = GNUNET_SCHEDULER_NO_TASK;
 789   }
 790
 791   while (NULL != (pm = session->pending_messages_head))
 792   {
 793     LOG(GNUNET_ERROR_TYPE_DEBUG,
 794         pm->transmit_cont != NULL ? "Could not deliver message to `%4s'.\n" : "Could not deliver message to `%4s', notifying.\n",
 795         GNUNET_i2s (&session->target));
 796     GNUNET_STATISTICS_update (session->plugin->env->stats,
 797         gettext_noop ("# bytes currently in TCP buffers"),
 798         -(int64_t) pm->message_size, GNUNET_NO);
 799     GNUNET_STATISTICS_update (session->plugin->env->stats, gettext_noop
 800     ("# bytes discarded by TCP (disconnect)"), pm->message_size, GNUNET_NO);
 801     GNUNET_CONTAINER_DLL_remove(session->pending_messages_head,
 802         session->pending_messages_tail, pm);
 803     if (NULL != pm->transmit_cont)
 804       pm->transmit_cont (pm->transmit_cont_cls, &session->target, GNUNET_SYSERR,
 805           pm->message_size, 0);
 806     GNUNET_free(pm);
 807   }
 808   if (session->receive_delay_task != GNUNET_SCHEDULER_NO_TASK )
 809   {
 810     GNUNET_SCHEDULER_cancel (session->receive_delay_task);
 811     if (NULL != session->client)
 812       GNUNET_SERVER_receive_done (session->client, GNUNET_SYSERR);
 813   }
 814   if (NULL != session->client)
 815   {
 816     GNUNET_SERVER_client_disconnect (session->client);
 817     GNUNET_SERVER_client_drop (session->client);
 818     session->client = NULL;
 819   }
 820   GNUNET_HELLO_address_free(session->address);
 821   GNUNET_assert(NULL == session->transmit_handle);
 822   GNUNET_free(session);
 823   return GNUNET_OK;
 824 }
 825
 826 /**
 827  * Function that is called to get the keepalive factor.
 828  * GNUNET_CONSTANTS_IDLE_CONNECTION_TIMEOUT is divided by this number to
 829  * calculate the interval between keepalive packets.
 830  *
 831  * @param cls closure with the `struct Plugin`
 832  * @return keepalive factor
 833  */
 834 static unsigned int
 835 tcp_query_keepalive_factor (void *cls)
 836 {
 837   return 3;
 838 }
 839
 840 /**
 841  * Session was idle, so disconnect it
 842  *
 843  * @param cls the `struct Session` of the idle session
 844  * @param tc scheduler context
 845  */
 846 static void
 847 session_timeout (void *cls, const struct GNUNET_SCHEDULER_TaskContext *tc)
 848 {
 849   struct Session *s = cls;
 850
 851   s->timeout_task = GNUNET_SCHEDULER_NO_TASK;
 852   GNUNET_log(GNUNET_ERROR_TYPE_DEBUG,
 853       "Session %p was idle for %s, disconnecting\n", s,
 854       GNUNET_STRINGS_relative_time_to_string (GNUNET_CONSTANTS_IDLE_CONNECTION_TIMEOUT, GNUNET_YES));
 855   /* call session destroy function */
 856   tcp_disconnect_session (s->plugin, s);
 857 }
 858
 859 /**
 860  * Increment session timeout due to activity
 861  *
 862  * @param s session to increment timeout for
 863  */
 864 static void
 865 reschedule_session_timeout (struct Session *s)
 866 {
 867   GNUNET_assert(GNUNET_SCHEDULER_NO_TASK != s->timeout_task);
 868   GNUNET_SCHEDULER_cancel (s->timeout_task);
 869   s->timeout_task = GNUNET_SCHEDULER_add_delayed (
 870       GNUNET_CONSTANTS_IDLE_CONNECTION_TIMEOUT, &session_timeout, s);
 871   GNUNET_log(GNUNET_ERROR_TYPE_DEBUG,
 872       "Timeout rescheduled for session %p set to %s\n", s,
 873       GNUNET_STRINGS_relative_time_to_string (GNUNET_CONSTANTS_IDLE_CONNECTION_TIMEOUT, GNUNET_YES));
 874 }
 875
 876 /**
 877  * Create a new session.  Also queues a welcome message.
 878  *
 879  * @param plugin the plugin
 880  * @param target peer to connect to
 881  * @param client client to use, reference counter must have already been increased
 882  * @param is_nat this a NAT session, we should wait for a client to
 883  *               connect to us from an address, then assign that to
 884  *               the session
 885  * @return new session object
 886  */
 887 static struct Session *
 888 create_session (struct Plugin *plugin, const struct GNUNET_PeerIdentity *target,
 889     struct GNUNET_SERVER_Client *client, int is_nat)
 890 {
 891   struct Session *session;
 892   struct PendingMessage *pm;
 893   struct WelcomeMessage welcome;
 894
 895   if (GNUNET_YES != is_nat)
 896     GNUNET_assert(NULL != client);
 897   else
 898     GNUNET_assert(NULL == client);
 899
 900   LOG(GNUNET_ERROR_TYPE_DEBUG, "Creating new session for peer `%4s'\n",
 901       GNUNET_i2s (target));
 902   session = GNUNET_new (struct Session);
 903   session->last_activity = GNUNET_TIME_absolute_get ();
 904   session->plugin = plugin;
 905   session->is_nat = is_nat;
 906   session->client = client;
 907   session->target = *target;
 908   session->expecting_welcome = GNUNET_YES;
 909   session->ats_address_network_type = GNUNET_ATS_NET_UNSPECIFIED;
 910   pm = GNUNET_malloc (sizeof (struct PendingMessage) +
 911       sizeof (struct WelcomeMessage));
 912   pm->msg = (const char *) &pm[1];
 913   pm->message_size = sizeof(struct WelcomeMessage);
 914   welcome.header.size = htons (sizeof(struct WelcomeMessage));
 915   welcome.header.type = htons (GNUNET_MESSAGE_TYPE_TRANSPORT_TCP_WELCOME);
 916   welcome.clientIdentity = *plugin->env->my_identity;
 917   memcpy (&pm[1], &welcome, sizeof(welcome));
 918   pm->timeout = GNUNET_TIME_UNIT_FOREVER_ABS;
 919   GNUNET_STATISTICS_update (plugin->env->stats,
 920       gettext_noop ("# bytes currently in TCP buffers"), pm->message_size,
 921       GNUNET_NO);
 922   GNUNET_CONTAINER_DLL_insert(session->pending_messages_head,
 923       session->pending_messages_tail, pm);
 924   if (GNUNET_YES != is_nat)
 925   {
 926     GNUNET_STATISTICS_update (plugin->env->stats,
 927         gettext_noop ("# TCP sessions active"), 1, GNUNET_NO);
 928   }
 929   session->timeout_task = GNUNET_SCHEDULER_add_delayed (
 930       GNUNET_CONSTANTS_IDLE_CONNECTION_TIMEOUT, &session_timeout, session);
 931   return session;
 932 }
 933
 934 /**
 935  * If we have pending messages, ask the server to
 936  * transmit them (schedule the respective tasks, etc.)
 937  *
 938  * @param session for which session should we do this
 939  */
 940 static void
 941 process_pending_messages (struct Session *session);
 942
 943 /**
 944  * Function called to notify a client about the socket
 945  * being ready to queue more data.  "buf" will be
 946  * NULL and "size" zero if the socket was closed for
 947  * writing in the meantime.
 948  *
 949  * @param cls closure
 950  * @param size number of bytes available in buf
 951  * @param buf where the callee should write the message
 952  * @return number of bytes written to buf
 953  */
 954 static size_t
 955 do_transmit (void *cls, size_t size, void *buf)
 956 {
 957   struct Session *session = cls;
 958   struct GNUNET_PeerIdentity pid;
 959   struct Plugin *plugin;
 960   struct PendingMessage *pos;
 961   struct PendingMessage *hd;
 962   struct PendingMessage *tl;
 963   struct GNUNET_TIME_Absolute now;
 964   char *cbuf;
 965   size_t ret;
 966
 967   session->transmit_handle = NULL;
 968   plugin = session->plugin;
 969   if (NULL == buf)
 970   {
 971     LOG(GNUNET_ERROR_TYPE_DEBUG,
 972         "Timeout trying to transmit to peer `%4s', discarding message queue.\n",
 973         GNUNET_i2s (&session->target));
 974     /* timeout; cancel all messages that have already expired */
 975     hd = NULL;
 976     tl = NULL;
 977     ret = 0;
 978     now = GNUNET_TIME_absolute_get ();
 979     while ((NULL != (pos = session->pending_messages_head))
 980         && (pos->timeout.abs_value_us <= now.abs_value_us))
 981     {
 982       GNUNET_CONTAINER_DLL_remove(session->pending_messages_head,
 983           session->pending_messages_tail, pos);
 984       LOG(GNUNET_ERROR_TYPE_DEBUG,
 985           "Failed to transmit %u byte message to `%4s'.\n", pos->message_size,
 986           GNUNET_i2s (&session->target));
 987       ret += pos->message_size;
 988       GNUNET_CONTAINER_DLL_insert_after(hd, tl, tl, pos);
 989     }
 990     /* do this call before callbacks (so that if callbacks destroy
 991      * session, they have a chance to cancel actions done by this
 992      * call) */
 993     process_pending_messages (session);
 994     pid = session->target;
 995     /* no do callbacks and do not use session again since
 996      * the callbacks may abort the session */
 997     while (NULL != (pos = hd))
 998     {
 999       GNUNET_CONTAINER_DLL_remove(hd, tl, pos);
1000       if (pos->transmit_cont != NULL )
1001         pos->transmit_cont (pos->transmit_cont_cls, &pid, GNUNET_SYSERR,
1002             pos->message_size, 0);
1003       GNUNET_free(pos);
1004     }
1005     GNUNET_STATISTICS_update (plugin->env->stats,
1006         gettext_noop ("# bytes currently in TCP buffers"), -(int64_t) ret,
1007         GNUNET_NO);
1008     GNUNET_STATISTICS_update (plugin->env->stats, gettext_noop
1009     ("# bytes discarded by TCP (timeout)"), ret, GNUNET_NO);
1010     return 0;
1011   }
1012   /* copy all pending messages that would fit */
1013   ret = 0;
1014   cbuf = buf;
1015   hd = NULL;
1016   tl = NULL;
1017   while (NULL != (pos = session->pending_messages_head))
1018   {
1019     if (ret + pos->message_size > size)
1020       break;
1021     GNUNET_CONTAINER_DLL_remove(session->pending_messages_head,
1022         session->pending_messages_tail, pos);
1023     GNUNET_assert(size >= pos->message_size);
1024     LOG(GNUNET_ERROR_TYPE_DEBUG, "Transmitting message of type %u\n",
1025         ntohs (((struct GNUNET_MessageHeader * ) pos->msg)->type));
1026     /* FIXME: this memcpy can be up to 7% of our total runtime */
1027     memcpy (cbuf, pos->msg, pos->message_size);
1028     cbuf += pos->message_size;
1029     ret += pos->message_size;
1030     size -= pos->message_size;
1031     GNUNET_CONTAINER_DLL_insert_tail(hd, tl, pos);
1032   }
1033   /* schedule 'continuation' before callbacks so that callbacks that
1034    * cancel everything don't cause us to use a session that no longer
1035    * exists... */
1036   process_pending_messages (session);
1037   session->last_activity = GNUNET_TIME_absolute_get ();
1038   pid = session->target;
1039   /* we'll now call callbacks that may cancel the session; hence
1040    * we should not use 'session' after this point */
1041   while (NULL != (pos = hd))
1042   {
1043     GNUNET_CONTAINER_DLL_remove(hd, tl, pos);
1044     if (pos->transmit_cont != NULL )
1045       pos->transmit_cont (pos->transmit_cont_cls, &pid, GNUNET_OK,
1046           pos->message_size, pos->message_size); /* FIXME: include TCP overhead */
1047     GNUNET_free(pos);
1048   }
1049   GNUNET_assert(hd == NULL);
1050   GNUNET_assert(tl == NULL);
1051   LOG(GNUNET_ERROR_TYPE_DEBUG, "Transmitting %u bytes\n", ret);
1052   GNUNET_STATISTICS_update (plugin->env->stats,
1053       gettext_noop ("# bytes currently in TCP buffers"), -(int64_t) ret,
1054       GNUNET_NO);
1055   GNUNET_STATISTICS_update (plugin->env->stats,
1056       gettext_noop ("# bytes transmitted via TCP"), ret, GNUNET_NO);
1057   return ret;
1058 }
1059
1060 /**
1061  * If we have pending messages, ask the server to
1062  * transmit them (schedule the respective tasks, etc.)
1063  *
1064  * @param session for which session should we do this
1065  */
1066 static void
1067 process_pending_messages (struct Session *session)
1068 {
1069   struct PendingMessage *pm;
1070
1071   GNUNET_assert(NULL != session->client);
1072   if (NULL != session->transmit_handle)
1073     return;
1074   if (NULL == (pm = session->pending_messages_head))
1075     return;
1076
1077   session->transmit_handle = GNUNET_SERVER_notify_transmit_ready (
1078       session->client, pm->message_size,
1079       GNUNET_TIME_absolute_get_remaining (pm->timeout), &do_transmit, session);
1080 }
1081
1082 #if EXTRA_CHECKS
1083 /**
1084  * Closure for #session_it().
1085  */
1086 struct FindSessionContext
1087 {
1088   /**
1089    * Session we are looking for.
1090    */
1091   struct Session *s;
1092
1093   /**
1094    * Set to #GNUNET_OK if we found the session.
1095    */
1096   int res;
1097 };
1098
1099 /**
1100  * Function called to check if a session is in our maps.
1101  *
1102  * @param cls the `struct FindSessionContext`
1103  * @param key peer identity
1104  * @param value session in the map
1105  * @return #GNUNET_YES to continue looking, #GNUNET_NO if we found the session
1106  */
1107 static int
1108 session_it (void *cls, const struct GNUNET_PeerIdentity *key, void *value)
1109 {
1110   struct FindSessionContext *res = cls;
1111   struct Session *session = value;
1112
1113   if (res->s == session)
1114   {
1115     res->res = GNUNET_OK;
1116     return GNUNET_NO;
1117   }
1118   return GNUNET_YES;
1119 }
1120
1121 /**
1122  * Check that the given session is known to the plugin and
1123  * is in one of our maps.
1124  *
1125  * @param plugin the plugin to check against
1126  * @param session the session to check
1127  * @return #GNUNET_OK if all is well, #GNUNET_SYSERR if the session is invalid
1128  */
1129 static int
1130 find_session (struct Plugin *plugin, struct Session *session)
1131 {
1132   struct FindSessionContext session_map_res;
1133   struct FindSessionContext nat_map_res;
1134
1135   session_map_res.s = session;
1136   session_map_res.res = GNUNET_SYSERR;
1137   GNUNET_CONTAINER_multipeermap_iterate (plugin->sessionmap, &session_it,
1138       &session_map_res);
1139   if (GNUNET_SYSERR != session_map_res.res)
1140     return GNUNET_OK;
1141   nat_map_res.s = session;
1142   nat_map_res.res = GNUNET_SYSERR;
1143   GNUNET_CONTAINER_multipeermap_iterate (plugin->nat_wait_conns, &session_it,
1144       &nat_map_res);
1145   if (GNUNET_SYSERR != nat_map_res.res)
1146     return GNUNET_OK;
1147   GNUNET_break(0);
1148   return GNUNET_SYSERR;
1149 }
1150 #endif
1151
1152 /**
1153  * Function that can be used by the transport service to transmit
1154  * a message using the plugin.   Note that in the case of a
1155  * peer disconnecting, the continuation MUST be called
1156  * prior to the disconnect notification itself.  This function
1157  * will be called with this peer's HELLO message to initiate
1158  * a fresh connection to another peer.
1159  *
1160  * @param cls closure
1161  * @param session which session must be used
1162  * @param msgbuf the message to transmit
1163  * @param msgbuf_size number of bytes in 'msgbuf'
1164  * @param priority how important is the message (most plugins will
1165  *                 ignore message priority and just FIFO)
1166  * @param to how long to wait at most for the transmission (does not
1167  *                require plugins to discard the message after the timeout,
1168  *                just advisory for the desired delay; most plugins will ignore
1169  *                this as well)
1170  * @param cont continuation to call once the message has
1171  *        been transmitted (or if the transport is ready
1172  *        for the next transmission call; or if the
1173  *        peer disconnected...); can be NULL
1174  * @param cont_cls closure for @a cont
1175  * @return number of bytes used (on the physical network, with overheads);
1176  *         -1 on hard errors (i.e. address invalid); 0 is a legal value
1177  *         and does NOT mean that the message was not transmitted (DV)
1178  */
1179 static ssize_t
1180 tcp_plugin_send (void *cls, struct Session *session, const char *msgbuf,
1181     size_t msgbuf_size, unsigned int priority, struct GNUNET_TIME_Relative to,
1182     GNUNET_TRANSPORT_TransmitContinuation cont, void *cont_cls)
1183 {
1184   struct Plugin * plugin = cls;
1185   struct PendingMessage *pm;
1186
1187 #if EXTRA_CHECKS
1188   if (GNUNET_SYSERR == find_session (plugin, session))
1189   {
1190     LOG(GNUNET_ERROR_TYPE_ERROR, _("Trying to send with invalid session %p\n"));
1191     GNUNET_assert(0);
1192     return GNUNET_SYSERR;
1193   }
1194 #endif
1195   /* create new message entry */
1196   pm = GNUNET_malloc (sizeof (struct PendingMessage) + msgbuf_size);
1197   pm->msg = (const char *) &pm[1];
1198   memcpy (&pm[1], msgbuf, msgbuf_size);
1199   pm->message_size = msgbuf_size;
1200   pm->timeout = GNUNET_TIME_relative_to_absolute (to);
1201   pm->transmit_cont = cont;
1202   pm->transmit_cont_cls = cont_cls;
1203
1204   LOG(GNUNET_ERROR_TYPE_DEBUG,
1205       "Asked to transmit %u bytes to `%s', added message to list.\n",
1206       msgbuf_size, GNUNET_i2s (&session->target));
1207
1208   if (GNUNET_YES
1209       == GNUNET_CONTAINER_multipeermap_contains_value (plugin->sessionmap,
1210           &session->target, session))
1211   {
1212     GNUNET_assert(NULL != session->client);
1213     GNUNET_SERVER_client_set_timeout (session->client,
1214         GNUNET_CONSTANTS_IDLE_CONNECTION_TIMEOUT);
1215     GNUNET_STATISTICS_update (plugin->env->stats,
1216         gettext_noop ("# bytes currently in TCP buffers"), msgbuf_size,
1217         GNUNET_NO);
1218
1219     /* append pm to pending_messages list */
1220     GNUNET_CONTAINER_DLL_insert_tail(session->pending_messages_head,
1221         session->pending_messages_tail, pm);
1222
1223     process_pending_messages (session);
1224     return msgbuf_size;
1225   }
1226   else if (GNUNET_YES
1227       == GNUNET_CONTAINER_multipeermap_contains_value (plugin->nat_wait_conns,
1228           &session->target, session))
1229   {
1230     LOG(GNUNET_ERROR_TYPE_DEBUG,
1231         "This NAT WAIT session for peer `%s' is not yet ready!\n",
1232         GNUNET_i2s (&session->target));
1233     GNUNET_STATISTICS_update (plugin->env->stats,
1234         gettext_noop ("# bytes currently in TCP buffers"), msgbuf_size,
1235         GNUNET_NO);
1236
1237     /* append pm to pending_messages list */
1238     GNUNET_CONTAINER_DLL_insert_tail(session->pending_messages_head,
1239         session->pending_messages_tail, pm);
1240     return msgbuf_size;
1241   }
1242   else
1243   {
1244     LOG(GNUNET_ERROR_TYPE_ERROR, "Invalid session %p\n", session);
1245     if (NULL != cont)
1246       cont (cont_cls, &session->target, GNUNET_SYSERR, pm->message_size, 0);
1247     GNUNET_break(0);
1248     GNUNET_free(pm);
1249     return GNUNET_SYSERR; /* session does not exist here */
1250   }
1251 }
1252
1253 /**
1254  * Closure for #session_lookup_it().
1255  */
1256 struct SessionItCtx
1257 {
1258   /**
1259    * Address we are looking for.
1260    */
1261   const struct GNUNET_HELLO_Address *address;
1262
1263   /**
1264    * Where to store the session (if we found it).
1265    */
1266   struct Session *result;
1267
1268 };
1269
1270 /**
1271  * Look for a session by address.
1272  *
1273  * @param cls the `struct SessionItCtx`
1274  * @param key unused
1275  * @param value a `struct Session`
1276  * @return #GNUNET_YES to continue looking, #GNUNET_NO if we found the session
1277  */
1278 static int
1279 session_lookup_it (void *cls, const struct GNUNET_PeerIdentity *key,
1280     void *value)
1281 {
1282   struct SessionItCtx * si_ctx = cls;
1283   struct Session * session = value;
1284
1285   if (0 != GNUNET_HELLO_address_cmp (si_ctx->address, session->address))
1286     return GNUNET_YES;
1287   /* Found existing session */
1288   si_ctx->result = session;
1289   return GNUNET_NO;
1290 }
1291
1292 /**
1293  * Task cleaning up a NAT connection attempt after timeout
1294  *
1295  * @param cls the `struct Session`
1296  * @param tc scheduler context (unused)
1297  */
1298 static void
1299 nat_connect_timeout (void *cls, const struct GNUNET_SCHEDULER_TaskContext *tc)
1300 {
1301   struct Session *session = cls;
1302
1303   session->nat_connection_timeout = GNUNET_SCHEDULER_NO_TASK;
1304   LOG(GNUNET_ERROR_TYPE_DEBUG,
1305       "NAT WAIT connection to `%4s' at `%s' could not be established, removing session\n",
1306       GNUNET_i2s (&session->target),
1307       tcp_address_to_string (NULL, session->address->address, session->address->address_length));
1308   tcp_disconnect_session (session->plugin, session);
1309 }
1310
1311 static void
1312 tcp_plugin_update_session_timeout (void *cls,
1313     const struct GNUNET_PeerIdentity *peer, struct Session *session)
1314 {
1315   struct Plugin *plugin = cls;
1316
1317   if (GNUNET_SYSERR == find_session (plugin, session))
1318     return;
1319   reschedule_session_timeout (session);
1320 }
1321
1322 /**
1323  * Create a new session to transmit data to the target
1324  * This session will used to send data to this peer and the plugin will
1325  * notify us by calling the env->session_end function
1326  *
1327  * @param cls closure
1328  * @param address the address to use
1329  * @return the session if the address is valid, NULL otherwise
1330  */
1331 static struct Session *
1332 tcp_plugin_get_session (void *cls, const struct GNUNET_HELLO_Address *address)
1333 {
1334   struct Plugin *plugin = cls;
1335   struct Session *session = NULL;
1336   int af;
1337   const void *sb;
1338   size_t sbs;
1339   struct GNUNET_CONNECTION_Handle *sa;
1340   struct sockaddr_in a4;
1341   struct sockaddr_in6 a6;
1342   const struct IPv4TcpAddress *t4;
1343   const struct IPv6TcpAddress *t6;
1344   struct GNUNET_ATS_Information ats;
1345   unsigned int is_natd = GNUNET_NO;
1346   size_t addrlen;
1347
1348   addrlen = address->address_length;
1349   LOG(GNUNET_ERROR_TYPE_DEBUG,
1350       "Trying to get session for `%s' address of peer `%s'\n",
1351       tcp_address_to_string(NULL, address->address, address->address_length),
1352       GNUNET_i2s (&address->peer));
1353
1354   /* look for existing session */
1355   if (GNUNET_YES == GNUNET_CONTAINER_multipeermap_contains (plugin->sessionmap,
1356           &address->peer))
1357   {
1358     struct SessionItCtx si_ctx;
1359
1360     si_ctx.address = address;
1361     si_ctx.result = NULL;
1362
1363     GNUNET_CONTAINER_multipeermap_get_multiple (plugin->sessionmap,
1364         &address->peer, &session_lookup_it, &si_ctx);
1365     if (si_ctx.result != NULL )
1366     {
1367       session = si_ctx.result;
1368       LOG(GNUNET_ERROR_TYPE_DEBUG,
1369           "Found existing session for `%s' address `%s' session %p\n",
1370           GNUNET_i2s (&address->peer),
1371           tcp_address_to_string(NULL, address->address, address->address_length),
1372           session);
1373       return session;
1374     }
1375     LOG(GNUNET_ERROR_TYPE_DEBUG,
1376         "Existing sessions did not match address `%s' or peer `%s'\n",
1377         tcp_address_to_string(NULL, address->address, address->address_length),
1378         GNUNET_i2s (&address->peer));
1379   }
1380
1381   if (addrlen == sizeof(struct IPv6TcpAddress))
1382   {
1383     GNUNET_assert(NULL != address->address); /* make static analysis happy */
1384     t6 = address->address;
1385     af = AF_INET6;
1386     memset (&a6, 0, sizeof(a6));
1387 #if HAVE_SOCKADDR_IN_SIN_LEN
1388     a6.sin6_len = sizeof (a6);
1389 #endif
1390     a6.sin6_family = AF_INET6;
1391     a6.sin6_port = t6->t6_port;
1392     if (t6->t6_port == 0)
1393       is_natd = GNUNET_YES;
1394     memcpy (&a6.sin6_addr, &t6->ipv6_addr, sizeof(struct in6_addr));
1395     sb = &a6;
1396     sbs = sizeof(a6);
1397   }
1398   else if (addrlen == sizeof(struct IPv4TcpAddress))
1399   {
1400     GNUNET_assert(NULL != address->address); /* make static analysis happy */
1401     t4 = address->address;
1402     af = AF_INET;
1403     memset (&a4, 0, sizeof(a4));
1404 #if HAVE_SOCKADDR_IN_SIN_LEN
1405     a4.sin_len = sizeof (a4);
1406 #endif
1407     a4.sin_family = AF_INET;
1408     a4.sin_port = t4->t4_port;
1409     if (t4->t4_port == 0)
1410       is_natd = GNUNET_YES;
1411     a4.sin_addr.s_addr = t4->ipv4_addr;
1412     sb = &a4;
1413     sbs = sizeof(a4);
1414   }
1415   else
1416   {
1417     GNUNET_STATISTICS_update (plugin->env->stats, gettext_noop
1418     ("# requests to create session with invalid address"), 1, GNUNET_NO);
1419     return NULL ;
1420   }
1421
1422   ats = plugin->env->get_address_type (plugin->env->cls, sb, sbs);
1423
1424   if ((is_natd == GNUNET_YES) && (addrlen == sizeof(struct IPv6TcpAddress)))
1425   {
1426     /* NAT client only works with IPv4 addresses */
1427     return NULL ;
1428   }
1429
1430   if (plugin->cur_connections >= plugin->max_connections)
1431   {
1432     /* saturated */
1433     return NULL ;
1434   }
1435
1436   if ((is_natd == GNUNET_YES)
1437       && (GNUNET_YES
1438           == GNUNET_CONTAINER_multipeermap_contains (plugin->nat_wait_conns,
1439               &address->peer)))
1440   {
1441     /* Only do one NAT punch attempt per peer identity */
1442     return NULL ;
1443   }
1444
1445   if ((is_natd == GNUNET_YES) && (NULL != plugin->nat) &&
1446       (GNUNET_NO == GNUNET_CONTAINER_multipeermap_contains (plugin->nat_wait_conns,
1447               &address->peer)))
1448   {
1449     LOG (GNUNET_ERROR_TYPE_DEBUG,
1450         "Found valid IPv4 NAT address (creating session)!\n");
1451     session = create_session (plugin, &address->peer, NULL, GNUNET_YES);
1452     session->address = GNUNET_HELLO_address_copy (address);
1453     session->ats_address_network_type = (enum GNUNET_ATS_Network_Type) ntohl (
1454         ats.value);
1455     GNUNET_break(
1456         session->ats_address_network_type != GNUNET_ATS_NET_UNSPECIFIED);
1457     session->nat_connection_timeout = GNUNET_SCHEDULER_add_delayed (NAT_TIMEOUT,
1458         &nat_connect_timeout, session);
1459     GNUNET_assert(session != NULL);
1460     GNUNET_assert(
1461         GNUNET_OK == GNUNET_CONTAINER_multipeermap_put (plugin->nat_wait_conns, &session->target, session, GNUNET_CONTAINER_MULTIHASHMAPOPTION_UNIQUE_ONLY));
1462
1463     LOG(GNUNET_ERROR_TYPE_DEBUG,
1464         "Created NAT WAIT connection to `%4s' at `%s'\n",
1465         GNUNET_i2s (&session->target), GNUNET_a2s (sb, sbs));
1466
1467     if (GNUNET_OK == GNUNET_NAT_run_client (plugin->nat, &a4))
1468       return session;
1469     else
1470     {
1471       LOG(GNUNET_ERROR_TYPE_DEBUG,
1472           "Running NAT client for `%4s' at `%s' failed\n",
1473           GNUNET_i2s (&session->target), GNUNET_a2s (sb, sbs));
1474       tcp_disconnect_session (plugin, session);
1475       return NULL ;
1476     }
1477   }
1478
1479   /* create new outbound session */
1480   GNUNET_assert(plugin->cur_connections <= plugin->max_connections);
1481   sa = GNUNET_CONNECTION_create_from_sockaddr (af, sb, sbs);
1482   if (NULL == sa)
1483   {
1484     LOG(GNUNET_ERROR_TYPE_DEBUG,
1485         "Failed to create connection to `%4s' at `%s'\n",
1486         GNUNET_i2s (&address->peer), GNUNET_a2s (sb, sbs));
1487     return NULL ;
1488   }
1489   plugin->cur_connections++;
1490   if (plugin->cur_connections == plugin->max_connections)
1491     GNUNET_SERVER_suspend (plugin->server); /* Maximum number of connections rechead */
1492
1493   LOG(GNUNET_ERROR_TYPE_DEBUG,
1494       "Asked to transmit to `%4s', creating fresh session using address `%s'.\n",
1495       GNUNET_i2s (&address->peer), GNUNET_a2s (sb, sbs));
1496
1497   session = create_session (plugin, &address->peer,
1498       GNUNET_SERVER_connect_socket (plugin->server, sa), GNUNET_NO);
1499   session->address = GNUNET_HELLO_address_copy (address);
1500   session->ats_address_network_type = (enum GNUNET_ATS_Network_Type) ntohl (
1501       ats.value);
1502   GNUNET_break(session->ats_address_network_type != GNUNET_ATS_NET_UNSPECIFIED);
1503   GNUNET_SERVER_client_set_user_context(session->client, session);
1504   GNUNET_CONTAINER_multipeermap_put (plugin->sessionmap, &session->target,
1505       session, GNUNET_CONTAINER_MULTIHASHMAPOPTION_MULTIPLE);
1506   LOG(GNUNET_ERROR_TYPE_DEBUG,
1507       "Creating new session for `%s' address `%s' session %p\n",
1508       GNUNET_i2s (&address->peer),
1509       tcp_address_to_string(NULL, address->address, address->address_length),
1510       session);
1511   /* Send TCP Welcome */
1512   process_pending_messages (session);
1513
1514   return session;
1515 }
1516
1517 static int
1518 session_disconnect_it (void *cls, const struct GNUNET_PeerIdentity *key,
1519     void *value)
1520 {
1521   struct Plugin *plugin = cls;
1522   struct Session *session = value;
1523
1524   GNUNET_STATISTICS_update (session->plugin->env->stats, gettext_noop
1525   ("# transport-service disconnect requests for TCP"), 1, GNUNET_NO);
1526   tcp_disconnect_session (plugin, session);
1527   return GNUNET_YES;
1528 }
1529
1530 /**
1531  * Function that can be called to force a disconnect from the
1532  * specified neighbour.  This should also cancel all previously
1533  * scheduled transmissions.  Obviously the transmission may have been
1534  * partially completed already, which is OK.  The plugin is supposed
1535  * to close the connection (if applicable) and no longer call the
1536  * transmit continuation(s).
1537  *
1538  * Finally, plugin MUST NOT call the services's receive function to
1539  * notify the service that the connection to the specified target was
1540  * closed after a getting this call.
1541  *
1542  * @param cls closure
1543  * @param target peer for which the last transmission is
1544  *        to be cancelled
1545  */
1546 static void
1547 tcp_plugin_disconnect (void *cls, const struct GNUNET_PeerIdentity *target)
1548 {
1549   struct Plugin *plugin = cls;
1550
1551   LOG(GNUNET_ERROR_TYPE_DEBUG, "Disconnecting peer `%4s'\n",
1552       GNUNET_i2s (target));
1553   GNUNET_CONTAINER_multipeermap_get_multiple (plugin->sessionmap, target,
1554       &session_disconnect_it, plugin);
1555   GNUNET_CONTAINER_multipeermap_get_multiple (plugin->nat_wait_conns, target,
1556       &session_disconnect_it, plugin);
1557 }
1558
1559 /**
1560  * Running pretty printers: head
1561  */
1562 static struct PrettyPrinterContext *ppc_dll_head;
1563
1564 /**
1565  * Running pretty printers: tail
1566  */
1567 static struct PrettyPrinterContext *ppc_dll_tail;
1568
1569 /**
1570  * Context for address to string conversion.
1571  */
1572 struct PrettyPrinterContext
1573 {
1574   /**
1575    * DLL
1576    */
1577   struct PrettyPrinterContext *next;
1578
1579   /**
1580    * DLL
1581    */
1582   struct PrettyPrinterContext *prev;
1583
1584   /**
1585    * Timeout task
1586    */
1587   GNUNET_SCHEDULER_TaskIdentifier timeout_task;
1588
1589   /**
1590    * Resolver handle
1591    */
1592   struct GNUNET_RESOLVER_RequestHandle *resolver_handle;
1593
1594   /**
1595    * Function to call with the result.
1596    */
1597   GNUNET_TRANSPORT_AddressStringCallback asc;
1598
1599   /**
1600    * Clsoure for 'asc'.
1601    */
1602   void *asc_cls;
1603
1604   /**
1605    * Port to add after the IP address.
1606    */
1607   uint16_t port;
1608
1609   /**
1610    * IPv6 address
1611    */
1612   int ipv6;
1613
1614   /**
1615    * Options
1616    */
1617   uint32_t options;
1618 };
1619
1620 static void
1621 ppc_cancel_task (void *cls, const struct GNUNET_SCHEDULER_TaskContext *tc)
1622 {
1623   struct PrettyPrinterContext *ppc = cls;
1624
1625   ppc->timeout_task = GNUNET_SCHEDULER_NO_TASK;
1626   if (NULL != ppc->resolver_handle)
1627   {
1628     GNUNET_RESOLVER_request_cancel (ppc->resolver_handle);
1629     ppc->resolver_handle = NULL;
1630   }
1631   GNUNET_CONTAINER_DLL_remove(ppc_dll_head, ppc_dll_tail, ppc);
1632   GNUNET_free(ppc);
1633 }
1634
1635 /**
1636  * Append our port and forward the result.
1637  *
1638  * @param cls the 'struct PrettyPrinterContext*'
1639  * @param hostname hostname part of the address
1640  */
1641 static void
1642 append_port (void *cls, const char *hostname)
1643 {
1644   struct PrettyPrinterContext *ppc = cls;
1645   struct PrettyPrinterContext *cur;
1646   char *ret;
1647
1648   if (NULL == hostname)
1649   {
1650     ppc->asc (ppc->asc_cls, NULL );
1651     GNUNET_CONTAINER_DLL_remove(ppc_dll_head, ppc_dll_tail, ppc);
1652     GNUNET_SCHEDULER_cancel (ppc->timeout_task);
1653     ppc->timeout_task = GNUNET_SCHEDULER_NO_TASK;
1654     ppc->resolver_handle = NULL;
1655     GNUNET_free(ppc);
1656     return;
1657   }
1658   for (cur = ppc_dll_head; (NULL != cur); cur = cur->next)
1659     if (cur == ppc)
1660       break;
1661   if (NULL == cur)
1662   {
1663     GNUNET_break(0);
1664     return;
1665   }
1666
1667   if (GNUNET_YES == ppc->ipv6)
1668     GNUNET_asprintf (&ret, "%s.%u.[%s]:%d", PLUGIN_NAME, ppc->options, hostname,
1669         ppc->port);
1670   else
1671     GNUNET_asprintf (&ret, "%s.%u.%s:%d", PLUGIN_NAME, ppc->options, hostname,
1672         ppc->port);
1673   ppc->asc (ppc->asc_cls, ret);
1674   GNUNET_free(ret);
1675 }
1676
1677 /**
1678  * Convert the transports address to a nice, human-readable
1679  * format.
1680  *
1681  * @param cls closure
1682  * @param type name of the transport that generated the address
1683  * @param addr one of the addresses of the host, NULL for the last address
1684  *        the specific address format depends on the transport
1685  * @param addrlen length of the address
1686  * @param numeric should (IP) addresses be displayed in numeric form?
1687  * @param timeout after how long should we give up?
1688  * @param asc function to call on each string
1689  * @param asc_cls closure for asc
1690  */
1691 static void
1692 tcp_plugin_address_pretty_printer (void *cls, const char *type,
1693     const void *addr, size_t addrlen, int numeric,
1694     struct GNUNET_TIME_Relative timeout,
1695     GNUNET_TRANSPORT_AddressStringCallback asc, void *asc_cls)
1696 {
1697   struct PrettyPrinterContext *ppc;
1698   const void *sb;
1699   size_t sbs;
1700   struct sockaddr_in a4;
1701   struct sockaddr_in6 a6;
1702   const struct IPv4TcpAddress *t4;
1703   const struct IPv6TcpAddress *t6;
1704   uint16_t port;
1705   uint32_t options;
1706
1707   if (addrlen == sizeof(struct IPv6TcpAddress))
1708   {
1709     t6 = addr;
1710     memset (&a6, 0, sizeof(a6));
1711     a6.sin6_family = AF_INET6;
1712     a6.sin6_port = t6->t6_port;
1713     memcpy (&a6.sin6_addr, &t6->ipv6_addr, sizeof(struct in6_addr));
1714     port = ntohs (t6->t6_port);
1715     options = ntohl (t6->options);
1716     sb = &a6;
1717     sbs = sizeof(a6);
1718   }
1719   else if (addrlen == sizeof(struct IPv4TcpAddress))
1720   {
1721     t4 = addr;
1722     memset (&a4, 0, sizeof(a4));
1723     a4.sin_family = AF_INET;
1724     a4.sin_port = t4->t4_port;
1725     a4.sin_addr.s_addr = t4->ipv4_addr;
1726     port = ntohs (t4->t4_port);
1727     options = ntohl (t4->options);
1728     sb = &a4;
1729     sbs = sizeof(a4);
1730   }
1731   else if (0 == addrlen)
1732   {
1733     asc (asc_cls, TRANSPORT_SESSION_INBOUND_STRING);
1734     asc (asc_cls, NULL );
1735     return;
1736   }
1737   else
1738   {
1739     /* invalid address */
1740     GNUNET_break_op(0);
1741     asc (asc_cls, NULL );
1742     return;
1743   }
1744   ppc = GNUNET_new (struct PrettyPrinterContext);
1745   if (addrlen == sizeof(struct IPv6TcpAddress))
1746     ppc->ipv6 = GNUNET_YES;
1747   else
1748     ppc->ipv6 = GNUNET_NO;
1749   ppc->asc = asc;
1750   ppc->asc_cls = asc_cls;
1751   ppc->port = port;
1752   ppc->options = options;
1753   ppc->timeout_task = GNUNET_SCHEDULER_add_delayed (
1754       GNUNET_TIME_relative_multiply (timeout, 2), &ppc_cancel_task, ppc);
1755   ppc->resolver_handle = GNUNET_RESOLVER_hostname_get (sb, sbs, !numeric,
1756       timeout, &append_port, ppc);
1757   if (NULL != ppc->resolver_handle)
1758   {
1759     //GNUNET_log (GNUNET_ERROR_TYPE_ERROR, "Adding request %p\n", ppc);
1760     GNUNET_CONTAINER_DLL_insert(ppc_dll_head, ppc_dll_tail, ppc);
1761   }
1762   else
1763   {
1764     GNUNET_break(0);
1765     GNUNET_free(ppc);
1766   }
1767 }
1768
1769 /**
1770  * Check if the given port is plausible (must be either our listen
1771  * port or our advertised port), or any port if we are behind NAT
1772  * and do not have a port open.  If it is neither, we return
1773  * #GNUNET_SYSERR.
1774  *
1775  * @param plugin global variables
1776  * @param in_port port number to check
1777  * @return #GNUNET_OK if port is either open_port or adv_port
1778  */
1779 static int
1780 check_port (struct Plugin *plugin, uint16_t in_port)
1781 {
1782   if ((in_port == plugin->adv_port) || (in_port == plugin->open_port))
1783     return GNUNET_OK;
1784   return GNUNET_SYSERR;
1785 }
1786
1787 /**
1788  * Function that will be called to check if a binary address for this
1789  * plugin is well-formed and corresponds to an address for THIS peer
1790  * (as per our configuration).  Naturally, if absolutely necessary,
1791  * plugins can be a bit conservative in their answer, but in general
1792  * plugins should make sure that the address does not redirect
1793  * traffic to a 3rd party that might try to man-in-the-middle our
1794  * traffic.
1795  *
1796  * @param cls closure, our `struct Plugin *`
1797  * @param addr pointer to the address
1798  * @param addrlen length of addr
1799  * @return #GNUNET_OK if this is a plausible address for this peer
1800  *         and transport, #GNUNET_SYSERR if not
1801  */
1802 static int
1803 tcp_plugin_check_address (void *cls, const void *addr, size_t addrlen)
1804 {
1805   struct Plugin *plugin = cls;
1806   struct IPv4TcpAddress *v4;
1807   struct IPv6TcpAddress *v6;
1808
1809   if ((addrlen != sizeof(struct IPv4TcpAddress))
1810       && (addrlen != sizeof(struct IPv6TcpAddress)))
1811   {
1812     GNUNET_break_op(0);
1813     return GNUNET_SYSERR;
1814   }
1815
1816   if (addrlen == sizeof(struct IPv4TcpAddress))
1817   {
1818     v4 = (struct IPv4TcpAddress *) addr;
1819     if (0 != memcmp (&v4->options, &myoptions, sizeof(myoptions)))
1820     {
1821       GNUNET_break(0);
1822       return GNUNET_SYSERR;
1823     }
1824     if (GNUNET_OK != check_port (plugin, ntohs (v4->t4_port)))
1825       return GNUNET_SYSERR;
1826     if (GNUNET_OK
1827         != GNUNET_NAT_test_address (plugin->nat, &v4->ipv4_addr,
1828             sizeof(struct in_addr)))
1829       return GNUNET_SYSERR;
1830   }
1831   else
1832   {
1833     v6 = (struct IPv6TcpAddress *) addr;
1834     if (IN6_IS_ADDR_LINKLOCAL (&v6->ipv6_addr))
1835     {
1836       GNUNET_break_op(0);
1837       return GNUNET_SYSERR;
1838     }
1839     if (0 != memcmp (&v6->options, &myoptions, sizeof(myoptions)))
1840     {
1841       GNUNET_break(0);
1842       return GNUNET_SYSERR;
1843     }
1844     if (GNUNET_OK != check_port (plugin, ntohs (v6->t6_port)))
1845       return GNUNET_SYSERR;
1846     if (GNUNET_OK
1847         != GNUNET_NAT_test_address (plugin->nat, &v6->ipv6_addr,
1848             sizeof(struct in6_addr)))
1849       return GNUNET_SYSERR;
1850   }
1851   return GNUNET_OK;
1852 }
1853
1854 /**
1855  * We've received a nat probe from this peer via TCP.  Finish
1856  * creating the client session and resume sending of queued
1857  * messages.
1858  *
1859  * @param cls closure
1860  * @param client identification of the client
1861  * @param message the actual message
1862  */
1863 static void
1864 handle_tcp_nat_probe (void *cls, struct GNUNET_SERVER_Client *client,
1865     const struct GNUNET_MessageHeader *message)
1866 {
1867   struct Plugin *plugin = cls;
1868   struct Session *session;
1869   const struct TCP_NAT_ProbeMessage *tcp_nat_probe;
1870   size_t alen;
1871   void *vaddr;
1872   struct IPv4TcpAddress *t4;
1873   struct IPv6TcpAddress *t6;
1874   const struct sockaddr_in *s4;
1875   const struct sockaddr_in6 *s6;
1876
1877   LOG(GNUNET_ERROR_TYPE_DEBUG, "Received NAT probe\n");
1878   /* We have received a TCP NAT probe, meaning we (hopefully) initiated
1879    * a connection to this peer by running gnunet-nat-client.  This peer
1880    * received the punch message and now wants us to use the new connection
1881    * as the default for that peer.  Do so and then send a WELCOME message
1882    * so we can really be connected!
1883    */
1884   if (ntohs (message->size) != sizeof(struct TCP_NAT_ProbeMessage))
1885   {
1886     GNUNET_break_op(0);
1887     GNUNET_SERVER_receive_done (client, GNUNET_SYSERR);
1888     return;
1889   }
1890
1891   tcp_nat_probe = (const struct TCP_NAT_ProbeMessage *) message;
1892   if (0 == memcmp (&tcp_nat_probe->clientIdentity, plugin->env->my_identity,
1893           sizeof(struct GNUNET_PeerIdentity)))
1894   {
1895     /* refuse connections from ourselves */
1896     GNUNET_SERVER_receive_done (client, GNUNET_SYSERR);
1897     return;
1898   }
1899
1900   session = GNUNET_CONTAINER_multipeermap_get (plugin->nat_wait_conns,
1901       &tcp_nat_probe->clientIdentity);
1902   if (session == NULL )
1903   {
1904     LOG(GNUNET_ERROR_TYPE_DEBUG, "Did NOT find session for NAT probe!\n");
1905     GNUNET_SERVER_receive_done (client, GNUNET_OK);
1906     return;
1907   }
1908   LOG(GNUNET_ERROR_TYPE_DEBUG, "Found session for NAT probe!\n");
1909
1910   if (session->nat_connection_timeout != GNUNET_SCHEDULER_NO_TASK )
1911   {
1912     GNUNET_SCHEDULER_cancel (session->nat_connection_timeout);
1913     session->nat_connection_timeout = GNUNET_SCHEDULER_NO_TASK;
1914   }
1915
1916   if (GNUNET_OK != GNUNET_SERVER_client_get_address (client, &vaddr, &alen))
1917   {
1918     GNUNET_break(0);
1919     GNUNET_SERVER_receive_done (client, GNUNET_SYSERR);
1920     tcp_disconnect_session (plugin, session);
1921     return;
1922   }
1923   GNUNET_assert(
1924       GNUNET_CONTAINER_multipeermap_remove (plugin->nat_wait_conns, &tcp_nat_probe->clientIdentity, session) == GNUNET_YES);
1925   GNUNET_SERVER_client_set_user_context(client, session);
1926   GNUNET_CONTAINER_multipeermap_put (plugin->sessionmap, &session->target,
1927       session, GNUNET_CONTAINER_MULTIHASHMAPOPTION_MULTIPLE);
1928   session->last_activity = GNUNET_TIME_absolute_get ();
1929   LOG(GNUNET_ERROR_TYPE_DEBUG, "Found address `%s' for incoming connection\n",
1930       GNUNET_a2s (vaddr, alen));
1931   switch (((const struct sockaddr *) vaddr)->sa_family)
1932   {
1933   case AF_INET:
1934     s4 = vaddr;
1935     t4 = GNUNET_new (struct IPv4TcpAddress);
1936     t4->options = 0;
1937     t4->t4_port = s4->sin_port;
1938     t4->ipv4_addr = s4->sin_addr.s_addr;
1939     session->address = GNUNET_HELLO_address_allocate (
1940         &tcp_nat_probe->clientIdentity, PLUGIN_NAME, &t4,
1941         sizeof(struct IPv4TcpAddress), GNUNET_HELLO_ADDRESS_INFO_NONE);
1942     break;
1943   case AF_INET6:
1944     s6 = vaddr;
1945     t6 = GNUNET_new (struct IPv6TcpAddress);
1946     t6->options = 0;
1947     t6->t6_port = s6->sin6_port;
1948     memcpy (&t6->ipv6_addr, &s6->sin6_addr, sizeof(struct in6_addr));
1949     session->address = GNUNET_HELLO_address_allocate (
1950         &tcp_nat_probe->clientIdentity, PLUGIN_NAME, &t6,
1951         sizeof(struct IPv6TcpAddress), GNUNET_HELLO_ADDRESS_INFO_NONE);
1952     break;
1953   default:
1954     GNUNET_break_op(0);
1955     LOG(GNUNET_ERROR_TYPE_DEBUG, "Bad address for incoming connection!\n");
1956     GNUNET_free(vaddr);
1957     GNUNET_SERVER_receive_done (client, GNUNET_SYSERR);
1958     tcp_disconnect_session (plugin, session);
1959     return;
1960   }
1961   GNUNET_free(vaddr);
1962   GNUNET_break(NULL == session->client);
1963   GNUNET_SERVER_client_keep (client);
1964   session->client = client;
1965   GNUNET_STATISTICS_update (plugin->env->stats,
1966       gettext_noop ("# TCP sessions active"), 1, GNUNET_NO);
1967   process_pending_messages (session);
1968   GNUNET_SERVER_receive_done (client, GNUNET_OK);
1969 }
1970
1971 /**
1972  * We've received a welcome from this peer via TCP.  Possibly create a
1973  * fresh client record and send back our welcome.
1974  *
1975  * @param cls closure
1976  * @param client identification of the client
1977  * @param message the actual message
1978  */
1979 static void
1980 handle_tcp_welcome (void *cls, struct GNUNET_SERVER_Client *client,
1981     const struct GNUNET_MessageHeader *message)
1982 {
1983   struct Plugin *plugin = cls;
1984   const struct WelcomeMessage *wm = (const struct WelcomeMessage *) message;
1985   struct Session *session;
1986   size_t alen;
1987   void *vaddr;
1988   struct IPv4TcpAddress t4;
1989   struct IPv6TcpAddress t6;
1990   const struct sockaddr_in *s4;
1991   const struct sockaddr_in6 *s6;
1992   struct GNUNET_ATS_Information ats;
1993
1994   if (0 == memcmp (&wm->clientIdentity, plugin->env->my_identity,
1995           sizeof(struct GNUNET_PeerIdentity)))
1996   {
1997     /* refuse connections from ourselves */
1998     GNUNET_SERVER_receive_done (client, GNUNET_SYSERR);
1999     if (GNUNET_OK == GNUNET_SERVER_client_get_address (client, &vaddr, &alen))
2000     {
2001       LOG(GNUNET_ERROR_TYPE_WARNING,
2002           "Received %s message from my own identity `%4s' on address `%s'\n",
2003           "WELCOME", GNUNET_i2s (&wm->clientIdentity),
2004           GNUNET_a2s (vaddr, alen));
2005       GNUNET_free(vaddr);
2006     }
2007     GNUNET_break_op(0);
2008     return;
2009   }
2010   LOG(GNUNET_ERROR_TYPE_DEBUG, "Received %s message from `%4s' %p\n", "WELCOME",
2011       GNUNET_i2s (&wm->clientIdentity), client);
2012   GNUNET_STATISTICS_update (plugin->env->stats,
2013       gettext_noop ("# TCP WELCOME messages received"), 1, GNUNET_NO);
2014   session = lookup_session_by_client (plugin, client);
2015   if (NULL != session)
2016   {
2017     if (GNUNET_OK == GNUNET_SERVER_client_get_address (client, &vaddr, &alen))
2018     {
2019       LOG(GNUNET_ERROR_TYPE_DEBUG, "Found existing session %p for peer `%s'\n",
2020           session, GNUNET_a2s (vaddr, alen));
2021       GNUNET_free(vaddr);
2022     }
2023   }
2024   else
2025   {
2026     GNUNET_SERVER_client_keep (client);
2027     if (NULL != plugin->service) /* Otherwise value is incremented in tcp_access_check */
2028       plugin->cur_connections++;
2029     if (plugin->cur_connections == plugin->max_connections)
2030       GNUNET_SERVER_suspend (plugin->server); /* Maximum number of connections rechead */
2031
2032     session = create_session (plugin, &wm->clientIdentity, client, GNUNET_NO);
2033     if (GNUNET_OK == GNUNET_SERVER_client_get_address (client, &vaddr, &alen))
2034     {
2035       if (alen == sizeof(struct sockaddr_in))
2036       {
2037         s4 = vaddr;
2038         memset (&t4, '\0', sizeof (t4));
2039         t4.options = htonl (0);
2040         t4.t4_port = s4->sin_port;
2041         t4.ipv4_addr = s4->sin_addr.s_addr;
2042         session->address = GNUNET_HELLO_address_allocate (&wm->clientIdentity,
2043             PLUGIN_NAME, &t4, sizeof(struct IPv4TcpAddress),
2044             GNUNET_HELLO_ADDRESS_INFO_INBOUND);
2045       }
2046       else if (alen == sizeof(struct sockaddr_in6))
2047       {
2048         s6 = vaddr;
2049         memset (&t6, '\0', sizeof (t6));
2050         t6.options = htonl (0);
2051         t6.t6_port = s6->sin6_port;
2052         memcpy (&t6.ipv6_addr, &s6->sin6_addr, sizeof(struct in6_addr));
2053         session->address = GNUNET_HELLO_address_allocate (&wm->clientIdentity,
2054             PLUGIN_NAME, &t6, sizeof(struct IPv6TcpAddress),
2055             GNUNET_HELLO_ADDRESS_INFO_INBOUND);
2056       }
2057
2058       ats = plugin->env->get_address_type (plugin->env->cls, vaddr, alen);
2059       session->ats_address_network_type = (enum GNUNET_ATS_Network_Type) ntohl (
2060           ats.value);
2061       LOG(GNUNET_ERROR_TYPE_DEBUG, "Creating new session %p for peer `%s'\n",
2062           session, GNUNET_a2s (vaddr, alen));
2063       GNUNET_free(vaddr);
2064       GNUNET_SERVER_client_set_user_context(session->client, session);
2065       GNUNET_CONTAINER_multipeermap_put (plugin->sessionmap, &session->target,
2066           session, GNUNET_CONTAINER_MULTIHASHMAPOPTION_MULTIPLE);
2067     }
2068     else
2069     {
2070       LOG(GNUNET_ERROR_TYPE_DEBUG,
2071           "Did not obtain TCP socket address for incoming connection\n");
2072       GNUNET_break(0);
2073     }
2074   }
2075
2076   if (session->expecting_welcome != GNUNET_YES)
2077   {
2078     GNUNET_break_op(0);
2079     GNUNET_SERVER_receive_done (client, GNUNET_SYSERR);
2080     GNUNET_break(0);
2081     return;
2082   }
2083   session->last_activity = GNUNET_TIME_absolute_get ();
2084   session->expecting_welcome = GNUNET_NO;
2085
2086   /* Notify transport and ATS about new session */
2087   plugin->env->session_start (NULL, session->address, session, &ats, 1);
2088
2089   process_pending_messages (session);
2090   GNUNET_SERVER_client_set_timeout (client,
2091       GNUNET_CONSTANTS_IDLE_CONNECTION_TIMEOUT);
2092   GNUNET_SERVER_receive_done (client, GNUNET_OK);
2093 }
2094
2095 /**
2096  * Task to signal the server that we can continue
2097  * receiving from the TCP client now.
2098  *
2099  * @param cls the `struct Session*`
2100  * @param tc task context (unused)
2101  */
2102 static void
2103 delayed_done (void *cls, const struct GNUNET_SCHEDULER_TaskContext *tc)
2104 {
2105   struct Session *session = cls;
2106
2107   session->receive_delay_task = GNUNET_SCHEDULER_NO_TASK;
2108   reschedule_session_timeout (session);
2109
2110   GNUNET_SERVER_receive_done (session->client, GNUNET_OK);
2111 }
2112
2113 /**
2114  * We've received data for this peer via TCP.  Unbox,
2115  * compute latency and forward.
2116  *
2117  * @param cls closure
2118  * @param client identification of the client
2119  * @param message the actual message
2120  */
2121 static void
2122 handle_tcp_data (void *cls, struct GNUNET_SERVER_Client *client,
2123     const struct GNUNET_MessageHeader *message)
2124 {
2125   struct Plugin *plugin = cls;
2126   struct Session *session;
2127   struct GNUNET_TIME_Relative delay;
2128   uint16_t type;
2129
2130   type = ntohs (message->type);
2131   if ((GNUNET_MESSAGE_TYPE_TRANSPORT_TCP_WELCOME == type)
2132       || (GNUNET_MESSAGE_TYPE_TRANSPORT_TCP_NAT_PROBE == type))
2133   {
2134     /* We don't want to propagate WELCOME and NAT Probe messages up! */
2135     GNUNET_SERVER_receive_done (client, GNUNET_OK);
2136     return;
2137   }
2138   session = lookup_session_by_client (plugin, client);
2139   if (NULL == session)
2140   {
2141     /* No inbound session found */
2142     void *vaddr;
2143     size_t alen;
2144
2145     GNUNET_SERVER_client_get_address (client, &vaddr, &alen);
2146     LOG(GNUNET_ERROR_TYPE_ERROR,
2147         "Received unexpected %u bytes of type %u from `%s'\n",
2148         (unsigned int ) ntohs (message->size),
2149         (unsigned int ) ntohs (message->type), GNUNET_a2s (vaddr, alen));
2150     GNUNET_break_op(0);
2151     GNUNET_SERVER_receive_done (client, GNUNET_SYSERR);
2152     GNUNET_free_non_null(vaddr);
2153     return;
2154   }
2155   else if (GNUNET_YES == session->expecting_welcome)
2156   {
2157     /* Session is expecting WELCOME message */
2158     void *vaddr;
2159     size_t alen;
2160
2161     GNUNET_SERVER_client_get_address (client, &vaddr, &alen);
2162     LOG(GNUNET_ERROR_TYPE_ERROR,
2163         "Received unexpected %u bytes of type %u from `%s'\n",
2164         (unsigned int ) ntohs (message->size),
2165         (unsigned int ) ntohs (message->type), GNUNET_a2s (vaddr, alen));
2166     GNUNET_break_op(0);
2167     GNUNET_SERVER_receive_done (client, GNUNET_SYSERR);
2168     GNUNET_free_non_null(vaddr);
2169     return;
2170   }
2171
2172   session->last_activity = GNUNET_TIME_absolute_get ();
2173   LOG(GNUNET_ERROR_TYPE_DEBUG,
2174       "Passing %u bytes of type %u from `%4s' to transport service.\n",
2175       (unsigned int ) ntohs (message->size),
2176       (unsigned int ) ntohs (message->type), GNUNET_i2s (&session->target));
2177
2178   GNUNET_STATISTICS_update (plugin->env->stats,
2179       gettext_noop ("# bytes received via TCP"), ntohs (message->size),
2180       GNUNET_NO);
2181   struct GNUNET_ATS_Information distance;
2182
2183   distance.type = htonl (GNUNET_ATS_NETWORK_TYPE);
2184   distance.value = htonl ((uint32_t) session->ats_address_network_type);
2185   GNUNET_break(session->ats_address_network_type != GNUNET_ATS_NET_UNSPECIFIED);
2186
2187   GNUNET_assert(
2188       GNUNET_CONTAINER_multipeermap_contains_value (plugin->sessionmap,
2189           &session->target, session));
2190
2191   delay = plugin->env->receive (plugin->env->cls, session->address, session, message);
2192   plugin->env->update_address_metrics (plugin->env->cls, session->address,
2193       session, &distance, 1);
2194   reschedule_session_timeout (session);
2195   if (0 == delay.rel_value_us)
2196   {
2197     GNUNET_SERVER_receive_done (client, GNUNET_OK);
2198   }
2199   else
2200   {
2201     LOG(GNUNET_ERROR_TYPE_DEBUG, "Throttling receiving from `%s' for %s\n",
2202         GNUNET_i2s (&session->target),
2203         GNUNET_STRINGS_relative_time_to_string (delay, GNUNET_YES));
2204     GNUNET_SERVER_disable_receive_done_warning (client);
2205     session->receive_delay_task = GNUNET_SCHEDULER_add_delayed (delay,
2206         &delayed_done, session);
2207   }
2208 }
2209
2210 /**
2211  * Functions with this signature are called whenever a peer
2212  * is disconnected on the network level.
2213  *
2214  * @param cls closure
2215  * @param client identification of the client
2216  */
2217 static void
2218 disconnect_notify (void *cls, struct GNUNET_SERVER_Client *client)
2219 {
2220   struct Plugin *plugin = cls;
2221   struct Session *session;
2222
2223   if (client == NULL )
2224     return;
2225   session = lookup_session_by_client (plugin, client);
2226   if (session == NULL )
2227     return; /* unknown, nothing to do */
2228   LOG(GNUNET_ERROR_TYPE_DEBUG,
2229       "Destroying session of `%4s' with %s due to network-level disconnect.\n",
2230       GNUNET_i2s (&session->target),
2231       tcp_address_to_string (session->plugin, session->address->address,
2232           session->address->address_length));
2233
2234   if (plugin->cur_connections == plugin->max_connections)
2235     GNUNET_SERVER_resume (plugin->server); /* Resume server  */
2236
2237   if (plugin->cur_connections < 1)
2238     GNUNET_break(0);
2239   else
2240     plugin->cur_connections--;
2241
2242   GNUNET_STATISTICS_update (session->plugin->env->stats, gettext_noop
2243   ("# network-level TCP disconnect events"), 1, GNUNET_NO);
2244   tcp_disconnect_session (plugin, session);
2245 }
2246
2247 /**
2248  * We can now send a probe message, copy into buffer to really send.
2249  *
2250  * @param cls closure, a struct TCPProbeContext
2251  * @param size max size to copy
2252  * @param buf buffer to copy message to
2253  * @return number of bytes copied into buf
2254  */
2255 static size_t
2256 notify_send_probe (void *cls, size_t size, void *buf)
2257 {
2258   struct TCPProbeContext *tcp_probe_ctx = cls;
2259   struct Plugin *plugin = tcp_probe_ctx->plugin;
2260   size_t ret;
2261
2262   tcp_probe_ctx->transmit_handle = NULL;
2263   GNUNET_CONTAINER_DLL_remove(plugin->probe_head, plugin->probe_tail,
2264       tcp_probe_ctx);
2265   if (buf == NULL )
2266   {
2267     GNUNET_CONNECTION_destroy (tcp_probe_ctx->sock);
2268     GNUNET_free(tcp_probe_ctx);
2269     return 0;
2270   }
2271   GNUNET_assert(size >= sizeof(tcp_probe_ctx->message));
2272   memcpy (buf, &tcp_probe_ctx->message, sizeof(tcp_probe_ctx->message));
2273   GNUNET_SERVER_connect_socket (tcp_probe_ctx->plugin->server,
2274       tcp_probe_ctx->sock);
2275   ret = sizeof(tcp_probe_ctx->message);
2276   GNUNET_free(tcp_probe_ctx);
2277   return ret;
2278 }
2279
2280 /**
2281  * Function called by the NAT subsystem suggesting another peer wants
2282  * to connect to us via connection reversal.  Try to connect back to the
2283  * given IP.
2284  *
2285  * @param cls closure
2286  * @param addr address to try
2287  * @param addrlen number of bytes in @a addr
2288  */
2289 static void
2290 try_connection_reversal (void *cls, const struct sockaddr *addr,
2291     socklen_t addrlen)
2292 {
2293   struct Plugin *plugin = cls;
2294   struct GNUNET_CONNECTION_Handle *sock;
2295   struct TCPProbeContext *tcp_probe_ctx;
2296
2297   /**
2298    * We have received an ICMP response, ostensibly from a peer
2299    * that wants to connect to us! Send a message to establish a connection.
2300    */
2301   sock = GNUNET_CONNECTION_create_from_sockaddr (AF_INET, addr, addrlen);
2302   if (sock == NULL )
2303   {
2304     /* failed for some odd reason (out of sockets?); ignore attempt */
2305     return;
2306   }
2307
2308   /* FIXME: do we need to track these probe context objects so that
2309    * we can clean them up on plugin unload? */
2310   tcp_probe_ctx = GNUNET_new (struct TCPProbeContext);
2311   tcp_probe_ctx->message.header.size = htons (
2312       sizeof(struct TCP_NAT_ProbeMessage));
2313   tcp_probe_ctx->message.header.type = htons (
2314       GNUNET_MESSAGE_TYPE_TRANSPORT_TCP_NAT_PROBE);
2315   memcpy (&tcp_probe_ctx->message.clientIdentity, plugin->env->my_identity,
2316       sizeof(struct GNUNET_PeerIdentity));
2317   tcp_probe_ctx->plugin = plugin;
2318   tcp_probe_ctx->sock = sock;
2319   GNUNET_CONTAINER_DLL_insert(plugin->probe_head, plugin->probe_tail,
2320       tcp_probe_ctx);
2321   tcp_probe_ctx->transmit_handle = GNUNET_CONNECTION_notify_transmit_ready (
2322       sock, ntohs (tcp_probe_ctx->message.header.size),
2323       GNUNET_TIME_UNIT_FOREVER_REL, &notify_send_probe, tcp_probe_ctx);
2324
2325 }
2326
2327 /**
2328  * Function obtain the network type for a session
2329  *
2330  * @param cls closure ('struct Plugin*')
2331  * @param session the session
2332  * @return the network type in HBO or #GNUNET_SYSERR
2333  */
2334 static enum GNUNET_ATS_Network_Type
2335 tcp_get_network (void *cls, struct Session *session)
2336 {
2337   GNUNET_assert(NULL != session);
2338   return session->ats_address_network_type;
2339 }
2340
2341 /**
2342  * Entry point for the plugin.
2343  *
2344  * @param cls closure, the 'struct GNUNET_TRANSPORT_PluginEnvironment*'
2345  * @return the 'struct GNUNET_TRANSPORT_PluginFunctions*' or NULL on error
2346  */
2347 void *
2348 libgnunet_plugin_transport_tcp_init (void *cls)
2349 {
2350   static const struct GNUNET_SERVER_MessageHandler my_handlers[] = { {
2351       &handle_tcp_welcome, NULL, GNUNET_MESSAGE_TYPE_TRANSPORT_TCP_WELCOME,
2352       sizeof(struct WelcomeMessage) }, { &handle_tcp_nat_probe, NULL,
2353       GNUNET_MESSAGE_TYPE_TRANSPORT_TCP_NAT_PROBE,
2354       sizeof(struct TCP_NAT_ProbeMessage) }, { &handle_tcp_data, NULL,
2355       GNUNET_MESSAGE_TYPE_ALL, 0 }, { NULL, NULL, 0, 0 } };
2356   struct GNUNET_TRANSPORT_PluginEnvironment *env = cls;
2357   struct GNUNET_TRANSPORT_PluginFunctions *api;
2358   struct Plugin *plugin;
2359   struct GNUNET_SERVICE_Context *service;
2360   unsigned long long aport;
2361   unsigned long long bport;
2362   unsigned long long max_connections;
2363   unsigned int i;
2364   struct GNUNET_TIME_Relative idle_timeout;
2365   int ret;
2366   int ret_s;
2367   struct sockaddr **addrs;
2368   socklen_t *addrlens;
2369
2370   if (NULL == env->receive)
2371   {
2372     /* run in 'stub' mode (i.e. as part of gnunet-peerinfo), don't fully
2373      initialze the plugin or the API */
2374     api = GNUNET_new (struct GNUNET_TRANSPORT_PluginFunctions);
2375     api->cls = NULL;
2376     api->address_pretty_printer = &tcp_plugin_address_pretty_printer;
2377     api->address_to_string = &tcp_address_to_string;
2378     api->string_to_address = &tcp_string_to_address;
2379     return api;
2380   }
2381
2382   GNUNET_assert(NULL != env->cfg);
2383   if (GNUNET_OK
2384       != GNUNET_CONFIGURATION_get_value_number (env->cfg, "transport-tcp",
2385           "MAX_CONNECTIONS", &max_connections))
2386     max_connections = 128;
2387
2388   aport = 0;
2389   if ((GNUNET_OK
2390       != GNUNET_CONFIGURATION_get_value_number (env->cfg, "transport-tcp",
2391           "PORT", &bport)) || (bport > 65535)
2392       || ((GNUNET_OK
2393           == GNUNET_CONFIGURATION_get_value_number (env->cfg, "transport-tcp",
2394               "ADVERTISED-PORT", &aport)) && (aport > 65535)))
2395   {
2396     LOG(GNUNET_ERROR_TYPE_ERROR,
2397         _("Require valid port number for service `%s' in configuration!\n"),
2398         "transport-tcp");
2399     return NULL ;
2400   }
2401   if (aport == 0)
2402     aport = bport;
2403   if (bport == 0)
2404     aport = 0;
2405   if (bport != 0)
2406   {
2407     service = GNUNET_SERVICE_start ("transport-tcp", env->cfg,
2408         GNUNET_SERVICE_OPTION_NONE);
2409     if (service == NULL )
2410     {
2411       LOG(GNUNET_ERROR_TYPE_WARNING, _("Failed to start service.\n"));
2412       return NULL ;
2413     }
2414   }
2415   else
2416     service = NULL;
2417
2418   /* Initialize my flags */
2419   myoptions = 0;
2420
2421   plugin = GNUNET_new (struct Plugin);
2422   plugin->sessionmap = GNUNET_CONTAINER_multipeermap_create (max_connections,
2423       GNUNET_YES);
2424   plugin->max_connections = max_connections;
2425   plugin->cur_connections = 0;
2426   plugin->open_port = bport;
2427   plugin->adv_port = aport;
2428   plugin->env = env;
2429   plugin->lsock = NULL;
2430   if ((service != NULL )&&
2431   (GNUNET_SYSERR !=
2432       (ret_s =
2433           GNUNET_SERVICE_get_server_addresses ("transport-tcp", env->cfg, &addrs,
2434               &addrlens)))){
2435   for (ret = ret_s-1; ret >= 0; ret--)
2436   LOG (GNUNET_ERROR_TYPE_INFO,
2437       "Binding to address `%s'\n",
2438       GNUNET_a2s (addrs[ret], addrlens[ret]));
2439   plugin->nat =
2440   GNUNET_NAT_register (env->cfg, GNUNET_YES, aport, (unsigned int) ret_s,
2441       (const struct sockaddr **) addrs, addrlens,
2442       &tcp_nat_port_map_callback,
2443       &try_connection_reversal, plugin);
2444   for (ret = ret_s -1; ret >= 0; ret--)
2445   {
2446     GNUNET_assert (addrs[ret] != NULL);
2447     GNUNET_free (addrs[ret]);
2448   }
2449   GNUNET_free_non_null (addrs);
2450   GNUNET_free_non_null (addrlens);
2451 }
2452 else
2453 {
2454   plugin->nat = GNUNET_NAT_register (plugin->env->cfg,
2455       GNUNET_YES, 0, 0, NULL, NULL, NULL,
2456       &try_connection_reversal, plugin);
2457 }
2458   api = GNUNET_new (struct GNUNET_TRANSPORT_PluginFunctions);
2459   api->cls = plugin;
2460   api->send = &tcp_plugin_send;
2461   api->get_session = &tcp_plugin_get_session;
2462
2463   api->disconnect_session = &tcp_disconnect_session;
2464   api->query_keepalive_factor = &tcp_query_keepalive_factor;
2465   api->disconnect_peer = &tcp_plugin_disconnect;
2466   api->address_pretty_printer = &tcp_plugin_address_pretty_printer;
2467   api->check_address = &tcp_plugin_check_address;
2468   api->address_to_string = &tcp_address_to_string;
2469   api->string_to_address = &tcp_string_to_address;
2470   api->get_network = &tcp_get_network;
2471   api->update_session_timeout = &tcp_plugin_update_session_timeout;
2472   plugin->service = service;
2473   if (NULL != service)
2474   {
2475     plugin->server = GNUNET_SERVICE_get_server (service);
2476   }
2477   else
2478   {
2479     if (GNUNET_OK
2480         != GNUNET_CONFIGURATION_get_value_time (env->cfg, "transport-tcp",
2481             "TIMEOUT", &idle_timeout))
2482     {
2483       GNUNET_log_config_missing (GNUNET_ERROR_TYPE_ERROR, "transport-tcp",
2484           "TIMEOUT");
2485       if (plugin->nat != NULL )
2486         GNUNET_NAT_unregister (plugin->nat);
2487       GNUNET_free(plugin);
2488       GNUNET_free(api);
2489       return NULL ;
2490     }
2491     plugin->server = GNUNET_SERVER_create_with_sockets (
2492         &plugin_tcp_access_check, plugin, NULL, idle_timeout, GNUNET_YES);
2493   }
2494   plugin->handlers = GNUNET_malloc (sizeof (my_handlers));
2495   memcpy (plugin->handlers, my_handlers, sizeof(my_handlers));
2496   for (i = 0;
2497       i < sizeof(my_handlers) / sizeof(struct GNUNET_SERVER_MessageHandler);
2498       i++)
2499     plugin->handlers[i].callback_cls = plugin;
2500
2501   GNUNET_SERVER_add_handlers (plugin->server, plugin->handlers);
2502   GNUNET_SERVER_disconnect_notify (plugin->server, &disconnect_notify, plugin);
2503   plugin->nat_wait_conns = GNUNET_CONTAINER_multipeermap_create (16,
2504       GNUNET_YES);
2505   if (bport != 0)
2506     LOG(GNUNET_ERROR_TYPE_INFO, _("TCP transport listening on port %llu\n"),
2507         bport);
2508   else
2509     LOG(GNUNET_ERROR_TYPE_INFO,
2510         _("TCP transport not listening on any port (client only)\n"));
2511   if (aport != bport)
2512     LOG(GNUNET_ERROR_TYPE_INFO,
2513         _("TCP transport advertises itself as being on port %llu\n"), aport);
2514   /* Initially set connections to 0 */
2515   GNUNET_assert(NULL != plugin->env->stats);
2516   GNUNET_STATISTICS_set (plugin->env->stats,
2517       gettext_noop ("# TCP sessions active"), 0, GNUNET_NO);
2518   return api;
2519 }
2520
2521 /**
2522  * Exit point from the plugin.
2523  *
2524  * @param cls the `struct GNUNET_TRANSPORT_PluginFunctions`
2525  * @return NULL
2526  */
2527 void *
2528 libgnunet_plugin_transport_tcp_done (void *cls)
2529 {
2530   struct GNUNET_TRANSPORT_PluginFunctions *api = cls;
2531   struct Plugin *plugin = api->cls;
2532   struct TCPProbeContext *tcp_probe;
2533   struct PrettyPrinterContext *cur;
2534   struct PrettyPrinterContext *next;
2535
2536   if (NULL == plugin)
2537   {
2538     GNUNET_free(api);
2539     return NULL ;
2540   }
2541   LOG(GNUNET_ERROR_TYPE_DEBUG, "Shutting down TCP plugin\n");
2542
2543   /* Removing leftover sessions */
2544   GNUNET_CONTAINER_multipeermap_iterate (plugin->sessionmap,
2545       &session_disconnect_it, plugin);
2546   /* Removing leftover NAT sessions */
2547   GNUNET_CONTAINER_multipeermap_iterate (plugin->nat_wait_conns,
2548       &session_disconnect_it, plugin);
2549
2550   next = ppc_dll_head;
2551   for (cur = next; NULL != cur; cur = next)
2552   {
2553     next = cur->next;
2554     GNUNET_CONTAINER_DLL_remove(ppc_dll_head, ppc_dll_tail, cur);
2555     if (NULL != cur->resolver_handle)
2556       GNUNET_RESOLVER_request_cancel (cur->resolver_handle);
2557     GNUNET_SCHEDULER_cancel (cur->timeout_task);
2558     GNUNET_free(cur);
2559     GNUNET_break(0);
2560   }
2561
2562   if (plugin->service != NULL )
2563     GNUNET_SERVICE_stop (plugin->service);
2564   else
2565     GNUNET_SERVER_destroy (plugin->server);
2566   GNUNET_free(plugin->handlers);
2567   if (plugin->nat != NULL )
2568     GNUNET_NAT_unregister (plugin->nat);
2569   while (NULL != (tcp_probe = plugin->probe_head))
2570   {
2571     GNUNET_CONTAINER_DLL_remove(plugin->probe_head, plugin->probe_tail,
2572         tcp_probe);
2573     GNUNET_CONNECTION_destroy (tcp_probe->sock);
2574     GNUNET_free(tcp_probe);
2575   }
2576   GNUNET_CONTAINER_multipeermap_destroy (plugin->nat_wait_conns);
2577   GNUNET_CONTAINER_multipeermap_destroy (plugin->sessionmap);
2578   GNUNET_free(plugin);
2579   GNUNET_free(api);
2580   return NULL ;
2581 }
2582
2583 /* end of plugin_transport_tcp.c */