src/transport/plugin_transport_tcp.c

   1 /*
   2  This file is part of GNUnet
   3  (C) 2002--2013 Christian Grothoff (and other contributing authors)
   4
   5  GNUnet is free software; you can redistribute it and/or modify
   6  it under the terms of the GNU General Public License as published
   7  by the Free Software Foundation; either version 3, or (at your
   8  option) any later version.
   9
  10  GNUnet is distributed in the hope that it will be useful, but
  11  WITHOUT ANY WARRANTY; without even the implied warranty of
  12  MERCHANTABILITY or FITNESS FOR A PARTICULAR PURPOSE.  See the GNU
  13  General Public License for more details.
  14
  15  You should have received a copy of the GNU General Public License
  16  along with GNUnet; see the file COPYING.  If not, write to the
  17  Free Software Foundation, Inc., 59 Temple Place - Suite 330,
  18  Boston, MA 02111-1307, USA.
  19  */
  20 /**
  21  * @file transport/plugin_transport_tcp.c
  22  * @brief Implementation of the TCP transport service
  23  * @author Christian Grothoff
  24  */
  25 #include "platform.h"
  26 #include "gnunet_hello_lib.h"
  27 #include "gnunet_constants.h"
  28 #include "gnunet_util_lib.h"
  29 #include "gnunet_nat_lib.h"
  30 #include "gnunet_protocols.h"
  31 #include "gnunet_resolver_service.h"
  32 #include "gnunet_signatures.h"
  33 #include "gnunet_statistics_service.h"
  34 #include "gnunet_transport_service.h"
  35 #include "gnunet_transport_plugin.h"
  36 #include "transport.h"
  37
  38 #define LOG(kind,...) GNUNET_log_from (kind, "transport-tcp",__VA_ARGS__)
  39
  40 #define PLUGIN_NAME "tcp"
  41
  42 #define EXTRA_CHECKS ALLOW_EXTRA_CHECKS
  43
  44 /**
  45  * How long until we give up on establishing an NAT connection?
  46  * Must be > 4 RTT
  47  */
  48 #define NAT_TIMEOUT GNUNET_TIME_relative_multiply (GNUNET_TIME_UNIT_SECONDS, 10)
  49
  50 GNUNET_NETWORK_STRUCT_BEGIN
  51
  52 /**
  53  * Address options
  54  */
  55 static uint32_t myoptions;
  56
  57 /**
  58  * Initial handshake message for a session.
  59  */
  60 struct WelcomeMessage
  61 {
  62   /**
  63    * Type is #GNUNET_MESSAGE_TYPE_TRANSPORT_TCP_WELCOME.
  64    */
  65   struct GNUNET_MessageHeader header;
  66
  67   /**
  68    * Identity of the node connecting (TCP client)
  69    */
  70   struct GNUNET_PeerIdentity clientIdentity;
  71
  72 };
  73
  74 /**
  75  * Basically a WELCOME message, but with the purpose
  76  * of giving the waiting peer a client handle to use
  77  */
  78 struct TCP_NAT_ProbeMessage
  79 {
  80   /**
  81    * Type is #GNUNET_MESSAGE_TYPE_TRANSPORT_TCP_NAT_PROBE.
  82    */
  83   struct GNUNET_MessageHeader header;
  84
  85   /**
  86    * Identity of the sender of the message.
  87    */
  88   struct GNUNET_PeerIdentity clientIdentity;
  89
  90 };
  91 GNUNET_NETWORK_STRUCT_END
  92
  93 /**
  94  * Context for sending a NAT probe via TCP.
  95  */
  96 struct TCPProbeContext
  97 {
  98
  99   /**
 100    * Active probes are kept in a DLL.
 101    */
 102   struct TCPProbeContext *next;
 103
 104   /**
 105    * Active probes are kept in a DLL.
 106    */
 107   struct TCPProbeContext *prev;
 108
 109   /**
 110    * Probe connection.
 111    */
 112   struct GNUNET_CONNECTION_Handle *sock;
 113
 114   /**
 115    * Message to be sent.
 116    */
 117   struct TCP_NAT_ProbeMessage message;
 118
 119   /**
 120    * Handle to the transmission.
 121    */
 122   struct GNUNET_CONNECTION_TransmitHandle *transmit_handle;
 123
 124   /**
 125    * Transport plugin handle.
 126    */
 127   struct Plugin *plugin;
 128 };
 129
 130 GNUNET_NETWORK_STRUCT_BEGIN
 131
 132 /**
 133  * Network format for IPv4 addresses.
 134  */
 135 struct IPv4TcpAddress
 136 {
 137   /**
 138    * Optional options and flags for this address
 139    */
 140   uint32_t options;
 141
 142   /**
 143    * IPv4 address, in network byte order.
 144    */
 145   uint32_t ipv4_addr GNUNET_PACKED;
 146
 147   /**
 148    * Port number, in network byte order.
 149    */
 150   uint16_t t4_port GNUNET_PACKED;
 151
 152 };
 153
 154 /**
 155  * Network format for IPv6 addresses.
 156  */
 157 struct IPv6TcpAddress
 158 {
 159   /**
 160    * Optional flags for this address
 161    */
 162   uint32_t options;
 163
 164   /**
 165    * IPv6 address.
 166    */
 167   struct in6_addr ipv6_addr GNUNET_PACKED;
 168
 169   /**
 170    * Port number, in network byte order.
 171    */
 172   uint16_t t6_port GNUNET_PACKED;
 173
 174 };
 175 GNUNET_NETWORK_STRUCT_END
 176
 177 /**
 178  * Encapsulation of all of the state of the plugin.
 179  */
 180 struct Plugin;
 181
 182 /**
 183  * Information kept for each message that is yet to
 184  * be transmitted.
 185  */
 186 struct PendingMessage
 187 {
 188
 189   /**
 190    * This is a doubly-linked list.
 191    */
 192   struct PendingMessage *next;
 193
 194   /**
 195    * This is a doubly-linked list.
 196    */
 197   struct PendingMessage *prev;
 198
 199   /**
 200    * The pending message
 201    */
 202   const char *msg;
 203
 204   /**
 205    * Continuation function to call once the message
 206    * has been sent.  Can be NULL if there is no
 207    * continuation to call.
 208    */
 209   GNUNET_TRANSPORT_TransmitContinuation transmit_cont;
 210
 211   /**
 212    * Closure for transmit_cont.
 213    */
 214   void *transmit_cont_cls;
 215
 216   /**
 217    * Timeout value for the pending message.
 218    */
 219   struct GNUNET_TIME_Absolute timeout;
 220
 221   /**
 222    * So that the gnunet-service-transport can group messages together,
 223    * these pending messages need to accept a message buffer and size
 224    * instead of just a GNUNET_MessageHeader.
 225    */
 226   size_t message_size;
 227
 228 };
 229
 230 /**
 231  * Session handle for TCP connections.
 232  */
 233 struct Session
 234 {
 235   /**
 236    * To whom are we talking to (set to our identity
 237    * if we are still waiting for the welcome message)
 238    */
 239   struct GNUNET_PeerIdentity target;
 240
 241   /**
 242    * API requirement.
 243    */
 244   struct SessionHeader header;
 245
 246   /**
 247    * Pointer to the global plugin struct.
 248    */
 249   struct Plugin *plugin;
 250
 251   /**
 252    * The client (used to identify this connection)
 253    */
 254   struct GNUNET_SERVER_Client *client;
 255
 256   /**
 257    * Task cleaning up a NAT client connection establishment attempt;
 258    */
 259   GNUNET_SCHEDULER_TaskIdentifier nat_connection_timeout;
 260
 261   /**
 262    * Messages currently pending for transmission
 263    * to this peer, if any.
 264    */
 265   struct PendingMessage *pending_messages_head;
 266
 267   /**
 268    * Messages currently pending for transmission
 269    * to this peer, if any.
 270    */
 271   struct PendingMessage *pending_messages_tail;
 272
 273   /**
 274    * Handle for pending transmission request.
 275    */
 276   struct GNUNET_SERVER_TransmitHandle *transmit_handle;
 277
 278   /**
 279    * ID of task used to delay receiving more to throttle sender.
 280    */
 281   GNUNET_SCHEDULER_TaskIdentifier receive_delay_task;
 282
 283   /**
 284    * Session timeout task
 285    */
 286   GNUNET_SCHEDULER_TaskIdentifier timeout_task;
 287
 288   struct GNUNET_HELLO_Address *address;
 289
 290   /**
 291    * Address of the other peer (either based on our 'connect'
 292    * call or on our 'accept' call).
 293    *
 294    * struct IPv4TcpAddress or struct IPv6TcpAddress
 295    */
 296   //void *addr;
 297   /**
 298    * Length of @e addr.
 299    */
 300   //size_t addrlen;
 301   /**
 302    * Last activity on this connection.  Used to select preferred
 303    * connection.
 304    */
 305   struct GNUNET_TIME_Absolute last_activity;
 306
 307   /**
 308    * Are we still expecting the welcome message? (#GNUNET_YES/#GNUNET_NO)
 309    */
 310   int expecting_welcome;
 311
 312   /**
 313    * Was this session created using NAT traversal?
 314    */
 315   int is_nat;
 316
 317   /**
 318    * ATS network type in NBO
 319    */
 320   enum GNUNET_ATS_Network_Type ats_address_network_type;
 321 };
 322
 323 /**
 324  * Encapsulation of all of the state of the plugin.
 325  */
 326 struct Plugin
 327 {
 328   /**
 329    * Our environment.
 330    */
 331   struct GNUNET_TRANSPORT_PluginEnvironment *env;
 332
 333   /**
 334    * The listen socket.
 335    */
 336   struct GNUNET_CONNECTION_Handle *lsock;
 337
 338   /**
 339    * Our handle to the NAT module.
 340    */
 341   struct GNUNET_NAT_Handle *nat;
 342
 343   /**
 344    * Map from peer identities to sessions for the given peer.
 345    */
 346   struct GNUNET_CONTAINER_MultiPeerMap *sessionmap;
 347
 348   /**
 349    * Handle to the network service.
 350    */
 351   struct GNUNET_SERVICE_Context *service;
 352
 353   /**
 354    * Handle to the server for this service.
 355    */
 356   struct GNUNET_SERVER_Handle *server;
 357
 358   /**
 359    * Copy of the handler array where the closures are
 360    * set to this struct's instance.
 361    */
 362   struct GNUNET_SERVER_MessageHandler *handlers;
 363
 364   /**
 365    * Map of peers we have tried to contact behind a NAT
 366    */
 367   struct GNUNET_CONTAINER_MultiPeerMap *nat_wait_conns;
 368
 369   /**
 370    * List of active TCP probes.
 371    */
 372   struct TCPProbeContext *probe_head;
 373
 374   /**
 375    * List of active TCP probes.
 376    */
 377   struct TCPProbeContext *probe_tail;
 378
 379   /**
 380    * Handle for (DYN)DNS lookup of our external IP.
 381    */
 382   struct GNUNET_RESOLVER_RequestHandle *ext_dns;
 383
 384   /**
 385    * How many more TCP sessions are we allowed to open right now?
 386    */
 387   unsigned long long max_connections;
 388
 389   /**
 390    * How many more TCP sessions do we have right now?
 391    */
 392   unsigned long long cur_connections;
 393
 394   /**
 395    * ID of task used to update our addresses when one expires.
 396    */
 397   GNUNET_SCHEDULER_TaskIdentifier address_update_task;
 398
 399   /**
 400    * Port that we are actually listening on.
 401    */
 402   uint16_t open_port;
 403
 404   /**
 405    * Port that the user said we would have visible to the
 406    * rest of the world.
 407    */
 408   uint16_t adv_port;
 409
 410 };
 411
 412 /**
 413  * Function called for a quick conversion of the binary address to
 414  * a numeric address.  Note that the caller must not free the
 415  * address and that the next call to this function is allowed
 416  * to override the address again.
 417  *
 418  * @param cls closure ('struct Plugin*')
 419  * @param addr binary address
 420  * @param addrlen length of the address
 421  * @return string representing the same address
 422  */
 423 static const char *
 424 tcp_address_to_string (void *cls, const void *addr, size_t addrlen);
 425
 426 /**
 427  * Function to check if an inbound connection is acceptable.
 428  * Mostly used to limit the total number of open connections
 429  * we can have.
 430  *
 431  * @param cls the `struct Plugin`
 432  * @param ucred credentials, if available, otherwise NULL
 433  * @param addr address
 434  * @param addrlen length of address
 435  * @return #GNUNET_YES to allow, #GNUNET_NO to deny, #GNUNET_SYSERR
 436  *   for unknown address family (will be denied).
 437  */
 438 static int
 439 plugin_tcp_access_check (void *cls,
 440     const struct GNUNET_CONNECTION_Credentials *ucred,
 441     const struct sockaddr *addr, socklen_t addrlen)
 442 {
 443   struct Plugin *plugin = cls;
 444   LOG(GNUNET_ERROR_TYPE_DEBUG,
 445       "Accepting new incoming TCP connection from `%s'\n",
 446       GNUNET_a2s (addr, addrlen));
 447   if (plugin->cur_connections >= plugin->max_connections)
 448     return GNUNET_NO;
 449   plugin->cur_connections++;
 450   return GNUNET_YES;
 451 }
 452
 453 /**
 454  * Our external IP address/port mapping has changed.
 455  *
 456  * @param cls closure, the 'struct Plugin'
 457  * @param add_remove #GNUNET_YES to mean the new public IP address, #GNUNET_NO to mean
 458  *     the previous (now invalid) one
 459  * @param addr either the previous or the new public IP address
 460  * @param addrlen actual lenght of the address
 461  */
 462 static void
 463 tcp_nat_port_map_callback (void *cls, int add_remove,
 464     const struct sockaddr *addr, socklen_t addrlen)
 465 {
 466   struct Plugin *plugin = cls;
 467   struct GNUNET_HELLO_Address *address;
 468   struct IPv4TcpAddress t4;
 469   struct IPv6TcpAddress t6;
 470   void *arg;
 471   size_t args;
 472
 473   LOG(GNUNET_ERROR_TYPE_INFO, "NAT notification to %s address `%s'\n",
 474       (GNUNET_YES == add_remove) ? "add" : "remove",
 475       GNUNET_a2s (addr, addrlen));
 476   /* convert 'addr' to our internal format */
 477   switch (addr->sa_family)
 478   {
 479   case AF_INET:
 480     GNUNET_assert(addrlen == sizeof(struct sockaddr_in));
 481     memset (&t4, 0, sizeof(t4));
 482     t4.options = htonl (myoptions);
 483     t4.ipv4_addr = ((struct sockaddr_in *) addr)->sin_addr.s_addr;
 484     t4.t4_port = ((struct sockaddr_in *) addr)->sin_port;
 485     arg = &t4;
 486     args = sizeof(t4);
 487     break;
 488   case AF_INET6:
 489     GNUNET_assert(addrlen == sizeof(struct sockaddr_in6));
 490     memset (&t6, 0, sizeof(t6));
 491     memcpy (&t6.ipv6_addr, &((struct sockaddr_in6 *) addr)->sin6_addr,
 492         sizeof(struct in6_addr));
 493     t6.options = htonl (myoptions);
 494     t6.t6_port = ((struct sockaddr_in6 *) addr)->sin6_port;
 495     arg = &t6;
 496     args = sizeof(t6);
 497     break;
 498   default:
 499     GNUNET_break(0);
 500     return;
 501   }
 502   /* modify our published address list */
 503   address = GNUNET_HELLO_address_allocate (plugin->env->my_identity,
 504       PLUGIN_NAME, arg, args, GNUNET_HELLO_ADDRESS_INFO_NONE);
 505   plugin->env->notify_address (plugin->env->cls, add_remove, address);
 506   GNUNET_HELLO_address_free(address);
 507 }
 508
 509 /**
 510  * Function called for a quick conversion of the binary address to
 511  * a numeric address.  Note that the caller must not free the
 512  * address and that the next call to this function is allowed
 513  * to override the address again.
 514  *
 515  * @param cls closure (`struct Plugin*`)
 516  * @param addr binary address
 517  * @param addrlen length of the address
 518  * @return string representing the same address
 519  */
 520 static const char *
 521 tcp_address_to_string (void *cls, const void *addr, size_t addrlen)
 522 {
 523   static char rbuf[INET6_ADDRSTRLEN + 12];
 524   char buf[INET6_ADDRSTRLEN];
 525   const void *sb;
 526   struct in_addr a4;
 527   struct in6_addr a6;
 528   const struct IPv4TcpAddress *t4;
 529   const struct IPv6TcpAddress *t6;
 530   int af;
 531   uint16_t port;
 532   uint32_t options;
 533
 534   switch (addrlen)
 535   {
 536   case sizeof(struct IPv6TcpAddress):
 537     t6 = addr;
 538     af = AF_INET6;
 539     port = ntohs (t6->t6_port);
 540     options = ntohl (t6->options);
 541     memcpy (&a6, &t6->ipv6_addr, sizeof(a6));
 542     sb = &a6;
 543     break;
 544   case sizeof(struct IPv4TcpAddress):
 545     t4 = addr;
 546     af = AF_INET;
 547     port = ntohs (t4->t4_port);
 548     options = ntohl (t4->options);
 549     memcpy (&a4, &t4->ipv4_addr, sizeof(a4));
 550     sb = &a4;
 551     break;
 552   case 0:
 553   {
 554     GNUNET_snprintf (rbuf, sizeof(rbuf), "%s",
 555         TRANSPORT_SESSION_INBOUND_STRING);
 556     return rbuf;
 557   }
 558   default:
 559     LOG(GNUNET_ERROR_TYPE_WARNING, _("Unexpected address length: %u bytes\n"),
 560         (unsigned int ) addrlen);
 561     return NULL ;
 562   }
 563   if (NULL == inet_ntop (af, sb, buf, INET6_ADDRSTRLEN))
 564   {
 565     GNUNET_log_strerror(GNUNET_ERROR_TYPE_WARNING, "inet_ntop");
 566     return NULL ;
 567   }
 568   GNUNET_snprintf (rbuf, sizeof(rbuf),
 569       (af == AF_INET6) ? "%s.%u.[%s]:%u" : "%s.%u.%s:%u", PLUGIN_NAME, options,
 570       buf, port);
 571   return rbuf;
 572 }
 573
 574 /**
 575  * Function called to convert a string address to
 576  * a binary address.
 577  *
 578  * @param cls closure (`struct Plugin*`)
 579  * @param addr string address
 580  * @param addrlen length of the address
 581  * @param buf location to store the buffer
 582  * @param added location to store the number of bytes in the buffer.
 583  *        If the function returns #GNUNET_SYSERR, its contents are undefined.
 584  * @return #GNUNET_OK on success, #GNUNET_SYSERR on failure
 585  */
 586 static int
 587 tcp_string_to_address (void *cls, const char *addr, uint16_t addrlen,
 588     void **buf, size_t *added)
 589 {
 590   struct sockaddr_storage socket_address;
 591   char *address;
 592   char *plugin;
 593   char *optionstr;
 594   uint32_t options;
 595
 596   /* Format tcp.options.address:port */
 597   address = NULL;
 598   plugin = NULL;
 599   optionstr = NULL;
 600   if ((NULL == addr) || (addrlen == 0))
 601   {
 602     GNUNET_break(0);
 603     return GNUNET_SYSERR;
 604   }
 605   if ('\0' != addr[addrlen - 1])
 606   {
 607     GNUNET_break(0);
 608     return GNUNET_SYSERR;
 609   }
 610   if (strlen (addr) != addrlen - 1)
 611   {
 612     GNUNET_break(0);
 613     return GNUNET_SYSERR;
 614   }
 615   plugin = GNUNET_strdup (addr);
 616   optionstr = strchr (plugin, '.');
 617   if (NULL == optionstr)
 618   {
 619     GNUNET_break(0);
 620     GNUNET_free(plugin);
 621     return GNUNET_SYSERR;
 622   }
 623   optionstr[0] = '\0';
 624   optionstr++;
 625   options = atol (optionstr);
 626   address = strchr (optionstr, '.');
 627   if (NULL == address)
 628   {
 629     GNUNET_break(0);
 630     GNUNET_free(plugin);
 631     return GNUNET_SYSERR;
 632   }
 633   address[0] = '\0';
 634   address++;
 635
 636   if (GNUNET_OK
 637       != GNUNET_STRINGS_to_address_ip (address, strlen (address),
 638           &socket_address))
 639   {
 640     GNUNET_break(0);
 641     GNUNET_free(plugin);
 642     return GNUNET_SYSERR;
 643   }
 644
 645   GNUNET_free(plugin);
 646   switch (socket_address.ss_family)
 647   {
 648   case AF_INET:
 649   {
 650     struct IPv4TcpAddress *t4;
 651     struct sockaddr_in *in4 = (struct sockaddr_in *) &socket_address;
 652     t4 = GNUNET_new (struct IPv4TcpAddress);
 653     t4->options = htonl (options);
 654     t4->ipv4_addr = in4->sin_addr.s_addr;
 655     t4->t4_port = in4->sin_port;
 656     *buf = t4;
 657     *added = sizeof(struct IPv4TcpAddress);
 658     return GNUNET_OK;
 659   }
 660   case AF_INET6:
 661   {
 662     struct IPv6TcpAddress *t6;
 663     struct sockaddr_in6 *in6 = (struct sockaddr_in6 *) &socket_address;
 664     t6 = GNUNET_new (struct IPv6TcpAddress);
 665     t6->options = htonl (options);
 666     t6->ipv6_addr = in6->sin6_addr;
 667     t6->t6_port = in6->sin6_port;
 668     *buf = t6;
 669     *added = sizeof(struct IPv6TcpAddress);
 670     return GNUNET_OK;
 671   }
 672   default:
 673     return GNUNET_SYSERR;
 674   }
 675 }
 676
 677 /**
 678  * Closure for #session_lookup_by_client_it().
 679  */
 680 struct SessionClientCtx
 681 {
 682   /**
 683    * Client we are looking for.
 684    */
 685   const struct GNUNET_SERVER_Client *client;
 686
 687   /**
 688    * Session that was found.
 689    */
 690   struct Session *ret;
 691 };
 692
 693 static int
 694 session_lookup_by_client_it (void *cls, const struct GNUNET_PeerIdentity *key,
 695     void *value)
 696 {
 697   struct SessionClientCtx *sc_ctx = cls;
 698   struct Session *s = value;
 699
 700   if (s->client == sc_ctx->client)
 701   {
 702     sc_ctx->ret = s;
 703     return GNUNET_NO;
 704   }
 705   return GNUNET_YES;
 706 }
 707
 708 /**
 709  * Find the session handle for the given client.
 710  * Currently uses both the hashmap and the client
 711  * context, as the client context is new and the
 712  * logic still needs to be tested.
 713  *
 714  * @param plugin the plugin
 715  * @param client which client to find the session handle for
 716  * @return NULL if no matching session exists
 717  */
 718 static struct Session *
 719 lookup_session_by_client (struct Plugin *plugin,
 720     struct GNUNET_SERVER_Client *client)
 721 {
 722   struct Session *ret;
 723   struct SessionClientCtx sc_ctx;
 724
 725   ret = GNUNET_SERVER_client_get_user_context (client, struct Session);
 726   sc_ctx.client = client;
 727   sc_ctx.ret = NULL;
 728   GNUNET_CONTAINER_multipeermap_iterate (plugin->sessionmap,
 729       &session_lookup_by_client_it, &sc_ctx);
 730   /* check both methods yield the same result */
 731   GNUNET_break(ret == sc_ctx.ret);
 732   return sc_ctx.ret;
 733 }
 734
 735 /**
 736  * Functions with this signature are called whenever we need
 737  * to close a session due to a disconnect or failure to
 738  * establish a connection.
 739  *
 740  * @param cls the `struct Plugin`
 741  * @param session session to close down
 742  * @return #GNUNET_OK on success
 743  */
 744 static int
 745 tcp_disconnect_session (void *cls, struct Session *session)
 746 {
 747   struct Plugin *plugin = cls;
 748   struct PendingMessage *pm;
 749
 750   LOG(GNUNET_ERROR_TYPE_DEBUG,
 751       "Disconnecting session of peer `%s' address `%s'\n",
 752       GNUNET_i2s (&session->target),
 753       tcp_address_to_string (NULL, session->address->address, session->address->address_length));
 754
 755   if (GNUNET_SCHEDULER_NO_TASK != session->timeout_task)
 756   {
 757     GNUNET_SCHEDULER_cancel (session->timeout_task);
 758     session->timeout_task = GNUNET_SCHEDULER_NO_TASK;
 759   }
 760
 761   if (GNUNET_YES
 762       == GNUNET_CONTAINER_multipeermap_remove (plugin->sessionmap,
 763           &session->target, session))
 764   {
 765     GNUNET_STATISTICS_update (session->plugin->env->stats,
 766         gettext_noop ("# TCP sessions active"), -1, GNUNET_NO);
 767   }
 768   else
 769   {
 770     GNUNET_assert(
 771         GNUNET_YES == GNUNET_CONTAINER_multipeermap_remove (plugin->nat_wait_conns, &session->target, session));
 772   }
 773   if (NULL != session->client)
 774     GNUNET_SERVER_client_set_user_context(session->client, (void *) NULL);
 775
 776   /* clean up state */
 777   if (NULL != session->transmit_handle)
 778   {
 779     GNUNET_SERVER_notify_transmit_ready_cancel (session->transmit_handle);
 780     session->transmit_handle = NULL;
 781   }
 782   session->plugin->env->session_end (session->plugin->env->cls,
 783       &session->target, session);
 784
 785   if (GNUNET_SCHEDULER_NO_TASK != session->nat_connection_timeout)
 786   {
 787     GNUNET_SCHEDULER_cancel (session->nat_connection_timeout);
 788     session->nat_connection_timeout = GNUNET_SCHEDULER_NO_TASK;
 789   }
 790
 791   while (NULL != (pm = session->pending_messages_head))
 792   {
 793     LOG(GNUNET_ERROR_TYPE_DEBUG,
 794         pm->transmit_cont != NULL ? "Could not deliver message to `%4s'.\n" : "Could not deliver message to `%4s', notifying.\n",
 795         GNUNET_i2s (&session->target));
 796     GNUNET_STATISTICS_update (session->plugin->env->stats,
 797         gettext_noop ("# bytes currently in TCP buffers"),
 798         -(int64_t) pm->message_size, GNUNET_NO);
 799     GNUNET_STATISTICS_update (session->plugin->env->stats, gettext_noop
 800     ("# bytes discarded by TCP (disconnect)"), pm->message_size, GNUNET_NO);
 801     GNUNET_CONTAINER_DLL_remove(session->pending_messages_head,
 802         session->pending_messages_tail, pm);
 803     if (NULL != pm->transmit_cont)
 804       pm->transmit_cont (pm->transmit_cont_cls, &session->target, GNUNET_SYSERR,
 805           pm->message_size, 0);
 806     GNUNET_free(pm);
 807   }
 808   if (session->receive_delay_task != GNUNET_SCHEDULER_NO_TASK )
 809   {
 810     GNUNET_SCHEDULER_cancel (session->receive_delay_task);
 811     if (NULL != session->client)
 812       GNUNET_SERVER_receive_done (session->client, GNUNET_SYSERR);
 813   }
 814   if (NULL != session->client)
 815   {
 816     GNUNET_SERVER_client_disconnect (session->client);
 817     GNUNET_SERVER_client_drop (session->client);
 818     session->client = NULL;
 819   }
 820   GNUNET_HELLO_address_free (session->address);
 821   GNUNET_assert(NULL == session->transmit_handle);
 822   GNUNET_free(session);
 823   return GNUNET_OK;
 824 }
 825
 826 /**
 827  * Function that is called to get the keepalive factor.
 828  * GNUNET_CONSTANTS_IDLE_CONNECTION_TIMEOUT is divided by this number to
 829  * calculate the interval between keepalive packets.
 830  *
 831  * @param cls closure with the `struct Plugin`
 832  * @return keepalive factor
 833  */
 834 static unsigned int
 835 tcp_query_keepalive_factor (void *cls)
 836 {
 837   return 3;
 838 }
 839
 840 /**
 841  * Session was idle, so disconnect it
 842  *
 843  * @param cls the `struct Session` of the idle session
 844  * @param tc scheduler context
 845  */
 846 static void
 847 session_timeout (void *cls, const struct GNUNET_SCHEDULER_TaskContext *tc)
 848 {
 849   struct Session *s = cls;
 850
 851   s->timeout_task = GNUNET_SCHEDULER_NO_TASK;
 852   GNUNET_log(GNUNET_ERROR_TYPE_DEBUG,
 853       "Session %p was idle for %s, disconnecting\n", s,
 854       GNUNET_STRINGS_relative_time_to_string (GNUNET_CONSTANTS_IDLE_CONNECTION_TIMEOUT, GNUNET_YES));
 855   /* call session destroy function */
 856   tcp_disconnect_session (s->plugin, s);
 857 }
 858
 859 /**
 860  * Increment session timeout due to activity
 861  *
 862  * @param s session to increment timeout for
 863  */
 864 static void
 865 reschedule_session_timeout (struct Session *s)
 866 {
 867   GNUNET_assert(GNUNET_SCHEDULER_NO_TASK != s->timeout_task);
 868   GNUNET_SCHEDULER_cancel (s->timeout_task);
 869   s->timeout_task = GNUNET_SCHEDULER_add_delayed (
 870       GNUNET_CONSTANTS_IDLE_CONNECTION_TIMEOUT, &session_timeout, s);
 871   GNUNET_log(GNUNET_ERROR_TYPE_DEBUG,
 872       "Timeout rescheduled for session %p set to %s\n", s,
 873       GNUNET_STRINGS_relative_time_to_string (GNUNET_CONSTANTS_IDLE_CONNECTION_TIMEOUT, GNUNET_YES));
 874 }
 875
 876 /**
 877  * Create a new session.  Also queues a welcome message.
 878  *
 879  * @param plugin the plugin
 880  * @param address the address to create the session for
 881  * @param client client to use, reference counter must have already been increased
 882  * @param is_nat this a NAT session, we should wait for a client to
 883  *               connect to us from an address, then assign that to
 884  *               the session
 885  * @return new session object
 886  */
 887 static struct Session *
 888 create_session (struct Plugin *plugin,
 889                 const struct GNUNET_HELLO_Address *address,
 890                 struct GNUNET_SERVER_Client *client,
 891                 int is_nat)
 892 {
 893   struct Session *session;
 894   struct PendingMessage *pm;
 895   struct WelcomeMessage welcome;
 896
 897   if (GNUNET_YES != is_nat)
 898     GNUNET_assert(NULL != client);
 899   else
 900     GNUNET_assert(NULL == client);
 901
 902   LOG(GNUNET_ERROR_TYPE_DEBUG, "Creating new session for peer `%4s'\n",
 903       GNUNET_i2s (&address->peer));
 904   session = GNUNET_new (struct Session);
 905   session->last_activity = GNUNET_TIME_absolute_get ();
 906   session->plugin = plugin;
 907   session->is_nat = is_nat;
 908   session->client = client;
 909   session->address = GNUNET_HELLO_address_copy (address);
 910   session->target = address->peer;
 911   session->expecting_welcome = GNUNET_YES;
 912   session->ats_address_network_type = GNUNET_ATS_NET_UNSPECIFIED;
 913   pm = GNUNET_malloc (sizeof (struct PendingMessage) +
 914       sizeof (struct WelcomeMessage));
 915   pm->msg = (const char *) &pm[1];
 916   pm->message_size = sizeof(struct WelcomeMessage);
 917   welcome.header.size = htons (sizeof(struct WelcomeMessage));
 918   welcome.header.type = htons (GNUNET_MESSAGE_TYPE_TRANSPORT_TCP_WELCOME);
 919   welcome.clientIdentity = *plugin->env->my_identity;
 920   memcpy (&pm[1], &welcome, sizeof(welcome));
 921   pm->timeout = GNUNET_TIME_UNIT_FOREVER_ABS;
 922   GNUNET_STATISTICS_update (plugin->env->stats,
 923       gettext_noop ("# bytes currently in TCP buffers"), pm->message_size,
 924       GNUNET_NO);
 925   GNUNET_CONTAINER_DLL_insert(session->pending_messages_head,
 926       session->pending_messages_tail, pm);
 927   if (GNUNET_YES != is_nat)
 928   {
 929     GNUNET_STATISTICS_update (plugin->env->stats,
 930         gettext_noop ("# TCP sessions active"), 1, GNUNET_NO);
 931   }
 932   session->timeout_task = GNUNET_SCHEDULER_add_delayed (
 933       GNUNET_CONSTANTS_IDLE_CONNECTION_TIMEOUT, &session_timeout, session);
 934   return session;
 935 }
 936
 937 /**
 938  * If we have pending messages, ask the server to
 939  * transmit them (schedule the respective tasks, etc.)
 940  *
 941  * @param session for which session should we do this
 942  */
 943 static void
 944 process_pending_messages (struct Session *session);
 945
 946 /**
 947  * Function called to notify a client about the socket
 948  * being ready to queue more data.  "buf" will be
 949  * NULL and "size" zero if the socket was closed for
 950  * writing in the meantime.
 951  *
 952  * @param cls closure
 953  * @param size number of bytes available in buf
 954  * @param buf where the callee should write the message
 955  * @return number of bytes written to buf
 956  */
 957 static size_t
 958 do_transmit (void *cls, size_t size, void *buf)
 959 {
 960   struct Session *session = cls;
 961   struct GNUNET_PeerIdentity pid;
 962   struct Plugin *plugin;
 963   struct PendingMessage *pos;
 964   struct PendingMessage *hd;
 965   struct PendingMessage *tl;
 966   struct GNUNET_TIME_Absolute now;
 967   char *cbuf;
 968   size_t ret;
 969
 970   session->transmit_handle = NULL;
 971   plugin = session->plugin;
 972   if (NULL == buf)
 973   {
 974     LOG(GNUNET_ERROR_TYPE_DEBUG,
 975         "Timeout trying to transmit to peer `%4s', discarding message queue.\n",
 976         GNUNET_i2s (&session->target));
 977     /* timeout; cancel all messages that have already expired */
 978     hd = NULL;
 979     tl = NULL;
 980     ret = 0;
 981     now = GNUNET_TIME_absolute_get ();
 982     while ((NULL != (pos = session->pending_messages_head))
 983         && (pos->timeout.abs_value_us <= now.abs_value_us))
 984     {
 985       GNUNET_CONTAINER_DLL_remove(session->pending_messages_head,
 986           session->pending_messages_tail, pos);
 987       LOG(GNUNET_ERROR_TYPE_DEBUG,
 988           "Failed to transmit %u byte message to `%4s'.\n", pos->message_size,
 989           GNUNET_i2s (&session->target));
 990       ret += pos->message_size;
 991       GNUNET_CONTAINER_DLL_insert_after(hd, tl, tl, pos);
 992     }
 993     /* do this call before callbacks (so that if callbacks destroy
 994      * session, they have a chance to cancel actions done by this
 995      * call) */
 996     process_pending_messages (session);
 997     pid = session->target;
 998     /* no do callbacks and do not use session again since
 999      * the callbacks may abort the session */
1000     while (NULL != (pos = hd))
1001     {
1002       GNUNET_CONTAINER_DLL_remove(hd, tl, pos);
1003       if (pos->transmit_cont != NULL )
1004         pos->transmit_cont (pos->transmit_cont_cls, &pid, GNUNET_SYSERR,
1005             pos->message_size, 0);
1006       GNUNET_free(pos);
1007     }
1008     GNUNET_STATISTICS_update (plugin->env->stats,
1009         gettext_noop ("# bytes currently in TCP buffers"), -(int64_t) ret,
1010         GNUNET_NO);
1011     GNUNET_STATISTICS_update (plugin->env->stats, gettext_noop
1012     ("# bytes discarded by TCP (timeout)"), ret, GNUNET_NO);
1013     return 0;
1014   }
1015   /* copy all pending messages that would fit */
1016   ret = 0;
1017   cbuf = buf;
1018   hd = NULL;
1019   tl = NULL;
1020   while (NULL != (pos = session->pending_messages_head))
1021   {
1022     if (ret + pos->message_size > size)
1023       break;
1024     GNUNET_CONTAINER_DLL_remove(session->pending_messages_head,
1025         session->pending_messages_tail, pos);
1026     GNUNET_assert(size >= pos->message_size);
1027     LOG(GNUNET_ERROR_TYPE_DEBUG, "Transmitting message of type %u\n",
1028         ntohs (((struct GNUNET_MessageHeader * ) pos->msg)->type));
1029     /* FIXME: this memcpy can be up to 7% of our total runtime */
1030     memcpy (cbuf, pos->msg, pos->message_size);
1031     cbuf += pos->message_size;
1032     ret += pos->message_size;
1033     size -= pos->message_size;
1034     GNUNET_CONTAINER_DLL_insert_tail(hd, tl, pos);
1035   }
1036   /* schedule 'continuation' before callbacks so that callbacks that
1037    * cancel everything don't cause us to use a session that no longer
1038    * exists... */
1039   process_pending_messages (session);
1040   session->last_activity = GNUNET_TIME_absolute_get ();
1041   pid = session->target;
1042   /* we'll now call callbacks that may cancel the session; hence
1043    * we should not use 'session' after this point */
1044   while (NULL != (pos = hd))
1045   {
1046     GNUNET_CONTAINER_DLL_remove(hd, tl, pos);
1047     if (pos->transmit_cont != NULL )
1048       pos->transmit_cont (pos->transmit_cont_cls, &pid, GNUNET_OK,
1049           pos->message_size, pos->message_size); /* FIXME: include TCP overhead */
1050     GNUNET_free(pos);
1051   }
1052   GNUNET_assert(hd == NULL);
1053   GNUNET_assert(tl == NULL);
1054   LOG(GNUNET_ERROR_TYPE_DEBUG, "Transmitting %u bytes\n", ret);
1055   GNUNET_STATISTICS_update (plugin->env->stats,
1056       gettext_noop ("# bytes currently in TCP buffers"), -(int64_t) ret,
1057       GNUNET_NO);
1058   GNUNET_STATISTICS_update (plugin->env->stats,
1059       gettext_noop ("# bytes transmitted via TCP"), ret, GNUNET_NO);
1060   return ret;
1061 }
1062
1063 /**
1064  * If we have pending messages, ask the server to
1065  * transmit them (schedule the respective tasks, etc.)
1066  *
1067  * @param session for which session should we do this
1068  */
1069 static void
1070 process_pending_messages (struct Session *session)
1071 {
1072   struct PendingMessage *pm;
1073
1074   GNUNET_assert(NULL != session->client);
1075   if (NULL != session->transmit_handle)
1076     return;
1077   if (NULL == (pm = session->pending_messages_head))
1078     return;
1079
1080   session->transmit_handle = GNUNET_SERVER_notify_transmit_ready (
1081       session->client, pm->message_size,
1082       GNUNET_TIME_absolute_get_remaining (pm->timeout), &do_transmit, session);
1083 }
1084
1085 #if EXTRA_CHECKS
1086 /**
1087  * Closure for #session_it().
1088  */
1089 struct FindSessionContext
1090 {
1091   /**
1092    * Session we are looking for.
1093    */
1094   struct Session *s;
1095
1096   /**
1097    * Set to #GNUNET_OK if we found the session.
1098    */
1099   int res;
1100 };
1101
1102 /**
1103  * Function called to check if a session is in our maps.
1104  *
1105  * @param cls the `struct FindSessionContext`
1106  * @param key peer identity
1107  * @param value session in the map
1108  * @return #GNUNET_YES to continue looking, #GNUNET_NO if we found the session
1109  */
1110 static int
1111 session_it (void *cls, const struct GNUNET_PeerIdentity *key, void *value)
1112 {
1113   struct FindSessionContext *res = cls;
1114   struct Session *session = value;
1115
1116   if (res->s == session)
1117   {
1118     res->res = GNUNET_OK;
1119     return GNUNET_NO;
1120   }
1121   return GNUNET_YES;
1122 }
1123
1124 /**
1125  * Check that the given session is known to the plugin and
1126  * is in one of our maps.
1127  *
1128  * @param plugin the plugin to check against
1129  * @param session the session to check
1130  * @return #GNUNET_OK if all is well, #GNUNET_SYSERR if the session is invalid
1131  */
1132 static int
1133 find_session (struct Plugin *plugin, struct Session *session)
1134 {
1135   struct FindSessionContext session_map_res;
1136   struct FindSessionContext nat_map_res;
1137
1138   session_map_res.s = session;
1139   session_map_res.res = GNUNET_SYSERR;
1140   GNUNET_CONTAINER_multipeermap_iterate (plugin->sessionmap, &session_it,
1141       &session_map_res);
1142   if (GNUNET_SYSERR != session_map_res.res)
1143     return GNUNET_OK;
1144   nat_map_res.s = session;
1145   nat_map_res.res = GNUNET_SYSERR;
1146   GNUNET_CONTAINER_multipeermap_iterate (plugin->nat_wait_conns, &session_it,
1147       &nat_map_res);
1148   if (GNUNET_SYSERR != nat_map_res.res)
1149     return GNUNET_OK;
1150   GNUNET_break(0);
1151   return GNUNET_SYSERR;
1152 }
1153 #endif
1154
1155 /**
1156  * Function that can be used by the transport service to transmit
1157  * a message using the plugin.   Note that in the case of a
1158  * peer disconnecting, the continuation MUST be called
1159  * prior to the disconnect notification itself.  This function
1160  * will be called with this peer's HELLO message to initiate
1161  * a fresh connection to another peer.
1162  *
1163  * @param cls closure
1164  * @param session which session must be used
1165  * @param msgbuf the message to transmit
1166  * @param msgbuf_size number of bytes in 'msgbuf'
1167  * @param priority how important is the message (most plugins will
1168  *                 ignore message priority and just FIFO)
1169  * @param to how long to wait at most for the transmission (does not
1170  *                require plugins to discard the message after the timeout,
1171  *                just advisory for the desired delay; most plugins will ignore
1172  *                this as well)
1173  * @param cont continuation to call once the message has
1174  *        been transmitted (or if the transport is ready
1175  *        for the next transmission call; or if the
1176  *        peer disconnected...); can be NULL
1177  * @param cont_cls closure for @a cont
1178  * @return number of bytes used (on the physical network, with overheads);
1179  *         -1 on hard errors (i.e. address invalid); 0 is a legal value
1180  *         and does NOT mean that the message was not transmitted (DV)
1181  */
1182 static ssize_t
1183 tcp_plugin_send (void *cls, struct Session *session, const char *msgbuf,
1184     size_t msgbuf_size, unsigned int priority, struct GNUNET_TIME_Relative to,
1185     GNUNET_TRANSPORT_TransmitContinuation cont, void *cont_cls)
1186 {
1187   struct Plugin * plugin = cls;
1188   struct PendingMessage *pm;
1189
1190 #if EXTRA_CHECKS
1191   if (GNUNET_SYSERR == find_session (plugin, session))
1192   {
1193     LOG(GNUNET_ERROR_TYPE_ERROR, _("Trying to send with invalid session %p\n"));
1194     GNUNET_assert(0);
1195     return GNUNET_SYSERR;
1196   }
1197 #endif
1198   /* create new message entry */
1199   pm = GNUNET_malloc (sizeof (struct PendingMessage) + msgbuf_size);
1200   pm->msg = (const char *) &pm[1];
1201   memcpy (&pm[1], msgbuf, msgbuf_size);
1202   pm->message_size = msgbuf_size;
1203   pm->timeout = GNUNET_TIME_relative_to_absolute (to);
1204   pm->transmit_cont = cont;
1205   pm->transmit_cont_cls = cont_cls;
1206
1207   LOG(GNUNET_ERROR_TYPE_DEBUG,
1208       "Asked to transmit %u bytes to `%s', added message to list.\n",
1209       msgbuf_size, GNUNET_i2s (&session->target));
1210
1211   if (GNUNET_YES
1212       == GNUNET_CONTAINER_multipeermap_contains_value (plugin->sessionmap,
1213           &session->target, session))
1214   {
1215     GNUNET_assert(NULL != session->client);
1216     GNUNET_SERVER_client_set_timeout (session->client,
1217         GNUNET_CONSTANTS_IDLE_CONNECTION_TIMEOUT);
1218     GNUNET_STATISTICS_update (plugin->env->stats,
1219         gettext_noop ("# bytes currently in TCP buffers"), msgbuf_size,
1220         GNUNET_NO);
1221
1222     /* append pm to pending_messages list */
1223     GNUNET_CONTAINER_DLL_insert_tail(session->pending_messages_head,
1224         session->pending_messages_tail, pm);
1225
1226     process_pending_messages (session);
1227     return msgbuf_size;
1228   }
1229   else if (GNUNET_YES
1230       == GNUNET_CONTAINER_multipeermap_contains_value (plugin->nat_wait_conns,
1231           &session->target, session))
1232   {
1233     LOG(GNUNET_ERROR_TYPE_DEBUG,
1234         "This NAT WAIT session for peer `%s' is not yet ready!\n",
1235         GNUNET_i2s (&session->target));
1236     GNUNET_STATISTICS_update (plugin->env->stats,
1237         gettext_noop ("# bytes currently in TCP buffers"), msgbuf_size,
1238         GNUNET_NO);
1239
1240     /* append pm to pending_messages list */
1241     GNUNET_CONTAINER_DLL_insert_tail(session->pending_messages_head,
1242         session->pending_messages_tail, pm);
1243     return msgbuf_size;
1244   }
1245   else
1246   {
1247     LOG(GNUNET_ERROR_TYPE_ERROR, "Invalid session %p\n", session);
1248     if (NULL != cont)
1249       cont (cont_cls, &session->target, GNUNET_SYSERR, pm->message_size, 0);
1250     GNUNET_break(0);
1251     GNUNET_free(pm);
1252     return GNUNET_SYSERR; /* session does not exist here */
1253   }
1254 }
1255
1256 /**
1257  * Closure for #session_lookup_it().
1258  */
1259 struct SessionItCtx
1260 {
1261   /**
1262    * Address we are looking for.
1263    */
1264   const struct GNUNET_HELLO_Address *address;
1265
1266   /**
1267    * Where to store the session (if we found it).
1268    */
1269   struct Session *result;
1270
1271 };
1272
1273 /**
1274  * Look for a session by address.
1275  *
1276  * @param cls the `struct SessionItCtx`
1277  * @param key unused
1278  * @param value a `struct Session`
1279  * @return #GNUNET_YES to continue looking, #GNUNET_NO if we found the session
1280  */
1281 static int
1282 session_lookup_it (void *cls, const struct GNUNET_PeerIdentity *key,
1283     void *value)
1284 {
1285   struct SessionItCtx * si_ctx = cls;
1286   struct Session * session = value;
1287
1288   if (0 != GNUNET_HELLO_address_cmp (si_ctx->address, session->address))
1289     return GNUNET_YES;
1290   /* Found existing session */
1291   si_ctx->result = session;
1292   return GNUNET_NO;
1293 }
1294
1295 /**
1296  * Task cleaning up a NAT connection attempt after timeout
1297  *
1298  * @param cls the `struct Session`
1299  * @param tc scheduler context (unused)
1300  */
1301 static void
1302 nat_connect_timeout (void *cls, const struct GNUNET_SCHEDULER_TaskContext *tc)
1303 {
1304   struct Session *session = cls;
1305
1306   session->nat_connection_timeout = GNUNET_SCHEDULER_NO_TASK;
1307   LOG(GNUNET_ERROR_TYPE_DEBUG,
1308       "NAT WAIT connection to `%4s' at `%s' could not be established, removing session\n",
1309       GNUNET_i2s (&session->target),
1310       tcp_address_to_string (NULL, session->address->address, session->address->address_length));
1311   tcp_disconnect_session (session->plugin, session);
1312 }
1313
1314 static void
1315 tcp_plugin_update_session_timeout (void *cls,
1316     const struct GNUNET_PeerIdentity *peer, struct Session *session)
1317 {
1318   struct Plugin *plugin = cls;
1319
1320   if (GNUNET_SYSERR == find_session (plugin, session))
1321     return;
1322   reschedule_session_timeout (session);
1323 }
1324
1325 /**
1326  * Create a new session to transmit data to the target
1327  * This session will used to send data to this peer and the plugin will
1328  * notify us by calling the env->session_end function
1329  *
1330  * @param cls closure
1331  * @param address the address to use
1332  * @return the session if the address is valid, NULL otherwise
1333  */
1334 static struct Session *
1335 tcp_plugin_get_session (void *cls, const struct GNUNET_HELLO_Address *address)
1336 {
1337   struct Plugin *plugin = cls;
1338   struct Session *session = NULL;
1339   int af;
1340   const void *sb;
1341   size_t sbs;
1342   struct GNUNET_CONNECTION_Handle *sa;
1343   struct sockaddr_in a4;
1344   struct sockaddr_in6 a6;
1345   const struct IPv4TcpAddress *t4;
1346   const struct IPv6TcpAddress *t6;
1347   struct GNUNET_ATS_Information ats;
1348   unsigned int is_natd = GNUNET_NO;
1349   size_t addrlen;
1350
1351   addrlen = address->address_length;
1352   LOG(GNUNET_ERROR_TYPE_DEBUG,
1353       "Trying to get session for `%s' address of peer `%s'\n",
1354       tcp_address_to_string(NULL, address->address, address->address_length),
1355       GNUNET_i2s (&address->peer));
1356
1357   if (GNUNET_HELLO_address_check_option(address, GNUNET_HELLO_ADDRESS_INFO_INBOUND))
1358   {
1359     GNUNET_break (0);
1360     return NULL;
1361   }
1362
1363   /* look for existing session */
1364   if (GNUNET_YES == GNUNET_CONTAINER_multipeermap_contains (plugin->sessionmap,
1365           &address->peer))
1366   {
1367     struct SessionItCtx si_ctx;
1368
1369     si_ctx.address = address;
1370     si_ctx.result = NULL;
1371
1372     GNUNET_CONTAINER_multipeermap_get_multiple (plugin->sessionmap,
1373         &address->peer, &session_lookup_it, &si_ctx);
1374     if (si_ctx.result != NULL )
1375     {
1376       session = si_ctx.result;
1377       LOG(GNUNET_ERROR_TYPE_DEBUG,
1378           "Found existing session for `%s' address `%s' session %p\n",
1379           GNUNET_i2s (&address->peer),
1380           tcp_address_to_string(NULL, address->address, address->address_length),
1381           session);
1382       return session;
1383     }
1384     LOG(GNUNET_ERROR_TYPE_DEBUG,
1385         "Existing sessions did not match address `%s' or peer `%s'\n",
1386         tcp_address_to_string(NULL, address->address, address->address_length),
1387         GNUNET_i2s (&address->peer));
1388   }
1389
1390   if (addrlen == sizeof(struct IPv6TcpAddress))
1391   {
1392     GNUNET_assert(NULL != address->address); /* make static analysis happy */
1393     t6 = address->address;
1394     af = AF_INET6;
1395     memset (&a6, 0, sizeof(a6));
1396 #if HAVE_SOCKADDR_IN_SIN_LEN
1397     a6.sin6_len = sizeof (a6);
1398 #endif
1399     a6.sin6_family = AF_INET6;
1400     a6.sin6_port = t6->t6_port;
1401     if (t6->t6_port == 0)
1402       is_natd = GNUNET_YES;
1403     memcpy (&a6.sin6_addr, &t6->ipv6_addr, sizeof(struct in6_addr));
1404     sb = &a6;
1405     sbs = sizeof(a6);
1406   }
1407   else if (addrlen == sizeof(struct IPv4TcpAddress))
1408   {
1409     GNUNET_assert(NULL != address->address); /* make static analysis happy */
1410     t4 = address->address;
1411     af = AF_INET;
1412     memset (&a4, 0, sizeof(a4));
1413 #if HAVE_SOCKADDR_IN_SIN_LEN
1414     a4.sin_len = sizeof (a4);
1415 #endif
1416     a4.sin_family = AF_INET;
1417     a4.sin_port = t4->t4_port;
1418     if (t4->t4_port == 0)
1419       is_natd = GNUNET_YES;
1420     a4.sin_addr.s_addr = t4->ipv4_addr;
1421     sb = &a4;
1422     sbs = sizeof(a4);
1423   }
1424   else
1425   {
1426     GNUNET_STATISTICS_update (plugin->env->stats, gettext_noop
1427     ("# requests to create session with invalid address"), 1, GNUNET_NO);
1428     return NULL ;
1429   }
1430
1431   ats = plugin->env->get_address_type (plugin->env->cls, sb, sbs);
1432
1433   if ((is_natd == GNUNET_YES) && (addrlen == sizeof(struct IPv6TcpAddress)))
1434   {
1435     /* NAT client only works with IPv4 addresses */
1436     return NULL ;
1437   }
1438
1439   if (plugin->cur_connections >= plugin->max_connections)
1440   {
1441     /* saturated */
1442     return NULL ;
1443   }
1444
1445   if ((is_natd == GNUNET_YES)
1446       && (GNUNET_YES
1447           == GNUNET_CONTAINER_multipeermap_contains (plugin->nat_wait_conns,
1448               &address->peer)))
1449   {
1450     /* Only do one NAT punch attempt per peer identity */
1451     return NULL ;
1452   }
1453
1454   if ((is_natd == GNUNET_YES) && (NULL != plugin->nat) &&
1455       (GNUNET_NO == GNUNET_CONTAINER_multipeermap_contains (plugin->nat_wait_conns,
1456               &address->peer)))
1457   {
1458     LOG (GNUNET_ERROR_TYPE_DEBUG,
1459         "Found valid IPv4 NAT address (creating session)!\n");
1460     session = create_session (plugin, address, NULL, GNUNET_YES);
1461     session->ats_address_network_type = (enum GNUNET_ATS_Network_Type) ntohl (
1462         ats.value);
1463     GNUNET_break(
1464         session->ats_address_network_type != GNUNET_ATS_NET_UNSPECIFIED);
1465     session->nat_connection_timeout = GNUNET_SCHEDULER_add_delayed (NAT_TIMEOUT,
1466         &nat_connect_timeout, session);
1467     GNUNET_assert(session != NULL);
1468     GNUNET_assert(GNUNET_OK == GNUNET_CONTAINER_multipeermap_put (plugin->nat_wait_conns,
1469         &session->target, session, GNUNET_CONTAINER_MULTIHASHMAPOPTION_UNIQUE_ONLY));
1470
1471     LOG(GNUNET_ERROR_TYPE_DEBUG,
1472         "Created NAT WAIT connection to `%4s' at `%s'\n",
1473         GNUNET_i2s (&session->target), GNUNET_a2s (sb, sbs));
1474
1475     if (GNUNET_OK == GNUNET_NAT_run_client (plugin->nat, &a4))
1476       return session;
1477     else
1478     {
1479       LOG(GNUNET_ERROR_TYPE_DEBUG,
1480           "Running NAT client for `%4s' at `%s' failed\n",
1481           GNUNET_i2s (&session->target), GNUNET_a2s (sb, sbs));
1482       tcp_disconnect_session (plugin, session);
1483       return NULL ;
1484     }
1485   }
1486
1487   /* create new outbound session */
1488   GNUNET_assert(plugin->cur_connections <= plugin->max_connections);
1489   sa = GNUNET_CONNECTION_create_from_sockaddr (af, sb, sbs);
1490   if (NULL == sa)
1491   {
1492     LOG(GNUNET_ERROR_TYPE_DEBUG,
1493         "Failed to create connection to `%4s' at `%s'\n",
1494         GNUNET_i2s (&address->peer), GNUNET_a2s (sb, sbs));
1495     return NULL ;
1496   }
1497   plugin->cur_connections++;
1498   if (plugin->cur_connections == plugin->max_connections)
1499     GNUNET_SERVER_suspend (plugin->server); /* Maximum number of connections rechead */
1500
1501   LOG(GNUNET_ERROR_TYPE_DEBUG,
1502       "Asked to transmit to `%4s', creating fresh session using address `%s'.\n",
1503       GNUNET_i2s (&address->peer), GNUNET_a2s (sb, sbs));
1504
1505   session = create_session (plugin, address,
1506       GNUNET_SERVER_connect_socket (plugin->server, sa), GNUNET_NO);
1507   session->ats_address_network_type = (enum GNUNET_ATS_Network_Type) ntohl (
1508       ats.value);
1509   GNUNET_break(session->ats_address_network_type != GNUNET_ATS_NET_UNSPECIFIED);
1510   GNUNET_SERVER_client_set_user_context(session->client, session);
1511   GNUNET_CONTAINER_multipeermap_put (plugin->sessionmap, &session->target,
1512       session, GNUNET_CONTAINER_MULTIHASHMAPOPTION_MULTIPLE);
1513   LOG(GNUNET_ERROR_TYPE_DEBUG,
1514       "Creating new session for `%s' address `%s' session %p\n",
1515       GNUNET_i2s (&address->peer),
1516       tcp_address_to_string(NULL, address->address, address->address_length),
1517       session);
1518   /* Send TCP Welcome */
1519   process_pending_messages (session);
1520
1521   return session;
1522 }
1523
1524 static int
1525 session_disconnect_it (void *cls, const struct GNUNET_PeerIdentity *key,
1526     void *value)
1527 {
1528   struct Plugin *plugin = cls;
1529   struct Session *session = value;
1530
1531   GNUNET_STATISTICS_update (session->plugin->env->stats, gettext_noop
1532   ("# transport-service disconnect requests for TCP"), 1, GNUNET_NO);
1533   tcp_disconnect_session (plugin, session);
1534   return GNUNET_YES;
1535 }
1536
1537 /**
1538  * Function that can be called to force a disconnect from the
1539  * specified neighbour.  This should also cancel all previously
1540  * scheduled transmissions.  Obviously the transmission may have been
1541  * partially completed already, which is OK.  The plugin is supposed
1542  * to close the connection (if applicable) and no longer call the
1543  * transmit continuation(s).
1544  *
1545  * Finally, plugin MUST NOT call the services's receive function to
1546  * notify the service that the connection to the specified target was
1547  * closed after a getting this call.
1548  *
1549  * @param cls closure
1550  * @param target peer for which the last transmission is
1551  *        to be cancelled
1552  */
1553 static void
1554 tcp_plugin_disconnect (void *cls, const struct GNUNET_PeerIdentity *target)
1555 {
1556   struct Plugin *plugin = cls;
1557
1558   LOG(GNUNET_ERROR_TYPE_DEBUG, "Disconnecting peer `%4s'\n",
1559       GNUNET_i2s (target));
1560   GNUNET_CONTAINER_multipeermap_get_multiple (plugin->sessionmap, target,
1561       &session_disconnect_it, plugin);
1562   GNUNET_CONTAINER_multipeermap_get_multiple (plugin->nat_wait_conns, target,
1563       &session_disconnect_it, plugin);
1564 }
1565
1566 /**
1567  * Running pretty printers: head
1568  */
1569 static struct PrettyPrinterContext *ppc_dll_head;
1570
1571 /**
1572  * Running pretty printers: tail
1573  */
1574 static struct PrettyPrinterContext *ppc_dll_tail;
1575
1576 /**
1577  * Context for address to string conversion.
1578  */
1579 struct PrettyPrinterContext
1580 {
1581   /**
1582    * DLL
1583    */
1584   struct PrettyPrinterContext *next;
1585
1586   /**
1587    * DLL
1588    */
1589   struct PrettyPrinterContext *prev;
1590
1591   /**
1592    * Timeout task
1593    */
1594   GNUNET_SCHEDULER_TaskIdentifier timeout_task;
1595
1596   /**
1597    * Resolver handle
1598    */
1599   struct GNUNET_RESOLVER_RequestHandle *resolver_handle;
1600
1601   /**
1602    * Function to call with the result.
1603    */
1604   GNUNET_TRANSPORT_AddressStringCallback asc;
1605
1606   /**
1607    * Clsoure for 'asc'.
1608    */
1609   void *asc_cls;
1610
1611   /**
1612    * Port to add after the IP address.
1613    */
1614   uint16_t port;
1615
1616   /**
1617    * IPv6 address
1618    */
1619   int ipv6;
1620
1621   /**
1622    * Options
1623    */
1624   uint32_t options;
1625 };
1626
1627 static void
1628 ppc_cancel_task (void *cls, const struct GNUNET_SCHEDULER_TaskContext *tc)
1629 {
1630   struct PrettyPrinterContext *ppc = cls;
1631
1632   ppc->timeout_task = GNUNET_SCHEDULER_NO_TASK;
1633   if (NULL != ppc->resolver_handle)
1634   {
1635     GNUNET_RESOLVER_request_cancel (ppc->resolver_handle);
1636     ppc->resolver_handle = NULL;
1637   }
1638   GNUNET_CONTAINER_DLL_remove(ppc_dll_head, ppc_dll_tail, ppc);
1639   GNUNET_free(ppc);
1640 }
1641
1642 /**
1643  * Append our port and forward the result.
1644  *
1645  * @param cls the 'struct PrettyPrinterContext*'
1646  * @param hostname hostname part of the address
1647  */
1648 static void
1649 append_port (void *cls, const char *hostname)
1650 {
1651   struct PrettyPrinterContext *ppc = cls;
1652   struct PrettyPrinterContext *cur;
1653   char *ret;
1654
1655   if (NULL == hostname)
1656   {
1657     ppc->asc (ppc->asc_cls, NULL );
1658     GNUNET_CONTAINER_DLL_remove(ppc_dll_head, ppc_dll_tail, ppc);
1659     GNUNET_SCHEDULER_cancel (ppc->timeout_task);
1660     ppc->timeout_task = GNUNET_SCHEDULER_NO_TASK;
1661     ppc->resolver_handle = NULL;
1662     GNUNET_free(ppc);
1663     return;
1664   }
1665   for (cur = ppc_dll_head; (NULL != cur); cur = cur->next)
1666     if (cur == ppc)
1667       break;
1668   if (NULL == cur)
1669   {
1670     GNUNET_break(0);
1671     return;
1672   }
1673
1674   if (GNUNET_YES == ppc->ipv6)
1675     GNUNET_asprintf (&ret, "%s.%u.[%s]:%d", PLUGIN_NAME, ppc->options, hostname,
1676         ppc->port);
1677   else
1678     GNUNET_asprintf (&ret, "%s.%u.%s:%d", PLUGIN_NAME, ppc->options, hostname,
1679         ppc->port);
1680   ppc->asc (ppc->asc_cls, ret);
1681   GNUNET_free(ret);
1682 }
1683
1684 /**
1685  * Convert the transports address to a nice, human-readable
1686  * format.
1687  *
1688  * @param cls closure
1689  * @param type name of the transport that generated the address
1690  * @param addr one of the addresses of the host, NULL for the last address
1691  *        the specific address format depends on the transport
1692  * @param addrlen length of the address
1693  * @param numeric should (IP) addresses be displayed in numeric form?
1694  * @param timeout after how long should we give up?
1695  * @param asc function to call on each string
1696  * @param asc_cls closure for asc
1697  */
1698 static void
1699 tcp_plugin_address_pretty_printer (void *cls, const char *type,
1700     const void *addr, size_t addrlen, int numeric,
1701     struct GNUNET_TIME_Relative timeout,
1702     GNUNET_TRANSPORT_AddressStringCallback asc, void *asc_cls)
1703 {
1704   struct PrettyPrinterContext *ppc;
1705   const void *sb;
1706   size_t sbs;
1707   struct sockaddr_in a4;
1708   struct sockaddr_in6 a6;
1709   const struct IPv4TcpAddress *t4;
1710   const struct IPv6TcpAddress *t6;
1711   uint16_t port;
1712   uint32_t options;
1713
1714   if (addrlen == sizeof(struct IPv6TcpAddress))
1715   {
1716     t6 = addr;
1717     memset (&a6, 0, sizeof(a6));
1718     a6.sin6_family = AF_INET6;
1719     a6.sin6_port = t6->t6_port;
1720     memcpy (&a6.sin6_addr, &t6->ipv6_addr, sizeof(struct in6_addr));
1721     port = ntohs (t6->t6_port);
1722     options = ntohl (t6->options);
1723     sb = &a6;
1724     sbs = sizeof(a6);
1725   }
1726   else if (addrlen == sizeof(struct IPv4TcpAddress))
1727   {
1728     t4 = addr;
1729     memset (&a4, 0, sizeof(a4));
1730     a4.sin_family = AF_INET;
1731     a4.sin_port = t4->t4_port;
1732     a4.sin_addr.s_addr = t4->ipv4_addr;
1733     port = ntohs (t4->t4_port);
1734     options = ntohl (t4->options);
1735     sb = &a4;
1736     sbs = sizeof(a4);
1737   }
1738   else if (0 == addrlen)
1739   {
1740     asc (asc_cls, TRANSPORT_SESSION_INBOUND_STRING);
1741     asc (asc_cls, NULL );
1742     return;
1743   }
1744   else
1745   {
1746     /* invalid address */
1747     GNUNET_break_op(0);
1748     asc (asc_cls, NULL );
1749     return;
1750   }
1751   ppc = GNUNET_new (struct PrettyPrinterContext);
1752   if (addrlen == sizeof(struct IPv6TcpAddress))
1753     ppc->ipv6 = GNUNET_YES;
1754   else
1755     ppc->ipv6 = GNUNET_NO;
1756   ppc->asc = asc;
1757   ppc->asc_cls = asc_cls;
1758   ppc->port = port;
1759   ppc->options = options;
1760   ppc->timeout_task = GNUNET_SCHEDULER_add_delayed (
1761       GNUNET_TIME_relative_multiply (timeout, 2), &ppc_cancel_task, ppc);
1762   ppc->resolver_handle = GNUNET_RESOLVER_hostname_get (sb, sbs, !numeric,
1763       timeout, &append_port, ppc);
1764   if (NULL != ppc->resolver_handle)
1765   {
1766     //GNUNET_log (GNUNET_ERROR_TYPE_ERROR, "Adding request %p\n", ppc);
1767     GNUNET_CONTAINER_DLL_insert(ppc_dll_head, ppc_dll_tail, ppc);
1768   }
1769   else
1770   {
1771     GNUNET_break(0);
1772     GNUNET_free(ppc);
1773   }
1774 }
1775
1776 /**
1777  * Check if the given port is plausible (must be either our listen
1778  * port or our advertised port), or any port if we are behind NAT
1779  * and do not have a port open.  If it is neither, we return
1780  * #GNUNET_SYSERR.
1781  *
1782  * @param plugin global variables
1783  * @param in_port port number to check
1784  * @return #GNUNET_OK if port is either open_port or adv_port
1785  */
1786 static int
1787 check_port (struct Plugin *plugin, uint16_t in_port)
1788 {
1789   if ((in_port == plugin->adv_port) || (in_port == plugin->open_port))
1790     return GNUNET_OK;
1791   return GNUNET_SYSERR;
1792 }
1793
1794 /**
1795  * Function that will be called to check if a binary address for this
1796  * plugin is well-formed and corresponds to an address for THIS peer
1797  * (as per our configuration).  Naturally, if absolutely necessary,
1798  * plugins can be a bit conservative in their answer, but in general
1799  * plugins should make sure that the address does not redirect
1800  * traffic to a 3rd party that might try to man-in-the-middle our
1801  * traffic.
1802  *
1803  * @param cls closure, our `struct Plugin *`
1804  * @param addr pointer to the address
1805  * @param addrlen length of addr
1806  * @return #GNUNET_OK if this is a plausible address for this peer
1807  *         and transport, #GNUNET_SYSERR if not
1808  */
1809 static int
1810 tcp_plugin_check_address (void *cls, const void *addr, size_t addrlen)
1811 {
1812   struct Plugin *plugin = cls;
1813   struct IPv4TcpAddress *v4;
1814   struct IPv6TcpAddress *v6;
1815
1816   if ((addrlen != sizeof(struct IPv4TcpAddress))
1817       && (addrlen != sizeof(struct IPv6TcpAddress)))
1818   {
1819     GNUNET_break_op(0);
1820     return GNUNET_SYSERR;
1821   }
1822
1823   if (addrlen == sizeof(struct IPv4TcpAddress))
1824   {
1825     v4 = (struct IPv4TcpAddress *) addr;
1826     if (0 != memcmp (&v4->options, &myoptions, sizeof(myoptions)))
1827     {
1828       GNUNET_break(0);
1829       return GNUNET_SYSERR;
1830     }
1831     if (GNUNET_OK != check_port (plugin, ntohs (v4->t4_port)))
1832       return GNUNET_SYSERR;
1833     if (GNUNET_OK
1834         != GNUNET_NAT_test_address (plugin->nat, &v4->ipv4_addr,
1835             sizeof(struct in_addr)))
1836       return GNUNET_SYSERR;
1837   }
1838   else
1839   {
1840     v6 = (struct IPv6TcpAddress *) addr;
1841     if (IN6_IS_ADDR_LINKLOCAL (&v6->ipv6_addr))
1842     {
1843       GNUNET_break_op(0);
1844       return GNUNET_SYSERR;
1845     }
1846     if (0 != memcmp (&v6->options, &myoptions, sizeof(myoptions)))
1847     {
1848       GNUNET_break(0);
1849       return GNUNET_SYSERR;
1850     }
1851     if (GNUNET_OK != check_port (plugin, ntohs (v6->t6_port)))
1852       return GNUNET_SYSERR;
1853     if (GNUNET_OK
1854         != GNUNET_NAT_test_address (plugin->nat, &v6->ipv6_addr,
1855             sizeof(struct in6_addr)))
1856       return GNUNET_SYSERR;
1857   }
1858   return GNUNET_OK;
1859 }
1860
1861 /**
1862  * We've received a nat probe from this peer via TCP.  Finish
1863  * creating the client session and resume sending of queued
1864  * messages.
1865  *
1866  * @param cls closure
1867  * @param client identification of the client
1868  * @param message the actual message
1869  */
1870 static void
1871 handle_tcp_nat_probe (void *cls, struct GNUNET_SERVER_Client *client,
1872     const struct GNUNET_MessageHeader *message)
1873 {
1874   struct Plugin *plugin = cls;
1875   struct Session *session;
1876   const struct TCP_NAT_ProbeMessage *tcp_nat_probe;
1877   size_t alen;
1878   void *vaddr;
1879   struct IPv4TcpAddress *t4;
1880   struct IPv6TcpAddress *t6;
1881   const struct sockaddr_in *s4;
1882   const struct sockaddr_in6 *s6;
1883
1884   LOG(GNUNET_ERROR_TYPE_DEBUG, "Received NAT probe\n");
1885   /* We have received a TCP NAT probe, meaning we (hopefully) initiated
1886    * a connection to this peer by running gnunet-nat-client.  This peer
1887    * received the punch message and now wants us to use the new connection
1888    * as the default for that peer.  Do so and then send a WELCOME message
1889    * so we can really be connected!
1890    */
1891   if (ntohs (message->size) != sizeof(struct TCP_NAT_ProbeMessage))
1892   {
1893     GNUNET_break_op(0);
1894     GNUNET_SERVER_receive_done (client, GNUNET_SYSERR);
1895     return;
1896   }
1897
1898   tcp_nat_probe = (const struct TCP_NAT_ProbeMessage *) message;
1899   if (0 == memcmp (&tcp_nat_probe->clientIdentity, plugin->env->my_identity,
1900           sizeof(struct GNUNET_PeerIdentity)))
1901   {
1902     /* refuse connections from ourselves */
1903     GNUNET_SERVER_receive_done (client, GNUNET_SYSERR);
1904     return;
1905   }
1906
1907   session = GNUNET_CONTAINER_multipeermap_get (plugin->nat_wait_conns,
1908       &tcp_nat_probe->clientIdentity);
1909   if (session == NULL )
1910   {
1911     LOG(GNUNET_ERROR_TYPE_DEBUG, "Did NOT find session for NAT probe!\n");
1912     GNUNET_SERVER_receive_done (client, GNUNET_OK);
1913     return;
1914   }
1915   LOG(GNUNET_ERROR_TYPE_DEBUG, "Found session for NAT probe!\n");
1916
1917   if (session->nat_connection_timeout != GNUNET_SCHEDULER_NO_TASK )
1918   {
1919     GNUNET_SCHEDULER_cancel (session->nat_connection_timeout);
1920     session->nat_connection_timeout = GNUNET_SCHEDULER_NO_TASK;
1921   }
1922
1923   if (GNUNET_OK != GNUNET_SERVER_client_get_address (client, &vaddr, &alen))
1924   {
1925     GNUNET_break(0);
1926     GNUNET_SERVER_receive_done (client, GNUNET_SYSERR);
1927     tcp_disconnect_session (plugin, session);
1928     return;
1929   }
1930   GNUNET_assert(
1931       GNUNET_CONTAINER_multipeermap_remove (plugin->nat_wait_conns, &tcp_nat_probe->clientIdentity, session) == GNUNET_YES);
1932   GNUNET_SERVER_client_set_user_context(client, session);
1933   GNUNET_CONTAINER_multipeermap_put (plugin->sessionmap, &session->target,
1934       session, GNUNET_CONTAINER_MULTIHASHMAPOPTION_MULTIPLE);
1935   session->last_activity = GNUNET_TIME_absolute_get ();
1936   LOG(GNUNET_ERROR_TYPE_DEBUG, "Found address `%s' for incoming connection\n",
1937       GNUNET_a2s (vaddr, alen));
1938   switch (((const struct sockaddr *) vaddr)->sa_family)
1939   {
1940   case AF_INET:
1941     s4 = vaddr;
1942     t4 = GNUNET_new (struct IPv4TcpAddress);
1943     t4->options = 0;
1944     t4->t4_port = s4->sin_port;
1945     t4->ipv4_addr = s4->sin_addr.s_addr;
1946     session->address = GNUNET_HELLO_address_allocate (
1947         &tcp_nat_probe->clientIdentity, PLUGIN_NAME, &t4,
1948         sizeof(struct IPv4TcpAddress), GNUNET_HELLO_ADDRESS_INFO_NONE);
1949     break;
1950   case AF_INET6:
1951     s6 = vaddr;
1952     t6 = GNUNET_new (struct IPv6TcpAddress);
1953     t6->options = 0;
1954     t6->t6_port = s6->sin6_port;
1955     memcpy (&t6->ipv6_addr, &s6->sin6_addr, sizeof(struct in6_addr));
1956     session->address = GNUNET_HELLO_address_allocate (
1957         &tcp_nat_probe->clientIdentity, PLUGIN_NAME, &t6,
1958         sizeof(struct IPv6TcpAddress), GNUNET_HELLO_ADDRESS_INFO_NONE);
1959     break;
1960   default:
1961     GNUNET_break_op(0);
1962     LOG(GNUNET_ERROR_TYPE_DEBUG, "Bad address for incoming connection!\n");
1963     GNUNET_free(vaddr);
1964     GNUNET_SERVER_receive_done (client, GNUNET_SYSERR);
1965     tcp_disconnect_session (plugin, session);
1966     return;
1967   }
1968   GNUNET_free(vaddr);
1969   GNUNET_break(NULL == session->client);
1970   GNUNET_SERVER_client_keep (client);
1971   session->client = client;
1972   GNUNET_STATISTICS_update (plugin->env->stats,
1973       gettext_noop ("# TCP sessions active"), 1, GNUNET_NO);
1974   process_pending_messages (session);
1975   GNUNET_SERVER_receive_done (client, GNUNET_OK);
1976 }
1977
1978 /**
1979  * We've received a welcome from this peer via TCP.  Possibly create a
1980  * fresh client record and send back our welcome.
1981  *
1982  * @param cls closure
1983  * @param client identification of the client
1984  * @param message the actual message
1985  */
1986 static void
1987 handle_tcp_welcome (void *cls, struct GNUNET_SERVER_Client *client,
1988     const struct GNUNET_MessageHeader *message)
1989 {
1990   struct Plugin *plugin = cls;
1991   const struct WelcomeMessage *wm = (const struct WelcomeMessage *) message;
1992   struct GNUNET_HELLO_Address *address;
1993   struct Session *session;
1994   size_t alen;
1995   void *vaddr;
1996   struct IPv4TcpAddress t4;
1997   struct IPv6TcpAddress t6;
1998   const struct sockaddr_in *s4;
1999   const struct sockaddr_in6 *s6;
2000   struct GNUNET_ATS_Information ats;
2001
2002   if (0 == memcmp (&wm->clientIdentity, plugin->env->my_identity,
2003           sizeof(struct GNUNET_PeerIdentity)))
2004   {
2005     /* refuse connections from ourselves */
2006     GNUNET_SERVER_receive_done (client, GNUNET_SYSERR);
2007     if (GNUNET_OK == GNUNET_SERVER_client_get_address (client, &vaddr, &alen))
2008     {
2009       LOG(GNUNET_ERROR_TYPE_WARNING,
2010           "Received %s message from my own identity `%4s' on address `%s'\n",
2011           "WELCOME", GNUNET_i2s (&wm->clientIdentity),
2012           GNUNET_a2s (vaddr, alen));
2013       GNUNET_free(vaddr);
2014     }
2015     GNUNET_break_op(0);
2016     return;
2017   }
2018   LOG(GNUNET_ERROR_TYPE_DEBUG, "Received %s message from `%4s' %p\n", "WELCOME",
2019       GNUNET_i2s (&wm->clientIdentity), client);
2020   GNUNET_STATISTICS_update (plugin->env->stats,
2021       gettext_noop ("# TCP WELCOME messages received"), 1, GNUNET_NO);
2022   session = lookup_session_by_client (plugin, client);
2023   if (NULL != session)
2024   {
2025     if (GNUNET_OK == GNUNET_SERVER_client_get_address (client, &vaddr, &alen))
2026     {
2027       LOG(GNUNET_ERROR_TYPE_DEBUG, "Found existing session %p for peer `%s'\n",
2028           session, GNUNET_a2s (vaddr, alen));
2029       GNUNET_free(vaddr);
2030     }
2031   }
2032   else
2033   {
2034     GNUNET_SERVER_client_keep (client);
2035     if (NULL != plugin->service) /* Otherwise value is incremented in tcp_access_check */
2036       plugin->cur_connections++;
2037     if (plugin->cur_connections == plugin->max_connections)
2038       GNUNET_SERVER_suspend (plugin->server); /* Maximum number of connections rechead */
2039
2040     if (GNUNET_OK == GNUNET_SERVER_client_get_address (client, &vaddr, &alen))
2041     {
2042       if (alen == sizeof(struct sockaddr_in))
2043       {
2044         s4 = vaddr;
2045         memset (&t4, '\0', sizeof (t4));
2046         t4.options = htonl (0);
2047         t4.t4_port = s4->sin_port;
2048         t4.ipv4_addr = s4->sin_addr.s_addr;
2049         address = GNUNET_HELLO_address_allocate (&wm->clientIdentity,
2050             PLUGIN_NAME, &t4, sizeof(t4),
2051             GNUNET_HELLO_ADDRESS_INFO_INBOUND);
2052       }
2053       else if (alen == sizeof(struct sockaddr_in6))
2054       {
2055         s6 = vaddr;
2056         memset (&t6, '\0', sizeof (t6));
2057         t6.options = htonl (0);
2058         t6.t6_port = s6->sin6_port;
2059         memcpy (&t6.ipv6_addr, &s6->sin6_addr, sizeof(struct in6_addr));
2060         address = GNUNET_HELLO_address_allocate (&wm->clientIdentity,
2061             PLUGIN_NAME, &t6, sizeof (t6),
2062             GNUNET_HELLO_ADDRESS_INFO_INBOUND);
2063       }
2064       session = create_session (plugin, address, client, GNUNET_NO);
2065       GNUNET_HELLO_address_free (address);
2066       ats = plugin->env->get_address_type (plugin->env->cls, vaddr, alen);
2067       session->ats_address_network_type = (enum GNUNET_ATS_Network_Type) ntohl (
2068           ats.value);
2069       LOG(GNUNET_ERROR_TYPE_DEBUG, "Creating new%s session %p for peer `%s'\n",
2070           GNUNET_HELLO_address_check_option (session->address, GNUNET_HELLO_ADDRESS_INFO_INBOUND) ? " inbound" : "",
2071           session,
2072           tcp_address_to_string(NULL, (void *) session->address->address,session->address->address_length));
2073       GNUNET_free(vaddr);
2074       GNUNET_SERVER_client_set_user_context(session->client, session);
2075       GNUNET_CONTAINER_multipeermap_put (plugin->sessionmap, &session->target,
2076           session, GNUNET_CONTAINER_MULTIHASHMAPOPTION_MULTIPLE);
2077     }
2078     else
2079     {
2080       LOG(GNUNET_ERROR_TYPE_DEBUG,
2081           "Did not obtain TCP socket address for incoming connection\n");
2082       GNUNET_break(0);
2083     }
2084   }
2085
2086   if (session->expecting_welcome != GNUNET_YES)
2087   {
2088     GNUNET_break_op(0);
2089     GNUNET_SERVER_receive_done (client, GNUNET_SYSERR);
2090     GNUNET_break(0);
2091     return;
2092   }
2093   session->last_activity = GNUNET_TIME_absolute_get ();
2094   session->expecting_welcome = GNUNET_NO;
2095
2096   /* Notify transport and ATS about new session */
2097   plugin->env->session_start (NULL, session->address, session, &ats, 1);
2098
2099   process_pending_messages (session);
2100   GNUNET_SERVER_client_set_timeout (client,
2101       GNUNET_CONSTANTS_IDLE_CONNECTION_TIMEOUT);
2102   GNUNET_SERVER_receive_done (client, GNUNET_OK);
2103 }
2104
2105 /**
2106  * Task to signal the server that we can continue
2107  * receiving from the TCP client now.
2108  *
2109  * @param cls the `struct Session*`
2110  * @param tc task context (unused)
2111  */
2112 static void
2113 delayed_done (void *cls, const struct GNUNET_SCHEDULER_TaskContext *tc)
2114 {
2115   struct Session *session = cls;
2116
2117   session->receive_delay_task = GNUNET_SCHEDULER_NO_TASK;
2118   reschedule_session_timeout (session);
2119
2120   GNUNET_SERVER_receive_done (session->client, GNUNET_OK);
2121 }
2122
2123 /**
2124  * We've received data for this peer via TCP.  Unbox,
2125  * compute latency and forward.
2126  *
2127  * @param cls closure
2128  * @param client identification of the client
2129  * @param message the actual message
2130  */
2131 static void
2132 handle_tcp_data (void *cls, struct GNUNET_SERVER_Client *client,
2133     const struct GNUNET_MessageHeader *message)
2134 {
2135   struct Plugin *plugin = cls;
2136   struct Session *session;
2137   struct GNUNET_TIME_Relative delay;
2138   uint16_t type;
2139
2140   type = ntohs (message->type);
2141   if ((GNUNET_MESSAGE_TYPE_TRANSPORT_TCP_WELCOME == type)
2142       || (GNUNET_MESSAGE_TYPE_TRANSPORT_TCP_NAT_PROBE == type))
2143   {
2144     /* We don't want to propagate WELCOME and NAT Probe messages up! */
2145     GNUNET_SERVER_receive_done (client, GNUNET_OK);
2146     return;
2147   }
2148   session = lookup_session_by_client (plugin, client);
2149   if (NULL == session)
2150   {
2151     /* No inbound session found */
2152     void *vaddr;
2153     size_t alen;
2154
2155     GNUNET_SERVER_client_get_address (client, &vaddr, &alen);
2156     LOG(GNUNET_ERROR_TYPE_ERROR,
2157         "Received unexpected %u bytes of type %u from `%s'\n",
2158         (unsigned int ) ntohs (message->size),
2159         (unsigned int ) ntohs (message->type), GNUNET_a2s (vaddr, alen));
2160     GNUNET_break_op(0);
2161     GNUNET_SERVER_receive_done (client, GNUNET_SYSERR);
2162     GNUNET_free_non_null(vaddr);
2163     return;
2164   }
2165   else if (GNUNET_YES == session->expecting_welcome)
2166   {
2167     /* Session is expecting WELCOME message */
2168     void *vaddr;
2169     size_t alen;
2170
2171     GNUNET_SERVER_client_get_address (client, &vaddr, &alen);
2172     LOG(GNUNET_ERROR_TYPE_ERROR,
2173         "Received unexpected %u bytes of type %u from `%s'\n",
2174         (unsigned int ) ntohs (message->size),
2175         (unsigned int ) ntohs (message->type), GNUNET_a2s (vaddr, alen));
2176     GNUNET_break_op(0);
2177     GNUNET_SERVER_receive_done (client, GNUNET_SYSERR);
2178     GNUNET_free_non_null(vaddr);
2179     return;
2180   }
2181
2182   session->last_activity = GNUNET_TIME_absolute_get ();
2183   LOG(GNUNET_ERROR_TYPE_DEBUG,
2184       "Passing %u bytes of type %u from `%4s' to transport service.\n",
2185       (unsigned int ) ntohs (message->size),
2186       (unsigned int ) ntohs (message->type), GNUNET_i2s (&session->target));
2187
2188   GNUNET_STATISTICS_update (plugin->env->stats,
2189       gettext_noop ("# bytes received via TCP"), ntohs (message->size),
2190       GNUNET_NO);
2191   struct GNUNET_ATS_Information distance;
2192
2193   distance.type = htonl (GNUNET_ATS_NETWORK_TYPE);
2194   distance.value = htonl ((uint32_t) session->ats_address_network_type);
2195   GNUNET_break(session->ats_address_network_type != GNUNET_ATS_NET_UNSPECIFIED);
2196
2197   GNUNET_assert(
2198       GNUNET_CONTAINER_multipeermap_contains_value (plugin->sessionmap,
2199           &session->target, session));
2200
2201   delay = plugin->env->receive (plugin->env->cls, session->address, session, message);
2202   plugin->env->update_address_metrics (plugin->env->cls, session->address,
2203       session, &distance, 1);
2204   reschedule_session_timeout (session);
2205   if (0 == delay.rel_value_us)
2206   {
2207     GNUNET_SERVER_receive_done (client, GNUNET_OK);
2208   }
2209   else
2210   {
2211     LOG(GNUNET_ERROR_TYPE_DEBUG, "Throttling receiving from `%s' for %s\n",
2212         GNUNET_i2s (&session->target),
2213         GNUNET_STRINGS_relative_time_to_string (delay, GNUNET_YES));
2214     GNUNET_SERVER_disable_receive_done_warning (client);
2215     session->receive_delay_task = GNUNET_SCHEDULER_add_delayed (delay,
2216         &delayed_done, session);
2217   }
2218 }
2219
2220 /**
2221  * Functions with this signature are called whenever a peer
2222  * is disconnected on the network level.
2223  *
2224  * @param cls closure
2225  * @param client identification of the client
2226  */
2227 static void
2228 disconnect_notify (void *cls, struct GNUNET_SERVER_Client *client)
2229 {
2230   struct Plugin *plugin = cls;
2231   struct Session *session;
2232
2233   if (client == NULL )
2234     return;
2235   session = lookup_session_by_client (plugin, client);
2236   if (session == NULL )
2237     return; /* unknown, nothing to do */
2238   LOG(GNUNET_ERROR_TYPE_DEBUG,
2239       "Destroying session of `%4s' with %s due to network-level disconnect.\n",
2240       GNUNET_i2s (&session->target),
2241       tcp_address_to_string (session->plugin, session->address->address,
2242           session->address->address_length));
2243
2244   if (plugin->cur_connections == plugin->max_connections)
2245     GNUNET_SERVER_resume (plugin->server); /* Resume server  */
2246
2247   if (plugin->cur_connections < 1)
2248     GNUNET_break(0);
2249   else
2250     plugin->cur_connections--;
2251
2252   GNUNET_STATISTICS_update (session->plugin->env->stats, gettext_noop
2253   ("# network-level TCP disconnect events"), 1, GNUNET_NO);
2254   tcp_disconnect_session (plugin, session);
2255 }
2256
2257 /**
2258  * We can now send a probe message, copy into buffer to really send.
2259  *
2260  * @param cls closure, a struct TCPProbeContext
2261  * @param size max size to copy
2262  * @param buf buffer to copy message to
2263  * @return number of bytes copied into buf
2264  */
2265 static size_t
2266 notify_send_probe (void *cls, size_t size, void *buf)
2267 {
2268   struct TCPProbeContext *tcp_probe_ctx = cls;
2269   struct Plugin *plugin = tcp_probe_ctx->plugin;
2270   size_t ret;
2271
2272   tcp_probe_ctx->transmit_handle = NULL;
2273   GNUNET_CONTAINER_DLL_remove(plugin->probe_head, plugin->probe_tail,
2274       tcp_probe_ctx);
2275   if (buf == NULL )
2276   {
2277     GNUNET_CONNECTION_destroy (tcp_probe_ctx->sock);
2278     GNUNET_free(tcp_probe_ctx);
2279     return 0;
2280   }
2281   GNUNET_assert(size >= sizeof(tcp_probe_ctx->message));
2282   memcpy (buf, &tcp_probe_ctx->message, sizeof(tcp_probe_ctx->message));
2283   GNUNET_SERVER_connect_socket (tcp_probe_ctx->plugin->server,
2284       tcp_probe_ctx->sock);
2285   ret = sizeof(tcp_probe_ctx->message);
2286   GNUNET_free(tcp_probe_ctx);
2287   return ret;
2288 }
2289
2290 /**
2291  * Function called by the NAT subsystem suggesting another peer wants
2292  * to connect to us via connection reversal.  Try to connect back to the
2293  * given IP.
2294  *
2295  * @param cls closure
2296  * @param addr address to try
2297  * @param addrlen number of bytes in @a addr
2298  */
2299 static void
2300 try_connection_reversal (void *cls, const struct sockaddr *addr,
2301     socklen_t addrlen)
2302 {
2303   struct Plugin *plugin = cls;
2304   struct GNUNET_CONNECTION_Handle *sock;
2305   struct TCPProbeContext *tcp_probe_ctx;
2306
2307   /**
2308    * We have received an ICMP response, ostensibly from a peer
2309    * that wants to connect to us! Send a message to establish a connection.
2310    */
2311   sock = GNUNET_CONNECTION_create_from_sockaddr (AF_INET, addr, addrlen);
2312   if (sock == NULL )
2313   {
2314     /* failed for some odd reason (out of sockets?); ignore attempt */
2315     return;
2316   }
2317
2318   /* FIXME: do we need to track these probe context objects so that
2319    * we can clean them up on plugin unload? */
2320   tcp_probe_ctx = GNUNET_new (struct TCPProbeContext);
2321   tcp_probe_ctx->message.header.size = htons (
2322       sizeof(struct TCP_NAT_ProbeMessage));
2323   tcp_probe_ctx->message.header.type = htons (
2324       GNUNET_MESSAGE_TYPE_TRANSPORT_TCP_NAT_PROBE);
2325   memcpy (&tcp_probe_ctx->message.clientIdentity, plugin->env->my_identity,
2326       sizeof(struct GNUNET_PeerIdentity));
2327   tcp_probe_ctx->plugin = plugin;
2328   tcp_probe_ctx->sock = sock;
2329   GNUNET_CONTAINER_DLL_insert(plugin->probe_head, plugin->probe_tail,
2330       tcp_probe_ctx);
2331   tcp_probe_ctx->transmit_handle = GNUNET_CONNECTION_notify_transmit_ready (
2332       sock, ntohs (tcp_probe_ctx->message.header.size),
2333       GNUNET_TIME_UNIT_FOREVER_REL, &notify_send_probe, tcp_probe_ctx);
2334
2335 }
2336
2337 /**
2338  * Function obtain the network type for a session
2339  *
2340  * @param cls closure ('struct Plugin*')
2341  * @param session the session
2342  * @return the network type in HBO or #GNUNET_SYSERR
2343  */
2344 static enum GNUNET_ATS_Network_Type
2345 tcp_get_network (void *cls, struct Session *session)
2346 {
2347   GNUNET_assert(NULL != session);
2348   return session->ats_address_network_type;
2349 }
2350
2351 /**
2352  * Entry point for the plugin.
2353  *
2354  * @param cls closure, the 'struct GNUNET_TRANSPORT_PluginEnvironment*'
2355  * @return the 'struct GNUNET_TRANSPORT_PluginFunctions*' or NULL on error
2356  */
2357 void *
2358 libgnunet_plugin_transport_tcp_init (void *cls)
2359 {
2360   static const struct GNUNET_SERVER_MessageHandler my_handlers[] = { {
2361       &handle_tcp_welcome, NULL, GNUNET_MESSAGE_TYPE_TRANSPORT_TCP_WELCOME,
2362       sizeof(struct WelcomeMessage) }, { &handle_tcp_nat_probe, NULL,
2363       GNUNET_MESSAGE_TYPE_TRANSPORT_TCP_NAT_PROBE,
2364       sizeof(struct TCP_NAT_ProbeMessage) }, { &handle_tcp_data, NULL,
2365       GNUNET_MESSAGE_TYPE_ALL, 0 }, { NULL, NULL, 0, 0 } };
2366   struct GNUNET_TRANSPORT_PluginEnvironment *env = cls;
2367   struct GNUNET_TRANSPORT_PluginFunctions *api;
2368   struct Plugin *plugin;
2369   struct GNUNET_SERVICE_Context *service;
2370   unsigned long long aport;
2371   unsigned long long bport;
2372   unsigned long long max_connections;
2373   unsigned int i;
2374   struct GNUNET_TIME_Relative idle_timeout;
2375   int ret;
2376   int ret_s;
2377   struct sockaddr **addrs;
2378   socklen_t *addrlens;
2379
2380   if (NULL == env->receive)
2381   {
2382     /* run in 'stub' mode (i.e. as part of gnunet-peerinfo), don't fully
2383      initialze the plugin or the API */
2384     api = GNUNET_new (struct GNUNET_TRANSPORT_PluginFunctions);
2385     api->cls = NULL;
2386     api->address_pretty_printer = &tcp_plugin_address_pretty_printer;
2387     api->address_to_string = &tcp_address_to_string;
2388     api->string_to_address = &tcp_string_to_address;
2389     return api;
2390   }
2391
2392   GNUNET_assert(NULL != env->cfg);
2393   if (GNUNET_OK
2394       != GNUNET_CONFIGURATION_get_value_number (env->cfg, "transport-tcp",
2395           "MAX_CONNECTIONS", &max_connections))
2396     max_connections = 128;
2397
2398   aport = 0;
2399   if ((GNUNET_OK
2400       != GNUNET_CONFIGURATION_get_value_number (env->cfg, "transport-tcp",
2401           "PORT", &bport)) || (bport > 65535)
2402       || ((GNUNET_OK
2403           == GNUNET_CONFIGURATION_get_value_number (env->cfg, "transport-tcp",
2404               "ADVERTISED-PORT", &aport)) && (aport > 65535)))
2405   {
2406     LOG(GNUNET_ERROR_TYPE_ERROR,
2407         _("Require valid port number for service `%s' in configuration!\n"),
2408         "transport-tcp");
2409     return NULL ;
2410   }
2411   if (aport == 0)
2412     aport = bport;
2413   if (bport == 0)
2414     aport = 0;
2415   if (bport != 0)
2416   {
2417     service = GNUNET_SERVICE_start ("transport-tcp", env->cfg,
2418         GNUNET_SERVICE_OPTION_NONE);
2419     if (service == NULL )
2420     {
2421       LOG(GNUNET_ERROR_TYPE_WARNING, _("Failed to start service.\n"));
2422       return NULL ;
2423     }
2424   }
2425   else
2426     service = NULL;
2427
2428   /* Initialize my flags */
2429   myoptions = 0;
2430
2431   plugin = GNUNET_new (struct Plugin);
2432   plugin->sessionmap = GNUNET_CONTAINER_multipeermap_create (max_connections,
2433       GNUNET_YES);
2434   plugin->max_connections = max_connections;
2435   plugin->cur_connections = 0;
2436   plugin->open_port = bport;
2437   plugin->adv_port = aport;
2438   plugin->env = env;
2439   plugin->lsock = NULL;
2440   if ((service != NULL )&&
2441   (GNUNET_SYSERR !=
2442       (ret_s =
2443           GNUNET_SERVICE_get_server_addresses ("transport-tcp", env->cfg, &addrs,
2444               &addrlens)))){
2445   for (ret = ret_s-1; ret >= 0; ret--)
2446   LOG (GNUNET_ERROR_TYPE_INFO,
2447       "Binding to address `%s'\n",
2448       GNUNET_a2s (addrs[ret], addrlens[ret]));
2449   plugin->nat =
2450   GNUNET_NAT_register (env->cfg, GNUNET_YES, aport, (unsigned int) ret_s,
2451       (const struct sockaddr **) addrs, addrlens,
2452       &tcp_nat_port_map_callback,
2453       &try_connection_reversal, plugin);
2454   for (ret = ret_s -1; ret >= 0; ret--)
2455   {
2456     GNUNET_assert (addrs[ret] != NULL);
2457     GNUNET_free (addrs[ret]);
2458   }
2459   GNUNET_free_non_null (addrs);
2460   GNUNET_free_non_null (addrlens);
2461 }
2462 else
2463 {
2464   plugin->nat = GNUNET_NAT_register (plugin->env->cfg,
2465       GNUNET_YES, 0, 0, NULL, NULL, NULL,
2466       &try_connection_reversal, plugin);
2467 }
2468   api = GNUNET_new (struct GNUNET_TRANSPORT_PluginFunctions);
2469   api->cls = plugin;
2470   api->send = &tcp_plugin_send;
2471   api->get_session = &tcp_plugin_get_session;
2472
2473   api->disconnect_session = &tcp_disconnect_session;
2474   api->query_keepalive_factor = &tcp_query_keepalive_factor;
2475   api->disconnect_peer = &tcp_plugin_disconnect;
2476   api->address_pretty_printer = &tcp_plugin_address_pretty_printer;
2477   api->check_address = &tcp_plugin_check_address;
2478   api->address_to_string = &tcp_address_to_string;
2479   api->string_to_address = &tcp_string_to_address;
2480   api->get_network = &tcp_get_network;
2481   api->update_session_timeout = &tcp_plugin_update_session_timeout;
2482   plugin->service = service;
2483   if (NULL != service)
2484   {
2485     plugin->server = GNUNET_SERVICE_get_server (service);
2486   }
2487   else
2488   {
2489     if (GNUNET_OK
2490         != GNUNET_CONFIGURATION_get_value_time (env->cfg, "transport-tcp",
2491             "TIMEOUT", &idle_timeout))
2492     {
2493       GNUNET_log_config_missing (GNUNET_ERROR_TYPE_ERROR, "transport-tcp",
2494           "TIMEOUT");
2495       if (plugin->nat != NULL )
2496         GNUNET_NAT_unregister (plugin->nat);
2497       GNUNET_free(plugin);
2498       GNUNET_free(api);
2499       return NULL ;
2500     }
2501     plugin->server = GNUNET_SERVER_create_with_sockets (
2502         &plugin_tcp_access_check, plugin, NULL, idle_timeout, GNUNET_YES);
2503   }
2504   plugin->handlers = GNUNET_malloc (sizeof (my_handlers));
2505   memcpy (plugin->handlers, my_handlers, sizeof(my_handlers));
2506   for (i = 0;
2507       i < sizeof(my_handlers) / sizeof(struct GNUNET_SERVER_MessageHandler);
2508       i++)
2509     plugin->handlers[i].callback_cls = plugin;
2510
2511   GNUNET_SERVER_add_handlers (plugin->server, plugin->handlers);
2512   GNUNET_SERVER_disconnect_notify (plugin->server, &disconnect_notify, plugin);
2513   plugin->nat_wait_conns = GNUNET_CONTAINER_multipeermap_create (16,
2514       GNUNET_YES);
2515   if (bport != 0)
2516     LOG(GNUNET_ERROR_TYPE_INFO, _("TCP transport listening on port %llu\n"),
2517         bport);
2518   else
2519     LOG(GNUNET_ERROR_TYPE_INFO,
2520         _("TCP transport not listening on any port (client only)\n"));
2521   if (aport != bport)
2522     LOG(GNUNET_ERROR_TYPE_INFO,
2523         _("TCP transport advertises itself as being on port %llu\n"), aport);
2524   /* Initially set connections to 0 */
2525   GNUNET_assert(NULL != plugin->env->stats);
2526   GNUNET_STATISTICS_set (plugin->env->stats,
2527       gettext_noop ("# TCP sessions active"), 0, GNUNET_NO);
2528   return api;
2529 }
2530
2531 /**
2532  * Exit point from the plugin.
2533  *
2534  * @param cls the `struct GNUNET_TRANSPORT_PluginFunctions`
2535  * @return NULL
2536  */
2537 void *
2538 libgnunet_plugin_transport_tcp_done (void *cls)
2539 {
2540   struct GNUNET_TRANSPORT_PluginFunctions *api = cls;
2541   struct Plugin *plugin = api->cls;
2542   struct TCPProbeContext *tcp_probe;
2543   struct PrettyPrinterContext *cur;
2544   struct PrettyPrinterContext *next;
2545
2546   if (NULL == plugin)
2547   {
2548     GNUNET_free(api);
2549     return NULL ;
2550   }
2551   LOG(GNUNET_ERROR_TYPE_DEBUG, "Shutting down TCP plugin\n");
2552
2553   /* Removing leftover sessions */
2554   GNUNET_CONTAINER_multipeermap_iterate (plugin->sessionmap,
2555       &session_disconnect_it, plugin);
2556   /* Removing leftover NAT sessions */
2557   GNUNET_CONTAINER_multipeermap_iterate (plugin->nat_wait_conns,
2558       &session_disconnect_it, plugin);
2559
2560   next = ppc_dll_head;
2561   for (cur = next; NULL != cur; cur = next)
2562   {
2563     next = cur->next;
2564     GNUNET_CONTAINER_DLL_remove(ppc_dll_head, ppc_dll_tail, cur);
2565     if (NULL != cur->resolver_handle)
2566       GNUNET_RESOLVER_request_cancel (cur->resolver_handle);
2567     GNUNET_SCHEDULER_cancel (cur->timeout_task);
2568     GNUNET_free(cur);
2569     GNUNET_break(0);
2570   }
2571
2572   if (plugin->service != NULL )
2573     GNUNET_SERVICE_stop (plugin->service);
2574   else
2575     GNUNET_SERVER_destroy (plugin->server);
2576   GNUNET_free(plugin->handlers);
2577   if (plugin->nat != NULL )
2578     GNUNET_NAT_unregister (plugin->nat);
2579   while (NULL != (tcp_probe = plugin->probe_head))
2580   {
2581     GNUNET_CONTAINER_DLL_remove(plugin->probe_head, plugin->probe_tail,
2582         tcp_probe);
2583     GNUNET_CONNECTION_destroy (tcp_probe->sock);
2584     GNUNET_free(tcp_probe);
2585   }
2586   GNUNET_CONTAINER_multipeermap_destroy (plugin->nat_wait_conns);
2587   GNUNET_CONTAINER_multipeermap_destroy (plugin->sessionmap);
2588   GNUNET_free(plugin);
2589   GNUNET_free(api);
2590   return NULL ;
2591 }
2592
2593 /* end of plugin_transport_tcp.c */