src/transport/plugin_transport_tcp.c

   1 /*
   2      This file is part of GNUnet
   3      (C) 2002--2013 Christian Grothoff (and other contributing authors)
   4
   5      GNUnet is free software; you can redistribute it and/or modify
   6      it under the terms of the GNU General Public License as published
   7      by the Free Software Foundation; either version 3, or (at your
   8      option) any later version.
   9
  10      GNUnet is distributed in the hope that it will be useful, but
  11      WITHOUT ANY WARRANTY; without even the implied warranty of
  12      MERCHANTABILITY or FITNESS FOR A PARTICULAR PURPOSE.  See the GNU
  13      General Public License for more details.
  14
  15      You should have received a copy of the GNU General Public License
  16      along with GNUnet; see the file COPYING.  If not, write to the
  17      Free Software Foundation, Inc., 59 Temple Place - Suite 330,
  18      Boston, MA 02111-1307, USA.
  19 */
  20 /**
  21  * @file transport/plugin_transport_tcp.c
  22  * @brief Implementation of the TCP transport service
  23  * @author Christian Grothoff
  24  */
  25 #include "platform.h"
  26 #include "gnunet_hello_lib.h"
  27 #include "gnunet_constants.h"
  28 #include "gnunet_util_lib.h"
  29 #include "gnunet_nat_lib.h"
  30 #include "gnunet_protocols.h"
  31 #include "gnunet_resolver_service.h"
  32 #include "gnunet_signatures.h"
  33 #include "gnunet_statistics_service.h"
  34 #include "gnunet_transport_service.h"
  35 #include "gnunet_transport_plugin.h"
  36 #include "transport.h"
  37
  38 #define LOG(kind,...) GNUNET_log_from (kind, "transport-tcp",__VA_ARGS__)
  39
  40 #define PLUGIN_NAME "tcp"
  41
  42 #define EXTRA_CHECKS ALLOW_EXTRA_CHECKS
  43
  44 /**
  45  * How long until we give up on establishing an NAT connection?
  46  * Must be > 4 RTT
  47  */
  48 #define NAT_TIMEOUT GNUNET_TIME_relative_multiply (GNUNET_TIME_UNIT_SECONDS, 10)
  49
  50
  51 GNUNET_NETWORK_STRUCT_BEGIN
  52
  53 /**
  54  * Address options
  55  */
  56 static uint32_t myoptions;
  57
  58 /**
  59  * Initial handshake message for a session.
  60  */
  61 struct WelcomeMessage
  62 {
  63   /**
  64    * Type is GNUNET_MESSAGE_TYPE_TRANSPORT_TCP_WELCOME.
  65    */
  66   struct GNUNET_MessageHeader header;
  67
  68   /**
  69    * Identity of the node connecting (TCP client)
  70    */
  71   struct GNUNET_PeerIdentity clientIdentity;
  72
  73 };
  74
  75
  76 /**
  77  * Basically a WELCOME message, but with the purpose
  78  * of giving the waiting peer a client handle to use
  79  */
  80 struct TCP_NAT_ProbeMessage
  81 {
  82   /**
  83    * Type is GNUNET_MESSAGE_TYPE_TRANSPORT_TCP_NAT_PROBE.
  84    */
  85   struct GNUNET_MessageHeader header;
  86
  87   /**
  88    * Identity of the sender of the message.
  89    */
  90   struct GNUNET_PeerIdentity clientIdentity;
  91
  92 };
  93 GNUNET_NETWORK_STRUCT_END
  94
  95 /**
  96  * Context for sending a NAT probe via TCP.
  97  */
  98 struct TCPProbeContext
  99 {
 100
 101   /**
 102    * Active probes are kept in a DLL.
 103    */
 104   struct TCPProbeContext *next;
 105
 106   /**
 107    * Active probes are kept in a DLL.
 108    */
 109   struct TCPProbeContext *prev;
 110
 111   /**
 112    * Probe connection.
 113    */
 114   struct GNUNET_CONNECTION_Handle *sock;
 115
 116   /**
 117    * Message to be sent.
 118    */
 119   struct TCP_NAT_ProbeMessage message;
 120
 121   /**
 122    * Handle to the transmission.
 123    */
 124   struct GNUNET_CONNECTION_TransmitHandle *transmit_handle;
 125
 126   /**
 127    * Transport plugin handle.
 128    */
 129   struct Plugin *plugin;
 130 };
 131
 132
 133 GNUNET_NETWORK_STRUCT_BEGIN
 134
 135 /**
 136  * Network format for IPv4 addresses.
 137  */
 138 struct IPv4TcpAddress
 139 {
 140   /**
 141    * Optional options and flags for this address
 142    */
 143   uint32_t options;
 144
 145   /**
 146    * IPv4 address, in network byte order.
 147    */
 148   uint32_t ipv4_addr GNUNET_PACKED;
 149
 150   /**
 151    * Port number, in network byte order.
 152    */
 153   uint16_t t4_port GNUNET_PACKED;
 154
 155 };
 156
 157
 158 /**
 159  * Network format for IPv6 addresses.
 160  */
 161 struct IPv6TcpAddress
 162 {
 163   /**
 164    * Optional flags for this address
 165    */
 166   uint32_t options;
 167
 168   /**
 169    * IPv6 address.
 170    */
 171   struct in6_addr ipv6_addr GNUNET_PACKED;
 172
 173   /**
 174    * Port number, in network byte order.
 175    */
 176   uint16_t t6_port GNUNET_PACKED;
 177
 178 };
 179 GNUNET_NETWORK_STRUCT_END
 180
 181 /**
 182  * Encapsulation of all of the state of the plugin.
 183  */
 184 struct Plugin;
 185
 186
 187 /**
 188  * Information kept for each message that is yet to
 189  * be transmitted.
 190  */
 191 struct PendingMessage
 192 {
 193
 194   /**
 195    * This is a doubly-linked list.
 196    */
 197   struct PendingMessage *next;
 198
 199   /**
 200    * This is a doubly-linked list.
 201    */
 202   struct PendingMessage *prev;
 203
 204   /**
 205    * The pending message
 206    */
 207   const char *msg;
 208
 209   /**
 210    * Continuation function to call once the message
 211    * has been sent.  Can be NULL if there is no
 212    * continuation to call.
 213    */
 214   GNUNET_TRANSPORT_TransmitContinuation transmit_cont;
 215
 216   /**
 217    * Closure for transmit_cont.
 218    */
 219   void *transmit_cont_cls;
 220
 221   /**
 222    * Timeout value for the pending message.
 223    */
 224   struct GNUNET_TIME_Absolute timeout;
 225
 226   /**
 227    * So that the gnunet-service-transport can group messages together,
 228    * these pending messages need to accept a message buffer and size
 229    * instead of just a GNUNET_MessageHeader.
 230    */
 231   size_t message_size;
 232
 233 };
 234
 235
 236 /**
 237  * Session handle for TCP connections.
 238  */
 239 struct Session
 240 {
 241   /**
 242    * To whom are we talking to (set to our identity
 243    * if we are still waiting for the welcome message)
 244    */
 245   struct GNUNET_PeerIdentity target;
 246
 247   /**
 248    * API requirement.
 249    */
 250   struct SessionHeader header;
 251
 252   /**
 253    * Pointer to the global plugin struct.
 254    */
 255   struct Plugin *plugin;
 256
 257   /**
 258    * The client (used to identify this connection)
 259    */
 260   struct GNUNET_SERVER_Client *client;
 261
 262   /**
 263    * Task cleaning up a NAT client connection establishment attempt;
 264    */
 265   GNUNET_SCHEDULER_TaskIdentifier nat_connection_timeout;
 266
 267   /**
 268    * Messages currently pending for transmission
 269    * to this peer, if any.
 270    */
 271   struct PendingMessage *pending_messages_head;
 272
 273   /**
 274    * Messages currently pending for transmission
 275    * to this peer, if any.
 276    */
 277   struct PendingMessage *pending_messages_tail;
 278
 279   /**
 280    * Handle for pending transmission request.
 281    */
 282   struct GNUNET_SERVER_TransmitHandle *transmit_handle;
 283
 284   /**
 285    * ID of task used to delay receiving more to throttle sender.
 286    */
 287   GNUNET_SCHEDULER_TaskIdentifier receive_delay_task;
 288
 289   /**
 290    * Session timeout task
 291    */
 292   GNUNET_SCHEDULER_TaskIdentifier timeout_task;
 293
 294   /**
 295    * Address of the other peer (either based on our 'connect'
 296    * call or on our 'accept' call).
 297    *
 298    * struct IPv4TcpAddress or struct IPv6TcpAddress
 299    */
 300   void *addr;
 301
 302   /**
 303    * Length of @e addr.
 304    */
 305   size_t addrlen;
 306
 307   /**
 308    * Last activity on this connection.  Used to select preferred
 309    * connection.
 310    */
 311   struct GNUNET_TIME_Absolute last_activity;
 312
 313   /**
 314    * Are we still expecting the welcome message? (#GNUNET_YES/#GNUNET_NO)
 315    */
 316   int expecting_welcome;
 317
 318   /**
 319    * Was this a connection that was inbound (we accepted)? (#GNUNET_YES/#GNUNET_NO)
 320    */
 321   int inbound;
 322
 323   /**
 324    * Was this session created using NAT traversal?
 325    */
 326   int is_nat;
 327
 328   /**
 329    * ATS network type in NBO
 330    */
 331   enum GNUNET_ATS_Network_Type ats_address_network_type;
 332 };
 333
 334
 335 /**
 336  * Encapsulation of all of the state of the plugin.
 337  */
 338 struct Plugin
 339 {
 340   /**
 341    * Our environment.
 342    */
 343   struct GNUNET_TRANSPORT_PluginEnvironment *env;
 344
 345   /**
 346    * The listen socket.
 347    */
 348   struct GNUNET_CONNECTION_Handle *lsock;
 349
 350   /**
 351    * Our handle to the NAT module.
 352    */
 353   struct GNUNET_NAT_Handle *nat;
 354
 355   /**
 356    * Map from peer identities to sessions for the given peer.
 357    */
 358   struct GNUNET_CONTAINER_MultiPeerMap *sessionmap;
 359
 360   /**
 361    * Handle to the network service.
 362    */
 363   struct GNUNET_SERVICE_Context *service;
 364
 365   /**
 366    * Handle to the server for this service.
 367    */
 368   struct GNUNET_SERVER_Handle *server;
 369
 370   /**
 371    * Copy of the handler array where the closures are
 372    * set to this struct's instance.
 373    */
 374   struct GNUNET_SERVER_MessageHandler *handlers;
 375
 376   /**
 377    * Map of peers we have tried to contact behind a NAT
 378    */
 379   struct GNUNET_CONTAINER_MultiPeerMap *nat_wait_conns;
 380
 381   /**
 382    * List of active TCP probes.
 383    */
 384   struct TCPProbeContext *probe_head;
 385
 386   /**
 387    * List of active TCP probes.
 388    */
 389   struct TCPProbeContext *probe_tail;
 390
 391   /**
 392    * Handle for (DYN)DNS lookup of our external IP.
 393    */
 394   struct GNUNET_RESOLVER_RequestHandle *ext_dns;
 395
 396   /**
 397    * How many more TCP sessions are we allowed to open right now?
 398    */
 399   unsigned long long max_connections;
 400
 401   /**
 402    * How many more TCP sessions do we have right now?
 403    */
 404   unsigned long long cur_connections;
 405
 406   /**
 407    * ID of task used to update our addresses when one expires.
 408    */
 409   GNUNET_SCHEDULER_TaskIdentifier address_update_task;
 410
 411   /**
 412    * Port that we are actually listening on.
 413    */
 414   uint16_t open_port;
 415
 416   /**
 417    * Port that the user said we would have visible to the
 418    * rest of the world.
 419    */
 420   uint16_t adv_port;
 421
 422 };
 423
 424
 425 /**
 426  * Function called for a quick conversion of the binary address to
 427  * a numeric address.  Note that the caller must not free the
 428  * address and that the next call to this function is allowed
 429  * to override the address again.
 430  *
 431  * @param cls closure ('struct Plugin*')
 432  * @param addr binary address
 433  * @param addrlen length of the address
 434  * @return string representing the same address
 435  */
 436 static const char *
 437 tcp_address_to_string (void *cls,
 438                        const void *addr,
 439                        size_t addrlen);
 440
 441
 442 /**
 443  * Function to check if an inbound connection is acceptable.
 444  * Mostly used to limit the total number of open connections
 445  * we can have.
 446  *
 447  * @param cls the `struct Plugin`
 448  * @param ucred credentials, if available, otherwise NULL
 449  * @param addr address
 450  * @param addrlen length of address
 451  * @return #GNUNET_YES to allow, #GNUNET_NO to deny, #GNUNET_SYSERR
 452  *   for unknown address family (will be denied).
 453  */
 454 static int
 455 plugin_tcp_access_check (void *cls,
 456                          const struct GNUNET_CONNECTION_Credentials *ucred,
 457                          const struct sockaddr *addr, socklen_t addrlen)
 458 {
 459   struct Plugin *plugin = cls;
 460   LOG (GNUNET_ERROR_TYPE_DEBUG,
 461        "Accepting new incoming TCP connection from `%s'\n",
 462        GNUNET_a2s (addr, addrlen));
 463   if (plugin->cur_connections >= plugin->max_connections)
 464     return GNUNET_NO;
 465   plugin->cur_connections ++;
 466   return GNUNET_YES;
 467 }
 468
 469
 470 /**
 471  * Our external IP address/port mapping has changed.
 472  *
 473  * @param cls closure, the 'struct Plugin'
 474  * @param add_remove #GNUNET_YES to mean the new public IP address, #GNUNET_NO to mean
 475  *     the previous (now invalid) one
 476  * @param addr either the previous or the new public IP address
 477  * @param addrlen actual lenght of the address
 478  */
 479 static void
 480 tcp_nat_port_map_callback (void *cls, int add_remove,
 481                            const struct sockaddr *addr,
 482                            socklen_t addrlen)
 483 {
 484   struct Plugin *plugin = cls;
 485   struct IPv4TcpAddress t4;
 486   struct IPv6TcpAddress t6;
 487   void *arg;
 488   size_t args;
 489
 490   LOG (GNUNET_ERROR_TYPE_INFO,
 491        "NAT notification to %s address `%s'\n",
 492        (GNUNET_YES == add_remove) ? "add" : "remove",
 493        GNUNET_a2s (addr, addrlen));
 494   /* convert 'addr' to our internal format */
 495   switch (addr->sa_family)
 496   {
 497   case AF_INET:
 498     GNUNET_assert (addrlen == sizeof (struct sockaddr_in));
 499     memset (&t4,0, sizeof (t4));
 500     t4.options = htonl (myoptions);
 501     t4.ipv4_addr = ((struct sockaddr_in *) addr)->sin_addr.s_addr;
 502     t4.t4_port = ((struct sockaddr_in *) addr)->sin_port;
 503     arg = &t4;
 504     args = sizeof (t4);
 505     break;
 506   case AF_INET6:
 507     GNUNET_assert (addrlen == sizeof (struct sockaddr_in6));
 508     memset (&t6, 0, sizeof (t6));
 509     memcpy (&t6.ipv6_addr, &((struct sockaddr_in6 *) addr)->sin6_addr,
 510             sizeof (struct in6_addr));
 511     t6.options = htonl (myoptions);
 512     t6.t6_port = ((struct sockaddr_in6 *) addr)->sin6_port;
 513     arg = &t6;
 514     args = sizeof (t6);
 515     break;
 516   default:
 517     GNUNET_break (0);
 518     return;
 519   }
 520   /* modify our published address list */
 521   plugin->env->notify_address (plugin->env->cls, add_remove, arg, args, "tcp");
 522 }
 523
 524
 525 /**
 526  * Function called for a quick conversion of the binary address to
 527  * a numeric address.  Note that the caller must not free the
 528  * address and that the next call to this function is allowed
 529  * to override the address again.
 530  *
 531  * @param cls closure (`struct Plugin*`)
 532  * @param addr binary address
 533  * @param addrlen length of the address
 534  * @return string representing the same address
 535  */
 536 static const char *
 537 tcp_address_to_string (void *cls, const void *addr, size_t addrlen)
 538 {
 539   static char rbuf[INET6_ADDRSTRLEN + 12];
 540   char buf[INET6_ADDRSTRLEN];
 541   const void *sb;
 542   struct in_addr a4;
 543   struct in6_addr a6;
 544   const struct IPv4TcpAddress *t4;
 545   const struct IPv6TcpAddress *t6;
 546   int af;
 547   uint16_t port;
 548   uint32_t options;
 549
 550   switch (addrlen)
 551   {
 552   case sizeof (struct IPv6TcpAddress):
 553     t6 = addr;
 554     af = AF_INET6;
 555     port = ntohs (t6->t6_port);
 556     options = ntohl (t6->options);
 557     memcpy (&a6, &t6->ipv6_addr, sizeof (a6));
 558     sb = &a6;
 559     break;
 560   case sizeof (struct IPv4TcpAddress):
 561     t4 = addr;
 562     af = AF_INET;
 563     port = ntohs (t4->t4_port);
 564     options = ntohl (t4->options);
 565     memcpy (&a4, &t4->ipv4_addr, sizeof (a4));
 566     sb = &a4;
 567     break;
 568   case 0:
 569     {
 570       GNUNET_snprintf (rbuf, sizeof (rbuf), "%s",
 571                 TRANSPORT_SESSION_INBOUND_STRING);
 572       return rbuf;
 573     }
 574   default:
 575     LOG (GNUNET_ERROR_TYPE_WARNING,
 576                 _("Unexpected address length: %u bytes\n"),
 577                 (unsigned int) addrlen);
 578     return NULL;
 579   }
 580   if (NULL == inet_ntop (af, sb, buf, INET6_ADDRSTRLEN))
 581   {
 582     GNUNET_log_strerror (GNUNET_ERROR_TYPE_WARNING, "inet_ntop");
 583     return NULL;
 584   }
 585   GNUNET_snprintf (rbuf,
 586                    sizeof (rbuf),
 587                    (af == AF_INET6)
 588                    ? "%s.%u.[%s]:%u"
 589                    : "%s.%u.%s:%u",
 590                    PLUGIN_NAME,
 591                    options,
 592                    buf,
 593                    port);
 594   return rbuf;
 595 }
 596
 597
 598 /**
 599  * Function called to convert a string address to
 600  * a binary address.
 601  *
 602  * @param cls closure (`struct Plugin*`)
 603  * @param addr string address
 604  * @param addrlen length of the address
 605  * @param buf location to store the buffer
 606  * @param added location to store the number of bytes in the buffer.
 607  *        If the function returns #GNUNET_SYSERR, its contents are undefined.
 608  * @return #GNUNET_OK on success, #GNUNET_SYSERR on failure
 609  */
 610 static int
 611 tcp_string_to_address (void *cls,
 612                        const char *addr,
 613                        uint16_t addrlen,
 614                        void **buf, size_t *added)
 615 {
 616   struct sockaddr_storage socket_address;
 617   char *address;
 618   char *plugin;
 619   char *optionstr;
 620   uint32_t options;
 621
 622   /* Format tcp.options.address:port */
 623   address = NULL;
 624   plugin = NULL;
 625   optionstr = NULL;
 626   if ((NULL == addr) || (addrlen == 0))
 627   {
 628     GNUNET_break (0);
 629     return GNUNET_SYSERR;
 630   }
 631   if ('\0' != addr[addrlen - 1])
 632   {
 633     GNUNET_break (0);
 634     return GNUNET_SYSERR;
 635   }
 636   if (strlen (addr) != addrlen - 1)
 637   {
 638     GNUNET_break (0);
 639     return GNUNET_SYSERR;
 640   }
 641   plugin = GNUNET_strdup (addr);
 642   optionstr = strchr (plugin, '.');
 643   if (NULL == optionstr)
 644   {
 645     GNUNET_break (0);
 646     GNUNET_free (plugin);
 647     return GNUNET_SYSERR;
 648   }
 649   optionstr[0] = '\0';
 650   optionstr ++;
 651   options = atol (optionstr);
 652   address = strchr (optionstr, '.');
 653   if (NULL == address)
 654   {
 655     GNUNET_break (0);
 656     GNUNET_free (plugin);
 657     return GNUNET_SYSERR;
 658   }
 659   address[0] = '\0';
 660   address ++;
 661
 662   if (GNUNET_OK !=
 663       GNUNET_STRINGS_to_address_ip (address, strlen (address),
 664                                     &socket_address))
 665   {
 666     GNUNET_break (0);
 667     GNUNET_free (plugin);
 668     return GNUNET_SYSERR;
 669   }
 670
 671   GNUNET_free (plugin);
 672   switch (socket_address.ss_family)
 673   {
 674   case AF_INET:
 675     {
 676       struct IPv4TcpAddress *t4;
 677       struct sockaddr_in *in4 = (struct sockaddr_in *) &socket_address;
 678       t4 = GNUNET_new (struct IPv4TcpAddress);
 679       t4->options =  htonl (options);
 680       t4->ipv4_addr = in4->sin_addr.s_addr;
 681       t4->t4_port = in4->sin_port;
 682       *buf = t4;
 683       *added = sizeof (struct IPv4TcpAddress);
 684       return GNUNET_OK;
 685     }
 686   case AF_INET6:
 687     {
 688       struct IPv6TcpAddress *t6;
 689       struct sockaddr_in6 *in6 = (struct sockaddr_in6 *) &socket_address;
 690       t6 = GNUNET_new (struct IPv6TcpAddress);
 691       t6->options = htonl (options);
 692       t6->ipv6_addr = in6->sin6_addr;
 693       t6->t6_port = in6->sin6_port;
 694       *buf = t6;
 695       *added = sizeof (struct IPv6TcpAddress);
 696       return GNUNET_OK;
 697     }
 698   default:
 699     return GNUNET_SYSERR;
 700   }
 701 }
 702
 703
 704 /**
 705  * Closure for #session_lookup_by_client_it().
 706  */
 707 struct SessionClientCtx
 708 {
 709   /**
 710    * Client we are looking for.
 711    */
 712   const struct GNUNET_SERVER_Client *client;
 713
 714   /**
 715    * Session that was found.
 716    */
 717   struct Session *ret;
 718 };
 719
 720
 721 static int
 722 session_lookup_by_client_it (void *cls,
 723                              const struct GNUNET_PeerIdentity *key,
 724                              void *value)
 725 {
 726   struct SessionClientCtx *sc_ctx = cls;
 727   struct Session *s = value;
 728
 729   if (s->client == sc_ctx->client)
 730   {
 731     sc_ctx->ret = s;
 732     return GNUNET_NO;
 733   }
 734   return GNUNET_YES;
 735 }
 736
 737
 738 /**
 739  * Find the session handle for the given client.
 740  * Currently uses both the hashmap and the client
 741  * context, as the client context is new and the
 742  * logic still needs to be tested.
 743  *
 744  * @param plugin the plugin
 745  * @param client which client to find the session handle for
 746  * @return NULL if no matching session exists
 747  */
 748 static struct Session *
 749 lookup_session_by_client (struct Plugin *plugin,
 750                           struct GNUNET_SERVER_Client *client)
 751 {
 752   struct Session *ret;
 753   struct SessionClientCtx sc_ctx;
 754
 755   ret = GNUNET_SERVER_client_get_user_context (client, struct Session);
 756   sc_ctx.client = client;
 757   sc_ctx.ret = NULL;
 758   GNUNET_CONTAINER_multipeermap_iterate (plugin->sessionmap,
 759                                          &session_lookup_by_client_it, &sc_ctx);
 760   /* check both methods yield the same result */
 761   GNUNET_break (ret == sc_ctx.ret);
 762   return sc_ctx.ret;
 763 }
 764
 765
 766 /**
 767  * Functions with this signature are called whenever we need
 768  * to close a session due to a disconnect or failure to
 769  * establish a connection.
 770  *
 771  * @param cls the `struct Plugin`
 772  * @param session session to close down
 773  * @return #GNUNET_OK on success
 774  */
 775 static int
 776 tcp_disconnect_session (void *cls,
 777                         struct Session *session)
 778 {
 779   struct Plugin *plugin = cls;
 780   struct PendingMessage *pm;
 781
 782   LOG (GNUNET_ERROR_TYPE_DEBUG,
 783        "Disconnecting session of peer `%s' address `%s'\n",
 784        GNUNET_i2s (&session->target),
 785        tcp_address_to_string (NULL, session->addr, session->addrlen));
 786
 787   if (GNUNET_SCHEDULER_NO_TASK != session->timeout_task)
 788   {
 789     GNUNET_SCHEDULER_cancel (session->timeout_task);
 790     session->timeout_task = GNUNET_SCHEDULER_NO_TASK;
 791   }
 792
 793   if (GNUNET_YES ==
 794       GNUNET_CONTAINER_multipeermap_remove (plugin->sessionmap,
 795                                             &session->target,
 796                                             session))
 797   {
 798     GNUNET_STATISTICS_update (session->plugin->env->stats,
 799                               gettext_noop ("# TCP sessions active"), -1,
 800                               GNUNET_NO);
 801   }
 802   else
 803   {
 804     GNUNET_assert (GNUNET_YES ==
 805                    GNUNET_CONTAINER_multipeermap_remove (plugin->nat_wait_conns,
 806                                                          &session->target,
 807                                                          session));
 808   }
 809   GNUNET_SERVER_client_set_user_context (session->client,
 810                                          (void *) NULL);
 811
 812   /* clean up state */
 813   if (NULL != session->transmit_handle)
 814   {
 815     GNUNET_SERVER_notify_transmit_ready_cancel (session->transmit_handle);
 816     session->transmit_handle = NULL;
 817   }
 818   session->plugin->env->session_end (session->plugin->env->cls,
 819                                      &session->target, session);
 820
 821   if (GNUNET_SCHEDULER_NO_TASK != session->nat_connection_timeout)
 822   {
 823     GNUNET_SCHEDULER_cancel (session->nat_connection_timeout);
 824     session->nat_connection_timeout = GNUNET_SCHEDULER_NO_TASK;
 825   }
 826
 827   while (NULL != (pm = session->pending_messages_head))
 828   {
 829     LOG (GNUNET_ERROR_TYPE_DEBUG,
 830          pm->transmit_cont !=
 831          NULL ? "Could not deliver message to `%4s'.\n" :
 832          "Could not deliver message to `%4s', notifying.\n",
 833          GNUNET_i2s (&session->target));
 834     GNUNET_STATISTICS_update (session->plugin->env->stats,
 835                               gettext_noop ("# bytes currently in TCP buffers"),
 836                               -(int64_t) pm->message_size, GNUNET_NO);
 837     GNUNET_STATISTICS_update (session->plugin->env->stats,
 838                               gettext_noop
 839                               ("# bytes discarded by TCP (disconnect)"),
 840                               pm->message_size, GNUNET_NO);
 841     GNUNET_CONTAINER_DLL_remove (session->pending_messages_head,
 842                                  session->pending_messages_tail, pm);
 843     if (NULL != pm->transmit_cont)
 844       pm->transmit_cont (pm->transmit_cont_cls, &session->target,
 845                          GNUNET_SYSERR, pm->message_size, 0);
 846     GNUNET_free (pm);
 847   }
 848   if (session->receive_delay_task != GNUNET_SCHEDULER_NO_TASK)
 849   {
 850     GNUNET_SCHEDULER_cancel (session->receive_delay_task);
 851     if (NULL != session->client)
 852       GNUNET_SERVER_receive_done (session->client, GNUNET_SYSERR);
 853   }
 854   if (NULL != session->client)
 855   {
 856     GNUNET_SERVER_client_disconnect (session->client);
 857     GNUNET_SERVER_client_drop (session->client);
 858     session->client = NULL;
 859   }
 860   GNUNET_free_non_null (session->addr);
 861   GNUNET_assert (NULL == session->transmit_handle);
 862   GNUNET_free (session);
 863   return GNUNET_OK;
 864 }
 865
 866
 867 /**
 868  * Function that is called to get the keepalive factor.
 869  * GNUNET_CONSTANTS_IDLE_CONNECTION_TIMEOUT is divided by this number to
 870  * calculate the interval between keepalive packets.
 871  *
 872  * @param cls closure with the `struct Plugin`
 873  * @return keepalive factor
 874  */
 875 static unsigned int
 876 tcp_query_keepalive_factor (void *cls)
 877 {
 878   return 3;
 879 }
 880
 881
 882 /**
 883  * Session was idle, so disconnect it
 884  *
 885  * @param cls the `struct Session` of the idle session
 886  * @param tc scheduler context
 887  */
 888 static void
 889 session_timeout (void *cls,
 890                  const struct GNUNET_SCHEDULER_TaskContext *tc)
 891 {
 892   struct Session *s = cls;
 893
 894   s->timeout_task = GNUNET_SCHEDULER_NO_TASK;
 895   GNUNET_log (GNUNET_ERROR_TYPE_DEBUG,
 896               "Session %p was idle for %s, disconnecting\n",
 897               s,
 898               GNUNET_STRINGS_relative_time_to_string (GNUNET_CONSTANTS_IDLE_CONNECTION_TIMEOUT,
 899                                                       GNUNET_YES));
 900   /* call session destroy function */
 901   tcp_disconnect_session (s->plugin, s);
 902 }
 903
 904
 905 /**
 906  * Increment session timeout due to activity
 907  *
 908  * @param s session to increment timeout for
 909  */
 910 static void
 911 reschedule_session_timeout (struct Session *s)
 912 {
 913   GNUNET_assert (GNUNET_SCHEDULER_NO_TASK != s->timeout_task);
 914   GNUNET_SCHEDULER_cancel (s->timeout_task);
 915   s->timeout_task = GNUNET_SCHEDULER_add_delayed (GNUNET_CONSTANTS_IDLE_CONNECTION_TIMEOUT,
 916                                                   &session_timeout,
 917                                                   s);
 918   GNUNET_log (GNUNET_ERROR_TYPE_DEBUG,
 919               "Timeout rescheduled for session %p set to %s\n",
 920               s,
 921               GNUNET_STRINGS_relative_time_to_string (GNUNET_CONSTANTS_IDLE_CONNECTION_TIMEOUT,
 922                                                       GNUNET_YES));
 923 }
 924
 925
 926 /**
 927  * Create a new session.  Also queues a welcome message.
 928  *
 929  * @param plugin the plugin
 930  * @param target peer to connect to
 931  * @param client client to use, reference counter must have already been increased
 932  * @param is_nat this a NAT session, we should wait for a client to
 933  *               connect to us from an address, then assign that to
 934  *               the session
 935  * @return new session object
 936  */
 937 static struct Session *
 938 create_session (struct Plugin *plugin,
 939                 const struct GNUNET_PeerIdentity *target,
 940                 struct GNUNET_SERVER_Client *client, int is_nat)
 941 {
 942   struct Session *session;
 943   struct PendingMessage *pm;
 944   struct WelcomeMessage welcome;
 945
 946   if (GNUNET_YES != is_nat)
 947     GNUNET_assert (NULL != client);
 948   else
 949     GNUNET_assert (NULL == client);
 950
 951   LOG (GNUNET_ERROR_TYPE_DEBUG,
 952        "Creating new session for peer `%4s'\n",
 953        GNUNET_i2s (target));
 954   session = GNUNET_new (struct Session);
 955   session->last_activity = GNUNET_TIME_absolute_get ();
 956   session->plugin = plugin;
 957   session->is_nat = is_nat;
 958   session->client = client;
 959   session->target = *target;
 960   session->expecting_welcome = GNUNET_YES;
 961   session->ats_address_network_type = GNUNET_ATS_NET_UNSPECIFIED;
 962   pm = GNUNET_malloc (sizeof (struct PendingMessage) +
 963                       sizeof (struct WelcomeMessage));
 964   pm->msg = (const char *) &pm[1];
 965   pm->message_size = sizeof (struct WelcomeMessage);
 966   welcome.header.size = htons (sizeof (struct WelcomeMessage));
 967   welcome.header.type = htons (GNUNET_MESSAGE_TYPE_TRANSPORT_TCP_WELCOME);
 968   welcome.clientIdentity = *plugin->env->my_identity;
 969   memcpy (&pm[1], &welcome, sizeof (welcome));
 970   pm->timeout = GNUNET_TIME_UNIT_FOREVER_ABS;
 971   GNUNET_STATISTICS_update (plugin->env->stats,
 972                             gettext_noop ("# bytes currently in TCP buffers"),
 973                             pm->message_size, GNUNET_NO);
 974   GNUNET_CONTAINER_DLL_insert (session->pending_messages_head,
 975                                session->pending_messages_tail, pm);
 976   if (GNUNET_YES != is_nat)
 977   {
 978     GNUNET_STATISTICS_update (plugin->env->stats,
 979                               gettext_noop ("# TCP sessions active"), 1,
 980                               GNUNET_NO);
 981   }
 982   session->timeout_task = GNUNET_SCHEDULER_add_delayed (GNUNET_CONSTANTS_IDLE_CONNECTION_TIMEOUT,
 983                                                         &session_timeout,
 984                                                         session);
 985   return session;
 986 }
 987
 988
 989 /**
 990  * If we have pending messages, ask the server to
 991  * transmit them (schedule the respective tasks, etc.)
 992  *
 993  * @param session for which session should we do this
 994  */
 995 static void
 996 process_pending_messages (struct Session *session);
 997
 998
 999 /**
1000  * Function called to notify a client about the socket
1001  * being ready to queue more data.  "buf" will be
1002  * NULL and "size" zero if the socket was closed for
1003  * writing in the meantime.
1004  *
1005  * @param cls closure
1006  * @param size number of bytes available in buf
1007  * @param buf where the callee should write the message
1008  * @return number of bytes written to buf
1009  */
1010 static size_t
1011 do_transmit (void *cls, size_t size, void *buf)
1012 {
1013   struct Session *session = cls;
1014   struct GNUNET_PeerIdentity pid;
1015   struct Plugin *plugin;
1016   struct PendingMessage *pos;
1017   struct PendingMessage *hd;
1018   struct PendingMessage *tl;
1019   struct GNUNET_TIME_Absolute now;
1020   char *cbuf;
1021   size_t ret;
1022
1023   GNUNET_assert (NULL != session);
1024   session->transmit_handle = NULL;
1025   plugin = session->plugin;
1026   if (NULL == buf)
1027   {
1028     LOG (GNUNET_ERROR_TYPE_DEBUG,
1029          "Timeout trying to transmit to peer `%4s', discarding message queue.\n",
1030          GNUNET_i2s (&session->target));
1031     /* timeout; cancel all messages that have already expired */
1032     hd = NULL;
1033     tl = NULL;
1034     ret = 0;
1035     now = GNUNET_TIME_absolute_get ();
1036     while ((NULL != (pos = session->pending_messages_head)) &&
1037            (pos->timeout.abs_value_us <= now.abs_value_us))
1038     {
1039       GNUNET_CONTAINER_DLL_remove (session->pending_messages_head,
1040                                    session->pending_messages_tail, pos);
1041       LOG (GNUNET_ERROR_TYPE_DEBUG,
1042            "Failed to transmit %u byte message to `%4s'.\n",
1043            pos->message_size, GNUNET_i2s (&session->target));
1044       ret += pos->message_size;
1045       GNUNET_CONTAINER_DLL_insert_after (hd, tl, tl, pos);
1046     }
1047     /* do this call before callbacks (so that if callbacks destroy
1048      * session, they have a chance to cancel actions done by this
1049      * call) */
1050     process_pending_messages (session);
1051     pid = session->target;
1052     /* no do callbacks and do not use session again since
1053      * the callbacks may abort the session */
1054     while (NULL != (pos = hd))
1055     {
1056       GNUNET_CONTAINER_DLL_remove (hd, tl, pos);
1057       if (pos->transmit_cont != NULL)
1058         pos->transmit_cont (pos->transmit_cont_cls, &pid, GNUNET_SYSERR, pos->message_size, 0);
1059       GNUNET_free (pos);
1060     }
1061     GNUNET_STATISTICS_update (plugin->env->stats,
1062                               gettext_noop ("# bytes currently in TCP buffers"),
1063                               -(int64_t) ret, GNUNET_NO);
1064     GNUNET_STATISTICS_update (plugin->env->stats,
1065                               gettext_noop
1066                               ("# bytes discarded by TCP (timeout)"), ret,
1067                               GNUNET_NO);
1068     return 0;
1069   }
1070   /* copy all pending messages that would fit */
1071   ret = 0;
1072   cbuf = buf;
1073   hd = NULL;
1074   tl = NULL;
1075   while (NULL != (pos = session->pending_messages_head))
1076   {
1077     if (ret + pos->message_size > size)
1078       break;
1079     GNUNET_CONTAINER_DLL_remove (session->pending_messages_head,
1080                                  session->pending_messages_tail, pos);
1081     GNUNET_assert (size >= pos->message_size);
1082     LOG (GNUNET_ERROR_TYPE_DEBUG,
1083          "Transmitting message of type %u\n",
1084          ntohs (((struct GNUNET_MessageHeader *) pos->msg)->type));
1085     /* FIXME: this memcpy can be up to 7% of our total runtime */
1086     memcpy (cbuf, pos->msg, pos->message_size);
1087     cbuf += pos->message_size;
1088     ret += pos->message_size;
1089     size -= pos->message_size;
1090     GNUNET_CONTAINER_DLL_insert_tail (hd, tl, pos);
1091   }
1092   /* schedule 'continuation' before callbacks so that callbacks that
1093    * cancel everything don't cause us to use a session that no longer
1094    * exists... */
1095   process_pending_messages (session);
1096   session->last_activity = GNUNET_TIME_absolute_get ();
1097   pid = session->target;
1098   /* we'll now call callbacks that may cancel the session; hence
1099    * we should not use 'session' after this point */
1100   while (NULL != (pos = hd))
1101   {
1102     GNUNET_CONTAINER_DLL_remove (hd, tl, pos);
1103     if (pos->transmit_cont != NULL)
1104       pos->transmit_cont (pos->transmit_cont_cls, &pid, GNUNET_OK, pos->message_size, pos->message_size); /* FIXME: include TCP overhead */
1105     GNUNET_free (pos);
1106   }
1107   GNUNET_assert (hd == NULL);
1108   GNUNET_assert (tl == NULL);
1109   LOG (GNUNET_ERROR_TYPE_DEBUG, "Transmitting %u bytes\n",
1110                    ret);
1111   GNUNET_STATISTICS_update (plugin->env->stats,
1112                             gettext_noop ("# bytes currently in TCP buffers"),
1113                             -(int64_t) ret, GNUNET_NO);
1114   GNUNET_STATISTICS_update (plugin->env->stats,
1115                             gettext_noop ("# bytes transmitted via TCP"), ret,
1116                             GNUNET_NO);
1117   return ret;
1118 }
1119
1120
1121 /**
1122  * If we have pending messages, ask the server to
1123  * transmit them (schedule the respective tasks, etc.)
1124  *
1125  * @param session for which session should we do this
1126  */
1127 static void
1128 process_pending_messages (struct Session *session)
1129 {
1130   struct PendingMessage *pm;
1131
1132   GNUNET_assert (NULL != session->client);
1133   if (NULL != session->transmit_handle)
1134     return;
1135   if (NULL == (pm = session->pending_messages_head))
1136     return;
1137
1138   session->transmit_handle =
1139       GNUNET_SERVER_notify_transmit_ready (session->client, pm->message_size,
1140                                            GNUNET_TIME_absolute_get_remaining
1141                                            (pm->timeout), &do_transmit,
1142                                            session);
1143 }
1144
1145
1146 #if EXTRA_CHECKS
1147 /**
1148  * Closure for #session_it().
1149  */
1150 struct FindSessionContext
1151 {
1152   /**
1153    * Session we are looking for.
1154    */
1155   struct Session *s;
1156
1157   /**
1158    * Set to #GNUNET_OK if we found the session.
1159    */
1160   int res;
1161 };
1162
1163
1164 /**
1165  * Function called to check if a session is in our maps.
1166  *
1167  * @param cls the `struct FindSessionContext`
1168  * @param key peer identity
1169  * @param value session in the map
1170  * @return #GNUNET_YES to continue looking, #GNUNET_NO if we found the session
1171  */
1172 static int
1173 session_it (void *cls,
1174             const struct GNUNET_PeerIdentity *key,
1175             void *value)
1176 {
1177   struct FindSessionContext *res = cls;
1178   struct Session *session = value;
1179
1180   if (res->s == session)
1181   {
1182     res->res = GNUNET_OK;
1183     return GNUNET_NO;
1184   }
1185   return GNUNET_YES;
1186 }
1187
1188
1189 /**
1190  * Check that the given session is known to the plugin and
1191  * is in one of our maps.
1192  *
1193  * @param plugin the plugin to check against
1194  * @param session the session to check
1195  * @return #GNUNET_OK if all is well, #GNUNET_SYSERR if the session is invalid
1196  */
1197 static int
1198 find_session (struct Plugin *plugin,
1199               struct Session *session)
1200 {
1201   struct FindSessionContext session_map_res;
1202   struct FindSessionContext nat_map_res;
1203
1204   session_map_res.s = session;
1205   session_map_res.res = GNUNET_SYSERR;
1206   GNUNET_CONTAINER_multipeermap_iterate (plugin->sessionmap,
1207                                          &session_it, &session_map_res);
1208   if (GNUNET_SYSERR != session_map_res.res)
1209     return GNUNET_OK;
1210   nat_map_res.s = session;
1211   nat_map_res.res = GNUNET_SYSERR;
1212   GNUNET_CONTAINER_multipeermap_iterate (plugin->nat_wait_conns,
1213                                          &session_it, &nat_map_res);
1214   if (GNUNET_SYSERR != nat_map_res.res)
1215     return GNUNET_OK;
1216   GNUNET_break (0);
1217   return GNUNET_SYSERR;
1218 }
1219 #endif
1220
1221
1222 /**
1223  * Function that can be used by the transport service to transmit
1224  * a message using the plugin.   Note that in the case of a
1225  * peer disconnecting, the continuation MUST be called
1226  * prior to the disconnect notification itself.  This function
1227  * will be called with this peer's HELLO message to initiate
1228  * a fresh connection to another peer.
1229  *
1230  * @param cls closure
1231  * @param session which session must be used
1232  * @param msgbuf the message to transmit
1233  * @param msgbuf_size number of bytes in 'msgbuf'
1234  * @param priority how important is the message (most plugins will
1235  *                 ignore message priority and just FIFO)
1236  * @param to how long to wait at most for the transmission (does not
1237  *                require plugins to discard the message after the timeout,
1238  *                just advisory for the desired delay; most plugins will ignore
1239  *                this as well)
1240  * @param cont continuation to call once the message has
1241  *        been transmitted (or if the transport is ready
1242  *        for the next transmission call; or if the
1243  *        peer disconnected...); can be NULL
1244  * @param cont_cls closure for @a cont
1245  * @return number of bytes used (on the physical network, with overheads);
1246  *         -1 on hard errors (i.e. address invalid); 0 is a legal value
1247  *         and does NOT mean that the message was not transmitted (DV)
1248  */
1249 static ssize_t
1250 tcp_plugin_send (void *cls,
1251                  struct Session *session,
1252                  const char *msgbuf, size_t msgbuf_size,
1253                  unsigned int priority,
1254                  struct GNUNET_TIME_Relative to,
1255                  GNUNET_TRANSPORT_TransmitContinuation cont, void *cont_cls)
1256 {
1257   struct Plugin * plugin = cls;
1258   struct PendingMessage *pm;
1259
1260 #if EXTRA_CHECKS
1261   if (GNUNET_SYSERR == find_session (plugin, session))
1262   {
1263     LOG (GNUNET_ERROR_TYPE_ERROR,
1264          _("Trying to send with invalid session %p\n"));
1265     GNUNET_assert (0);
1266     return GNUNET_SYSERR;
1267   }
1268 #endif
1269   /* create new message entry */
1270   pm = GNUNET_malloc (sizeof (struct PendingMessage) + msgbuf_size);
1271   pm->msg = (const char *) &pm[1];
1272   memcpy (&pm[1], msgbuf, msgbuf_size);
1273   pm->message_size = msgbuf_size;
1274   pm->timeout = GNUNET_TIME_relative_to_absolute (to);
1275   pm->transmit_cont = cont;
1276   pm->transmit_cont_cls = cont_cls;
1277
1278   LOG (GNUNET_ERROR_TYPE_DEBUG,
1279        "Asked to transmit %u bytes to `%s', added message to list.\n",
1280        msgbuf_size, GNUNET_i2s (&session->target));
1281
1282   if (GNUNET_YES ==
1283       GNUNET_CONTAINER_multipeermap_contains_value (plugin->sessionmap,
1284                                                     &session->target,
1285                                                     session))
1286   {
1287     GNUNET_assert (NULL != session->client);
1288     GNUNET_SERVER_client_set_timeout (session->client,
1289                                       GNUNET_CONSTANTS_IDLE_CONNECTION_TIMEOUT);
1290     GNUNET_STATISTICS_update (plugin->env->stats,
1291                               gettext_noop ("# bytes currently in TCP buffers"),
1292                               msgbuf_size, GNUNET_NO);
1293
1294     /* append pm to pending_messages list */
1295     GNUNET_CONTAINER_DLL_insert_tail (session->pending_messages_head,
1296                                       session->pending_messages_tail, pm);
1297
1298     process_pending_messages (session);
1299     return msgbuf_size;
1300   }
1301   else if (GNUNET_YES ==
1302            GNUNET_CONTAINER_multipeermap_contains_value(plugin->nat_wait_conns,
1303                                                         &session->target,
1304                                                         session))
1305   {
1306     LOG (GNUNET_ERROR_TYPE_DEBUG,
1307          "This NAT WAIT session for peer `%s' is not yet ready!\n",
1308          GNUNET_i2s (&session->target));
1309     GNUNET_STATISTICS_update (plugin->env->stats,
1310                               gettext_noop ("# bytes currently in TCP buffers"),
1311                               msgbuf_size, GNUNET_NO);
1312
1313     /* append pm to pending_messages list */
1314     GNUNET_CONTAINER_DLL_insert_tail (session->pending_messages_head,
1315                                       session->pending_messages_tail, pm);
1316     return msgbuf_size;
1317   }
1318   else
1319   {
1320     LOG (GNUNET_ERROR_TYPE_ERROR,
1321          "Invalid session %p\n", session);
1322     if (NULL != cont)
1323       cont (cont_cls,
1324             &session->target,
1325             GNUNET_SYSERR,
1326             pm->message_size,
1327             0);
1328     GNUNET_break (0);
1329     GNUNET_free (pm);
1330     return GNUNET_SYSERR; /* session does not exist here */
1331   }
1332 }
1333
1334
1335 /**
1336  * Closure for #session_lookup_it().
1337  */
1338 struct SessionItCtx
1339 {
1340   /**
1341    * Address we are looking for.
1342    */
1343   void *addr;
1344
1345   /**
1346    * Number of bytes in @e addr.
1347    */
1348   size_t addrlen;
1349
1350   /**
1351    * Where to store the session (if we found it).
1352    */
1353   struct Session *result;
1354 };
1355
1356
1357 /**
1358  * Look for a session by address.
1359  *
1360  * @param cls the `struct SessionItCtx`
1361  * @param key unused
1362  * @param value a `struct Session`
1363  * @return #GNUNET_YES to continue looking, #GNUNET_NO if we found the session
1364  */
1365 static int
1366 session_lookup_it (void *cls,
1367                    const struct GNUNET_PeerIdentity *key,
1368                    void *value)
1369 {
1370   struct SessionItCtx * si_ctx = cls;
1371   struct Session * session = value;
1372
1373   if (session->addrlen != si_ctx->addrlen)
1374     return GNUNET_YES;
1375   if (0 != memcmp (session->addr, si_ctx->addr, si_ctx->addrlen))
1376     return GNUNET_YES;
1377   /* Found existing session */
1378   si_ctx->result = session;
1379   return GNUNET_NO;
1380 }
1381
1382
1383 /**
1384  * Task cleaning up a NAT connection attempt after timeout
1385  *
1386  * @param cls the `struct Session`
1387  * @param tc scheduler context (unused)
1388  */
1389 static void
1390 nat_connect_timeout (void *cls,
1391                      const struct GNUNET_SCHEDULER_TaskContext *tc)
1392 {
1393   struct Session *session = cls;
1394
1395   session->nat_connection_timeout = GNUNET_SCHEDULER_NO_TASK;
1396   LOG (GNUNET_ERROR_TYPE_DEBUG,
1397        "NAT WAIT connection to `%4s' at `%s' could not be established, removing session\n",
1398        GNUNET_i2s (&session->target),
1399        tcp_address_to_string (NULL,
1400                               session->addr, session->addrlen));
1401   tcp_disconnect_session (session->plugin,
1402                           session);
1403 }
1404
1405
1406 static void
1407 tcp_plugin_update_session_timeout (void *cls,
1408                                   const struct GNUNET_PeerIdentity *peer,
1409                                   struct Session *session)
1410 {
1411   struct Plugin *plugin = cls;
1412
1413   if (GNUNET_SYSERR == find_session (plugin, session))
1414     return;
1415   reschedule_session_timeout (session);
1416 }
1417
1418
1419 /**
1420  * Create a new session to transmit data to the target
1421  * This session will used to send data to this peer and the plugin will
1422  * notify us by calling the env->session_end function
1423  *
1424  * @param cls closure
1425  * @param address the address to use
1426  * @return the session if the address is valid, NULL otherwise
1427  */
1428 static struct Session *
1429 tcp_plugin_get_session (void *cls,
1430                         const struct GNUNET_HELLO_Address *address)
1431 {
1432   struct Plugin *plugin = cls;
1433   struct Session *session = NULL;
1434   int af;
1435   const void *sb;
1436   size_t sbs;
1437   struct GNUNET_CONNECTION_Handle *sa;
1438   struct sockaddr_in a4;
1439   struct sockaddr_in6 a6;
1440   const struct IPv4TcpAddress *t4;
1441   const struct IPv6TcpAddress *t6;
1442   struct GNUNET_ATS_Information ats;
1443   unsigned int is_natd = GNUNET_NO;
1444   size_t addrlen;
1445
1446   addrlen = address->address_length;
1447   LOG (GNUNET_ERROR_TYPE_DEBUG,
1448        "Trying to get session for `%s' address of peer `%s'\n",
1449        tcp_address_to_string(NULL, address->address, address->address_length),
1450        GNUNET_i2s (&address->peer));
1451
1452   /* look for existing session */
1453   if (GNUNET_YES ==
1454       GNUNET_CONTAINER_multipeermap_contains (plugin->sessionmap,
1455                                               &address->peer))
1456   {
1457     struct SessionItCtx si_ctx;
1458
1459     si_ctx.addr = (void *) address->address;
1460     si_ctx.addrlen = address->address_length;
1461
1462     si_ctx.result = NULL;
1463
1464     GNUNET_CONTAINER_multipeermap_get_multiple (plugin->sessionmap,
1465                                                 &address->peer,
1466                                                 &session_lookup_it, &si_ctx);
1467     if (si_ctx.result != NULL)
1468     {
1469       session = si_ctx.result;
1470       LOG (GNUNET_ERROR_TYPE_DEBUG,
1471            "Found existing session for `%s' address `%s' session %p\n",
1472            GNUNET_i2s (&address->peer),
1473            tcp_address_to_string(NULL, address->address, address->address_length),
1474            session);
1475       return session;
1476     }
1477     LOG (GNUNET_ERROR_TYPE_DEBUG,
1478          "Existing sessions did not match address `%s' or peer `%s'\n",
1479          tcp_address_to_string(NULL, address->address, address->address_length),
1480          GNUNET_i2s (&address->peer));
1481   }
1482
1483   if (addrlen == sizeof (struct IPv6TcpAddress))
1484   {
1485     GNUNET_assert (NULL != address->address);     /* make static analysis happy */
1486     t6 = address->address;
1487     af = AF_INET6;
1488     memset (&a6, 0, sizeof (a6));
1489 #if HAVE_SOCKADDR_IN_SIN_LEN
1490     a6.sin6_len = sizeof (a6);
1491 #endif
1492     a6.sin6_family = AF_INET6;
1493     a6.sin6_port = t6->t6_port;
1494     if (t6->t6_port == 0)
1495       is_natd = GNUNET_YES;
1496     memcpy (&a6.sin6_addr, &t6->ipv6_addr, sizeof (struct in6_addr));
1497     sb = &a6;
1498     sbs = sizeof (a6);
1499   }
1500   else if (addrlen == sizeof (struct IPv4TcpAddress))
1501   {
1502     GNUNET_assert (NULL != address->address);     /* make static analysis happy */
1503     t4 = address->address;
1504     af = AF_INET;
1505     memset (&a4, 0, sizeof (a4));
1506 #if HAVE_SOCKADDR_IN_SIN_LEN
1507     a4.sin_len = sizeof (a4);
1508 #endif
1509     a4.sin_family = AF_INET;
1510     a4.sin_port = t4->t4_port;
1511     if (t4->t4_port == 0)
1512       is_natd = GNUNET_YES;
1513     a4.sin_addr.s_addr = t4->ipv4_addr;
1514     sb = &a4;
1515     sbs = sizeof (a4);
1516   }
1517   else
1518   {
1519     GNUNET_STATISTICS_update (plugin->env->stats,
1520                               gettext_noop
1521                               ("# requests to create session with invalid address"),
1522                               1, GNUNET_NO);
1523     return NULL;
1524   }
1525
1526   ats = plugin->env->get_address_type (plugin->env->cls, sb, sbs);
1527
1528   if ((is_natd == GNUNET_YES) && (addrlen == sizeof (struct IPv6TcpAddress)))
1529   {
1530     /* NAT client only works with IPv4 addresses */
1531     return NULL;
1532   }
1533
1534   if (plugin->cur_connections >= plugin->max_connections)
1535   {
1536     /* saturated */
1537     return NULL;
1538   }
1539
1540   if ((is_natd == GNUNET_YES) &&
1541       (GNUNET_YES ==
1542        GNUNET_CONTAINER_multipeermap_contains (plugin->nat_wait_conns,
1543                                                &address->peer)))
1544   {
1545     /* Only do one NAT punch attempt per peer identity */
1546      return NULL;
1547   }
1548
1549   if ((is_natd == GNUNET_YES) && (NULL != plugin->nat) &&
1550       (GNUNET_NO ==
1551        GNUNET_CONTAINER_multipeermap_contains (plugin->nat_wait_conns,
1552                                                &address->peer)))
1553   {
1554     LOG (GNUNET_ERROR_TYPE_DEBUG,
1555          "Found valid IPv4 NAT address (creating session)!\n") ;
1556     session = create_session (plugin,
1557                               &address->peer,
1558                               NULL,
1559                               GNUNET_YES);
1560     session->addrlen = 0;
1561     session->addr = NULL;
1562     session->ats_address_network_type = (enum GNUNET_ATS_Network_Type) ntohl (ats.value)
1563 ;
1564     GNUNET_break (session->ats_address_network_type != GNUNET_ATS_NET_UNSPECIFIED);
1565     session->nat_connection_timeout = GNUNET_SCHEDULER_add_delayed (NAT_TIMEOUT,
1566                                                                     &nat_connect_timeout,
1567                                                                     session);
1568     GNUNET_assert (session != NULL);
1569     GNUNET_assert (GNUNET_OK ==
1570                    GNUNET_CONTAINER_multipeermap_put (plugin->nat_wait_conns,
1571                                                       &session->target,
1572                                                       session,
1573                                                       GNUNET_CONTAINER_MULTIHASHMAPOPTION_UNIQUE_ONLY));
1574
1575     LOG (GNUNET_ERROR_TYPE_DEBUG,
1576          "Created NAT WAIT connection to `%4s' at `%s'\n",
1577          GNUNET_i2s (&session->target), GNUNET_a2s (sb, sbs));
1578
1579     if (GNUNET_OK == GNUNET_NAT_run_client (plugin->nat, &a4))
1580       return session;
1581     else
1582     {
1583       LOG (GNUNET_ERROR_TYPE_DEBUG,
1584            "Running NAT client for `%4s' at `%s' failed\n",
1585            GNUNET_i2s (&session->target), GNUNET_a2s (sb, sbs));
1586       tcp_disconnect_session (plugin, session);
1587       return NULL;
1588     }
1589   }
1590
1591   /* create new outbound session */
1592   GNUNET_assert (plugin->cur_connections <= plugin->max_connections);
1593   sa = GNUNET_CONNECTION_create_from_sockaddr (af, sb, sbs);
1594   if (NULL == sa)
1595   {
1596     LOG (GNUNET_ERROR_TYPE_DEBUG,
1597          "Failed to create connection to `%4s' at `%s'\n",
1598          GNUNET_i2s (&address->peer), GNUNET_a2s (sb, sbs));
1599     return NULL;
1600   }
1601   plugin->cur_connections++;
1602   if (plugin->cur_connections == plugin->max_connections)
1603     GNUNET_SERVER_suspend (plugin->server); /* Maximum number of connections rechead */
1604
1605   LOG (GNUNET_ERROR_TYPE_DEBUG,
1606        "Asked to transmit to `%4s', creating fresh session using address `%s'.\n",
1607        GNUNET_i2s (&address->peer),
1608        GNUNET_a2s (sb, sbs));
1609
1610   session = create_session (plugin,
1611                             &address->peer,
1612                             GNUNET_SERVER_connect_socket (plugin->server, sa),
1613                             GNUNET_NO);
1614   session->addr = GNUNET_malloc (addrlen);
1615   memcpy (session->addr, address->address, addrlen);
1616   session->addrlen = addrlen;
1617   session->ats_address_network_type = (enum GNUNET_ATS_Network_Type) ntohl (ats.value);
1618   GNUNET_break (session->ats_address_network_type != GNUNET_ATS_NET_UNSPECIFIED);
1619   GNUNET_SERVER_client_set_user_context (session->client, session);
1620   GNUNET_CONTAINER_multipeermap_put (plugin->sessionmap,
1621                                      &session->target,
1622                                      session,
1623                                      GNUNET_CONTAINER_MULTIHASHMAPOPTION_MULTIPLE);
1624   LOG (GNUNET_ERROR_TYPE_DEBUG,
1625        "Creating new session for `%s' address `%s' session %p\n",
1626        GNUNET_i2s (&address->peer),
1627        tcp_address_to_string(NULL, address->address, address->address_length),
1628        session);
1629   /* Send TCP Welcome */
1630   process_pending_messages (session);
1631
1632   return session;
1633 }
1634
1635
1636 static int
1637 session_disconnect_it (void *cls,
1638                        const struct GNUNET_PeerIdentity *key,
1639                        void *value)
1640 {
1641   struct Plugin *plugin = cls;
1642   struct Session *session = value;
1643
1644   GNUNET_STATISTICS_update (session->plugin->env->stats,
1645                             gettext_noop
1646                             ("# transport-service disconnect requests for TCP"),
1647                             1, GNUNET_NO);
1648   tcp_disconnect_session (plugin,
1649                           session);
1650   return GNUNET_YES;
1651 }
1652
1653
1654 /**
1655  * Function that can be called to force a disconnect from the
1656  * specified neighbour.  This should also cancel all previously
1657  * scheduled transmissions.  Obviously the transmission may have been
1658  * partially completed already, which is OK.  The plugin is supposed
1659  * to close the connection (if applicable) and no longer call the
1660  * transmit continuation(s).
1661  *
1662  * Finally, plugin MUST NOT call the services's receive function to
1663  * notify the service that the connection to the specified target was
1664  * closed after a getting this call.
1665  *
1666  * @param cls closure
1667  * @param target peer for which the last transmission is
1668  *        to be cancelled
1669  */
1670 static void
1671 tcp_plugin_disconnect (void *cls,
1672                        const struct GNUNET_PeerIdentity *target)
1673 {
1674   struct Plugin *plugin = cls;
1675
1676   LOG (GNUNET_ERROR_TYPE_DEBUG,
1677        "Disconnecting peer `%4s'\n",
1678        GNUNET_i2s (target));
1679   GNUNET_CONTAINER_multipeermap_get_multiple (plugin->sessionmap, target,
1680                                               &session_disconnect_it, plugin);
1681   GNUNET_CONTAINER_multipeermap_get_multiple (plugin->nat_wait_conns, target,
1682                                               &session_disconnect_it, plugin);
1683 }
1684
1685
1686 /**
1687  * Running pretty printers: head
1688  */
1689 static struct PrettyPrinterContext *ppc_dll_head;
1690
1691 /**
1692  * Running pretty printers: tail
1693  */
1694 static struct PrettyPrinterContext *ppc_dll_tail;
1695
1696 /**
1697  * Context for address to string conversion.
1698  */
1699 struct PrettyPrinterContext
1700 {
1701   /**
1702    * DLL
1703    */
1704   struct PrettyPrinterContext *next;
1705
1706   /**
1707    * DLL
1708    */
1709   struct PrettyPrinterContext *prev;
1710
1711   /**
1712    * Timeout task
1713    */
1714   GNUNET_SCHEDULER_TaskIdentifier timeout_task;
1715
1716   /**
1717    * Resolver handle
1718    */
1719   struct GNUNET_RESOLVER_RequestHandle *resolver_handle;
1720
1721   /**
1722    * Function to call with the result.
1723    */
1724   GNUNET_TRANSPORT_AddressStringCallback asc;
1725
1726   /**
1727    * Clsoure for 'asc'.
1728    */
1729   void *asc_cls;
1730
1731   /**
1732    * Port to add after the IP address.
1733    */
1734   uint16_t port;
1735
1736   /**
1737    * IPv6 address
1738    */
1739   int ipv6;
1740
1741   /**
1742    * Options
1743    */
1744   uint32_t options;
1745 };
1746
1747
1748 static void
1749 ppc_cancel_task (void *cls,
1750                  const struct GNUNET_SCHEDULER_TaskContext *tc)
1751 {
1752   struct PrettyPrinterContext *ppc = cls;
1753
1754   ppc->timeout_task = GNUNET_SCHEDULER_NO_TASK;
1755   if (NULL != ppc->resolver_handle)
1756   {
1757     GNUNET_RESOLVER_request_cancel (ppc->resolver_handle);
1758     ppc->resolver_handle = NULL;
1759   }
1760   GNUNET_CONTAINER_DLL_remove (ppc_dll_head, ppc_dll_tail, ppc);
1761   GNUNET_free (ppc);
1762 }
1763
1764
1765 /**
1766  * Append our port and forward the result.
1767  *
1768  * @param cls the 'struct PrettyPrinterContext*'
1769  * @param hostname hostname part of the address
1770  */
1771 static void
1772 append_port (void *cls, const char *hostname)
1773 {
1774   struct PrettyPrinterContext *ppc = cls;
1775   struct PrettyPrinterContext *cur;
1776   char *ret;
1777
1778   if (NULL == hostname)
1779   {
1780     ppc->asc (ppc->asc_cls, NULL);
1781     GNUNET_CONTAINER_DLL_remove (ppc_dll_head, ppc_dll_tail, ppc);
1782     GNUNET_SCHEDULER_cancel (ppc->timeout_task);
1783     ppc->timeout_task = GNUNET_SCHEDULER_NO_TASK;
1784     ppc->resolver_handle = NULL;
1785     GNUNET_free (ppc);
1786     return;
1787   }
1788   for (cur = ppc_dll_head; (NULL != cur); cur = cur->next)
1789     if (cur == ppc)
1790       break;
1791   if (NULL == cur)
1792   {
1793     GNUNET_break (0);
1794     return;
1795   }
1796
1797   if (GNUNET_YES == ppc->ipv6)
1798     GNUNET_asprintf (&ret,
1799                      "%s.%u.[%s]:%d",
1800                      PLUGIN_NAME,
1801                      ppc->options,
1802                      hostname,
1803                      ppc->port);
1804   else
1805     GNUNET_asprintf (&ret,
1806                      "%s.%u.%s:%d",
1807                      PLUGIN_NAME,
1808                      ppc->options,
1809                      hostname,
1810                      ppc->port);
1811   ppc->asc (ppc->asc_cls, ret);
1812   GNUNET_free (ret);
1813 }
1814
1815
1816 /**
1817  * Convert the transports address to a nice, human-readable
1818  * format.
1819  *
1820  * @param cls closure
1821  * @param type name of the transport that generated the address
1822  * @param addr one of the addresses of the host, NULL for the last address
1823  *        the specific address format depends on the transport
1824  * @param addrlen length of the address
1825  * @param numeric should (IP) addresses be displayed in numeric form?
1826  * @param timeout after how long should we give up?
1827  * @param asc function to call on each string
1828  * @param asc_cls closure for asc
1829  */
1830 static void
1831 tcp_plugin_address_pretty_printer (void *cls, const char *type,
1832                                    const void *addr, size_t addrlen,
1833                                    int numeric,
1834                                    struct GNUNET_TIME_Relative timeout,
1835                                    GNUNET_TRANSPORT_AddressStringCallback asc,
1836                                    void *asc_cls)
1837 {
1838   struct PrettyPrinterContext *ppc;
1839   const void *sb;
1840   size_t sbs;
1841   struct sockaddr_in a4;
1842   struct sockaddr_in6 a6;
1843   const struct IPv4TcpAddress *t4;
1844   const struct IPv6TcpAddress *t6;
1845   uint16_t port;
1846   uint32_t options;
1847
1848   if (addrlen == sizeof (struct IPv6TcpAddress))
1849   {
1850     t6 = addr;
1851     memset (&a6, 0, sizeof (a6));
1852     a6.sin6_family = AF_INET6;
1853     a6.sin6_port = t6->t6_port;
1854     memcpy (&a6.sin6_addr, &t6->ipv6_addr, sizeof (struct in6_addr));
1855     port = ntohs (t6->t6_port);
1856     options = ntohl (t6->options);
1857     sb = &a6;
1858     sbs = sizeof (a6);
1859   }
1860   else if (addrlen == sizeof (struct IPv4TcpAddress))
1861   {
1862     t4 = addr;
1863     memset (&a4, 0, sizeof (a4));
1864     a4.sin_family = AF_INET;
1865     a4.sin_port = t4->t4_port;
1866     a4.sin_addr.s_addr = t4->ipv4_addr;
1867     port = ntohs (t4->t4_port);
1868     options = ntohl (t4->options);
1869     sb = &a4;
1870     sbs = sizeof (a4);
1871   }
1872   else if (0 == addrlen)
1873   {
1874     asc (asc_cls, TRANSPORT_SESSION_INBOUND_STRING);
1875     asc (asc_cls, NULL);
1876     return;
1877   }
1878   else
1879   {
1880     /* invalid address */
1881     GNUNET_break_op (0);
1882     asc (asc_cls, NULL);
1883     return;
1884   }
1885   ppc = GNUNET_new (struct PrettyPrinterContext);
1886   if (addrlen == sizeof (struct IPv6TcpAddress))
1887     ppc->ipv6 = GNUNET_YES;
1888   else
1889     ppc->ipv6 = GNUNET_NO;
1890   ppc->asc = asc;
1891   ppc->asc_cls = asc_cls;
1892   ppc->port = port;
1893   ppc->options = options;
1894   ppc->timeout_task = GNUNET_SCHEDULER_add_delayed (GNUNET_TIME_relative_multiply(timeout, 2),
1895                                                     &ppc_cancel_task, ppc);
1896   ppc->resolver_handle = GNUNET_RESOLVER_hostname_get (sb, sbs, !numeric,
1897                                                        timeout,
1898                                                        &append_port, ppc);
1899   if (NULL != ppc->resolver_handle)
1900   {
1901     //GNUNET_log (GNUNET_ERROR_TYPE_ERROR, "Adding request %p\n", ppc);
1902     GNUNET_CONTAINER_DLL_insert (ppc_dll_head, ppc_dll_tail, ppc);
1903   }
1904   else
1905   {
1906     GNUNET_break (0);
1907     GNUNET_free (ppc);
1908   }
1909 }
1910
1911
1912 /**
1913  * Check if the given port is plausible (must be either our listen
1914  * port or our advertised port), or any port if we are behind NAT
1915  * and do not have a port open.  If it is neither, we return
1916  * #GNUNET_SYSERR.
1917  *
1918  * @param plugin global variables
1919  * @param in_port port number to check
1920  * @return #GNUNET_OK if port is either open_port or adv_port
1921  */
1922 static int
1923 check_port (struct Plugin *plugin, uint16_t in_port)
1924 {
1925   if ((in_port == plugin->adv_port) || (in_port == plugin->open_port))
1926     return GNUNET_OK;
1927   return GNUNET_SYSERR;
1928 }
1929
1930
1931 /**
1932  * Function that will be called to check if a binary address for this
1933  * plugin is well-formed and corresponds to an address for THIS peer
1934  * (as per our configuration).  Naturally, if absolutely necessary,
1935  * plugins can be a bit conservative in their answer, but in general
1936  * plugins should make sure that the address does not redirect
1937  * traffic to a 3rd party that might try to man-in-the-middle our
1938  * traffic.
1939  *
1940  * @param cls closure, our 'struct Plugin*'
1941  * @param addr pointer to the address
1942  * @param addrlen length of addr
1943  * @return #GNUNET_OK if this is a plausible address for this peer
1944  *         and transport, #GNUNET_SYSERR if not
1945  */
1946 static int
1947 tcp_plugin_check_address (void *cls, const void *addr, size_t addrlen)
1948 {
1949   struct Plugin *plugin = cls;
1950   struct IPv4TcpAddress *v4;
1951   struct IPv6TcpAddress *v6;
1952
1953   if ((addrlen != sizeof (struct IPv4TcpAddress)) &&
1954       (addrlen != sizeof (struct IPv6TcpAddress)))
1955   {
1956     GNUNET_break_op (0);
1957     return GNUNET_SYSERR;
1958   }
1959
1960   if (addrlen == sizeof (struct IPv4TcpAddress))
1961   {
1962     v4 = (struct IPv4TcpAddress *) addr;
1963     if (0 != memcmp (&v4->options, &myoptions, sizeof (myoptions)))
1964     {
1965       GNUNET_break (0);
1966       return GNUNET_SYSERR;
1967     }
1968     if (GNUNET_OK != check_port (plugin, ntohs (v4->t4_port)))
1969       return GNUNET_SYSERR;
1970     if (GNUNET_OK !=
1971         GNUNET_NAT_test_address (plugin->nat, &v4->ipv4_addr,
1972                                  sizeof (struct in_addr)))
1973       return GNUNET_SYSERR;
1974   }
1975   else
1976   {
1977     v6 = (struct IPv6TcpAddress *) addr;
1978     if (IN6_IS_ADDR_LINKLOCAL (&v6->ipv6_addr))
1979     {
1980       GNUNET_break_op (0);
1981       return GNUNET_SYSERR;
1982     }
1983     if (0 != memcmp (&v6->options, &myoptions, sizeof (myoptions)))
1984     {
1985         GNUNET_break (0);
1986         return GNUNET_SYSERR;
1987     }
1988     if (GNUNET_OK != check_port (plugin, ntohs (v6->t6_port)))
1989       return GNUNET_SYSERR;
1990     if (GNUNET_OK !=
1991         GNUNET_NAT_test_address (plugin->nat, &v6->ipv6_addr,
1992                                  sizeof (struct in6_addr)))
1993       return GNUNET_SYSERR;
1994   }
1995   return GNUNET_OK;
1996 }
1997
1998
1999 /**
2000  * We've received a nat probe from this peer via TCP.  Finish
2001  * creating the client session and resume sending of queued
2002  * messages.
2003  *
2004  * @param cls closure
2005  * @param client identification of the client
2006  * @param message the actual message
2007  */
2008 static void
2009 handle_tcp_nat_probe (void *cls,
2010                       struct GNUNET_SERVER_Client *client,
2011                       const struct GNUNET_MessageHeader *message)
2012 {
2013   struct Plugin *plugin = cls;
2014   struct Session *session;
2015   const struct TCP_NAT_ProbeMessage *tcp_nat_probe;
2016   size_t alen;
2017   void *vaddr;
2018   struct IPv4TcpAddress *t4;
2019   struct IPv6TcpAddress *t6;
2020   const struct sockaddr_in *s4;
2021   const struct sockaddr_in6 *s6;
2022
2023   LOG (GNUNET_ERROR_TYPE_DEBUG,
2024        "Received NAT probe\n");
2025   /* We have received a TCP NAT probe, meaning we (hopefully) initiated
2026    * a connection to this peer by running gnunet-nat-client.  This peer
2027    * received the punch message and now wants us to use the new connection
2028    * as the default for that peer.  Do so and then send a WELCOME message
2029    * so we can really be connected!
2030    */
2031   if (ntohs (message->size) != sizeof (struct TCP_NAT_ProbeMessage))
2032   {
2033     GNUNET_break_op (0);
2034     GNUNET_SERVER_receive_done (client, GNUNET_SYSERR);
2035     return;
2036   }
2037
2038   tcp_nat_probe = (const struct TCP_NAT_ProbeMessage *) message;
2039   if (0 ==
2040       memcmp (&tcp_nat_probe->clientIdentity, plugin->env->my_identity,
2041               sizeof (struct GNUNET_PeerIdentity)))
2042   {
2043     /* refuse connections from ourselves */
2044     GNUNET_SERVER_receive_done (client, GNUNET_SYSERR);
2045     return;
2046   }
2047
2048   session =
2049     GNUNET_CONTAINER_multipeermap_get (plugin->nat_wait_conns,
2050                                        &tcp_nat_probe->clientIdentity);
2051   if (session == NULL)
2052   {
2053     LOG (GNUNET_ERROR_TYPE_DEBUG,
2054          "Did NOT find session for NAT probe!\n");
2055     GNUNET_SERVER_receive_done (client, GNUNET_OK);
2056     return;
2057   }
2058   LOG (GNUNET_ERROR_TYPE_DEBUG,
2059        "Found session for NAT probe!\n");
2060
2061   if (session->nat_connection_timeout != GNUNET_SCHEDULER_NO_TASK)
2062   {
2063     GNUNET_SCHEDULER_cancel (session->nat_connection_timeout);
2064     session->nat_connection_timeout = GNUNET_SCHEDULER_NO_TASK;
2065   }
2066
2067   if (GNUNET_OK != GNUNET_SERVER_client_get_address (client, &vaddr, &alen))
2068   {
2069     GNUNET_break (0);
2070     GNUNET_SERVER_receive_done (client, GNUNET_SYSERR);
2071     tcp_disconnect_session (plugin, session);
2072     return;
2073   }
2074   GNUNET_assert (GNUNET_CONTAINER_multipeermap_remove
2075                  (plugin->nat_wait_conns,
2076                   &tcp_nat_probe->clientIdentity,
2077                   session) == GNUNET_YES);
2078   GNUNET_SERVER_client_set_user_context (client, session);
2079   GNUNET_CONTAINER_multipeermap_put (plugin->sessionmap,
2080                                      &session->target, session,
2081                                      GNUNET_CONTAINER_MULTIHASHMAPOPTION_MULTIPLE);
2082   session->last_activity = GNUNET_TIME_absolute_get ();
2083   session->inbound = GNUNET_NO;
2084   LOG (GNUNET_ERROR_TYPE_DEBUG,
2085        "Found address `%s' for incoming connection\n",
2086        GNUNET_a2s (vaddr, alen));
2087   switch (((const struct sockaddr *) vaddr)->sa_family)
2088   {
2089   case AF_INET:
2090     s4 = vaddr;
2091     t4 = GNUNET_new (struct IPv4TcpAddress);
2092     t4->options = 0;
2093     t4->t4_port = s4->sin_port;
2094     t4->ipv4_addr = s4->sin_addr.s_addr;
2095     session->addr = t4;
2096     session->addrlen = sizeof (struct IPv4TcpAddress);
2097     break;
2098   case AF_INET6:
2099     s6 = vaddr;
2100     t6 = GNUNET_new (struct IPv6TcpAddress);
2101     t6->options = 0;
2102     t6->t6_port = s6->sin6_port;
2103     memcpy (&t6->ipv6_addr, &s6->sin6_addr, sizeof (struct in6_addr));
2104     session->addr = t6;
2105     session->addrlen = sizeof (struct IPv6TcpAddress);
2106     break;
2107   default:
2108     GNUNET_break_op (0);
2109     LOG (GNUNET_ERROR_TYPE_DEBUG,
2110          "Bad address for incoming connection!\n");
2111     GNUNET_free (vaddr);
2112     GNUNET_SERVER_receive_done (client, GNUNET_SYSERR);
2113     tcp_disconnect_session (plugin, session);
2114     return;
2115   }
2116   GNUNET_free (vaddr);
2117   GNUNET_break (NULL == session->client);
2118   GNUNET_SERVER_client_keep (client);
2119   session->client = client;
2120   GNUNET_STATISTICS_update (plugin->env->stats,
2121                             gettext_noop ("# TCP sessions active"), 1,
2122                             GNUNET_NO);
2123   process_pending_messages (session);
2124   GNUNET_SERVER_receive_done (client, GNUNET_OK);
2125 }
2126
2127
2128 /**
2129  * We've received a welcome from this peer via TCP.  Possibly create a
2130  * fresh client record and send back our welcome.
2131  *
2132  * @param cls closure
2133  * @param client identification of the client
2134  * @param message the actual message
2135  */
2136 static void
2137 handle_tcp_welcome (void *cls, struct GNUNET_SERVER_Client *client,
2138                     const struct GNUNET_MessageHeader *message)
2139 {
2140   struct Plugin *plugin = cls;
2141   const struct WelcomeMessage *wm = (const struct WelcomeMessage *) message;
2142   struct Session *session;
2143   size_t alen;
2144   void *vaddr;
2145   struct IPv4TcpAddress *t4;
2146   struct IPv6TcpAddress *t6;
2147   const struct sockaddr_in *s4;
2148   const struct sockaddr_in6 *s6;
2149   struct GNUNET_ATS_Information ats;
2150
2151   if (0 ==
2152       memcmp (&wm->clientIdentity, plugin->env->my_identity,
2153               sizeof (struct GNUNET_PeerIdentity)))
2154   {
2155     /* refuse connections from ourselves */
2156     GNUNET_SERVER_receive_done (client, GNUNET_SYSERR);
2157     if (GNUNET_OK == GNUNET_SERVER_client_get_address (client, &vaddr, &alen))
2158     {
2159         LOG (GNUNET_ERROR_TYPE_WARNING,
2160          "Received %s message from my own identity `%4s' on address `%s'\n",
2161          "WELCOME", GNUNET_i2s (&wm->clientIdentity), GNUNET_a2s (vaddr, alen));
2162         GNUNET_free (vaddr);
2163     }
2164     GNUNET_break_op (0);
2165     return;
2166   }
2167   LOG (GNUNET_ERROR_TYPE_DEBUG,
2168        "Received %s message from `%4s' %p\n", "WELCOME",
2169        GNUNET_i2s (&wm->clientIdentity), client);
2170   GNUNET_STATISTICS_update (plugin->env->stats,
2171                             gettext_noop ("# TCP WELCOME messages received"), 1,
2172                             GNUNET_NO);
2173   session = lookup_session_by_client (plugin, client);
2174   if (NULL != session)
2175   {
2176     if (GNUNET_OK ==
2177         GNUNET_SERVER_client_get_address (client, &vaddr, &alen))
2178     {
2179       LOG (GNUNET_ERROR_TYPE_DEBUG,
2180            "Found existing session %p for peer `%s'\n",
2181            session,
2182            GNUNET_a2s (vaddr, alen));
2183       GNUNET_free (vaddr);
2184     }
2185   }
2186   else
2187   {
2188     GNUNET_SERVER_client_keep (client);
2189     if (NULL != plugin->service) /* Otherwise value is incremented in tcp_access_check */
2190         plugin->cur_connections++;
2191     if (plugin->cur_connections == plugin->max_connections)
2192         GNUNET_SERVER_suspend (plugin->server); /* Maximum number of connections rechead */
2193
2194     session = create_session (plugin, &wm->clientIdentity, client, GNUNET_NO);
2195     session->inbound = GNUNET_YES;
2196     if (GNUNET_OK == GNUNET_SERVER_client_get_address (client, &vaddr, &alen))
2197     {
2198       if (alen == sizeof (struct sockaddr_in))
2199       {
2200         s4 = vaddr;
2201         t4 = GNUNET_new (struct IPv4TcpAddress);
2202         t4->options = htonl (0);
2203         t4->t4_port = s4->sin_port;
2204         t4->ipv4_addr = s4->sin_addr.s_addr;
2205         session->addr = t4;
2206         session->addrlen = sizeof (struct IPv4TcpAddress);
2207       }
2208       else if (alen == sizeof (struct sockaddr_in6))
2209       {
2210         s6 = vaddr;
2211         t6 = GNUNET_new (struct IPv6TcpAddress);
2212         t6->options = htonl (0);
2213         t6->t6_port = s6->sin6_port;
2214         memcpy (&t6->ipv6_addr, &s6->sin6_addr, sizeof (struct in6_addr));
2215         session->addr = t6;
2216         session->addrlen = sizeof (struct IPv6TcpAddress);
2217       }
2218
2219       ats = plugin->env->get_address_type (plugin->env->cls, vaddr ,alen);
2220       session->ats_address_network_type = (enum GNUNET_ATS_Network_Type) ntohl (ats.value);
2221       LOG (GNUNET_ERROR_TYPE_DEBUG,
2222            "Creating new session %p for peer `%s'\n",
2223            session,
2224            GNUNET_a2s (vaddr, alen));
2225       GNUNET_free (vaddr);
2226       GNUNET_SERVER_client_set_user_context (session->client, session);
2227       GNUNET_CONTAINER_multipeermap_put (plugin->sessionmap,
2228                                          &session->target,
2229                                          session,
2230                                          GNUNET_CONTAINER_MULTIHASHMAPOPTION_MULTIPLE);
2231     }
2232     else
2233     {
2234       LOG (GNUNET_ERROR_TYPE_DEBUG,
2235            "Did not obtain TCP socket address for incoming connection\n");
2236       GNUNET_break (0);
2237     }
2238   }
2239
2240   if (session->expecting_welcome != GNUNET_YES)
2241   {
2242     GNUNET_break_op (0);
2243     GNUNET_SERVER_receive_done (client, GNUNET_SYSERR);
2244     GNUNET_break (0);
2245     return;
2246   }
2247   session->last_activity = GNUNET_TIME_absolute_get ();
2248   session->expecting_welcome = GNUNET_NO;
2249
2250   /* Notify transport and ATS about new session */
2251   if (GNUNET_YES == session->inbound)
2252   {
2253     plugin->env->session_start (NULL,
2254                                 &wm->clientIdentity,
2255                                 PLUGIN_NAME,
2256                                 (GNUNET_YES == session->inbound) ? NULL : session->addr,
2257                                 (GNUNET_YES == session->inbound) ? 0 : session->addrlen,
2258                                 session, &ats, 1);
2259   }
2260   process_pending_messages (session);
2261   GNUNET_SERVER_client_set_timeout (client,
2262                                     GNUNET_CONSTANTS_IDLE_CONNECTION_TIMEOUT);
2263   GNUNET_SERVER_receive_done (client, GNUNET_OK);
2264 }
2265
2266
2267 /**
2268  * Task to signal the server that we can continue
2269  * receiving from the TCP client now.
2270  *
2271  * @param cls the `struct Session*`
2272  * @param tc task context (unused)
2273  */
2274 static void
2275 delayed_done (void *cls,
2276               const struct GNUNET_SCHEDULER_TaskContext *tc)
2277 {
2278   struct Session *session = cls;
2279
2280   session->receive_delay_task = GNUNET_SCHEDULER_NO_TASK;
2281   reschedule_session_timeout (session);
2282
2283   GNUNET_SERVER_receive_done (session->client, GNUNET_OK);
2284 }
2285
2286
2287 /**
2288  * We've received data for this peer via TCP.  Unbox,
2289  * compute latency and forward.
2290  *
2291  * @param cls closure
2292  * @param client identification of the client
2293  * @param message the actual message
2294  */
2295 static void
2296 handle_tcp_data (void *cls, struct GNUNET_SERVER_Client *client,
2297                  const struct GNUNET_MessageHeader *message)
2298 {
2299   struct Plugin *plugin = cls;
2300   struct Session *session;
2301   struct GNUNET_TIME_Relative delay;
2302   uint16_t type;
2303
2304   type = ntohs (message->type);
2305   if ((GNUNET_MESSAGE_TYPE_TRANSPORT_TCP_WELCOME == type) ||
2306       (GNUNET_MESSAGE_TYPE_TRANSPORT_TCP_NAT_PROBE == type))
2307   {
2308     /* We don't want to propagate WELCOME and NAT Probe messages up! */
2309     GNUNET_SERVER_receive_done (client, GNUNET_OK);
2310     return;
2311   }
2312   session = lookup_session_by_client (plugin, client);
2313   if (NULL == session)
2314   {
2315     /* No inbound session found */
2316     void *vaddr;
2317     size_t alen;
2318
2319     GNUNET_SERVER_client_get_address (client, &vaddr, &alen);
2320     LOG (GNUNET_ERROR_TYPE_ERROR,
2321          "Received unexpected %u bytes of type %u from `%s'\n",
2322          (unsigned int) ntohs (message->size),
2323          (unsigned int) ntohs (message->type),
2324          GNUNET_a2s(vaddr, alen));
2325     GNUNET_break_op (0);
2326     GNUNET_SERVER_receive_done (client, GNUNET_SYSERR);
2327     GNUNET_free_non_null(vaddr);
2328     return;
2329   }
2330   else if (GNUNET_YES == session->expecting_welcome)
2331   {
2332     /* Session is expecting WELCOME message */
2333     void *vaddr;
2334     size_t alen;
2335
2336     GNUNET_SERVER_client_get_address (client, &vaddr, &alen);
2337     LOG (GNUNET_ERROR_TYPE_ERROR,
2338          "Received unexpected %u bytes of type %u from `%s'\n",
2339          (unsigned int) ntohs (message->size),
2340          (unsigned int) ntohs (message->type),
2341          GNUNET_a2s(vaddr, alen));
2342     GNUNET_break_op (0);
2343     GNUNET_SERVER_receive_done (client, GNUNET_SYSERR);
2344     GNUNET_free_non_null(vaddr);
2345     return;
2346   }
2347
2348   session->last_activity = GNUNET_TIME_absolute_get ();
2349   LOG (GNUNET_ERROR_TYPE_DEBUG,
2350                    "Passing %u bytes of type %u from `%4s' to transport service.\n",
2351                    (unsigned int) ntohs (message->size),
2352                    (unsigned int) ntohs (message->type),
2353                    GNUNET_i2s (&session->target));
2354
2355   GNUNET_STATISTICS_update (plugin->env->stats,
2356                             gettext_noop ("# bytes received via TCP"),
2357                             ntohs (message->size), GNUNET_NO);
2358   struct GNUNET_ATS_Information distance;
2359
2360   distance.type = htonl (GNUNET_ATS_NETWORK_TYPE);
2361   distance.value = htonl ((uint32_t) session->ats_address_network_type);
2362   GNUNET_break (session->ats_address_network_type != GNUNET_ATS_NET_UNSPECIFIED);
2363
2364   GNUNET_assert (GNUNET_CONTAINER_multipeermap_contains_value (plugin->sessionmap,
2365                                                                &session->target,
2366                                                                session));
2367
2368   delay = plugin->env->receive (plugin->env->cls,
2369                                 &session->target,
2370                                 message,
2371                                 session,
2372                                 (GNUNET_YES == session->inbound) ? NULL : session->addr,
2373                                 (GNUNET_YES == session->inbound) ? 0 : session->addrlen);
2374   plugin->env->update_address_metrics (plugin->env->cls,
2375                                        &session->target,
2376                                        (GNUNET_YES == session->inbound) ? NULL : session->addr,
2377                                        (GNUNET_YES == session->inbound) ? 0 : session->addrlen,
2378                                        session, &distance, 1);
2379   reschedule_session_timeout (session);
2380   if (0 == delay.rel_value_us)
2381   {
2382     GNUNET_SERVER_receive_done (client, GNUNET_OK);
2383   }
2384   else
2385   {
2386     LOG (GNUNET_ERROR_TYPE_DEBUG,
2387          "Throttling receiving from `%s' for %s\n",
2388          GNUNET_i2s (&session->target),
2389          GNUNET_STRINGS_relative_time_to_string (delay, GNUNET_YES));
2390     GNUNET_SERVER_disable_receive_done_warning (client);
2391     session->receive_delay_task =
2392       GNUNET_SCHEDULER_add_delayed (delay, &delayed_done, session);
2393   }
2394 }
2395
2396
2397 /**
2398  * Functions with this signature are called whenever a peer
2399  * is disconnected on the network level.
2400  *
2401  * @param cls closure
2402  * @param client identification of the client
2403  */
2404 static void
2405 disconnect_notify (void *cls, struct GNUNET_SERVER_Client *client)
2406 {
2407   struct Plugin *plugin = cls;
2408   struct Session *session;
2409
2410   if (client == NULL)
2411     return;
2412   session = lookup_session_by_client (plugin, client);
2413   if (session == NULL)
2414     return;                     /* unknown, nothing to do */
2415   LOG (GNUNET_ERROR_TYPE_DEBUG,
2416        "Destroying session of `%4s' with %s due to network-level disconnect.\n",
2417        GNUNET_i2s (&session->target),
2418        (session->addr !=
2419         NULL) ? tcp_address_to_string (session->plugin,
2420                                        session->addr,
2421                                        session->addrlen) :
2422        "*");
2423
2424   if (plugin->cur_connections == plugin->max_connections)
2425     GNUNET_SERVER_resume (plugin->server); /* Resume server  */
2426
2427   if (plugin->cur_connections < 1)
2428     GNUNET_break (0);
2429   else
2430     plugin->cur_connections--;
2431
2432   GNUNET_STATISTICS_update (session->plugin->env->stats,
2433                             gettext_noop
2434                             ("# network-level TCP disconnect events"), 1,
2435                             GNUNET_NO);
2436   tcp_disconnect_session (plugin, session);
2437 }
2438
2439
2440 /**
2441  * We can now send a probe message, copy into buffer to really send.
2442  *
2443  * @param cls closure, a struct TCPProbeContext
2444  * @param size max size to copy
2445  * @param buf buffer to copy message to
2446  * @return number of bytes copied into buf
2447  */
2448 static size_t
2449 notify_send_probe (void *cls, size_t size, void *buf)
2450 {
2451   struct TCPProbeContext *tcp_probe_ctx = cls;
2452   struct Plugin *plugin = tcp_probe_ctx->plugin;
2453   size_t ret;
2454
2455   tcp_probe_ctx->transmit_handle = NULL;
2456   GNUNET_CONTAINER_DLL_remove (plugin->probe_head, plugin->probe_tail,
2457                                tcp_probe_ctx);
2458   if (buf == NULL)
2459   {
2460     GNUNET_CONNECTION_destroy (tcp_probe_ctx->sock);
2461     GNUNET_free (tcp_probe_ctx);
2462     return 0;
2463   }
2464   GNUNET_assert (size >= sizeof (tcp_probe_ctx->message));
2465   memcpy (buf, &tcp_probe_ctx->message, sizeof (tcp_probe_ctx->message));
2466   GNUNET_SERVER_connect_socket (tcp_probe_ctx->plugin->server,
2467                                 tcp_probe_ctx->sock);
2468   ret = sizeof (tcp_probe_ctx->message);
2469   GNUNET_free (tcp_probe_ctx);
2470   return ret;
2471 }
2472
2473
2474 /**
2475  * Function called by the NAT subsystem suggesting another peer wants
2476  * to connect to us via connection reversal.  Try to connect back to the
2477  * given IP.
2478  *
2479  * @param cls closure
2480  * @param addr address to try
2481  * @param addrlen number of bytes in @a addr
2482  */
2483 static void
2484 try_connection_reversal (void *cls, const struct sockaddr *addr,
2485                          socklen_t addrlen)
2486 {
2487   struct Plugin *plugin = cls;
2488   struct GNUNET_CONNECTION_Handle *sock;
2489   struct TCPProbeContext *tcp_probe_ctx;
2490
2491   /**
2492    * We have received an ICMP response, ostensibly from a peer
2493    * that wants to connect to us! Send a message to establish a connection.
2494    */
2495   sock = GNUNET_CONNECTION_create_from_sockaddr (AF_INET, addr, addrlen);
2496   if (sock == NULL)
2497   {
2498     /* failed for some odd reason (out of sockets?); ignore attempt */
2499     return;
2500   }
2501
2502   /* FIXME: do we need to track these probe context objects so that
2503    * we can clean them up on plugin unload? */
2504   tcp_probe_ctx = GNUNET_new (struct TCPProbeContext);
2505   tcp_probe_ctx->message.header.size =
2506       htons (sizeof (struct TCP_NAT_ProbeMessage));
2507   tcp_probe_ctx->message.header.type =
2508       htons (GNUNET_MESSAGE_TYPE_TRANSPORT_TCP_NAT_PROBE);
2509   memcpy (&tcp_probe_ctx->message.clientIdentity, plugin->env->my_identity,
2510           sizeof (struct GNUNET_PeerIdentity));
2511   tcp_probe_ctx->plugin = plugin;
2512   tcp_probe_ctx->sock = sock;
2513   GNUNET_CONTAINER_DLL_insert (plugin->probe_head, plugin->probe_tail,
2514                                tcp_probe_ctx);
2515   tcp_probe_ctx->transmit_handle =
2516       GNUNET_CONNECTION_notify_transmit_ready (sock,
2517                                                ntohs (tcp_probe_ctx->
2518                                                       message.header.size),
2519                                                GNUNET_TIME_UNIT_FOREVER_REL,
2520                                                &notify_send_probe,
2521                                                tcp_probe_ctx);
2522
2523 }
2524
2525
2526 /**
2527  * Function obtain the network type for a session
2528  *
2529  * @param cls closure ('struct Plugin*')
2530  * @param session the session
2531  * @return the network type in HBO or #GNUNET_SYSERR
2532  */
2533 static enum GNUNET_ATS_Network_Type
2534 tcp_get_network (void *cls,
2535                  struct Session *session)
2536 {
2537   GNUNET_assert (NULL != session);
2538   return session->ats_address_network_type;
2539 }
2540
2541
2542 /**
2543  * Entry point for the plugin.
2544  *
2545  * @param cls closure, the 'struct GNUNET_TRANSPORT_PluginEnvironment*'
2546  * @return the 'struct GNUNET_TRANSPORT_PluginFunctions*' or NULL on error
2547  */
2548 void *
2549 libgnunet_plugin_transport_tcp_init (void *cls)
2550 {
2551   static const struct GNUNET_SERVER_MessageHandler my_handlers[] = {
2552     {&handle_tcp_welcome, NULL, GNUNET_MESSAGE_TYPE_TRANSPORT_TCP_WELCOME,
2553      sizeof (struct WelcomeMessage)},
2554     {&handle_tcp_nat_probe, NULL, GNUNET_MESSAGE_TYPE_TRANSPORT_TCP_NAT_PROBE,
2555      sizeof (struct TCP_NAT_ProbeMessage)},
2556     {&handle_tcp_data, NULL, GNUNET_MESSAGE_TYPE_ALL, 0},
2557     {NULL, NULL, 0, 0}
2558   };
2559   struct GNUNET_TRANSPORT_PluginEnvironment *env = cls;
2560   struct GNUNET_TRANSPORT_PluginFunctions *api;
2561   struct Plugin *plugin;
2562   struct GNUNET_SERVICE_Context *service;
2563   unsigned long long aport;
2564   unsigned long long bport;
2565   unsigned long long max_connections;
2566   unsigned int i;
2567   struct GNUNET_TIME_Relative idle_timeout;
2568   int ret;
2569   int ret_s;
2570   struct sockaddr **addrs;
2571   socklen_t *addrlens;
2572
2573
2574   if (NULL == env->receive)
2575   {
2576     /* run in 'stub' mode (i.e. as part of gnunet-peerinfo), don't fully
2577        initialze the plugin or the API */
2578     api = GNUNET_new (struct GNUNET_TRANSPORT_PluginFunctions);
2579     api->cls = NULL;
2580     api->address_pretty_printer = &tcp_plugin_address_pretty_printer;
2581     api->address_to_string = &tcp_address_to_string;
2582     api->string_to_address = &tcp_string_to_address;
2583     return api;
2584   }
2585
2586   GNUNET_assert (NULL != env->cfg);
2587   if (GNUNET_OK !=
2588       GNUNET_CONFIGURATION_get_value_number (env->cfg, "transport-tcp",
2589                                              "MAX_CONNECTIONS",
2590                                              &max_connections))
2591     max_connections = 128;
2592
2593   aport = 0;
2594   if ((GNUNET_OK !=
2595        GNUNET_CONFIGURATION_get_value_number (env->cfg, "transport-tcp", "PORT",
2596                                               &bport)) || (bport > 65535) ||
2597       ((GNUNET_OK ==
2598         GNUNET_CONFIGURATION_get_value_number (env->cfg, "transport-tcp",
2599                                                "ADVERTISED-PORT", &aport)) &&
2600        (aport > 65535)))
2601   {
2602     LOG (GNUNET_ERROR_TYPE_ERROR,
2603          _("Require valid port number for service `%s' in configuration!\n"),
2604          "transport-tcp");
2605     return NULL;
2606   }
2607   if (aport == 0)
2608     aport = bport;
2609   if (bport == 0)
2610     aport = 0;
2611   if (bport != 0)
2612   {
2613     service = GNUNET_SERVICE_start ("transport-tcp", env->cfg, GNUNET_SERVICE_OPTION_NONE);
2614     if (service == NULL)
2615     {
2616       LOG (GNUNET_ERROR_TYPE_WARNING,
2617            _("Failed to start service.\n"));
2618       return NULL;
2619     }
2620   }
2621   else
2622     service = NULL;
2623
2624   /* Initialize my flags */
2625   myoptions = 0;
2626
2627   plugin = GNUNET_new (struct Plugin);
2628   plugin->sessionmap = GNUNET_CONTAINER_multipeermap_create (max_connections, GNUNET_YES);
2629   plugin->max_connections = max_connections;
2630   plugin->cur_connections = 0;
2631   plugin->open_port = bport;
2632   plugin->adv_port = aport;
2633   plugin->env = env;
2634   plugin->lsock = NULL;
2635   if ((service != NULL) &&
2636       (GNUNET_SYSERR !=
2637        (ret_s =
2638         GNUNET_SERVICE_get_server_addresses ("transport-tcp", env->cfg, &addrs,
2639                                              &addrlens))))
2640   {
2641     for (ret = ret_s-1; ret >= 0; ret--)
2642       LOG (GNUNET_ERROR_TYPE_INFO,
2643            "Binding to address `%s'\n",
2644            GNUNET_a2s (addrs[ret], addrlens[ret]));
2645     plugin->nat =
2646         GNUNET_NAT_register (env->cfg, GNUNET_YES, aport, (unsigned int) ret_s,
2647                              (const struct sockaddr **) addrs, addrlens,
2648                              &tcp_nat_port_map_callback,
2649                              &try_connection_reversal, plugin);
2650     for (ret = ret_s -1; ret >= 0; ret--)
2651     {
2652       GNUNET_assert (addrs[ret] != NULL);
2653       GNUNET_free (addrs[ret]);
2654     }
2655     GNUNET_free_non_null (addrs);
2656     GNUNET_free_non_null (addrlens);
2657   }
2658   else
2659   {
2660     plugin->nat = GNUNET_NAT_register (plugin->env->cfg,
2661                                        GNUNET_YES, 0, 0, NULL, NULL, NULL,
2662                                        &try_connection_reversal, plugin);
2663   }
2664   api = GNUNET_new (struct GNUNET_TRANSPORT_PluginFunctions);
2665   api->cls = plugin;
2666   api->send = &tcp_plugin_send;
2667   api->get_session = &tcp_plugin_get_session;
2668
2669   api->disconnect_session = &tcp_disconnect_session;
2670   api->query_keepalive_factor = &tcp_query_keepalive_factor;
2671   api->disconnect_peer = &tcp_plugin_disconnect;
2672   api->address_pretty_printer = &tcp_plugin_address_pretty_printer;
2673   api->check_address = &tcp_plugin_check_address;
2674   api->address_to_string = &tcp_address_to_string;
2675   api->string_to_address = &tcp_string_to_address;
2676   api->get_network = &tcp_get_network;
2677   api->update_session_timeout = &tcp_plugin_update_session_timeout;
2678   plugin->service = service;
2679   if (NULL != service)
2680   {
2681     plugin->server = GNUNET_SERVICE_get_server (service);
2682   }
2683   else
2684   {
2685     if (GNUNET_OK !=
2686         GNUNET_CONFIGURATION_get_value_time (env->cfg, "transport-tcp",
2687                                              "TIMEOUT", &idle_timeout))
2688     {
2689       GNUNET_log_config_missing (GNUNET_ERROR_TYPE_ERROR,
2690                                  "transport-tcp", "TIMEOUT");
2691       if (plugin->nat != NULL)
2692         GNUNET_NAT_unregister (plugin->nat);
2693       GNUNET_free (plugin);
2694       GNUNET_free (api);
2695       return NULL;
2696     }
2697     plugin->server =
2698         GNUNET_SERVER_create_with_sockets (&plugin_tcp_access_check, plugin,
2699                                            NULL, idle_timeout, GNUNET_YES);
2700   }
2701   plugin->handlers = GNUNET_malloc (sizeof (my_handlers));
2702   memcpy (plugin->handlers, my_handlers, sizeof (my_handlers));
2703   for (i = 0;
2704        i < sizeof (my_handlers) / sizeof (struct GNUNET_SERVER_MessageHandler);
2705        i++)
2706     plugin->handlers[i].callback_cls = plugin;
2707
2708   GNUNET_SERVER_add_handlers (plugin->server, plugin->handlers);
2709   GNUNET_SERVER_disconnect_notify (plugin->server, &disconnect_notify, plugin);
2710   plugin->nat_wait_conns = GNUNET_CONTAINER_multipeermap_create (16, GNUNET_YES);
2711   if (bport != 0)
2712     LOG (GNUNET_ERROR_TYPE_INFO,
2713          _("TCP transport listening on port %llu\n"), bport);
2714   else
2715     LOG (GNUNET_ERROR_TYPE_INFO,
2716          _("TCP transport not listening on any port (client only)\n"));
2717   if (aport != bport)
2718     LOG (GNUNET_ERROR_TYPE_INFO,
2719          _("TCP transport advertises itself as being on port %llu\n"),
2720          aport);
2721   /* Initially set connections to 0 */
2722   GNUNET_assert (NULL != plugin->env->stats);
2723   GNUNET_STATISTICS_set (plugin->env->stats,
2724                          gettext_noop ("# TCP sessions active"), 0,
2725                          GNUNET_NO);
2726   return api;
2727 }
2728
2729
2730 /**
2731  * Exit point from the plugin.
2732  *
2733  * @param cls the `struct GNUNET_TRANSPORT_PluginFunctions`
2734  * @return NULL
2735  */
2736 void *
2737 libgnunet_plugin_transport_tcp_done (void *cls)
2738 {
2739   struct GNUNET_TRANSPORT_PluginFunctions *api = cls;
2740   struct Plugin *plugin = api->cls;
2741   struct TCPProbeContext *tcp_probe;
2742   struct PrettyPrinterContext *cur;
2743   struct PrettyPrinterContext *next;
2744
2745   if (NULL == plugin)
2746   {
2747     GNUNET_free (api);
2748     return NULL;
2749   }
2750   LOG (GNUNET_ERROR_TYPE_DEBUG,
2751        "Shutting down TCP plugin\n");
2752
2753   /* Removing leftover sessions */
2754   GNUNET_CONTAINER_multipeermap_iterate (plugin->sessionmap,
2755                                          &session_disconnect_it, plugin);
2756   /* Removing leftover NAT sessions */
2757   GNUNET_CONTAINER_multipeermap_iterate (plugin->nat_wait_conns,
2758                                          &session_disconnect_it, plugin);
2759
2760   next = ppc_dll_head;
2761   for (cur = next; NULL != cur; cur = next)
2762   {
2763     next = cur->next;
2764     GNUNET_CONTAINER_DLL_remove (ppc_dll_head, ppc_dll_tail, cur);
2765     if (NULL != cur->resolver_handle)
2766       GNUNET_RESOLVER_request_cancel (cur->resolver_handle);
2767     GNUNET_SCHEDULER_cancel (cur->timeout_task);
2768     GNUNET_free (cur);
2769     GNUNET_break (0);
2770   }
2771
2772   if (plugin->service != NULL)
2773     GNUNET_SERVICE_stop (plugin->service);
2774   else
2775     GNUNET_SERVER_destroy (plugin->server);
2776   GNUNET_free (plugin->handlers);
2777   if (plugin->nat != NULL)
2778     GNUNET_NAT_unregister (plugin->nat);
2779   while (NULL != (tcp_probe = plugin->probe_head))
2780   {
2781     GNUNET_CONTAINER_DLL_remove (plugin->probe_head, plugin->probe_tail,
2782                                  tcp_probe);
2783     GNUNET_CONNECTION_destroy (tcp_probe->sock);
2784     GNUNET_free (tcp_probe);
2785   }
2786   GNUNET_CONTAINER_multipeermap_destroy (plugin->nat_wait_conns);
2787   GNUNET_CONTAINER_multipeermap_destroy (plugin->sessionmap);
2788   GNUNET_free (plugin);
2789   GNUNET_free (api);
2790   return NULL;
2791 }
2792
2793 /* end of plugin_transport_tcp.c */