src/transport/plugin_transport_tcp.c

   1 /*
   2      This file is part of GNUnet
   3      (C) 2002, 2003, 2004, 2005, 2006, 2007, 2008, 2009, 2010 Christian Grothoff (and other contributing authors)
   4
   5      GNUnet is free software; you can redistribute it and/or modify
   6      it under the terms of the GNU General Public License as published
   7      by the Free Software Foundation; either version 3, or (at your
   8      option) any later version.
   9
  10      GNUnet is distributed in the hope that it will be useful, but
  11      WITHOUT ANY WARRANTY; without even the implied warranty of
  12      MERCHANTABILITY or FITNESS FOR A PARTICULAR PURPOSE.  See the GNU
  13      General Public License for more details.
  14
  15      You should have received a copy of the GNU General Public License
  16      along with GNUnet; see the file COPYING.  If not, write to the
  17      Free Software Foundation, Inc., 59 Temple Place - Suite 330,
  18      Boston, MA 02111-1307, USA.
  19 */
  20 /**
  21  * @file transport/plugin_transport_tcp.c
  22  * @brief Implementation of the TCP transport service
  23  * @author Christian Grothoff
  24  */
  25 #include "platform.h"
  26 #include "gnunet_hello_lib.h"
  27 #include "gnunet_constants.h"
  28 #include "gnunet_connection_lib.h"
  29 #include "gnunet_container_lib.h"
  30 #include "gnunet_nat_lib.h"
  31 #include "gnunet_os_lib.h"
  32 #include "gnunet_protocols.h"
  33 #include "gnunet_resolver_service.h"
  34 #include "gnunet_server_lib.h"
  35 #include "gnunet_service_lib.h"
  36 #include "gnunet_signatures.h"
  37 #include "gnunet_statistics_service.h"
  38 #include "gnunet_transport_service.h"
  39 #include "gnunet_transport_plugin.h"
  40 #include "transport.h"
  41
  42 #define DEBUG_TCP GNUNET_EXTRA_LOGGING
  43
  44 #define DEBUG_TCP_NAT GNUNET_EXTRA_LOGGING
  45
  46 GNUNET_NETWORK_STRUCT_BEGIN
  47
  48 /**
  49  * Initial handshake message for a session.
  50  */
  51 struct WelcomeMessage
  52 {
  53   /**
  54    * Type is GNUNET_MESSAGE_TYPE_TRANSPORT_TCP_WELCOME.
  55    */
  56   struct GNUNET_MessageHeader header;
  57
  58   /**
  59    * Identity of the node connecting (TCP client)
  60    */
  61   struct GNUNET_PeerIdentity clientIdentity;
  62
  63 };
  64
  65
  66 /**
  67  * Basically a WELCOME message, but with the purpose
  68  * of giving the waiting peer a client handle to use
  69  */
  70 struct TCP_NAT_ProbeMessage
  71 {
  72   /**
  73    * Type is GNUNET_MESSAGE_TYPE_TRANSPORT_TCP_NAT_PROBE.
  74    */
  75   struct GNUNET_MessageHeader header;
  76
  77   /**
  78    * Identity of the sender of the message.
  79    */
  80   struct GNUNET_PeerIdentity clientIdentity;
  81
  82 };
  83 GNUNET_NETWORK_STRUCT_END
  84
  85 /**
  86  * Context for sending a NAT probe via TCP.
  87  */
  88 struct TCPProbeContext
  89 {
  90
  91   /**
  92    * Active probes are kept in a DLL.
  93    */
  94   struct TCPProbeContext *next;
  95
  96   /**
  97    * Active probes are kept in a DLL.
  98    */
  99   struct TCPProbeContext *prev;
 100
 101   /**
 102    * Probe connection.
 103    */
 104   struct GNUNET_CONNECTION_Handle *sock;
 105
 106   /**
 107    * Message to be sent.
 108    */
 109   struct TCP_NAT_ProbeMessage message;
 110
 111   /**
 112    * Handle to the transmission.
 113    */
 114   struct GNUNET_CONNECTION_TransmitHandle *transmit_handle;
 115
 116   /**
 117    * Transport plugin handle.
 118    */
 119   struct Plugin *plugin;
 120 };
 121
 122
 123 GNUNET_NETWORK_STRUCT_BEGIN
 124
 125 /**
 126  * Network format for IPv4 addresses.
 127  */
 128 struct IPv4TcpAddress
 129 {
 130   /**
 131    * IPv4 address, in network byte order.
 132    */
 133   uint32_t ipv4_addr GNUNET_PACKED;
 134
 135   /**
 136    * Port number, in network byte order.
 137    */
 138   uint16_t t4_port GNUNET_PACKED;
 139
 140 };
 141
 142
 143 /**
 144  * Network format for IPv6 addresses.
 145  */
 146 struct IPv6TcpAddress
 147 {
 148   /**
 149    * IPv6 address.
 150    */
 151   struct in6_addr ipv6_addr GNUNET_PACKED;
 152
 153   /**
 154    * Port number, in network byte order.
 155    */
 156   uint16_t t6_port GNUNET_PACKED;
 157
 158 };
 159 GNUNET_NETWORK_STRUCT_END
 160
 161 /**
 162  * Encapsulation of all of the state of the plugin.
 163  */
 164 struct Plugin;
 165
 166
 167 /**
 168  * Information kept for each message that is yet to
 169  * be transmitted.
 170  */
 171 struct PendingMessage
 172 {
 173
 174   /**
 175    * This is a doubly-linked list.
 176    */
 177   struct PendingMessage *next;
 178
 179   /**
 180    * This is a doubly-linked list.
 181    */
 182   struct PendingMessage *prev;
 183
 184   /**
 185    * The pending message
 186    */
 187   const char *msg;
 188
 189   /**
 190    * Continuation function to call once the message
 191    * has been sent.  Can be NULL if there is no
 192    * continuation to call.
 193    */
 194   GNUNET_TRANSPORT_TransmitContinuation transmit_cont;
 195
 196   /**
 197    * Closure for transmit_cont.
 198    */
 199   void *transmit_cont_cls;
 200
 201   /**
 202    * Timeout value for the pending message.
 203    */
 204   struct GNUNET_TIME_Absolute timeout;
 205
 206   /**
 207    * So that the gnunet-service-transport can group messages together,
 208    * these pending messages need to accept a message buffer and size
 209    * instead of just a GNUNET_MessageHeader.
 210    */
 211   size_t message_size;
 212
 213 };
 214
 215
 216 /**
 217  * Session handle for TCP connections.
 218  */
 219 struct Session
 220 {
 221
 222   /**
 223    * API requirement.
 224    */
 225   struct SessionHeader header;
 226
 227   /**
 228    * Stored in a linked list.
 229    */
 230   struct Session *next;
 231
 232   /**
 233    * Pointer to the global plugin struct.
 234    */
 235   struct Plugin *plugin;
 236
 237   /**
 238    * The client (used to identify this connection)
 239    */
 240   struct GNUNET_SERVER_Client *client;
 241
 242   /**
 243    * Messages currently pending for transmission
 244    * to this peer, if any.
 245    */
 246   struct PendingMessage *pending_messages_head;
 247
 248   /**
 249    * Messages currently pending for transmission
 250    * to this peer, if any.
 251    */
 252   struct PendingMessage *pending_messages_tail;
 253
 254   /**
 255    * Handle for pending transmission request.
 256    */
 257   struct GNUNET_CONNECTION_TransmitHandle *transmit_handle;
 258
 259   /**
 260    * To whom are we talking to (set to our identity
 261    * if we are still waiting for the welcome message)
 262    */
 263   struct GNUNET_PeerIdentity target;
 264
 265   /**
 266    * ID of task used to delay receiving more to throttle sender.
 267    */
 268   GNUNET_SCHEDULER_TaskIdentifier receive_delay_task;
 269
 270   /**
 271    * Address of the other peer (either based on our 'connect'
 272    * call or on our 'accept' call).
 273    */
 274   void *connect_addr;
 275
 276   /**
 277    * Last activity on this connection.  Used to select preferred
 278    * connection.
 279    */
 280   struct GNUNET_TIME_Absolute last_activity;
 281
 282   /**
 283    * Length of connect_addr.
 284    */
 285   size_t connect_alen;
 286
 287   /**
 288    * Are we still expecting the welcome message? (GNUNET_YES/GNUNET_NO)
 289    */
 290   int expecting_welcome;
 291
 292   /**
 293    * Was this a connection that was inbound (we accepted)? (GNUNET_YES/GNUNET_NO)
 294    */
 295   int inbound;
 296
 297   /**
 298    * Was this session created using NAT traversal?
 299    */
 300   int is_nat;
 301
 302   /**
 303    * ATS network type in NBO
 304    */
 305   uint32_t ats_address_network_type;
 306 };
 307
 308
 309 /**
 310  * Encapsulation of all of the state of the plugin.
 311  */
 312 struct Plugin
 313 {
 314   /**
 315    * Our environment.
 316    */
 317   struct GNUNET_TRANSPORT_PluginEnvironment *env;
 318
 319   /**
 320    * The listen socket.
 321    */
 322   struct GNUNET_CONNECTION_Handle *lsock;
 323
 324   /**
 325    * Our handle to the NAT module.
 326    */
 327   struct GNUNET_NAT_Handle *nat;
 328
 329   /**
 330    * List of open TCP sessions.
 331    */
 332   struct Session *sessions;
 333
 334   struct GNUNET_CONTAINER_MultiHashMap * sessionmap;
 335
 336   /**
 337    * Handle to the network service.
 338    */
 339   struct GNUNET_SERVICE_Context *service;
 340
 341   /**
 342    * Handle to the server for this service.
 343    */
 344   struct GNUNET_SERVER_Handle *server;
 345
 346   /**
 347    * Copy of the handler array where the closures are
 348    * set to this struct's instance.
 349    */
 350   struct GNUNET_SERVER_MessageHandler *handlers;
 351
 352   /**
 353    * Map of peers we have tried to contact behind a NAT
 354    */
 355   struct GNUNET_CONTAINER_MultiHashMap *nat_wait_conns;
 356
 357   /**
 358    * List of active TCP probes.
 359    */
 360   struct TCPProbeContext *probe_head;
 361
 362   /**
 363    * List of active TCP probes.
 364    */
 365   struct TCPProbeContext *probe_tail;
 366
 367   /**
 368    * Handle for (DYN)DNS lookup of our external IP.
 369    */
 370   struct GNUNET_RESOLVER_RequestHandle *ext_dns;
 371
 372   /**
 373    * How many more TCP sessions are we allowed to open right now?
 374    */
 375   unsigned long long max_connections;
 376
 377   /**
 378    * ID of task used to update our addresses when one expires.
 379    */
 380   GNUNET_SCHEDULER_TaskIdentifier address_update_task;
 381
 382   /**
 383    * Port that we are actually listening on.
 384    */
 385   uint16_t open_port;
 386
 387   /**
 388    * Port that the user said we would have visible to the
 389    * rest of the world.
 390    */
 391   uint16_t adv_port;
 392
 393 };
 394
 395
 396 /**
 397  * Function to check if an inbound connection is acceptable.
 398  * Mostly used to limit the total number of open connections
 399  * we can have.
 400  *
 401  * @param cls the 'struct Plugin'
 402  * @param ucred credentials, if available, otherwise NULL
 403  * @param addr address
 404  * @param addrlen length of address
 405  * @return GNUNET_YES to allow, GNUNET_NO to deny, GNUNET_SYSERR
 406  *   for unknown address family (will be denied).
 407  */
 408 static int
 409 plugin_tcp_access_check (void *cls,
 410                          const struct GNUNET_CONNECTION_Credentials *ucred,
 411                          const struct sockaddr *addr, socklen_t addrlen)
 412 {
 413   struct Plugin *plugin = cls;
 414
 415   if (0 == plugin->max_connections)
 416     return GNUNET_NO;
 417   plugin->max_connections--;
 418   return GNUNET_YES;
 419 }
 420
 421
 422 /**
 423  * Our external IP address/port mapping has changed.
 424  *
 425  * @param cls closure, the 'struct LocalAddrList'
 426  * @param add_remove GNUNET_YES to mean the new public IP address, GNUNET_NO to mean
 427  *     the previous (now invalid) one
 428  * @param addr either the previous or the new public IP address
 429  * @param addrlen actual lenght of the address
 430  */
 431 static void
 432 tcp_nat_port_map_callback (void *cls, int add_remove,
 433                            const struct sockaddr *addr, socklen_t addrlen)
 434 {
 435   struct Plugin *plugin = cls;
 436   struct IPv4TcpAddress t4;
 437   struct IPv6TcpAddress t6;
 438   void *arg;
 439   size_t args;
 440
 441   GNUNET_log_from (GNUNET_ERROR_TYPE_DEBUG, "tcp",
 442                    "NPMC called with %d for address `%s'\n", add_remove,
 443                    GNUNET_a2s (addr, addrlen));
 444   /* convert 'addr' to our internal format */
 445   switch (addr->sa_family)
 446   {
 447   case AF_INET:
 448     GNUNET_assert (addrlen == sizeof (struct sockaddr_in));
 449     t4.ipv4_addr = ((struct sockaddr_in *) addr)->sin_addr.s_addr;
 450     t4.t4_port = ((struct sockaddr_in *) addr)->sin_port;
 451     arg = &t4;
 452     args = sizeof (t4);
 453     break;
 454   case AF_INET6:
 455     GNUNET_assert (addrlen == sizeof (struct sockaddr_in6));
 456     memcpy (&t6.ipv6_addr, &((struct sockaddr_in6 *) addr)->sin6_addr,
 457             sizeof (struct in6_addr));
 458     t6.t6_port = ((struct sockaddr_in6 *) addr)->sin6_port;
 459     arg = &t6;
 460     args = sizeof (t6);
 461     break;
 462   default:
 463     GNUNET_break (0);
 464     return;
 465   }
 466   /* modify our published address list */
 467   plugin->env->notify_address (plugin->env->cls, add_remove, arg, args);
 468 }
 469
 470
 471 /**
 472  * Function called for a quick conversion of the binary address to
 473  * a numeric address.  Note that the caller must not free the
 474  * address and that the next call to this function is allowed
 475  * to override the address again.
 476  *
 477  * @param cls closure ('struct Plugin*')
 478  * @param addr binary address
 479  * @param addrlen length of the address
 480  * @return string representing the same address
 481  */
 482 static const char *
 483 tcp_address_to_string (void *cls, const void *addr, size_t addrlen)
 484 {
 485   static char rbuf[INET6_ADDRSTRLEN + 12];
 486   char buf[INET6_ADDRSTRLEN];
 487   const void *sb;
 488   struct in_addr a4;
 489   struct in6_addr a6;
 490   const struct IPv4TcpAddress *t4;
 491   const struct IPv6TcpAddress *t6;
 492   int af;
 493   uint16_t port;
 494
 495   if (addrlen == sizeof (struct IPv6TcpAddress))
 496   {
 497     t6 = addr;
 498     af = AF_INET6;
 499     port = ntohs (t6->t6_port);
 500     memcpy (&a6, &t6->ipv6_addr, sizeof (a6));
 501     sb = &a6;
 502   }
 503   else if (addrlen == sizeof (struct IPv4TcpAddress))
 504   {
 505     t4 = addr;
 506     af = AF_INET;
 507     port = ntohs (t4->t4_port);
 508     memcpy (&a4, &t4->ipv4_addr, sizeof (a4));
 509     sb = &a4;
 510   }
 511   else
 512   {
 513     GNUNET_log_from (GNUNET_ERROR_TYPE_ERROR, "tcp",
 514                      _("Unexpected address length: %u bytes\n"),
 515                      (unsigned int) addrlen);
 516     GNUNET_break (0);
 517     return NULL;
 518   }
 519   if (NULL == inet_ntop (af, sb, buf, INET6_ADDRSTRLEN))
 520   {
 521     GNUNET_log_strerror (GNUNET_ERROR_TYPE_WARNING, "inet_ntop");
 522     return NULL;
 523   }
 524   GNUNET_snprintf (rbuf, sizeof (rbuf), (af == AF_INET6) ? "[%s]:%u" : "%s:%u",
 525                    buf, port);
 526   return rbuf;
 527 }
 528
 529
 530 /**
 531  * Find the session handle for the given client.
 532  *
 533  * @param plugin the plugin
 534  * @param client which client to find the session handle for
 535  * @return NULL if no matching session exists
 536  */
 537 static struct Session *
 538 find_session_by_client (struct Plugin *plugin,
 539                         const struct GNUNET_SERVER_Client *client)
 540 {
 541   struct Session *ret;
 542
 543   ret = plugin->sessions;
 544   while ((ret != NULL) && (client != ret->client))
 545     ret = ret->next;
 546   return ret;
 547 }
 548
 549
 550 /**
 551  * Create a new session.  Also queues a welcome message.
 552  *
 553  * @param plugin the plugin
 554  * @param target peer to connect to
 555  * @param client client to use
 556  * @param is_nat this a NAT session, we should wait for a client to
 557  *               connect to us from an address, then assign that to
 558  *               the session
 559  * @return new session object
 560  */
 561 static struct Session *
 562 create_session (struct Plugin *plugin, const struct GNUNET_PeerIdentity *target,
 563                 struct GNUNET_SERVER_Client *client, int is_nat)
 564 {
 565   struct Session *ret;
 566   struct PendingMessage *pm;
 567   struct WelcomeMessage welcome;
 568
 569   if (is_nat != GNUNET_YES)
 570     GNUNET_assert (client != NULL);
 571   else
 572     GNUNET_assert (client == NULL);
 573 #if DEBUG_TCP
 574   GNUNET_log_from (GNUNET_ERROR_TYPE_DEBUG, "tcp",
 575                    "Creating new session for peer `%4s'\n",
 576                    GNUNET_i2s (target));
 577 #endif
 578   ret = GNUNET_malloc (sizeof (struct Session));
 579   ret->last_activity = GNUNET_TIME_absolute_get ();
 580   ret->plugin = plugin;
 581   ret->is_nat = is_nat;
 582   if (is_nat != GNUNET_YES)     /* If not a NAT WAIT conn, add it to global list */
 583   {
 584     ret->next = plugin->sessions;
 585     plugin->sessions = ret;
 586   }
 587   ret->client = client;
 588   ret->target = *target;
 589   ret->expecting_welcome = GNUNET_YES;
 590   ret->ats_address_network_type = htonl (GNUNET_ATS_NET_UNSPECIFIED);
 591   pm = GNUNET_malloc (sizeof (struct PendingMessage) +
 592                       sizeof (struct WelcomeMessage));
 593   pm->msg = (const char *) &pm[1];
 594   pm->message_size = sizeof (struct WelcomeMessage);
 595   welcome.header.size = htons (sizeof (struct WelcomeMessage));
 596   welcome.header.type = htons (GNUNET_MESSAGE_TYPE_TRANSPORT_TCP_WELCOME);
 597   welcome.clientIdentity = *plugin->env->my_identity;
 598   memcpy (&pm[1], &welcome, sizeof (welcome));
 599   pm->timeout = GNUNET_TIME_UNIT_FOREVER_ABS;
 600   GNUNET_STATISTICS_update (plugin->env->stats,
 601                             gettext_noop ("# bytes currently in TCP buffers"),
 602                             pm->message_size, GNUNET_NO);
 603   GNUNET_CONTAINER_DLL_insert (ret->pending_messages_head,
 604                                ret->pending_messages_tail, pm);
 605   if (is_nat != GNUNET_YES)
 606     GNUNET_STATISTICS_update (plugin->env->stats,
 607                               gettext_noop ("# TCP sessions active"), 1,
 608                               GNUNET_NO);
 609   return ret;
 610 }
 611
 612
 613 /**
 614  * If we have pending messages, ask the server to
 615  * transmit them (schedule the respective tasks, etc.)
 616  *
 617  * @param session for which session should we do this
 618  */
 619 static void
 620 process_pending_messages (struct Session *session);
 621
 622
 623 /**
 624  * Function called to notify a client about the socket
 625  * being ready to queue more data.  "buf" will be
 626  * NULL and "size" zero if the socket was closed for
 627  * writing in the meantime.
 628  *
 629  * @param cls closure
 630  * @param size number of bytes available in buf
 631  * @param buf where the callee should write the message
 632  * @return number of bytes written to buf
 633  */
 634 static size_t
 635 do_transmit (void *cls, size_t size, void *buf)
 636 {
 637   struct Session *session = cls;
 638   struct GNUNET_PeerIdentity pid;
 639   struct Plugin *plugin;
 640   struct PendingMessage *pos;
 641   struct PendingMessage *hd;
 642   struct PendingMessage *tl;
 643   struct GNUNET_TIME_Absolute now;
 644   char *cbuf;
 645   size_t ret;
 646
 647   GNUNET_assert (session != NULL);
 648   session->transmit_handle = NULL;
 649   plugin = session->plugin;
 650   if (buf == NULL)
 651   {
 652 #if DEBUG_TCP
 653     GNUNET_log_from (GNUNET_ERROR_TYPE_DEBUG, "tcp",
 654                      "Timeout trying to transmit to peer `%4s', discarding message queue.\n",
 655                      GNUNET_i2s (&session->target));
 656 #endif
 657     /* timeout; cancel all messages that have already expired */
 658     hd = NULL;
 659     tl = NULL;
 660     ret = 0;
 661     now = GNUNET_TIME_absolute_get ();
 662     while ((NULL != (pos = session->pending_messages_head)) &&
 663            (pos->timeout.abs_value <= now.abs_value))
 664     {
 665       GNUNET_CONTAINER_DLL_remove (session->pending_messages_head,
 666                                    session->pending_messages_tail, pos);
 667 #if DEBUG_TCP
 668       GNUNET_log_from (GNUNET_ERROR_TYPE_DEBUG, "tcp",
 669                        "Failed to transmit %u byte message to `%4s'.\n",
 670                        pos->message_size, GNUNET_i2s (&session->target));
 671 #endif
 672       ret += pos->message_size;
 673       GNUNET_CONTAINER_DLL_insert_after (hd, tl, tl, pos);
 674     }
 675     /* do this call before callbacks (so that if callbacks destroy
 676      * session, they have a chance to cancel actions done by this
 677      * call) */
 678     process_pending_messages (session);
 679     pid = session->target;
 680     /* no do callbacks and do not use session again since
 681      * the callbacks may abort the session */
 682     while (NULL != (pos = hd))
 683     {
 684       GNUNET_CONTAINER_DLL_remove (hd, tl, pos);
 685       if (pos->transmit_cont != NULL)
 686         pos->transmit_cont (pos->transmit_cont_cls, &pid, GNUNET_SYSERR);
 687       GNUNET_free (pos);
 688     }
 689     GNUNET_STATISTICS_update (plugin->env->stats,
 690                               gettext_noop ("# bytes currently in TCP buffers"),
 691                               -(int64_t) ret, GNUNET_NO);
 692     GNUNET_STATISTICS_update (plugin->env->stats,
 693                               gettext_noop
 694                               ("# bytes discarded by TCP (timeout)"), ret,
 695                               GNUNET_NO);
 696     return 0;
 697   }
 698   /* copy all pending messages that would fit */
 699   ret = 0;
 700   cbuf = buf;
 701   hd = NULL;
 702   tl = NULL;
 703   while (NULL != (pos = session->pending_messages_head))
 704   {
 705     if (ret + pos->message_size > size)
 706       break;
 707     GNUNET_CONTAINER_DLL_remove (session->pending_messages_head,
 708                                  session->pending_messages_tail, pos);
 709     GNUNET_assert (size >= pos->message_size);
 710     GNUNET_log_from (GNUNET_ERROR_TYPE_DEBUG, "tcp",
 711                      "Transmitting message of type %u\n",
 712                      ntohs (((struct GNUNET_MessageHeader *) pos->msg)->type));
 713     /* FIXME: this memcpy can be up to 7% of our total runtime */
 714     memcpy (cbuf, pos->msg, pos->message_size);
 715     cbuf += pos->message_size;
 716     ret += pos->message_size;
 717     size -= pos->message_size;
 718     GNUNET_CONTAINER_DLL_insert_tail (hd, tl, pos);
 719   }
 720   /* schedule 'continuation' before callbacks so that callbacks that
 721    * cancel everything don't cause us to use a session that no longer
 722    * exists... */
 723   process_pending_messages (session);
 724   session->last_activity = GNUNET_TIME_absolute_get ();
 725   pid = session->target;
 726   /* we'll now call callbacks that may cancel the session; hence
 727    * we should not use 'session' after this point */
 728   while (NULL != (pos = hd))
 729   {
 730     GNUNET_CONTAINER_DLL_remove (hd, tl, pos);
 731     if (pos->transmit_cont != NULL)
 732       pos->transmit_cont (pos->transmit_cont_cls, &pid, GNUNET_OK);
 733     GNUNET_free (pos);
 734   }
 735   GNUNET_assert (hd == NULL);
 736   GNUNET_assert (tl == NULL);
 737 #if DEBUG_TCP > 1
 738   GNUNET_log_from (GNUNET_ERROR_TYPE_DEBUG, "tcp", "Transmitting %u bytes\n",
 739                    ret);
 740 #endif
 741   GNUNET_STATISTICS_update (plugin->env->stats,
 742                             gettext_noop ("# bytes currently in TCP buffers"),
 743                             -(int64_t) ret, GNUNET_NO);
 744   GNUNET_STATISTICS_update (plugin->env->stats,
 745                             gettext_noop ("# bytes transmitted via TCP"), ret,
 746                             GNUNET_NO);
 747   return ret;
 748 }
 749
 750
 751 /**
 752  * If we have pending messages, ask the server to
 753  * transmit them (schedule the respective tasks, etc.)
 754  *
 755  * @param session for which session should we do this
 756  */
 757 static void
 758 process_pending_messages (struct Session *session)
 759 {
 760   struct PendingMessage *pm;
 761
 762   GNUNET_assert (session->client != NULL);
 763   if (session->transmit_handle != NULL)
 764     return;
 765   if (NULL == (pm = session->pending_messages_head))
 766     return;
 767
 768   session->transmit_handle =
 769       GNUNET_SERVER_notify_transmit_ready (session->client, pm->message_size,
 770                                            GNUNET_TIME_absolute_get_remaining
 771                                            (pm->timeout), &do_transmit,
 772                                            session);
 773 }
 774
 775
 776 /**
 777  * Functions with this signature are called whenever we need
 778  * to close a session due to a disconnect or failure to
 779  * establish a connection.
 780  *
 781  * @param session session to close down
 782  */
 783 static void
 784 disconnect_session (struct Session *session)
 785 {
 786   struct Session *prev;
 787   struct Session *pos;
 788   struct PendingMessage *pm;
 789
 790 #if DEBUG_TCP
 791   GNUNET_log_from (GNUNET_ERROR_TYPE_DEBUG, "tcp",
 792                    "Disconnecting from `%4s' at %s.\n",
 793                    GNUNET_i2s (&session->target),
 794                    (session->connect_addr !=
 795                     NULL) ? tcp_address_to_string (session->plugin,
 796                                                    session->connect_addr,
 797                                                    session->connect_alen) :
 798                    "*");
 799 #endif
 800   /* remove from session list */
 801   prev = NULL;
 802   pos = session->plugin->sessions;
 803   while (pos != session)
 804   {
 805     prev = pos;
 806     pos = pos->next;
 807   }
 808   if (prev == NULL)
 809     session->plugin->sessions = session->next;
 810   else
 811     prev->next = session->next;
 812
 813   /* clean up state */
 814   if (session->transmit_handle != NULL)
 815   {
 816     GNUNET_CONNECTION_notify_transmit_ready_cancel (session->transmit_handle);
 817     session->transmit_handle = NULL;
 818   }
 819   session->plugin->env->session_end (session->plugin->env->cls,
 820                                      &session->target, session);
 821   while (NULL != (pm = session->pending_messages_head))
 822   {
 823 #if DEBUG_TCP
 824     GNUNET_log_from (GNUNET_ERROR_TYPE_DEBUG, "tcp",
 825                      pm->transmit_cont !=
 826                      NULL ? "Could not deliver message to `%4s'.\n" :
 827                      "Could not deliver message to `%4s', notifying.\n",
 828                      GNUNET_i2s (&session->target));
 829 #endif
 830     GNUNET_STATISTICS_update (session->plugin->env->stats,
 831                               gettext_noop ("# bytes currently in TCP buffers"),
 832                               -(int64_t) pm->message_size, GNUNET_NO);
 833     GNUNET_STATISTICS_update (session->plugin->env->stats,
 834                               gettext_noop
 835                               ("# bytes discarded by TCP (disconnect)"),
 836                               pm->message_size, GNUNET_NO);
 837     GNUNET_CONTAINER_DLL_remove (session->pending_messages_head,
 838                                  session->pending_messages_tail, pm);
 839     if (NULL != pm->transmit_cont)
 840       pm->transmit_cont (pm->transmit_cont_cls, &session->target,
 841                          GNUNET_SYSERR);
 842     GNUNET_free (pm);
 843   }
 844   GNUNET_break (session->client != NULL);
 845   if (session->receive_delay_task != GNUNET_SCHEDULER_NO_TASK)
 846   {
 847     GNUNET_SCHEDULER_cancel (session->receive_delay_task);
 848     if (session->client != NULL)
 849       GNUNET_SERVER_receive_done (session->client, GNUNET_SYSERR);
 850   }
 851   if (session->client != NULL)
 852   {
 853     GNUNET_SERVER_client_drop (session->client);
 854     session->client = NULL;
 855   }
 856   GNUNET_STATISTICS_update (session->plugin->env->stats,
 857                             gettext_noop ("# TCP sessions active"), -1,
 858                             GNUNET_NO);
 859   GNUNET_free_non_null (session->connect_addr);
 860   GNUNET_assert (NULL == session->transmit_handle);
 861   GNUNET_free (session);
 862 }
 863
 864
 865 /**
 866  * Given two otherwise equivalent sessions, pick the better one.
 867  *
 868  * @param s1 one session (also default)
 869  * @param s2 other session
 870  * @return "better" session (more active)
 871  */
 872 static struct Session *
 873 select_better_session (struct Session *s1, struct Session *s2)
 874 {
 875   if (s1 == NULL)
 876     return s2;
 877   if (s2 == NULL)
 878     return s1;
 879   if ((s1->expecting_welcome == GNUNET_NO) &&
 880       (s2->expecting_welcome == GNUNET_YES))
 881     return s1;
 882   if ((s1->expecting_welcome == GNUNET_YES) &&
 883       (s2->expecting_welcome == GNUNET_NO))
 884     return s2;
 885   if (s1->last_activity.abs_value < s2->last_activity.abs_value)
 886     return s2;
 887   if (s1->last_activity.abs_value > s2->last_activity.abs_value)
 888     return s1;
 889   if ((GNUNET_YES == s1->inbound) && (GNUNET_NO == s2->inbound))
 890     return s1;
 891   if ((GNUNET_NO == s1->inbound) && (GNUNET_YES == s2->inbound))
 892     return s2;
 893   return s1;
 894 }
 895
 896
 897
 898 /**
 899  * Function that can be used by the transport service to transmit
 900  * a message using the plugin.   Note that in the case of a
 901  * peer disconnecting, the continuation MUST be called
 902  * prior to the disconnect notification itself.  This function
 903  * will be called with this peer's HELLO message to initiate
 904  * a fresh connection to another peer.
 905  *
 906  * @param cls closure
 907  * @param target who should receive this message
 908  * @param msg the message to transmit
 909  * @param msgbuf_size number of bytes in 'msg'
 910  * @param priority how important is the message (most plugins will
 911  *                 ignore message priority and just FIFO)
 912  * @param timeout how long to wait at most for the transmission (does not
 913  *                require plugins to discard the message after the timeout,
 914  *                just advisory for the desired delay; most plugins will ignore
 915  *                this as well)
 916  * @param session which session must be used (or NULL for "any")
 917  * @param addr the address to use (can be NULL if the plugin
 918  *                is "on its own" (i.e. re-use existing TCP connection))
 919  * @param addrlen length of the address in bytes
 920  * @param force_address GNUNET_YES if the plugin MUST use the given address,
 921  *                GNUNET_NO means the plugin may use any other address and
 922  *                GNUNET_SYSERR means that only reliable existing
 923  *                bi-directional connections should be used (regardless
 924  *                of address)
 925  * @param cont continuation to call once the message has
 926  *        been transmitted (or if the transport is ready
 927  *        for the next transmission call; or if the
 928  *        peer disconnected...); can be NULL
 929  * @param cont_cls closure for cont
 930  * @return number of bytes used (on the physical network, with overheads);
 931  *         -1 on hard errors (i.e. address invalid); 0 is a legal value
 932  *         and does NOT mean that the message was not transmitted (DV and NAT)
 933  */
 934 static ssize_t
 935 tcp_plugin_send_old (void *cls, const struct GNUNET_PeerIdentity *target,
 936                  const char *msg, size_t msgbuf_size, uint32_t priority,
 937                  struct GNUNET_TIME_Relative timeout, struct Session *session,
 938                  const void *addr, size_t addrlen, int force_address,
 939                  GNUNET_TRANSPORT_TransmitContinuation cont, void *cont_cls)
 940 {
 941   struct Plugin *plugin = cls;
 942   struct Session *cand_session;
 943   struct Session *next;
 944   struct PendingMessage *pm;
 945   struct GNUNET_CONNECTION_Handle *sa;
 946   int af;
 947   const void *sb;
 948   size_t sbs;
 949   struct sockaddr_in a4;
 950   struct sockaddr_in6 a6;
 951   const struct IPv4TcpAddress *t4;
 952   const struct IPv6TcpAddress *t6;
 953   unsigned int is_natd;
 954
 955   GNUNET_STATISTICS_update (plugin->env->stats,
 956                             gettext_noop ("# bytes TCP was asked to transmit"),
 957                             msgbuf_size, GNUNET_NO);
 958   /* FIXME: we could do this cheaper with a hash table
 959    * where we could restrict the iteration to entries that match
 960    * the target peer... */
 961   is_natd = GNUNET_NO;
 962   if (session == NULL)
 963   {
 964     cand_session = NULL;
 965     next = plugin->sessions;
 966     while (NULL != (session = next))
 967     {
 968       next = session->next;
 969       GNUNET_assert (session->client != NULL);
 970       if (0 !=
 971           memcmp (target, &session->target,
 972                   sizeof (struct GNUNET_PeerIdentity)))
 973         continue;
 974       if (((GNUNET_SYSERR == force_address) &&
 975            (session->expecting_welcome == GNUNET_NO)) ||
 976           (GNUNET_NO == force_address))
 977       {
 978         cand_session = select_better_session (cand_session, session);
 979         continue;
 980       }
 981       if (GNUNET_SYSERR == force_address)
 982         continue;
 983       GNUNET_break (GNUNET_YES == force_address);
 984       if (addr == NULL)
 985       {
 986         GNUNET_break (0);
 987         break;
 988       }
 989       if ((addrlen != session->connect_alen) && (session->is_nat == GNUNET_NO))
 990         continue;
 991       if ((0 != memcmp (session->connect_addr, addr, addrlen)) &&
 992           (session->is_nat == GNUNET_NO))
 993         continue;
 994       cand_session = select_better_session (cand_session, session);
 995     }
 996     session = cand_session;
 997   }
 998   if ((session == NULL) && (addrlen == 0))
 999   {
1000 #if DEBUG_TCP
1001     GNUNET_log_from (GNUNET_ERROR_TYPE_DEBUG, "tcp",
1002                      "Asked to transmit to `%4s' without address and I have no existing connection (failing).\n",
1003                      GNUNET_i2s (target));
1004 #endif
1005     GNUNET_STATISTICS_update (plugin->env->stats,
1006                               gettext_noop
1007                               ("# bytes discarded by TCP (no address and no connection)"),
1008                               msgbuf_size, GNUNET_NO);
1009     return -1;
1010   }
1011   if (session == NULL)
1012   {
1013     if (addrlen == sizeof (struct IPv6TcpAddress))
1014     {
1015       GNUNET_assert (NULL != addr);     /* make static analysis happy */
1016       t6 = addr;
1017       af = AF_INET6;
1018       memset (&a6, 0, sizeof (a6));
1019 #if HAVE_SOCKADDR_IN_SIN_LEN
1020       a6.sin6_len = sizeof (a6);
1021 #endif
1022       a6.sin6_family = AF_INET6;
1023       a6.sin6_port = t6->t6_port;
1024       if (t6->t6_port == 0)
1025         is_natd = GNUNET_YES;
1026       memcpy (&a6.sin6_addr, &t6->ipv6_addr, sizeof (struct in6_addr));
1027       sb = &a6;
1028       sbs = sizeof (a6);
1029     }
1030     else if (addrlen == sizeof (struct IPv4TcpAddress))
1031     {
1032       GNUNET_assert (NULL != addr);     /* make static analysis happy */
1033       t4 = addr;
1034       af = AF_INET;
1035       memset (&a4, 0, sizeof (a4));
1036 #if HAVE_SOCKADDR_IN_SIN_LEN
1037       a4.sin_len = sizeof (a4);
1038 #endif
1039       a4.sin_family = AF_INET;
1040       a4.sin_port = t4->t4_port;
1041       if (t4->t4_port == 0)
1042         is_natd = GNUNET_YES;
1043       a4.sin_addr.s_addr = t4->ipv4_addr;
1044       sb = &a4;
1045       sbs = sizeof (a4);
1046     }
1047     else
1048     {
1049       GNUNET_log_from (GNUNET_ERROR_TYPE_ERROR, "tcp",
1050                        _("Address of unexpected length: %u\n"), addrlen);
1051       GNUNET_break (0);
1052       return -1;
1053     }
1054
1055     if ((is_natd == GNUNET_YES) && (addrlen == sizeof (struct IPv6TcpAddress)))
1056       return -1;                /* NAT client only works with IPv4 addresses */
1057     if (0 == plugin->max_connections)
1058       return -1;                /* saturated */
1059
1060     if ((is_natd == GNUNET_YES) && (NULL != plugin->nat) &&
1061         (GNUNET_NO ==
1062          GNUNET_CONTAINER_multihashmap_contains (plugin->nat_wait_conns,
1063                                                  &target->hashPubKey)))
1064     {
1065 #if DEBUG_TCP_NAT
1066       GNUNET_log_from (GNUNET_ERROR_TYPE_DEBUG, "tcp",
1067                        _("Found valid IPv4 NAT address (creating session)!\n"));
1068 #endif
1069       session = create_session (plugin, target, NULL, GNUNET_YES);
1070       GNUNET_assert (session != NULL);
1071
1072       /* create new message entry */
1073       pm = GNUNET_malloc (sizeof (struct PendingMessage) + msgbuf_size);
1074       /* FIXME: the memset of this malloc can be up to 2% of our total runtime */
1075       pm->msg = (const char *) &pm[1];
1076       memcpy (&pm[1], msg, msgbuf_size);
1077       /* FIXME: this memcpy can be up to 7% of our total run-time
1078        * (for transport service) */
1079       pm->message_size = msgbuf_size;
1080       pm->timeout = GNUNET_TIME_relative_to_absolute (timeout);
1081       pm->transmit_cont = cont;
1082       pm->transmit_cont_cls = cont_cls;
1083
1084       /* append pm to pending_messages list */
1085       GNUNET_CONTAINER_DLL_insert_tail (session->pending_messages_head,
1086                                         session->pending_messages_tail, pm);
1087
1088       GNUNET_assert (GNUNET_CONTAINER_multihashmap_put
1089                      (plugin->nat_wait_conns, &target->hashPubKey, session,
1090                       GNUNET_CONTAINER_MULTIHASHMAPOPTION_UNIQUE_ONLY) ==
1091                      GNUNET_OK);
1092 #if DEBUG_TCP_NAT
1093       GNUNET_log_from (GNUNET_ERROR_TYPE_DEBUG, "tcp",
1094                        "Created NAT WAIT connection to `%4s' at `%s'\n",
1095                        GNUNET_i2s (target), GNUNET_a2s (sb, sbs));
1096 #endif
1097       GNUNET_NAT_run_client (plugin->nat, &a4);
1098       return 0;
1099     }
1100     if ((is_natd == GNUNET_YES) &&
1101         (GNUNET_YES ==
1102          GNUNET_CONTAINER_multihashmap_contains (plugin->nat_wait_conns,
1103                                                  &target->hashPubKey)))
1104     {
1105       /* Only do one NAT punch attempt per peer identity */
1106       return -1;
1107     }
1108     sa = GNUNET_CONNECTION_create_from_sockaddr (af, sb, sbs);
1109     if (sa == NULL)
1110     {
1111 #if DEBUG_TCP
1112       GNUNET_log_from (GNUNET_ERROR_TYPE_DEBUG, "tcp",
1113                        "Failed to create connection to `%4s' at `%s'\n",
1114                        GNUNET_i2s (target), GNUNET_a2s (sb, sbs));
1115 #endif
1116       GNUNET_STATISTICS_update (plugin->env->stats,
1117                                 gettext_noop
1118                                 ("# bytes discarded by TCP (failed to connect)"),
1119                                 msgbuf_size, GNUNET_NO);
1120       return -1;
1121     }
1122     GNUNET_assert (0 != plugin->max_connections);
1123     plugin->max_connections--;
1124 #if DEBUG_TCP_NAT
1125     GNUNET_log_from (GNUNET_ERROR_TYPE_DEBUG, "tcp",
1126                      "Asked to transmit to `%4s', creating fresh session using address `%s'.\n",
1127                      GNUNET_i2s (target), GNUNET_a2s (sb, sbs));
1128 #endif
1129     session =
1130         create_session (plugin, target,
1131                         GNUNET_SERVER_connect_socket (plugin->server, sa),
1132                         GNUNET_NO);
1133     session->connect_addr = GNUNET_malloc (addrlen);
1134     memcpy (session->connect_addr, addr, addrlen);
1135     session->connect_alen = addrlen;
1136     if (addrlen != 0)
1137     {
1138       struct GNUNET_ATS_Information ats;
1139       ats = plugin->env->get_address_type (plugin->env->cls, sb ,sbs);
1140       session->ats_address_network_type = ats.value;
1141     }
1142     else
1143       GNUNET_break (0);
1144   }
1145   else                          /* session != NULL */
1146   {
1147     /* check if session is valid */
1148     struct Session *ses = plugin->sessions;
1149
1150     if (0 !=
1151         memcmp (target, &session->target, sizeof (struct GNUNET_PeerIdentity)))
1152     {
1153       GNUNET_break (0);
1154       GNUNET_log (GNUNET_ERROR_TYPE_ERROR,
1155                   "Got session %p for `%s', but should be for peer `%s'!\n",
1156                   session, GNUNET_i2s (&session->target),
1157                   GNUNET_h2s (&target->hashPubKey));
1158       return -1;
1159     }
1160
1161     while ((ses != NULL) && (ses != session))
1162       ses = ses->next;
1163     if (ses == NULL)
1164     {
1165       return -1;
1166     }
1167   }
1168   GNUNET_assert (session != NULL);
1169   GNUNET_assert (session->client != NULL);
1170   GNUNET_SERVER_client_set_timeout (session->client,
1171                                     GNUNET_CONSTANTS_IDLE_CONNECTION_TIMEOUT);
1172   GNUNET_STATISTICS_update (plugin->env->stats,
1173                             gettext_noop ("# bytes currently in TCP buffers"),
1174                             msgbuf_size, GNUNET_NO);
1175   /* create new message entry */
1176   pm = GNUNET_malloc (sizeof (struct PendingMessage) + msgbuf_size);
1177   pm->msg = (const char *) &pm[1];
1178   memcpy (&pm[1], msg, msgbuf_size);
1179   pm->message_size = msgbuf_size;
1180   pm->timeout = GNUNET_TIME_relative_to_absolute (timeout);
1181   pm->transmit_cont = cont;
1182   pm->transmit_cont_cls = cont_cls;
1183
1184   /* append pm to pending_messages list */
1185   GNUNET_CONTAINER_DLL_insert_tail (session->pending_messages_head,
1186                                     session->pending_messages_tail, pm);
1187 #if DEBUG_TCP
1188   GNUNET_log_from (GNUNET_ERROR_TYPE_DEBUG, "tcp",
1189                    "Asked to transmit %u bytes to `%s', added message to list.\n",
1190                    msgbuf_size, GNUNET_i2s (target));
1191 #endif
1192   process_pending_messages (session);
1193   return msgbuf_size;
1194 }
1195
1196 /**
1197  * Function that can be used by the transport service to transmit
1198  * a message using the plugin.   Note that in the case of a
1199  * peer disconnecting, the continuation MUST be called
1200  * prior to the disconnect notification itself.  This function
1201  * will be called with this peer's HELLO message to initiate
1202  * a fresh connection to another peer.
1203  *
1204  * @param cls closure
1205  * @param session which session must be used
1206  * @param msgbuf the message to transmit
1207  * @param msgbuf_size number of bytes in 'msgbuf'
1208  * @param priority how important is the message (most plugins will
1209  *                 ignore message priority and just FIFO)
1210  * @param to how long to wait at most for the transmission (does not
1211  *                require plugins to discard the message after the timeout,
1212  *                just advisory for the desired delay; most plugins will ignore
1213  *                this as well)
1214  * @param cont continuation to call once the message has
1215  *        been transmitted (or if the transport is ready
1216  *        for the next transmission call; or if the
1217  *        peer disconnected...); can be NULL
1218  * @param cont_cls closure for cont
1219  * @return number of bytes used (on the physical network, with overheads);
1220  *         -1 on hard errors (i.e. address invalid); 0 is a legal value
1221  *         and does NOT mean that the message was not transmitted (DV)
1222  */
1223 static ssize_t
1224 tcp_plugin_send (void *cls,
1225     struct Session *session,
1226     const char *msgbuf, size_t msgbuf_size,
1227     unsigned int priority,
1228     struct GNUNET_TIME_Relative to,
1229     GNUNET_TRANSPORT_TransmitContinuation cont, void *cont_cls)
1230 {
1231   struct Plugin * plugin = cls;
1232   struct PendingMessage *pm;
1233
1234   GNUNET_assert (plugin != NULL);
1235   GNUNET_assert (session != NULL);
1236   GNUNET_assert (session->client != NULL);
1237
1238   GNUNET_SERVER_client_set_timeout (session->client,
1239                                     GNUNET_CONSTANTS_IDLE_CONNECTION_TIMEOUT);
1240   GNUNET_STATISTICS_update (plugin->env->stats,
1241                             gettext_noop ("# bytes currently in TCP buffers"),
1242                             msgbuf_size, GNUNET_NO);
1243   /* create new message entry */
1244   pm = GNUNET_malloc (sizeof (struct PendingMessage) + msgbuf_size);
1245   pm->msg = (const char *) &pm[1];
1246   memcpy (&pm[1], msgbuf, msgbuf_size);
1247   pm->message_size = msgbuf_size;
1248   pm->timeout = GNUNET_TIME_relative_to_absolute (to);
1249   pm->transmit_cont = cont;
1250   pm->transmit_cont_cls = cont_cls;
1251
1252   /* append pm to pending_messages list */
1253   GNUNET_CONTAINER_DLL_insert_tail (session->pending_messages_head,
1254                                     session->pending_messages_tail, pm);
1255 #if DEBUG_TCP
1256   GNUNET_log_from (GNUNET_ERROR_TYPE_DEBUG, "tcp",
1257                    "Asked to transmit %u bytes to `%s', added message to list.\n",
1258                    msgbuf_size, GNUNET_i2s (&session->target));
1259 #endif
1260   process_pending_messages (session);
1261   return msgbuf_size;
1262 }
1263
1264 struct SessionItCtx
1265 {
1266   void * addr;
1267   size_t addrlen;
1268   struct Session * result;
1269 };
1270
1271 int session_it (void *cls,
1272                const GNUNET_HashCode * key,
1273                void *value)
1274 {
1275   struct SessionItCtx * si_ctx = cls;
1276   struct Session * session = value;
1277
1278   if (session->connect_alen != si_ctx->addrlen)
1279     return GNUNET_YES;
1280   if (0 != memcmp (&session->connect_addr, si_ctx->addr, si_ctx->addrlen))
1281     return GNUNET_YES;
1282
1283   /* Found existing session */
1284   si_ctx->result = session;
1285   return GNUNET_NO;
1286 }
1287
1288
1289 /**
1290  * Create a new session to transmit data to the target
1291  * This session will used to send data to this peer and the plugin will
1292  * notify us by calling the env->session_end function
1293  *
1294  * @param cls closure
1295  * @param target the neighbour id
1296  * @param addr pointer to the address
1297  * @param addrlen length of addr
1298  * @return the session if the address is valid, NULL otherwise
1299  */
1300 static struct Session *
1301 tcp_plugin_get_session (void *cls,
1302                       const struct GNUNET_HELLO_Address *address)
1303 {
1304   struct Plugin * plugin = cls;
1305   struct Session * session = NULL;
1306
1307   int af;
1308   const void *sb;
1309   size_t sbs;
1310   struct GNUNET_CONNECTION_Handle *sa;
1311   struct sockaddr_in a4;
1312   struct sockaddr_in6 a6;
1313   const struct IPv4TcpAddress *t4;
1314   const struct IPv6TcpAddress *t6;
1315   unsigned int is_natd = GNUNET_NO;
1316   size_t addrlen = address->address_length;
1317
1318   GNUNET_assert (plugin != NULL);
1319   GNUNET_assert (address != NULL);
1320
1321   if (addrlen == sizeof (struct IPv6TcpAddress))
1322   {
1323     GNUNET_assert (NULL != address->address);     /* make static analysis happy */
1324     t6 = address->address;
1325     af = AF_INET6;
1326     memset (&a6, 0, sizeof (a6));
1327 #if HAVE_SOCKADDR_IN_SIN_LEN
1328     a6.sin6_len = sizeof (a6);
1329 #endif
1330     a6.sin6_family = AF_INET6;
1331     a6.sin6_port = t6->t6_port;
1332     if (t6->t6_port == 0)
1333       is_natd = GNUNET_YES;
1334     memcpy (&a6.sin6_addr, &t6->ipv6_addr, sizeof (struct in6_addr));
1335     sb = &a6;
1336     sbs = sizeof (a6);
1337   }
1338   else if (addrlen == sizeof (struct IPv4TcpAddress))
1339   {
1340     GNUNET_assert (NULL != address->address);     /* make static analysis happy */
1341     t4 = address->address;
1342     af = AF_INET;
1343     memset (&a4, 0, sizeof (a4));
1344 #if HAVE_SOCKADDR_IN_SIN_LEN
1345     a4.sin_len = sizeof (a4);
1346 #endif
1347     a4.sin_family = AF_INET;
1348     a4.sin_port = t4->t4_port;
1349     if (t4->t4_port == 0)
1350       is_natd = GNUNET_YES;
1351     a4.sin_addr.s_addr = t4->ipv4_addr;
1352     sb = &a4;
1353     sbs = sizeof (a4);
1354   }
1355   else
1356   {
1357     GNUNET_log_from (GNUNET_ERROR_TYPE_ERROR, "tcp",
1358                      _("Address of unexpected length: %u\n"), addrlen);
1359     GNUNET_break (0);
1360     return NULL;
1361   }
1362
1363   /* look for existing session */
1364   if (GNUNET_CONTAINER_multihashmap_contains(plugin->sessionmap, &address->peer.hashPubKey))
1365   {
1366     struct SessionItCtx si_ctx;
1367     si_ctx.addr = &sbs;
1368     si_ctx.addrlen = sbs;
1369     GNUNET_CONTAINER_multihashmap_get_multiple(plugin->sessionmap, &address->peer.hashPubKey, &session_it, &si_ctx);
1370     if (si_ctx.result != NULL)
1371       session = si_ctx.result;
1372     return session;
1373   }
1374
1375   if ((is_natd == GNUNET_YES) && (addrlen == sizeof (struct IPv6TcpAddress)))
1376     return NULL;              /* NAT client only works with IPv4 addresses */
1377
1378   if (0 == plugin->max_connections)
1379     return NULL;              /* saturated */
1380
1381   if ((is_natd == GNUNET_YES) &&
1382       (GNUNET_YES ==
1383        GNUNET_CONTAINER_multihashmap_contains (plugin->nat_wait_conns,
1384                                                &address->peer.hashPubKey)))
1385      return NULL;             /* Only do one NAT punch attempt per peer identity */
1386
1387   if ((is_natd == GNUNET_YES) && (NULL != plugin->nat) &&
1388       (GNUNET_NO ==
1389        GNUNET_CONTAINER_multihashmap_contains (plugin->nat_wait_conns,
1390                                                &address->peer.hashPubKey)))
1391   {
1392 #if DEBUG_TCP_NAT
1393     GNUNET_log_from (GNUNET_ERROR_TYPE_DEBUG, "tcp",
1394                      _("Found valid IPv4 NAT address (creating session)!\n"));
1395 #endif
1396     session = create_session (plugin, &address->peer, NULL, GNUNET_YES);
1397     GNUNET_assert (session != NULL);
1398
1399     GNUNET_assert (GNUNET_CONTAINER_multihashmap_put
1400                    (plugin->nat_wait_conns, &address->peer.hashPubKey, session,
1401                     GNUNET_CONTAINER_MULTIHASHMAPOPTION_UNIQUE_ONLY) == GNUNET_OK);
1402 #if DEBUG_TCP_NAT
1403     GNUNET_log_from (GNUNET_ERROR_TYPE_DEBUG, "tcp",
1404                      "Created NAT WAIT connection to `%4s' at `%s'\n",
1405                      GNUNET_i2s (&session->target), GNUNET_a2s (sb, sbs));
1406 #endif
1407     GNUNET_NAT_run_client (plugin->nat, &a4);
1408     return session;
1409   }
1410
1411   /* create new outbound session */
1412   GNUNET_assert (0 != plugin->max_connections);
1413   sa = GNUNET_CONNECTION_create_from_sockaddr (af, sb, sbs);
1414   if (sa == NULL)
1415   {
1416 #if DEBUG_TCP
1417     GNUNET_log_from (GNUNET_ERROR_TYPE_DEBUG, "tcp",
1418                      "Failed to create connection to `%4s' at `%s'\n",
1419                      GNUNET_i2s (&session->target), GNUNET_a2s (sb, sbs));
1420 #endif
1421     return NULL;
1422   }
1423   plugin->max_connections--;
1424 #if DEBUG_TCP_NAT
1425   GNUNET_log_from (GNUNET_ERROR_TYPE_DEBUG, "tcp",
1426                    "Asked to transmit to `%4s', creating fresh session using address `%s'.\n",
1427                    GNUNET_i2s (&session->target), GNUNET_a2s (sb, sbs));
1428 #endif
1429   session = create_session (plugin,
1430                             &address->peer,
1431                             GNUNET_SERVER_connect_socket (plugin->server, sa),
1432                             GNUNET_NO);
1433   session->connect_addr = GNUNET_malloc (addrlen);
1434   memcpy (session->connect_addr, address->address, addrlen);
1435   session->connect_alen = addrlen;
1436   if (addrlen != 0)
1437   {
1438     struct GNUNET_ATS_Information ats;
1439     ats = plugin->env->get_address_type (plugin->env->cls, sb ,sbs);
1440     session->ats_address_network_type = ats.value;
1441   }
1442   else
1443     GNUNET_break (0);
1444
1445   GNUNET_CONTAINER_multihashmap_put(plugin->sessionmap, &address->peer.hashPubKey, session, GNUNET_CONTAINER_MULTIHASHMAPOPTION_MULTIPLE);
1446
1447   /* Send TCP Welcome */
1448   process_pending_messages (session);
1449
1450   return session;
1451 }
1452
1453
1454 /**
1455  * Function that can be called to force a disconnect from the
1456  * specified neighbour.  This should also cancel all previously
1457  * scheduled transmissions.  Obviously the transmission may have been
1458  * partially completed already, which is OK.  The plugin is supposed
1459  * to close the connection (if applicable) and no longer call the
1460  * transmit continuation(s).
1461  *
1462  * Finally, plugin MUST NOT call the services's receive function to
1463  * notify the service that the connection to the specified target was
1464  * closed after a getting this call.
1465  *
1466  * @param cls closure
1467  * @param target peer for which the last transmission is
1468  *        to be cancelled
1469  */
1470 static void
1471 tcp_plugin_disconnect (void *cls, const struct GNUNET_PeerIdentity *target)
1472 {
1473   struct Plugin *plugin = cls;
1474   struct Session *session;
1475   struct Session *next;
1476   struct PendingMessage *pm;
1477
1478 #if DEBUG_TCP
1479   GNUNET_log_from (GNUNET_ERROR_TYPE_DEBUG, "tcp",
1480                    "Asked to cancel session with `%4s'\n", GNUNET_i2s (target));
1481 #endif
1482   next = plugin->sessions;
1483   while (NULL != (session = next))
1484   {
1485     next = session->next;
1486     if (0 !=
1487         memcmp (target, &session->target, sizeof (struct GNUNET_PeerIdentity)))
1488       continue;
1489     pm = session->pending_messages_head;
1490     while (pm != NULL)
1491     {
1492       pm->transmit_cont = NULL;
1493       pm->transmit_cont_cls = NULL;
1494       pm = pm->next;
1495     }
1496     GNUNET_STATISTICS_update (session->plugin->env->stats,
1497                               gettext_noop
1498                               ("# transport-service disconnect requests for TCP"),
1499                               1, GNUNET_NO);
1500     disconnect_session (session);
1501   }
1502 }
1503
1504
1505 /**
1506  * Context for address to string conversion.
1507  */
1508 struct PrettyPrinterContext
1509 {
1510   /**
1511    * Function to call with the result.
1512    */
1513   GNUNET_TRANSPORT_AddressStringCallback asc;
1514
1515   /**
1516    * Clsoure for 'asc'.
1517    */
1518   void *asc_cls;
1519
1520   /**
1521    * Port to add after the IP address.
1522    */
1523   uint16_t port;
1524 };
1525
1526
1527 /**
1528  * Append our port and forward the result.
1529  *
1530  * @param cls the 'struct PrettyPrinterContext*'
1531  * @param hostname hostname part of the address
1532  */
1533 static void
1534 append_port (void *cls, const char *hostname)
1535 {
1536   struct PrettyPrinterContext *ppc = cls;
1537   char *ret;
1538
1539   if (hostname == NULL)
1540   {
1541     ppc->asc (ppc->asc_cls, NULL);
1542     GNUNET_free (ppc);
1543     return;
1544   }
1545   GNUNET_asprintf (&ret, "%s:%d", hostname, ppc->port);
1546   ppc->asc (ppc->asc_cls, ret);
1547   GNUNET_free (ret);
1548 }
1549
1550
1551 /**
1552  * Convert the transports address to a nice, human-readable
1553  * format.
1554  *
1555  * @param cls closure
1556  * @param type name of the transport that generated the address
1557  * @param addr one of the addresses of the host, NULL for the last address
1558  *        the specific address format depends on the transport
1559  * @param addrlen length of the address
1560  * @param numeric should (IP) addresses be displayed in numeric form?
1561  * @param timeout after how long should we give up?
1562  * @param asc function to call on each string
1563  * @param asc_cls closure for asc
1564  */
1565 static void
1566 tcp_plugin_address_pretty_printer (void *cls, const char *type,
1567                                    const void *addr, size_t addrlen,
1568                                    int numeric,
1569                                    struct GNUNET_TIME_Relative timeout,
1570                                    GNUNET_TRANSPORT_AddressStringCallback asc,
1571                                    void *asc_cls)
1572 {
1573   struct PrettyPrinterContext *ppc;
1574   const void *sb;
1575   size_t sbs;
1576   struct sockaddr_in a4;
1577   struct sockaddr_in6 a6;
1578   const struct IPv4TcpAddress *t4;
1579   const struct IPv6TcpAddress *t6;
1580   uint16_t port;
1581
1582   if (addrlen == sizeof (struct IPv6TcpAddress))
1583   {
1584     t6 = addr;
1585     memset (&a6, 0, sizeof (a6));
1586     a6.sin6_family = AF_INET6;
1587     a6.sin6_port = t6->t6_port;
1588     memcpy (&a6.sin6_addr, &t6->ipv6_addr, sizeof (struct in6_addr));
1589     port = ntohs (t6->t6_port);
1590     sb = &a6;
1591     sbs = sizeof (a6);
1592   }
1593   else if (addrlen == sizeof (struct IPv4TcpAddress))
1594   {
1595     t4 = addr;
1596     memset (&a4, 0, sizeof (a4));
1597     a4.sin_family = AF_INET;
1598     a4.sin_port = t4->t4_port;
1599     a4.sin_addr.s_addr = t4->ipv4_addr;
1600     port = ntohs (t4->t4_port);
1601     sb = &a4;
1602     sbs = sizeof (a4);
1603   }
1604   else
1605   {
1606     /* invalid address */
1607     GNUNET_break_op (0);
1608     asc (asc_cls, NULL);
1609     return;
1610   }
1611   ppc = GNUNET_malloc (sizeof (struct PrettyPrinterContext));
1612   ppc->asc = asc;
1613   ppc->asc_cls = asc_cls;
1614   ppc->port = port;
1615   GNUNET_RESOLVER_hostname_get (sb, sbs, !numeric, timeout, &append_port, ppc);
1616 }
1617
1618
1619 /**
1620  * Check if the given port is plausible (must be either our listen
1621  * port or our advertised port), or any port if we are behind NAT
1622  * and do not have a port open.  If it is neither, we return
1623  * GNUNET_SYSERR.
1624  *
1625  * @param plugin global variables
1626  * @param in_port port number to check
1627  * @return GNUNET_OK if port is either open_port or adv_port
1628  */
1629 static int
1630 check_port (struct Plugin *plugin, uint16_t in_port)
1631 {
1632   if ((in_port == plugin->adv_port) || (in_port == plugin->open_port))
1633     return GNUNET_OK;
1634   return GNUNET_SYSERR;
1635 }
1636
1637
1638 /**
1639  * Function that will be called to check if a binary address for this
1640  * plugin is well-formed and corresponds to an address for THIS peer
1641  * (as per our configuration).  Naturally, if absolutely necessary,
1642  * plugins can be a bit conservative in their answer, but in general
1643  * plugins should make sure that the address does not redirect
1644  * traffic to a 3rd party that might try to man-in-the-middle our
1645  * traffic.
1646  *
1647  * @param cls closure, our 'struct Plugin*'
1648  * @param addr pointer to the address
1649  * @param addrlen length of addr
1650  * @return GNUNET_OK if this is a plausible address for this peer
1651  *         and transport, GNUNET_SYSERR if not
1652  */
1653 static int
1654 tcp_plugin_check_address (void *cls, const void *addr, size_t addrlen)
1655 {
1656   struct Plugin *plugin = cls;
1657   struct IPv4TcpAddress *v4;
1658   struct IPv6TcpAddress *v6;
1659
1660   if ((addrlen != sizeof (struct IPv4TcpAddress)) &&
1661       (addrlen != sizeof (struct IPv6TcpAddress)))
1662   {
1663     GNUNET_break_op (0);
1664     return GNUNET_SYSERR;
1665   }
1666   if (addrlen == sizeof (struct IPv4TcpAddress))
1667   {
1668     v4 = (struct IPv4TcpAddress *) addr;
1669     if (GNUNET_OK != check_port (plugin, ntohs (v4->t4_port)))
1670       return GNUNET_SYSERR;
1671     if (GNUNET_OK !=
1672         GNUNET_NAT_test_address (plugin->nat, &v4->ipv4_addr,
1673                                  sizeof (struct in_addr)))
1674       return GNUNET_SYSERR;
1675   }
1676   else
1677   {
1678     v6 = (struct IPv6TcpAddress *) addr;
1679     if (IN6_IS_ADDR_LINKLOCAL (&v6->ipv6_addr))
1680     {
1681       GNUNET_break_op (0);
1682       return GNUNET_SYSERR;
1683     }
1684     if (GNUNET_OK != check_port (plugin, ntohs (v6->t6_port)))
1685       return GNUNET_SYSERR;
1686     if (GNUNET_OK !=
1687         GNUNET_NAT_test_address (plugin->nat, &v6->ipv6_addr,
1688                                  sizeof (struct in6_addr)))
1689       return GNUNET_SYSERR;
1690   }
1691   return GNUNET_OK;
1692 }
1693
1694
1695 /**
1696  * We've received a nat probe from this peer via TCP.  Finish
1697  * creating the client session and resume sending of queued
1698  * messages.
1699  *
1700  * @param cls closure
1701  * @param client identification of the client
1702  * @param message the actual message
1703  */
1704 static void
1705 handle_tcp_nat_probe (void *cls, struct GNUNET_SERVER_Client *client,
1706                       const struct GNUNET_MessageHeader *message)
1707 {
1708   struct Plugin *plugin = cls;
1709   struct Session *session;
1710   const struct TCP_NAT_ProbeMessage *tcp_nat_probe;
1711   size_t alen;
1712   void *vaddr;
1713   struct IPv4TcpAddress *t4;
1714   struct IPv6TcpAddress *t6;
1715   const struct sockaddr_in *s4;
1716   const struct sockaddr_in6 *s6;
1717
1718 #if DEBUG_TCP_NAT
1719   GNUNET_log_from (GNUNET_ERROR_TYPE_DEBUG, "tcp", "received NAT probe\n");
1720 #endif
1721   /* We have received a TCP NAT probe, meaning we (hopefully) initiated
1722    * a connection to this peer by running gnunet-nat-client.  This peer
1723    * received the punch message and now wants us to use the new connection
1724    * as the default for that peer.  Do so and then send a WELCOME message
1725    * so we can really be connected!
1726    */
1727   if (ntohs (message->size) != sizeof (struct TCP_NAT_ProbeMessage))
1728   {
1729     GNUNET_break_op (0);
1730     GNUNET_SERVER_receive_done (client, GNUNET_SYSERR);
1731     return;
1732   }
1733
1734   tcp_nat_probe = (const struct TCP_NAT_ProbeMessage *) message;
1735   if (0 ==
1736       memcmp (&tcp_nat_probe->clientIdentity, plugin->env->my_identity,
1737               sizeof (struct GNUNET_PeerIdentity)))
1738   {
1739     /* refuse connections from ourselves */
1740     GNUNET_SERVER_receive_done (client, GNUNET_SYSERR);
1741     return;
1742   }
1743
1744   session =
1745       GNUNET_CONTAINER_multihashmap_get (plugin->nat_wait_conns,
1746                                          &tcp_nat_probe->
1747                                          clientIdentity.hashPubKey);
1748   if (session == NULL)
1749   {
1750 #if DEBUG_TCP_NAT
1751     GNUNET_log_from (GNUNET_ERROR_TYPE_DEBUG, "tcp",
1752                      "Did NOT find session for NAT probe!\n");
1753 #endif
1754     GNUNET_SERVER_receive_done (client, GNUNET_OK);
1755     return;
1756   }
1757 #if DEBUG_TCP_NAT
1758   GNUNET_log_from (GNUNET_ERROR_TYPE_DEBUG, "tcp",
1759                    "Found session for NAT probe!\n");
1760 #endif
1761   GNUNET_assert (GNUNET_CONTAINER_multihashmap_remove
1762                  (plugin->nat_wait_conns,
1763                   &tcp_nat_probe->clientIdentity.hashPubKey,
1764                   session) == GNUNET_YES);
1765   if (GNUNET_OK != GNUNET_SERVER_client_get_address (client, &vaddr, &alen))
1766   {
1767     GNUNET_break (0);
1768     GNUNET_free (session);
1769     GNUNET_SERVER_receive_done (client, GNUNET_OK);
1770     return;
1771   }
1772
1773   GNUNET_SERVER_client_keep (client);
1774   session->client = client;
1775   session->last_activity = GNUNET_TIME_absolute_get ();
1776   session->inbound = GNUNET_NO;
1777
1778 #if DEBUG_TCP_NAT
1779   GNUNET_log_from (GNUNET_ERROR_TYPE_DEBUG, "tcp",
1780                    "Found address `%s' for incoming connection\n",
1781                    GNUNET_a2s (vaddr, alen));
1782 #endif
1783   switch (((const struct sockaddr *) vaddr)->sa_family)
1784   {
1785   case AF_INET:
1786     s4 = vaddr;
1787     t4 = GNUNET_malloc (sizeof (struct IPv4TcpAddress));
1788     t4->t4_port = s4->sin_port;
1789     t4->ipv4_addr = s4->sin_addr.s_addr;
1790     session->connect_addr = t4;
1791     session->connect_alen = sizeof (struct IPv4TcpAddress);
1792     break;
1793   case AF_INET6:
1794     s6 = vaddr;
1795     t6 = GNUNET_malloc (sizeof (struct IPv6TcpAddress));
1796     t6->t6_port = s6->sin6_port;
1797     memcpy (&t6->ipv6_addr, &s6->sin6_addr, sizeof (struct in6_addr));
1798     session->connect_addr = t6;
1799     session->connect_alen = sizeof (struct IPv6TcpAddress);
1800     break;
1801   default:
1802     GNUNET_break_op (0);
1803 #if DEBUG_TCP_NAT
1804     GNUNET_log_from (GNUNET_ERROR_TYPE_DEBUG, "tcp",
1805                      "Bad address for incoming connection!\n");
1806 #endif
1807     GNUNET_free (vaddr);
1808     GNUNET_SERVER_client_drop (client);
1809     GNUNET_free (session);
1810     GNUNET_SERVER_receive_done (client, GNUNET_SYSERR);
1811     return;
1812   }
1813   GNUNET_free (vaddr);
1814
1815   session->next = plugin->sessions;
1816   plugin->sessions = session;
1817   GNUNET_STATISTICS_update (plugin->env->stats,
1818                             gettext_noop ("# TCP sessions active"), 1,
1819                             GNUNET_NO);
1820   process_pending_messages (session);
1821   GNUNET_SERVER_receive_done (client, GNUNET_OK);
1822 }
1823
1824
1825 /**
1826  * We've received a welcome from this peer via TCP.  Possibly create a
1827  * fresh client record and send back our welcome.
1828  *
1829  * @param cls closure
1830  * @param client identification of the client
1831  * @param message the actual message
1832  */
1833 static void
1834 handle_tcp_welcome (void *cls, struct GNUNET_SERVER_Client *client,
1835                     const struct GNUNET_MessageHeader *message)
1836 {
1837   struct Plugin *plugin = cls;
1838   const struct WelcomeMessage *wm = (const struct WelcomeMessage *) message;
1839   struct Session *session;
1840   size_t alen;
1841   void *vaddr;
1842   struct IPv4TcpAddress *t4;
1843   struct IPv6TcpAddress *t6;
1844   const struct sockaddr_in *s4;
1845   const struct sockaddr_in6 *s6;
1846
1847   if (0 ==
1848       memcmp (&wm->clientIdentity, plugin->env->my_identity,
1849               sizeof (struct GNUNET_PeerIdentity)))
1850   {
1851     /* refuse connections from ourselves */
1852     GNUNET_SERVER_receive_done (client, GNUNET_SYSERR);
1853     return;
1854   }
1855 #if DEBUG_TCP
1856   GNUNET_log_from (GNUNET_ERROR_TYPE_DEBUG, "tcp",
1857                    "Received %s message from `%4s'.\n", "WELCOME",
1858                    GNUNET_i2s (&wm->clientIdentity));
1859 #endif
1860   GNUNET_STATISTICS_update (plugin->env->stats,
1861                             gettext_noop ("# TCP WELCOME messages received"), 1,
1862                             GNUNET_NO);
1863   session = find_session_by_client (plugin, client);
1864
1865   if (session == NULL)
1866   {
1867 #if DEBUG_TCP_NAT
1868     GNUNET_log_from (GNUNET_ERROR_TYPE_DEBUG, "tcp",
1869                      "Received %s message from a `%4s', creating new session\n",
1870                      "WELCOME", GNUNET_i2s (&wm->clientIdentity));
1871 #endif
1872     GNUNET_SERVER_client_keep (client);
1873     session = create_session (plugin, &wm->clientIdentity, client, GNUNET_NO);
1874     session->inbound = GNUNET_YES;
1875     if (GNUNET_OK == GNUNET_SERVER_client_get_address (client, &vaddr, &alen))
1876     {
1877 #if DEBUG_TCP_NAT
1878       GNUNET_log_from (GNUNET_ERROR_TYPE_DEBUG, "tcp",
1879                        "Found address `%s' for incoming connection\n",
1880                        GNUNET_a2s (vaddr, alen));
1881 #endif
1882
1883       if (alen == sizeof (struct sockaddr_in))
1884       {
1885         s4 = vaddr;
1886         t4 = GNUNET_malloc (sizeof (struct IPv4TcpAddress));
1887         t4->t4_port = s4->sin_port;
1888         t4->ipv4_addr = s4->sin_addr.s_addr;
1889         session->connect_addr = t4;
1890         session->connect_alen = sizeof (struct IPv4TcpAddress);
1891       }
1892       else if (alen == sizeof (struct sockaddr_in6))
1893       {
1894         s6 = vaddr;
1895         t6 = GNUNET_malloc (sizeof (struct IPv6TcpAddress));
1896         t6->t6_port = s6->sin6_port;
1897         memcpy (&t6->ipv6_addr, &s6->sin6_addr, sizeof (struct in6_addr));
1898         session->connect_addr = t6;
1899         session->connect_alen = sizeof (struct IPv6TcpAddress);
1900       }
1901
1902       struct GNUNET_ATS_Information ats;
1903       ats = plugin->env->get_address_type (plugin->env->cls, vaddr ,alen);
1904       session->ats_address_network_type = ats.value;
1905
1906       GNUNET_free (vaddr);
1907     }
1908     else
1909     {
1910 #if DEBUG_TCP
1911       GNUNET_log_from (GNUNET_ERROR_TYPE_DEBUG, "tcp",
1912                        "Did not obtain TCP socket address for incoming connection\n");
1913 #endif
1914     }
1915     process_pending_messages (session);
1916   }
1917   else
1918   {
1919 #if DEBUG_TCP_NAT
1920     if (GNUNET_OK == GNUNET_SERVER_client_get_address (client, &vaddr, &alen))
1921     {
1922       GNUNET_log_from (GNUNET_ERROR_TYPE_DEBUG, "tcp",
1923                        "Found address `%s' (already have session)\n",
1924                        GNUNET_a2s (vaddr, alen));
1925       GNUNET_free (vaddr);
1926     }
1927 #endif
1928   }
1929
1930   if (session->expecting_welcome != GNUNET_YES)
1931   {
1932     GNUNET_break_op (0);
1933     GNUNET_SERVER_receive_done (client, GNUNET_SYSERR);
1934     return;
1935   }
1936   session->last_activity = GNUNET_TIME_absolute_get ();
1937   session->expecting_welcome = GNUNET_NO;
1938   GNUNET_SERVER_client_set_timeout (client,
1939                                     GNUNET_CONSTANTS_IDLE_CONNECTION_TIMEOUT);
1940   GNUNET_SERVER_receive_done (client, GNUNET_OK);
1941 }
1942
1943
1944 /**
1945  * Task to signal the server that we can continue
1946  * receiving from the TCP client now.
1947  *
1948  * @param cls the 'struct Session*'
1949  * @param tc task context (unused)
1950  */
1951 static void
1952 delayed_done (void *cls, const struct GNUNET_SCHEDULER_TaskContext *tc)
1953 {
1954   struct Session *session = cls;
1955   struct GNUNET_TIME_Relative delay;
1956   struct GNUNET_ATS_Information ats;
1957
1958   session->receive_delay_task = GNUNET_SCHEDULER_NO_TASK;
1959   delay =
1960       session->plugin->env->receive (session->plugin->env->cls,
1961                                      &session->target, NULL, &ats, 0, session,
1962                                      NULL, 0);
1963   if (delay.rel_value == 0)
1964     GNUNET_SERVER_receive_done (session->client, GNUNET_OK);
1965   else
1966     session->receive_delay_task =
1967         GNUNET_SCHEDULER_add_delayed (delay, &delayed_done, session);
1968 }
1969
1970
1971 /**
1972  * We've received data for this peer via TCP.  Unbox,
1973  * compute latency and forward.
1974  *
1975  * @param cls closure
1976  * @param client identification of the client
1977  * @param message the actual message
1978  */
1979 static void
1980 handle_tcp_data (void *cls, struct GNUNET_SERVER_Client *client,
1981                  const struct GNUNET_MessageHeader *message)
1982 {
1983   struct Plugin *plugin = cls;
1984   struct Session *session;
1985   struct GNUNET_TIME_Relative delay;
1986   uint16_t type;
1987
1988   type = ntohs (message->type);
1989   if ((GNUNET_MESSAGE_TYPE_TRANSPORT_TCP_WELCOME == type) ||
1990       (GNUNET_MESSAGE_TYPE_TRANSPORT_TCP_NAT_PROBE == type))
1991   {
1992     /* We don't want to propagate WELCOME and NAT Probe messages up! */
1993     GNUNET_SERVER_receive_done (client, GNUNET_OK);
1994     return;
1995   }
1996   session = find_session_by_client (plugin, client);
1997   if ((NULL == session) || (GNUNET_YES == session->expecting_welcome))
1998   {
1999     GNUNET_SERVER_receive_done (client, GNUNET_SYSERR);
2000     return;
2001   }
2002   session->last_activity = GNUNET_TIME_absolute_get ();
2003 #if DEBUG_TCP
2004   GNUNET_log_from (GNUNET_ERROR_TYPE_DEBUG, "tcp",
2005                    "Passing %u bytes of type %u from `%4s' to transport service.\n",
2006                    (unsigned int) ntohs (message->size),
2007                    (unsigned int) ntohs (message->type),
2008                    GNUNET_i2s (&session->target));
2009 #endif
2010   GNUNET_STATISTICS_update (plugin->env->stats,
2011                             gettext_noop ("# bytes received via TCP"),
2012                             ntohs (message->size), GNUNET_NO);
2013   struct GNUNET_ATS_Information distance[2];
2014
2015   distance[0].type = htonl (GNUNET_ATS_QUALITY_NET_DISTANCE);
2016   distance[0].value = htonl (1);
2017   distance[1].type = htonl (GNUNET_ATS_NETWORK_TYPE);
2018   distance[1].value = session->ats_address_network_type;
2019   GNUNET_break (ntohl(session->ats_address_network_type) != GNUNET_ATS_NET_UNSPECIFIED);
2020
2021   delay =
2022       plugin->env->receive (plugin->env->cls, &session->target, message,
2023                             (const struct GNUNET_ATS_Information *) &distance,
2024                             1, session,
2025                             (GNUNET_YES ==
2026                              session->inbound) ? NULL : session->connect_addr,
2027                             (GNUNET_YES ==
2028                              session->inbound) ? 0 : session->connect_alen);
2029   if (delay.rel_value == 0)
2030   {
2031     GNUNET_SERVER_receive_done (client, GNUNET_OK);
2032   }
2033   else
2034   {
2035 #if DEBUG_TCP
2036     GNUNET_log_from (GNUNET_ERROR_TYPE_DEBUG, "tcp",
2037                      "Throttling receiving from `%s' for %llu ms\n",
2038                      GNUNET_i2s (&session->target),
2039                      (unsigned long long) delay.rel_value);
2040 #endif
2041     GNUNET_SERVER_disable_receive_done_warning (client);
2042     session->receive_delay_task =
2043         GNUNET_SCHEDULER_add_delayed (delay, &delayed_done, session);
2044   }
2045 }
2046
2047
2048 /**
2049  * Functions with this signature are called whenever a peer
2050  * is disconnected on the network level.
2051  *
2052  * @param cls closure
2053  * @param client identification of the client
2054  */
2055 static void
2056 disconnect_notify (void *cls, struct GNUNET_SERVER_Client *client)
2057 {
2058   struct Plugin *plugin = cls;
2059   struct Session *session;
2060
2061   if (client == NULL)
2062     return;
2063   plugin->max_connections++;
2064   session = find_session_by_client (plugin, client);
2065   if (session == NULL)
2066     return;                     /* unknown, nothing to do */
2067 #if DEBUG_TCP
2068   GNUNET_log_from (GNUNET_ERROR_TYPE_DEBUG, "tcp",
2069                    "Destroying session of `%4s' with %s due to network-level disconnect.\n",
2070                    GNUNET_i2s (&session->target),
2071                    (session->connect_addr !=
2072                     NULL) ? tcp_address_to_string (session->plugin,
2073                                                    session->connect_addr,
2074                                                    session->connect_alen) :
2075                    "*");
2076 #endif
2077   GNUNET_STATISTICS_update (session->plugin->env->stats,
2078                             gettext_noop
2079                             ("# network-level TCP disconnect events"), 1,
2080                             GNUNET_NO);
2081   disconnect_session (session);
2082 }
2083
2084
2085 /**
2086  * We can now send a probe message, copy into buffer to really send.
2087  *
2088  * @param cls closure, a struct TCPProbeContext
2089  * @param size max size to copy
2090  * @param buf buffer to copy message to
2091  * @return number of bytes copied into buf
2092  */
2093 static size_t
2094 notify_send_probe (void *cls, size_t size, void *buf)
2095 {
2096   struct TCPProbeContext *tcp_probe_ctx = cls;
2097   struct Plugin *plugin = tcp_probe_ctx->plugin;
2098   size_t ret;
2099
2100   tcp_probe_ctx->transmit_handle = NULL;
2101   GNUNET_CONTAINER_DLL_remove (plugin->probe_head, plugin->probe_tail,
2102                                tcp_probe_ctx);
2103   if (buf == NULL)
2104   {
2105     GNUNET_CONNECTION_destroy (tcp_probe_ctx->sock, GNUNET_NO);
2106     GNUNET_free (tcp_probe_ctx);
2107     return 0;
2108   }
2109   GNUNET_assert (size >= sizeof (tcp_probe_ctx->message));
2110   memcpy (buf, &tcp_probe_ctx->message, sizeof (tcp_probe_ctx->message));
2111   GNUNET_SERVER_connect_socket (tcp_probe_ctx->plugin->server,
2112                                 tcp_probe_ctx->sock);
2113   ret = sizeof (tcp_probe_ctx->message);
2114   GNUNET_free (tcp_probe_ctx);
2115   return ret;
2116 }
2117
2118
2119 /**
2120  * Function called by the NAT subsystem suggesting another peer wants
2121  * to connect to us via connection reversal.  Try to connect back to the
2122  * given IP.
2123  *
2124  * @param cls closure
2125  * @param addr address to try
2126  * @param addrlen number of bytes in addr
2127  */
2128 static void
2129 try_connection_reversal (void *cls, const struct sockaddr *addr,
2130                          socklen_t addrlen)
2131 {
2132   struct Plugin *plugin = cls;
2133   struct GNUNET_CONNECTION_Handle *sock;
2134   struct TCPProbeContext *tcp_probe_ctx;
2135
2136   /**
2137    * We have received an ICMP response, ostensibly from a peer
2138    * that wants to connect to us! Send a message to establish a connection.
2139    */
2140   sock = GNUNET_CONNECTION_create_from_sockaddr (AF_INET, addr, addrlen);
2141   if (sock == NULL)
2142   {
2143     /* failed for some odd reason (out of sockets?); ignore attempt */
2144     return;
2145   }
2146
2147   /* FIXME: do we need to track these probe context objects so that
2148    * we can clean them up on plugin unload? */
2149   tcp_probe_ctx = GNUNET_malloc (sizeof (struct TCPProbeContext));
2150   tcp_probe_ctx->message.header.size =
2151       htons (sizeof (struct TCP_NAT_ProbeMessage));
2152   tcp_probe_ctx->message.header.type =
2153       htons (GNUNET_MESSAGE_TYPE_TRANSPORT_TCP_NAT_PROBE);
2154   memcpy (&tcp_probe_ctx->message.clientIdentity, plugin->env->my_identity,
2155           sizeof (struct GNUNET_PeerIdentity));
2156   tcp_probe_ctx->plugin = plugin;
2157   tcp_probe_ctx->sock = sock;
2158   GNUNET_CONTAINER_DLL_insert (plugin->probe_head, plugin->probe_tail,
2159                                tcp_probe_ctx);
2160   tcp_probe_ctx->transmit_handle =
2161       GNUNET_CONNECTION_notify_transmit_ready (sock,
2162                                                ntohs (tcp_probe_ctx->
2163                                                       message.header.size),
2164                                                GNUNET_TIME_UNIT_FOREVER_REL,
2165                                                &notify_send_probe,
2166                                                tcp_probe_ctx);
2167
2168 }
2169
2170
2171 /**
2172  * Entry point for the plugin.
2173  *
2174  * @param cls closure, the 'struct GNUNET_TRANSPORT_PluginEnvironment*'
2175  * @return the 'struct GNUNET_TRANSPORT_PluginFunctions*' or NULL on error
2176  */
2177 void *
2178 libgnunet_plugin_transport_tcp_init (void *cls)
2179 {
2180   static const struct GNUNET_SERVER_MessageHandler my_handlers[] = {
2181     {&handle_tcp_welcome, NULL, GNUNET_MESSAGE_TYPE_TRANSPORT_TCP_WELCOME,
2182      sizeof (struct WelcomeMessage)},
2183     {&handle_tcp_nat_probe, NULL, GNUNET_MESSAGE_TYPE_TRANSPORT_TCP_NAT_PROBE,
2184      sizeof (struct TCP_NAT_ProbeMessage)},
2185     {&handle_tcp_data, NULL, GNUNET_MESSAGE_TYPE_ALL, 0},
2186     {NULL, NULL, 0, 0}
2187   };
2188   struct GNUNET_TRANSPORT_PluginEnvironment *env = cls;
2189   struct GNUNET_TRANSPORT_PluginFunctions *api;
2190   struct Plugin *plugin;
2191   struct GNUNET_SERVICE_Context *service;
2192   unsigned long long aport;
2193   unsigned long long bport;
2194   unsigned long long max_connections;
2195   unsigned int i;
2196   struct GNUNET_TIME_Relative idle_timeout;
2197   int ret;
2198   struct sockaddr **addrs;
2199   socklen_t *addrlens;
2200
2201   if (GNUNET_OK !=
2202       GNUNET_CONFIGURATION_get_value_number (env->cfg, "transport-tcp",
2203                                              "MAX_CONNECTIONS",
2204                                              &max_connections))
2205     max_connections = 128;
2206
2207   aport = 0;
2208   if ((GNUNET_OK !=
2209        GNUNET_CONFIGURATION_get_value_number (env->cfg, "transport-tcp", "PORT",
2210                                               &bport)) || (bport > 65535) ||
2211       ((GNUNET_OK ==
2212         GNUNET_CONFIGURATION_get_value_number (env->cfg, "transport-tcp",
2213                                                "ADVERTISED-PORT", &aport)) &&
2214        (aport > 65535)))
2215   {
2216     GNUNET_log_from (GNUNET_ERROR_TYPE_ERROR, "tcp",
2217                      _
2218                      ("Require valid port number for service `%s' in configuration!\n"),
2219                      "transport-tcp");
2220     return NULL;
2221   }
2222   if (aport == 0)
2223     aport = bport;
2224   if (bport == 0)
2225     aport = 0;
2226   if (bport != 0)
2227   {
2228     service = GNUNET_SERVICE_start ("transport-tcp", env->cfg);
2229     if (service == NULL)
2230     {
2231       GNUNET_log_from (GNUNET_ERROR_TYPE_WARNING, "tcp",
2232                        _("Failed to start service.\n"));
2233       return NULL;
2234     }
2235   }
2236   else
2237     service = NULL;
2238
2239
2240
2241   plugin = GNUNET_malloc (sizeof (struct Plugin));
2242   plugin->sessionmap = GNUNET_CONTAINER_multihashmap_create(max_connections);
2243   plugin->max_connections = max_connections;
2244   plugin->open_port = bport;
2245   plugin->adv_port = aport;
2246   plugin->env = env;
2247   plugin->lsock = NULL;
2248   if ((service != NULL) &&
2249       (GNUNET_SYSERR !=
2250        (ret =
2251         GNUNET_SERVICE_get_server_addresses ("transport-tcp", env->cfg, &addrs,
2252                                              &addrlens))))
2253   {
2254     plugin->nat =
2255         GNUNET_NAT_register (env->cfg, GNUNET_YES, aport, (unsigned int) ret,
2256                              (const struct sockaddr **) addrs, addrlens,
2257                              &tcp_nat_port_map_callback,
2258                              &try_connection_reversal, plugin);
2259     while (ret > 0)
2260     {
2261       ret--;
2262       GNUNET_assert (addrs[ret] != NULL);
2263       GNUNET_free (addrs[ret]);
2264     }
2265     GNUNET_free_non_null (addrs);
2266     GNUNET_free_non_null (addrlens);
2267   }
2268   else
2269   {
2270     plugin->nat =
2271         GNUNET_NAT_register (env->cfg, GNUNET_YES, 0, 0, NULL, NULL, NULL,
2272                              &try_connection_reversal, plugin);
2273   }
2274   api = GNUNET_malloc (sizeof (struct GNUNET_TRANSPORT_PluginFunctions));
2275   api->cls = plugin;
2276   api->send = &tcp_plugin_send_old;
2277
2278   api->send_with_session = &tcp_plugin_send;
2279   api->get_session = &tcp_plugin_get_session;
2280
2281   api->disconnect = &tcp_plugin_disconnect;
2282   api->address_pretty_printer = &tcp_plugin_address_pretty_printer;
2283   api->check_address = &tcp_plugin_check_address;
2284   api->address_to_string = &tcp_address_to_string;
2285   plugin->service = service;
2286   if (service != NULL)
2287   {
2288     plugin->server = GNUNET_SERVICE_get_server (service);
2289   }
2290   else
2291   {
2292     if (GNUNET_OK !=
2293         GNUNET_CONFIGURATION_get_value_time (env->cfg, "transport-tcp",
2294                                              "TIMEOUT", &idle_timeout))
2295     {
2296       GNUNET_log_from (GNUNET_ERROR_TYPE_ERROR, "tcp",
2297                        _("Failed to find option %s in section %s!\n"),
2298                        "TIMEOUT", "transport-tcp");
2299       if (plugin->nat != NULL)
2300         GNUNET_NAT_unregister (plugin->nat);
2301       GNUNET_free (plugin);
2302       GNUNET_free (api);
2303       return NULL;
2304     }
2305     plugin->server =
2306         GNUNET_SERVER_create_with_sockets (&plugin_tcp_access_check, plugin,
2307                                            NULL, idle_timeout, GNUNET_YES);
2308   }
2309   plugin->handlers = GNUNET_malloc (sizeof (my_handlers));
2310   memcpy (plugin->handlers, my_handlers, sizeof (my_handlers));
2311   for (i = 0;
2312        i < sizeof (my_handlers) / sizeof (struct GNUNET_SERVER_MessageHandler);
2313        i++)
2314     plugin->handlers[i].callback_cls = plugin;
2315   GNUNET_SERVER_add_handlers (plugin->server, plugin->handlers);
2316   GNUNET_SERVER_disconnect_notify (plugin->server, &disconnect_notify, plugin);
2317   plugin->nat_wait_conns = GNUNET_CONTAINER_multihashmap_create (16);
2318   if (bport != 0)
2319     GNUNET_log_from (GNUNET_ERROR_TYPE_INFO, "tcp",
2320                      _("TCP transport listening on port %llu\n"), bport);
2321   else
2322     GNUNET_log_from (GNUNET_ERROR_TYPE_INFO, "tcp",
2323                      _
2324                      ("TCP transport not listening on any port (client only)\n"));
2325   if (aport != bport)
2326     GNUNET_log_from (GNUNET_ERROR_TYPE_INFO, "tcp",
2327                      _
2328                      ("TCP transport advertises itself as being on port %llu\n"),
2329                      aport);
2330   return api;
2331 }
2332
2333
2334 /**
2335  * Exit point from the plugin.
2336  */
2337 void *
2338 libgnunet_plugin_transport_tcp_done (void *cls)
2339 {
2340   struct GNUNET_TRANSPORT_PluginFunctions *api = cls;
2341   struct Plugin *plugin = api->cls;
2342   struct Session *session;
2343   struct TCPProbeContext *tcp_probe;
2344
2345   while (NULL != (session = plugin->sessions))
2346     disconnect_session (session);
2347   if (plugin->service != NULL)
2348     GNUNET_SERVICE_stop (plugin->service);
2349   else
2350     GNUNET_SERVER_destroy (plugin->server);
2351   GNUNET_free (plugin->handlers);
2352   if (plugin->nat != NULL)
2353     GNUNET_NAT_unregister (plugin->nat);
2354   while (NULL != (tcp_probe = plugin->probe_head))
2355   {
2356     GNUNET_CONTAINER_DLL_remove (plugin->probe_head, plugin->probe_tail,
2357                                  tcp_probe);
2358     GNUNET_CONNECTION_destroy (tcp_probe->sock, GNUNET_NO);
2359     GNUNET_free (tcp_probe);
2360   }
2361   GNUNET_CONTAINER_multihashmap_destroy (plugin->nat_wait_conns);
2362   GNUNET_CONTAINER_multihashmap_destroy (plugin->sessionmap);
2363   GNUNET_free (plugin);
2364   GNUNET_free (api);
2365   return NULL;
2366 }
2367
2368 /* end of plugin_transport_tcp.c */