src/transport/plugin_transport_tcp.c

   1 /*
   2      This file is part of GNUnet
   3      (C) 2002--2012 Christian Grothoff (and other contributing authors)
   4
   5      GNUnet is free software; you can redistribute it and/or modify
   6      it under the terms of the GNU General Public License as published
   7      by the Free Software Foundation; either version 3, or (at your
   8      option) any later version.
   9
  10      GNUnet is distributed in the hope that it will be useful, but
  11      WITHOUT ANY WARRANTY; without even the implied warranty of
  12      MERCHANTABILITY or FITNESS FOR A PARTICULAR PURPOSE.  See the GNU
  13      General Public License for more details.
  14
  15      You should have received a copy of the GNU General Public License
  16      along with GNUnet; see the file COPYING.  If not, write to the
  17      Free Software Foundation, Inc., 59 Temple Place - Suite 330,
  18      Boston, MA 02111-1307, USA.
  19 */
  20 /**
  21  * @file transport/plugin_transport_tcp.c
  22  * @brief Implementation of the TCP transport service
  23  * @author Christian Grothoff
  24  */
  25 #include "platform.h"
  26 #include "gnunet_hello_lib.h"
  27 #include "gnunet_constants.h"
  28 #include "gnunet_connection_lib.h"
  29 #include "gnunet_container_lib.h"
  30 #include "gnunet_nat_lib.h"
  31 #include "gnunet_os_lib.h"
  32 #include "gnunet_protocols.h"
  33 #include "gnunet_resolver_service.h"
  34 #include "gnunet_server_lib.h"
  35 #include "gnunet_service_lib.h"
  36 #include "gnunet_signatures.h"
  37 #include "gnunet_statistics_service.h"
  38 #include "gnunet_transport_service.h"
  39 #include "gnunet_transport_plugin.h"
  40 #include "transport.h"
  41
  42 #define LOG(kind,...) GNUNET_log_from (kind, "transport-tcp",__VA_ARGS__)
  43
  44 /**
  45  * How long until we give up on establishing an NAT connection?
  46  * Must be > 4 RTT
  47  */
  48 #define NAT_TIMEOUT GNUNET_TIME_relative_multiply (GNUNET_TIME_UNIT_SECONDS, 10)
  49
  50
  51 GNUNET_NETWORK_STRUCT_BEGIN
  52
  53 /**
  54  * Initial handshake message for a session.
  55  */
  56 struct WelcomeMessage
  57 {
  58   /**
  59    * Type is GNUNET_MESSAGE_TYPE_TRANSPORT_TCP_WELCOME.
  60    */
  61   struct GNUNET_MessageHeader header;
  62
  63   /**
  64    * Identity of the node connecting (TCP client)
  65    */
  66   struct GNUNET_PeerIdentity clientIdentity;
  67
  68 };
  69
  70
  71 /**
  72  * Basically a WELCOME message, but with the purpose
  73  * of giving the waiting peer a client handle to use
  74  */
  75 struct TCP_NAT_ProbeMessage
  76 {
  77   /**
  78    * Type is GNUNET_MESSAGE_TYPE_TRANSPORT_TCP_NAT_PROBE.
  79    */
  80   struct GNUNET_MessageHeader header;
  81
  82   /**
  83    * Identity of the sender of the message.
  84    */
  85   struct GNUNET_PeerIdentity clientIdentity;
  86
  87 };
  88 GNUNET_NETWORK_STRUCT_END
  89
  90 /**
  91  * Context for sending a NAT probe via TCP.
  92  */
  93 struct TCPProbeContext
  94 {
  95
  96   /**
  97    * Active probes are kept in a DLL.
  98    */
  99   struct TCPProbeContext *next;
 100
 101   /**
 102    * Active probes are kept in a DLL.
 103    */
 104   struct TCPProbeContext *prev;
 105
 106   /**
 107    * Probe connection.
 108    */
 109   struct GNUNET_CONNECTION_Handle *sock;
 110
 111   /**
 112    * Message to be sent.
 113    */
 114   struct TCP_NAT_ProbeMessage message;
 115
 116   /**
 117    * Handle to the transmission.
 118    */
 119   struct GNUNET_CONNECTION_TransmitHandle *transmit_handle;
 120
 121   /**
 122    * Transport plugin handle.
 123    */
 124   struct Plugin *plugin;
 125 };
 126
 127
 128 GNUNET_NETWORK_STRUCT_BEGIN
 129
 130 /**
 131  * Network format for IPv4 addresses.
 132  */
 133 struct IPv4TcpAddress
 134 {
 135   /**
 136    * IPv4 address, in network byte order.
 137    */
 138   uint32_t ipv4_addr GNUNET_PACKED;
 139
 140   /**
 141    * Port number, in network byte order.
 142    */
 143   uint16_t t4_port GNUNET_PACKED;
 144
 145 };
 146
 147
 148 /**
 149  * Network format for IPv6 addresses.
 150  */
 151 struct IPv6TcpAddress
 152 {
 153   /**
 154    * IPv6 address.
 155    */
 156   struct in6_addr ipv6_addr GNUNET_PACKED;
 157
 158   /**
 159    * Port number, in network byte order.
 160    */
 161   uint16_t t6_port GNUNET_PACKED;
 162
 163 };
 164 GNUNET_NETWORK_STRUCT_END
 165
 166 /**
 167  * Encapsulation of all of the state of the plugin.
 168  */
 169 struct Plugin;
 170
 171
 172 /**
 173  * Information kept for each message that is yet to
 174  * be transmitted.
 175  */
 176 struct PendingMessage
 177 {
 178
 179   /**
 180    * This is a doubly-linked list.
 181    */
 182   struct PendingMessage *next;
 183
 184   /**
 185    * This is a doubly-linked list.
 186    */
 187   struct PendingMessage *prev;
 188
 189   /**
 190    * The pending message
 191    */
 192   const char *msg;
 193
 194   /**
 195    * Continuation function to call once the message
 196    * has been sent.  Can be NULL if there is no
 197    * continuation to call.
 198    */
 199   GNUNET_TRANSPORT_TransmitContinuation transmit_cont;
 200
 201   /**
 202    * Closure for transmit_cont.
 203    */
 204   void *transmit_cont_cls;
 205
 206   /**
 207    * Timeout value for the pending message.
 208    */
 209   struct GNUNET_TIME_Absolute timeout;
 210
 211   /**
 212    * So that the gnunet-service-transport can group messages together,
 213    * these pending messages need to accept a message buffer and size
 214    * instead of just a GNUNET_MessageHeader.
 215    */
 216   size_t message_size;
 217
 218 };
 219
 220
 221 /**
 222  * Session handle for TCP connections.
 223  */
 224 struct Session
 225 {
 226   /**
 227    * To whom are we talking to (set to our identity
 228    * if we are still waiting for the welcome message)
 229    */
 230   struct GNUNET_PeerIdentity target;
 231
 232   /**
 233    * API requirement.
 234    */
 235   struct SessionHeader header;
 236
 237   /**
 238    * Pointer to the global plugin struct.
 239    */
 240   struct Plugin *plugin;
 241
 242   /**
 243    * The client (used to identify this connection)
 244    */
 245   struct GNUNET_SERVER_Client *client;
 246
 247   /**
 248    * Task cleaning up a NAT client connection establishment attempt;
 249    */
 250   GNUNET_SCHEDULER_TaskIdentifier nat_connection_timeout;
 251
 252   /**
 253    * Messages currently pending for transmission
 254    * to this peer, if any.
 255    */
 256   struct PendingMessage *pending_messages_head;
 257
 258   /**
 259    * Messages currently pending for transmission
 260    * to this peer, if any.
 261    */
 262   struct PendingMessage *pending_messages_tail;
 263
 264   /**
 265    * Handle for pending transmission request.
 266    */
 267   struct GNUNET_SERVER_TransmitHandle *transmit_handle;
 268
 269   /**
 270    * ID of task used to delay receiving more to throttle sender.
 271    */
 272   GNUNET_SCHEDULER_TaskIdentifier receive_delay_task;
 273
 274   /**
 275    * Session timeout task
 276    */
 277   GNUNET_SCHEDULER_TaskIdentifier timeout_task;
 278
 279   /**
 280    * Address of the other peer (either based on our 'connect'
 281    * call or on our 'accept' call).
 282    *
 283    * struct IPv4TcpAddress or struct IPv6TcpAddress
 284    *
 285    */
 286   void *addr;
 287
 288   /**
 289    * Length of connect_addr.
 290    */
 291   size_t addrlen;
 292
 293   /**
 294    * Last activity on this connection.  Used to select preferred
 295    * connection.
 296    */
 297   struct GNUNET_TIME_Absolute last_activity;
 298
 299   /**
 300    * Are we still expecting the welcome message? (GNUNET_YES/GNUNET_NO)
 301    */
 302   int expecting_welcome;
 303
 304   /**
 305    * Was this a connection that was inbound (we accepted)? (GNUNET_YES/GNUNET_NO)
 306    */
 307   int inbound;
 308
 309   /**
 310    * Was this session created using NAT traversal?
 311    */
 312   int is_nat;
 313
 314   /**
 315    * ATS network type in NBO
 316    */
 317   uint32_t ats_address_network_type;
 318 };
 319
 320
 321 /**
 322  * Encapsulation of all of the state of the plugin.
 323  */
 324 struct Plugin
 325 {
 326   /**
 327    * Our environment.
 328    */
 329   struct GNUNET_TRANSPORT_PluginEnvironment *env;
 330
 331   /**
 332    * The listen socket.
 333    */
 334   struct GNUNET_CONNECTION_Handle *lsock;
 335
 336   /**
 337    * Our handle to the NAT module.
 338    */
 339   struct GNUNET_NAT_Handle *nat;
 340
 341   /**
 342    * Map from peer identities to sessions for the given peer.
 343    */
 344   struct GNUNET_CONTAINER_MultiHashMap *sessionmap;
 345
 346   /**
 347    * Handle to the network service.
 348    */
 349   struct GNUNET_SERVICE_Context *service;
 350
 351   /**
 352    * Handle to the server for this service.
 353    */
 354   struct GNUNET_SERVER_Handle *server;
 355
 356   /**
 357    * Copy of the handler array where the closures are
 358    * set to this struct's instance.
 359    */
 360   struct GNUNET_SERVER_MessageHandler *handlers;
 361
 362   /**
 363    * Map of peers we have tried to contact behind a NAT
 364    */
 365   struct GNUNET_CONTAINER_MultiHashMap *nat_wait_conns;
 366
 367   /**
 368    * List of active TCP probes.
 369    */
 370   struct TCPProbeContext *probe_head;
 371
 372   /**
 373    * List of active TCP probes.
 374    */
 375   struct TCPProbeContext *probe_tail;
 376
 377   /**
 378    * Handle for (DYN)DNS lookup of our external IP.
 379    */
 380   struct GNUNET_RESOLVER_RequestHandle *ext_dns;
 381
 382   /**
 383    * How many more TCP sessions are we allowed to open right now?
 384    */
 385   unsigned long long max_connections;
 386
 387   /**
 388    * ID of task used to update our addresses when one expires.
 389    */
 390   GNUNET_SCHEDULER_TaskIdentifier address_update_task;
 391
 392   /**
 393    * Port that we are actually listening on.
 394    */
 395   uint16_t open_port;
 396
 397   /**
 398    * Port that the user said we would have visible to the
 399    * rest of the world.
 400    */
 401   uint16_t adv_port;
 402
 403 };
 404
 405
 406 /**
 407  * Start session timeout
 408  */
 409 static void
 410 start_session_timeout (struct Session *s);
 411
 412
 413 /**
 414  * Increment session timeout due to activity
 415  */
 416 static void
 417 reschedule_session_timeout (struct Session *s);
 418
 419
 420 /**
 421  * Cancel timeout
 422  */
 423 static void
 424 stop_session_timeout (struct Session *s);
 425
 426
 427 /* DEBUG CODE */
 428 static const char *
 429 tcp_address_to_string (void *cls, const void *addr, size_t addrlen);
 430
 431
 432 static unsigned int sessions;
 433
 434
 435 static void
 436 inc_sessions (struct Plugin *plugin, struct Session *session, int line)
 437 {
 438   sessions++;
 439   unsigned int size = GNUNET_CONTAINER_multihashmap_size(plugin->sessionmap);
 440   if (sessions != size)
 441     LOG (GNUNET_ERROR_TYPE_DEBUG, "Inconsistent sessions %u <-> session map size: %u\n",
 442         sessions, size);
 443   LOG (GNUNET_ERROR_TYPE_DEBUG, "%4i Session increased to %u (session map size: %u): `%s' `%s'\n",
 444       line,
 445       sessions,
 446       size,
 447       GNUNET_i2s (&session->target),
 448       tcp_address_to_string (NULL, session->addr, session->addrlen));
 449 }
 450
 451
 452 static void
 453 dec_sessions (struct Plugin *plugin, struct Session *session, int line)
 454 {
 455   GNUNET_assert (sessions > 0);
 456   unsigned int size = GNUNET_CONTAINER_multihashmap_size(plugin->sessionmap);
 457   sessions--;
 458   if (sessions != size)
 459     LOG (GNUNET_ERROR_TYPE_DEBUG, "Inconsistent sessions %u <-> session map size: %u\n",
 460       sessions, size);
 461   LOG (GNUNET_ERROR_TYPE_DEBUG, "%4i Session decreased to %u (session map size: %u): `%s' `%s'\n",
 462       line,
 463       sessions,
 464       size,
 465       GNUNET_i2s (&session->target),
 466       tcp_address_to_string (NULL, session->addr, session->addrlen));
 467 }
 468 /* DEBUG CODE */
 469
 470
 471 /**
 472  * Function to check if an inbound connection is acceptable.
 473  * Mostly used to limit the total number of open connections
 474  * we can have.
 475  *
 476  * @param cls the 'struct Plugin'
 477  * @param ucred credentials, if available, otherwise NULL
 478  * @param addr address
 479  * @param addrlen length of address
 480  * @return GNUNET_YES to allow, GNUNET_NO to deny, GNUNET_SYSERR
 481  *   for unknown address family (will be denied).
 482  */
 483 static int
 484 plugin_tcp_access_check (void *cls,
 485                          const struct GNUNET_CONNECTION_Credentials *ucred,
 486                          const struct sockaddr *addr, socklen_t addrlen)
 487 {
 488   struct Plugin *plugin = cls;
 489
 490   LOG (GNUNET_ERROR_TYPE_ERROR,
 491        "Accepting new incoming TCP connection from `%s'\n",
 492        GNUNET_a2s (addr, addrlen));
 493   if (0 == plugin->max_connections)
 494     return GNUNET_NO;
 495   plugin->max_connections--;
 496   return GNUNET_YES;
 497 }
 498
 499
 500 /**
 501  * Our external IP address/port mapping has changed.
 502  *
 503  * @param cls closure, the 'struct LocalAddrList'
 504  * @param add_remove GNUNET_YES to mean the new public IP address, GNUNET_NO to mean
 505  *     the previous (now invalid) one
 506  * @param addr either the previous or the new public IP address
 507  * @param addrlen actual lenght of the address
 508  */
 509 static void
 510 tcp_nat_port_map_callback (void *cls, int add_remove,
 511                            const struct sockaddr *addr, socklen_t addrlen)
 512 {
 513   struct Plugin *plugin = cls;
 514   struct IPv4TcpAddress t4;
 515   struct IPv6TcpAddress t6;
 516   void *arg;
 517   size_t args;
 518
 519   LOG (GNUNET_ERROR_TYPE_DEBUG,
 520        "NPMC called with %d for address `%s'\n", add_remove,
 521        GNUNET_a2s (addr, addrlen));
 522   /* convert 'addr' to our internal format */
 523   switch (addr->sa_family)
 524   {
 525   case AF_INET:
 526     GNUNET_assert (addrlen == sizeof (struct sockaddr_in));
 527     t4.ipv4_addr = ((struct sockaddr_in *) addr)->sin_addr.s_addr;
 528     t4.t4_port = ((struct sockaddr_in *) addr)->sin_port;
 529     arg = &t4;
 530     args = sizeof (t4);
 531     break;
 532   case AF_INET6:
 533     GNUNET_assert (addrlen == sizeof (struct sockaddr_in6));
 534     memcpy (&t6.ipv6_addr, &((struct sockaddr_in6 *) addr)->sin6_addr,
 535             sizeof (struct in6_addr));
 536     t6.t6_port = ((struct sockaddr_in6 *) addr)->sin6_port;
 537     arg = &t6;
 538     args = sizeof (t6);
 539     break;
 540   default:
 541     GNUNET_break (0);
 542     return;
 543   }
 544   /* modify our published address list */
 545   plugin->env->notify_address (plugin->env->cls, add_remove, arg, args, "tcp");
 546 }
 547
 548
 549 /**
 550  * Function called for a quick conversion of the binary address to
 551  * a numeric address.  Note that the caller must not free the
 552  * address and that the next call to this function is allowed
 553  * to override the address again.
 554  *
 555  * @param cls closure ('struct Plugin*')
 556  * @param addr binary address
 557  * @param addrlen length of the address
 558  * @return string representing the same address
 559  */
 560 static const char *
 561 tcp_address_to_string (void *cls, const void *addr, size_t addrlen)
 562 {
 563   static char rbuf[INET6_ADDRSTRLEN + 12];
 564   char buf[INET6_ADDRSTRLEN];
 565   const void *sb;
 566   struct in_addr a4;
 567   struct in6_addr a6;
 568   const struct IPv4TcpAddress *t4;
 569   const struct IPv6TcpAddress *t6;
 570   int af;
 571   uint16_t port;
 572
 573   switch (addrlen)
 574   {
 575   case sizeof (struct IPv6TcpAddress):
 576     t6 = addr;
 577     af = AF_INET6;
 578     port = ntohs (t6->t6_port);
 579     memcpy (&a6, &t6->ipv6_addr, sizeof (a6));
 580     sb = &a6;
 581     break;
 582   case sizeof (struct IPv4TcpAddress):
 583     t4 = addr;
 584     af = AF_INET;
 585     port = ntohs (t4->t4_port);
 586     memcpy (&a4, &t4->ipv4_addr, sizeof (a4));
 587     sb = &a4;
 588     break;
 589   default:
 590     LOG (GNUNET_ERROR_TYPE_ERROR,
 591          _("Unexpected address length: %u bytes\n"),
 592          (unsigned int) addrlen);
 593     GNUNET_break (0);
 594     return NULL;
 595   }
 596   if (NULL == inet_ntop (af, sb, buf, INET6_ADDRSTRLEN))
 597   {
 598     GNUNET_log_strerror (GNUNET_ERROR_TYPE_WARNING, "inet_ntop");
 599     return NULL;
 600   }
 601   GNUNET_snprintf (rbuf, sizeof (rbuf), (af == AF_INET6) ? "[%s]:%u" : "%s:%u",
 602                    buf, port);
 603   return rbuf;
 604 }
 605
 606
 607 /**
 608  * Function called to convert a string address to
 609  * a binary address.
 610  *
 611  * @param cls closure ('struct Plugin*')
 612  * @param addr string address
 613  * @param addrlen length of the address
 614  * @param buf location to store the buffer
 615  * @param added location to store the number of bytes in the buffer.
 616  *        If the function returns GNUNET_SYSERR, its contents are undefined.
 617  * @return GNUNET_OK on success, GNUNET_SYSERR on failure
 618  */
 619 static int
 620 tcp_string_to_address (void *cls, const char *addr, uint16_t addrlen,
 621     void **buf, size_t *added)
 622 {
 623   struct sockaddr_storage socket_address;
 624
 625   if ((NULL == addr) || (addrlen == 0))
 626   {
 627     GNUNET_break (0);
 628     return GNUNET_SYSERR;
 629   }
 630   if ('\0' != addr[addrlen - 1])
 631   {
 632     GNUNET_break (0);
 633     return GNUNET_SYSERR;
 634   }
 635   if (strlen (addr) != addrlen - 1)
 636   {
 637     GNUNET_break (0);
 638     return GNUNET_SYSERR;
 639   }
 640   if (GNUNET_OK !=
 641       GNUNET_STRINGS_to_address_ip (addr, strlen (addr),
 642                                     &socket_address))
 643   {
 644     GNUNET_break (0);
 645     return GNUNET_SYSERR;
 646   }
 647   switch (socket_address.ss_family)
 648   {
 649   case AF_INET:
 650     {
 651       struct IPv4TcpAddress *t4;
 652       struct sockaddr_in *in4 = (struct sockaddr_in *) &socket_address;
 653
 654       t4 = GNUNET_malloc (sizeof (struct IPv4TcpAddress));
 655       t4->ipv4_addr = in4->sin_addr.s_addr;
 656       t4->t4_port = in4->sin_port;
 657       *buf = t4;
 658       *added = sizeof (struct IPv4TcpAddress);
 659       return GNUNET_OK;
 660     }
 661   case AF_INET6:
 662     {
 663       struct IPv6TcpAddress *t6;
 664       struct sockaddr_in6 *in6 = (struct sockaddr_in6 *) &socket_address;
 665       t6 = GNUNET_malloc (sizeof (struct IPv6TcpAddress));
 666       t6->ipv6_addr = in6->sin6_addr;
 667       t6->t6_port = in6->sin6_port;
 668       *buf = t6;
 669       *added = sizeof (struct IPv6TcpAddress);
 670       return GNUNET_OK;
 671     }
 672   default:
 673     return GNUNET_SYSERR;
 674   }
 675 }
 676
 677
 678 struct SessionClientCtx
 679 {
 680   const struct GNUNET_SERVER_Client *client;
 681   struct Session *ret;
 682 };
 683
 684
 685 static int
 686 session_lookup_by_client_it (void *cls,
 687                              const struct GNUNET_HashCode * key,
 688                              void *value)
 689 {
 690   struct SessionClientCtx *sc_ctx = cls;
 691   struct Session *s = value;
 692
 693   if (s->client == sc_ctx->client)
 694   {
 695     sc_ctx->ret = s;
 696     return GNUNET_NO;
 697   }
 698   return GNUNET_YES;
 699 }
 700
 701
 702 /**
 703  * Find the session handle for the given client.
 704  *
 705  * @param plugin the plugin
 706  * @param client which client to find the session handle for
 707  * @return NULL if no matching session exists
 708  */
 709 static struct Session *
 710 lookup_session_by_client (struct Plugin *plugin,
 711                           const struct GNUNET_SERVER_Client *client)
 712 {
 713   struct SessionClientCtx sc_ctx;
 714
 715   sc_ctx.client = client;
 716   sc_ctx.ret = NULL;
 717   GNUNET_CONTAINER_multihashmap_iterate (plugin->sessionmap, &session_lookup_by_client_it, &sc_ctx);
 718   return sc_ctx.ret;
 719 }
 720
 721
 722 /**
 723  * Create a new session.  Also queues a welcome message.
 724  *
 725  * @param plugin the plugin
 726  * @param target peer to connect to
 727  * @param client client to use, reference counter must have already been increased
 728  * @param is_nat this a NAT session, we should wait for a client to
 729  *               connect to us from an address, then assign that to
 730  *               the session
 731  * @return new session object
 732  */
 733 static struct Session *
 734 create_session (struct Plugin *plugin, const struct GNUNET_PeerIdentity *target,
 735                 struct GNUNET_SERVER_Client *client, int is_nat)
 736 {
 737   struct Session *session;
 738   struct PendingMessage *pm;
 739   struct WelcomeMessage welcome;
 740
 741   if (GNUNET_YES != is_nat)
 742     GNUNET_assert (NULL != client);
 743   else
 744     GNUNET_assert (NULL == client);
 745
 746   LOG (GNUNET_ERROR_TYPE_DEBUG,
 747        "Creating new session for peer `%4s'\n",
 748        GNUNET_i2s (target));
 749   session = GNUNET_malloc (sizeof (struct Session));
 750   session->last_activity = GNUNET_TIME_absolute_get ();
 751   session->plugin = plugin;
 752   session->is_nat = is_nat;
 753   session->client = client;
 754   session->target = *target;
 755   session->expecting_welcome = GNUNET_YES;
 756   session->ats_address_network_type = htonl (GNUNET_ATS_NET_UNSPECIFIED);
 757   pm = GNUNET_malloc (sizeof (struct PendingMessage) +
 758                       sizeof (struct WelcomeMessage));
 759   pm->msg = (const char *) &pm[1];
 760   pm->message_size = sizeof (struct WelcomeMessage);
 761   welcome.header.size = htons (sizeof (struct WelcomeMessage));
 762   welcome.header.type = htons (GNUNET_MESSAGE_TYPE_TRANSPORT_TCP_WELCOME);
 763   welcome.clientIdentity = *plugin->env->my_identity;
 764   memcpy (&pm[1], &welcome, sizeof (welcome));
 765   pm->timeout = GNUNET_TIME_UNIT_FOREVER_ABS;
 766   GNUNET_STATISTICS_update (plugin->env->stats,
 767                             gettext_noop ("# bytes currently in TCP buffers"),
 768                             pm->message_size, GNUNET_NO);
 769   GNUNET_CONTAINER_DLL_insert (session->pending_messages_head,
 770                                session->pending_messages_tail, pm);
 771   if (GNUNET_YES != is_nat)
 772   {
 773     GNUNET_STATISTICS_update (plugin->env->stats,
 774                               gettext_noop ("# TCP sessions active"), 1,
 775                               GNUNET_NO);
 776   }
 777   start_session_timeout (session);
 778
 779   return session;
 780 }
 781
 782
 783 /**
 784  * If we have pending messages, ask the server to
 785  * transmit them (schedule the respective tasks, etc.)
 786  *
 787  * @param session for which session should we do this
 788  */
 789 static void
 790 process_pending_messages (struct Session *session);
 791
 792
 793 /**
 794  * Function called to notify a client about the socket
 795  * being ready to queue more data.  "buf" will be
 796  * NULL and "size" zero if the socket was closed for
 797  * writing in the meantime.
 798  *
 799  * @param cls closure
 800  * @param size number of bytes available in buf
 801  * @param buf where the callee should write the message
 802  * @return number of bytes written to buf
 803  */
 804 static size_t
 805 do_transmit (void *cls, size_t size, void *buf)
 806 {
 807   struct Session *session = cls;
 808   struct GNUNET_PeerIdentity pid;
 809   struct Plugin *plugin;
 810   struct PendingMessage *pos;
 811   struct PendingMessage *hd;
 812   struct PendingMessage *tl;
 813   struct GNUNET_TIME_Absolute now;
 814   char *cbuf;
 815   size_t ret;
 816
 817   GNUNET_assert (NULL != session);
 818   session->transmit_handle = NULL;
 819   plugin = session->plugin;
 820   if (NULL == buf)
 821   {
 822     LOG (GNUNET_ERROR_TYPE_DEBUG,
 823          "Timeout trying to transmit to peer `%4s', discarding message queue.\n",
 824          GNUNET_i2s (&session->target));
 825     /* timeout; cancel all messages that have already expired */
 826     hd = NULL;
 827     tl = NULL;
 828     ret = 0;
 829     now = GNUNET_TIME_absolute_get ();
 830     while ((NULL != (pos = session->pending_messages_head)) &&
 831            (pos->timeout.abs_value <= now.abs_value))
 832     {
 833       GNUNET_CONTAINER_DLL_remove (session->pending_messages_head,
 834                                    session->pending_messages_tail, pos);
 835       LOG (GNUNET_ERROR_TYPE_DEBUG,
 836            "Failed to transmit %u byte message to `%4s'.\n",
 837            pos->message_size, GNUNET_i2s (&session->target));
 838       ret += pos->message_size;
 839       GNUNET_CONTAINER_DLL_insert_after (hd, tl, tl, pos);
 840     }
 841     /* do this call before callbacks (so that if callbacks destroy
 842      * session, they have a chance to cancel actions done by this
 843      * call) */
 844     process_pending_messages (session);
 845     pid = session->target;
 846     /* no do callbacks and do not use session again since
 847      * the callbacks may abort the session */
 848     while (NULL != (pos = hd))
 849     {
 850       GNUNET_CONTAINER_DLL_remove (hd, tl, pos);
 851       if (pos->transmit_cont != NULL)
 852         pos->transmit_cont (pos->transmit_cont_cls, &pid, GNUNET_SYSERR, pos->message_size, 0);
 853       GNUNET_free (pos);
 854     }
 855     GNUNET_STATISTICS_update (plugin->env->stats,
 856                               gettext_noop ("# bytes currently in TCP buffers"),
 857                               -(int64_t) ret, GNUNET_NO);
 858     GNUNET_STATISTICS_update (plugin->env->stats,
 859                               gettext_noop
 860                               ("# bytes discarded by TCP (timeout)"), ret,
 861                               GNUNET_NO);
 862     return 0;
 863   }
 864   /* copy all pending messages that would fit */
 865   ret = 0;
 866   cbuf = buf;
 867   hd = NULL;
 868   tl = NULL;
 869   while (NULL != (pos = session->pending_messages_head))
 870   {
 871     if (ret + pos->message_size > size)
 872       break;
 873     GNUNET_CONTAINER_DLL_remove (session->pending_messages_head,
 874                                  session->pending_messages_tail, pos);
 875     GNUNET_assert (size >= pos->message_size);
 876     LOG (GNUNET_ERROR_TYPE_DEBUG,
 877          "Transmitting message of type %u\n",
 878          ntohs (((struct GNUNET_MessageHeader *) pos->msg)->type));
 879     /* FIXME: this memcpy can be up to 7% of our total runtime */
 880     memcpy (cbuf, pos->msg, pos->message_size);
 881     cbuf += pos->message_size;
 882     ret += pos->message_size;
 883     size -= pos->message_size;
 884     GNUNET_CONTAINER_DLL_insert_tail (hd, tl, pos);
 885   }
 886   /* schedule 'continuation' before callbacks so that callbacks that
 887    * cancel everything don't cause us to use a session that no longer
 888    * exists... */
 889   process_pending_messages (session);
 890   session->last_activity = GNUNET_TIME_absolute_get ();
 891   pid = session->target;
 892   /* we'll now call callbacks that may cancel the session; hence
 893    * we should not use 'session' after this point */
 894   while (NULL != (pos = hd))
 895   {
 896     GNUNET_CONTAINER_DLL_remove (hd, tl, pos);
 897     if (pos->transmit_cont != NULL)
 898       pos->transmit_cont (pos->transmit_cont_cls, &pid, GNUNET_OK, pos->message_size, pos->message_size); /* FIXME: include TCP overhead */
 899     GNUNET_free (pos);
 900   }
 901   GNUNET_assert (hd == NULL);
 902   GNUNET_assert (tl == NULL);
 903   LOG (GNUNET_ERROR_TYPE_DEBUG, "Transmitting %u bytes\n",
 904                    ret);
 905   GNUNET_STATISTICS_update (plugin->env->stats,
 906                             gettext_noop ("# bytes currently in TCP buffers"),
 907                             -(int64_t) ret, GNUNET_NO);
 908   GNUNET_STATISTICS_update (plugin->env->stats,
 909                             gettext_noop ("# bytes transmitted via TCP"), ret,
 910                             GNUNET_NO);
 911   return ret;
 912 }
 913
 914
 915 /**
 916  * If we have pending messages, ask the server to
 917  * transmit them (schedule the respective tasks, etc.)
 918  *
 919  * @param session for which session should we do this
 920  */
 921 static void
 922 process_pending_messages (struct Session *session)
 923 {
 924   struct PendingMessage *pm;
 925
 926   GNUNET_assert (session->client != NULL);
 927   if (session->transmit_handle != NULL)
 928     return;
 929   if (NULL == (pm = session->pending_messages_head))
 930     return;
 931
 932   session->transmit_handle =
 933       GNUNET_SERVER_notify_transmit_ready (session->client, pm->message_size,
 934                                            GNUNET_TIME_absolute_get_remaining
 935                                            (pm->timeout), &do_transmit,
 936                                            session);
 937 }
 938
 939
 940 /**
 941  * Functions with this signature are called whenever we need
 942  * to close a session due to a disconnect or failure to
 943  * establish a connection.
 944  *
 945  * @param session session to close down
 946  */
 947 static void
 948 disconnect_session (struct Session *session)
 949 {
 950   struct PendingMessage *pm;
 951   struct Plugin * plugin = session->plugin;
 952
 953   LOG (GNUNET_ERROR_TYPE_DEBUG,
 954        "Disconnecting session of peer `%s' address `%s'\n",
 955        GNUNET_i2s (&session->target),
 956        tcp_address_to_string (NULL, session->addr, session->addrlen));
 957
 958   stop_session_timeout (session);
 959
 960   if (GNUNET_YES == GNUNET_CONTAINER_multihashmap_remove (plugin->sessionmap, &session->target.hashPubKey, session))
 961   {
 962     GNUNET_STATISTICS_update (session->plugin->env->stats,
 963                               gettext_noop ("# TCP sessions active"), -1,
 964                               GNUNET_NO);
 965     dec_sessions (plugin, session, __LINE__);
 966   }
 967   else GNUNET_assert (GNUNET_YES == GNUNET_CONTAINER_multihashmap_remove (plugin->nat_wait_conns, &session->target.hashPubKey, session));
 968
 969   /* clean up state */
 970   if (session->transmit_handle != NULL)
 971   {
 972     GNUNET_SERVER_notify_transmit_ready_cancel (session->transmit_handle);
 973     session->transmit_handle = NULL;
 974   }
 975   session->plugin->env->session_end (session->plugin->env->cls,
 976                                      &session->target, session);
 977
 978   if (GNUNET_SCHEDULER_NO_TASK != session->nat_connection_timeout)
 979   {
 980     GNUNET_SCHEDULER_cancel (session->nat_connection_timeout);
 981     session->nat_connection_timeout = GNUNET_SCHEDULER_NO_TASK;
 982   }
 983
 984   while (NULL != (pm = session->pending_messages_head))
 985   {
 986     LOG (GNUNET_ERROR_TYPE_DEBUG,
 987          pm->transmit_cont !=
 988          NULL ? "Could not deliver message to `%4s'.\n" :
 989          "Could not deliver message to `%4s', notifying.\n",
 990          GNUNET_i2s (&session->target));
 991     GNUNET_STATISTICS_update (session->plugin->env->stats,
 992                               gettext_noop ("# bytes currently in TCP buffers"),
 993                               -(int64_t) pm->message_size, GNUNET_NO);
 994     GNUNET_STATISTICS_update (session->plugin->env->stats,
 995                               gettext_noop
 996                               ("# bytes discarded by TCP (disconnect)"),
 997                               pm->message_size, GNUNET_NO);
 998     GNUNET_CONTAINER_DLL_remove (session->pending_messages_head,
 999                                  session->pending_messages_tail, pm);
1000     if (NULL != pm->transmit_cont)
1001       pm->transmit_cont (pm->transmit_cont_cls, &session->target,
1002                          GNUNET_SYSERR, pm->message_size, 0);
1003     GNUNET_free (pm);
1004   }
1005   if (session->receive_delay_task != GNUNET_SCHEDULER_NO_TASK)
1006   {
1007     GNUNET_SCHEDULER_cancel (session->receive_delay_task);
1008     if (NULL != session->client)
1009       GNUNET_SERVER_receive_done (session->client, GNUNET_SYSERR);
1010   }
1011   if (NULL != session->client)
1012   {
1013     GNUNET_SERVER_client_disconnect (session->client);
1014     GNUNET_SERVER_client_drop (session->client);
1015     session->client = NULL;
1016   }
1017   GNUNET_free_non_null (session->addr);
1018   GNUNET_assert (NULL == session->transmit_handle);
1019   GNUNET_free (session);
1020 }
1021
1022 /* FIXME WORKAROUND FOR MANTIS 0002445 */
1023 struct result
1024 {
1025   struct Session *s;
1026   int res;
1027 };
1028
1029 int session_it (void *cls,
1030                const struct GNUNET_HashCode * key,
1031                void *value)
1032 {
1033   struct result *res = cls;
1034
1035   if (res->s == value)
1036   {
1037     res->res = GNUNET_OK;
1038     return GNUNET_NO;
1039   }
1040   else
1041   {
1042     return GNUNET_YES;
1043   }
1044 }
1045
1046 /* FIXME END WORKAROUND FOR MANTIS 0002445 */
1047
1048 /**
1049  * Function that can be used by the transport service to transmit
1050  * a message using the plugin.   Note that in the case of a
1051  * peer disconnecting, the continuation MUST be called
1052  * prior to the disconnect notification itself.  This function
1053  * will be called with this peer's HELLO message to initiate
1054  * a fresh connection to another peer.
1055  *
1056  * @param cls closure
1057  * @param session which session must be used
1058  * @param msgbuf the message to transmit
1059  * @param msgbuf_size number of bytes in 'msgbuf'
1060  * @param priority how important is the message (most plugins will
1061  *                 ignore message priority and just FIFO)
1062  * @param to how long to wait at most for the transmission (does not
1063  *                require plugins to discard the message after the timeout,
1064  *                just advisory for the desired delay; most plugins will ignore
1065  *                this as well)
1066  * @param cont continuation to call once the message has
1067  *        been transmitted (or if the transport is ready
1068  *        for the next transmission call; or if the
1069  *        peer disconnected...); can be NULL
1070  * @param cont_cls closure for cont
1071  * @return number of bytes used (on the physical network, with overheads);
1072  *         -1 on hard errors (i.e. address invalid); 0 is a legal value
1073  *         and does NOT mean that the message was not transmitted (DV)
1074  */
1075 static ssize_t
1076 tcp_plugin_send (void *cls,
1077     struct Session *session,
1078     const char *msgbuf, size_t msgbuf_size,
1079     unsigned int priority,
1080     struct GNUNET_TIME_Relative to,
1081     GNUNET_TRANSPORT_TransmitContinuation cont, void *cont_cls)
1082 {
1083   struct Plugin * plugin = cls;
1084   struct PendingMessage *pm;
1085
1086   GNUNET_assert (NULL != plugin);
1087   GNUNET_assert (NULL != session);
1088
1089   /* FIXME WORKAROUND FOR MANTIS 0002445 */
1090   struct result res1;
1091   struct result res2;
1092
1093   res1.s = session;
1094   res1.res = GNUNET_SYSERR;
1095   GNUNET_CONTAINER_multihashmap_iterate (plugin->sessionmap, &session_it, &res1);
1096
1097   res2.s = session;
1098   res2.res = GNUNET_SYSERR;
1099   GNUNET_CONTAINER_multihashmap_iterate (plugin->sessionmap, &session_it, &res2);
1100
1101   if ((res1.res == GNUNET_SYSERR) && (res2.res == GNUNET_SYSERR))
1102   {
1103     LOG (GNUNET_ERROR_TYPE_ERROR,
1104          "WORKAROUND MANTIS BUG 2445: This Trying to send to invalid session %p\n", session);
1105     GNUNET_break (0);
1106     return GNUNET_SYSERR;
1107   }
1108   /* FIXME END WORKAROUND FOR MANTIS 0002445 */
1109
1110   /* create new message entry */
1111   pm = GNUNET_malloc (sizeof (struct PendingMessage) + msgbuf_size);
1112   pm->msg = (const char *) &pm[1];
1113   memcpy (&pm[1], msgbuf, msgbuf_size);
1114   pm->message_size = msgbuf_size;
1115   pm->timeout = GNUNET_TIME_relative_to_absolute (to);
1116   pm->transmit_cont = cont;
1117   pm->transmit_cont_cls = cont_cls;
1118
1119   LOG (GNUNET_ERROR_TYPE_DEBUG,
1120        "Asked to transmit %u bytes to `%s', added message to list.\n",
1121        msgbuf_size, GNUNET_i2s (&session->target));
1122
1123   if (GNUNET_YES == GNUNET_CONTAINER_multihashmap_contains_value (plugin->sessionmap,
1124                                                                   &session->target.hashPubKey,
1125                                                                   session))
1126   {
1127     GNUNET_assert (session->client != NULL);
1128     reschedule_session_timeout (session);
1129     GNUNET_SERVER_client_set_timeout (session->client,
1130                                       GNUNET_CONSTANTS_IDLE_CONNECTION_TIMEOUT);
1131     GNUNET_STATISTICS_update (plugin->env->stats,
1132                               gettext_noop ("# bytes currently in TCP buffers"),
1133                               msgbuf_size, GNUNET_NO);
1134
1135     /* append pm to pending_messages list */
1136     GNUNET_CONTAINER_DLL_insert_tail (session->pending_messages_head,
1137                                       session->pending_messages_tail, pm);
1138
1139     process_pending_messages (session);
1140     return msgbuf_size;
1141   }
1142   else if (GNUNET_YES == GNUNET_CONTAINER_multihashmap_contains_value(plugin->nat_wait_conns, &session->target.hashPubKey, session))
1143   {
1144     LOG (GNUNET_ERROR_TYPE_DEBUG,
1145          "This NAT WAIT session for peer `%s' is not yet ready!\n",
1146          GNUNET_i2s (&session->target));
1147     reschedule_session_timeout (session);
1148     GNUNET_STATISTICS_update (plugin->env->stats,
1149                               gettext_noop ("# bytes currently in TCP buffers"),
1150                               msgbuf_size, GNUNET_NO);
1151
1152     /* append pm to pending_messages list */
1153     GNUNET_CONTAINER_DLL_insert_tail (session->pending_messages_head,
1154                                       session->pending_messages_tail, pm);
1155     return msgbuf_size;
1156   }
1157   else
1158   {
1159     LOG (GNUNET_ERROR_TYPE_ERROR,
1160          "Invalid session %p\n", session);
1161     if (NULL != cont)
1162       cont (cont_cls, &session->target, GNUNET_SYSERR, pm->message_size, 0);
1163     GNUNET_break (0);
1164     GNUNET_free (pm);
1165     return GNUNET_SYSERR; /* session does not exist here */
1166   }
1167 }
1168
1169
1170 struct SessionItCtx
1171 {
1172   void *addr;
1173   size_t addrlen;
1174   struct Session *result;
1175 };
1176
1177
1178 static int
1179 session_lookup_it (void *cls,
1180                    const struct GNUNET_HashCode *key,
1181                    void *value)
1182 {
1183   struct SessionItCtx * si_ctx = cls;
1184   struct Session * session = value;
1185 #if 0
1186   char * a1 = strdup (tcp_address_to_string(NULL, session->addr, session->addrlen));
1187   char * a2 = strdup (tcp_address_to_string(NULL, si_ctx->addr, si_ctx->addrlen));
1188   LOG (GNUNET_ERROR_TYPE_DEBUG,
1189        "Comparing: %s %u <-> %s %u\n",
1190        a1,
1191        session->addrlen,
1192        a2,
1193        si_ctx->addrlen);
1194   GNUNET_free (a1);
1195   GNUNET_free (a2);
1196 #endif
1197   if (session->addrlen != si_ctx->addrlen)
1198   {
1199     return GNUNET_YES;
1200   }
1201   if (0 != memcmp (session->addr, si_ctx->addr, si_ctx->addrlen))
1202   {
1203     return GNUNET_YES;
1204   }
1205 #if 0
1206   a1 = strdup (tcp_address_to_string(NULL, session->addr, session->addrlen));
1207   a2 = strdup (tcp_address_to_string(NULL, si_ctx->addr, si_ctx->addrlen));
1208   LOG (GNUNET_ERROR_TYPE_DEBUG,
1209        "Comparing: %s %u <-> %s %u , OK!\n",
1210        a1,
1211        session->addrlen,
1212        a2,
1213        si_ctx->addrlen);
1214   GNUNET_free (a1);
1215   GNUNET_free (a2);
1216 #endif
1217   /* Found existing session */
1218   si_ctx->result = session;
1219   return GNUNET_NO;
1220 }
1221
1222
1223 /**
1224  * Task cleaning up a NAT connection attempt after timeout
1225  */
1226 static void
1227 nat_connect_timeout (void *cls, const struct GNUNET_SCHEDULER_TaskContext *tc)
1228 {
1229   struct Session *session = cls;
1230
1231   LOG (GNUNET_ERROR_TYPE_DEBUG,
1232        "NAT WAIT connection to `%4s' at `%s' could not be established, removing session\n",
1233        GNUNET_i2s (&session->target), tcp_address_to_string(NULL, session->addr, session->addrlen));
1234   disconnect_session (session);
1235 }
1236
1237
1238 /**
1239  * Create a new session to transmit data to the target
1240  * This session will used to send data to this peer and the plugin will
1241  * notify us by calling the env->session_end function
1242  *
1243  * @param cls closure
1244  * @param address pointer to the GNUNET_HELLO_Address
1245  * @return the session if the address is valid, NULL otherwise
1246  */
1247 static struct Session *
1248 tcp_plugin_get_session (void *cls,
1249                         const struct GNUNET_HELLO_Address *address)
1250 {
1251   struct Plugin *plugin = cls;
1252   struct Session *session = NULL;
1253   int af;
1254   const void *sb;
1255   size_t sbs;
1256   struct GNUNET_CONNECTION_Handle *sa;
1257   struct sockaddr_in a4;
1258   struct sockaddr_in6 a6;
1259   const struct IPv4TcpAddress *t4;
1260   const struct IPv6TcpAddress *t6;
1261   struct GNUNET_ATS_Information ats;
1262   unsigned int is_natd = GNUNET_NO;
1263   size_t addrlen;
1264
1265   GNUNET_assert (plugin != NULL);
1266   GNUNET_assert (address != NULL);
1267   addrlen = address->address_length;
1268   LOG (GNUNET_ERROR_TYPE_DEBUG,
1269        "Trying to get session for `%s' address of peer `%s'\n",
1270        tcp_address_to_string(NULL, address->address, address->address_length),
1271        GNUNET_i2s (&address->peer));
1272
1273   /* look for existing session */
1274   if (GNUNET_YES ==
1275       GNUNET_CONTAINER_multihashmap_contains (plugin->sessionmap,
1276                                               &address->peer.hashPubKey))
1277   {
1278     struct SessionItCtx si_ctx;
1279
1280     si_ctx.addr = (void *) address->address;
1281     si_ctx.addrlen = address->address_length;
1282
1283     si_ctx.result = NULL;
1284
1285     GNUNET_CONTAINER_multihashmap_get_multiple (plugin->sessionmap,
1286                                                 &address->peer.hashPubKey,
1287                                                 &session_lookup_it, &si_ctx);
1288     if (si_ctx.result != NULL)
1289     {
1290       session = si_ctx.result;
1291       LOG (GNUNET_ERROR_TYPE_DEBUG,
1292            "Found exisiting session for `%s' address `%s' session %p\n",
1293            GNUNET_i2s (&address->peer),
1294            tcp_address_to_string(NULL, address->address, address->address_length),
1295            session);
1296       return session;
1297     }
1298     LOG (GNUNET_ERROR_TYPE_DEBUG,
1299          "Existing sessions did not match address `%s' or peer `%s'\n",
1300          tcp_address_to_string(NULL, address->address, address->address_length),
1301          GNUNET_i2s (&address->peer));
1302   }
1303
1304   if (addrlen == sizeof (struct IPv6TcpAddress))
1305   {
1306     GNUNET_assert (NULL != address->address);     /* make static analysis happy */
1307     t6 = address->address;
1308     af = AF_INET6;
1309     memset (&a6, 0, sizeof (a6));
1310 #if HAVE_SOCKADDR_IN_SIN_LEN
1311     a6.sin6_len = sizeof (a6);
1312 #endif
1313     a6.sin6_family = AF_INET6;
1314     a6.sin6_port = t6->t6_port;
1315     if (t6->t6_port == 0)
1316       is_natd = GNUNET_YES;
1317     memcpy (&a6.sin6_addr, &t6->ipv6_addr, sizeof (struct in6_addr));
1318     sb = &a6;
1319     sbs = sizeof (a6);
1320   }
1321   else if (addrlen == sizeof (struct IPv4TcpAddress))
1322   {
1323     GNUNET_assert (NULL != address->address);     /* make static analysis happy */
1324     t4 = address->address;
1325     af = AF_INET;
1326     memset (&a4, 0, sizeof (a4));
1327 #if HAVE_SOCKADDR_IN_SIN_LEN
1328     a4.sin_len = sizeof (a4);
1329 #endif
1330     a4.sin_family = AF_INET;
1331     a4.sin_port = t4->t4_port;
1332     if (t4->t4_port == 0)
1333       is_natd = GNUNET_YES;
1334     a4.sin_addr.s_addr = t4->ipv4_addr;
1335     sb = &a4;
1336     sbs = sizeof (a4);
1337   }
1338   else
1339   {
1340     LOG (GNUNET_ERROR_TYPE_ERROR,
1341          _("Address of unexpected length: %u\n"), addrlen);
1342     GNUNET_break (0);
1343     return NULL;
1344   }
1345
1346   ats = plugin->env->get_address_type (plugin->env->cls, sb ,sbs);
1347
1348   if ((is_natd == GNUNET_YES) && (addrlen == sizeof (struct IPv6TcpAddress)))
1349   {
1350     /* NAT client only works with IPv4 addresses */
1351     return NULL;
1352   }
1353
1354   if (0 == plugin->max_connections)
1355   {
1356     /* saturated */
1357     return NULL;
1358   }
1359
1360   if ((is_natd == GNUNET_YES) &&
1361       (GNUNET_YES ==
1362        GNUNET_CONTAINER_multihashmap_contains (plugin->nat_wait_conns,
1363                                                &address->peer.hashPubKey)))
1364   {
1365     /* Only do one NAT punch attempt per peer identity */
1366      return NULL;
1367   }
1368
1369   if ((is_natd == GNUNET_YES) && (NULL != plugin->nat) &&
1370       (GNUNET_NO ==
1371        GNUNET_CONTAINER_multihashmap_contains (plugin->nat_wait_conns,
1372                                                &address->peer.hashPubKey)))
1373   {
1374     LOG (GNUNET_ERROR_TYPE_DEBUG,
1375          "Found valid IPv4 NAT address (creating session)!\n") ;
1376     session = create_session (plugin, &address->peer, NULL, GNUNET_YES);
1377     session->addrlen = 0;
1378     session->addr = NULL;
1379     session->ats_address_network_type = ats.value;
1380     session->nat_connection_timeout = GNUNET_SCHEDULER_add_delayed (NAT_TIMEOUT,
1381                                                                     &nat_connect_timeout,
1382                                                                     session);
1383     GNUNET_assert (session != NULL);
1384     GNUNET_assert (GNUNET_OK ==
1385                    GNUNET_CONTAINER_multihashmap_put (plugin->nat_wait_conns,
1386                                                       &session->target.hashPubKey,
1387                                                       session,
1388                                                       GNUNET_CONTAINER_MULTIHASHMAPOPTION_UNIQUE_ONLY));
1389
1390     LOG (GNUNET_ERROR_TYPE_DEBUG,
1391          "Created NAT WAIT connection to `%4s' at `%s'\n",
1392          GNUNET_i2s (&session->target), GNUNET_a2s (sb, sbs));
1393
1394     if (GNUNET_OK == GNUNET_NAT_run_client (plugin->nat, &a4))
1395       return session;
1396     else
1397     {
1398       LOG (GNUNET_ERROR_TYPE_DEBUG,
1399            "Running NAT client for `%4s' at `%s' failed\n",
1400            GNUNET_i2s (&session->target), GNUNET_a2s (sb, sbs));
1401       disconnect_session (session);
1402       return NULL;
1403     }
1404   }
1405
1406   /* create new outbound session */
1407   GNUNET_assert (0 != plugin->max_connections);
1408   sa = GNUNET_CONNECTION_create_from_sockaddr (af, sb, sbs);
1409   if (sa == NULL)
1410   {
1411     LOG (GNUNET_ERROR_TYPE_DEBUG,
1412          "Failed to create connection to `%4s' at `%s'\n",
1413          GNUNET_i2s (&address->peer), GNUNET_a2s (sb, sbs));
1414     return NULL;
1415   }
1416   plugin->max_connections--;
1417
1418   LOG (GNUNET_ERROR_TYPE_DEBUG,
1419        "Asked to transmit to `%4s', creating fresh session using address `%s'.\n",
1420        GNUNET_i2s (&address->peer), GNUNET_a2s (sb, sbs));
1421
1422   session = create_session (plugin,
1423                             &address->peer,
1424                             GNUNET_SERVER_connect_socket (plugin->server, sa),
1425                             GNUNET_NO);
1426   session->addr = GNUNET_malloc (addrlen);
1427   memcpy (session->addr, address->address, addrlen);
1428   session->addrlen = addrlen;
1429   session->ats_address_network_type = ats.value;
1430
1431   GNUNET_CONTAINER_multihashmap_put (plugin->sessionmap,
1432                                      &session->target.hashPubKey,
1433                                      session, GNUNET_CONTAINER_MULTIHASHMAPOPTION_MULTIPLE);
1434   inc_sessions (plugin, session, __LINE__);
1435   LOG (GNUNET_ERROR_TYPE_DEBUG,
1436        "Creating new session for `%s' address `%s' session %p\n",
1437        GNUNET_i2s (&address->peer),
1438        tcp_address_to_string(NULL, address->address, address->address_length),
1439        session);
1440   /* Send TCP Welcome */
1441   process_pending_messages (session);
1442
1443   return session;
1444 }
1445
1446
1447 static int
1448 session_disconnect_it (void *cls,
1449                        const struct GNUNET_HashCode * key,
1450                        void *value)
1451 {
1452   struct Session *session = value;
1453
1454   GNUNET_STATISTICS_update (session->plugin->env->stats,
1455                             gettext_noop
1456                             ("# transport-service disconnect requests for TCP"),
1457                             1, GNUNET_NO);
1458   disconnect_session (session);
1459   return GNUNET_YES;
1460 }
1461
1462
1463 /**
1464  * Function that can be called to force a disconnect from the
1465  * specified neighbour.  This should also cancel all previously
1466  * scheduled transmissions.  Obviously the transmission may have been
1467  * partially completed already, which is OK.  The plugin is supposed
1468  * to close the connection (if applicable) and no longer call the
1469  * transmit continuation(s).
1470  *
1471  * Finally, plugin MUST NOT call the services's receive function to
1472  * notify the service that the connection to the specified target was
1473  * closed after a getting this call.
1474  *
1475  * @param cls closure
1476  * @param target peer for which the last transmission is
1477  *        to be cancelled
1478  */
1479 static void
1480 tcp_plugin_disconnect (void *cls, const struct GNUNET_PeerIdentity *target)
1481 {
1482   struct Plugin *plugin = cls;
1483
1484   LOG (GNUNET_ERROR_TYPE_DEBUG,
1485        "Disconnecting peer `%4s'\n", GNUNET_i2s (target));
1486   GNUNET_CONTAINER_multihashmap_get_multiple (plugin->sessionmap, &target->hashPubKey, &session_disconnect_it, plugin);
1487   GNUNET_CONTAINER_multihashmap_get_multiple (plugin->nat_wait_conns, &target->hashPubKey, &session_disconnect_it, plugin);
1488 }
1489
1490
1491 /**
1492  * Context for address to string conversion.
1493  */
1494 struct PrettyPrinterContext
1495 {
1496   /**
1497    * Function to call with the result.
1498    */
1499   GNUNET_TRANSPORT_AddressStringCallback asc;
1500
1501   /**
1502    * Clsoure for 'asc'.
1503    */
1504   void *asc_cls;
1505
1506   /**
1507    * Port to add after the IP address.
1508    */
1509   uint16_t port;
1510
1511   int ipv6;
1512 };
1513
1514
1515 /**
1516  * Append our port and forward the result.
1517  *
1518  * @param cls the 'struct PrettyPrinterContext*'
1519  * @param hostname hostname part of the address
1520  */
1521 static void
1522 append_port (void *cls, const char *hostname)
1523 {
1524   struct PrettyPrinterContext *ppc = cls;
1525   char *ret;
1526
1527   if (hostname == NULL)
1528   {
1529     ppc->asc (ppc->asc_cls, NULL);
1530     GNUNET_free (ppc);
1531     return;
1532   }
1533   if (GNUNET_YES == ppc->ipv6)
1534     GNUNET_asprintf (&ret, "[%s]:%d", hostname, ppc->port);
1535   else
1536     GNUNET_asprintf (&ret, "%s:%d", hostname, ppc->port);
1537   ppc->asc (ppc->asc_cls, ret);
1538   GNUNET_free (ret);
1539 }
1540
1541
1542 /**
1543  * Convert the transports address to a nice, human-readable
1544  * format.
1545  *
1546  * @param cls closure
1547  * @param type name of the transport that generated the address
1548  * @param addr one of the addresses of the host, NULL for the last address
1549  *        the specific address format depends on the transport
1550  * @param addrlen length of the address
1551  * @param numeric should (IP) addresses be displayed in numeric form?
1552  * @param timeout after how long should we give up?
1553  * @param asc function to call on each string
1554  * @param asc_cls closure for asc
1555  */
1556 static void
1557 tcp_plugin_address_pretty_printer (void *cls, const char *type,
1558                                    const void *addr, size_t addrlen,
1559                                    int numeric,
1560                                    struct GNUNET_TIME_Relative timeout,
1561                                    GNUNET_TRANSPORT_AddressStringCallback asc,
1562                                    void *asc_cls)
1563 {
1564   struct PrettyPrinterContext *ppc;
1565   const void *sb;
1566   size_t sbs;
1567   struct sockaddr_in a4;
1568   struct sockaddr_in6 a6;
1569   const struct IPv4TcpAddress *t4;
1570   const struct IPv6TcpAddress *t6;
1571   uint16_t port;
1572
1573   if (addrlen == sizeof (struct IPv6TcpAddress))
1574   {
1575     t6 = addr;
1576     memset (&a6, 0, sizeof (a6));
1577     a6.sin6_family = AF_INET6;
1578     a6.sin6_port = t6->t6_port;
1579     memcpy (&a6.sin6_addr, &t6->ipv6_addr, sizeof (struct in6_addr));
1580     port = ntohs (t6->t6_port);
1581     sb = &a6;
1582     sbs = sizeof (a6);
1583   }
1584   else if (addrlen == sizeof (struct IPv4TcpAddress))
1585   {
1586     t4 = addr;
1587     memset (&a4, 0, sizeof (a4));
1588     a4.sin_family = AF_INET;
1589     a4.sin_port = t4->t4_port;
1590     a4.sin_addr.s_addr = t4->ipv4_addr;
1591     port = ntohs (t4->t4_port);
1592     sb = &a4;
1593     sbs = sizeof (a4);
1594   }
1595   else if (0 == addrlen)
1596   {
1597     asc (asc_cls, "<inbound connection>");
1598     asc (asc_cls, NULL);
1599     return;
1600   }
1601   else
1602   {
1603     /* invalid address */
1604     GNUNET_break_op (0);
1605     asc (asc_cls, NULL);
1606     return;
1607   }
1608   ppc = GNUNET_malloc (sizeof (struct PrettyPrinterContext));
1609   if (addrlen == sizeof (struct IPv6TcpAddress))
1610     ppc->ipv6 = GNUNET_YES;
1611   else
1612     ppc->ipv6 = GNUNET_NO;
1613   ppc->asc = asc;
1614   ppc->asc_cls = asc_cls;
1615   ppc->port = port;
1616   GNUNET_RESOLVER_hostname_get (sb, sbs, !numeric, timeout, &append_port, ppc);
1617 }
1618
1619
1620 /**
1621  * Check if the given port is plausible (must be either our listen
1622  * port or our advertised port), or any port if we are behind NAT
1623  * and do not have a port open.  If it is neither, we return
1624  * GNUNET_SYSERR.
1625  *
1626  * @param plugin global variables
1627  * @param in_port port number to check
1628  * @return GNUNET_OK if port is either open_port or adv_port
1629  */
1630 static int
1631 check_port (struct Plugin *plugin, uint16_t in_port)
1632 {
1633   if ((in_port == plugin->adv_port) || (in_port == plugin->open_port))
1634     return GNUNET_OK;
1635   return GNUNET_SYSERR;
1636 }
1637
1638
1639 /**
1640  * Function that will be called to check if a binary address for this
1641  * plugin is well-formed and corresponds to an address for THIS peer
1642  * (as per our configuration).  Naturally, if absolutely necessary,
1643  * plugins can be a bit conservative in their answer, but in general
1644  * plugins should make sure that the address does not redirect
1645  * traffic to a 3rd party that might try to man-in-the-middle our
1646  * traffic.
1647  *
1648  * @param cls closure, our 'struct Plugin*'
1649  * @param addr pointer to the address
1650  * @param addrlen length of addr
1651  * @return GNUNET_OK if this is a plausible address for this peer
1652  *         and transport, GNUNET_SYSERR if not
1653  */
1654 static int
1655 tcp_plugin_check_address (void *cls, const void *addr, size_t addrlen)
1656 {
1657   struct Plugin *plugin = cls;
1658   struct IPv4TcpAddress *v4;
1659   struct IPv6TcpAddress *v6;
1660
1661   if ((addrlen != sizeof (struct IPv4TcpAddress)) &&
1662       (addrlen != sizeof (struct IPv6TcpAddress)))
1663   {
1664     GNUNET_break_op (0);
1665     return GNUNET_SYSERR;
1666   }
1667   if (addrlen == sizeof (struct IPv4TcpAddress))
1668   {
1669     v4 = (struct IPv4TcpAddress *) addr;
1670     if (GNUNET_OK != check_port (plugin, ntohs (v4->t4_port)))
1671       return GNUNET_SYSERR;
1672     if (GNUNET_OK !=
1673         GNUNET_NAT_test_address (plugin->nat, &v4->ipv4_addr,
1674                                  sizeof (struct in_addr)))
1675       return GNUNET_SYSERR;
1676   }
1677   else
1678   {
1679     v6 = (struct IPv6TcpAddress *) addr;
1680     if (IN6_IS_ADDR_LINKLOCAL (&v6->ipv6_addr))
1681     {
1682       GNUNET_break_op (0);
1683       return GNUNET_SYSERR;
1684     }
1685     if (GNUNET_OK != check_port (plugin, ntohs (v6->t6_port)))
1686       return GNUNET_SYSERR;
1687     if (GNUNET_OK !=
1688         GNUNET_NAT_test_address (plugin->nat, &v6->ipv6_addr,
1689                                  sizeof (struct in6_addr)))
1690       return GNUNET_SYSERR;
1691   }
1692   return GNUNET_OK;
1693 }
1694
1695
1696 /**
1697  * We've received a nat probe from this peer via TCP.  Finish
1698  * creating the client session and resume sending of queued
1699  * messages.
1700  *
1701  * @param cls closure
1702  * @param client identification of the client
1703  * @param message the actual message
1704  */
1705 static void
1706 handle_tcp_nat_probe (void *cls, struct GNUNET_SERVER_Client *client,
1707                       const struct GNUNET_MessageHeader *message)
1708 {
1709   struct Plugin *plugin = cls;
1710   struct Session *session;
1711   const struct TCP_NAT_ProbeMessage *tcp_nat_probe;
1712   size_t alen;
1713   void *vaddr;
1714   struct IPv4TcpAddress *t4;
1715   struct IPv6TcpAddress *t6;
1716   const struct sockaddr_in *s4;
1717   const struct sockaddr_in6 *s6;
1718
1719   LOG (GNUNET_ERROR_TYPE_DEBUG, "Received NAT probe\n");
1720
1721   /* We have received a TCP NAT probe, meaning we (hopefully) initiated
1722    * a connection to this peer by running gnunet-nat-client.  This peer
1723    * received the punch message and now wants us to use the new connection
1724    * as the default for that peer.  Do so and then send a WELCOME message
1725    * so we can really be connected!
1726    */
1727   if (ntohs (message->size) != sizeof (struct TCP_NAT_ProbeMessage))
1728   {
1729     GNUNET_break_op (0);
1730     GNUNET_SERVER_receive_done (client, GNUNET_SYSERR);
1731     return;
1732   }
1733
1734   tcp_nat_probe = (const struct TCP_NAT_ProbeMessage *) message;
1735   if (0 ==
1736       memcmp (&tcp_nat_probe->clientIdentity, plugin->env->my_identity,
1737               sizeof (struct GNUNET_PeerIdentity)))
1738   {
1739     /* refuse connections from ourselves */
1740     GNUNET_SERVER_receive_done (client, GNUNET_SYSERR);
1741     return;
1742   }
1743
1744   session =
1745       GNUNET_CONTAINER_multihashmap_get (plugin->nat_wait_conns,
1746                                          &tcp_nat_probe->
1747                                          clientIdentity.hashPubKey);
1748   if (session == NULL)
1749   {
1750     LOG (GNUNET_ERROR_TYPE_DEBUG,
1751          "Did NOT find session for NAT probe!\n");
1752     GNUNET_SERVER_receive_done (client, GNUNET_OK);
1753     return;
1754   }
1755   LOG (GNUNET_ERROR_TYPE_DEBUG,
1756        "Found session for NAT probe!\n");
1757
1758   if (session->nat_connection_timeout != GNUNET_SCHEDULER_NO_TASK)
1759   {
1760     GNUNET_SCHEDULER_cancel (session->nat_connection_timeout);
1761     session->nat_connection_timeout = GNUNET_SCHEDULER_NO_TASK;
1762   }
1763
1764   if (GNUNET_OK != GNUNET_SERVER_client_get_address (client, &vaddr, &alen))
1765   {
1766     GNUNET_break (0);
1767     GNUNET_SERVER_receive_done (client, GNUNET_SYSERR);
1768     disconnect_session (session);
1769     return;
1770   }
1771   GNUNET_assert (GNUNET_CONTAINER_multihashmap_remove
1772                  (plugin->nat_wait_conns,
1773                   &tcp_nat_probe->clientIdentity.hashPubKey,
1774                   session) == GNUNET_YES);
1775   GNUNET_CONTAINER_multihashmap_put (plugin->sessionmap,
1776                                      &session->target.hashPubKey, session,
1777                                      GNUNET_CONTAINER_MULTIHASHMAPOPTION_MULTIPLE);
1778   session->last_activity = GNUNET_TIME_absolute_get ();
1779   session->inbound = GNUNET_NO;
1780   LOG (GNUNET_ERROR_TYPE_DEBUG,
1781        "Found address `%s' for incoming connection\n",
1782        GNUNET_a2s (vaddr, alen));
1783   switch (((const struct sockaddr *) vaddr)->sa_family)
1784   {
1785   case AF_INET:
1786     s4 = vaddr;
1787     t4 = GNUNET_malloc (sizeof (struct IPv4TcpAddress));
1788     t4->t4_port = s4->sin_port;
1789     t4->ipv4_addr = s4->sin_addr.s_addr;
1790     session->addr = t4;
1791     session->addrlen = sizeof (struct IPv4TcpAddress);
1792     break;
1793   case AF_INET6:
1794     s6 = vaddr;
1795     t6 = GNUNET_malloc (sizeof (struct IPv6TcpAddress));
1796     t6->t6_port = s6->sin6_port;
1797     memcpy (&t6->ipv6_addr, &s6->sin6_addr, sizeof (struct in6_addr));
1798     session->addr = t6;
1799     session->addrlen = sizeof (struct IPv6TcpAddress);
1800     break;
1801   default:
1802     GNUNET_break_op (0);
1803     LOG (GNUNET_ERROR_TYPE_DEBUG,
1804          "Bad address for incoming connection!\n");
1805     GNUNET_free (vaddr);
1806     GNUNET_SERVER_receive_done (client, GNUNET_SYSERR);
1807     disconnect_session (session);
1808     return;
1809   }
1810   GNUNET_free (vaddr);
1811   GNUNET_break (NULL == session->client);
1812   GNUNET_SERVER_client_keep (client);
1813   session->client = client;
1814   inc_sessions (plugin, session, __LINE__);
1815   GNUNET_STATISTICS_update (plugin->env->stats,
1816                             gettext_noop ("# TCP sessions active"), 1,
1817                             GNUNET_NO);
1818   process_pending_messages (session);
1819   GNUNET_SERVER_receive_done (client, GNUNET_OK);
1820 }
1821
1822
1823 /**
1824  * We've received a welcome from this peer via TCP.  Possibly create a
1825  * fresh client record and send back our welcome.
1826  *
1827  * @param cls closure
1828  * @param client identification of the client
1829  * @param message the actual message
1830  */
1831 static void
1832 handle_tcp_welcome (void *cls, struct GNUNET_SERVER_Client *client,
1833                     const struct GNUNET_MessageHeader *message)
1834 {
1835   struct Plugin *plugin = cls;
1836   const struct WelcomeMessage *wm = (const struct WelcomeMessage *) message;
1837   struct Session *session;
1838   size_t alen;
1839   void *vaddr;
1840   struct IPv4TcpAddress *t4;
1841   struct IPv6TcpAddress *t6;
1842   const struct sockaddr_in *s4;
1843   const struct sockaddr_in6 *s6;
1844
1845   if (0 ==
1846       memcmp (&wm->clientIdentity, plugin->env->my_identity,
1847               sizeof (struct GNUNET_PeerIdentity)))
1848   {
1849     /* refuse connections from ourselves */
1850     GNUNET_SERVER_receive_done (client, GNUNET_SYSERR);
1851     return;
1852   }
1853   LOG (GNUNET_ERROR_TYPE_DEBUG,
1854        "Received %s message from `%4s'\n", "WELCOME",
1855        GNUNET_i2s (&wm->clientIdentity));
1856   GNUNET_STATISTICS_update (plugin->env->stats,
1857                             gettext_noop ("# TCP WELCOME messages received"), 1,
1858                             GNUNET_NO);
1859   session = lookup_session_by_client (plugin, client);
1860   if (session != NULL)
1861   {
1862     if (GNUNET_OK == GNUNET_SERVER_client_get_address (client, &vaddr, &alen))
1863     {
1864       LOG (GNUNET_ERROR_TYPE_DEBUG,
1865            "Found existing session %p for peer `%s'\n",
1866            session,
1867            GNUNET_a2s (vaddr, alen));
1868       GNUNET_free (vaddr);
1869     }
1870   }
1871   else
1872   {
1873     GNUNET_SERVER_client_keep (client);
1874     session = create_session (plugin, &wm->clientIdentity, client, GNUNET_NO);
1875     session->inbound = GNUNET_YES;
1876     if (GNUNET_OK == GNUNET_SERVER_client_get_address (client, &vaddr, &alen))
1877     {
1878       if (alen == sizeof (struct sockaddr_in))
1879       {
1880         s4 = vaddr;
1881         t4 = GNUNET_malloc (sizeof (struct IPv4TcpAddress));
1882         t4->t4_port = s4->sin_port;
1883         t4->ipv4_addr = s4->sin_addr.s_addr;
1884         session->addr = t4;
1885         session->addrlen = sizeof (struct IPv4TcpAddress);
1886       }
1887       else if (alen == sizeof (struct sockaddr_in6))
1888       {
1889         s6 = vaddr;
1890         t6 = GNUNET_malloc (sizeof (struct IPv6TcpAddress));
1891         t6->t6_port = s6->sin6_port;
1892         memcpy (&t6->ipv6_addr, &s6->sin6_addr, sizeof (struct in6_addr));
1893         session->addr = t6;
1894         session->addrlen = sizeof (struct IPv6TcpAddress);
1895       }
1896
1897       struct GNUNET_ATS_Information ats;
1898       ats = plugin->env->get_address_type (plugin->env->cls, vaddr ,alen);
1899       session->ats_address_network_type = ats.value;
1900
1901       GNUNET_free (vaddr);
1902     }
1903     else
1904     {
1905       LOG (GNUNET_ERROR_TYPE_DEBUG,
1906            "Did not obtain TCP socket address for incoming connection\n");
1907     }
1908     GNUNET_CONTAINER_multihashmap_put (plugin->sessionmap,
1909                                        &session->target.hashPubKey,
1910                                        session,
1911                                        GNUNET_CONTAINER_MULTIHASHMAPOPTION_MULTIPLE);
1912     inc_sessions (plugin, session, __LINE__);
1913   }
1914
1915   if (session->expecting_welcome != GNUNET_YES)
1916   {
1917     GNUNET_break_op (0);
1918     GNUNET_SERVER_receive_done (client, GNUNET_SYSERR);
1919     return;
1920   }
1921   session->last_activity = GNUNET_TIME_absolute_get ();
1922   session->expecting_welcome = GNUNET_NO;
1923
1924
1925   process_pending_messages (session);
1926
1927   GNUNET_SERVER_client_set_timeout (client,
1928                                     GNUNET_CONSTANTS_IDLE_CONNECTION_TIMEOUT);
1929   GNUNET_SERVER_receive_done (client, GNUNET_OK);
1930 }
1931
1932
1933 /**
1934  * Task to signal the server that we can continue
1935  * receiving from the TCP client now.
1936  *
1937  * @param cls the 'struct Session*'
1938  * @param tc task context (unused)
1939  */
1940 static void
1941 delayed_done (void *cls, const struct GNUNET_SCHEDULER_TaskContext *tc)
1942 {
1943   struct Session *session = cls;
1944   struct GNUNET_TIME_Relative delay;
1945   struct GNUNET_ATS_Information ats;
1946
1947   session->receive_delay_task = GNUNET_SCHEDULER_NO_TASK;
1948   delay =
1949       session->plugin->env->receive (session->plugin->env->cls,
1950                                      &session->target, NULL, &ats, 0, session,
1951                                      NULL, 0);
1952   reschedule_session_timeout (session);
1953
1954   if (delay.rel_value == 0)
1955     GNUNET_SERVER_receive_done (session->client, GNUNET_OK);
1956   else
1957     session->receive_delay_task =
1958         GNUNET_SCHEDULER_add_delayed (delay, &delayed_done, session);
1959 }
1960
1961
1962 /**
1963  * We've received data for this peer via TCP.  Unbox,
1964  * compute latency and forward.
1965  *
1966  * @param cls closure
1967  * @param client identification of the client
1968  * @param message the actual message
1969  */
1970 static void
1971 handle_tcp_data (void *cls, struct GNUNET_SERVER_Client *client,
1972                  const struct GNUNET_MessageHeader *message)
1973 {
1974   struct Plugin *plugin = cls;
1975   struct Session *session;
1976   struct GNUNET_TIME_Relative delay;
1977   uint16_t type;
1978
1979   type = ntohs (message->type);
1980   if ((GNUNET_MESSAGE_TYPE_TRANSPORT_TCP_WELCOME == type) ||
1981       (GNUNET_MESSAGE_TYPE_TRANSPORT_TCP_NAT_PROBE == type))
1982   {
1983     /* We don't want to propagate WELCOME and NAT Probe messages up! */
1984     GNUNET_SERVER_receive_done (client, GNUNET_OK);
1985     return;
1986   }
1987   session = lookup_session_by_client (plugin, client);
1988   if (NULL == session)
1989   {
1990     /* No inbound session found */
1991     void *vaddr;
1992     size_t alen;
1993
1994     GNUNET_SERVER_client_get_address (client, &vaddr, &alen);
1995     LOG (GNUNET_ERROR_TYPE_ERROR,
1996          "Received unexpected %u bytes of type %u from `%s'\n",
1997          (unsigned int) ntohs (message->size),
1998          (unsigned int) ntohs (message->type),
1999          GNUNET_a2s(vaddr, alen));
2000     GNUNET_break_op (0);
2001     GNUNET_SERVER_receive_done (client, GNUNET_SYSERR);
2002     GNUNET_free_non_null(vaddr);
2003     return;
2004   }
2005   else if (GNUNET_YES == session->expecting_welcome)
2006   {
2007     /* Session is expecting WELCOME message */
2008     void *vaddr;
2009     size_t alen;
2010
2011     GNUNET_SERVER_client_get_address (client, &vaddr, &alen);
2012     LOG (GNUNET_ERROR_TYPE_ERROR,
2013          "Received unexpected %u bytes of type %u from `%s'\n",
2014          (unsigned int) ntohs (message->size),
2015          (unsigned int) ntohs (message->type),
2016          GNUNET_a2s(vaddr, alen));
2017     GNUNET_break_op (0);
2018     GNUNET_SERVER_receive_done (client, GNUNET_SYSERR);
2019     GNUNET_free_non_null(vaddr);
2020     return;
2021   }
2022
2023   session->last_activity = GNUNET_TIME_absolute_get ();
2024   LOG (GNUNET_ERROR_TYPE_DEBUG,
2025                    "Passing %u bytes of type %u from `%4s' to transport service.\n",
2026                    (unsigned int) ntohs (message->size),
2027                    (unsigned int) ntohs (message->type),
2028                    GNUNET_i2s (&session->target));
2029
2030   GNUNET_STATISTICS_update (plugin->env->stats,
2031                             gettext_noop ("# bytes received via TCP"),
2032                             ntohs (message->size), GNUNET_NO);
2033   struct GNUNET_ATS_Information distance[2];
2034
2035   distance[0].type = htonl (GNUNET_ATS_QUALITY_NET_DISTANCE);
2036   distance[0].value = htonl (1);
2037   distance[1].type = htonl (GNUNET_ATS_NETWORK_TYPE);
2038   distance[1].value = session->ats_address_network_type;
2039   GNUNET_break (ntohl(session->ats_address_network_type) != GNUNET_ATS_NET_UNSPECIFIED);
2040
2041   GNUNET_assert (GNUNET_CONTAINER_multihashmap_contains_value (plugin->sessionmap,
2042       &session->target.hashPubKey,
2043       session));
2044
2045   delay = plugin->env->receive (plugin->env->cls,
2046                                 &session->target,
2047                                 message,
2048                                 (const struct GNUNET_ATS_Information *) &distance,
2049                                 1, session,
2050                                 (GNUNET_YES == session->inbound) ? NULL : session->addr,
2051                                 (GNUNET_YES == session->inbound) ? 0 : session->addrlen);
2052
2053   reschedule_session_timeout (session);
2054
2055   if (delay.rel_value == 0)
2056   {
2057     GNUNET_SERVER_receive_done (client, GNUNET_OK);
2058   }
2059   else
2060   {
2061     LOG (GNUNET_ERROR_TYPE_DEBUG,
2062          "Throttling receiving from `%s' for %llu ms\n",
2063          GNUNET_i2s (&session->target),
2064          (unsigned long long) delay.rel_value);
2065     GNUNET_SERVER_disable_receive_done_warning (client);
2066     session->receive_delay_task =
2067         GNUNET_SCHEDULER_add_delayed (delay, &delayed_done, session);
2068   }
2069 }
2070
2071
2072 /**
2073  * Functions with this signature are called whenever a peer
2074  * is disconnected on the network level.
2075  *
2076  * @param cls closure
2077  * @param client identification of the client
2078  */
2079 static void
2080 disconnect_notify (void *cls, struct GNUNET_SERVER_Client *client)
2081 {
2082   struct Plugin *plugin = cls;
2083   struct Session *session;
2084
2085   if (client == NULL)
2086     return;
2087   plugin->max_connections++;
2088   session = lookup_session_by_client (plugin, client);
2089   if (session == NULL)
2090     return;                     /* unknown, nothing to do */
2091   LOG (GNUNET_ERROR_TYPE_DEBUG,
2092        "Destroying session of `%4s' with %s due to network-level disconnect.\n",
2093        GNUNET_i2s (&session->target),
2094        (session->addr !=
2095         NULL) ? tcp_address_to_string (session->plugin,
2096                                        session->addr,
2097                                        session->addrlen) :
2098        "*");
2099   GNUNET_STATISTICS_update (session->plugin->env->stats,
2100                             gettext_noop
2101                             ("# network-level TCP disconnect events"), 1,
2102                             GNUNET_NO);
2103   disconnect_session (session);
2104 }
2105
2106
2107 /**
2108  * We can now send a probe message, copy into buffer to really send.
2109  *
2110  * @param cls closure, a struct TCPProbeContext
2111  * @param size max size to copy
2112  * @param buf buffer to copy message to
2113  * @return number of bytes copied into buf
2114  */
2115 static size_t
2116 notify_send_probe (void *cls, size_t size, void *buf)
2117 {
2118   struct TCPProbeContext *tcp_probe_ctx = cls;
2119   struct Plugin *plugin = tcp_probe_ctx->plugin;
2120   size_t ret;
2121
2122   tcp_probe_ctx->transmit_handle = NULL;
2123   GNUNET_CONTAINER_DLL_remove (plugin->probe_head, plugin->probe_tail,
2124                                tcp_probe_ctx);
2125   if (buf == NULL)
2126   {
2127     GNUNET_CONNECTION_destroy (tcp_probe_ctx->sock);
2128     GNUNET_free (tcp_probe_ctx);
2129     return 0;
2130   }
2131   GNUNET_assert (size >= sizeof (tcp_probe_ctx->message));
2132   memcpy (buf, &tcp_probe_ctx->message, sizeof (tcp_probe_ctx->message));
2133   GNUNET_SERVER_connect_socket (tcp_probe_ctx->plugin->server,
2134                                 tcp_probe_ctx->sock);
2135   ret = sizeof (tcp_probe_ctx->message);
2136   GNUNET_free (tcp_probe_ctx);
2137   return ret;
2138 }
2139
2140
2141 /**
2142  * Function called by the NAT subsystem suggesting another peer wants
2143  * to connect to us via connection reversal.  Try to connect back to the
2144  * given IP.
2145  *
2146  * @param cls closure
2147  * @param addr address to try
2148  * @param addrlen number of bytes in addr
2149  */
2150 static void
2151 try_connection_reversal (void *cls, const struct sockaddr *addr,
2152                          socklen_t addrlen)
2153 {
2154   struct Plugin *plugin = cls;
2155   struct GNUNET_CONNECTION_Handle *sock;
2156   struct TCPProbeContext *tcp_probe_ctx;
2157
2158   /**
2159    * We have received an ICMP response, ostensibly from a peer
2160    * that wants to connect to us! Send a message to establish a connection.
2161    */
2162   sock = GNUNET_CONNECTION_create_from_sockaddr (AF_INET, addr, addrlen);
2163   if (sock == NULL)
2164   {
2165     /* failed for some odd reason (out of sockets?); ignore attempt */
2166     return;
2167   }
2168
2169   /* FIXME: do we need to track these probe context objects so that
2170    * we can clean them up on plugin unload? */
2171   tcp_probe_ctx = GNUNET_malloc (sizeof (struct TCPProbeContext));
2172   tcp_probe_ctx->message.header.size =
2173       htons (sizeof (struct TCP_NAT_ProbeMessage));
2174   tcp_probe_ctx->message.header.type =
2175       htons (GNUNET_MESSAGE_TYPE_TRANSPORT_TCP_NAT_PROBE);
2176   memcpy (&tcp_probe_ctx->message.clientIdentity, plugin->env->my_identity,
2177           sizeof (struct GNUNET_PeerIdentity));
2178   tcp_probe_ctx->plugin = plugin;
2179   tcp_probe_ctx->sock = sock;
2180   GNUNET_CONTAINER_DLL_insert (plugin->probe_head, plugin->probe_tail,
2181                                tcp_probe_ctx);
2182   tcp_probe_ctx->transmit_handle =
2183       GNUNET_CONNECTION_notify_transmit_ready (sock,
2184                                                ntohs (tcp_probe_ctx->
2185                                                       message.header.size),
2186                                                GNUNET_TIME_UNIT_FOREVER_REL,
2187                                                &notify_send_probe,
2188                                                tcp_probe_ctx);
2189
2190 }
2191
2192
2193 /**
2194  * Session was idle, so disconnect it
2195  */
2196 static void
2197 session_timeout (void *cls, const struct GNUNET_SCHEDULER_TaskContext *tc)
2198 {
2199   GNUNET_assert (NULL != cls);
2200   struct Session *s = cls;
2201
2202   s->timeout_task = GNUNET_SCHEDULER_NO_TASK;
2203   GNUNET_log (GNUNET_ERROR_TYPE_DEBUG,
2204               "Session %p was idle for %llu ms, disconnecting\n",
2205               s, (unsigned long long) GNUNET_CONSTANTS_IDLE_CONNECTION_TIMEOUT.rel_value);
2206   /* call session destroy function */
2207   disconnect_session(s);
2208 }
2209
2210
2211 /**
2212  * Start session timeout
2213  */
2214 static void
2215 start_session_timeout (struct Session *s)
2216 {
2217   GNUNET_assert (NULL != s);
2218   GNUNET_assert (GNUNET_SCHEDULER_NO_TASK == s->timeout_task);
2219   s->timeout_task =  GNUNET_SCHEDULER_add_delayed (GNUNET_CONSTANTS_IDLE_CONNECTION_TIMEOUT,
2220                                                    &session_timeout,
2221                                                    s);
2222   GNUNET_log (GNUNET_ERROR_TYPE_DEBUG,
2223               "Timeout for session %p set to %llu ms\n",
2224               s,  (unsigned long long) GNUNET_CONSTANTS_IDLE_CONNECTION_TIMEOUT.rel_value);
2225 }
2226
2227
2228 /**
2229  * Increment session timeout due to activity
2230  */
2231 static void
2232 reschedule_session_timeout (struct Session *s)
2233 {
2234   GNUNET_assert (NULL != s);
2235   GNUNET_assert (GNUNET_SCHEDULER_NO_TASK != s->timeout_task);
2236
2237   GNUNET_SCHEDULER_cancel (s->timeout_task);
2238   s->timeout_task =  GNUNET_SCHEDULER_add_delayed (GNUNET_CONSTANTS_IDLE_CONNECTION_TIMEOUT,
2239                                                    &session_timeout,
2240                                                    s);
2241   GNUNET_log (GNUNET_ERROR_TYPE_DEBUG,
2242               "Timeout rescheduled for session %p set to %llu ms\n",
2243               s, (unsigned long long) GNUNET_CONSTANTS_IDLE_CONNECTION_TIMEOUT.rel_value);
2244 }
2245
2246
2247 /**
2248  * Cancel timeout
2249  */
2250 static void
2251 stop_session_timeout (struct Session *s)
2252 {
2253   GNUNET_assert (NULL != s);
2254
2255   if (GNUNET_SCHEDULER_NO_TASK != s->timeout_task)
2256   {
2257     GNUNET_SCHEDULER_cancel (s->timeout_task);
2258     s->timeout_task = GNUNET_SCHEDULER_NO_TASK;
2259     GNUNET_log (GNUNET_ERROR_TYPE_DEBUG,
2260                 "Timeout stopped for session %p canceled\n",
2261                 s, (unsigned long long) GNUNET_CONSTANTS_IDLE_CONNECTION_TIMEOUT.rel_value);
2262   }
2263 }
2264
2265
2266 /**
2267  * Entry point for the plugin.
2268  *
2269  * @param cls closure, the 'struct GNUNET_TRANSPORT_PluginEnvironment*'
2270  * @return the 'struct GNUNET_TRANSPORT_PluginFunctions*' or NULL on error
2271  */
2272 void *
2273 libgnunet_plugin_transport_tcp_init (void *cls)
2274 {
2275   static const struct GNUNET_SERVER_MessageHandler my_handlers[] = {
2276     {&handle_tcp_welcome, NULL, GNUNET_MESSAGE_TYPE_TRANSPORT_TCP_WELCOME,
2277      sizeof (struct WelcomeMessage)},
2278     {&handle_tcp_nat_probe, NULL, GNUNET_MESSAGE_TYPE_TRANSPORT_TCP_NAT_PROBE,
2279      sizeof (struct TCP_NAT_ProbeMessage)},
2280     {&handle_tcp_data, NULL, GNUNET_MESSAGE_TYPE_ALL, 0},
2281     {NULL, NULL, 0, 0}
2282   };
2283   struct GNUNET_TRANSPORT_PluginEnvironment *env = cls;
2284   struct GNUNET_TRANSPORT_PluginFunctions *api;
2285   struct Plugin *plugin;
2286   struct GNUNET_SERVICE_Context *service;
2287   unsigned long long aport;
2288   unsigned long long bport;
2289   unsigned long long max_connections;
2290   unsigned int i;
2291   struct GNUNET_TIME_Relative idle_timeout;
2292   int ret;
2293   struct sockaddr **addrs;
2294   socklen_t *addrlens;
2295
2296   if (NULL == env->receive)
2297   {
2298     /* run in 'stub' mode (i.e. as part of gnunet-peerinfo), don't fully
2299        initialze the plugin or the API */
2300     api = GNUNET_malloc (sizeof (struct GNUNET_TRANSPORT_PluginFunctions));
2301     api->cls = NULL;
2302     api->address_pretty_printer = &tcp_plugin_address_pretty_printer;
2303     api->address_to_string = &tcp_address_to_string;
2304     api->string_to_address = &tcp_string_to_address;
2305     return api;
2306   }
2307
2308   if (GNUNET_OK !=
2309       GNUNET_CONFIGURATION_get_value_number (env->cfg, "transport-tcp",
2310                                              "MAX_CONNECTIONS",
2311                                              &max_connections))
2312     max_connections = 128;
2313
2314   aport = 0;
2315   if ((GNUNET_OK !=
2316        GNUNET_CONFIGURATION_get_value_number (env->cfg, "transport-tcp", "PORT",
2317                                               &bport)) || (bport > 65535) ||
2318       ((GNUNET_OK ==
2319         GNUNET_CONFIGURATION_get_value_number (env->cfg, "transport-tcp",
2320                                                "ADVERTISED-PORT", &aport)) &&
2321        (aport > 65535)))
2322   {
2323     LOG (GNUNET_ERROR_TYPE_ERROR,
2324          _
2325          ("Require valid port number for service `%s' in configuration!\n"),
2326          "transport-tcp");
2327     return NULL;
2328   }
2329   if (aport == 0)
2330     aport = bport;
2331   if (bport == 0)
2332     aport = 0;
2333   if (bport != 0)
2334   {
2335     service = GNUNET_SERVICE_start ("transport-tcp", env->cfg, GNUNET_SERVICE_OPTION_NONE);
2336     if (service == NULL)
2337     {
2338       LOG (GNUNET_ERROR_TYPE_WARNING,
2339            _("Failed to start service.\n"));
2340       return NULL;
2341     }
2342   }
2343   else
2344     service = NULL;
2345
2346   plugin = GNUNET_malloc (sizeof (struct Plugin));
2347   plugin->sessionmap = GNUNET_CONTAINER_multihashmap_create (max_connections, GNUNET_YES);
2348   plugin->max_connections = max_connections;
2349   plugin->open_port = bport;
2350   plugin->adv_port = aport;
2351   plugin->env = env;
2352   plugin->lsock = NULL;
2353   if ((service != NULL) &&
2354       (GNUNET_SYSERR !=
2355        (ret =
2356         GNUNET_SERVICE_get_server_addresses ("transport-tcp", env->cfg, &addrs,
2357                                              &addrlens))))
2358   {
2359     plugin->nat =
2360         GNUNET_NAT_register (env->cfg, GNUNET_YES, aport, (unsigned int) ret,
2361                              (const struct sockaddr **) addrs, addrlens,
2362                              &tcp_nat_port_map_callback,
2363                              &try_connection_reversal, plugin);
2364     while (ret > 0)
2365     {
2366       ret--;
2367       GNUNET_assert (addrs[ret] != NULL);
2368       GNUNET_free (addrs[ret]);
2369     }
2370     GNUNET_free_non_null (addrs);
2371     GNUNET_free_non_null (addrlens);
2372   }
2373   else
2374   {
2375     plugin->nat =
2376         GNUNET_NAT_register (env->cfg, GNUNET_YES, 0, 0, NULL, NULL, NULL,
2377                              &try_connection_reversal, plugin);
2378   }
2379   api = GNUNET_malloc (sizeof (struct GNUNET_TRANSPORT_PluginFunctions));
2380   api->cls = plugin;
2381   api->send = &tcp_plugin_send;
2382   api->get_session = &tcp_plugin_get_session;
2383
2384   api->disconnect = &tcp_plugin_disconnect;
2385   api->address_pretty_printer = &tcp_plugin_address_pretty_printer;
2386   api->check_address = &tcp_plugin_check_address;
2387   api->address_to_string = &tcp_address_to_string;
2388   api->string_to_address = &tcp_string_to_address;
2389   plugin->service = service;
2390   if (service != NULL)
2391   {
2392     plugin->server = GNUNET_SERVICE_get_server (service);
2393   }
2394   else
2395   {
2396     if (GNUNET_OK !=
2397         GNUNET_CONFIGURATION_get_value_time (env->cfg, "transport-tcp",
2398                                              "TIMEOUT", &idle_timeout))
2399     {
2400       GNUNET_log_config_missing (GNUNET_ERROR_TYPE_ERROR,
2401                                  "transport-tcp", "TIMEOUT");
2402       if (plugin->nat != NULL)
2403         GNUNET_NAT_unregister (plugin->nat);
2404       GNUNET_free (plugin);
2405       GNUNET_free (api);
2406       return NULL;
2407     }
2408     plugin->server =
2409         GNUNET_SERVER_create_with_sockets (&plugin_tcp_access_check, plugin,
2410                                            NULL, idle_timeout, GNUNET_YES);
2411   }
2412   plugin->handlers = GNUNET_malloc (sizeof (my_handlers));
2413   memcpy (plugin->handlers, my_handlers, sizeof (my_handlers));
2414   for (i = 0;
2415        i < sizeof (my_handlers) / sizeof (struct GNUNET_SERVER_MessageHandler);
2416        i++)
2417     plugin->handlers[i].callback_cls = plugin;
2418   GNUNET_SERVER_add_handlers (plugin->server, plugin->handlers);
2419   GNUNET_SERVER_disconnect_notify (plugin->server, &disconnect_notify, plugin);
2420   plugin->nat_wait_conns = GNUNET_CONTAINER_multihashmap_create (16, GNUNET_YES);
2421   if (bport != 0)
2422     LOG (GNUNET_ERROR_TYPE_INFO,
2423          _("TCP transport listening on port %llu\n"), bport);
2424   else
2425     LOG (GNUNET_ERROR_TYPE_INFO,
2426          _
2427          ("TCP transport not listening on any port (client only)\n"));
2428   if (aport != bport)
2429     LOG (GNUNET_ERROR_TYPE_INFO,
2430                      _
2431                      ("TCP transport advertises itself as being on port %llu\n"),
2432                      aport);
2433   /* Initially set connections to 0 */
2434   GNUNET_STATISTICS_set(plugin->env->stats,
2435                         gettext_noop ("# TCP sessions active"), 0,
2436                         GNUNET_NO);
2437   return api;
2438 }
2439
2440
2441 /**
2442  * Exit point from the plugin.
2443  */
2444 void *
2445 libgnunet_plugin_transport_tcp_done (void *cls)
2446 {
2447   struct GNUNET_TRANSPORT_PluginFunctions *api = cls;
2448   struct Plugin *plugin = api->cls;
2449   struct TCPProbeContext *tcp_probe;
2450
2451   if (NULL == plugin)
2452   {
2453     GNUNET_free (api);
2454     return NULL;
2455   }
2456   LOG (GNUNET_ERROR_TYPE_DEBUG, "Shutting down TCP plugin\n");
2457
2458   /* Removing leftover sessions */
2459   GNUNET_CONTAINER_multihashmap_iterate(plugin->sessionmap, &session_disconnect_it, NULL);
2460   /* Removing leftover NAT sessions */
2461   GNUNET_CONTAINER_multihashmap_iterate(plugin->nat_wait_conns, &session_disconnect_it, NULL);
2462
2463   if (plugin->service != NULL)
2464     GNUNET_SERVICE_stop (plugin->service);
2465   else
2466     GNUNET_SERVER_destroy (plugin->server);
2467   GNUNET_free (plugin->handlers);
2468   if (plugin->nat != NULL)
2469     GNUNET_NAT_unregister (plugin->nat);
2470   while (NULL != (tcp_probe = plugin->probe_head))
2471   {
2472     GNUNET_CONTAINER_DLL_remove (plugin->probe_head, plugin->probe_tail,
2473                                  tcp_probe);
2474     GNUNET_CONNECTION_destroy (tcp_probe->sock);
2475     GNUNET_free (tcp_probe);
2476   }
2477   GNUNET_CONTAINER_multihashmap_destroy (plugin->nat_wait_conns);
2478   GNUNET_CONTAINER_multihashmap_destroy (plugin->sessionmap);
2479   GNUNET_free (plugin);
2480   GNUNET_free (api);
2481   return NULL;
2482 }
2483
2484 /* end of plugin_transport_tcp.c */