src/core/core_api.c

   1 /*
   2      This file is part of GNUnet.
   3      (C) 2009, 2010 Christian Grothoff (and other contributing authors)
   4
   5      GNUnet is free software; you can redistribute it and/or modify
   6      it under the terms of the GNU General Public License as published
   7      by the Free Software Foundation; either version 3, or (at your
   8      option) any later version.
   9
  10      GNUnet is distributed in the hope that it will be useful, but
  11      WITHOUT ANY WARRANTY; without even the implied warranty of
  12      MERCHANTABILITY or FITNESS FOR A PARTICULAR PURPOSE.  See the GNU
  13      General Public License for more details.
  14
  15      You should have received a copy of the GNU General Public License
  16      along with GNUnet; see the file COPYING.  If not, write to the
  17      Free Software Foundation, Inc., 59 Temple Place - Suite 330,
  18      Boston, MA 02111-1307, USA.
  19 */
  20
  21 /**
  22  * @file core/core_api.c
  23  * @brief core service; this is the main API for encrypted P2P
  24  *        communications
  25  * @author Christian Grothoff
  26  */
  27 #include "platform.h"
  28 #include "gnunet_constants.h"
  29 #include "gnunet_core_service.h"
  30 #include "core.h"
  31
  32 #define LOG(kind,...) GNUNET_log_from (kind, "core-api",__VA_ARGS__)
  33
  34 /**
  35  * Information we track for each peer.
  36  */
  37 struct PeerRecord
  38 {
  39
  40   /**
  41    * We generally do NOT keep peer records in a DLL; this
  42    * DLL is only used IF this peer's 'pending_head' message
  43    * is ready for transmission.
  44    */
  45   struct PeerRecord *prev;
  46
  47   /**
  48    * We generally do NOT keep peer records in a DLL; this
  49    * DLL is only used IF this peer's 'pending_head' message
  50    * is ready for transmission.
  51    */
  52   struct PeerRecord *next;
  53
  54   /**
  55    * Peer the record is about.
  56    */
  57   struct GNUNET_PeerIdentity peer;
  58
  59   /**
  60    * Corresponding core handle.
  61    */
  62   struct GNUNET_CORE_Handle *ch;
  63
  64   /**
  65    * Head of doubly-linked list of pending requests.
  66    * Requests are sorted by deadline *except* for HEAD,
  67    * which is only modified upon transmission to core.
  68    */
  69   struct GNUNET_CORE_TransmitHandle *pending_head;
  70
  71   /**
  72    * Tail of doubly-linked list of pending requests.
  73    */
  74   struct GNUNET_CORE_TransmitHandle *pending_tail;
  75
  76   /**
  77    * ID of timeout task for the 'pending_head' handle
  78    * which is the one with the smallest timeout.
  79    */
  80   GNUNET_SCHEDULER_TaskIdentifier timeout_task;
  81
  82   /**
  83    * ID of task to run 'next_request_transmission'.
  84    */
  85   GNUNET_SCHEDULER_TaskIdentifier ntr_task;
  86
  87   /**
  88    * Current size of the queue of pending requests.
  89    */
  90   unsigned int queue_size;
  91
  92   /**
  93    * SendMessageRequest ID generator for this peer.
  94    */
  95   uint16_t smr_id_gen;
  96
  97 };
  98
  99
 100 /**
 101  * Type of function called upon completion.
 102  *
 103  * @param cls closure
 104  * @param success GNUNET_OK on success (which for request_connect
 105  *        ONLY means that we transmitted the connect request to CORE,
 106  *        it does not mean that we are actually now connected!);
 107  *        GNUNET_NO on timeout,
 108  *        GNUNET_SYSERR if core was shut down
 109  */
 110 typedef void (*GNUNET_CORE_ControlContinuation) (void *cls, int success);
 111
 112
 113 /**
 114  * Entry in a doubly-linked list of control messages to be transmitted
 115  * to the core service.  Control messages include traffic allocation,
 116  * connection requests and of course our initial 'init' request.
 117  *
 118  * The actual message is allocated at the end of this struct.
 119  */
 120 struct ControlMessage
 121 {
 122   /**
 123    * This is a doubly-linked list.
 124    */
 125   struct ControlMessage *next;
 126
 127   /**
 128    * This is a doubly-linked list.
 129    */
 130   struct ControlMessage *prev;
 131
 132   /**
 133    * Function to run after transmission failed/succeeded.
 134    */
 135   GNUNET_CORE_ControlContinuation cont;
 136
 137   /**
 138    * Closure for 'cont'.
 139    */
 140   void *cont_cls;
 141
 142   /**
 143    * Transmit handle (if one is associated with this ControlMessage), or NULL.
 144    */
 145   struct GNUNET_CORE_TransmitHandle *th;
 146 };
 147
 148
 149
 150 /**
 151  * Context for the core service connection.
 152  */
 153 struct GNUNET_CORE_Handle
 154 {
 155
 156   /**
 157    * Configuration we're using.
 158    */
 159   const struct GNUNET_CONFIGURATION_Handle *cfg;
 160
 161   /**
 162    * Closure for the various callbacks.
 163    */
 164   void *cls;
 165
 166   /**
 167    * Function to call once we've handshaked with the core service.
 168    */
 169   GNUNET_CORE_StartupCallback init;
 170
 171   /**
 172    * Function to call whenever we're notified about a peer connecting.
 173    */
 174   GNUNET_CORE_ConnectEventHandler connects;
 175
 176   /**
 177    * Function to call whenever we're notified about a peer disconnecting.
 178    */
 179   GNUNET_CORE_DisconnectEventHandler disconnects;
 180
 181   /**
 182    * Function to call whenever we receive an inbound message.
 183    */
 184   GNUNET_CORE_MessageCallback inbound_notify;
 185
 186   /**
 187    * Function to call whenever we receive an outbound message.
 188    */
 189   GNUNET_CORE_MessageCallback outbound_notify;
 190
 191   /**
 192    * Function handlers for messages of particular type.
 193    */
 194   const struct GNUNET_CORE_MessageHandler *handlers;
 195
 196   /**
 197    * Our connection to the service.
 198    */
 199   struct GNUNET_CLIENT_Connection *client;
 200
 201   /**
 202    * Handle for our current transmission request.
 203    */
 204   struct GNUNET_CLIENT_TransmitHandle *cth;
 205
 206   /**
 207    * Head of doubly-linked list of pending requests.
 208    */
 209   struct ControlMessage *control_pending_head;
 210
 211   /**
 212    * Tail of doubly-linked list of pending requests.
 213    */
 214   struct ControlMessage *control_pending_tail;
 215
 216   /**
 217    * Head of doubly-linked list of peers that are core-approved
 218    * to send their next message.
 219    */
 220   struct PeerRecord *ready_peer_head;
 221
 222   /**
 223    * Tail of doubly-linked list of peers that are core-approved
 224    * to send their next message.
 225    */
 226   struct PeerRecord *ready_peer_tail;
 227
 228   /**
 229    * Hash map listing all of the peers that we are currently
 230    * connected to.
 231    */
 232   struct GNUNET_CONTAINER_MultiHashMap *peers;
 233
 234   /**
 235    * Identity of this peer.
 236    */
 237   struct GNUNET_PeerIdentity me;
 238
 239   /**
 240    * ID of reconnect task (if any).
 241    */
 242   GNUNET_SCHEDULER_TaskIdentifier reconnect_task;
 243
 244   /**
 245    * Current delay we use for re-trying to connect to core.
 246    */
 247   struct GNUNET_TIME_Relative retry_backoff;
 248
 249   /**
 250    * Number of messages we are allowed to queue per target.
 251    */
 252   unsigned int queue_size;
 253
 254   /**
 255    * Number of entries in the handlers array.
 256    */
 257   unsigned int hcnt;
 258
 259   /**
 260    * For inbound notifications without a specific handler, do
 261    * we expect to only receive headers?
 262    */
 263   int inbound_hdr_only;
 264
 265   /**
 266    * For outbound notifications without a specific handler, do
 267    * we expect to only receive headers?
 268    */
 269   int outbound_hdr_only;
 270
 271   /**
 272    * Are we currently disconnected and hence unable to forward
 273    * requests?
 274    */
 275   int currently_down;
 276
 277 };
 278
 279
 280 /**
 281  * Handle for a transmission request.
 282  */
 283 struct GNUNET_CORE_TransmitHandle
 284 {
 285
 286   /**
 287    * We keep active transmit handles in a doubly-linked list.
 288    */
 289   struct GNUNET_CORE_TransmitHandle *next;
 290
 291   /**
 292    * We keep active transmit handles in a doubly-linked list.
 293    */
 294   struct GNUNET_CORE_TransmitHandle *prev;
 295
 296   /**
 297    * Corresponding peer record.
 298    */
 299   struct PeerRecord *peer;
 300
 301   /**
 302    * Corresponding SEND_REQUEST message.  Only non-NULL
 303    * while SEND_REQUEST message is pending.
 304    */
 305   struct ControlMessage *cm;
 306
 307   /**
 308    * Function that will be called to get the actual request
 309    * (once we are ready to transmit this request to the core).
 310    * The function will be called with a NULL buffer to signal
 311    * timeout.
 312    */
 313   GNUNET_CONNECTION_TransmitReadyNotify get_message;
 314
 315   /**
 316    * Closure for get_message.
 317    */
 318   void *get_message_cls;
 319
 320   /**
 321    * Timeout for this handle.
 322    */
 323   struct GNUNET_TIME_Absolute timeout;
 324
 325   /**
 326    * How important is this message?
 327    */
 328   uint32_t priority;
 329
 330   /**
 331    * Size of this request.
 332    */
 333   uint16_t msize;
 334
 335   /**
 336    * Send message request ID for this request.
 337    */
 338   uint16_t smr_id;
 339
 340   /**
 341    * Is corking allowed?
 342    */
 343   int cork;
 344
 345 };
 346
 347
 348 /**
 349  * Our current client connection went down.  Clean it up
 350  * and try to reconnect!
 351  *
 352  * @param h our handle to the core service
 353  */
 354 static void
 355 reconnect (struct GNUNET_CORE_Handle *h);
 356
 357
 358 /**
 359  * Task schedule to try to re-connect to core.
 360  *
 361  * @param cls the 'struct GNUNET_CORE_Handle'
 362  * @param tc task context
 363  */
 364 static void
 365 reconnect_task (void *cls, const struct GNUNET_SCHEDULER_TaskContext *tc)
 366 {
 367   struct GNUNET_CORE_Handle *h = cls;
 368
 369   h->reconnect_task = GNUNET_SCHEDULER_NO_TASK;
 370 #if DEBUG_CORE
 371   LOG (GNUNET_ERROR_TYPE_DEBUG, "Connecting to CORE service after delay\n");
 372 #endif
 373   reconnect (h);
 374 }
 375
 376
 377 /**
 378  * Notify clients about disconnect and free
 379  * the entry for connected peer.
 380  *
 381  * @param cls the 'struct GNUNET_CORE_Handle*'
 382  * @param key the peer identity (not used)
 383  * @param value the 'struct PeerRecord' to free.
 384  * @return GNUNET_YES (continue)
 385  */
 386 static int
 387 disconnect_and_free_peer_entry (void *cls, const GNUNET_HashCode * key,
 388                                 void *value)
 389 {
 390   struct GNUNET_CORE_Handle *h = cls;
 391   struct GNUNET_CORE_TransmitHandle *th;
 392   struct PeerRecord *pr = value;
 393
 394   if (pr->timeout_task != GNUNET_SCHEDULER_NO_TASK)
 395   {
 396     GNUNET_SCHEDULER_cancel (pr->timeout_task);
 397     pr->timeout_task = GNUNET_SCHEDULER_NO_TASK;
 398   }
 399   if (pr->ntr_task != GNUNET_SCHEDULER_NO_TASK)
 400   {
 401     GNUNET_SCHEDULER_cancel (pr->ntr_task);
 402     pr->ntr_task = GNUNET_SCHEDULER_NO_TASK;
 403   }
 404   if ((pr->prev != NULL) || (pr->next != NULL) || (h->ready_peer_head == pr))
 405     GNUNET_CONTAINER_DLL_remove (h->ready_peer_head, h->ready_peer_tail, pr);
 406   if (h->disconnects != NULL)
 407     h->disconnects (h->cls, &pr->peer);
 408   /* all requests should have been cancelled, clean up anyway, just in case */
 409   GNUNET_break (pr->queue_size == 0);
 410   while (NULL != (th = pr->pending_head))
 411   {
 412     GNUNET_break (0);
 413     GNUNET_CONTAINER_DLL_remove (pr->pending_head, pr->pending_tail, th);
 414     pr->queue_size--;
 415     if (th->cm != NULL)
 416       th->cm->th = NULL;
 417     GNUNET_free (th);
 418   }
 419   /* done with 'voluntary' cleanups, now on to normal freeing */
 420   GNUNET_assert (GNUNET_YES ==
 421                  GNUNET_CONTAINER_multihashmap_remove (h->peers, key, pr));
 422   GNUNET_assert (pr->pending_head == NULL);
 423   GNUNET_assert (pr->pending_tail == NULL);
 424   GNUNET_assert (pr->ch = h);
 425   GNUNET_assert (pr->queue_size == 0);
 426   GNUNET_assert (pr->timeout_task == GNUNET_SCHEDULER_NO_TASK);
 427   GNUNET_assert (pr->ntr_task == GNUNET_SCHEDULER_NO_TASK);
 428   GNUNET_free (pr);
 429   return GNUNET_YES;
 430 }
 431
 432
 433 /**
 434  * Close down any existing connection to the CORE service and
 435  * try re-establishing it later.
 436  *
 437  * @param h our handle
 438  */
 439 static void
 440 reconnect_later (struct GNUNET_CORE_Handle *h)
 441 {
 442   struct ControlMessage *cm;
 443   struct PeerRecord *pr;
 444
 445   GNUNET_assert (h->reconnect_task == GNUNET_SCHEDULER_NO_TASK);
 446   if (NULL != h->cth)
 447   {
 448     GNUNET_CLIENT_notify_transmit_ready_cancel (h->cth);
 449     h->cth = NULL;
 450   }
 451   if (h->client != NULL)
 452   {
 453     GNUNET_CLIENT_disconnect (h->client, GNUNET_NO);
 454     h->client = NULL;
 455   }
 456   h->currently_down = GNUNET_YES;
 457   GNUNET_assert (h->reconnect_task == GNUNET_SCHEDULER_NO_TASK);
 458   h->reconnect_task =
 459       GNUNET_SCHEDULER_add_delayed (h->retry_backoff, &reconnect_task, h);
 460   while (NULL != (cm = h->control_pending_head))
 461   {
 462     GNUNET_CONTAINER_DLL_remove (h->control_pending_head,
 463                                  h->control_pending_tail, cm);
 464     if (cm->th != NULL)
 465       cm->th->cm = NULL;
 466     if (cm->cont != NULL)
 467       cm->cont (cm->cont_cls, GNUNET_NO);
 468     GNUNET_free (cm);
 469   }
 470   GNUNET_CONTAINER_multihashmap_iterate (h->peers,
 471                                          &disconnect_and_free_peer_entry, h);
 472   while (NULL != (pr = h->ready_peer_head))
 473     GNUNET_CONTAINER_DLL_remove (h->ready_peer_head, h->ready_peer_tail, pr);
 474   GNUNET_assert (h->control_pending_head == NULL);
 475   h->retry_backoff =
 476       GNUNET_TIME_relative_min (GNUNET_TIME_UNIT_SECONDS, h->retry_backoff);
 477   h->retry_backoff = GNUNET_TIME_relative_multiply (h->retry_backoff, 2);
 478 }
 479
 480
 481 /**
 482  * Check the list of pending requests, send the next
 483  * one to the core.
 484  *
 485  * @param h core handle
 486  * @param ignore_currently_down transmit message even if not initialized?
 487  */
 488 static void
 489 trigger_next_request (struct GNUNET_CORE_Handle *h, int ignore_currently_down);
 490
 491
 492 /**
 493  * The given request hit its timeout.  Remove from the
 494  * doubly-linked list and call the respective continuation.
 495  *
 496  * @param cls the transmit handle of the request that timed out
 497  * @param tc context, can be NULL (!)
 498  */
 499 static void
 500 transmission_timeout (void *cls, const struct GNUNET_SCHEDULER_TaskContext *tc);
 501
 502
 503 /**
 504  * Send a control message to the peer asking for transmission
 505  * of the message in the given peer record.
 506  *
 507  * @param pr peer to request transmission to
 508  */
 509 static void
 510 request_next_transmission (struct PeerRecord *pr)
 511 {
 512   struct GNUNET_CORE_Handle *h = pr->ch;
 513   struct ControlMessage *cm;
 514   struct SendMessageRequest *smr;
 515   struct GNUNET_CORE_TransmitHandle *th;
 516
 517   if (pr->timeout_task != GNUNET_SCHEDULER_NO_TASK)
 518   {
 519     GNUNET_SCHEDULER_cancel (pr->timeout_task);
 520     pr->timeout_task = GNUNET_SCHEDULER_NO_TASK;
 521   }
 522   if (NULL == (th = pr->pending_head))
 523   {
 524     trigger_next_request (h, GNUNET_NO);
 525     return;
 526   }
 527   if (th->cm != NULL)
 528     return;                     /* already done */
 529   GNUNET_assert (pr->prev == NULL);
 530   GNUNET_assert (pr->next == NULL);
 531   pr->timeout_task =
 532       GNUNET_SCHEDULER_add_delayed (GNUNET_TIME_absolute_get_remaining
 533                                     (th->timeout), &transmission_timeout, pr);
 534   cm = GNUNET_malloc (sizeof (struct ControlMessage) +
 535                       sizeof (struct SendMessageRequest));
 536   th->cm = cm;
 537   cm->th = th;
 538   smr = (struct SendMessageRequest *) &cm[1];
 539   smr->header.type = htons (GNUNET_MESSAGE_TYPE_CORE_SEND_REQUEST);
 540   smr->header.size = htons (sizeof (struct SendMessageRequest));
 541   smr->priority = htonl (th->priority);
 542   smr->deadline = GNUNET_TIME_absolute_hton (th->timeout);
 543   smr->peer = pr->peer;
 544   smr->queue_size = htonl (pr->queue_size);
 545   smr->size = htons (th->msize);
 546   smr->smr_id = htons (th->smr_id = pr->smr_id_gen++);
 547   GNUNET_CONTAINER_DLL_insert_tail (h->control_pending_head,
 548                                     h->control_pending_tail, cm);
 549 #if DEBUG_CORE
 550   LOG (GNUNET_ERROR_TYPE_DEBUG,
 551        "Adding SEND REQUEST for peer `%s' to message queue\n",
 552        GNUNET_i2s (&pr->peer));
 553 #endif
 554   trigger_next_request (h, GNUNET_NO);
 555 }
 556
 557
 558 /**
 559  * The given request hit its timeout.  Remove from the
 560  * doubly-linked list and call the respective continuation.
 561  *
 562  * @param cls the transmit handle of the request that timed out
 563  * @param tc context, can be NULL (!)
 564  */
 565 static void
 566 transmission_timeout (void *cls, const struct GNUNET_SCHEDULER_TaskContext *tc)
 567 {
 568   struct PeerRecord *pr = cls;
 569   struct GNUNET_CORE_Handle *h = pr->ch;
 570   struct GNUNET_CORE_TransmitHandle *th;
 571
 572   pr->timeout_task = GNUNET_SCHEDULER_NO_TASK;
 573   th = pr->pending_head;
 574   GNUNET_CONTAINER_DLL_remove (pr->pending_head, pr->pending_tail, th);
 575   pr->queue_size--;
 576   if ((pr->prev != NULL) || (pr->next != NULL) || (pr == h->ready_peer_head))
 577   {
 578     /* the request that was 'approved' by core was
 579      * canceled before it could be transmitted; remove
 580      * us from the 'ready' list */
 581     GNUNET_CONTAINER_DLL_remove (h->ready_peer_head, h->ready_peer_tail, pr);
 582   }
 583 #if DEBUG_CORE
 584   LOG (GNUNET_ERROR_TYPE_DEBUG,
 585        "Signalling timeout of request for transmission to CORE service\n");
 586 #endif
 587   request_next_transmission (pr);
 588   GNUNET_assert (0 == th->get_message (th->get_message_cls, 0, NULL));
 589   GNUNET_free (th);
 590 }
 591
 592
 593 /**
 594  * Transmit the next message to the core service.
 595  */
 596 static size_t
 597 transmit_message (void *cls, size_t size, void *buf)
 598 {
 599   struct GNUNET_CORE_Handle *h = cls;
 600   struct ControlMessage *cm;
 601   struct GNUNET_CORE_TransmitHandle *th;
 602   struct PeerRecord *pr;
 603   struct SendMessage *sm;
 604   const struct GNUNET_MessageHeader *hdr;
 605   uint16_t msize;
 606   size_t ret;
 607
 608   GNUNET_assert (h->reconnect_task == GNUNET_SCHEDULER_NO_TASK);
 609   h->cth = NULL;
 610   if (buf == NULL)
 611   {
 612 #if DEBUG_CORE
 613     LOG (GNUNET_ERROR_TYPE_DEBUG,
 614          "Transmission failed, initiating reconnect\n");
 615 #endif
 616     reconnect_later (h);
 617     return 0;
 618   }
 619   /* first check for control messages */
 620   if (NULL != (cm = h->control_pending_head))
 621   {
 622     hdr = (const struct GNUNET_MessageHeader *) &cm[1];
 623     msize = ntohs (hdr->size);
 624     if (size < msize)
 625     {
 626       trigger_next_request (h, GNUNET_NO);
 627       return 0;
 628     }
 629 #if DEBUG_CORE
 630     LOG (GNUNET_ERROR_TYPE_DEBUG,
 631          "Transmitting control message with %u bytes of type %u to core.\n",
 632          (unsigned int) msize, (unsigned int) ntohs (hdr->type));
 633 #endif
 634     memcpy (buf, hdr, msize);
 635     GNUNET_CONTAINER_DLL_remove (h->control_pending_head,
 636                                  h->control_pending_tail, cm);
 637     if (cm->th != NULL)
 638       cm->th->cm = NULL;
 639     if (NULL != cm->cont)
 640       cm->cont (cm->cont_cls, GNUNET_OK);
 641     GNUNET_free (cm);
 642     trigger_next_request (h, GNUNET_NO);
 643     return msize;
 644   }
 645   /* now check for 'ready' P2P messages */
 646   if (NULL != (pr = h->ready_peer_head))
 647   {
 648     GNUNET_assert (pr->pending_head != NULL);
 649     th = pr->pending_head;
 650     if (size < th->msize + sizeof (struct SendMessage))
 651     {
 652       trigger_next_request (h, GNUNET_NO);
 653       return 0;
 654     }
 655     GNUNET_CONTAINER_DLL_remove (h->ready_peer_head, h->ready_peer_tail, pr);
 656     GNUNET_CONTAINER_DLL_remove (pr->pending_head, pr->pending_tail, th);
 657     pr->queue_size--;
 658     if (pr->timeout_task != GNUNET_SCHEDULER_NO_TASK)
 659     {
 660       GNUNET_SCHEDULER_cancel (pr->timeout_task);
 661       pr->timeout_task = GNUNET_SCHEDULER_NO_TASK;
 662     }
 663 #if DEBUG_CORE
 664     LOG (GNUNET_ERROR_TYPE_DEBUG,
 665          "Transmitting SEND request to `%s' with %u bytes.\n",
 666          GNUNET_i2s (&pr->peer), (unsigned int) th->msize);
 667 #endif
 668     sm = (struct SendMessage *) buf;
 669     sm->header.type = htons (GNUNET_MESSAGE_TYPE_CORE_SEND);
 670     sm->priority = htonl (th->priority);
 671     sm->deadline = GNUNET_TIME_absolute_hton (th->timeout);
 672     sm->peer = pr->peer;
 673     sm->cork = htonl ((uint32_t) th->cork);
 674     sm->reserved = htonl (0);
 675     ret =
 676         th->get_message (th->get_message_cls,
 677                          size - sizeof (struct SendMessage), &sm[1]);
 678
 679 #if DEBUG_CORE
 680     LOG (GNUNET_ERROR_TYPE_DEBUG,
 681          "Transmitting SEND request to `%s' yielded %u bytes.\n",
 682          GNUNET_i2s (&pr->peer), ret);
 683 #endif
 684     GNUNET_free (th);
 685     if (0 == ret)
 686     {
 687 #if DEBUG_CORE
 688       LOG (GNUNET_ERROR_TYPE_DEBUG,
 689            "Size of clients message to peer %s is 0!\n",
 690            GNUNET_i2s (&pr->peer));
 691 #endif
 692       /* client decided to send nothing! */
 693       request_next_transmission (pr);
 694       return 0;
 695     }
 696 #if DEBUG_CORE
 697     LOG (GNUNET_ERROR_TYPE_DEBUG,
 698          "Produced SEND message to core with %u bytes payload\n",
 699          (unsigned int) ret);
 700 #endif
 701     GNUNET_assert (ret >= sizeof (struct GNUNET_MessageHeader));
 702     if (ret + sizeof (struct SendMessage) >= GNUNET_SERVER_MAX_MESSAGE_SIZE)
 703     {
 704       GNUNET_break (0);
 705       request_next_transmission (pr);
 706       return 0;
 707     }
 708     ret += sizeof (struct SendMessage);
 709     sm->header.size = htons (ret);
 710     GNUNET_assert (ret <= size);
 711     request_next_transmission (pr);
 712     return ret;
 713   }
 714   return 0;
 715 }
 716
 717
 718 /**
 719  * Check the list of pending requests, send the next
 720  * one to the core.
 721  *
 722  * @param h core handle
 723  * @param ignore_currently_down transmit message even if not initialized?
 724  */
 725 static void
 726 trigger_next_request (struct GNUNET_CORE_Handle *h, int ignore_currently_down)
 727 {
 728   uint16_t msize;
 729
 730   if ((GNUNET_YES == h->currently_down) && (ignore_currently_down == GNUNET_NO))
 731   {
 732 #if DEBUG_CORE
 733     LOG (GNUNET_ERROR_TYPE_DEBUG,
 734          "Core connection down, not processing queue\n");
 735 #endif
 736     return;
 737   }
 738   if (NULL != h->cth)
 739   {
 740 #if DEBUG_CORE
 741     LOG (GNUNET_ERROR_TYPE_DEBUG, "Request pending, not processing queue\n");
 742 #endif
 743     return;
 744   }
 745   if (h->control_pending_head != NULL)
 746     msize =
 747         ntohs (((struct GNUNET_MessageHeader *) &h->
 748                 control_pending_head[1])->size);
 749   else if (h->ready_peer_head != NULL)
 750     msize =
 751         h->ready_peer_head->pending_head->msize + sizeof (struct SendMessage);
 752   else
 753   {
 754 #if DEBUG_CORE
 755     LOG (GNUNET_ERROR_TYPE_DEBUG,
 756          "Request queue empty, not processing queue\n");
 757 #endif
 758     return;                     /* no pending message */
 759   }
 760   h->cth =
 761       GNUNET_CLIENT_notify_transmit_ready (h->client, msize,
 762                                            GNUNET_TIME_UNIT_FOREVER_REL,
 763                                            GNUNET_NO, &transmit_message, h);
 764 }
 765
 766
 767 /**
 768  * Handler for notification messages received from the core.
 769  *
 770  * @param cls our "struct GNUNET_CORE_Handle"
 771  * @param msg the message received from the core service
 772  */
 773 static void
 774 main_notify_handler (void *cls, const struct GNUNET_MessageHeader *msg)
 775 {
 776   struct GNUNET_CORE_Handle *h = cls;
 777   const struct InitReplyMessage *m;
 778   const struct ConnectNotifyMessage *cnm;
 779   const struct DisconnectNotifyMessage *dnm;
 780   const struct NotifyTrafficMessage *ntm;
 781   const struct GNUNET_MessageHeader *em;
 782   const struct SendMessageReady *smr;
 783   const struct GNUNET_CORE_MessageHandler *mh;
 784   const struct GNUNET_ATS_Information* ats;
 785   GNUNET_CORE_StartupCallback init;
 786   struct PeerRecord *pr;
 787   struct GNUNET_CORE_TransmitHandle *th;
 788   unsigned int hpos;
 789   int trigger;
 790   uint16_t msize;
 791   uint16_t et;
 792   uint32_t ats_count;
 793
 794   if (msg == NULL)
 795   {
 796     LOG (GNUNET_ERROR_TYPE_INFO,
 797          _
 798          ("Client was disconnected from core service, trying to reconnect.\n"));
 799     reconnect_later (h);
 800     return;
 801   }
 802   msize = ntohs (msg->size);
 803 #if DEBUG_CORE > 2
 804   LOG (GNUNET_ERROR_TYPE_DEBUG,
 805        "Processing message of type %u and size %u from core service\n",
 806        ntohs (msg->type), msize);
 807 #endif
 808   switch (ntohs (msg->type))
 809   {
 810   case GNUNET_MESSAGE_TYPE_CORE_INIT_REPLY:
 811     if (ntohs (msg->size) != sizeof (struct InitReplyMessage))
 812     {
 813       GNUNET_break (0);
 814       reconnect_later (h);
 815       return;
 816     }
 817     m = (const struct InitReplyMessage *) msg;
 818     GNUNET_break (0 == ntohl (m->reserved));
 819     /* start our message processing loop */
 820     if (GNUNET_YES == h->currently_down)
 821     {
 822       h->currently_down = GNUNET_NO;
 823       trigger_next_request (h, GNUNET_NO);
 824     }
 825     h->retry_backoff = GNUNET_TIME_UNIT_MILLISECONDS;
 826     h->me = m->my_identity;
 827     if (NULL != (init = h->init))
 828     {
 829       /* mark so we don't call init on reconnect */
 830       h->init = NULL;
 831 #if DEBUG_CORE
 832       LOG (GNUNET_ERROR_TYPE_DEBUG, "Connected to core service of peer `%s'.\n",
 833            GNUNET_i2s (&h->me));
 834 #endif
 835       init (h->cls, h, &h->me);
 836     }
 837     else
 838     {
 839 #if DEBUG_CORE
 840       LOG (GNUNET_ERROR_TYPE_DEBUG,
 841            "Successfully reconnected to core service.\n");
 842 #endif
 843     }
 844     /* fake 'connect to self' */
 845     pr = GNUNET_CONTAINER_multihashmap_get (h->peers, &h->me.hashPubKey);
 846     GNUNET_assert (pr == NULL);
 847     pr = GNUNET_malloc (sizeof (struct PeerRecord));
 848     pr->peer = h->me;
 849     pr->ch = h;
 850     GNUNET_assert (GNUNET_YES ==
 851                    GNUNET_CONTAINER_multihashmap_put (h->peers,
 852                                                       &h->me.hashPubKey, pr,
 853                                                       GNUNET_CONTAINER_MULTIHASHMAPOPTION_UNIQUE_FAST));
 854     if (NULL != h->connects)
 855       h->connects (h->cls, &h->me, NULL, 0);
 856     break;
 857   case GNUNET_MESSAGE_TYPE_CORE_NOTIFY_CONNECT:
 858     if (msize < sizeof (struct ConnectNotifyMessage))
 859     {
 860       GNUNET_break (0);
 861       reconnect_later (h);
 862       return;
 863     }
 864     cnm = (const struct ConnectNotifyMessage *) msg;
 865     ats_count = ntohl (cnm->ats_count);
 866     if (msize !=
 867         sizeof (struct ConnectNotifyMessage) +
 868         ats_count * sizeof (struct GNUNET_ATS_Information))
 869     {
 870       GNUNET_break (0);
 871       reconnect_later (h);
 872       return;
 873     }
 874 #if DEBUG_CORE
 875     LOG (GNUNET_ERROR_TYPE_DEBUG,
 876          "Received notification about connection from `%s'.\n",
 877          GNUNET_i2s (&cnm->peer));
 878 #endif
 879     if (0 == memcmp (&h->me, &cnm->peer, sizeof (struct GNUNET_PeerIdentity)))
 880     {
 881       /* connect to self!? */
 882       GNUNET_break (0);
 883       return;
 884     }
 885     pr = GNUNET_CONTAINER_multihashmap_get (h->peers, &cnm->peer.hashPubKey);
 886     if (pr != NULL)
 887     {
 888       GNUNET_break (0);
 889       reconnect_later (h);
 890       return;
 891     }
 892     pr = GNUNET_malloc (sizeof (struct PeerRecord));
 893     pr->peer = cnm->peer;
 894     pr->ch = h;
 895     GNUNET_assert (GNUNET_YES ==
 896                    GNUNET_CONTAINER_multihashmap_put (h->peers,
 897                                                       &cnm->peer.hashPubKey, pr,
 898                                                       GNUNET_CONTAINER_MULTIHASHMAPOPTION_UNIQUE_FAST));
 899     ats = (const struct GNUNET_ATS_Information*) &cnm[1];
 900     if (NULL != h->connects)
 901       h->connects (h->cls, &cnm->peer,
 902                    ats,
 903                    ats_count);
 904     break;
 905   case GNUNET_MESSAGE_TYPE_CORE_NOTIFY_DISCONNECT:
 906     if (msize != sizeof (struct DisconnectNotifyMessage))
 907     {
 908       GNUNET_break (0);
 909       reconnect_later (h);
 910       return;
 911     }
 912     dnm = (const struct DisconnectNotifyMessage *) msg;
 913     if (0 == memcmp (&h->me, &dnm->peer, sizeof (struct GNUNET_PeerIdentity)))
 914     {
 915       /* connection to self!? */
 916       GNUNET_break (0);
 917       return;
 918     }
 919     GNUNET_break (0 == ntohl (dnm->reserved));
 920 #if DEBUG_CORE
 921     LOG (GNUNET_ERROR_TYPE_DEBUG,
 922          "Received notification about disconnect from `%s'.\n",
 923          GNUNET_i2s (&dnm->peer));
 924 #endif
 925     pr = GNUNET_CONTAINER_multihashmap_get (h->peers, &dnm->peer.hashPubKey);
 926     if (pr == NULL)
 927     {
 928       GNUNET_break (0);
 929       reconnect_later (h);
 930       return;
 931     }
 932     trigger = ((pr->prev != NULL) || (pr->next != NULL) ||
 933                (h->ready_peer_head == pr));
 934     disconnect_and_free_peer_entry (h, &dnm->peer.hashPubKey, pr);
 935     if (trigger)
 936       trigger_next_request (h, GNUNET_NO);
 937     break;
 938   case GNUNET_MESSAGE_TYPE_CORE_NOTIFY_INBOUND:
 939     if (msize < sizeof (struct NotifyTrafficMessage))
 940     {
 941       GNUNET_break (0);
 942       reconnect_later (h);
 943       return;
 944     }
 945     ntm = (const struct NotifyTrafficMessage *) msg;
 946
 947     ats_count = ntohl (ntm->ats_count);
 948     if ((msize <
 949          sizeof (struct NotifyTrafficMessage) +
 950          ats_count * sizeof (struct GNUNET_ATS_Information) +
 951          sizeof (struct GNUNET_MessageHeader)) ||
 952         (GNUNET_ATS_ARRAY_TERMINATOR !=
 953          ntohl ((&ntm->ats)[ats_count].type)))
 954     {
 955       GNUNET_break (0);
 956       reconnect_later (h);
 957       return;
 958     }
 959     em = (const struct GNUNET_MessageHeader *) &(&ntm->ats)[ats_count + 1];
 960 #if DEBUG_CORE
 961     LOG (GNUNET_ERROR_TYPE_DEBUG,
 962          "Received message of type %u and size %u from peer `%4s'\n",
 963          ntohs (em->type), ntohs (em->size), GNUNET_i2s (&ntm->peer));
 964 #endif
 965     pr = GNUNET_CONTAINER_multihashmap_get (h->peers, &ntm->peer.hashPubKey);
 966     if (pr == NULL)
 967     {
 968       GNUNET_break (0);
 969       reconnect_later (h);
 970       return;
 971     }
 972     if ((GNUNET_NO == h->inbound_hdr_only) &&
 973         (msize !=
 974          ntohs (em->size) + sizeof (struct NotifyTrafficMessage) +
 975          +ats_count * sizeof (struct GNUNET_ATS_Information)))
 976     {
 977       GNUNET_break (0);
 978       reconnect_later (h);
 979       return;
 980     }
 981     et = ntohs (em->type);
 982     for (hpos = 0; hpos < h->hcnt; hpos++)
 983     {
 984       mh = &h->handlers[hpos];
 985       if (mh->type != et)
 986         continue;
 987       if ((mh->expected_size != ntohs (em->size)) && (mh->expected_size != 0))
 988       {
 989         GNUNET_break (0);
 990         continue;
 991       }
 992       if (GNUNET_OK !=
 993           h->handlers[hpos].callback (h->cls, &ntm->peer, em, &ntm->ats,
 994                                       ats_count))
 995       {
 996         /* error in processing, do not process other messages! */
 997         break;
 998       }
 999     }
1000     if (NULL != h->inbound_notify)
1001       h->inbound_notify (h->cls, &ntm->peer, em, &ntm->ats,
1002                          ats_count);
1003     break;
1004   case GNUNET_MESSAGE_TYPE_CORE_NOTIFY_OUTBOUND:
1005     if (msize < sizeof (struct NotifyTrafficMessage))
1006     {
1007       GNUNET_break (0);
1008       reconnect_later (h);
1009       return;
1010     }
1011     ntm = (const struct NotifyTrafficMessage *) msg;
1012     if (0 == memcmp (&h->me, &ntm->peer, sizeof (struct GNUNET_PeerIdentity)))
1013     {
1014       /* self-change!? */
1015       GNUNET_break (0);
1016       return;
1017     }
1018     ats_count = ntohl (ntm->ats_count);
1019     if ((msize <
1020          sizeof (struct NotifyTrafficMessage) +
1021          ats_count * sizeof (struct GNUNET_ATS_Information) +
1022          sizeof (struct GNUNET_MessageHeader)) ||
1023         (GNUNET_ATS_ARRAY_TERMINATOR !=
1024          ntohl ((&ntm->ats)[ats_count].type)))
1025     {
1026       GNUNET_break (0);
1027       reconnect_later (h);
1028       return;
1029     }
1030     em = (const struct GNUNET_MessageHeader *) &(&ntm->ats)[ats_count + 1];
1031     pr = GNUNET_CONTAINER_multihashmap_get (h->peers, &ntm->peer.hashPubKey);
1032     if (pr == NULL)
1033     {
1034       GNUNET_break (0);
1035       reconnect_later (h);
1036       return;
1037     }
1038 #if DEBUG_CORE
1039     LOG (GNUNET_ERROR_TYPE_DEBUG,
1040          "Received notification about transmission to `%s'.\n",
1041          GNUNET_i2s (&ntm->peer));
1042 #endif
1043     if ((GNUNET_NO == h->outbound_hdr_only) &&
1044         (msize !=
1045          ntohs (em->size) + sizeof (struct NotifyTrafficMessage) +
1046          ats_count * sizeof (struct GNUNET_ATS_Information)))
1047     {
1048       GNUNET_break (0);
1049       reconnect_later (h);
1050       return;
1051     }
1052     if (NULL == h->outbound_notify)
1053     {
1054       GNUNET_break (0);
1055       break;
1056     }
1057     h->outbound_notify (h->cls, &ntm->peer, em, &ntm->ats, ats_count);
1058     break;
1059   case GNUNET_MESSAGE_TYPE_CORE_SEND_READY:
1060     if (msize != sizeof (struct SendMessageReady))
1061     {
1062       GNUNET_break (0);
1063       reconnect_later (h);
1064       return;
1065     }
1066     smr = (const struct SendMessageReady *) msg;
1067     pr = GNUNET_CONTAINER_multihashmap_get (h->peers, &smr->peer.hashPubKey);
1068     if (pr == NULL)
1069     {
1070       GNUNET_break (0);
1071       reconnect_later (h);
1072       return;
1073     }
1074 #if DEBUG_CORE
1075     LOG (GNUNET_ERROR_TYPE_DEBUG,
1076          "Received notification about transmission readiness to `%s'.\n",
1077          GNUNET_i2s (&smr->peer));
1078 #endif
1079     if (pr->pending_head == NULL)
1080     {
1081       /* request must have been cancelled between the original request
1082        * and the response from core, ignore core's readiness */
1083       break;
1084     }
1085
1086     th = pr->pending_head;
1087     if (ntohs (smr->smr_id) != th->smr_id)
1088     {
1089       /* READY message is for expired or cancelled message,
1090        * ignore! (we should have already sent another request) */
1091       break;
1092     }
1093     if ((pr->prev != NULL) || (pr->next != NULL) || (h->ready_peer_head == pr))
1094     {
1095       /* we should not already be on the ready list... */
1096       GNUNET_break (0);
1097       reconnect_later (h);
1098       return;
1099     }
1100     GNUNET_CONTAINER_DLL_insert (h->ready_peer_head, h->ready_peer_tail, pr);
1101     trigger_next_request (h, GNUNET_NO);
1102     break;
1103   default:
1104     reconnect_later (h);
1105     return;
1106   }
1107   GNUNET_CLIENT_receive (h->client, &main_notify_handler, h,
1108                          GNUNET_TIME_UNIT_FOREVER_REL);
1109 }
1110
1111
1112 /**
1113  * Task executed once we are done transmitting the INIT message.
1114  * Starts our 'receive' loop.
1115  *
1116  * @param cls the 'struct GNUNET_CORE_Handle'
1117  * @param success were we successful
1118  */
1119 static void
1120 init_done_task (void *cls, int success)
1121 {
1122   struct GNUNET_CORE_Handle *h = cls;
1123
1124   if (success == GNUNET_SYSERR)
1125     return;                     /* shutdown */
1126   if (success == GNUNET_NO)
1127   {
1128 #if DEBUG_CORE
1129     LOG (GNUNET_ERROR_TYPE_DEBUG,
1130          "Failed to exchange INIT with core, retrying\n");
1131 #endif
1132     if (h->reconnect_task == GNUNET_SCHEDULER_NO_TASK)
1133       reconnect_later (h);
1134     return;
1135   }
1136   GNUNET_CLIENT_receive (h->client, &main_notify_handler, h,
1137                          GNUNET_TIME_UNIT_FOREVER_REL);
1138 }
1139
1140
1141 /**
1142  * Our current client connection went down.  Clean it up
1143  * and try to reconnect!
1144  *
1145  * @param h our handle to the core service
1146  */
1147 static void
1148 reconnect (struct GNUNET_CORE_Handle *h)
1149 {
1150   struct ControlMessage *cm;
1151   struct InitMessage *init;
1152   uint32_t opt;
1153   uint16_t msize;
1154   uint16_t *ts;
1155   unsigned int hpos;
1156
1157 #if DEBUG_CORE
1158   LOG (GNUNET_ERROR_TYPE_DEBUG, "Reconnecting to CORE service\n");
1159 #endif
1160   GNUNET_assert (h->client == NULL);
1161   GNUNET_assert (h->currently_down == GNUNET_YES);
1162   h->client = GNUNET_CLIENT_connect ("core", h->cfg);
1163   if (h->client == NULL)
1164   {
1165     reconnect_later (h);
1166     return;
1167   }
1168   msize = h->hcnt * sizeof (uint16_t) + sizeof (struct InitMessage);
1169   cm = GNUNET_malloc (sizeof (struct ControlMessage) + msize);
1170   cm->cont = &init_done_task;
1171   cm->cont_cls = h;
1172   init = (struct InitMessage *) &cm[1];
1173   init->header.type = htons (GNUNET_MESSAGE_TYPE_CORE_INIT);
1174   init->header.size = htons (msize);
1175   opt = 0;
1176   if (h->inbound_notify != NULL)
1177   {
1178     if (h->inbound_hdr_only)
1179       opt |= GNUNET_CORE_OPTION_SEND_HDR_INBOUND;
1180     else
1181       opt |= GNUNET_CORE_OPTION_SEND_FULL_INBOUND;
1182   }
1183   if (h->outbound_notify != NULL)
1184   {
1185     if (h->outbound_hdr_only)
1186       opt |= GNUNET_CORE_OPTION_SEND_HDR_OUTBOUND;
1187     else
1188       opt |= GNUNET_CORE_OPTION_SEND_FULL_OUTBOUND;
1189   }
1190   init->options = htonl (opt);
1191   ts = (uint16_t *) & init[1];
1192   for (hpos = 0; hpos < h->hcnt; hpos++)
1193     ts[hpos] = htons (h->handlers[hpos].type);
1194   GNUNET_CONTAINER_DLL_insert (h->control_pending_head, h->control_pending_tail,
1195                                cm);
1196   trigger_next_request (h, GNUNET_YES);
1197 }
1198
1199
1200
1201 /**
1202  * Connect to the core service.  Note that the connection may
1203  * complete (or fail) asynchronously.
1204  *
1205  * @param cfg configuration to use
1206  * @param queue_size size of the per-peer message queue
1207  * @param cls closure for the various callbacks that follow (including handlers in the handlers array)
1208  * @param init callback to call on timeout or once we have successfully
1209  *        connected to the core service; note that timeout is only meaningful if init is not NULL
1210  * @param connects function to call on peer connect, can be NULL
1211  * @param disconnects function to call on peer disconnect / timeout, can be NULL
1212  * @param inbound_notify function to call for all inbound messages, can be NULL
1213  * @param inbound_hdr_only set to GNUNET_YES if inbound_notify will only read the
1214  *                GNUNET_MessageHeader and hence we do not need to give it the full message;
1215  *                can be used to improve efficiency, ignored if inbound_notify is NULLL
1216  * @param outbound_notify function to call for all outbound messages, can be NULL
1217  * @param outbound_hdr_only set to GNUNET_YES if outbound_notify will only read the
1218  *                GNUNET_MessageHeader and hence we do not need to give it the full message
1219  *                can be used to improve efficiency, ignored if outbound_notify is NULLL
1220  * @param handlers callbacks for messages we care about, NULL-terminated
1221  * @return handle to the core service (only useful for disconnect until 'init' is called);
1222  *                NULL on error (in this case, init is never called)
1223  */
1224 struct GNUNET_CORE_Handle *
1225 GNUNET_CORE_connect (const struct GNUNET_CONFIGURATION_Handle *cfg,
1226                      unsigned int queue_size, void *cls,
1227                      GNUNET_CORE_StartupCallback init,
1228                      GNUNET_CORE_ConnectEventHandler connects,
1229                      GNUNET_CORE_DisconnectEventHandler disconnects,
1230                      GNUNET_CORE_MessageCallback inbound_notify,
1231                      int inbound_hdr_only,
1232                      GNUNET_CORE_MessageCallback outbound_notify,
1233                      int outbound_hdr_only,
1234                      const struct GNUNET_CORE_MessageHandler *handlers)
1235 {
1236   struct GNUNET_CORE_Handle *h;
1237
1238   h = GNUNET_malloc (sizeof (struct GNUNET_CORE_Handle));
1239   h->cfg = cfg;
1240   h->queue_size = queue_size;
1241   h->cls = cls;
1242   h->init = init;
1243   h->connects = connects;
1244   h->disconnects = disconnects;
1245   h->inbound_notify = inbound_notify;
1246   h->outbound_notify = outbound_notify;
1247   h->inbound_hdr_only = inbound_hdr_only;
1248   h->outbound_hdr_only = outbound_hdr_only;
1249   h->handlers = handlers;
1250   h->hcnt = 0;
1251   h->currently_down = GNUNET_YES;
1252   h->peers = GNUNET_CONTAINER_multihashmap_create (128);
1253   h->retry_backoff = GNUNET_TIME_UNIT_MILLISECONDS;
1254   if (NULL != handlers)
1255     while (handlers[h->hcnt].callback != NULL)
1256       h->hcnt++;
1257   GNUNET_assert (h->hcnt <
1258                  (GNUNET_SERVER_MAX_MESSAGE_SIZE -
1259                   sizeof (struct InitMessage)) / sizeof (uint16_t));
1260 #if DEBUG_CORE
1261   LOG (GNUNET_ERROR_TYPE_DEBUG, "Connecting to CORE service\n");
1262 #endif
1263   reconnect (h);
1264   return h;
1265 }
1266
1267
1268 /**
1269  * Disconnect from the core service.  This function can only
1270  * be called *after* all pending 'GNUNET_CORE_notify_transmit_ready'
1271  * requests have been explicitly canceled.
1272  *
1273  * @param handle connection to core to disconnect
1274  */
1275 void
1276 GNUNET_CORE_disconnect (struct GNUNET_CORE_Handle *handle)
1277 {
1278   struct ControlMessage *cm;
1279
1280 #if DEBUG_CORE
1281   LOG (GNUNET_ERROR_TYPE_DEBUG, "Disconnecting from CORE service\n");
1282 #endif
1283   if (handle->cth != NULL)
1284   {
1285     GNUNET_CLIENT_notify_transmit_ready_cancel (handle->cth);
1286     handle->cth = NULL;
1287   }
1288   while (NULL != (cm = handle->control_pending_head))
1289   {
1290     GNUNET_CONTAINER_DLL_remove (handle->control_pending_head,
1291                                  handle->control_pending_tail, cm);
1292     if (cm->th != NULL)
1293       cm->th->cm = NULL;
1294     if (cm->cont != NULL)
1295       cm->cont (cm->cont_cls, GNUNET_SYSERR);
1296     GNUNET_free (cm);
1297   }
1298   if (handle->client != NULL)
1299   {
1300     GNUNET_CLIENT_disconnect (handle->client, GNUNET_NO);
1301     handle->client = NULL;
1302   }
1303   GNUNET_CONTAINER_multihashmap_iterate (handle->peers,
1304                                          &disconnect_and_free_peer_entry,
1305                                          handle);
1306   if (handle->reconnect_task != GNUNET_SCHEDULER_NO_TASK)
1307   {
1308     GNUNET_SCHEDULER_cancel (handle->reconnect_task);
1309     handle->reconnect_task = GNUNET_SCHEDULER_NO_TASK;
1310   }
1311   GNUNET_CONTAINER_multihashmap_destroy (handle->peers);
1312   handle->peers = NULL;
1313   GNUNET_break (handle->ready_peer_head == NULL);
1314   GNUNET_free (handle);
1315 }
1316
1317
1318 /**
1319  * Task that calls 'request_next_transmission'.
1320  *
1321  * @param cls the 'struct PeerRecord*'
1322  * @param tc scheduler context
1323  */
1324 static void
1325 run_request_next_transmission (void *cls,
1326                                const struct GNUNET_SCHEDULER_TaskContext *tc)
1327 {
1328   struct PeerRecord *pr = cls;
1329
1330   pr->ntr_task = GNUNET_SCHEDULER_NO_TASK;
1331   request_next_transmission (pr);
1332 }
1333
1334
1335 /**
1336  * Ask the core to call "notify" once it is ready to transmit the
1337  * given number of bytes to the specified "target".    Must only be
1338  * called after a connection to the respective peer has been
1339  * established (and the client has been informed about this).
1340  *
1341  * @param handle connection to core service
1342  * @param cork is corking allowed for this transmission?
1343  * @param priority how important is the message?
1344  * @param maxdelay how long can the message wait?
1345  * @param target who should receive the message,
1346  *        use NULL for this peer (loopback)
1347  * @param notify_size how many bytes of buffer space does notify want?
1348  * @param notify function to call when buffer space is available
1349  * @param notify_cls closure for notify
1350  * @return non-NULL if the notify callback was queued,
1351  *         NULL if we can not even queue the request (insufficient
1352  *         memory); if NULL is returned, "notify" will NOT be called.
1353  */
1354 struct GNUNET_CORE_TransmitHandle *
1355 GNUNET_CORE_notify_transmit_ready (struct GNUNET_CORE_Handle *handle, int cork,
1356                                    uint32_t priority,
1357                                    struct GNUNET_TIME_Relative maxdelay,
1358                                    const struct GNUNET_PeerIdentity *target,
1359                                    size_t notify_size,
1360                                    GNUNET_CONNECTION_TransmitReadyNotify notify,
1361                                    void *notify_cls)
1362 {
1363   struct PeerRecord *pr;
1364   struct GNUNET_CORE_TransmitHandle *th;
1365   struct GNUNET_CORE_TransmitHandle *pos;
1366   struct GNUNET_CORE_TransmitHandle *prev;
1367   struct GNUNET_CORE_TransmitHandle *minp;
1368
1369   pr = GNUNET_CONTAINER_multihashmap_get (handle->peers, &target->hashPubKey);
1370   if (NULL == pr)
1371   {
1372     /* attempt to send to peer that is not connected */
1373     LOG (GNUNET_ERROR_TYPE_WARNING,
1374          "Attempting to send to peer `%s' from peer `%s', but not connected!\n",
1375          GNUNET_i2s (target), GNUNET_h2s (&handle->me.hashPubKey));
1376     GNUNET_break (0);
1377     return NULL;
1378   }
1379   GNUNET_assert (notify_size + sizeof (struct SendMessage) <
1380                  GNUNET_SERVER_MAX_MESSAGE_SIZE);
1381   th = GNUNET_malloc (sizeof (struct GNUNET_CORE_TransmitHandle));
1382   th->peer = pr;
1383   GNUNET_assert (NULL != notify);
1384   th->get_message = notify;
1385   th->get_message_cls = notify_cls;
1386   th->timeout = GNUNET_TIME_relative_to_absolute (maxdelay);
1387   th->priority = priority;
1388   th->msize = notify_size;
1389   th->cork = cork;
1390   /* bound queue size */
1391   if (pr->queue_size == handle->queue_size)
1392   {
1393     /* find lowest-priority entry, but skip the head of the list */
1394     minp = pr->pending_head->next;
1395     prev = minp;
1396     while (prev != NULL)
1397     {
1398       if (prev->priority < minp->priority)
1399         minp = prev;
1400       prev = prev->next;
1401     }
1402     if (minp == NULL)
1403     {
1404       GNUNET_break (handle->queue_size != 0);
1405       GNUNET_break (pr->queue_size == 1);
1406       GNUNET_free (th);
1407 #if DEBUG_CORE
1408       LOG (GNUNET_ERROR_TYPE_DEBUG,
1409            "Dropping transmission request: cannot drop queue head and limit is one\n");
1410 #endif
1411       return NULL;
1412     }
1413     if (priority <= minp->priority)
1414     {
1415 #if DEBUG_CORE
1416       LOG (GNUNET_ERROR_TYPE_DEBUG,
1417            "Dropping transmission request: priority too low\n");
1418 #endif
1419       GNUNET_free (th);
1420       return NULL;              /* priority too low */
1421     }
1422     GNUNET_CONTAINER_DLL_remove (pr->pending_head, pr->pending_tail, minp);
1423     pr->queue_size--;
1424     GNUNET_assert (0 == minp->get_message (minp->get_message_cls, 0, NULL));
1425     GNUNET_free (minp);
1426   }
1427
1428   /* Order entries by deadline, but SKIP 'HEAD' if
1429    * we're in the 'ready_peer_*' DLL */
1430   pos = pr->pending_head;
1431   if ((pr->prev != NULL) || (pr->next != NULL) ||
1432       (pr == handle->ready_peer_head))
1433   {
1434     GNUNET_assert (pos != NULL);
1435     pos = pos->next;            /* skip head */
1436   }
1437
1438   /* insertion sort */
1439   prev = pos;
1440   while ((pos != NULL) && (pos->timeout.abs_value < th->timeout.abs_value))
1441   {
1442     prev = pos;
1443     pos = pos->next;
1444   }
1445   GNUNET_CONTAINER_DLL_insert_after (pr->pending_head, pr->pending_tail, prev,
1446                                      th);
1447   pr->queue_size++;
1448   /* was the request queue previously empty? */
1449 #if DEBUG_CORE
1450   LOG (GNUNET_ERROR_TYPE_DEBUG, "Transmission request added to queue\n");
1451 #endif
1452   if ((pr->pending_head == th) && (pr->ntr_task == GNUNET_SCHEDULER_NO_TASK) &&
1453       (pr->next == NULL) && (pr->prev == NULL) &&
1454       (handle->ready_peer_head != pr))
1455     pr->ntr_task =
1456         GNUNET_SCHEDULER_add_now (&run_request_next_transmission, pr);
1457   return th;
1458 }
1459
1460
1461 /**
1462  * Cancel the specified transmission-ready notification.
1463  *
1464  * @param th handle that was returned by "notify_transmit_ready".
1465  */
1466 void
1467 GNUNET_CORE_notify_transmit_ready_cancel (struct GNUNET_CORE_TransmitHandle *th)
1468 {
1469   struct PeerRecord *pr = th->peer;
1470   struct GNUNET_CORE_Handle *h = pr->ch;
1471   int was_head;
1472
1473   was_head = (pr->pending_head == th);
1474   GNUNET_CONTAINER_DLL_remove (pr->pending_head, pr->pending_tail, th);
1475   pr->queue_size--;
1476   if (th->cm != NULL)
1477   {
1478     /* we're currently in the control queue, remove */
1479     GNUNET_CONTAINER_DLL_remove (h->control_pending_head,
1480                                  h->control_pending_tail, th->cm);
1481     GNUNET_free (th->cm);
1482   }
1483   GNUNET_free (th);
1484   if (was_head)
1485   {
1486     if ((pr->prev != NULL) || (pr->next != NULL) || (pr == h->ready_peer_head))
1487     {
1488       /* the request that was 'approved' by core was
1489        * canceled before it could be transmitted; remove
1490        * us from the 'ready' list */
1491       GNUNET_CONTAINER_DLL_remove (h->ready_peer_head, h->ready_peer_tail, pr);
1492     }
1493     request_next_transmission (pr);
1494   }
1495 }
1496
1497
1498 /* end of core_api.c */