stuff
[oweals/gnunet.git] / src / transport / transport_api.c
1 /*
2      This file is part of GNUnet.
3      (C) 2009, 2010 Christian Grothoff (and other contributing authors)
4
5      GNUnet is free software; you can redistribute it and/or modify
6      it under the terms of the GNU General Public License as published
7      by the Free Software Foundation; either version 3, or (at your
8      option) any later version.
9
10      GNUnet is distributed in the hope that it will be useful, but
11      WITHOUT ANY WARRANTY; without even the implied warranty of
12      MERCHANTABILITY or FITNESS FOR A PARTICULAR PURPOSE.  See the GNU
13      General Public License for more details.
14
15      You should have received a copy of the GNU General Public License
16      along with GNUnet; see the file COPYING.  If not, write to the
17      Free Software Foundation, Inc., 59 Temple Place - Suite 330,
18      Boston, MA 02111-1307, USA.
19 */
20
21 /**
22  * @file transport/transport_api.c
23  * @brief library to access the low-level P2P IO service
24  * @author Christian Grothoff
25  */
26 #include "platform.h"
27 #include "gnunet_bandwidth_lib.h"
28 #include "gnunet_client_lib.h"
29 #include "gnunet_constants.h"
30 #include "gnunet_container_lib.h"
31 #include "gnunet_arm_service.h"
32 #include "gnunet_hello_lib.h"
33 #include "gnunet_protocols.h"
34 #include "gnunet_server_lib.h"
35 #include "gnunet_time_lib.h"
36 #include "gnunet_transport_service.h"
37 #include "transport.h"
38
39 /**
40  * After how long do we give up on transmitting a HELLO
41  * to the service?
42  */
43 #define OFFER_HELLO_TIMEOUT GNUNET_TIME_relative_multiply (GNUNET_TIME_UNIT_SECONDS, 30)
44
45 /**
46  * After how long do we automatically retry an unsuccessful
47  * CONNECT request?
48  */
49 #define CONNECT_RETRY_TIMEOUT GNUNET_TIME_relative_multiply (GNUNET_TIME_UNIT_MILLISECONDS, 750)
50
51 /**
52  * How long should ARM wait when starting up the
53  * transport service before reporting back?
54  */
55 #define START_SERVICE_TIMEOUT GNUNET_TIME_relative_multiply (GNUNET_TIME_UNIT_SECONDS, 5)
56
57 /**
58  * How long should ARM wait when stopping the
59  * transport service before reporting back?
60  */
61 #define STOP_SERVICE_TIMEOUT GNUNET_TIME_relative_multiply (GNUNET_TIME_UNIT_SECONDS, 5)
62
63 /**
64  * How large to start with for the hashmap of neighbours.
65  */
66 #define STARTING_NEIGHBOURS_SIZE 10
67
68
69 /**
70  * What stage are we in for transmission processing?
71  */
72 enum TransmitStage
73   {
74     /**
75      * No active message.
76      */
77     TS_NEW = 0,
78
79     /**
80      * Message in local queue, not given to service.
81      */
82     TS_QUEUED = 1,
83
84     /**
85      * Message given to service, not confirmed (no SEND_OK).
86      */
87     TS_TRANSMITTED = 2,
88
89     /**
90      * One message was given to service and before it was confirmed,
91      * another one was already queued (waiting for SEND_OK to pass on
92      * to service).
93      */
94     TS_TRANSMITTED_QUEUED = 3
95   };
96
97
98 /**
99  * Handle for a transmission-ready request.
100  */
101 struct GNUNET_TRANSPORT_TransmitHandle
102 {
103
104   /**
105    * Neighbour for this handle, NULL for control-traffic.
106    */
107   struct NeighbourList *neighbour;
108
109   /**
110    * Function to call when notify_size bytes are available
111    * for transmission.
112    */
113   GNUNET_CONNECTION_TransmitReadyNotify notify;
114
115   /**
116    * Closure for notify.
117    */
118   void *notify_cls;
119
120   /**
121    * transmit_ready task Id.  The task is used to introduce the
122    * artificial delay that may be required to maintain the bandwidth
123    * limits.  Later, this will be the ID of the "transmit_timeout"
124    * task which is used to signal a timeout if the transmission could
125    * not be done in a timely fashion.
126    */
127   GNUNET_SCHEDULER_TaskIdentifier notify_delay_task;
128
129   /**
130    * Timeout for this request.
131    */
132   struct GNUNET_TIME_Absolute timeout;
133
134   /**
135    * How many bytes is our notify callback waiting for?
136    */
137   size_t notify_size;
138
139   /**
140    * How important is this message?
141    */
142   uint32_t priority;
143
144 };
145
146
147 /**
148  * Handle for a control message queue entry.
149  */
150 struct ControlMessage
151 {
152
153   /**
154    * This is a doubly-linked list.
155    */
156   struct ControlMessage *next;
157
158   /**
159    * This is a doubly-linked list.
160    */
161   struct ControlMessage *prev;
162
163   /**
164    * Overall transport handle.
165    */
166   struct GNUNET_TRANSPORT_Handle *h;
167
168   /**
169    * Function to call when notify_size bytes are available
170    * for transmission.
171    */
172   GNUNET_CONNECTION_TransmitReadyNotify notify;
173
174   /**
175    * Closure for notify.
176    */
177   void *notify_cls;
178
179   /**
180    * transmit_ready task Id.  The task is used to introduce the
181    * artificial delay that may be required to maintain the bandwidth
182    * limits.  Later, this will be the ID of the "transmit_timeout"
183    * task which is used to signal a timeout if the transmission could
184    * not be done in a timely fashion.
185    */
186   GNUNET_SCHEDULER_TaskIdentifier notify_delay_task;
187
188   /**
189    * How many bytes is our notify callback waiting for?
190    */
191   size_t notify_size;
192
193 };
194
195 /**
196  * Context for storing information about attempted next transmission.
197  */
198 struct TryTransmitContext
199 {
200
201   /**
202    * Main transport handle.
203    */
204   struct GNUNET_TRANSPORT_Handle *h;
205
206   /**
207    * Returned transmission handle.
208    */
209   struct GNUNET_TRANSPORT_TransmitHandle *ret;
210
211   /**
212    * Time to retry the send task.
213    */
214   struct GNUNET_TIME_Relative retry_time;
215 };
216
217 /**
218  * Entry in hash table of all of our current neighbours.
219  */
220 struct NeighbourList
221 {
222   /**
223    * Overall transport handle.
224    */
225   struct GNUNET_TRANSPORT_Handle *h;
226
227   /**
228    * Active transmit handle; available if 'transmit_forbidden'
229    * is GNUNET_NO.
230    */
231   struct GNUNET_TRANSPORT_TransmitHandle transmit_handle;
232
233   /**
234    * Identity of this neighbour.
235    */
236   struct GNUNET_PeerIdentity id;
237
238   /**
239    * Outbound bandwidh tracker.
240    */
241   struct GNUNET_BANDWIDTH_Tracker out_tracker;
242
243   /**
244    * Set to GNUNET_NO if we are currently allowed to accept a
245    * message to the transport service for this peer, GNUNET_YES
246    * if we have one and are waiting for transmission, GNUNET_SYSERR
247    * if we are waiting for confirmation AND have already accepted
248    * yet another message.
249    */
250   enum TransmitStage transmit_stage;
251
252   /**
253    * Have we received a notification that this peer is connected
254    * to us right now?
255    */
256   int is_connected;
257
258   /**
259    * Are we in the middle of disconnecting the peer already?
260    */
261   unsigned int in_disconnect;
262
263 };
264
265
266 /**
267  * Linked list of requests from clients for our HELLO that were
268  * deferred.
269  */
270 struct HelloWaitList
271 {
272
273   /**
274    * This is a linked list.
275    */
276   struct HelloWaitList *next;
277
278   /**
279    * Reference back to our transport handle.
280    */
281   struct GNUNET_TRANSPORT_Handle *handle;
282
283   /**
284    * Callback to call once we got our HELLO.
285    */
286   GNUNET_TRANSPORT_HelloUpdateCallback rec;
287
288   /**
289    * Closure for rec.
290    */
291   void *rec_cls;
292
293 };
294
295
296 /**
297  * Handle for the transport service (includes all of the
298  * state for the transport service).
299  */
300 struct GNUNET_TRANSPORT_Handle
301 {
302
303   /**
304    * Closure for the callbacks.
305    */
306   void *cls;
307
308   /**
309    * Function to call for received data.
310    */
311   GNUNET_TRANSPORT_ReceiveCallback rec;
312
313   /**
314    * function to call on connect events
315    */
316   GNUNET_TRANSPORT_NotifyConnect nc_cb;
317
318   /**
319    * function to call on disconnect events
320    */
321   GNUNET_TRANSPORT_NotifyDisconnect nd_cb;
322
323   /**
324    * Head of DLL of control messages.
325    */
326   struct ControlMessage *control_head;
327
328   /**
329    * Tail of DLL of control messages.
330    */
331   struct ControlMessage *control_tail;
332
333   /**
334    * The current HELLO message for this peer.  Updated
335    * whenever transports change their addresses.
336    */
337   struct GNUNET_HELLO_Message *my_hello;
338
339   /**
340    * My client connection to the transport service.
341    */
342   struct GNUNET_CLIENT_Connection *client;
343
344   /**
345    * Handle to our registration with the client for notification.
346    */
347   struct GNUNET_CLIENT_TransmitHandle *network_handle;
348
349   /**
350    * Linked list of pending requests for our HELLO.
351    */
352   struct HelloWaitList *hwl_head;
353
354   /**
355    * My configuration.
356    */
357   const struct GNUNET_CONFIGURATION_Handle *cfg;
358
359   /**
360    * Linked list of the current neighbours of this peer.
361    */
362   struct GNUNET_CONTAINER_MultiHashMap *neighbours;
363
364   /**
365    * Peer identity as assumed by this process, or all zeros.
366    */
367   struct GNUNET_PeerIdentity self;
368
369   /**
370    * ID of the task trying to reconnect to the service.
371    */
372   GNUNET_SCHEDULER_TaskIdentifier reconnect_task;
373
374   /**
375    * ID of the task trying to trigger transmission for a peer
376    * while maintaining bandwidth quotas.
377    */
378   GNUNET_SCHEDULER_TaskIdentifier quota_task;
379
380   /**
381    * Delay until we try to reconnect.
382    */
383   struct GNUNET_TIME_Relative reconnect_delay;
384
385   /**
386    * Set once we are in the process of disconnecting from the
387    * service.
388    */
389   int in_disconnect;
390
391   /**
392    * Should we check that 'self' matches what the service thinks?
393    * (if GNUNET_NO, then 'self' is all zeros!).
394    */
395   int check_self;
396 };
397
398 struct HelloContext
399 {
400
401   /**
402    * Size of the HELLO copied to end of struct.
403    */
404   uint16_t size;
405
406   /**
407    * Continuation to call once HELLO sent.
408    */
409   GNUNET_SCHEDULER_Task cont;
410
411   /**
412    * Closure to call with the continuation.
413    */
414   void *cont_cls;
415
416   /* HELLO */
417 };
418
419
420 /**
421  * Get the neighbour list entry for the given peer
422  *
423  * @param h our context
424  * @param peer peer to look up
425  * @return NULL if no such peer entry exists
426  */
427 static struct NeighbourList *
428 neighbour_find (struct GNUNET_TRANSPORT_Handle *h,
429                 const struct GNUNET_PeerIdentity *peer)
430 {
431   return GNUNET_CONTAINER_multihashmap_get(h->neighbours, &peer->hashPubKey);
432 }
433
434
435 /**
436  * Schedule the task to send one message, either from the control
437  * list or the peer message queues  to the service.
438  */
439 static void schedule_transmission (struct GNUNET_TRANSPORT_Handle *h);
440
441
442 /**
443  * Function called by the scheduler when the timeout for bandwidth
444  * availablility for the target neighbour is reached.
445  *
446  * @param cls the 'struct GNUNET_TRANSPORT_Handle*'
447  * @param tc scheduler context
448  */
449 static void
450 quota_transmit_ready (void *cls, const struct GNUNET_SCHEDULER_TaskContext *tc)
451 {
452   struct GNUNET_TRANSPORT_Handle *h = cls;
453
454   h->quota_task = GNUNET_SCHEDULER_NO_TASK;
455   schedule_transmission (h);
456 }
457
458
459 /**
460  * Iterator over hash map entries, attempt to schedule
461  * a transmission to entries in the neighbour hashmap.
462  *
463  * @param cls closure a TryTransmitContext
464  * @param key current key code
465  * @param value value in the hash map, the neighbour entry to consider
466  * @return GNUNET_YES if we should continue to
467  *         iterate,
468  *         GNUNET_NO if not.
469  */
470 static int
471 try_schedule_transmission (void *cls,
472                            const GNUNET_HashCode * key,
473                            void *value)
474 {
475   struct NeighbourList *n = value;
476   struct TryTransmitContext *try_transmit_ctx = cls;
477   struct GNUNET_TIME_Relative duration;
478   GNUNET_CONNECTION_TransmitReadyNotify notify;
479   struct GNUNET_TRANSPORT_TransmitHandle *th;
480   struct GNUNET_TIME_Absolute duration_abs;
481
482   if (n->transmit_stage != TS_QUEUED)
483     return GNUNET_YES; /* not eligible, keep iterating */
484   if (n->is_connected != GNUNET_YES)
485     return GNUNET_YES; /* keep iterating */
486
487   th = &n->transmit_handle;
488   GNUNET_break (n == th->neighbour);
489   /* check outgoing quota */
490   duration = GNUNET_BANDWIDTH_tracker_get_delay (&n->out_tracker,
491                                                  th->notify_size - sizeof (struct OutboundMessage));
492   duration_abs = GNUNET_TIME_relative_to_absolute (duration);
493   if (th->timeout.abs_value < duration_abs.abs_value)
494     {
495       /* signal timeout! */
496 #if DEBUG_TRANSPORT
497       GNUNET_log (GNUNET_ERROR_TYPE_DEBUG,
498                   "Would need %llu ms before bandwidth is available for delivery to `%4s', that is too long.  Signaling timeout.\n",
499                   duration.rel_value,
500                   GNUNET_i2s (&n->id));
501 #endif
502       if (th->notify_delay_task != GNUNET_SCHEDULER_NO_TASK)
503         {
504           GNUNET_SCHEDULER_cancel (th->notify_delay_task);
505           th->notify_delay_task = GNUNET_SCHEDULER_NO_TASK;
506         }
507       n->transmit_stage = TS_NEW;
508       if (NULL != (notify = th->notify))
509         {
510           th->notify = NULL;
511           GNUNET_assert (0 == notify (th->notify_cls, 0, NULL));
512         }
513       return GNUNET_YES; /* keep iterating */
514     }
515   if (duration.rel_value > 0)
516     {
517 #if DEBUG_TRANSPORT
518       GNUNET_log (GNUNET_ERROR_TYPE_DEBUG,
519                   "Need more bandwidth (%u b/s allowed, %u b needed), delaying delivery to `%4s' by %llu ms\n",
520                   (unsigned int) n->out_tracker.available_bytes_per_s__,
521                   (unsigned int) th->notify_size - sizeof (struct OutboundMessage),
522                   GNUNET_i2s (&n->id),
523                   (unsigned long long) duration.rel_value);
524 #endif
525       try_transmit_ctx->retry_time = GNUNET_TIME_relative_min (try_transmit_ctx->retry_time,
526                                                                duration);
527       return GNUNET_YES; /* keep iterating */
528     }
529 #if DEBUG_TRANSPORT
530   GNUNET_log (GNUNET_ERROR_TYPE_DEBUG,
531               "Have %u bytes of bandwidth available for transmission to `%4s' right now\n",
532               th->notify_size - sizeof (struct OutboundMessage),
533               GNUNET_i2s (&n->id));
534 #endif
535
536   if ( (try_transmit_ctx->ret == NULL) ||
537        (try_transmit_ctx->ret->priority < th->priority) )
538     try_transmit_ctx->ret = th;
539   return GNUNET_YES;
540 }
541
542
543 /**
544  * Figure out which transmission to a peer can be done right now.
545  * If none can, schedule a task to call 'schedule_transmission'
546  * whenever a peer transmission can be done in the future and
547  * return NULL.  Otherwise return the next transmission to be
548  * performed.
549  *
550  * @param h handle to transport
551  * @return NULL to wait longer before doing any peer transmissions
552  */
553 static struct GNUNET_TRANSPORT_TransmitHandle *
554 schedule_peer_transmission (struct GNUNET_TRANSPORT_Handle *h)
555 {
556   struct TryTransmitContext try_transmit_ctx;
557
558   if (h->quota_task != GNUNET_SCHEDULER_NO_TASK)
559     {
560       GNUNET_SCHEDULER_cancel (h->quota_task);
561       h->quota_task = GNUNET_SCHEDULER_NO_TASK;
562     }
563   try_transmit_ctx.h = h;
564   try_transmit_ctx.ret = NULL;
565   try_transmit_ctx.retry_time = GNUNET_TIME_UNIT_FOREVER_REL;
566   GNUNET_CONTAINER_multihashmap_iterate(h->neighbours, 
567                                         &try_schedule_transmission, 
568                                         &try_transmit_ctx);
569   if (try_transmit_ctx.ret == NULL)
570     h->quota_task = GNUNET_SCHEDULER_add_delayed (try_transmit_ctx.retry_time,
571                                                   &quota_transmit_ready,
572                                                   h);
573   return try_transmit_ctx.ret;
574 }
575
576
577 /**
578  * Transmit message(s) to service.
579  *
580  * @param cls handle to transport
581  * @param size number of bytes available in buf
582  * @param buf where to copy the message
583  * @return number of bytes copied to buf
584  */
585 static size_t
586 transport_notify_ready (void *cls, size_t size, void *buf)
587 {
588   struct GNUNET_TRANSPORT_Handle *h = cls;
589   struct ControlMessage *cm;
590   struct GNUNET_TRANSPORT_TransmitHandle *th;
591   struct NeighbourList *n;
592   struct OutboundMessage obm;
593   GNUNET_CONNECTION_TransmitReadyNotify notify;
594   size_t ret;
595   size_t mret;
596   size_t nret;
597   char *cbuf;
598
599   h->network_handle = NULL;
600   if (buf == NULL)
601     {
602       schedule_transmission (h);
603       return 0;
604     }
605 #if DEBUG_TRANSPORT
606   GNUNET_log (GNUNET_ERROR_TYPE_DEBUG,
607               "Ready to transmit %u bytes to transport service\n", size);
608 #endif
609   cbuf = buf;
610   ret = 0;
611   while ( (NULL != (cm = h->control_head)) &&
612           (cm->notify_size <= size) )
613     {
614       if (cm->notify_delay_task != GNUNET_SCHEDULER_NO_TASK)
615         {
616           GNUNET_SCHEDULER_cancel (cm->notify_delay_task);
617           cm->notify_delay_task = GNUNET_SCHEDULER_NO_TASK;
618         }
619       GNUNET_CONTAINER_DLL_remove (h->control_head,
620                                    h->control_tail,
621                                    cm);
622       nret = cm->notify (cm->notify_cls, size, &cbuf[ret]);
623 #if DEBUG_TRANSPORT
624       GNUNET_log (GNUNET_ERROR_TYPE_DEBUG,
625                   "Added %u bytes of control message at %u\n",
626                   nret,
627                   ret);
628 #endif
629       GNUNET_free (cm);
630       ret += nret;
631       size -= nret;
632     }
633   while ( (NULL != (th = schedule_peer_transmission (h))) &&
634           (th->notify_size <= size) )
635     {
636       if (th->notify_delay_task != GNUNET_SCHEDULER_NO_TASK)
637         {
638           GNUNET_SCHEDULER_cancel (th->notify_delay_task);
639           th->notify_delay_task = GNUNET_SCHEDULER_NO_TASK;
640         }
641       n = th->neighbour;
642       switch (n->transmit_stage)
643         {
644         case TS_NEW:
645           GNUNET_break (0);
646           break;
647         case TS_QUEUED:
648           n->transmit_stage = TS_TRANSMITTED;
649           break;
650         case TS_TRANSMITTED:
651           GNUNET_break (0);
652           break;
653         case TS_TRANSMITTED_QUEUED:
654           GNUNET_break (0);
655           break;
656         default:
657           GNUNET_break (0);
658         }
659       GNUNET_assert (size >= sizeof (struct OutboundMessage));
660       notify = th->notify;
661       th->notify = NULL;
662       mret = notify (th->notify_cls,
663                      size - sizeof (struct OutboundMessage),
664                      &cbuf[ret + sizeof (struct OutboundMessage)]);
665       GNUNET_assert (mret <= size - sizeof (struct OutboundMessage));
666 #if DEBUG_TRANSPORT
667       GNUNET_log (GNUNET_ERROR_TYPE_DEBUG,
668                   "Message of %u bytes with timeout %llums constructed for `%4s'\n",
669                   (unsigned int) mret,
670                   (unsigned long long) GNUNET_TIME_absolute_get_remaining (th->timeout).rel_value,
671                   GNUNET_i2s (&n->id));
672 #endif
673       if (mret != 0)    
674         {
675           GNUNET_assert (mret + sizeof (struct OutboundMessage) < GNUNET_SERVER_MAX_MESSAGE_SIZE);
676           obm.header.type = htons (GNUNET_MESSAGE_TYPE_TRANSPORT_SEND);
677           obm.header.size = htons (mret + sizeof (struct OutboundMessage));
678           obm.priority = htonl (th->priority);
679           obm.timeout = GNUNET_TIME_relative_hton (GNUNET_TIME_absolute_get_remaining (th->timeout));
680           obm.peer = n->id;
681           memcpy (&cbuf[ret], &obm, sizeof (struct OutboundMessage));
682           ret += (mret + sizeof (struct OutboundMessage));
683           size -= (mret + sizeof (struct OutboundMessage));
684           GNUNET_BANDWIDTH_tracker_consume (&n->out_tracker, mret);
685         }
686       else
687         {
688           switch (n->transmit_stage)
689             {
690             case TS_NEW:
691               GNUNET_break (0);
692               break;
693             case TS_QUEUED:
694               GNUNET_break (0);
695               break;
696             case TS_TRANSMITTED:
697               n->transmit_stage = TS_NEW;
698               break;
699             case TS_TRANSMITTED_QUEUED:
700               n->transmit_stage = TS_QUEUED;
701               continue;
702             default:
703               GNUNET_break (0);
704             }
705         }
706     }
707   schedule_transmission (h);
708 #if DEBUG_TRANSPORT
709   GNUNET_log (GNUNET_ERROR_TYPE_DEBUG,
710               "Transmitting %u bytes to transport service\n", ret);
711 #endif
712   return ret;
713 }
714
715
716 /**
717  * Schedule the task to send one message, either from the control
718  * list or the peer message queues  to the service.
719  */
720 static void
721 schedule_transmission (struct GNUNET_TRANSPORT_Handle *h)
722 {
723   size_t size;
724   struct GNUNET_TIME_Relative timeout;
725   struct GNUNET_TRANSPORT_TransmitHandle *th;
726
727   if (NULL != h->network_handle)
728     return;
729   if (h->client == NULL)
730     {
731       GNUNET_log (GNUNET_ERROR_TYPE_DEBUG,
732                   _("Could not yet schedule transmission: we are not yet connected to the transport service!\n"));
733       return;                   /* not yet connected */
734     }
735   if (NULL != h->control_head)
736     {
737       size = h->control_head->notify_size;
738       timeout = GNUNET_TIME_UNIT_FOREVER_REL;
739     }
740   else
741     {
742       th = schedule_peer_transmission (h);
743       if (th == NULL)
744         {
745           /* no transmission ready right now */
746 #if DEBUG_TRANSPORT
747           GNUNET_log (GNUNET_ERROR_TYPE_DEBUG,
748                       "Could not yet schedule transmission: none ready\n");
749 #endif
750           return;
751         }
752       size = th->notify_size;
753       timeout = GNUNET_TIME_absolute_get_remaining (th->timeout);
754     }
755 #if DEBUG_TRANSPORT
756     GNUNET_log (GNUNET_ERROR_TYPE_DEBUG,
757                 "Calling notify_transmit_ready\n");
758 #endif
759   h->network_handle =
760     GNUNET_CLIENT_notify_transmit_ready (h->client,
761                                          size,
762                                          timeout,
763                                          GNUNET_NO,
764                                          &transport_notify_ready,
765                                          h);
766   GNUNET_assert (NULL != h->network_handle);
767 }
768
769
770 /**
771  * Called when our transmit request timed out before any transport
772  * reported success connecting to the desired peer or before the
773  * transport was ready to receive.  Signal error and free
774  * TransmitHandle.
775  */
776 static void
777 control_transmit_timeout (void *cls,
778                           const struct GNUNET_SCHEDULER_TaskContext *tc)
779 {
780   struct ControlMessage *th = cls;
781
782   th->notify_delay_task = GNUNET_SCHEDULER_NO_TASK;
783   if (NULL != th->notify)    
784     th->notify (th->notify_cls, 0, NULL);    
785   GNUNET_CONTAINER_DLL_remove (th->h->control_head,
786                                th->h->control_tail,
787                                th);
788   GNUNET_free (th);
789 }
790
791
792 /**
793  * Queue control request for transmission to the transport
794  * service.
795  *
796  * @param h handle to the transport service
797  * @param size number of bytes to be transmitted
798  * @param at_head request must be added to the head of the queue
799  *        (otherwise request will be appended)
800  * @param timeout how long this transmission can wait (at most)
801  * @param notify function to call to get the content
802  * @param notify_cls closure for notify
803  */
804 static void
805 schedule_control_transmit (struct GNUNET_TRANSPORT_Handle *h,
806                            size_t size,
807                            int at_head,
808                            struct GNUNET_TIME_Relative timeout,
809                            GNUNET_CONNECTION_TransmitReadyNotify notify,
810                            void *notify_cls)
811 {
812   struct ControlMessage *cm;
813
814 #if DEBUG_TRANSPORT
815   GNUNET_log (GNUNET_ERROR_TYPE_DEBUG,
816               "Control transmit of %u bytes within %llums requested\n",
817               size, (unsigned long long) timeout.rel_value);
818 #endif
819   cm = GNUNET_malloc (sizeof (struct ControlMessage));
820   cm->h = h;
821   cm->notify = notify;
822   cm->notify_cls = notify_cls;
823   cm->notify_size = size;
824   cm->notify_delay_task
825     = GNUNET_SCHEDULER_add_delayed (timeout, &control_transmit_timeout, cm);
826   if (at_head)
827     GNUNET_CONTAINER_DLL_insert (h->control_head,
828                                  h->control_tail,
829                                  cm);
830   else
831     GNUNET_CONTAINER_DLL_insert_after (h->control_head,
832                                        h->control_tail,
833                                        h->control_tail,
834                                        cm);
835   schedule_transmission (h);
836 }
837
838
839 /**
840  * FIXME: document
841  */
842 struct SetQuotaContext
843 {
844   /**
845    * FIXME: document
846    */
847   struct GNUNET_TRANSPORT_Handle *handle;
848
849   /**
850    * FIXME: document
851    */
852   struct GNUNET_PeerIdentity target;
853
854   /**
855    * FIXME: document
856    */
857   GNUNET_SCHEDULER_Task cont;
858
859   /**
860    * Closure for 'cont'.
861    */
862   void *cont_cls;
863
864   /**
865    * FIXME: document
866    */
867   struct GNUNET_TIME_Absolute timeout;
868
869   /**
870    * FIXME: document
871    */
872   struct GNUNET_BANDWIDTH_Value32NBO quota_in;
873 };
874
875
876 /**
877  * Send SET_QUOTA message to the service.
878  *
879  * @param cls the 'struct SetQuotaContext'
880  * @param size number of bytes available in buf
881  * @param buf where to copy the message
882  * @return number of bytes copied to buf
883  */
884 static size_t
885 send_set_quota (void *cls, size_t size, void *buf)
886 {
887   struct SetQuotaContext *sqc = cls;
888   struct QuotaSetMessage *msg;
889
890   if (buf == NULL)
891     {
892       if (sqc->cont != NULL)
893         GNUNET_SCHEDULER_add_continuation (sqc->cont,
894                                            sqc->cont_cls,
895                                            GNUNET_SCHEDULER_REASON_TIMEOUT);
896       GNUNET_free (sqc);
897       return 0;
898     }
899 #if DEBUG_TRANSPORT
900   GNUNET_log (GNUNET_ERROR_TYPE_DEBUG,
901               "Transmitting `%s' request with respect to `%4s'.\n",
902               "SET_QUOTA",
903               GNUNET_i2s (&sqc->target));
904 #endif
905   GNUNET_assert (size >= sizeof (struct QuotaSetMessage));
906   msg = buf;
907   msg->header.size = htons (sizeof (struct QuotaSetMessage));
908   msg->header.type = htons (GNUNET_MESSAGE_TYPE_TRANSPORT_SET_QUOTA);
909   msg->quota = sqc->quota_in;
910   memcpy (&msg->peer, &sqc->target, sizeof (struct GNUNET_PeerIdentity));
911   if (sqc->cont != NULL)
912     GNUNET_SCHEDULER_add_continuation (sqc->cont,
913                                        sqc->cont_cls,
914                                        GNUNET_SCHEDULER_REASON_PREREQ_DONE);
915   GNUNET_free (sqc);
916   return sizeof (struct QuotaSetMessage);
917 }
918
919
920 /**
921  * Set the share of incoming bandwidth for the given
922  * peer to the specified amount.
923  *
924  * @param handle connection to transport service
925  * @param target who's bandwidth quota is being changed
926  * @param quota_in incoming bandwidth quota in bytes per ms
927  * @param quota_out outgoing bandwidth quota in bytes per ms
928  */
929 void
930 GNUNET_TRANSPORT_set_quota (struct GNUNET_TRANSPORT_Handle *handle,
931                             const struct GNUNET_PeerIdentity *target,
932                             struct GNUNET_BANDWIDTH_Value32NBO quota_in,
933                             struct GNUNET_BANDWIDTH_Value32NBO quota_out)
934 {
935   struct NeighbourList *n;
936   struct SetQuotaContext *sqc;
937
938   n = neighbour_find (handle, target);
939   if (n != NULL)
940     {
941 #if DEBUG_TRANSPORT
942       if (ntohl (quota_out.value__) != n->out_tracker.available_bytes_per_s__)
943         GNUNET_log (GNUNET_ERROR_TYPE_DEBUG,
944                     "Quota changed from %u to %u for peer `%s'\n",
945                     (unsigned int) n->out_tracker.available_bytes_per_s__,
946                     (unsigned int) ntohl (quota_out.value__),
947                     GNUNET_i2s (target));
948       else
949         GNUNET_log (GNUNET_ERROR_TYPE_DEBUG,
950                     "Quota remains at %u for peer `%s'\n",
951                     (unsigned int) n->out_tracker.available_bytes_per_s__,
952                     GNUNET_i2s (target));
953 #endif
954       GNUNET_BANDWIDTH_tracker_update_quota (&n->out_tracker,
955                                              quota_out);
956     }
957   else
958     {
959 #if DEBUG_TRANSPORT
960       GNUNET_log (GNUNET_ERROR_TYPE_DEBUG,
961                   "Quota changed to %u for peer `%s', but I have no such neighbour!\n",
962                   (unsigned int) ntohl (quota_out.value__),
963                   GNUNET_i2s (target));
964 #endif
965     }
966   sqc = GNUNET_malloc (sizeof (struct SetQuotaContext));
967   sqc->handle = handle;
968   sqc->target = *target;
969   sqc->cont = NULL;
970   sqc->cont_cls = NULL;
971   sqc->timeout = GNUNET_TIME_relative_to_absolute (GNUNET_TIME_UNIT_FOREVER_REL);
972   sqc->quota_in = quota_in;
973   schedule_control_transmit (handle,
974                              sizeof (struct QuotaSetMessage),
975                              GNUNET_NO, 
976                              GNUNET_TIME_UNIT_FOREVER_REL, &send_set_quota, sqc);
977 }
978
979
980 /**
981  * Ask the transport service to establish a connection to 
982  * the given peer.
983  *
984  * @param handle connection to transport service
985  * @param target who we should try to connect to
986  */
987 void
988 GNUNET_TRANSPORT_try_connect (struct GNUNET_TRANSPORT_Handle *handle,
989                               const struct GNUNET_PeerIdentity *target)
990 {
991   /* old API does nothing */
992 }
993
994
995
996
997 /**
998  * Obtain the HELLO message for this peer.
999  *
1000  * @param handle connection to transport service
1001  * @param rec function to call with the HELLO, sender will be our peer
1002  *            identity; message and sender will be NULL on timeout
1003  *            (handshake with transport service pending/failed).
1004  *             cost estimate will be 0.
1005  * @param rec_cls closure for rec
1006  */
1007 void
1008 GNUNET_TRANSPORT_get_hello (struct GNUNET_TRANSPORT_Handle *handle,
1009                             GNUNET_TRANSPORT_HelloUpdateCallback rec,
1010                             void *rec_cls)
1011 {
1012   struct HelloWaitList *hwl;
1013
1014   hwl = GNUNET_malloc (sizeof (struct HelloWaitList));
1015   hwl->next = handle->hwl_head;
1016   handle->hwl_head = hwl;
1017   hwl->handle = handle;
1018   hwl->rec = rec;
1019   hwl->rec_cls = rec_cls;
1020   if (handle->my_hello == NULL)
1021     return;
1022   rec (rec_cls, (const struct GNUNET_MessageHeader *) handle->my_hello);
1023 }
1024
1025
1026
1027 /**
1028  * Stop receiving updates about changes to our HELLO message.
1029  *
1030  * @param handle connection to transport service
1031  * @param rec function previously registered to be called with the HELLOs
1032  * @param rec_cls closure for rec
1033  */
1034 void
1035 GNUNET_TRANSPORT_get_hello_cancel (struct GNUNET_TRANSPORT_Handle *handle,
1036                                    GNUNET_TRANSPORT_HelloUpdateCallback rec,
1037                                    void *rec_cls)
1038 {
1039   struct HelloWaitList *pos;
1040   struct HelloWaitList *prev;
1041
1042   prev = NULL;
1043   pos = handle->hwl_head;
1044   while (pos != NULL)
1045     {
1046       if ( (pos->rec == rec) &&
1047            (pos->rec_cls == rec_cls) )
1048         break;
1049       prev = pos;
1050       pos = pos->next;
1051     }
1052   GNUNET_break (pos != NULL);
1053   if (pos == NULL)
1054     return;
1055   if (prev == NULL)
1056     handle->hwl_head = pos->next;
1057   else
1058     prev->next = pos->next;
1059   GNUNET_free (pos);
1060 }
1061
1062
1063 /**
1064  * Send HELLO message to the service.
1065  *
1066  * @param cls the HELLO message to send
1067  * @param size number of bytes available in buf
1068  * @param buf where to copy the message
1069  * @return number of bytes copied to buf
1070  */
1071 static size_t
1072 send_hello (void *cls, size_t size, void *buf)
1073 {
1074   struct HelloContext *hc = cls;
1075   uint16_t ssize;
1076   if (buf == NULL)
1077     {
1078 #if DEBUG_TRANSPORT_TIMEOUT
1079       GNUNET_log (GNUNET_ERROR_TYPE_DEBUG,
1080                   "Timeout while trying to transmit `%s' request.\n",
1081                   "HELLO");
1082 #endif
1083       GNUNET_SCHEDULER_add_now(hc->cont, hc->cont_cls);
1084       GNUNET_free (hc);
1085       return 0;
1086     }
1087 #if DEBUG_TRANSPORT
1088   GNUNET_log (GNUNET_ERROR_TYPE_DEBUG,
1089               "Transmitting `%s' request.\n", "HELLO");
1090 #endif
1091   GNUNET_assert (size >= hc->size);
1092   memcpy (buf, &hc[1], hc->size);
1093
1094   if (hc->cont != NULL)
1095     {
1096       GNUNET_SCHEDULER_add_continuation(hc->cont, hc->cont_cls, GNUNET_SCHEDULER_REASON_PREREQ_DONE);
1097     }
1098   ssize = hc->size;
1099   GNUNET_free (hc);
1100   return ssize;
1101 }
1102
1103
1104 /**
1105  * Offer the transport service the HELLO of another peer.  Note that
1106  * the transport service may just ignore this message if the HELLO is
1107  * malformed or useless due to our local configuration.
1108  *
1109  * @param handle connection to transport service
1110  * @param hello the hello message
1111  * @param cont continuation to call when HELLO has been sent
1112  * @param cls closure for continuation
1113  *
1114  */
1115 void
1116 GNUNET_TRANSPORT_offer_hello (struct GNUNET_TRANSPORT_Handle *handle,
1117                               const struct GNUNET_MessageHeader *hello,
1118                               GNUNET_SCHEDULER_Task cont,
1119                               void *cls)
1120 {
1121   uint16_t size;
1122   struct GNUNET_PeerIdentity peer;
1123   struct HelloContext *hc;
1124
1125   GNUNET_break (ntohs (hello->type) == GNUNET_MESSAGE_TYPE_HELLO);
1126   size = ntohs (hello->size);
1127   GNUNET_break (size >= sizeof (struct GNUNET_MessageHeader));
1128   if (GNUNET_OK != GNUNET_HELLO_get_id ((const struct GNUNET_HELLO_Message*) hello,
1129                                         &peer))
1130     {
1131       GNUNET_break (0);
1132       return;
1133     }
1134   hc = GNUNET_malloc(sizeof(struct HelloContext) + size);
1135   hc->size = size;
1136   hc->cont = cont;
1137   hc->cont_cls = cls;
1138   memcpy (&hc[1], hello, size);
1139
1140 #if DEBUG_TRANSPORT
1141   GNUNET_log (GNUNET_ERROR_TYPE_DEBUG,
1142               "Offering `%s' message of `%4s' to transport for validation.\n",
1143               "HELLO",
1144               GNUNET_i2s (&peer));
1145 #endif
1146
1147   schedule_control_transmit (handle,
1148                              size,
1149                              GNUNET_NO, OFFER_HELLO_TIMEOUT, &send_hello, hc);
1150 }
1151
1152
1153 /**
1154  * Transmit START message to service.
1155  *
1156  * @param cls unused
1157  * @param size number of bytes available in buf
1158  * @param buf where to copy the message
1159  * @return number of bytes copied to buf
1160  */
1161 static size_t
1162 send_start (void *cls, size_t size, void *buf)
1163 {
1164   struct GNUNET_TRANSPORT_Handle *h = cls;
1165   struct StartMessage s;
1166
1167   if (buf == NULL)
1168     {
1169       /* Can only be shutdown, just give up */
1170 #if DEBUG_TRANSPORT
1171       GNUNET_log (GNUNET_ERROR_TYPE_DEBUG,
1172                   "Shutdown while trying to transmit `%s' request.\n",
1173                   "START");
1174 #endif
1175       return 0;
1176     }
1177 #if DEBUG_TRANSPORT
1178   GNUNET_log (GNUNET_ERROR_TYPE_DEBUG,
1179               "Transmitting `%s' request.\n", "START");
1180 #endif
1181   GNUNET_assert (size >= sizeof (struct StartMessage));
1182   s.header.size = htons (sizeof (struct StartMessage));
1183   s.header.type = htons (GNUNET_MESSAGE_TYPE_TRANSPORT_START);
1184   s.do_check = htonl (h->check_self);
1185   s.self = h->self;
1186   memcpy (buf, &s, sizeof (struct StartMessage));
1187   return sizeof (struct StartMessage);
1188 }
1189
1190
1191 /**
1192  * Free neighbour.
1193  *
1194  * @param n the entry to free
1195  */
1196 static void
1197 neighbour_free (struct NeighbourList *n)
1198 {
1199   struct GNUNET_TRANSPORT_Handle *h;
1200
1201   /* Added so task gets canceled when a disconnect is received! */
1202   /* Method 1
1203   if (n->transmit_handle.notify_delay_task != GNUNET_SCHEDULER_NO_TASK)
1204     {
1205       GNUNET_SCHEDULER_cancel(n->transmit_handle.notify_delay_task);
1206       n->transmit_handle.notify_delay_task = GNUNET_SCHEDULER_NO_TASK;
1207       n->transmit_handle.notify = NULL;
1208     }
1209   */
1210   /* NATE: if the above is not needed, then clearly this assertion
1211      should hold (I've checked the code and I'm pretty sure this is
1212      true. -CG 
1213      FIXME: remove above comments once we've seen tests pass with the assert... */
1214   GNUNET_assert (n->transmit_handle.notify_delay_task == GNUNET_SCHEDULER_NO_TASK);
1215   GNUNET_assert (n->transmit_handle.notify == NULL);
1216   h = n->h;
1217 #if DEBUG_TRANSPORT
1218   GNUNET_log (GNUNET_ERROR_TYPE_DEBUG,
1219               "Removing neighbour `%s' from list of connected peers.\n",
1220               GNUNET_i2s (&n->id));
1221 #endif
1222   GNUNET_break (n->is_connected == GNUNET_NO);
1223   GNUNET_break (n->transmit_stage == TS_NEW);
1224
1225   GNUNET_assert(GNUNET_YES == 
1226                 GNUNET_CONTAINER_multihashmap_remove(h->neighbours, 
1227                                                      &n->id.hashPubKey, 
1228                                                      n));
1229   GNUNET_free (n);
1230 }
1231
1232
1233 /**
1234  * Mark neighbour as disconnected.
1235  *
1236  * @param n the entry to mark as disconnected
1237  */
1238 static void
1239 neighbour_disconnect (struct NeighbourList *n)
1240 {
1241   struct GNUNET_TRANSPORT_Handle *h = n->h;
1242 #if DEBUG_TRANSPORT
1243   GNUNET_log (GNUNET_ERROR_TYPE_DEBUG,
1244               "Removing neighbour `%s' from list of connected peers.\n",
1245               GNUNET_i2s (&n->id));
1246 #endif
1247   GNUNET_break (n->is_connected == GNUNET_YES);
1248   n->is_connected = GNUNET_NO;
1249   /* FIXME: this 'in_disconnect' flag is dubious; we should define 
1250      clearly what disconnect means for pending 'notify_transmit_ready'
1251      requests; maybe a good approach is to REQUIRE clients to 
1252      call 'notify_transmit_ready_cancel' on pending requests on disconnect
1253      and otherwise FAIL HARD with an assertion failure before 
1254      'neighbour_free' right here (transmit_stage would be forced
1255      to 'TS_NEW') */
1256   n->in_disconnect = GNUNET_YES;
1257   if (h->nd_cb != NULL)
1258     h->nd_cb (h->cls, &n->id);
1259   if (n->transmit_stage == TS_NEW)    
1260     neighbour_free (n);   
1261 }
1262
1263
1264 /**
1265  * Function we use for handling incoming messages.
1266  *
1267  * @param cls closure (struct GNUNET_TRANSPORT_Handle *)
1268  * @param msg message received, NULL on timeout or fatal error
1269  */
1270 static void demultiplexer (void *cls,
1271                            const struct GNUNET_MessageHeader *msg);
1272
1273
1274 /**
1275  * Iterator over hash map entries, for getting rid of a neighbor
1276  * upon a reconnect call.
1277  *
1278  * @param cls closure (NULL)
1279  * @param key current key code
1280  * @param value value in the hash map, the neighbour entry to forget
1281  * @return GNUNET_YES if we should continue to
1282  *         iterate,
1283  *         GNUNET_NO if not.
1284  */
1285 static int
1286 forget_neighbours (void *cls,
1287                    const GNUNET_HashCode * key,
1288                    void *value)
1289 {
1290   struct NeighbourList *n = value;
1291
1292 #if DEBUG_TRANSPORT_DISCONNECT
1293   GNUNET_log (GNUNET_ERROR_TYPE_DEBUG,
1294               "Disconnecting due to reconnect being called\n");
1295 #endif
1296   if (n->is_connected)
1297     neighbour_disconnect (n);
1298
1299   return GNUNET_YES;
1300 }
1301
1302
1303 /**
1304  * Try again to connect to transport service.
1305  *
1306  * @param cls the handle to the transport service
1307  * @param tc scheduler context
1308  */
1309 static void
1310 reconnect (void *cls,
1311            const struct GNUNET_SCHEDULER_TaskContext *tc)
1312 {
1313   struct GNUNET_TRANSPORT_Handle *h = cls;
1314   struct ControlMessage *pos;
1315
1316   h->reconnect_task = GNUNET_SCHEDULER_NO_TASK;
1317   if ( (tc->reason & GNUNET_SCHEDULER_REASON_SHUTDOWN) != 0)
1318     {
1319       /* shutdown, just give up */
1320       return;
1321     }
1322   /* Forget about all neighbours that we used to be connected to */
1323   GNUNET_CONTAINER_multihashmap_iterate(h->neighbours, 
1324                                         &forget_neighbours, 
1325                                         NULL);
1326
1327 #if DEBUG_TRANSPORT
1328   GNUNET_log (GNUNET_ERROR_TYPE_DEBUG,
1329               "Connecting to transport service.\n");
1330 #endif
1331   GNUNET_assert (h->client == NULL);
1332   h->client = GNUNET_CLIENT_connect ("transport", h->cfg);
1333   GNUNET_assert (h->client != NULL);
1334   /* make sure we don't send "START" twice, remove existing entry from
1335      queue (if present) */
1336   pos = h->control_head;
1337   while (pos != NULL)
1338     {
1339       if (pos->notify == &send_start)
1340         {
1341           GNUNET_CONTAINER_DLL_remove (h->control_head,
1342                                        h->control_tail,
1343                                        pos);
1344           if (GNUNET_SCHEDULER_NO_TASK != pos->notify_delay_task)
1345             {
1346               GNUNET_SCHEDULER_cancel (pos->notify_delay_task);
1347               pos->notify_delay_task = GNUNET_SCHEDULER_NO_TASK;
1348             }
1349           GNUNET_free (pos);
1350           break;
1351         }
1352       pos = pos->next;
1353     }
1354   schedule_control_transmit (h,
1355                              sizeof (struct StartMessage),
1356                              GNUNET_YES,
1357                              GNUNET_TIME_UNIT_FOREVER_REL, &send_start, h);
1358   GNUNET_CLIENT_receive (h->client,
1359                          &demultiplexer, h, GNUNET_TIME_UNIT_FOREVER_REL);
1360 }
1361
1362
1363 /**
1364  * Function that will schedule the job that will try
1365  * to connect us again to the client.
1366  *
1367  * @param h transport service to reconnect
1368  */
1369 static void
1370 schedule_reconnect (struct GNUNET_TRANSPORT_Handle *h)
1371 {
1372 #if DEBUG_TRANSPORT
1373   GNUNET_log (GNUNET_ERROR_TYPE_DEBUG,
1374               "Scheduling task to reconnect to transport service in %llu ms.\n",
1375               h->reconnect_delay.rel_value);
1376 #endif
1377   GNUNET_assert (h->client == NULL);
1378   GNUNET_assert (h->reconnect_task == GNUNET_SCHEDULER_NO_TASK);
1379   h->reconnect_task
1380     = GNUNET_SCHEDULER_add_delayed (h->reconnect_delay, &reconnect, h);
1381   if (h->reconnect_delay.rel_value == 0)
1382     {
1383       h->reconnect_delay = GNUNET_TIME_UNIT_MILLISECONDS;
1384     }
1385   else
1386     {
1387       h->reconnect_delay = GNUNET_TIME_relative_multiply (h->reconnect_delay, 2);
1388       h->reconnect_delay = GNUNET_TIME_relative_min (GNUNET_TIME_UNIT_SECONDS,
1389                                                      h->reconnect_delay);
1390     }
1391 }
1392
1393
1394 /**
1395  * Send request connect message to the service.
1396  *
1397  * @param cls the TransportRequestConnectMessage
1398  * @param size number of bytes available in buf
1399  * @param buf where to copy the message
1400  * @return number of bytes copied to buf
1401  */
1402 static size_t
1403 send_transport_request_connect (void *cls, size_t size, void *buf)
1404 {
1405   struct TransportRequestConnectMessage *trcm = cls;
1406
1407   if (buf == NULL)
1408     {
1409 #if DEBUG_TRANSPORT
1410       GNUNET_log (GNUNET_ERROR_TYPE_DEBUG,
1411                   "Buffer null for %s\n",
1412                   "REQUEST_CONNECT");
1413 #endif
1414       GNUNET_free (trcm);
1415       return 0;
1416     }
1417 #if DEBUG_TRANSPORT
1418   GNUNET_log (GNUNET_ERROR_TYPE_DEBUG,
1419               "Transmitting `%s' request for `%4s'.\n",
1420               "REQUEST_CONNECT",
1421               GNUNET_i2s (&trcm->peer));
1422 #endif
1423   GNUNET_assert (size >= sizeof (struct TransportRequestConnectMessage));
1424   memcpy(buf, trcm, sizeof(struct TransportRequestConnectMessage));
1425   GNUNET_free (trcm);
1426   return sizeof(struct TransportRequestConnectMessage);
1427 }
1428
1429 /**
1430  * Create and send a request connect message to
1431  * the transport service for a particular peer.
1432  *
1433  * @param h handle to the transport service
1434  * @param n the neighbor to send the request connect message about
1435  *
1436  */
1437 static void 
1438 send_request_connect_message(struct GNUNET_TRANSPORT_Handle *h, struct NeighbourList *n)
1439 {
1440   struct TransportRequestConnectMessage *trcm;
1441
1442   trcm = GNUNET_malloc(sizeof(struct TransportRequestConnectMessage));
1443   trcm->header.type = htons(GNUNET_MESSAGE_TYPE_TRANSPORT_REQUEST_CONNECT);
1444   trcm->header.size = htons(sizeof(struct TransportRequestConnectMessage));
1445   memcpy(&trcm->peer, &n->id, sizeof(struct GNUNET_PeerIdentity));
1446   schedule_control_transmit (h,
1447                              sizeof (struct TransportRequestConnectMessage),
1448                              GNUNET_NO,
1449                              GNUNET_TIME_UNIT_FOREVER_REL, &send_transport_request_connect, trcm);
1450 }
1451
1452
1453 /**
1454  * Add neighbour to our list
1455  *
1456  * @return NULL if this API is currently disconnecting from the service
1457  */
1458 static struct NeighbourList *
1459 neighbour_add (struct GNUNET_TRANSPORT_Handle *h,
1460                const struct GNUNET_PeerIdentity *pid)
1461 {
1462   struct NeighbourList *n;
1463
1464   if (GNUNET_YES == h->in_disconnect)
1465     return NULL;
1466   /* check for duplicates */
1467   if (NULL != (n = neighbour_find (h, pid)))
1468     {
1469       GNUNET_break (0);
1470       return n;
1471     }
1472 #if DEBUG_TRANSPORT
1473   GNUNET_log (GNUNET_ERROR_TYPE_DEBUG,
1474               "Creating entry for neighbour `%4s'.\n",
1475               GNUNET_i2s (pid));
1476 #endif
1477   n = GNUNET_malloc (sizeof (struct NeighbourList));
1478   n->id = *pid;
1479   n->h = h;
1480   GNUNET_BANDWIDTH_tracker_init (&n->out_tracker,
1481                                  GNUNET_CONSTANTS_DEFAULT_BW_IN_OUT,
1482                                  MAX_BANDWIDTH_CARRY_S);
1483   GNUNET_CONTAINER_multihashmap_put (h->neighbours,
1484                                      &pid->hashPubKey,
1485                                      n,
1486                                      GNUNET_CONTAINER_MULTIHASHMAPOPTION_UNIQUE_ONLY);
1487
1488   return n;
1489 }
1490
1491
1492 /**
1493  * Iterator over hash map entries, for deleting state of a neighbor.
1494  *
1495  * @param cls closure (NULL)
1496  * @param key current key code
1497  * @param value value in the hash map, the neighbour entry to delete
1498  * @return GNUNET_YES if we should continue to
1499  *         iterate,
1500  *         GNUNET_NO if not.
1501  */
1502 static int
1503 delete_neighbours (void *cls,
1504                    const GNUNET_HashCode * key,
1505                    void *value)
1506 {
1507   struct NeighbourList *n = value;
1508   struct GNUNET_TRANSPORT_TransmitHandle *th;
1509
1510   switch (n->transmit_stage)
1511     {
1512     case TS_NEW:
1513     case TS_TRANSMITTED:
1514       /* nothing to do */
1515       break;
1516     case TS_QUEUED:
1517     case TS_TRANSMITTED_QUEUED:
1518       th = &n->transmit_handle;
1519       if (th->notify_delay_task != GNUNET_SCHEDULER_NO_TASK)
1520         {
1521           GNUNET_SCHEDULER_cancel (th->notify_delay_task);
1522           th->notify_delay_task = GNUNET_SCHEDULER_NO_TASK;
1523         }
1524       GNUNET_assert (0 == th->notify (th->notify_cls, 0, NULL));
1525       break;
1526     default:
1527       GNUNET_break (0);
1528     }
1529   GNUNET_free (n);
1530   return GNUNET_YES;
1531 }
1532
1533
1534 /**
1535  * Connect to the transport service.  Note that the connection may
1536  * complete (or fail) asynchronously.
1537  *
1538  * @param cfg configuration to use
1539  * @param self our own identity (API should check that it matches
1540  *             the identity found by transport), or NULL (no check)
1541  * @param cls closure for the callbacks
1542  * @param rec receive function to call
1543  * @param nc function to call on connect events
1544  * @param nd function to call on disconnect events
1545  */
1546 struct GNUNET_TRANSPORT_Handle *
1547 GNUNET_TRANSPORT_connect (const struct GNUNET_CONFIGURATION_Handle *cfg,
1548                           const struct GNUNET_PeerIdentity *self,
1549                           void *cls,
1550                           GNUNET_TRANSPORT_ReceiveCallback rec,
1551                           GNUNET_TRANSPORT_NotifyConnect nc,
1552                           GNUNET_TRANSPORT_NotifyDisconnect nd)
1553 {
1554   struct GNUNET_TRANSPORT_Handle *ret;
1555
1556   ret = GNUNET_malloc (sizeof (struct GNUNET_TRANSPORT_Handle));
1557   if (self != NULL)
1558     {
1559       ret->self = *self;
1560       ret->check_self = GNUNET_YES;
1561     }
1562   ret->cfg = cfg;
1563   ret->cls = cls;
1564   ret->rec = rec;
1565   ret->nc_cb = nc;
1566   ret->nd_cb = nd;
1567   ret->reconnect_delay = GNUNET_TIME_UNIT_ZERO;
1568   ret->neighbours = GNUNET_CONTAINER_multihashmap_create(STARTING_NEIGHBOURS_SIZE);
1569   schedule_reconnect (ret);
1570   return ret;
1571 }
1572
1573
1574 /**
1575  * Disconnect from the transport service.
1576  */
1577 void
1578 GNUNET_TRANSPORT_disconnect (struct GNUNET_TRANSPORT_Handle *handle)
1579 {
1580   struct HelloWaitList *hwl;
1581   struct GNUNET_CLIENT_Connection *client;
1582   struct ControlMessage *cm;
1583
1584 #if DEBUG_TRANSPORT
1585   GNUNET_log (GNUNET_ERROR_TYPE_DEBUG, "Transport disconnect called!\n");
1586 #endif
1587   /* FIXME: this flag is dubious, we should be able to do this
1588      more cleanly; also, we should probably do 'disconnect'
1589      callbacks for every connected peer here, i.e. by calling
1590      the iterator with 'forget_neighbours' instead of 'delete_neighbours'.
1591   */
1592   
1593   handle->in_disconnect = GNUNET_YES;
1594
1595   GNUNET_assert (GNUNET_SYSERR !=
1596                  GNUNET_CONTAINER_multihashmap_iterate(handle->neighbours,
1597                                                        &delete_neighbours,
1598                                                        handle));
1599   GNUNET_CONTAINER_multihashmap_destroy (handle->neighbours);
1600
1601   while (NULL != (hwl = handle->hwl_head))
1602     {
1603       handle->hwl_head = hwl->next;
1604       GNUNET_log (GNUNET_ERROR_TYPE_WARNING,
1605                   _
1606                   ("Disconnect while notification for `%s' still registered.\n"),
1607                   "HELLO");
1608       if (hwl->rec != NULL)
1609         hwl->rec (hwl->rec_cls, NULL);
1610       GNUNET_free (hwl);
1611     }
1612
1613   /* Check for still scheduled control messages, cancel delay tasks if so */
1614   /* Added because somehow a notify_delay_task is remaining scheduled and is ever so annoying */
1615   while ( (NULL != (cm = handle->control_head)))
1616     {
1617 #if DEBUG_TRANSPORT
1618       GNUNET_log (GNUNET_ERROR_TYPE_DEBUG,
1619                   "Disconnect before control message sent!\n");
1620 #endif
1621       if (cm->notify_delay_task != GNUNET_SCHEDULER_NO_TASK)
1622         {
1623           GNUNET_SCHEDULER_cancel (cm->notify_delay_task);
1624           cm->notify_delay_task = GNUNET_SCHEDULER_NO_TASK;
1625         }
1626       GNUNET_CONTAINER_DLL_remove (handle->control_head,
1627                                    handle->control_tail,
1628                                    cm);
1629       GNUNET_free (cm);
1630     }
1631   /* end check */
1632
1633   if (handle->reconnect_task != GNUNET_SCHEDULER_NO_TASK)
1634     {
1635       GNUNET_SCHEDULER_cancel (handle->reconnect_task);
1636       handle->reconnect_task = GNUNET_SCHEDULER_NO_TASK;
1637     }
1638   if (handle->quota_task != GNUNET_SCHEDULER_NO_TASK)
1639     {
1640       GNUNET_SCHEDULER_cancel (handle->quota_task);
1641       handle->quota_task = GNUNET_SCHEDULER_NO_TASK;
1642     }
1643   GNUNET_free_non_null (handle->my_hello);
1644   handle->my_hello = NULL;
1645
1646   if (NULL != handle->network_handle)
1647     {
1648       GNUNET_CLIENT_notify_transmit_ready_cancel (handle->network_handle);
1649       handle->network_handle = NULL;
1650     }
1651   if (NULL != (client = handle->client))
1652     {
1653 #if DEBUG_TRANSPORT
1654       GNUNET_log (GNUNET_ERROR_TYPE_DEBUG,
1655                   "Disconnecting from transport service for good.\n");
1656 #endif
1657       handle->client = NULL;
1658       GNUNET_CLIENT_disconnect (client, GNUNET_YES);
1659     }
1660   GNUNET_free (handle);
1661 }
1662
1663
1664 /**
1665  * Function we use for handling incoming messages.
1666  *
1667  * @param cls closure (struct GNUNET_TRANSPORT_Handle *)
1668  * @param msg message received, NULL on timeout or fatal error
1669  */
1670 static void
1671 demultiplexer (void *cls, const struct GNUNET_MessageHeader *msg)
1672 {
1673   struct GNUNET_TRANSPORT_Handle *h = cls;
1674   const struct DisconnectInfoMessage *dim;
1675   const struct ConnectInfoMessage *cim;
1676   const struct InboundMessage *im;
1677   const struct GNUNET_MessageHeader *imm;
1678   const struct SendOkMessage *okm;
1679   struct HelloWaitList *hwl;
1680   struct HelloWaitList *next_hwl;
1681   struct NeighbourList *n;
1682   struct GNUNET_PeerIdentity me;
1683   uint16_t size;
1684   uint32_t ats_count;
1685
1686   if (h->client == NULL)
1687     {
1688       /* shutdown initiated from 'GNUNET_TRANSPORT_disconnect',
1689          finish clean up work! */
1690       GNUNET_free (h);
1691       return;
1692     }
1693   if (msg == NULL)
1694     {
1695 #if DEBUG_TRANSPORT
1696       GNUNET_log (GNUNET_ERROR_TYPE_INFO,
1697                   "Error receiving from transport service, disconnecting temporarily.\n");
1698 #endif
1699       if (h->network_handle != NULL)
1700         {
1701           GNUNET_CLIENT_notify_transmit_ready_cancel (h->network_handle);
1702           h->network_handle = NULL;
1703         }
1704       GNUNET_CLIENT_disconnect (h->client, GNUNET_NO);
1705       h->client = NULL;
1706       schedule_reconnect (h);
1707       return;
1708     }
1709   GNUNET_CLIENT_receive (h->client,
1710                          &demultiplexer, h, GNUNET_TIME_UNIT_FOREVER_REL);
1711   size = ntohs (msg->size);
1712   switch (ntohs (msg->type))
1713     {
1714     case GNUNET_MESSAGE_TYPE_HELLO:
1715       if (GNUNET_OK !=
1716           GNUNET_HELLO_get_id ((const struct GNUNET_HELLO_Message *) msg,
1717                                &me))
1718         {
1719           GNUNET_break (0);
1720           break;
1721         }
1722 #if DEBUG_TRANSPORT
1723       GNUNET_log (GNUNET_ERROR_TYPE_DEBUG,
1724                   "Receiving (my own) `%s' message, I am `%4s'.\n",
1725                   "HELLO", GNUNET_i2s (&me));
1726 #endif
1727       GNUNET_free_non_null (h->my_hello);
1728       h->my_hello = NULL;
1729       if (size < sizeof (struct GNUNET_MessageHeader))
1730         {
1731           GNUNET_break (0);
1732           break;
1733         }
1734       h->my_hello = GNUNET_malloc (size);
1735       memcpy (h->my_hello, msg, size);
1736       hwl = h->hwl_head;
1737       while (NULL != hwl)
1738         {
1739           next_hwl = hwl->next;
1740           hwl->rec (hwl->rec_cls,
1741                     (const struct GNUNET_MessageHeader *) h->my_hello);
1742           hwl = next_hwl;
1743         }
1744       break;
1745     case GNUNET_MESSAGE_TYPE_TRANSPORT_CONNECT:
1746
1747       if (size < sizeof (struct ConnectInfoMessage))
1748         {
1749           GNUNET_break (0);
1750           break;
1751         }
1752       cim = (const struct ConnectInfoMessage *) msg;
1753       ats_count = ntohl (cim->ats_count);
1754       if (size != sizeof (struct ConnectInfoMessage) + ats_count * sizeof (struct GNUNET_TRANSPORT_ATS_Information))
1755         {
1756           GNUNET_break (0);
1757           break;
1758         }
1759
1760 #if DEBUG_TRANSPORT
1761       GNUNET_log (GNUNET_ERROR_TYPE_DEBUG,
1762                   "Receiving `%s' message for `%4s'.\n",
1763                   "CONNECT", GNUNET_i2s (&cim->id));
1764 #endif
1765       n = neighbour_find (h, &cim->id);
1766       if (n == NULL)
1767           n = neighbour_add (h, &cim->id);
1768       if (n == NULL)
1769                  return;
1770       GNUNET_break (n->is_connected == GNUNET_NO);
1771       n->is_connected = GNUNET_YES;
1772       /* FIXME */
1773       if (h->nc_cb != NULL)
1774           h->nc_cb (h->cls, &n->id,
1775                   &cim->ats,ats_count);
1776       /* FIXEND */
1777       break;
1778     case GNUNET_MESSAGE_TYPE_TRANSPORT_DISCONNECT:
1779       if (size != sizeof (struct DisconnectInfoMessage))
1780         {
1781           GNUNET_break (0);
1782           break;
1783         }
1784       dim = (const struct DisconnectInfoMessage *) msg;
1785       GNUNET_break (ntohl (dim->reserved) == 0);
1786 #if DEBUG_TRANSPORT_DISCONNECT
1787       GNUNET_log (GNUNET_ERROR_TYPE_DEBUG,
1788                   "Receiving `%s' message for `%4s'.\n",
1789                   "DISCONNECT",
1790                   GNUNET_i2s (&dim->peer));
1791 #endif
1792       n = neighbour_find (h, &dim->peer);
1793       GNUNET_break (n != NULL);
1794       if (n != NULL)
1795         neighbour_disconnect (n);       
1796       break;
1797     case GNUNET_MESSAGE_TYPE_TRANSPORT_SEND_OK:
1798       if (size != sizeof (struct SendOkMessage))
1799         {
1800           GNUNET_break (0);
1801           break;
1802         }
1803       okm = (const struct SendOkMessage *) msg;
1804 #if DEBUG_TRANSPORT
1805       GNUNET_log (GNUNET_ERROR_TYPE_DEBUG,
1806                   "Receiving `%s' message, transmission %s.\n", "SEND_OK",
1807                   ntohl (okm->success) == GNUNET_OK ? "succeeded" : "failed");
1808 #endif
1809       n = neighbour_find (h, &okm->peer);
1810       GNUNET_assert (n != NULL);
1811       switch (n->transmit_stage)
1812         {
1813         case TS_NEW:
1814           GNUNET_break (0);
1815           break;
1816         case TS_QUEUED:
1817           GNUNET_break (0);
1818           break;
1819         case TS_TRANSMITTED:
1820           n->transmit_stage = TS_NEW;
1821           break;
1822         case TS_TRANSMITTED_QUEUED:
1823           n->transmit_stage = TS_QUEUED;
1824           schedule_transmission (h);
1825           break;
1826         default:
1827           GNUNET_break (0);
1828         }
1829       break;
1830     case GNUNET_MESSAGE_TYPE_TRANSPORT_RECV:
1831 #if DEBUG_TRANSPORT
1832       GNUNET_log (GNUNET_ERROR_TYPE_DEBUG,
1833                   "Receiving `%s' message.\n", "RECV");
1834 #endif
1835       if (size <
1836           sizeof (struct InboundMessage) +
1837           sizeof (struct GNUNET_MessageHeader))
1838         {
1839           GNUNET_break (0);
1840           break;
1841         }
1842       im = (const struct InboundMessage *) msg;
1843       GNUNET_break (0 == ntohl (im->reserved));
1844       ats_count = ntohl(im->ats_count);
1845       //imm = (const struct GNUNET_MessageHeader *) &im[1];
1846       imm = (const struct GNUNET_MessageHeader *) &((&(im->ats))[ats_count+1]);
1847
1848       if (ntohs (imm->size) + sizeof (struct InboundMessage) + ats_count * sizeof (struct GNUNET_TRANSPORT_ATS_Information) != size)
1849         {
1850           GNUNET_break (0);
1851           break;
1852         }
1853 #if DEBUG_TRANSPORT
1854       GNUNET_log (GNUNET_ERROR_TYPE_DEBUG,
1855                   "Received message of type %u from `%4s'.\n",
1856                   ntohs (imm->type), GNUNET_i2s (&im->peer));
1857 #endif
1858       n = neighbour_find (h, &im->peer);
1859       if (n == NULL)
1860         {
1861           GNUNET_break (0);
1862           break;
1863         }
1864       if (n->is_connected != GNUNET_YES)
1865         {
1866           GNUNET_break (0);
1867           break;
1868         }
1869       /* FIXME: */
1870       if (h->rec != NULL)
1871                 h->rec (h->cls, &im->peer, imm,
1872                         &im->ats, ats_count);
1873       /* ENDFIX */
1874       break;
1875     default:
1876       GNUNET_log (GNUNET_ERROR_TYPE_ERROR,
1877                   _
1878                   ("Received unexpected message of type %u in %s:%u\n"),
1879                   ntohs (msg->type), __FILE__, __LINE__);
1880       GNUNET_break (0);
1881       break;
1882     }
1883 }
1884
1885
1886 /**
1887  * Called when our transmit request timed out before any transport
1888  * reported success connecting to the desired peer or before the
1889  * transport was ready to receive.  Signal error and free
1890  * TransmitHandle.
1891  *
1892  * @param cls the 'struct GNUNET_TRANSPORT_TransmitHandle*' that is timing out
1893  * @param tc scheduler context
1894  */
1895 static void
1896 peer_transmit_timeout (void *cls,
1897                        const struct GNUNET_SCHEDULER_TaskContext *tc)
1898 {
1899   struct GNUNET_TRANSPORT_TransmitHandle *th = cls;
1900   struct NeighbourList *n;
1901   GNUNET_CONNECTION_TransmitReadyNotify notify;
1902   void *notify_cls;
1903
1904   th->notify_delay_task = GNUNET_SCHEDULER_NO_TASK;
1905   n = th->neighbour;
1906 #if DEBUG_TRANSPORT
1907   GNUNET_log (GNUNET_ERROR_TYPE_WARNING,
1908               "Triggering timeout for request to transmit to `%4s' (%d)\n",
1909               GNUNET_i2s (&n->id),
1910               n->transmit_stage);
1911 #endif
1912   notify = th->notify;
1913   th->notify = NULL;
1914   notify_cls = th->notify_cls;
1915   switch (n->transmit_stage)
1916     {
1917     case TS_NEW:
1918       GNUNET_break (0);
1919       break;
1920     case TS_QUEUED:
1921       n->transmit_stage = TS_NEW;
1922       if (n->is_connected == GNUNET_NO)
1923         neighbour_free (n);
1924       break;
1925     case TS_TRANSMITTED:
1926       GNUNET_break (0);
1927       break;
1928     case TS_TRANSMITTED_QUEUED:
1929       n->transmit_stage = TS_TRANSMITTED;
1930       break;
1931     default:
1932       GNUNET_break (0);
1933     }
1934   if (NULL != notify)
1935     notify (notify_cls, 0, NULL);
1936 }
1937
1938
1939 /**
1940  * Check if we could queue a message of the given size for
1941  * transmission.  The transport service will take both its
1942  * internal buffers and bandwidth limits imposed by the
1943  * other peer into consideration when answering this query.
1944  *
1945  * @param handle connection to transport service
1946  * @param target who should receive the message
1947  * @param size how big is the message we want to transmit?
1948  * @param priority how important is the message?
1949  * @param timeout after how long should we give up (and call
1950  *        notify with buf NULL and size 0)?
1951  * @param notify function to call when we are ready to
1952  *        send such a message
1953  * @param notify_cls closure for notify
1954  * @return NULL if someone else is already waiting to be notified
1955  *         non-NULL if the notify callback was queued (can be used to cancel
1956  *         using GNUNET_TRANSPORT_notify_transmit_ready_cancel)
1957  */
1958 struct GNUNET_TRANSPORT_TransmitHandle *
1959 GNUNET_TRANSPORT_notify_transmit_ready (struct GNUNET_TRANSPORT_Handle
1960                                         *handle,
1961                                         const struct GNUNET_PeerIdentity
1962                                         *target, size_t size,
1963                                         uint32_t priority,
1964                                         struct GNUNET_TIME_Relative timeout,
1965                                         GNUNET_CONNECTION_TransmitReadyNotify
1966                                         notify, void *notify_cls)
1967 {
1968   struct GNUNET_TRANSPORT_TransmitHandle *th;
1969   struct NeighbourList *n;
1970
1971   if (size + sizeof (struct OutboundMessage) >=
1972       GNUNET_SERVER_MAX_MESSAGE_SIZE)
1973     {
1974 #if DEBUG_TRANSPORT
1975       GNUNET_log (GNUNET_ERROR_TYPE_DEBUG,
1976                   "Message size is %d, max allowed is %d.\n",
1977                   size + sizeof (struct OutboundMessage), GNUNET_SERVER_MAX_MESSAGE_SIZE - 1);
1978 #endif
1979       GNUNET_break (0);
1980       return NULL;
1981     }
1982 #if DEBUG_TRANSPORT
1983   GNUNET_log (GNUNET_ERROR_TYPE_DEBUG,
1984               "Asking transport service for transmission of %u bytes to peer `%4s' within %llu ms.\n",
1985               size, GNUNET_i2s (target),
1986               (unsigned long long) timeout.rel_value);
1987 #endif
1988   n = neighbour_find (handle, target);
1989   if (n == NULL)
1990     {
1991       GNUNET_log (GNUNET_ERROR_TYPE_DEBUG,
1992                   "Created neighbour entry for peer `%s'\n",
1993                   GNUNET_i2s (target));
1994       n = neighbour_add (handle, target);
1995     }
1996   if (n == NULL)
1997     {
1998       GNUNET_log (GNUNET_ERROR_TYPE_DEBUG,
1999                   "Could not create neighbour entry for peer `%s'\n",
2000                   GNUNET_i2s (target));
2001       return NULL;
2002     }
2003
2004   /**
2005    *  Send a request connect message if not connected,
2006    *  otherwise we will never send anything to
2007    *  transport service
2008    */
2009   if (n->is_connected == GNUNET_NO)
2010     {
2011       send_request_connect_message(handle, n);
2012     }
2013
2014   switch (n->transmit_stage)
2015     {
2016     case TS_NEW:
2017       n->transmit_stage = TS_QUEUED;
2018       break;
2019     case TS_QUEUED:
2020       GNUNET_break (0);
2021       return NULL;
2022     case TS_TRANSMITTED:
2023       n->transmit_stage = TS_TRANSMITTED_QUEUED;
2024       break;
2025     case TS_TRANSMITTED_QUEUED:
2026       GNUNET_break (0);
2027       return NULL;
2028     default:
2029       GNUNET_break (0);
2030       return NULL;
2031     }
2032   th = &n->transmit_handle;
2033   th->neighbour = n;
2034   th->notify = notify;
2035   th->notify_cls = notify_cls;
2036   th->timeout = GNUNET_TIME_relative_to_absolute (timeout);
2037   th->notify_size = size + sizeof (struct OutboundMessage);
2038   th->priority = priority;
2039   th->notify_delay_task
2040     = GNUNET_SCHEDULER_add_delayed (timeout,
2041                                     &peer_transmit_timeout, th);
2042   schedule_transmission (handle);
2043   return th;
2044 }
2045
2046
2047 /**
2048  * Cancel the specified transmission-ready notification.
2049  */
2050 void
2051 GNUNET_TRANSPORT_notify_transmit_ready_cancel (struct
2052                                                GNUNET_TRANSPORT_TransmitHandle
2053                                                *th)
2054 {
2055   struct NeighbourList *n;
2056
2057   th->notify = NULL;
2058   n = th->neighbour;
2059 #if DEBUG_TRANSPORT
2060   GNUNET_log (GNUNET_ERROR_TYPE_DEBUG,
2061               "Transmission request of %u bytes to `%4s' was canceled.\n",
2062               th->notify_size - sizeof (struct OutboundMessage),
2063               GNUNET_i2s (&n->id));
2064 #endif
2065   if (th->notify_delay_task != GNUNET_SCHEDULER_NO_TASK)
2066     {
2067       GNUNET_SCHEDULER_cancel (th->notify_delay_task);
2068       th->notify_delay_task = GNUNET_SCHEDULER_NO_TASK;
2069     }
2070   switch (n->transmit_stage)
2071     {
2072     case TS_NEW:
2073       GNUNET_assert (0);
2074       break;
2075     case TS_QUEUED:
2076       n->transmit_stage = TS_NEW;
2077       if ( (n->in_disconnect == GNUNET_NO) &&
2078            (n->is_connected == GNUNET_NO) )
2079         neighbour_free (n);
2080       break;
2081     case TS_TRANSMITTED:
2082       GNUNET_break (0);
2083       break;
2084     case TS_TRANSMITTED_QUEUED:
2085       n->transmit_stage = TS_TRANSMITTED;
2086       break;
2087     default:
2088       GNUNET_break (0);
2089     }
2090 }
2091
2092
2093 /* end of transport_api.c */