- debug
[oweals/gnunet.git] / src / mesh / mesh_api.c
1 /*
2      This file is part of GNUnet.
3      (C) 2011 Christian Grothoff (and other contributing authors)
4      GNUnet is free software; you can redistribute it and/or modify
5      it under the terms of the GNU General Public License as published
6      by the Free Software Foundation; either version 3, or (at your
7      option) any later version.
8      GNUnet is distributed in the hope that it will be useful, but
9      WITHOUT ANY WARRANTY; without even the implied warranty of
10      MERCHANTABILITY or FITNESS FOR A PARTICULAR PURPOSE.  See the GNU
11      General Public License for more details.
12      You should have received a copy of the GNU General Public License
13      along with GNUnet; see the file COPYING.  If not, write to the
14      Free Software Foundation, Inc., 59 Temple Place - Suite 330,
15      Boston, MA 02111-1307, USA.
16 */
17
18 /**
19  * @file mesh/mesh_api.c
20  * @brief mesh api: client implementation of new mesh service
21  * @author Bartlomiej Polot
22  *
23  * STRUCTURE:
24  * - DATA STRUCTURES
25  * - DECLARATIONS
26  * - AUXILIARY FUNCTIONS
27  * - RECEIVE HANDLERS
28  * - SEND FUNCTIONS
29  * - API CALL DEFINITIONS
30  *
31  * TODO: add regex to reconnect
32  */
33 #include "platform.h"
34 #include "gnunet_common.h"
35 #include "gnunet_client_lib.h"
36 #include "gnunet_util_lib.h"
37 #include "gnunet_peer_lib.h"
38 #include "gnunet_mesh_service.h"
39 #include "mesh.h"
40 #include "mesh_protocol.h"
41
42 #define LOG(kind,...) GNUNET_log_from (kind, "mesh-api",__VA_ARGS__)
43 #define DEBUG_ACK GNUNET_YES
44
45 /******************************************************************************/
46 /************************      DATA STRUCTURES     ****************************/
47 /******************************************************************************/
48
49 /**
50  * Transmission queue to the service
51  */
52 struct GNUNET_MESH_TransmitHandle
53 {
54
55     /**
56      * Double Linked list
57      */
58   struct GNUNET_MESH_TransmitHandle *next;
59
60     /**
61      * Double Linked list
62      */
63   struct GNUNET_MESH_TransmitHandle *prev;
64
65     /**
66      * Tunnel this message is sent on / for (may be NULL for control messages).
67      */
68   struct GNUNET_MESH_Tunnel *tunnel;
69
70     /**
71      * Callback to obtain the message to transmit, or NULL if we
72      * got the message in 'data'.  Notice that messages built
73      * by 'notify' need to be encapsulated with information about
74      * the 'target'.
75      */
76   GNUNET_CONNECTION_TransmitReadyNotify notify;
77
78     /**
79      * Closure for 'notify'
80      */
81   void *notify_cls;
82
83     /**
84      * How long is this message valid.  Once the timeout has been
85      * reached, the message must no longer be sent.  If this
86      * is a message with a 'notify' callback set, the 'notify'
87      * function should be called with 'buf' NULL and size 0.
88      */
89   struct GNUNET_TIME_Absolute timeout;
90
91     /**
92      * Task triggering a timeout, can be NO_TASK if the timeout is FOREVER.
93      */
94   GNUNET_SCHEDULER_TaskIdentifier timeout_task;
95
96     /**
97      * Size of 'data' -- or the desired size of 'notify' if 'data' is NULL.
98      */
99   size_t size;
100 };
101
102
103 /**
104  * Opaque handle to the service.
105  */
106 struct GNUNET_MESH_Handle
107 {
108
109     /**
110      * Handle to the server connection, to send messages later
111      */
112   struct GNUNET_CLIENT_Connection *client;
113
114     /**
115      * Set of handlers used for processing incoming messages in the tunnels
116      */
117   const struct GNUNET_MESH_MessageHandler *message_handlers;
118
119   /**
120    * Number of handlers in the handlers array.
121    */
122   unsigned int n_handlers;
123
124   /**
125    * Ports open.
126    */
127   const uint32_t *ports;
128
129   /**
130    * Number of ports.
131    */
132   unsigned int n_ports;
133
134     /**
135      * Double linked list of the tunnels this client is connected to, head.
136      */
137   struct GNUNET_MESH_Tunnel *tunnels_head;
138
139     /**
140      * Double linked list of the tunnels this client is connected to, tail.
141      */
142   struct GNUNET_MESH_Tunnel *tunnels_tail;
143
144     /**
145      * Callback for inbound tunnel creation
146      */
147   GNUNET_MESH_InboundTunnelNotificationHandler *new_tunnel;
148
149     /**
150      * Callback for inbound tunnel disconnection
151      */
152   GNUNET_MESH_TunnelEndHandler *cleaner;
153
154     /**
155      * Handle to cancel pending transmissions in case of disconnection
156      */
157   struct GNUNET_CLIENT_TransmitHandle *th;
158
159     /**
160      * Closure for all the handlers given by the client
161      */
162   void *cls;
163
164     /**
165      * Messages to send to the service, head.
166      */
167   struct GNUNET_MESH_TransmitHandle *th_head;
168
169     /**
170      * Messages to send to the service, tail.
171      */
172   struct GNUNET_MESH_TransmitHandle *th_tail;
173
174     /**
175      * tid of the next tunnel to create (to avoid reusing IDs often)
176      */
177   MESH_TunnelNumber next_tid;
178
179     /**
180      * Have we started the task to receive messages from the service
181      * yet? We do this after we send the 'MESH_LOCAL_CONNECT' message.
182      */
183   int in_receive;
184
185   /**
186    * Configuration given by the client, in case of reconnection
187    */
188   const struct GNUNET_CONFIGURATION_Handle *cfg;
189
190   /**
191    * Time to the next reconnect in case one reconnect fails
192    */
193   struct GNUNET_TIME_Relative reconnect_time;
194   
195   /**
196    * Task for trying to reconnect.
197    */
198   GNUNET_SCHEDULER_TaskIdentifier reconnect_task;
199
200   /**
201    * Monitor callback
202    */
203   GNUNET_MESH_TunnelsCB tunnels_cb;
204
205   /**
206    * Monitor callback closure.
207    */
208   void *tunnels_cls;
209
210   /**
211    * Tunnel callback.
212    */
213   GNUNET_MESH_TunnelCB tunnel_cb;
214
215   /**
216    * Tunnel callback closure.
217    */
218   void *tunnel_cls;
219
220 #if DEBUG_ACK
221   unsigned int acks_sent;
222   unsigned int acks_recv;
223 #endif
224 };
225
226
227 /**
228  * Description of a peer
229  */
230 struct GNUNET_MESH_Peer
231 {
232     /**
233      * ID of the peer in short form
234      */
235   GNUNET_PEER_Id id;
236
237   /**
238    * Tunnel this peer belongs to
239    */
240   struct GNUNET_MESH_Tunnel *t;
241
242   /**
243    * Flag indicating whether service has informed about its connection
244    */
245   int connected;
246
247 };
248
249
250 /**
251  * Opaque handle to a tunnel.
252  */
253 struct GNUNET_MESH_Tunnel
254 {
255
256     /**
257      * DLL next
258      */
259   struct GNUNET_MESH_Tunnel *next;
260
261     /**
262      * DLL prev
263      */
264   struct GNUNET_MESH_Tunnel *prev;
265
266     /**
267      * Handle to the mesh this tunnel belongs to
268      */
269   struct GNUNET_MESH_Handle *mesh;
270
271     /**
272      * Local ID of the tunnel
273      */
274   MESH_TunnelNumber tid;
275
276     /**
277      * Port number.
278      */
279   uint32_t port;
280
281     /**
282      * Other end of the tunnel.
283      */
284   GNUNET_PEER_Id peer;
285
286   /**
287    * Any data the caller wants to put in here
288    */
289   void *ctx;
290
291     /**
292      * Size of packet queued in this tunnel
293      */
294   unsigned int packet_size;
295
296     /**
297      * Is the tunnel allowed to buffer?
298      */
299   int nobuffer;
300
301     /**
302      * Is the tunnel realiable?
303      */
304   int reliable;
305
306     /**
307      * If reliable, is the tunnel out of order?
308      */
309   int ooorder;
310
311     /**
312      * Are we allowed to send to the service?
313      */
314   int allow_send;
315
316 };
317
318
319 /**
320  * Implementation state for mesh's message queue.
321  */
322 struct MeshMQState
323 {
324   /**
325    * The current transmit handle, or NULL
326    * if no transmit is active.
327    */
328   struct GNUNET_MESH_TransmitHandle *th;
329
330   /**
331    * Tunnel to send the data over.
332    */
333   struct GNUNET_MESH_Tunnel *tunnel;
334 };
335
336
337 /******************************************************************************/
338 /***********************         DECLARATIONS         *************************/
339 /******************************************************************************/
340
341 /**
342  * Function called to send a message to the service.
343  * "buf" will be NULL and "size" zero if the socket was closed for writing in
344  * the meantime.
345  *
346  * @param cls closure, the mesh handle
347  * @param size number of bytes available in buf
348  * @param buf where the callee should write the connect message
349  * @return number of bytes written to buf
350  */
351 static size_t
352 send_callback (void *cls, size_t size, void *buf);
353
354
355 /******************************************************************************/
356 /***********************     AUXILIARY FUNCTIONS      *************************/
357 /******************************************************************************/
358
359 /**
360  * Check if transmission is a payload packet.
361  *
362  * @param th Transmission handle.
363  *
364  * @return GNUNET_YES if it is a payload packet,
365  *         GNUNET_NO if it is a mesh management packet.
366  */
367 static int
368 th_is_payload (struct GNUNET_MESH_TransmitHandle *th)
369 {
370   return (th->notify != NULL) ? GNUNET_YES : GNUNET_NO;
371 }
372
373
374 /**
375  * Check whether there is any message ready in the queue and find the size.
376  * 
377  * @param h Mesh handle.
378  * 
379  * @return The size of the first ready message in the queue,
380  *         0 if there is none.
381  */
382 static size_t
383 message_ready_size (struct GNUNET_MESH_Handle *h)
384 {
385   struct GNUNET_MESH_TransmitHandle *th;
386   struct GNUNET_MESH_Tunnel *t;
387
388   for (th = h->th_head; NULL != th; th = th->next)
389   {
390     t = th->tunnel;
391     if (GNUNET_NO == th_is_payload (th))
392     {
393       LOG (GNUNET_ERROR_TYPE_DEBUG, "#  message internal\n");
394       return th->size;
395     }
396     if (GNUNET_YES == t->allow_send)
397     {
398       LOG (GNUNET_ERROR_TYPE_DEBUG, "#  message payload ok\n");
399       return th->size;
400     }
401   }
402   return 0;
403 }
404
405
406 /**
407  * Get the tunnel handler for the tunnel specified by id from the given handle
408  * @param h Mesh handle
409  * @param tid ID of the wanted tunnel
410  * @return handle to the required tunnel or NULL if not found
411  */
412 static struct GNUNET_MESH_Tunnel *
413 retrieve_tunnel (struct GNUNET_MESH_Handle *h, MESH_TunnelNumber tid)
414 {
415   struct GNUNET_MESH_Tunnel *t;
416
417   t = h->tunnels_head;
418   while (t != NULL)
419   {
420     if (t->tid == tid)
421       return t;
422     t = t->next;
423   }
424   return NULL;
425 }
426
427
428 /**
429  * Create a new tunnel and insert it in the tunnel list of the mesh handle
430  * @param h Mesh handle
431  * @param tid desired tid of the tunnel, 0 to assign one automatically
432  * @return handle to the created tunnel
433  */
434 static struct GNUNET_MESH_Tunnel *
435 create_tunnel (struct GNUNET_MESH_Handle *h, MESH_TunnelNumber tid)
436 {
437   struct GNUNET_MESH_Tunnel *t;
438
439   t = GNUNET_malloc (sizeof (struct GNUNET_MESH_Tunnel));
440   GNUNET_CONTAINER_DLL_insert (h->tunnels_head, h->tunnels_tail, t);
441   t->mesh = h;
442   if (0 == tid)
443   {
444     t->tid = h->next_tid;
445     while (NULL != retrieve_tunnel (h, h->next_tid))
446     {
447       h->next_tid++;
448       h->next_tid &= ~GNUNET_MESH_LOCAL_TUNNEL_ID_SERV;
449       h->next_tid |= GNUNET_MESH_LOCAL_TUNNEL_ID_CLI;
450     }
451   }
452   else
453   {
454     t->tid = tid;
455   }
456   t->allow_send = GNUNET_NO;
457   t->nobuffer = GNUNET_NO;
458   return t;
459 }
460
461
462 /**
463  * Destroy the specified tunnel.
464  * - Destroys all peers, calling the disconnect callback on each if needed
465  * - Cancels all outgoing traffic for that tunnel, calling respective notifys
466  * - Calls cleaner if tunnel was inbound
467  * - Frees all memory used
468  *
469  * @param t Pointer to the tunnel.
470  * @param call_cleaner Whether to call the cleaner handler.
471  *
472  * @return Handle to the required tunnel or NULL if not found.
473  */
474 static void
475 destroy_tunnel (struct GNUNET_MESH_Tunnel *t, int call_cleaner)
476 {
477   struct GNUNET_MESH_Handle *h;
478   struct GNUNET_MESH_TransmitHandle *th;
479   struct GNUNET_MESH_TransmitHandle *next;
480
481   LOG (GNUNET_ERROR_TYPE_DEBUG, "destroy_tunnel %X\n", t->tid);
482
483   if (NULL == t)
484   {
485     GNUNET_break (0);
486     return;
487   }
488   h = t->mesh;
489
490   GNUNET_CONTAINER_DLL_remove (h->tunnels_head, h->tunnels_tail, t);
491
492   /* signal tunnel destruction */
493   if ( (NULL != h->cleaner) && (0 != t->peer) && (GNUNET_YES == call_cleaner) )
494     h->cleaner (h->cls, t, t->ctx);
495
496   /* check that clients did not leave messages behind in the queue */
497   for (th = h->th_head; NULL != th; th = next)
498   {
499     next = th->next;
500     if (th->tunnel != t)
501       continue;
502     /* Clients should have aborted their requests already.
503      * Management traffic should be ok, as clients can't cancel that */
504     GNUNET_break (GNUNET_NO == th_is_payload(th));
505     GNUNET_CONTAINER_DLL_remove (h->th_head, h->th_tail, th);
506
507     /* clean up request */
508     if (GNUNET_SCHEDULER_NO_TASK != th->timeout_task)
509       GNUNET_SCHEDULER_cancel (th->timeout_task);
510     GNUNET_free (th);    
511   }
512
513   /* if there are no more pending requests with mesh service, cancel active request */
514   /* Note: this should be unnecessary... */
515   if ((0 == message_ready_size (h)) && (NULL != h->th))
516   {
517     GNUNET_CLIENT_notify_transmit_ready_cancel (h->th);
518     h->th = NULL;
519   }
520
521   if (0 != t->peer)
522     GNUNET_PEER_change_rc (t->peer, -1);
523   GNUNET_free (t);
524   return;
525 }
526
527
528 /**
529  * Notify client that the transmission has timed out
530  * 
531  * @param cls closure
532  * @param tc task context
533  */
534 static void
535 timeout_transmission (void *cls, const struct GNUNET_SCHEDULER_TaskContext *tc)
536 {
537   struct GNUNET_MESH_TransmitHandle *th = cls;
538   struct GNUNET_MESH_Handle *mesh;
539
540   mesh = th->tunnel->mesh;
541   GNUNET_CONTAINER_DLL_remove (mesh->th_head, mesh->th_tail, th);
542   th->tunnel->packet_size = 0;
543   if (GNUNET_YES == th_is_payload (th))
544     th->notify (th->notify_cls, 0, NULL);
545   GNUNET_free (th);
546   if ((0 == message_ready_size (mesh)) && (NULL != mesh->th))
547   {
548     /* nothing ready to transmit, no point in asking for transmission */
549     GNUNET_CLIENT_notify_transmit_ready_cancel (mesh->th);
550     mesh->th = NULL;
551   }
552 }
553
554
555 /**
556  * Add a transmit handle to the transmission queue and set the
557  * timeout if needed.
558  *
559  * @param h mesh handle with the queue head and tail
560  * @param th handle to the packet to be transmitted
561  */
562 static void
563 add_to_queue (struct GNUNET_MESH_Handle *h,
564               struct GNUNET_MESH_TransmitHandle *th)
565 {
566   GNUNET_CONTAINER_DLL_insert_tail (h->th_head, h->th_tail, th);
567   if (GNUNET_TIME_UNIT_FOREVER_ABS.abs_value == th->timeout.abs_value)
568     return;
569   th->timeout_task =
570       GNUNET_SCHEDULER_add_delayed (GNUNET_TIME_absolute_get_remaining
571                                     (th->timeout), &timeout_transmission, th);
572 }
573
574
575 /**
576  * Auxiliary function to send an already constructed packet to the service.
577  * Takes care of creating a new queue element, copying the message and
578  * calling the tmt_rdy function if necessary.
579  *
580  * @param h mesh handle
581  * @param msg message to transmit
582  * @param tunnel tunnel this send is related to (NULL if N/A)
583  */
584 static void
585 send_packet (struct GNUNET_MESH_Handle *h,
586              const struct GNUNET_MessageHeader *msg,
587              struct GNUNET_MESH_Tunnel *tunnel);
588
589
590 /**
591  * Send an ack on the tunnel to confirm the processing of a message.
592  * 
593  * @param t Tunnel on which to send the ACK.
594  */
595 static void
596 send_ack (struct GNUNET_MESH_Tunnel *t)
597 {
598   struct GNUNET_MESH_LocalAck msg;
599
600   LOG (GNUNET_ERROR_TYPE_DEBUG, "Sending ACK on tunnel %X\n", t->tid);
601   msg.header.type = htons (GNUNET_MESSAGE_TYPE_MESH_LOCAL_ACK);
602   msg.header.size = htons (sizeof (msg));
603   msg.tunnel_id = htonl (t->tid);
604
605 #if DEBUG_ACK
606   t->mesh->acks_sent++;
607 #endif
608
609   send_packet (t->mesh, &msg.header, t);
610   return;
611 }
612
613
614
615 /**
616  * Reconnect callback: tries to reconnect again after a failer previous
617  * reconnecttion
618  * @param cls closure (mesh handle)
619  * @param tc task context
620  */
621 static void
622 reconnect_cbk (void *cls, const struct GNUNET_SCHEDULER_TaskContext *tc);
623
624
625 /**
626  * Send a connect packet to the service with the applications and types
627  * requested by the user.
628  *
629  * @param h The mesh handle.
630  *
631  */
632 static void
633 send_connect (struct GNUNET_MESH_Handle *h)
634 {
635   size_t size;
636
637   size = sizeof (struct GNUNET_MESH_ClientConnect);
638   size += h->n_ports * sizeof (uint32_t);
639   {
640     char buf[size] GNUNET_ALIGN;
641     struct GNUNET_MESH_ClientConnect *msg;
642     uint32_t *ports;
643     uint16_t i;
644
645     /* build connection packet */
646     msg = (struct GNUNET_MESH_ClientConnect *) buf;
647     msg->header.type = htons (GNUNET_MESSAGE_TYPE_MESH_LOCAL_CONNECT);
648     msg->header.size = htons (size);
649     ports = (uint32_t *) &msg[1];
650     for (i = 0; i < h->n_ports; i++)
651     {
652       ports[i] = htonl (h->ports[i]);
653       LOG (GNUNET_ERROR_TYPE_DEBUG, " port %u\n",
654            h->ports[i]);
655     }
656     LOG (GNUNET_ERROR_TYPE_DEBUG,
657          "Sending %lu bytes long message with %u ports\n",
658          ntohs (msg->header.size), h->n_ports);
659     send_packet (h, &msg->header, NULL);
660   }
661 }
662
663
664 /**
665  * Reconnect to the service, retransmit all infomation to try to restore the
666  * original state.
667  *
668  * @param h handle to the mesh
669  *
670  * @return GNUNET_YES in case of sucess, GNUNET_NO otherwise (service down...)
671  */
672 static int
673 do_reconnect (struct GNUNET_MESH_Handle *h)
674 {
675   struct GNUNET_MESH_Tunnel *t;
676
677   LOG (GNUNET_ERROR_TYPE_DEBUG, "*****************************\n");
678   LOG (GNUNET_ERROR_TYPE_DEBUG, "*******   RECONNECT   *******\n");
679   LOG (GNUNET_ERROR_TYPE_DEBUG, "*****************************\n");
680   LOG (GNUNET_ERROR_TYPE_DEBUG, "******** on %p *******\n", h);
681   LOG (GNUNET_ERROR_TYPE_DEBUG, "*****************************\n");
682
683   /* disconnect */
684   if (NULL != h->th)
685   {
686     GNUNET_CLIENT_notify_transmit_ready_cancel (h->th);
687     h->th = NULL;
688   }
689   if (NULL != h->client)
690   {
691     GNUNET_CLIENT_disconnect (h->client);
692   }
693
694   /* connect again */
695   h->client = GNUNET_CLIENT_connect ("mesh", h->cfg);
696   if (h->client == NULL)
697   {
698     h->reconnect_task = GNUNET_SCHEDULER_add_delayed (h->reconnect_time,
699                                                       &reconnect_cbk, h);
700     h->reconnect_time =
701         GNUNET_TIME_relative_min (GNUNET_TIME_UNIT_SECONDS,
702                                   GNUNET_TIME_relative_multiply
703                                   (h->reconnect_time, 2));
704     LOG (GNUNET_ERROR_TYPE_DEBUG, 
705          "Next retry in %s\n",
706          GNUNET_STRINGS_relative_time_to_string (h->reconnect_time,
707                                                  GNUNET_NO));
708     GNUNET_break (0);
709     return GNUNET_NO;
710   }
711   else
712   {
713     h->reconnect_time = GNUNET_TIME_UNIT_MILLISECONDS;
714   }
715   send_connect (h);
716   /* Rebuild all tunnels */
717   for (t = h->tunnels_head; NULL != t; t = t->next)
718   {
719     struct GNUNET_MESH_TunnelMessage tmsg;
720     uint32_t options;
721
722     if (t->tid >= GNUNET_MESH_LOCAL_TUNNEL_ID_SERV)
723     {
724       /* Tunnel was created by service (incoming tunnel) */
725       /* TODO: Notify service of missing tunnel, to request
726        * creator to recreate path (find a path to him via DHT?)
727        */
728       continue;
729     }
730     t->allow_send = GNUNET_NO;
731     tmsg.header.type = htons (GNUNET_MESSAGE_TYPE_MESH_LOCAL_TUNNEL_CREATE);
732     tmsg.header.size = htons (sizeof (struct GNUNET_MESH_TunnelMessage));
733     tmsg.tunnel_id = htonl (t->tid);
734     tmsg.port = htonl (t->port);
735     GNUNET_PEER_resolve (t->peer, &tmsg.peer);
736
737     options = 0;
738     if (GNUNET_YES == t->nobuffer)
739       options |= GNUNET_MESH_OPTION_NOBUFFER;
740
741     if (GNUNET_YES == t->reliable)
742       options |= GNUNET_MESH_OPTION_RELIABLE;
743
744     tmsg.opt = htonl (options);
745     send_packet (h, &tmsg.header, t);
746   }
747   return GNUNET_YES;
748 }
749
750 /**
751  * Reconnect callback: tries to reconnect again after a failer previous
752  * reconnecttion
753  * @param cls closure (mesh handle)
754  * @param tc task context
755  */
756 static void
757 reconnect_cbk (void *cls, const struct GNUNET_SCHEDULER_TaskContext *tc)
758 {
759   struct GNUNET_MESH_Handle *h = cls;
760
761   h->reconnect_task = GNUNET_SCHEDULER_NO_TASK;
762   if (0 != (tc->reason & GNUNET_SCHEDULER_REASON_SHUTDOWN))
763     return;
764   do_reconnect (h);
765 }
766
767
768 /**
769  * Reconnect to the service, retransmit all infomation to try to restore the
770  * original state.
771  *
772  * @param h handle to the mesh
773  *
774  * @return GNUNET_YES in case of sucess, GNUNET_NO otherwise (service down...)
775  */
776 static void
777 reconnect (struct GNUNET_MESH_Handle *h)
778 {
779   LOG (GNUNET_ERROR_TYPE_DEBUG, "Requested RECONNECT\n");
780   h->in_receive = GNUNET_NO;
781   if (GNUNET_SCHEDULER_NO_TASK == h->reconnect_task)
782     h->reconnect_task = GNUNET_SCHEDULER_add_delayed (h->reconnect_time,
783                                                       &reconnect_cbk, h);
784 }
785
786
787 /******************************************************************************/
788 /***********************      RECEIVE HANDLERS     ****************************/
789 /******************************************************************************/
790
791 /**
792  * Process the new tunnel notification and add it to the tunnels in the handle
793  *
794  * @param h     The mesh handle
795  * @param msg   A message with the details of the new incoming tunnel
796  */
797 static void
798 process_tunnel_created (struct GNUNET_MESH_Handle *h,
799                         const struct GNUNET_MESH_TunnelMessage *msg)
800 {
801   struct GNUNET_MESH_Tunnel *t;
802   MESH_TunnelNumber tid;
803
804   tid = ntohl (msg->tunnel_id);
805   LOG (GNUNET_ERROR_TYPE_DEBUG, "Creating incoming tunnel %X\n", tid);
806   if (tid < GNUNET_MESH_LOCAL_TUNNEL_ID_SERV)
807   {
808     GNUNET_break (0);
809     return;
810   }
811   if (NULL != h->new_tunnel)
812   {
813     t = create_tunnel (h, tid);
814     t->allow_send = GNUNET_NO;
815     t->peer = GNUNET_PEER_intern (&msg->peer);
816     t->mesh = h;
817     t->tid = tid;
818     t->port = ntohl (msg->port);
819     if (0 != (msg->opt & GNUNET_MESH_OPTION_NOBUFFER))
820       t->nobuffer = GNUNET_YES;
821     else
822       t->nobuffer = GNUNET_NO;
823     if (0 != (msg->opt & GNUNET_MESH_OPTION_RELIABLE))
824       t->reliable = GNUNET_YES;
825     else
826       t->reliable = GNUNET_NO;
827     if (GNUNET_YES == t->reliable &&
828         0 != (msg->opt & GNUNET_MESH_OPTION_OOORDER))
829       t->ooorder = GNUNET_YES;
830     else
831       t->ooorder = GNUNET_NO;
832     LOG (GNUNET_ERROR_TYPE_DEBUG, "  created tunnel %p\n", t);
833     t->ctx = h->new_tunnel (h->cls, t, &msg->peer, t->port);
834     LOG (GNUNET_ERROR_TYPE_DEBUG, "User notified\n");
835   }
836   else
837   {
838     struct GNUNET_MESH_TunnelMessage d_msg;
839
840     LOG (GNUNET_ERROR_TYPE_DEBUG, "No handler for incoming tunnels\n");
841
842     d_msg.header.type = htons (GNUNET_MESSAGE_TYPE_MESH_LOCAL_TUNNEL_DESTROY);
843     d_msg.header.size = htons (sizeof (struct GNUNET_MESH_TunnelMessage));
844     d_msg.tunnel_id = msg->tunnel_id;
845     memset (&d_msg.peer, 0, sizeof (struct GNUNET_PeerIdentity));
846     d_msg.port = 0;
847     d_msg.opt = 0;
848
849     send_packet (h, &d_msg.header, NULL);
850   }
851   return;
852 }
853
854
855 /**
856  * Process the tunnel destroy notification and free associated resources
857  *
858  * @param h     The mesh handle
859  * @param msg   A message with the details of the tunnel being destroyed
860  */
861 static void
862 process_tunnel_destroy (struct GNUNET_MESH_Handle *h,
863                         const struct GNUNET_MESH_TunnelMessage *msg)
864 {
865   struct GNUNET_MESH_Tunnel *t;
866   MESH_TunnelNumber tid;
867
868   tid = ntohl (msg->tunnel_id);
869   t = retrieve_tunnel (h, tid);
870
871   if (NULL == t)
872   {
873     return;
874   }
875   LOG (GNUNET_ERROR_TYPE_DEBUG, "tunnel %X destroyed\n", t->tid);
876   destroy_tunnel (t, GNUNET_YES);
877   return;
878 }
879
880
881 /**
882  * Process the incoming data packets, call appropriate handlers.
883  *
884  * @param h         The mesh handle
885  * @param message   A message encapsulating the data
886  */
887 static void
888 process_incoming_data (struct GNUNET_MESH_Handle *h,
889                        const struct GNUNET_MessageHeader *message)
890 {
891   const struct GNUNET_MessageHeader *payload;
892   const struct GNUNET_MESH_MessageHandler *handler;
893   const struct GNUNET_PeerIdentity *peer;
894   struct GNUNET_PeerIdentity id;
895   struct GNUNET_MESH_LocalData *dmsg;
896   struct GNUNET_MESH_Tunnel *t;
897   unsigned int i;
898   uint16_t type;
899
900   LOG (GNUNET_ERROR_TYPE_DEBUG, "Got a data message!\n");
901
902   dmsg = (struct GNUNET_MESH_LocalData *) message;
903
904   t = retrieve_tunnel (h, ntohl (dmsg->tid));
905   payload = (struct GNUNET_MessageHeader *) &dmsg[1];
906   GNUNET_PEER_resolve (t->peer, &id);
907   peer = &id;
908   LOG (GNUNET_ERROR_TYPE_DEBUG, "  %s data on tunnel %s [%X]\n",
909        t->tid >= GNUNET_MESH_LOCAL_TUNNEL_ID_SERV ? "fwd" : "bck",
910        GNUNET_i2s (peer), ntohl (dmsg->tid));
911   if (NULL == t)
912   {
913     /* Tunnel was ignored/destroyed, probably service didn't get it yet */
914     LOG (GNUNET_ERROR_TYPE_DEBUG, "  ignored!\n");
915     return;
916   }
917   type = ntohs (payload->type);
918   for (i = 0; i < h->n_handlers; i++)
919   {
920     handler = &h->message_handlers[i];
921     if (handler->type == type)
922     {
923       if (GNUNET_OK !=
924           handler->callback (h->cls, t, &t->ctx, payload))
925       {
926         LOG (GNUNET_ERROR_TYPE_DEBUG, "callback caused disconnection\n");
927         GNUNET_MESH_tunnel_destroy (t);
928         return;
929       }
930       else
931       {
932         LOG (GNUNET_ERROR_TYPE_DEBUG,
933              "callback completed successfully\n");
934       }
935     }
936   }
937 }
938
939
940 /**
941  * Process a local ACK message, enabling the client to send
942  * more data to the service.
943  * 
944  * @param h Mesh handle.
945  * @param message Message itself.
946  */
947 static void
948 process_ack (struct GNUNET_MESH_Handle *h,
949              const struct GNUNET_MessageHeader *message)
950 {
951   struct GNUNET_MESH_LocalAck *msg;
952   struct GNUNET_MESH_Tunnel *t;
953   MESH_TunnelNumber tid;
954
955   LOG (GNUNET_ERROR_TYPE_DEBUG, "Got an ACK!\n");
956   h->acks_recv++;
957   msg = (struct GNUNET_MESH_LocalAck *) message;
958   tid = ntohl (msg->tunnel_id);
959   t = retrieve_tunnel (h, tid);
960   if (NULL == t)
961   {
962     LOG (GNUNET_ERROR_TYPE_WARNING, "ACK on unknown tunnel %X\n", tid);
963     return;
964   }
965   LOG (GNUNET_ERROR_TYPE_DEBUG, "  on tunnel %X!\n", t->tid);
966   t->allow_send = GNUNET_YES;
967   if (NULL == h->th && 0 < t->packet_size)
968   {
969     LOG (GNUNET_ERROR_TYPE_DEBUG, "  tmt rdy was NULL, requesting!\n");
970     h->th =
971         GNUNET_CLIENT_notify_transmit_ready (h->client, t->packet_size,
972                                              GNUNET_TIME_UNIT_FOREVER_REL,
973                                              GNUNET_YES, &send_callback, h);
974   }
975 }
976
977
978 /**
979  * Process a local reply about info on all tunnels, pass info to the user.
980  *
981  * @param h Mesh handle.
982  * @param message Message itself.
983  */
984 static void
985 process_get_tunnels (struct GNUNET_MESH_Handle *h,
986                      const struct GNUNET_MessageHeader *message)
987 {
988   struct GNUNET_MESH_LocalMonitor *msg;
989
990   GNUNET_log (GNUNET_ERROR_TYPE_ERROR, "Get Tunnels messasge received\n");
991
992   if (NULL == h->tunnels_cb)
993   {
994     GNUNET_log (GNUNET_ERROR_TYPE_ERROR, "  ignored\n");
995     return;
996   }
997
998   msg = (struct GNUNET_MESH_LocalMonitor *) message;
999   if (ntohs (message->size) !=
1000       (sizeof (struct GNUNET_MESH_LocalMonitor) +
1001        sizeof (struct GNUNET_PeerIdentity)))
1002   {
1003     GNUNET_break_op (0);
1004     GNUNET_log (GNUNET_ERROR_TYPE_ERROR,
1005                 "Get tunnels message: size %hu - expected %u\n",
1006                 ntohs (message->size),
1007                 sizeof (struct GNUNET_MESH_LocalMonitor));
1008     return;
1009   }
1010   h->tunnels_cb (h->tunnels_cls,
1011                  ntohl (msg->tunnel_id),
1012                  &msg->owner,
1013                  &msg->destination);
1014 }
1015
1016
1017
1018 /**
1019  * Process a local monitor_tunnel reply, pass info to the user.
1020  *
1021  * @param h Mesh handle.
1022  * @param message Message itself.
1023  */
1024 static void
1025 process_show_tunnel (struct GNUNET_MESH_Handle *h,
1026                      const struct GNUNET_MessageHeader *message)
1027 {
1028   struct GNUNET_MESH_LocalMonitor *msg;
1029   size_t esize;
1030
1031   GNUNET_log (GNUNET_ERROR_TYPE_ERROR, "Show Tunnel messasge received\n");
1032
1033   if (NULL == h->tunnel_cb)
1034   {
1035     GNUNET_log (GNUNET_ERROR_TYPE_ERROR, "  ignored\n");
1036     return;
1037   }
1038
1039   /* Verify message sanity */
1040   msg = (struct GNUNET_MESH_LocalMonitor *) message;
1041   esize = sizeof (struct GNUNET_MESH_LocalMonitor);
1042   if (ntohs (message->size) != esize)
1043   {
1044     GNUNET_break_op (0);
1045     GNUNET_log (GNUNET_ERROR_TYPE_ERROR,
1046                 "Show tunnel message: size %hu - expected %u\n",
1047                 ntohs (message->size),
1048                 esize);
1049
1050     h->tunnel_cb (h->tunnel_cls, NULL, NULL);
1051     h->tunnel_cb = NULL;
1052     h->tunnel_cls = NULL;
1053
1054     return;
1055   }
1056
1057   h->tunnel_cb (h->tunnel_cls,
1058                 &msg->destination,
1059                 &msg->owner);
1060 }
1061
1062
1063 /**
1064  * Function to process all messages received from the service
1065  *
1066  * @param cls closure
1067  * @param msg message received, NULL on timeout or fatal error
1068  */
1069 static void
1070 msg_received (void *cls, const struct GNUNET_MessageHeader *msg)
1071 {
1072   struct GNUNET_MESH_Handle *h = cls;
1073
1074   if (msg == NULL)
1075   {
1076     LOG (GNUNET_ERROR_TYPE_DEBUG, 
1077          "Mesh service disconnected, reconnecting\n", h);
1078     reconnect (h);
1079     return;
1080   }
1081   LOG (GNUNET_ERROR_TYPE_DEBUG, "\n",
1082        GNUNET_MESH_DEBUG_M2S (ntohs (msg->type)));
1083   LOG (GNUNET_ERROR_TYPE_DEBUG, "Received a message: %s\n",
1084        GNUNET_MESH_DEBUG_M2S (ntohs (msg->type)));
1085   switch (ntohs (msg->type))
1086   {
1087     /* Notify of a new incoming tunnel */
1088   case GNUNET_MESSAGE_TYPE_MESH_LOCAL_TUNNEL_CREATE:
1089     process_tunnel_created (h, (struct GNUNET_MESH_TunnelMessage *) msg);
1090     break;
1091     /* Notify of a tunnel disconnection */
1092   case GNUNET_MESSAGE_TYPE_MESH_LOCAL_TUNNEL_DESTROY:
1093     process_tunnel_destroy (h, (struct GNUNET_MESH_TunnelMessage *) msg);
1094     break;
1095     /* Notify of a new data packet in the tunnel */
1096   case GNUNET_MESSAGE_TYPE_MESH_LOCAL_DATA:
1097     process_incoming_data (h, msg);
1098     break;
1099   case GNUNET_MESSAGE_TYPE_MESH_LOCAL_ACK:
1100     process_ack (h, msg);
1101     break;
1102   case GNUNET_MESSAGE_TYPE_MESH_LOCAL_INFO_TUNNELS:
1103     process_get_tunnels (h, msg);
1104     break;
1105   case GNUNET_MESSAGE_TYPE_MESH_LOCAL_INFO_TUNNEL:
1106     process_show_tunnel (h, msg);
1107     break;
1108   default:
1109     /* We shouldn't get any other packages, log and ignore */
1110     LOG (GNUNET_ERROR_TYPE_WARNING,
1111          "unsolicited message form service (type %s)\n",
1112          GNUNET_MESH_DEBUG_M2S (ntohs (msg->type)));
1113   }
1114   LOG (GNUNET_ERROR_TYPE_DEBUG, "message processed\n");
1115   if (GNUNET_YES == h->in_receive)
1116   {
1117     GNUNET_CLIENT_receive (h->client, &msg_received, h,
1118                            GNUNET_TIME_UNIT_FOREVER_REL);
1119   }
1120   else
1121   {
1122     LOG (GNUNET_ERROR_TYPE_DEBUG,
1123          "in receive off, not calling CLIENT_receive\n");
1124   }
1125 }
1126
1127
1128 /******************************************************************************/
1129 /************************       SEND FUNCTIONS     ****************************/
1130 /******************************************************************************/
1131
1132 /**
1133  * Function called to send a message to the service.
1134  * "buf" will be NULL and "size" zero if the socket was closed for writing in
1135  * the meantime.
1136  *
1137  * @param cls closure, the mesh handle
1138  * @param size number of bytes available in buf
1139  * @param buf where the callee should write the connect message
1140  * @return number of bytes written to buf
1141  */
1142 static size_t
1143 send_callback (void *cls, size_t size, void *buf)
1144 {
1145   struct GNUNET_MESH_Handle *h = cls;
1146   struct GNUNET_MESH_TransmitHandle *th;
1147   struct GNUNET_MESH_TransmitHandle *next;
1148   struct GNUNET_MESH_Tunnel *t;
1149   char *cbuf = buf;
1150   size_t tsize;
1151   size_t psize;
1152   size_t nsize;
1153
1154   LOG (GNUNET_ERROR_TYPE_DEBUG, "\n");
1155   LOG (GNUNET_ERROR_TYPE_DEBUG, "# Send packet() Buffer %u\n", size);
1156   if ((0 == size) || (NULL == buf))
1157   {
1158     LOG (GNUNET_ERROR_TYPE_DEBUG, "# Received NULL send callback on %p\n", h);
1159     reconnect (h);
1160     h->th = NULL;
1161     return 0;
1162   }
1163   tsize = 0;
1164   next = h->th_head;
1165   nsize = message_ready_size (h);
1166   while ((NULL != (th = next)) && (0 < nsize) && (size >= nsize))
1167   {
1168     t = th->tunnel;
1169     if (GNUNET_YES == th_is_payload (th))
1170     {
1171       struct GNUNET_MESH_LocalData *dmsg;
1172       struct GNUNET_MessageHeader *mh;
1173
1174       LOG (GNUNET_ERROR_TYPE_DEBUG, "#  payload\n");
1175       if (GNUNET_NO == t->allow_send)
1176       {
1177         /* This tunnel is not ready to transmit yet, try next message */
1178         next = th->next;
1179         continue;
1180       }
1181       t->packet_size = 0;
1182       t->allow_send = GNUNET_NO;
1183       GNUNET_assert (size >= th->size);
1184       dmsg = (struct GNUNET_MESH_LocalData *) cbuf;
1185       mh = (struct GNUNET_MessageHeader *) &dmsg[1];
1186       psize = th->notify (th->notify_cls,
1187                           size - sizeof (struct GNUNET_MESH_LocalData),
1188                           mh);
1189       if (psize > 0)
1190       {
1191         psize += sizeof (struct GNUNET_MESH_LocalData);
1192         GNUNET_assert (size >= psize);
1193         dmsg->header.size = htons (psize);
1194         dmsg->tid = htonl (t->tid);
1195       }
1196       dmsg->header.type = htons (GNUNET_MESSAGE_TYPE_MESH_LOCAL_DATA);
1197       LOG (GNUNET_ERROR_TYPE_DEBUG, "#  payload type %s\n",
1198            GNUNET_MESH_DEBUG_M2S (ntohs (mh->type)));
1199
1200     }
1201     else
1202     {
1203       struct GNUNET_MessageHeader *mh = (struct GNUNET_MessageHeader *) &th[1];
1204
1205       LOG (GNUNET_ERROR_TYPE_DEBUG, "#  mesh traffic, type %s\n",
1206            GNUNET_MESH_DEBUG_M2S (ntohs (mh->type)));
1207       memcpy (cbuf, &th[1], th->size);
1208       psize = th->size;
1209     }
1210     if (th->timeout_task != GNUNET_SCHEDULER_NO_TASK)
1211       GNUNET_SCHEDULER_cancel (th->timeout_task);
1212     GNUNET_CONTAINER_DLL_remove (h->th_head, h->th_tail, th);
1213     GNUNET_free (th);
1214     next = h->th_head;
1215     nsize = message_ready_size (h);
1216     cbuf += psize;
1217     size -= psize;
1218     tsize += psize;
1219   }
1220   LOG (GNUNET_ERROR_TYPE_DEBUG, "#  total size: %u\n", tsize);
1221   h->th = NULL;
1222   size = message_ready_size (h);
1223   if (0 != size)
1224   {
1225     LOG (GNUNET_ERROR_TYPE_DEBUG, "#  next size: %u\n", size);
1226     h->th =
1227         GNUNET_CLIENT_notify_transmit_ready (h->client, size,
1228                                              GNUNET_TIME_UNIT_FOREVER_REL,
1229                                              GNUNET_YES, &send_callback, h);
1230   }
1231   else
1232   {
1233     if (NULL != h->th_head)
1234       LOG (GNUNET_ERROR_TYPE_DEBUG, "#  can't transmit any more\n");
1235     else
1236       LOG (GNUNET_ERROR_TYPE_DEBUG, "#  nothing left to transmit\n");
1237   }
1238   if (GNUNET_NO == h->in_receive)
1239   {
1240     LOG (GNUNET_ERROR_TYPE_DEBUG, "# start receiving from service\n");
1241     h->in_receive = GNUNET_YES;
1242     GNUNET_CLIENT_receive (h->client, &msg_received, h,
1243                            GNUNET_TIME_UNIT_FOREVER_REL);
1244   }
1245   LOG (GNUNET_ERROR_TYPE_DEBUG, "# Send packet() END\n");
1246   return tsize;
1247 }
1248
1249
1250 /**
1251  * Auxiliary function to send an already constructed packet to the service.
1252  * Takes care of creating a new queue element, copying the message and
1253  * calling the tmt_rdy function if necessary.
1254  * 
1255  * @param h mesh handle
1256  * @param msg message to transmit
1257  * @param tunnel tunnel this send is related to (NULL if N/A)
1258  */
1259 static void
1260 send_packet (struct GNUNET_MESH_Handle *h,
1261              const struct GNUNET_MessageHeader *msg,
1262              struct GNUNET_MESH_Tunnel *tunnel)
1263 {
1264   struct GNUNET_MESH_TransmitHandle *th;
1265   size_t msize;
1266
1267   LOG (GNUNET_ERROR_TYPE_DEBUG, " Sending message to service: %s\n",
1268        GNUNET_MESH_DEBUG_M2S(ntohs(msg->type)));
1269   msize = ntohs (msg->size);
1270   th = GNUNET_malloc (sizeof (struct GNUNET_MESH_TransmitHandle) + msize);
1271   th->timeout = GNUNET_TIME_UNIT_FOREVER_ABS;
1272   th->size = msize;
1273   th->tunnel = tunnel;
1274   memcpy (&th[1], msg, msize);
1275   add_to_queue (h, th);
1276   LOG (GNUNET_ERROR_TYPE_DEBUG, "  queued\n");
1277   if (NULL != h->th)
1278     return;
1279   LOG (GNUNET_ERROR_TYPE_DEBUG, "  calling ntfy tmt rdy for %u bytes\n", msize);
1280   h->th =
1281       GNUNET_CLIENT_notify_transmit_ready (h->client, msize,
1282                                            GNUNET_TIME_UNIT_FOREVER_REL,
1283                                            GNUNET_YES, &send_callback, h);
1284 }
1285
1286
1287 /******************************************************************************/
1288 /**********************      API CALL DEFINITIONS     *************************/
1289 /******************************************************************************/
1290
1291 struct GNUNET_MESH_Handle *
1292 GNUNET_MESH_connect (const struct GNUNET_CONFIGURATION_Handle *cfg, void *cls,
1293                      GNUNET_MESH_InboundTunnelNotificationHandler new_tunnel,
1294                      GNUNET_MESH_TunnelEndHandler cleaner,
1295                      const struct GNUNET_MESH_MessageHandler *handlers,
1296                      const uint32_t *ports)
1297 {
1298   struct GNUNET_MESH_Handle *h;
1299
1300   LOG (GNUNET_ERROR_TYPE_DEBUG, "GNUNET_MESH_connect()\n");
1301   h = GNUNET_malloc (sizeof (struct GNUNET_MESH_Handle));
1302   LOG (GNUNET_ERROR_TYPE_DEBUG, " addr %p\n", h);
1303   h->cfg = cfg;
1304   h->new_tunnel = new_tunnel;
1305   h->cleaner = cleaner;
1306   h->client = GNUNET_CLIENT_connect ("mesh", cfg);
1307   if (h->client == NULL)
1308   {
1309     GNUNET_break (0);
1310     GNUNET_free (h);
1311     return NULL;
1312   }
1313   h->cls = cls;
1314   h->message_handlers = handlers;
1315   h->ports = ports;
1316   h->next_tid = GNUNET_MESH_LOCAL_TUNNEL_ID_CLI;
1317   h->reconnect_time = GNUNET_TIME_UNIT_MILLISECONDS;
1318   h->reconnect_task = GNUNET_SCHEDULER_NO_TASK;
1319
1320   /* count handlers */
1321   for (h->n_handlers = 0;
1322        handlers && handlers[h->n_handlers].type;
1323        h->n_handlers++) ;
1324   for (h->n_ports = 0;
1325        ports && ports[h->n_ports];
1326        h->n_ports++) ;
1327   send_connect (h);
1328   LOG (GNUNET_ERROR_TYPE_DEBUG, "GNUNET_MESH_connect() END\n");
1329   return h;
1330 }
1331
1332
1333 void
1334 GNUNET_MESH_disconnect (struct GNUNET_MESH_Handle *handle)
1335 {
1336   struct GNUNET_MESH_Tunnel *t;
1337   struct GNUNET_MESH_Tunnel *aux;
1338   struct GNUNET_MESH_TransmitHandle *th;
1339
1340   LOG (GNUNET_ERROR_TYPE_DEBUG, "MESH DISCONNECT\n");
1341
1342 #if DEBUG_ACK
1343   LOG (GNUNET_ERROR_TYPE_INFO, "Sent %d ACKs\n", handle->acks_sent);
1344   LOG (GNUNET_ERROR_TYPE_INFO, "Recv %d ACKs\n\n", handle->acks_recv);
1345 #endif
1346
1347   t = handle->tunnels_head;
1348   while (NULL != t)
1349   {
1350     aux = t->next;
1351     if (t->tid < GNUNET_MESH_LOCAL_TUNNEL_ID_SERV)
1352     {
1353       GNUNET_break (0);
1354       LOG (GNUNET_ERROR_TYPE_DEBUG, "tunnel %X not destroyed\n", t->tid);
1355     }
1356     destroy_tunnel (t, GNUNET_YES);
1357     t = aux;
1358   }
1359   while ( (th = handle->th_head) != NULL)
1360   {
1361     struct GNUNET_MessageHeader *msg;
1362
1363     /* Make sure it is an allowed packet (everything else should have been
1364      * already canceled).
1365      */
1366     GNUNET_break (GNUNET_NO == th_is_payload (th));
1367     msg = (struct GNUNET_MessageHeader *) &th[1];
1368     switch (ntohs(msg->type))
1369     {
1370       case GNUNET_MESSAGE_TYPE_MESH_LOCAL_CONNECT:
1371       case GNUNET_MESSAGE_TYPE_MESH_LOCAL_TUNNEL_DESTROY:
1372       case GNUNET_MESSAGE_TYPE_MESH_LOCAL_INFO_TUNNELS:
1373       case GNUNET_MESSAGE_TYPE_MESH_LOCAL_INFO_TUNNEL:
1374         break;
1375       default:
1376         GNUNET_break (0);
1377         LOG (GNUNET_ERROR_TYPE_ERROR, "unexpected msg %u\n",
1378              ntohs(msg->type));
1379     }
1380
1381     GNUNET_CONTAINER_DLL_remove (handle->th_head, handle->th_tail, th);
1382     GNUNET_free (th);
1383   }
1384
1385   if (NULL != handle->th)
1386   {
1387     GNUNET_CLIENT_notify_transmit_ready_cancel (handle->th);
1388     handle->th = NULL;
1389   }
1390   if (NULL != handle->client)
1391   {
1392     GNUNET_CLIENT_disconnect (handle->client);
1393     handle->client = NULL;
1394   }
1395   if (GNUNET_SCHEDULER_NO_TASK != handle->reconnect_task)
1396   {
1397     GNUNET_SCHEDULER_cancel(handle->reconnect_task);
1398     handle->reconnect_task = GNUNET_SCHEDULER_NO_TASK;
1399   }
1400   GNUNET_free (handle);
1401 }
1402
1403
1404 /**
1405  * Create a new tunnel (we're initiator and will be allowed to add/remove peers
1406  * and to broadcast).
1407  *
1408  * @param h mesh handle
1409  * @param tunnel_ctx client's tunnel context to associate with the tunnel
1410  * @param peer peer identity the tunnel should go to
1411  * @param port Port number.
1412  * @param buffer Flag for buffering on relay nodes.
1413  * @param reliable Flag for end-to-end reliability.
1414  *
1415  * @return handle to the tunnel
1416  */
1417 struct GNUNET_MESH_Tunnel *
1418 GNUNET_MESH_tunnel_create (struct GNUNET_MESH_Handle *h, 
1419                            void *tunnel_ctx,
1420                            const struct GNUNET_PeerIdentity *peer,
1421                            uint32_t port,
1422                            int buffer,
1423                            int reliable)
1424 {
1425   struct GNUNET_MESH_Tunnel *t;
1426   struct GNUNET_MESH_TunnelMessage msg;
1427
1428   LOG (GNUNET_ERROR_TYPE_DEBUG, "Creating new tunnel\n");
1429   t = create_tunnel (h, 0);
1430   LOG (GNUNET_ERROR_TYPE_DEBUG, "  at %p\n", t);
1431   LOG (GNUNET_ERROR_TYPE_DEBUG, "  number %X\n", t->tid);
1432   t->ctx = tunnel_ctx;
1433   t->peer = GNUNET_PEER_intern (peer);
1434   msg.header.type = htons (GNUNET_MESSAGE_TYPE_MESH_LOCAL_TUNNEL_CREATE);
1435   msg.header.size = htons (sizeof (struct GNUNET_MESH_TunnelMessage));
1436   msg.tunnel_id = htonl (t->tid);
1437   msg.port = htonl (port);
1438   msg.peer = *peer;
1439   msg.opt = 0;
1440   if (GNUNET_YES == reliable)
1441     msg.opt |= GNUNET_MESH_OPTION_RELIABLE;
1442   if (GNUNET_NO == buffer)
1443     msg.opt |= GNUNET_MESH_OPTION_NOBUFFER;
1444   msg.opt = htonl (msg.opt);
1445   t->allow_send = 0;
1446   send_packet (h, &msg.header, t);
1447   return t;
1448 }
1449
1450
1451 void
1452 GNUNET_MESH_tunnel_destroy (struct GNUNET_MESH_Tunnel *tunnel)
1453 {
1454   struct GNUNET_MESH_Handle *h;
1455   struct GNUNET_MESH_TunnelMessage msg;
1456   struct GNUNET_MESH_TransmitHandle *th;
1457
1458   LOG (GNUNET_ERROR_TYPE_DEBUG, "Destroying tunnel\n");
1459   h = tunnel->mesh;
1460
1461   msg.header.type = htons (GNUNET_MESSAGE_TYPE_MESH_LOCAL_TUNNEL_DESTROY);
1462   msg.header.size = htons (sizeof (struct GNUNET_MESH_TunnelMessage));
1463   msg.tunnel_id = htonl (tunnel->tid);
1464   memset (&msg.peer, 0, sizeof (struct GNUNET_PeerIdentity));
1465   msg.port = 0;
1466   msg.opt = 0;
1467   th = h->th_head;
1468   while (th != NULL)
1469   {
1470     struct GNUNET_MESH_TransmitHandle *aux;
1471     if (th->tunnel == tunnel)
1472     {
1473       aux = th->next;
1474       /* FIXME call the handler? */
1475       if (GNUNET_YES == th_is_payload (th))
1476         th->notify (th->notify_cls, 0, NULL);
1477       GNUNET_CONTAINER_DLL_remove (h->th_head, h->th_tail, th);
1478       GNUNET_free (th);
1479       th = aux;
1480     }
1481     else
1482       th = th->next;
1483   }
1484
1485   destroy_tunnel (tunnel, GNUNET_YES);
1486   send_packet (h, &msg.header, NULL);
1487 }
1488
1489
1490 /**
1491  * Get information about a tunnel.
1492  *
1493  * @param tunnel Tunnel handle.
1494  * @param option Query (GNUNET_MESH_OPTION_*).
1495  * @param ... dependant on option, currently not used
1496  *
1497  * @return Union with an answer to the query.
1498  */
1499 const union MeshTunnelInfo *
1500 GNUNET_MESH_tunnel_get_info (struct GNUNET_MESH_Tunnel *tunnel,
1501                              enum MeshTunnelOption option, ...)
1502 {
1503   const union MeshTunnelInfo *ret;
1504
1505   switch (option)
1506   {
1507     case GNUNET_MESH_OPTION_NOBUFFER:
1508       ret = (const union MeshTunnelInfo *) &tunnel->nobuffer;
1509       break;
1510     case GNUNET_MESH_OPTION_RELIABLE:
1511       ret = (const union MeshTunnelInfo *) &tunnel->reliable;
1512       break;
1513     case GNUNET_MESH_OPTION_OOORDER:
1514       ret = (const union MeshTunnelInfo *) &tunnel->ooorder;
1515       break;
1516     case GNUNET_MESH_OPTION_PEER:
1517       ret = (const union MeshTunnelInfo *) &tunnel->peer;
1518       break;
1519     default:
1520       GNUNET_break (0);
1521       return NULL;
1522   }
1523
1524   return ret;
1525 }
1526
1527 struct GNUNET_MESH_TransmitHandle *
1528 GNUNET_MESH_notify_transmit_ready (struct GNUNET_MESH_Tunnel *tunnel, int cork,
1529                                    struct GNUNET_TIME_Relative maxdelay,
1530                                    size_t notify_size,
1531                                    GNUNET_CONNECTION_TransmitReadyNotify notify,
1532                                    void *notify_cls)
1533 {
1534   struct GNUNET_MESH_TransmitHandle *th;
1535
1536   GNUNET_assert (NULL != tunnel);
1537   LOG (GNUNET_ERROR_TYPE_DEBUG, "MESH NOTIFY TRANSMIT READY\n");
1538   LOG (GNUNET_ERROR_TYPE_DEBUG, "    on tunnel %X\n", tunnel->tid);
1539   LOG (GNUNET_ERROR_TYPE_DEBUG, "    allow_send %d\n", tunnel->allow_send);
1540   if (tunnel->tid >= GNUNET_MESH_LOCAL_TUNNEL_ID_SERV)
1541     LOG (GNUNET_ERROR_TYPE_DEBUG, "    to origin\n");
1542   else
1543     LOG (GNUNET_ERROR_TYPE_DEBUG, "    to destination\n");
1544   LOG (GNUNET_ERROR_TYPE_DEBUG, "    payload size %u\n", notify_size);
1545   GNUNET_assert (NULL != notify);
1546   GNUNET_assert (0 == tunnel->packet_size); // Only one data packet allowed
1547   th = GNUNET_malloc (sizeof (struct GNUNET_MESH_TransmitHandle));
1548   th->tunnel = tunnel;
1549   th->timeout = GNUNET_TIME_relative_to_absolute (maxdelay);
1550   th->size = notify_size + sizeof (struct GNUNET_MESH_LocalData);
1551   tunnel->packet_size = th->size;
1552   LOG (GNUNET_ERROR_TYPE_DEBUG, "    total size %u\n", th->size);
1553   th->notify = notify;
1554   th->notify_cls = notify_cls;
1555   add_to_queue (tunnel->mesh, th);
1556   if (NULL != tunnel->mesh->th)
1557     return th;
1558   if (GNUNET_NO == tunnel->allow_send)
1559     return th;
1560   LOG (GNUNET_ERROR_TYPE_DEBUG, "    call client notify tmt rdy\n");
1561   tunnel->mesh->th =
1562       GNUNET_CLIENT_notify_transmit_ready (tunnel->mesh->client, th->size,
1563                                            GNUNET_TIME_UNIT_FOREVER_REL,
1564                                            GNUNET_YES, &send_callback,
1565                                            tunnel->mesh);
1566   LOG (GNUNET_ERROR_TYPE_DEBUG, "MESH NOTIFY TRANSMIT READY END\n");
1567   return th;
1568 }
1569
1570
1571 void
1572 GNUNET_MESH_notify_transmit_ready_cancel (struct GNUNET_MESH_TransmitHandle *th)
1573 {
1574   struct GNUNET_MESH_Handle *mesh;
1575
1576   th->tunnel->packet_size = 0;
1577   mesh = th->tunnel->mesh;
1578   if (th->timeout_task != GNUNET_SCHEDULER_NO_TASK)
1579     GNUNET_SCHEDULER_cancel (th->timeout_task);
1580   GNUNET_CONTAINER_DLL_remove (mesh->th_head, mesh->th_tail, th);
1581   GNUNET_free (th);
1582   if ((0 == message_ready_size (mesh)) && (NULL != mesh->th))
1583   {
1584     /* queue empty, no point in asking for transmission */
1585     GNUNET_CLIENT_notify_transmit_ready_cancel (mesh->th);
1586     mesh->th = NULL;
1587   }
1588 }
1589
1590 void
1591 GNUNET_MESH_receive_done (struct GNUNET_MESH_Tunnel *tunnel)
1592 {
1593   send_ack (tunnel);
1594 }
1595
1596
1597 /**
1598  * Request information about the running mesh peer.
1599  * The callback will be called for every tunnel known to the service,
1600  * listing all active peers that blong to the tunnel.
1601  *
1602  * If called again on the same handle, it will overwrite the previous
1603  * callback and cls. To retrieve the cls, monitor_cancel must be
1604  * called first.
1605  *
1606  * WARNING: unstable API, likely to change in the future!
1607  *
1608  * @param h Handle to the mesh peer.
1609  * @param callback Function to call with the requested data.
1610  * @param callback_cls Closure for @c callback.
1611  */
1612 void
1613 GNUNET_MESH_get_tunnels (struct GNUNET_MESH_Handle *h,
1614                          GNUNET_MESH_TunnelsCB callback,
1615                          void *callback_cls)
1616 {
1617   struct GNUNET_MessageHeader msg;
1618
1619   msg.size = htons (sizeof (msg));
1620   msg.type = htons (GNUNET_MESSAGE_TYPE_MESH_LOCAL_INFO_TUNNELS);
1621   send_packet (h, &msg, NULL);
1622   h->tunnels_cb = callback;
1623   h->tunnels_cls = callback_cls;
1624
1625   return;
1626 }
1627
1628
1629 /**
1630  * Cancel a monitor request. The monitor callback will not be called.
1631  *
1632  * @param h Mesh handle.
1633  *
1634  * @return Closure given to GNUNET_MESH_monitor, if any.
1635  */
1636 void *
1637 GNUNET_MESH_get_tunnels_cancel (struct GNUNET_MESH_Handle *h)
1638 {
1639   void *cls;
1640
1641   cls = h->tunnels_cls;
1642   h->tunnels_cb = NULL;
1643   h->tunnels_cls = NULL;
1644   return cls;
1645 }
1646
1647
1648 /**
1649  * Request information about a specific tunnel of the running mesh peer.
1650  *
1651  * WARNING: unstable API, likely to change in the future!
1652  * FIXME Add destination option.
1653  *
1654  * @param h Handle to the mesh peer.
1655  * @param initiator ID of the owner of the tunnel.
1656  * @param tunnel_number Tunnel number.
1657  * @param callback Function to call with the requested data.
1658  * @param callback_cls Closure for @c callback.
1659  */
1660 void
1661 GNUNET_MESH_show_tunnel (struct GNUNET_MESH_Handle *h,
1662                          struct GNUNET_PeerIdentity *initiator,
1663                          unsigned int tunnel_number,
1664                          GNUNET_MESH_TunnelCB callback,
1665                          void *callback_cls)
1666 {
1667   struct GNUNET_MESH_LocalMonitor msg;
1668
1669   msg.header.size = htons (sizeof (msg));
1670   msg.header.type = htons (GNUNET_MESSAGE_TYPE_MESH_LOCAL_INFO_TUNNEL);
1671   msg.owner = *initiator;
1672   msg.tunnel_id = htonl (tunnel_number);
1673   msg.reserved = 0;
1674   send_packet (h, &msg.header, NULL);
1675   h->tunnel_cb = callback;
1676   h->tunnel_cls = callback_cls;
1677
1678   return;
1679 }
1680
1681
1682 /**
1683  * Function called to notify a client about the connection
1684  * begin ready to queue more data.  "buf" will be
1685  * NULL and "size" zero if the connection was closed for
1686  * writing in the meantime.
1687  *
1688  * @param cls closure
1689  * @param size number of bytes available in buf
1690  * @param buf where the callee should write the message
1691  * @return number of bytes written to buf
1692  */
1693 static size_t
1694 mesh_mq_ntr (void *cls, size_t size,
1695              void *buf)
1696 {
1697   struct GNUNET_MQ_Handle *mq = cls; 
1698   struct MeshMQState *state = GNUNET_MQ_impl_state (mq);
1699   const struct GNUNET_MessageHeader *msg = GNUNET_MQ_impl_current (mq);
1700   uint16_t msize;
1701
1702   state->th = NULL;
1703   if (NULL == buf)
1704   {
1705     GNUNET_MQ_inject_error (mq, GNUNET_MQ_ERROR_WRITE);
1706     return 0;
1707   }
1708   msize = ntohs (msg->size);
1709   GNUNET_assert (msize <= size);
1710   memcpy (buf, msg, msize);
1711   GNUNET_MQ_impl_send_continue (mq);
1712   return msize;
1713 }
1714
1715
1716 /**
1717  * Signature of functions implementing the
1718  * sending functionality of a message queue.
1719  *
1720  * @param mq the message queue
1721  * @param msg the message to send
1722  * @param impl_state state of the implementation
1723  */
1724 static void
1725 mesh_mq_send_impl (struct GNUNET_MQ_Handle *mq,
1726                    const struct GNUNET_MessageHeader *msg, void *impl_state)
1727 {
1728   struct MeshMQState *state = impl_state;
1729
1730   GNUNET_assert (NULL == state->th);
1731   GNUNET_MQ_impl_send_commit (mq);
1732   state->th =
1733       GNUNET_MESH_notify_transmit_ready (state->tunnel,
1734                                          /* FIXME: add option for corking */
1735                                          GNUNET_NO,
1736                                          GNUNET_TIME_UNIT_FOREVER_REL, 
1737                                          ntohs (msg->size),
1738                                          mesh_mq_ntr, mq);
1739
1740 }
1741
1742
1743 /**
1744  * Signature of functions implementing the
1745  * destruction of a message queue.
1746  * Implementations must not free 'mq', but should
1747  * take care of 'impl_state'.
1748  * 
1749  * @param mq the message queue to destroy
1750  * @param impl_state state of the implementation
1751  */
1752 static void
1753 mesh_mq_destroy_impl (struct GNUNET_MQ_Handle *mq, void *impl_state)
1754 {
1755   struct MeshMQState *state = impl_state;
1756
1757   if (NULL != state->th)
1758     GNUNET_MESH_notify_transmit_ready_cancel (state->th);
1759
1760   GNUNET_free (state);
1761 }
1762
1763
1764 /**
1765  * Create a message queue for a mesh tunnel.
1766  * The message queue can only be used to transmit messages,
1767  * not to receive them.
1768  *
1769  * @param tunnel the tunnel to create the message qeue for
1770  * @return a message queue to messages over the tunnel
1771  */
1772 struct GNUNET_MQ_Handle *
1773 GNUNET_MESH_mq_create (struct GNUNET_MESH_Tunnel *tunnel)
1774 {
1775   struct GNUNET_MQ_Handle *mq;
1776   struct MeshMQState *state;
1777
1778   state = GNUNET_new (struct MeshMQState);
1779   state->tunnel = tunnel;
1780
1781   mq = GNUNET_MQ_queue_for_callbacks (mesh_mq_send_impl,
1782                                       mesh_mq_destroy_impl,
1783                                       NULL, /* FIXME: cancel impl. */
1784                                       state,
1785                                       NULL, /* no msg handlers */
1786                                       NULL, /* no err handlers */
1787                                       NULL); /* no handler cls */
1788   return mq;
1789 }
1790