ff58bf8248fe9eb4a07ce506ed4b6db03cd6575b
[oweals/gnunet.git] / src / mesh / gnunet-service-mesh.c
1 /*
2      This file is part of GNUnet.
3      (C) 2001 - 2011 Christian Grothoff (and other contributing authors)
4
5      GNUnet is free software; you can redistribute it and/or modify
6      it under the terms of the GNU General Public License as published
7      by the Free Software Foundation; either version 3, or (at your
8      option) any later version.
9
10      GNUnet is distributed in the hope that it will be useful, but
11      WITHOUT ANY WARRANTY; without even the implied warranty of
12      MERCHANTABILITY or FITNESS FOR A PARTICULAR PURPOSE.  See the GNU
13      General Public License for more details.
14
15      You should have received a copy of the GNU General Public License
16      along with GNUnet; see the file COPYING.  If not, write to the
17      Free Software Foundation, Inc., 59 Temple Place - Suite 330,
18      Boston, MA 02111-1307, USA.
19 */
20
21 /**
22  * @file mesh/gnunet-service-mesh.c
23  * @brief GNUnet MESH service
24  * @author Bartlomiej Polot
25  *
26  * STRUCTURE:
27  * - DATA STRUCTURES
28  * - GLOBAL VARIABLES
29  * - GENERAL HELPERS
30  * - PERIODIC FUNCTIONS
31  * - MESH NETWORK HANDLER HELPERS
32  * - MESH NETWORK HANDLES
33  * - MESH LOCAL HANDLER HELPERS
34  * - MESH LOCAL HANDLES
35  * - MAIN FUNCTIONS (main & run)
36  *
37  * TODO:
38  * - error reporting (CREATE/CHANGE/ADD/DEL?) -- new message!
39  * - partial disconnect reporting -- same as error reporting?
40  * - add vs create? change vs. keep-alive? same msg or different ones? -- thinking...
41  * - speed requirement specification (change?) in mesh API -- API call
42  * - add ping message
43  * - relay corking down to core
44  * - set ttl relative to tree depth
45  */
46
47 #include "platform.h"
48 #include "mesh.h"
49 #include "mesh_protocol.h"
50 #include "gnunet_dht_service.h"
51 #include "mesh_tunnel_tree.h"
52
53 /* TODO: move into configuration file */
54 #define REFRESH_PATH_TIME       GNUNET_TIME_relative_multiply(\
55                                     GNUNET_TIME_UNIT_SECONDS,\
56                                     300)
57 #define APP_ANNOUNCE_TIME       GNUNET_TIME_relative_multiply(\
58                                     GNUNET_TIME_UNIT_SECONDS,\
59                                     5)
60
61 #define ID_ANNOUNCE_TIME        GNUNET_TIME_relative_multiply(\
62                                     GNUNET_TIME_UNIT_SECONDS,\
63                                     10)
64
65 #define GET_RESTART_TIME        GNUNET_TIME_relative_multiply(\
66                                     GNUNET_TIME_UNIT_SECONDS,\
67                                     5)
68
69 #define UNACKNOWLEDGED_WAIT     GNUNET_TIME_relative_multiply(\
70                                     GNUNET_TIME_UNIT_SECONDS,\
71                                     2)
72 #define DEFAULT_TTL     64
73
74 #define MESH_DEBUG_DHT GNUNET_NO
75
76
77
78 /******************************************************************************/
79 /************************      DATA STRUCTURES     ****************************/
80 /******************************************************************************/
81
82 /** FWD declaration */
83 struct MeshPeerInfo;
84
85 /**
86  * Struct containing all info possibly needed to build a package when called
87  * back by core.
88  */
89 struct MeshDataDescriptor
90 {
91     /** ID of the tunnel this packet travels in */
92   struct MESH_TunnelID *origin;
93
94     /** Data itself */
95   void *data;
96
97     /** Client that asked for the transmission, if any */
98   struct GNUNET_SERVER_Client *client;
99
100     /** Who was this message being sent to */
101   struct MeshPeerInfo *peer;
102
103     /** Ultimate destination of the packet */
104   GNUNET_PEER_Id destination;
105
106     /** Number of identical messages sent to different hops (multicast) */
107   unsigned int *copies;
108
109     /** Which handler was used to request the transmission */
110   unsigned int handler_n;
111
112     /** Size of the data */
113   size_t size;
114
115     /** Used to allow a client send more traffic to the service after a
116      * previous packet was tried to be sent to a neighbor and couldn't */
117   GNUNET_SCHEDULER_TaskIdentifier *timeout_task;
118 };
119
120
121 /**
122  * Struct containing all information regarding a given peer
123  */
124 struct MeshPeerInfo
125 {
126     /**
127      * ID of the peer
128      */
129   GNUNET_PEER_Id id;
130
131     /**
132      * Last time we heard from this peer
133      */
134   struct GNUNET_TIME_Absolute last_contact;
135
136     /**
137      * Number of attempts to reconnect so far
138      */
139   int n_reconnect_attempts;
140
141     /**
142      * Paths to reach the peer, ordered by ascending hop count
143      */
144   struct MeshPeerPath *path_head;
145
146     /**
147      * Paths to reach the peer, ordered by ascending hop count
148      */
149   struct MeshPeerPath *path_tail;
150
151     /**
152      * Handle to stop the DHT search for a path to this peer
153      */
154   struct GNUNET_DHT_GetHandle *dhtget;
155
156     /**
157      * Closure given to the DHT GET
158      */
159   struct MeshPathInfo *dhtgetcls;
160
161     /**
162      * Handles to stop queued transmissions for this peer
163      */
164   struct GNUNET_CORE_TransmitHandle *core_transmit[CORE_QUEUE_SIZE];
165
166     /**
167      * Pointer to info stuctures used as cls for queued transmissions
168      */
169   void *infos[CORE_QUEUE_SIZE];
170
171     /**
172      * Type of message being in each transmission
173      */
174   uint16_t types[CORE_QUEUE_SIZE];
175
176     /**
177      * Array of tunnels this peer participates in
178      * (most probably a small amount, therefore not a hashmap)
179      * When the path to the peer changes, notify these tunnels to let them
180      * re-adjust their path trees.
181      */
182   struct MeshTunnel **tunnels;
183
184     /**
185      * Number of tunnels this peers participates in
186      */
187   unsigned int ntunnels;
188 };
189
190
191 /**
192  * Data scheduled to transmit (to local client or remote peer)
193  */
194 struct MeshQueue
195 {
196     /**
197      * Double linked list
198      */
199   struct MeshQueue *next;
200   struct MeshQueue *prev;
201
202     /**
203      * Target of the data (NULL if target is client)
204      */
205   struct MeshPeerInfo *peer;
206
207     /**
208      * Client to send the data to (NULL if target is peer)
209      */
210   struct MeshClient *client;
211
212     /**
213      * Size of the message to transmit
214      */
215   unsigned int size;
216
217     /**
218      * How old is the data?
219      */
220   struct GNUNET_TIME_Absolute timestamp;
221
222     /**
223      * Data itself
224      */
225   struct GNUNET_MessageHeader *data;
226 };
227
228 /**
229  * Globally unique tunnel identification (owner + number)
230  * DO NOT USE OVER THE NETWORK
231  */
232 struct MESH_TunnelID
233 {
234     /**
235      * Node that owns the tunnel
236      */
237   GNUNET_PEER_Id oid;
238
239     /**
240      * Tunnel number to differentiate all the tunnels owned by the node oid
241      * ( tid < GNUNET_MESH_LOCAL_TUNNEL_ID_CLI )
242      */
243   MESH_TunnelNumber tid;
244 };
245
246
247 struct MeshClient;              /* FWD declaration */
248
249 /**
250  * Struct containing all information regarding a tunnel
251  * For an intermediate node the improtant info used will be:
252  * - id        Tunnel unique identification
253  * - paths[0]  To know where to send it next
254  * - metainfo: ready, speeds, accounting
255  */
256 struct MeshTunnel
257 {
258     /**
259      * Tunnel ID
260      */
261   struct MESH_TunnelID id;
262
263     /**
264      * Local tunnel number ( >= GNUNET_MESH_LOCAL_TUNNEL_ID_CLI or 0 )
265      */
266   MESH_TunnelNumber local_tid;
267
268     /**
269      * ID of the last multicast packet seen/sent.
270      */
271   uint32_t mid;
272
273     /**
274      * Last time the tunnel was used
275      */
276   struct GNUNET_TIME_Absolute timestamp;
277
278     /**
279      * Peers in the tunnel, indexed by PeerIdentity -> (MeshPeerInfo)
280      * containing peers added by id or by type, not intermediate peers.
281      */
282   struct GNUNET_CONTAINER_MultiHashMap *peers;
283
284     /**
285      * Number of peers that are connected and potentially ready to receive data
286      */
287   unsigned int peers_ready;
288
289     /**
290      * Number of peers that have been added to the tunnel
291      */
292   unsigned int peers_total;
293
294     /**
295      * Client owner of the tunnel, if any
296      */
297   struct MeshClient *client;
298
299     /**
300      * Messages ready to transmit
301      */
302   struct MeshQueue *queue_head;
303   struct MeshQueue *queue_tail;
304
305   /**
306    * Tunnel paths
307    */
308   struct MeshTunnelTree *tree;
309
310   /**
311    * Application type we are looking for in this tunnel
312    */
313   GNUNET_MESH_ApplicationType type;
314
315     /**
316      * Used to search peers offering a service
317      */
318   struct GNUNET_DHT_GetHandle *dht_get_type;
319
320   /**
321    * Task to keep the used paths alive
322    */
323   GNUNET_SCHEDULER_TaskIdentifier path_refresh_task;
324
325   /**
326    * Task to destroy the tunnel after timeout
327    *
328    * FIXME: merge the two? a tunnel will have either
329    * a path refresh OR a timeout, never both!
330    */
331   GNUNET_SCHEDULER_TaskIdentifier timeout_task;
332 };
333
334
335 /**
336  * Info needed to work with tunnel paths and peers
337  */
338 struct MeshPathInfo
339 {
340   /**
341    * Tunnel
342    */
343   struct MeshTunnel *t;
344
345   /**
346    * Neighbouring peer to whom we send the packet to
347    */
348   struct MeshPeerInfo *peer;
349
350   /**
351    * Path itself
352    */
353   struct MeshPeerPath *path;
354
355   /**
356    * Position in peer's transmit queue
357    */
358   unsigned int pos;
359 };
360
361
362 /**
363  * Struct containing information about a client of the service
364  */
365 struct MeshClient
366 {
367     /**
368      * Linked list
369      */
370   struct MeshClient *next;
371   struct MeshClient *prev;
372
373     /**
374      * Tunnels that belong to this client, indexed by local id
375      */
376   struct GNUNET_CONTAINER_MultiHashMap *tunnels;
377
378     /**
379      * Handle to communicate with the client
380      */
381   struct GNUNET_SERVER_Client *handle;
382
383     /**
384      * Applications that this client has claimed to provide
385      */
386   struct GNUNET_CONTAINER_MultiHashMap *apps;
387
388     /**
389      * Messages that this client has declared interest in
390      */
391   struct GNUNET_CONTAINER_MultiHashMap *types;
392
393 #if MESH_DEBUG
394     /**
395      * ID of the client, for debug messages
396      */
397   unsigned int id;
398 #endif
399
400 };
401
402
403
404 /******************************************************************************/
405 /************************      DEBUG FUNCTIONS     ****************************/
406 /******************************************************************************/
407
408 #if MESH_DEBUG
409 /**
410  * GNUNET_SCHEDULER_Task for printing a message after some operation is done
411  * @param cls string to print
412  * @param tc task context
413  */
414 static void
415 mesh_debug (void *cls, const struct GNUNET_SCHEDULER_TaskContext *tc)
416 {
417   char *s = cls;
418
419   if (GNUNET_SCHEDULER_REASON_SHUTDOWN == tc->reason)
420   {
421     return;
422   }
423   GNUNET_log (GNUNET_ERROR_TYPE_DEBUG, "MESH: %s\n", s);
424 }
425 #endif
426
427 /******************************************************************************/
428 /***********************      GLOBAL VARIABLES     ****************************/
429 /******************************************************************************/
430
431 /**
432  * All the clients
433  */
434 static struct MeshClient *clients;
435 static struct MeshClient *clients_tail;
436
437 /**
438  * Tunnels known, indexed by MESH_TunnelID (MeshTunnel)
439  */
440 static struct GNUNET_CONTAINER_MultiHashMap *tunnels;
441
442 /**
443  * Tunnels incoming, indexed by MESH_TunnelNumber
444  * (which is greater than GNUNET_MESH_LOCAL_TUNNEL_ID_SERV)
445  */
446 static struct GNUNET_CONTAINER_MultiHashMap *incoming_tunnels;
447
448 /**
449  * Peers known, indexed by PeerIdentity (MeshPeerInfo)
450  */
451 static struct GNUNET_CONTAINER_MultiHashMap *peers;
452
453 /**
454  * Handle to communicate with core
455  */
456 static struct GNUNET_CORE_Handle *core_handle;
457
458 /**
459  * Handle to communicate with transport
460  */
461 // static struct GNUNET_TRANSPORT_Handle *transport_handle;
462
463 /**
464  * Handle to use DHT
465  */
466 static struct GNUNET_DHT_Handle *dht_handle;
467
468 /**
469  * Handle to server
470  */
471 static struct GNUNET_SERVER_Handle *server_handle;
472
473 /**
474  * Notification context, to send messages to local clients
475  */
476 static struct GNUNET_SERVER_NotificationContext *nc;
477
478 /**
479  * Local peer own ID (memory efficient handle)
480  */
481 static GNUNET_PEER_Id myid;
482
483 /**
484  * Local peer own ID (full value)
485  */
486 static struct GNUNET_PeerIdentity my_full_id;
487
488 /**
489  * Own private key
490  */
491 static struct GNUNET_CRYPTO_RsaPrivateKey *my_private_key;
492
493 /**
494  * Own public key.
495  */
496 static struct GNUNET_CRYPTO_RsaPublicKeyBinaryEncoded my_public_key;
497
498 /**
499  * Tunnel ID for the next created tunnel (global tunnel number)
500  */
501 static MESH_TunnelNumber next_tid;
502
503 /**
504  * Tunnel ID for the next incoming tunnel (local tunnel number)
505  */
506 static MESH_TunnelNumber next_local_tid;
507
508 /**
509  * All application types provided by this peer
510  */
511 static struct GNUNET_CONTAINER_MultiHashMap *applications;
512
513 /**
514  * All message types clients of this peer are interested in
515  */
516 static struct GNUNET_CONTAINER_MultiHashMap *types;
517
518 /**
519  * Task to periodically announce provided applications
520  */
521 GNUNET_SCHEDULER_TaskIdentifier announce_applications_task;
522
523 /**
524  * Task to periodically announce itself in the network
525  */
526 GNUNET_SCHEDULER_TaskIdentifier announce_id_task;
527
528 #if MESH_DEBUG
529 unsigned int next_client_id;
530 #endif
531
532
533 /******************************************************************************/
534 /************************         ITERATORS        ****************************/
535 /******************************************************************************/
536
537 /* FIXME move iterators here */
538
539
540 /******************************************************************************/
541 /************************    PERIODIC FUNCTIONS    ****************************/
542 /******************************************************************************/
543
544 /**
545  * Announce iterator over for each application provided by the peer
546  *
547  * @param cls closure
548  * @param key current key code
549  * @param value value in the hash map
550  * @return GNUNET_YES if we should continue to
551  *         iterate,
552  *         GNUNET_NO if not.
553  */
554 static int
555 announce_application (void *cls, const GNUNET_HashCode * key, void *value)
556 {
557   /* FIXME are hashes in multihash map equal on all aquitectures? */
558   GNUNET_DHT_put (dht_handle, key, 10U,
559                   GNUNET_DHT_RO_RECORD_ROUTE |
560                   GNUNET_DHT_RO_DEMULTIPLEX_EVERYWHERE, GNUNET_BLOCK_TYPE_TEST,
561                   sizeof (struct GNUNET_PeerIdentity),
562                   (const char *) &my_full_id,
563 #if MESH_DEBUG
564                   GNUNET_TIME_UNIT_FOREVER_ABS, GNUNET_TIME_UNIT_FOREVER_REL,
565                   &mesh_debug, "DHT_put for app completed");
566 #else
567                   GNUNET_TIME_absolute_add (GNUNET_TIME_absolute_get (),
568                                             APP_ANNOUNCE_TIME),
569                   APP_ANNOUNCE_TIME, NULL, NULL);
570 #endif
571   return GNUNET_OK;
572 }
573
574
575 /**
576  * Periodically announce what applications are provided by local clients
577  *
578  * @param cls closure
579  * @param tc task context
580  */
581 static void
582 announce_applications (void *cls, const struct GNUNET_SCHEDULER_TaskContext *tc)
583 {
584   if (tc->reason == GNUNET_SCHEDULER_REASON_SHUTDOWN)
585   {
586     announce_applications_task = GNUNET_SCHEDULER_NO_TASK;
587     return;
588   }
589 #if MESH_DEBUG_DHT
590   GNUNET_log (GNUNET_ERROR_TYPE_DEBUG, "MESH: Starting PUT for apps\n");
591 #endif
592   GNUNET_CONTAINER_multihashmap_iterate (applications, &announce_application,
593                                          NULL);
594   announce_applications_task =
595       GNUNET_SCHEDULER_add_delayed (APP_ANNOUNCE_TIME, &announce_applications,
596                                     cls);
597 #if MESH_DEBUG_DHT
598   GNUNET_log (GNUNET_ERROR_TYPE_DEBUG, "MESH: Finished PUT for apps\n");
599 #endif
600   return;
601 }
602
603
604 /**
605  * Periodically announce self id in the DHT
606  *
607  * @param cls closure
608  * @param tc task context
609  */
610 static void
611 announce_id (void *cls, const struct GNUNET_SCHEDULER_TaskContext *tc)
612 {
613   if (tc->reason == GNUNET_SCHEDULER_REASON_SHUTDOWN)
614   {
615     announce_id_task = GNUNET_SCHEDULER_NO_TASK;
616     return;
617   }
618   /* TODO
619    * - Set data expiration in function of X
620    * - Adapt X to churn
621    */
622 #if MESH_DEBUG_DHT
623   GNUNET_log (GNUNET_ERROR_TYPE_DEBUG, "MESH: DHT_put for ID %s started.\n",
624               GNUNET_i2s (&my_full_id));
625 #endif
626   GNUNET_DHT_put (dht_handle,   /* DHT handle */
627                   &my_full_id.hashPubKey,       /* Key to use */
628                   10U,          /* Replication level */
629                   GNUNET_DHT_RO_RECORD_ROUTE | GNUNET_DHT_RO_DEMULTIPLEX_EVERYWHERE,    /* DHT options */
630                   GNUNET_BLOCK_TYPE_TEST,       /* Block type */
631                   sizeof (my_full_id),  /* Size of the data */
632                   (char *) &my_full_id, /* Data itself */
633                   GNUNET_TIME_absolute_get_forever (),  /* Data expiration */
634                   GNUNET_TIME_UNIT_FOREVER_REL, /* Retry time */
635 #if MESH_DEBUG_DHT
636                   &mesh_debug, "DHT_put for id completed");
637 #else
638                   NULL,         /* Continuation */
639                   NULL);        /* Continuation closure */
640 #endif
641   announce_id_task =
642       GNUNET_SCHEDULER_add_delayed (ID_ANNOUNCE_TIME, &announce_id, cls);
643 }
644
645
646 /**
647  * Function to process paths received for a new peer addition. The recorded
648  * paths form the initial tunnel, which can be optimized later.
649  * Called on each result obtained for the DHT search.
650  *
651  * @param cls closure
652  * @param exp when will this value expire
653  * @param key key of the result
654  * @param type type of the result
655  * @param size number of bytes in data
656  * @param data pointer to the result data
657  */
658 static void
659 dht_get_id_handler (void *cls, struct GNUNET_TIME_Absolute exp,
660                     const GNUNET_HashCode * key,
661                     const struct GNUNET_PeerIdentity *get_path,
662                     unsigned int get_path_length,
663                     const struct GNUNET_PeerIdentity *put_path,
664                     unsigned int put_path_length, enum GNUNET_BLOCK_Type type,
665                     size_t size, const void *data);
666
667
668 /******************************************************************************/
669 /******************      GENERAL HELPER FUNCTIONS      ************************/
670 /******************************************************************************/
671
672 /**
673  * Check if client has registered with the service and has not disconnected
674  *
675  * @param client the client to check
676  *
677  * @return non-NULL if client exists in the global DLL
678  */
679 static struct MeshClient *
680 client_get (struct GNUNET_SERVER_Client *client)
681 {
682   struct MeshClient *c;
683
684   c = clients;
685   while (NULL != c)
686   {
687     if (c->handle == client)
688       return c;
689     c = c->next;
690   }
691   return NULL;
692 }
693
694
695 /**
696  * Checks if a given client has subscribed to certain message type
697  *
698  * @param message_type Type of message to check
699  * @param c Client to check
700  *
701  * @return GNUNET_YES or GNUNET_NO, depending on subscription status
702  *
703  * TODO inline?
704  */
705 static int
706 client_is_subscribed (uint16_t message_type, struct MeshClient *c)
707 {
708   GNUNET_HashCode hc;
709
710   GNUNET_CRYPTO_hash (&message_type, sizeof (uint16_t), &hc);
711   return GNUNET_CONTAINER_multihashmap_contains (c->types, &hc);
712 }
713
714
715 /**
716  * Allow a client to send more data after transmitting a multicast message
717  * which some neighbor has not yet accepted altough a reasonable time has
718  * passed.
719  *
720  * @param cls Closure (DataDescriptor containing the task identifier)
721  * @param tc Task Context
722  */
723 static void
724 client_allow_send (void *cls, const struct GNUNET_SCHEDULER_TaskContext *tc)
725 {
726   struct MeshDataDescriptor *info = cls;
727
728   if (GNUNET_SCHEDULER_REASON_SHUTDOWN == tc->reason)
729     return;
730 #if MESH_DEBUG
731   GNUNET_log (GNUNET_ERROR_TYPE_DEBUG,
732               "MESH: CLIENT ALLOW SEND DESPITE %u COPIES PENDING\n",
733               *(info->copies));
734 #endif
735   *(info->timeout_task) = GNUNET_SCHEDULER_NO_TASK;
736   GNUNET_SERVER_receive_done (info->client, GNUNET_OK);
737 }
738
739
740 /**
741  * Search for a tunnel by global ID using full PeerIdentities
742  *
743  * @param oid owner of the tunnel
744  * @param tid global tunnel number
745  *
746  * @return tunnel handler, NULL if doesn't exist
747  */
748 static struct MeshTunnel *
749 tunnel_get (struct GNUNET_PeerIdentity *oid, MESH_TunnelNumber tid);
750
751
752 /**
753  * Notify a tunnel that a connection has broken that affects at least
754  * some of its peers.
755  *
756  * @param t Tunnel affected.
757  * @param p1 Peer that got disconnected from p2.
758  * @param p2 Peer that got disconnected from p1.
759  *
760  * @return Short ID of the peer disconnected (either p1 or p2).
761  *         0 if the tunnel remained unaffected.
762  */
763 static GNUNET_PEER_Id
764 tunnel_notify_connection_broken (struct MeshTunnel *t, GNUNET_PEER_Id p1,
765                                  GNUNET_PEER_Id p2);
766
767
768 /**
769  * Send the message to all clients that have subscribed to its type
770  *
771  * @param msg Pointer to the message itself
772  * @param payload Pointer to the payload of the message.
773  * @return number of clients this message was sent to
774  */
775 static unsigned int
776 send_subscribed_clients (const struct GNUNET_MessageHeader *msg,
777                          const struct GNUNET_MessageHeader *payload)
778 {
779   struct GNUNET_PeerIdentity *oid;
780   struct MeshClient *c;
781   struct MeshTunnel *t;
782   MESH_TunnelNumber *tid;
783   unsigned int count;
784   uint16_t type;
785   char cbuf[htons (msg->size)];
786
787   GNUNET_log (GNUNET_ERROR_TYPE_DEBUG, "MESH: Sending to clients...\n");
788   type = ntohs (payload->type);
789   GNUNET_log (GNUNET_ERROR_TYPE_DEBUG, "MESH: message of type %u\n", type);
790
791   memcpy (cbuf, msg, sizeof (cbuf));
792   switch (htons (msg->type))
793   {
794     struct GNUNET_MESH_Unicast *uc;
795     struct GNUNET_MESH_Multicast *mc;
796     struct GNUNET_MESH_ToOrigin *to;
797
798   case GNUNET_MESSAGE_TYPE_MESH_UNICAST:
799     uc = (struct GNUNET_MESH_Unicast *) cbuf;
800     tid = &uc->tid;
801     oid = &uc->oid;
802     break;
803   case GNUNET_MESSAGE_TYPE_MESH_MULTICAST:
804     mc = (struct GNUNET_MESH_Multicast *) cbuf;
805     tid = &mc->tid;
806     oid = &mc->oid;
807     break;
808   case GNUNET_MESSAGE_TYPE_MESH_TO_ORIGIN:
809     to = (struct GNUNET_MESH_ToOrigin *) cbuf;
810     tid = &to->tid;
811     oid = &to->oid;
812     break;
813   default:
814     GNUNET_break (0);
815     return 0;
816   }
817   t = tunnel_get (oid, ntohl (*tid));
818   if (NULL == t)
819   {
820     GNUNET_break (0);
821     return 0;
822   }
823   *tid = htonl (t->local_tid);
824   for (count = 0, c = clients; c != NULL; c = c->next)
825   {
826 #if MESH_DEBUG
827     GNUNET_log (GNUNET_ERROR_TYPE_DEBUG, "MESH:    client %u\n", c->id);
828 #endif
829     if (client_is_subscribed (type, c))
830     {
831       count++;
832       GNUNET_log (GNUNET_ERROR_TYPE_DEBUG, "MESH:      sending\n");
833       GNUNET_SERVER_notification_context_unicast (nc, c->handle,
834                                                   (struct GNUNET_MessageHeader
835                                                    *) cbuf, GNUNET_YES);
836     }
837   }
838   return count;
839 }
840
841
842 /**
843  * Notify the client that owns the tunnel that a peer has connected to it
844  * (the requested path to it has been confirmed).
845  *
846  * @param t Tunnel whose owner to notify
847  * @param id Short id of the peer that has connected
848  */
849 static void
850 send_client_peer_connected (const struct MeshTunnel *t, const GNUNET_PEER_Id id)
851 {
852   struct GNUNET_MESH_PeerControl pc;
853
854   pc.header.type = htons (GNUNET_MESSAGE_TYPE_MESH_LOCAL_PEER_ADD);
855   pc.header.size = htons (sizeof (struct GNUNET_MESH_PeerControl));
856   pc.tunnel_id = htonl (t->local_tid);
857   GNUNET_PEER_resolve (id, &pc.peer);
858   GNUNET_SERVER_notification_context_unicast (nc, t->client->handle, &pc.header,
859                                               GNUNET_NO);
860 }
861
862
863 /**
864  * Notify all clients (not depending on registration status) that the incoming
865  * tunnel is no longer valid.
866  *
867  * @param t Tunnel that was destroyed.
868  */
869 static void
870 send_clients_tunnel_destroy (struct MeshTunnel *t)
871 {
872   struct GNUNET_MESH_TunnelMessage msg;
873
874   msg.header.size = htons (sizeof (msg));
875   msg.header.type = htons (GNUNET_MESSAGE_TYPE_MESH_LOCAL_TUNNEL_DESTROY);
876   msg.tunnel_id = htonl (t->local_tid);
877   GNUNET_SERVER_notification_context_broadcast (nc, &msg.header, GNUNET_NO);
878 }
879
880
881 /**
882  * Function called to notify a client about the socket
883  * being ready to queue more data.  "buf" will be
884  * NULL and "size" zero if the socket was closed for
885  * writing in the meantime.
886  *
887  * @param cls closure
888  * @param size number of bytes available in buf
889  * @param buf where the callee should write the message
890  * @return number of bytes written to buf
891  */
892 static size_t
893 send_core_create_path (void *cls, size_t size, void *buf);
894
895
896 /**
897  * Function called to notify a client about the socket
898  * being ready to queue more data.  "buf" will be
899  * NULL and "size" zero if the socket was closed for
900  * writing in the meantime.
901  *
902  * @param cls closure (data itself)
903  * @param size number of bytes available in buf
904  * @param buf where the callee should write the message
905  *
906  * @return number of bytes written to buf
907  */
908 static size_t
909 send_core_data_multicast (void *cls, size_t size, void *buf);
910
911
912 /**
913  * Decrements the reference counter and frees all resources if needed
914  *
915  * @param dd Data Descriptor used in a multicast message
916  */
917 static void
918 data_descriptor_decrement_multicast (struct MeshDataDescriptor *dd)
919 {
920   if (0 == --(*(dd->copies)))
921   {
922     GNUNET_log (GNUNET_ERROR_TYPE_DEBUG, "MESH: Last copy!\n");
923     if (NULL != dd->client)
924     {
925       if (GNUNET_SCHEDULER_NO_TASK != *(dd->timeout_task))
926       {
927         GNUNET_log (GNUNET_ERROR_TYPE_DEBUG,
928                     "MESH:  cancelling client timeout (%u)...\n",
929                     *(dd->timeout_task));
930         GNUNET_SCHEDULER_cancel (*(dd->timeout_task));
931         GNUNET_log (GNUNET_ERROR_TYPE_DEBUG, "MESH:  notifying client...\n");
932         GNUNET_SERVER_receive_done (dd->client, GNUNET_OK);
933       }
934       GNUNET_free (dd->timeout_task);
935     }
936     GNUNET_free (dd->copies);
937     GNUNET_free (dd->data);
938   }
939 }
940
941
942 /**
943  * Cancel a core transmission that was already requested and free all resources
944  * associated to the request.
945  *
946  * @param peer PeeInfo of the peer whose transmission is cancelled.
947  * @param i Position of the transmission to be cancelled.
948  */
949 static void
950 peer_info_cancel_transmission (struct MeshPeerInfo *peer, unsigned int i)
951 {
952   if (NULL != peer->core_transmit[i])
953   {
954     struct MeshDataDescriptor *dd;
955     struct MeshPathInfo *path_info;
956
957 #if MESH_DEBUG
958     {
959       struct GNUNET_PeerIdentity id;
960
961       GNUNET_PEER_resolve (peer->id, &id);
962       GNUNET_log (GNUNET_ERROR_TYPE_DEBUG,
963                   "MESH:   Cancelling data transmission at %s [%u]\n",
964                   GNUNET_i2s (&id), i);
965       GNUNET_log (GNUNET_ERROR_TYPE_DEBUG, "MESH:    message type %u\n",
966                   peer->types[i]);
967     }
968 #endif
969     /* TODO: notify that tranmission has failed */
970     switch (peer->types[i])
971     {
972     case GNUNET_MESSAGE_TYPE_MESH_MULTICAST:
973     case GNUNET_MESSAGE_TYPE_MESH_UNICAST:
974     case GNUNET_MESSAGE_TYPE_MESH_TO_ORIGIN:
975       GNUNET_log (GNUNET_ERROR_TYPE_DEBUG, "MESH:    type payload\n");
976       dd = peer->infos[i];
977       data_descriptor_decrement_multicast (dd);
978       break;
979     case GNUNET_MESSAGE_TYPE_MESH_PATH_CREATE:
980       GNUNET_log (GNUNET_ERROR_TYPE_DEBUG, "MESH:    type create path\n");
981       path_info = peer->infos[i];
982       path_destroy (path_info->path);
983       break;
984     default:
985       GNUNET_break (0);
986       GNUNET_log (GNUNET_ERROR_TYPE_DEBUG, "MESH:    type unknown!\n");
987     }
988     GNUNET_CORE_notify_transmit_ready_cancel (peer->core_transmit[i]);
989     peer->core_transmit[i] = NULL;
990     GNUNET_free (peer->infos[i]);
991   }
992 }
993
994
995 /**
996  * Get a unused CORE slot to transmit a message to a peer. If all the slots
997  * are used, cancel one and return it's position.
998  *
999  * @param peer PeerInfo of the neighbor we want to transmit to.
1000  *
1001  * @return The index of an available slot to transmit to the neighbor.
1002  */
1003 static unsigned int
1004 peer_info_transmit_slot (struct MeshPeerInfo *peer)
1005 {
1006   unsigned int i;
1007
1008   for (i = 0; peer->core_transmit[i]; i++)
1009   {
1010     if (i == (CORE_QUEUE_SIZE - 1))
1011     {
1012       /* All positions are taken! Overwriting! */
1013       GNUNET_break (0);
1014       peer_info_cancel_transmission (peer, 0);
1015       return 0;
1016     }
1017   }
1018   return i;
1019 }
1020
1021
1022 /**
1023  * Retrieve the MeshPeerInfo stucture associated with the peer, create one
1024  * and insert it in the appropiate structures if the peer is not known yet.
1025  *
1026  * @param peer Full identity of the peer.
1027  *
1028  * @return Existing or newly created peer info.
1029  */
1030 static struct MeshPeerInfo *
1031 peer_info_get (const struct GNUNET_PeerIdentity *peer)
1032 {
1033   struct MeshPeerInfo *peer_info;
1034
1035   peer_info = GNUNET_CONTAINER_multihashmap_get (peers, &peer->hashPubKey);
1036   if (NULL == peer_info)
1037   {
1038     peer_info =
1039         (struct MeshPeerInfo *) GNUNET_malloc (sizeof (struct MeshPeerInfo));
1040     GNUNET_CONTAINER_multihashmap_put (peers, &peer->hashPubKey, peer_info,
1041                                        GNUNET_CONTAINER_MULTIHASHMAPOPTION_UNIQUE_ONLY);
1042     peer_info->id = GNUNET_PEER_intern (peer);
1043   }
1044
1045   return peer_info;
1046 }
1047
1048
1049 /**
1050  * Retrieve the MeshPeerInfo stucture associated with the peer, create one
1051  * and insert it in the appropiate structures if the peer is not known yet.
1052  *
1053  * @param peer Short identity of the peer.
1054  *
1055  * @return Existing or newly created peer info.
1056  */
1057 static struct MeshPeerInfo *
1058 peer_info_get_short (const GNUNET_PEER_Id peer)
1059 {
1060   struct GNUNET_PeerIdentity id;
1061
1062   GNUNET_PEER_resolve (peer, &id);
1063   return peer_info_get (&id);
1064 }
1065
1066
1067 /**
1068  * Iterator to remove the tunnel from the list of tunnels a peer participates
1069  * in.
1070  *
1071  * @param cls Closure (tunnel info)
1072  * @param key GNUNET_PeerIdentity of the peer (unused)
1073  * @param value PeerInfo of the peer
1074  *
1075  * @return always GNUNET_YES, to keep iterating
1076  */
1077 static int
1078 peer_info_delete_tunnel (void *cls, const GNUNET_HashCode * key, void *value)
1079 {
1080   struct MeshTunnel *t = cls;
1081   struct MeshPeerInfo *peer = value;
1082   unsigned int i;
1083
1084   for (i = 0; i < peer->ntunnels; i++)
1085   {
1086     if (0 ==
1087         memcmp (&peer->tunnels[i]->id, &t->id, sizeof (struct MESH_TunnelID)))
1088     {
1089       peer->ntunnels--;
1090       peer->tunnels[i] = peer->tunnels[peer->ntunnels];
1091       peer->tunnels = GNUNET_realloc (peer->tunnels, peer->ntunnels);
1092       return GNUNET_YES;
1093     }
1094   }
1095   return GNUNET_YES;
1096 }
1097
1098
1099 /**
1100   * Core callback to write a
1101   *
1102   * @param cls Closure (MeshDataDescriptor with data in "data" member).
1103   * @param size Number of bytes available in buf.
1104   * @param buf Where the to write the message.
1105   *
1106   * @return number of bytes written to buf
1107   */
1108 static size_t
1109 send_core_data_raw (void *cls, size_t size, void *buf)
1110 {
1111   struct MeshDataDescriptor *info = cls;
1112   struct GNUNET_MessageHeader *msg;
1113   size_t total_size;
1114
1115   GNUNET_assert (NULL != info);
1116   GNUNET_assert (NULL != info->data);
1117   msg = (struct GNUNET_MessageHeader *) info->data;
1118   total_size = ntohs (msg->size);
1119
1120   if (total_size > size)
1121   {
1122     struct GNUNET_PeerIdentity id;
1123
1124     GNUNET_PEER_resolve (info->peer->id, &id);
1125     info->peer->core_transmit[info->handler_n] =
1126         GNUNET_CORE_notify_transmit_ready (core_handle, 0, 100,
1127                                            GNUNET_TIME_UNIT_FOREVER_REL, &id,
1128                                            size, &send_core_data_raw, info);
1129     return 0;
1130   }
1131   info->peer->core_transmit[info->handler_n] = NULL;
1132   memcpy (buf, msg, total_size);
1133   GNUNET_free (info->data);
1134   GNUNET_free (info);
1135   return total_size;
1136 }
1137
1138
1139 /**
1140  * Sends an already built message to a peer, properly registrating
1141  * all used resources.
1142  *
1143  * @param message Message to send. Fucntion makes a copy of it.
1144  * @param peer Short ID of the neighbor whom to send the message.
1145  */
1146 static void
1147 send_message (const struct GNUNET_MessageHeader *message,
1148               const struct GNUNET_PeerIdentity *peer)
1149 {
1150   struct MeshDataDescriptor *info;
1151   struct MeshPeerInfo *neighbor;
1152   struct MeshPeerPath *p;
1153   unsigned int i;
1154   size_t size;
1155
1156 //   GNUNET_TRANSPORT_try_connect();
1157
1158   size = ntohs (message->size);
1159   info = GNUNET_malloc (sizeof (struct MeshDataDescriptor));
1160   info->data = GNUNET_malloc (size);
1161   memcpy (info->data, message, size);
1162   neighbor = peer_info_get (peer);
1163   for (p = neighbor->path_head; NULL != p; p = p->next)
1164   {
1165     if (2 == p->length)
1166     {
1167       break;
1168     }
1169   }
1170   if (NULL == p)
1171   {
1172     GNUNET_break (0);
1173     GNUNET_free (info);
1174     return;
1175   }
1176   i = peer_info_transmit_slot (neighbor);
1177   info->handler_n = i;
1178   info->peer = neighbor;
1179   neighbor->types[i] = GNUNET_MESSAGE_TYPE_MESH_UNICAST;
1180   neighbor->infos[i] = info;
1181   neighbor->core_transmit[i] =
1182       GNUNET_CORE_notify_transmit_ready (core_handle, 0, 100,
1183                                          GNUNET_TIME_UNIT_FOREVER_REL, peer,
1184                                          size, &send_core_data_raw, info);
1185
1186 }
1187
1188
1189 /**
1190  * Sends a CREATE PATH message for a path to a peer, properly registrating
1191  * all used resources.
1192  *
1193  * @param peer PeerInfo of the final peer for whom this path is being created.
1194  * @param p Path itself.
1195  * @param t Tunnel for which the path is created.
1196  */
1197 static void
1198 send_create_path (struct MeshPeerInfo *peer, struct MeshPeerPath *p,
1199                   struct MeshTunnel *t)
1200 {
1201   struct GNUNET_PeerIdentity id;
1202   struct MeshPathInfo *path_info;
1203   struct MeshPeerInfo *neighbor;
1204   unsigned int i;
1205
1206   if (NULL == p)
1207   {
1208     p = tree_get_path_to_peer (t->tree, peer->id);
1209     if (NULL == p)
1210     {
1211       GNUNET_break (0);
1212       return;
1213     }
1214   }
1215   for (i = 0; i < p->length; i++)
1216   {
1217     if (p->peers[i] == myid)
1218       break;
1219   }
1220   if (i >= p->length - 1)
1221   {
1222     path_destroy (p);
1223     GNUNET_break (0);
1224     return;
1225   }
1226   GNUNET_PEER_resolve (p->peers[i + 1], &id);
1227
1228   path_info = GNUNET_malloc (sizeof (struct MeshPathInfo));
1229   path_info->path = p;
1230   path_info->t = t;
1231   neighbor = peer_info_get (&id);
1232   path_info->peer = neighbor;
1233   path_info->pos = peer_info_transmit_slot (neighbor);
1234   neighbor->types[path_info->pos] = GNUNET_MESSAGE_TYPE_MESH_PATH_CREATE;
1235   neighbor->infos[path_info->pos] = path_info;
1236   neighbor->core_transmit[path_info->pos] = GNUNET_CORE_notify_transmit_ready (core_handle,     /* handle */
1237                                                                                0,       /* cork */
1238                                                                                0,       /* priority */
1239                                                                                GNUNET_TIME_UNIT_FOREVER_REL,    /* timeout */
1240                                                                                &id,     /* target */
1241                                                                                sizeof (struct GNUNET_MESH_ManipulatePath) + (p->length * sizeof (struct GNUNET_PeerIdentity)),  /*size */
1242                                                                                &send_core_create_path,  /* callback */
1243                                                                                path_info);      /* cls */
1244 }
1245
1246
1247 /**
1248  * Sends a DESTROY PATH message to free resources for a path in a tunnel
1249  *
1250  * @param t Tunnel whose path to destroy.
1251  * @param destination Short ID of the peer to whom the path to destroy.
1252  */
1253 static void
1254 send_destroy_path (struct MeshTunnel *t, GNUNET_PEER_Id destination)
1255 {
1256   struct MeshPeerPath *p;
1257   size_t size;
1258
1259   p = tree_get_path_to_peer (t->tree, destination);
1260   if (NULL == p)
1261   {
1262     GNUNET_break (0);
1263     return;
1264   }
1265   size = sizeof (struct GNUNET_MESH_ManipulatePath);
1266   size += p->length * sizeof (struct GNUNET_PeerIdentity);
1267   {
1268     struct GNUNET_MESH_ManipulatePath *msg;
1269     struct GNUNET_PeerIdentity *pi;
1270     char cbuf[size];
1271     unsigned int i;
1272
1273     msg = (struct GNUNET_MESH_ManipulatePath *) cbuf;
1274     msg->header.size = htons (size);
1275     msg->header.type = htons (GNUNET_MESSAGE_TYPE_MESH_PATH_DESTROY);
1276     msg->tid = htonl (t->id.tid);
1277     pi = (struct GNUNET_PeerIdentity *) &msg[1];
1278     for (i = 0; i < p->length; i++)
1279     {
1280       GNUNET_PEER_resolve (p->peers[i], &pi[i]);
1281     }
1282     send_message (&msg->header, tree_get_first_hop (t->tree, destination));
1283   }
1284   path_destroy (p);
1285 }
1286
1287
1288 /**
1289  * Try to establish a new connection to this peer.
1290  * Use the best path for the given tunnel.
1291  * If the peer doesn't have any path to it yet, try to get one.
1292  * If the peer already has some path, send a CREATE PATH towards it.
1293  *
1294  * @param peer PeerInfo of the peer.
1295  * @param t Tunnel for which to create the path, if possible.
1296  */
1297 static void
1298 peer_info_connect (struct MeshPeerInfo *peer, struct MeshTunnel *t)
1299 {
1300   struct MeshPeerPath *p;
1301   struct MeshPathInfo *path_info;
1302
1303   if (NULL != peer->path_head)
1304   {
1305     p = tree_get_path_to_peer (t->tree, peer->id);
1306     if (NULL == p)
1307     {
1308       GNUNET_break (0);
1309       return;
1310     }
1311
1312     if (p->length > 1)
1313     {
1314       send_create_path (peer, p, t);
1315     }
1316     else
1317     {
1318       path_destroy (p);
1319       send_client_peer_connected (t, myid);
1320     }
1321   }
1322   else if (NULL == peer->dhtget)
1323   {
1324     struct GNUNET_PeerIdentity id;
1325
1326     GNUNET_PEER_resolve (peer->id, &id);
1327     path_info = GNUNET_malloc (sizeof (struct MeshPathInfo));
1328     path_info->peer = peer;
1329     path_info->t = t;
1330     GNUNET_log (GNUNET_ERROR_TYPE_DEBUG,
1331                 "MESH:   Starting DHT GET for peer %s\n", GNUNET_i2s (&id));
1332     peer->dhtgetcls = path_info;
1333     peer->dhtget = GNUNET_DHT_get_start (dht_handle,    /* handle */
1334                                          GNUNET_TIME_UNIT_FOREVER_REL,  /* timeout */
1335                                          GNUNET_BLOCK_TYPE_TEST,        /* type */
1336                                          &id.hashPubKey,        /* key to search */
1337                                          4,     /* replication level */
1338                                          GNUNET_DHT_RO_RECORD_ROUTE | GNUNET_DHT_RO_DEMULTIPLEX_EVERYWHERE, NULL,       /* xquery */
1339                                          0,     /* xquery bits */
1340                                          &dht_get_id_handler, path_info);
1341   }
1342   /* Otherwise, there is no path but the DHT get is already started. */
1343 }
1344
1345
1346 /**
1347  * Task to delay the connection of a peer
1348  *
1349  * @param cls Closure (path info with tunnel and peer to connect).
1350  *            Will be free'd on exection.
1351  * @param tc TaskContext
1352  */
1353 static void
1354 peer_info_connect_task (void *cls,
1355                         const struct GNUNET_SCHEDULER_TaskContext *tc)
1356 {
1357   struct MeshPathInfo *path_info = cls;
1358
1359   if (0 != (GNUNET_SCHEDULER_REASON_SHUTDOWN & tc->reason))
1360   {
1361     GNUNET_free (cls);
1362     return;
1363   }
1364   peer_info_connect (path_info->peer, path_info->t);
1365   GNUNET_free (cls);
1366 }
1367
1368
1369 /**
1370  * Destroy the peer_info and free any allocated resources linked to it
1371  *
1372  * @param pi The peer_info to destroy.
1373  *
1374  * @return GNUNET_OK on success
1375  */
1376 static int
1377 peer_info_destroy (struct MeshPeerInfo *pi)
1378 {
1379   struct GNUNET_PeerIdentity id;
1380   struct MeshPeerPath *p;
1381   struct MeshPeerPath *nextp;
1382   unsigned int i;
1383
1384   GNUNET_PEER_resolve (pi->id, &id);
1385   GNUNET_PEER_change_rc (pi->id, -1);
1386
1387   if (GNUNET_YES !=
1388       GNUNET_CONTAINER_multihashmap_remove (peers, &id.hashPubKey, pi))
1389   {
1390     GNUNET_break (0);
1391     GNUNET_log (GNUNET_ERROR_TYPE_WARNING,
1392                 "MESH: removing peer %s, not in hashmap\n", GNUNET_i2s (&id));
1393   }
1394   if (NULL != pi->dhtget)
1395   {
1396     GNUNET_DHT_get_stop (pi->dhtget);
1397     GNUNET_free (pi->dhtgetcls);
1398   }
1399   for (i = 0; i < CORE_QUEUE_SIZE; i++)
1400   {
1401     peer_info_cancel_transmission (pi, i);
1402   }
1403   p = pi->path_head;
1404   while (NULL != p)
1405   {
1406     nextp = p->next;
1407     GNUNET_CONTAINER_DLL_remove (pi->path_head, pi->path_tail, p);
1408     path_destroy (p);
1409     p = nextp;
1410   }
1411   GNUNET_free (pi);
1412   return GNUNET_OK;
1413 }
1414
1415
1416 /**
1417  * Remove all paths that rely on a direct connection between p1 and p2
1418  * from the peer itself and notify all tunnels about it.
1419  *
1420  * @param peer PeerInfo of affected peer.
1421  * @param p1 GNUNET_PEER_Id of one peer.
1422  * @param p2 GNUNET_PEER_Id of another peer that was connected to the first and
1423  *           no longer is.
1424  *
1425  * TODO: optimize (see below)
1426  */
1427 static void
1428 peer_info_remove_path (struct MeshPeerInfo *peer, GNUNET_PEER_Id p1,
1429                        GNUNET_PEER_Id p2)
1430 {
1431   struct MeshPeerPath *p;
1432   struct MeshPeerPath *aux;
1433   struct MeshPeerInfo *peer_d;
1434   GNUNET_PEER_Id d;
1435   unsigned int destroyed;
1436   unsigned int best;
1437   unsigned int cost;
1438   unsigned int i;
1439
1440   destroyed = 0;
1441   p = peer->path_head;
1442   while (NULL != p)
1443   {
1444     aux = p->next;
1445     for (i = 0; i < (p->length - 1); i++)
1446     {
1447       if ((p->peers[i] == p1 && p->peers[i + 1] == p2) ||
1448           (p->peers[i] == p2 && p->peers[i + 1] == p1))
1449       {
1450         GNUNET_CONTAINER_DLL_remove (peer->path_head, peer->path_tail, p);
1451         path_destroy (p);
1452         destroyed++;
1453         break;
1454       }
1455     }
1456     p = aux;
1457   }
1458   if (0 == destroyed)
1459     return;
1460
1461   for (i = 0; i < peer->ntunnels; i++)
1462   {
1463     d = tunnel_notify_connection_broken (peer->tunnels[i], p1, p2);
1464     if (0 == d) continue;
1465     /* TODO
1466      * Problem: one or more peers have been deleted from the tunnel tree.
1467      * We don't know who they are to try to add them again.
1468      * We need to try to find a new path for each of the disconnected peers.
1469      * Some of them might already have a path to reach them that does not
1470      * involve p1 and p2. Adding all anew might render in a better tree than
1471      * the trivial immediate fix.
1472      *
1473      * Trivial immiediate fix: try to reconnect to the disconnected node. All
1474      * its children will be reachable trough him.
1475      */
1476     peer_d = peer_info_get_short (d);
1477     best = UINT_MAX;
1478     aux = NULL;
1479     for (p = peer_d->path_head; NULL != p; p = p->next)
1480     {
1481       if ((cost = tree_get_path_cost (peer->tunnels[i]->tree, p)) < best)
1482       {
1483         best = cost;
1484         aux = p;
1485       }
1486     }
1487     if (NULL != aux)
1488     {
1489       /* No callback, as peer will be already disconnected and a connection
1490        * scheduled by tunnel_notify_connection_broken.
1491        */
1492       tree_add_path (peer->tunnels[i]->tree, aux, NULL, NULL);
1493     }
1494     else
1495     {
1496       peer_info_connect (peer_d, peer->tunnels[i]);
1497     }
1498   }
1499 }
1500
1501
1502 /**
1503  * Add the path to the peer and update the path used to reach it in case this
1504  * is the shortest.
1505  *
1506  * @param peer_info Destination peer to add the path to.
1507  * @param path New path to add. Last peer must be the peer in arg 1.
1508  *             Path will be either used of freed if already known.
1509  * @param trusted Do we trust that this path is real?
1510  */
1511 void
1512 peer_info_add_path (struct MeshPeerInfo *peer_info, struct MeshPeerPath *path,
1513                     int trusted)
1514 {
1515   struct MeshPeerPath *aux;
1516   unsigned int l;
1517   unsigned int l2;
1518
1519   if ((NULL == peer_info) || (NULL == path))
1520   {
1521     GNUNET_break (0);
1522     path_destroy (path);
1523     return;
1524   }
1525   if (path->peers[path->length - 1] != peer_info->id)
1526   {
1527     GNUNET_break (0);
1528     path_destroy (path);
1529     return;
1530   }
1531   if (path->length <= 2 && GNUNET_NO == trusted)
1532   {
1533     /* Only allow CORE to tell us about direct paths */
1534     path_destroy (path);
1535     return;
1536   }
1537   GNUNET_assert (peer_info->id == path->peers[path->length - 1]);
1538   for (l = 1; l < path->length; l++)
1539   {
1540     if (path->peers[l] == myid)
1541     {
1542       GNUNET_log (GNUNET_ERROR_TYPE_DEBUG, "MESH: shortening path by %u\n", l);
1543       for (l2 = 0; l2 < path->length - l; l2++)
1544       {
1545         path->peers[l2] = path->peers[l + l2];
1546       }
1547       path->length -= l;
1548       l = 1;
1549       path->peers =
1550           GNUNET_realloc (path->peers, path->length * sizeof (GNUNET_PEER_Id));
1551     }
1552   }
1553 #if MESH_DEBUG
1554   {
1555     struct GNUNET_PeerIdentity id;
1556
1557     GNUNET_PEER_resolve (peer_info->id, &id);
1558     GNUNET_log (GNUNET_ERROR_TYPE_DEBUG, "MESH: adding path [%u] to peer %s\n",
1559                 path->length, GNUNET_i2s (&id));
1560   }
1561 #endif
1562   l = path_get_length (path);
1563   if (0 == l)
1564   {
1565     GNUNET_free (path);
1566     return;
1567   }
1568
1569   GNUNET_assert (peer_info->id == path->peers[path->length - 1]);
1570   for (aux = peer_info->path_head; aux != NULL; aux = aux->next)
1571   {
1572     l2 = path_get_length (aux);
1573     if (l2 > l)
1574     {
1575       GNUNET_CONTAINER_DLL_insert_before (peer_info->path_head,
1576                                           peer_info->path_tail, aux, path);
1577       return;
1578     }
1579     else
1580     {
1581       if (l2 == l && memcmp (path->peers, aux->peers, l) == 0)
1582       {
1583         path_destroy (path);
1584         return;
1585       }
1586     }
1587   }
1588   GNUNET_CONTAINER_DLL_insert_tail (peer_info->path_head, peer_info->path_tail,
1589                                     path);
1590   return;
1591 }
1592
1593
1594 /**
1595  * Add the path to the origin peer and update the path used to reach it in case
1596  * this is the shortest.
1597  * The path is given in peer_info -> destination, therefore we turn the path
1598  * upside down first.
1599  *
1600  * @param peer_info Peer to add the path to, being the origin of the path.
1601  * @param path New path to add after being inversed.
1602  * @param trusted Do we trust that this path is real?
1603  */
1604 static void
1605 peer_info_add_path_to_origin (struct MeshPeerInfo *peer_info,
1606                               struct MeshPeerPath *path, int trusted)
1607 {
1608   path_invert (path);
1609   peer_info_add_path (peer_info, path, trusted);
1610 }
1611
1612
1613 /**
1614  * Build a PeerPath from the paths returned from the DHT, reversing the paths
1615  * to obtain a local peer -> destination path and interning the peer ids.
1616  *
1617  * @return Newly allocated and created path
1618  */
1619 static struct MeshPeerPath *
1620 path_build_from_dht (const struct GNUNET_PeerIdentity *get_path,
1621                      unsigned int get_path_length,
1622                      const struct GNUNET_PeerIdentity *put_path,
1623                      unsigned int put_path_length)
1624 {
1625   struct MeshPeerPath *p;
1626   GNUNET_PEER_Id id;
1627   int i;
1628
1629   p = path_new (1);
1630   p->peers[0] = myid;
1631   GNUNET_PEER_change_rc (myid, 1);
1632   i = get_path_length;
1633   GNUNET_log (GNUNET_ERROR_TYPE_DEBUG, "MESH:    GET has %d hops.\n", i);
1634   for (i--; i >= 0; i--)
1635   {
1636     id = GNUNET_PEER_intern (&get_path[i]);
1637     if (p->length > 0 && id == p->peers[p->length - 1])
1638     {
1639       GNUNET_log (GNUNET_ERROR_TYPE_DEBUG, "MESH:    Optimizing 1 hop out.\n");
1640       GNUNET_PEER_change_rc (id, -1);
1641     }
1642     else
1643     {
1644       GNUNET_log (GNUNET_ERROR_TYPE_DEBUG, "MESH:    Adding from GET: %s.\n",
1645                   GNUNET_i2s (&get_path[i]));
1646       p->length++;
1647       p->peers = GNUNET_realloc (p->peers, sizeof (GNUNET_PEER_Id) * p->length);
1648       p->peers[p->length - 1] = id;
1649     }
1650   }
1651   i = put_path_length;
1652   GNUNET_log (GNUNET_ERROR_TYPE_DEBUG, "MESH:    PUT has %d hops.\n", i);
1653   for (i--; i >= 0; i--)
1654   {
1655     id = GNUNET_PEER_intern (&put_path[i]);
1656     if (id == myid)
1657     {
1658       /* PUT path went through us, so discard the path up until now and start
1659        * from here to get a much shorter (and loop-free) path.
1660        */
1661       path_destroy (p);
1662       p = path_new (0);
1663     }
1664     if (p->length > 0 && id == p->peers[p->length - 1])
1665     {
1666       GNUNET_log (GNUNET_ERROR_TYPE_DEBUG, "MESH:    Optimizing 1 hop out.\n");
1667       GNUNET_PEER_change_rc (id, -1);
1668     }
1669     else
1670     {
1671       GNUNET_log (GNUNET_ERROR_TYPE_DEBUG, "MESH:    Adding from PUT: %s.\n",
1672                   GNUNET_i2s (&put_path[i]));
1673       p->length++;
1674       p->peers = GNUNET_realloc (p->peers, sizeof (GNUNET_PEER_Id) * p->length);
1675       p->peers[p->length - 1] = id;
1676     }
1677   }
1678 #if MESH_DEBUG
1679   if (get_path_length > 0)
1680     GNUNET_log (GNUNET_ERROR_TYPE_DEBUG, "MESH:    (first of GET: %s)\n",
1681                 GNUNET_i2s (&get_path[0]));
1682   if (put_path_length > 0)
1683     GNUNET_log (GNUNET_ERROR_TYPE_DEBUG, "MESH:    (first of PUT: %s)\n",
1684                 GNUNET_i2s (&put_path[0]));
1685   GNUNET_log (GNUNET_ERROR_TYPE_DEBUG, "MESH:    In total: %d hops\n",
1686               p->length);
1687   for (i = 0; i < p->length; i++)
1688   {
1689     struct GNUNET_PeerIdentity peer_id;
1690
1691     GNUNET_PEER_resolve (p->peers[i], &peer_id);
1692     GNUNET_log (GNUNET_ERROR_TYPE_DEBUG, "MESH:        %u: %s\n", p->peers[i],
1693                 GNUNET_i2s (&peer_id));
1694   }
1695 #endif
1696   return p;
1697 }
1698
1699
1700 /**
1701  * Send keepalive packets for a peer
1702  *
1703  * @param cls Closure (tunnel for which to send the keepalive).
1704  * @param tc Notification context.
1705  *
1706  * TODO: implement explicit multicast keepalive?
1707  */
1708 static void
1709 path_refresh (void *cls, const struct GNUNET_SCHEDULER_TaskContext *tc);
1710
1711
1712 /**
1713  * Search for a tunnel among the incoming tunnels
1714  *
1715  * @param tid the local id of the tunnel
1716  *
1717  * @return tunnel handler, NULL if doesn't exist
1718  */
1719 static struct MeshTunnel *
1720 tunnel_get_incoming (MESH_TunnelNumber tid)
1721 {
1722   GNUNET_HashCode hash;
1723
1724   GNUNET_assert (tid >= GNUNET_MESH_LOCAL_TUNNEL_ID_SERV);
1725   GNUNET_CRYPTO_hash (&tid, sizeof (MESH_TunnelNumber), &hash);
1726   return GNUNET_CONTAINER_multihashmap_get (incoming_tunnels, &hash);
1727 }
1728
1729
1730 /**
1731  * Search for a tunnel among the tunnels for a client
1732  *
1733  * @param c the client whose tunnels to search in
1734  * @param tid the local id of the tunnel
1735  *
1736  * @return tunnel handler, NULL if doesn't exist
1737  */
1738 static struct MeshTunnel *
1739 tunnel_get_by_local_id (struct MeshClient *c, MESH_TunnelNumber tid)
1740 {
1741   if (tid >= GNUNET_MESH_LOCAL_TUNNEL_ID_SERV)
1742   {
1743     return tunnel_get_incoming (tid);
1744   }
1745   else
1746   {
1747     GNUNET_HashCode hash;
1748
1749     GNUNET_CRYPTO_hash (&tid, sizeof (MESH_TunnelNumber), &hash);
1750     return GNUNET_CONTAINER_multihashmap_get (c->tunnels, &hash);
1751   }
1752 }
1753
1754
1755 /**
1756  * Search for a tunnel by global ID using PEER_ID
1757  *
1758  * @param pi owner of the tunnel
1759  * @param tid global tunnel number
1760  *
1761  * @return tunnel handler, NULL if doesn't exist
1762  */
1763 static struct MeshTunnel *
1764 tunnel_get_by_pi (GNUNET_PEER_Id pi, MESH_TunnelNumber tid)
1765 {
1766   struct MESH_TunnelID id;
1767   GNUNET_HashCode hash;
1768
1769   id.oid = pi;
1770   id.tid = tid;
1771
1772   GNUNET_CRYPTO_hash (&id, sizeof (struct MESH_TunnelID), &hash);
1773   return GNUNET_CONTAINER_multihashmap_get (tunnels, &hash);
1774 }
1775
1776
1777 /**
1778  * Search for a tunnel by global ID using full PeerIdentities
1779  *
1780  * @param oid owner of the tunnel
1781  * @param tid global tunnel number
1782  *
1783  * @return tunnel handler, NULL if doesn't exist
1784  */
1785 static struct MeshTunnel *
1786 tunnel_get (struct GNUNET_PeerIdentity *oid, MESH_TunnelNumber tid)
1787 {
1788   return tunnel_get_by_pi (GNUNET_PEER_search (oid), tid);
1789 }
1790
1791
1792 /**
1793  * Callback used to notify a client owner of a tunnel that a peer has
1794  * disconnected, most likely because of a path change.
1795  *
1796  * @param cls Closure (tunnel this notification is about).
1797  * @param peer_id Short ID of disconnected peer.
1798  */
1799 void
1800 notify_peer_disconnected (void *cls, GNUNET_PEER_Id peer_id)
1801 {
1802   struct MeshTunnel *t = cls;
1803   struct MeshPeerInfo *peer;
1804   struct MeshPathInfo *path_info;
1805
1806   if (NULL != t->client && NULL != nc)
1807   {
1808     struct GNUNET_MESH_PeerControl msg;
1809
1810     msg.header.size = htons (sizeof (msg));
1811     msg.header.type = htons (GNUNET_MESSAGE_TYPE_MESH_LOCAL_PEER_DEL);
1812     msg.tunnel_id = htonl (t->local_tid);
1813     GNUNET_PEER_resolve (peer_id, &msg.peer);
1814     GNUNET_SERVER_notification_context_unicast (nc, t->client->handle,
1815                                                 &msg.header, GNUNET_NO);
1816   }
1817   peer = peer_info_get_short (peer_id);
1818   path_info = GNUNET_malloc (sizeof (struct MeshPathInfo));
1819   path_info->peer = peer;
1820   path_info->t = t;
1821   GNUNET_SCHEDULER_add_now (&peer_info_connect_task, path_info);
1822 }
1823
1824
1825 /**
1826  * Add a peer to a tunnel, accomodating paths accordingly and initializing all
1827  * needed rescources.
1828  * If peer already exists, reevaluate shortest path and change if different.
1829  *
1830  * @param t Tunnel we want to add a new peer to
1831  * @param peer PeerInfo of the peer being added
1832  *
1833  */
1834 static void
1835 tunnel_add_peer (struct MeshTunnel *t, struct MeshPeerInfo *peer)
1836 {
1837   struct GNUNET_PeerIdentity id;
1838   struct MeshPeerPath *best_p;
1839   struct MeshPeerPath *p;
1840   unsigned int best_cost;
1841   unsigned int cost;
1842
1843   GNUNET_PEER_resolve (peer->id, &id);
1844   if (GNUNET_NO ==
1845       GNUNET_CONTAINER_multihashmap_contains (t->peers, &id.hashPubKey))
1846   {
1847     t->peers_total++;
1848     GNUNET_array_append (peer->tunnels, peer->ntunnels, t);
1849     GNUNET_assert (GNUNET_OK ==
1850                    GNUNET_CONTAINER_multihashmap_put (t->peers, &id.hashPubKey,
1851                                                       peer,
1852                                                       GNUNET_CONTAINER_MULTIHASHMAPOPTION_UNIQUE_FAST));
1853   }
1854
1855   if (NULL != (p = peer->path_head))
1856   {
1857     best_p = p;
1858     best_cost = tree_get_path_cost (t->tree, p);
1859     while (NULL != p)
1860     {
1861       if ((cost = tree_get_path_cost (t->tree, p)) < best_cost)
1862       {
1863         best_cost = cost;
1864         best_p = p;
1865       }
1866       p = p->next;
1867     }
1868     tree_add_path (t->tree, best_p, &notify_peer_disconnected, t);
1869     if (GNUNET_SCHEDULER_NO_TASK == t->path_refresh_task)
1870       t->path_refresh_task =
1871           GNUNET_SCHEDULER_add_delayed (REFRESH_PATH_TIME, &path_refresh, t);
1872   }
1873   else
1874   {
1875     /* Start a DHT get */
1876     peer_info_connect (peer, t);
1877   }
1878 }
1879
1880 /**
1881  * Add a path to a tunnel which we don't own, just to remember the next hop.
1882  * If destination node was already in the tunnel, the first hop information
1883  * will be replaced with the new path.
1884  *
1885  * @param t Tunnel we want to add a new peer to
1886  * @param p Path to add
1887  * @param own_pos Position of local node in path.
1888  *
1889  */
1890 static void
1891 tunnel_add_path (struct MeshTunnel *t, struct MeshPeerPath *p,
1892                  unsigned int own_pos)
1893 {
1894   struct GNUNET_PeerIdentity id;
1895
1896   GNUNET_assert (0 != own_pos);
1897   tree_add_path (t->tree, p, NULL, NULL);
1898   if (own_pos < p->length - 1)
1899   {
1900     GNUNET_PEER_resolve (p->peers[own_pos + 1], &id);
1901     tree_update_first_hops (t->tree, myid, &id);
1902   }
1903 }
1904
1905
1906 /**
1907  * Notifies a tunnel that a connection has broken that affects at least
1908  * some of its peers. Sends a notification towards the root of the tree.
1909  * In case the peer is the owner of the tree, notifies the client that owns
1910  * the tunnel and tries to reconnect.
1911  *
1912  * @param t Tunnel affected.
1913  * @param p1 Peer that got disconnected from p2.
1914  * @param p2 Peer that got disconnected from p1.
1915  *
1916  * @return Short ID of the peer disconnected (either p1 or p2).
1917  *         0 if the tunnel remained unaffected.
1918  */
1919 static GNUNET_PEER_Id
1920 tunnel_notify_connection_broken (struct MeshTunnel *t, GNUNET_PEER_Id p1,
1921                                  GNUNET_PEER_Id p2)
1922 {
1923   GNUNET_PEER_Id pid;
1924
1925   pid =
1926       tree_notify_connection_broken (t->tree, p1, p2, &notify_peer_disconnected,
1927                                      t);
1928   if (myid != p1 && myid != p2)
1929   {
1930     return pid;
1931   }
1932   if (pid != myid)
1933   {
1934     if (tree_get_predecessor (t->tree) != 0)
1935     {
1936       /* We are the peer still connected, notify owner of the disconnection. */
1937       struct GNUNET_MESH_PathBroken msg;
1938       struct GNUNET_PeerIdentity neighbor;
1939
1940       msg.header.size = htons (sizeof (msg));
1941       msg.header.type = htons (GNUNET_MESSAGE_TYPE_MESH_PATH_BROKEN);
1942       GNUNET_PEER_resolve (t->id.oid, &msg.oid);
1943       msg.tid = htonl (t->id.tid);
1944       msg.peer1 = my_full_id;
1945       GNUNET_PEER_resolve (pid, &msg.peer2);
1946       GNUNET_PEER_resolve (tree_get_predecessor (t->tree), &neighbor);
1947       send_message (&msg.header, &neighbor);
1948     }
1949   }
1950   return pid;
1951 }
1952
1953
1954 struct MeshMulticastData
1955 {
1956   struct MeshTunnel *t;
1957
1958   GNUNET_SCHEDULER_TaskIdentifier *task;
1959
1960   unsigned int *reference_counter;
1961
1962   size_t data_len;
1963
1964   void *data;
1965 };
1966
1967
1968 /**
1969  * Send a multicast packet to a neighbor.
1970  */
1971 static void
1972 tunnel_send_multicast_iterator (void *cls, GNUNET_PEER_Id neighbor_id)
1973 {
1974   struct MeshMulticastData *mdata = cls;
1975   struct MeshDataDescriptor *info;
1976   struct GNUNET_PeerIdentity neighbor;
1977   unsigned int i;
1978
1979   info = GNUNET_malloc (sizeof (struct MeshDataDescriptor));
1980
1981   info->data = mdata->data;
1982   info->size = mdata->data_len;
1983   info->copies = mdata->reference_counter;
1984   (*(mdata->reference_counter))++;
1985
1986   if (NULL != mdata->t->client)
1987   {
1988     info->client = mdata->t->client->handle;
1989     info->timeout_task = mdata->task;
1990   }
1991   info->destination = neighbor_id;
1992   GNUNET_PEER_resolve (neighbor_id, &neighbor);
1993 #if MESH_DEBUG
1994   GNUNET_log (GNUNET_ERROR_TYPE_DEBUG, "MESH:    sending to %s...\n",
1995               GNUNET_i2s (&neighbor));
1996 #endif
1997   info->peer = peer_info_get (&neighbor);
1998   GNUNET_assert (NULL != info->peer);
1999   i = peer_info_transmit_slot (info->peer);
2000   info->handler_n = i;
2001   info->peer->infos[i] = info;
2002   info->peer->types[i] = GNUNET_MESSAGE_TYPE_MESH_MULTICAST;
2003   info->peer->core_transmit[i] =
2004       GNUNET_CORE_notify_transmit_ready (core_handle, 0, 0,
2005                                          GNUNET_TIME_UNIT_FOREVER_REL,
2006                                          &neighbor, info->size,
2007                                          &send_core_data_multicast, info);
2008 }
2009
2010 /**
2011  * Send a message in a tunnel in multicast, sending a copy to each child node
2012  * down the local one in the tunnel tree.
2013  *
2014  * @param t Tunnel in which to send the data.
2015  * @param msg Message to be sent
2016  */
2017 static void
2018 tunnel_send_multicast (struct MeshTunnel *t,
2019                        const struct GNUNET_MessageHeader *msg)
2020 {
2021   struct MeshMulticastData *mdata;
2022
2023 #if MESH_DEBUG
2024   GNUNET_log (GNUNET_ERROR_TYPE_DEBUG,
2025               "MESH:  sending a multicast packet...\n");
2026 #endif
2027   mdata = GNUNET_malloc (sizeof (struct MeshMulticastData));
2028   mdata->data_len = ntohs (msg->size);
2029   mdata->reference_counter = GNUNET_malloc (sizeof (unsigned int));
2030   mdata->t = t;
2031   mdata->data = GNUNET_malloc (mdata->data_len);
2032   memcpy (mdata->data, msg, mdata->data_len);
2033   if (ntohs (msg->type) == GNUNET_MESSAGE_TYPE_MESH_MULTICAST)
2034   {
2035     struct GNUNET_MESH_Multicast *mcast;
2036
2037     mcast = (struct GNUNET_MESH_Multicast *) mdata->data;
2038     mcast->ttl = htonl (ntohl (mcast->ttl) - 1);
2039 #if MESH_DEBUG
2040     GNUNET_log (GNUNET_ERROR_TYPE_DEBUG,
2041                 "MESH:   data packet, ttl: %u\n",
2042                 ntohl (mcast->ttl));
2043   }
2044   else
2045   {
2046     GNUNET_log (GNUNET_ERROR_TYPE_DEBUG,
2047                 "MESH:   not a data packet, no ttl\n");
2048 #endif
2049   }
2050   if (NULL != t->client)
2051   {
2052     mdata->task = GNUNET_malloc (sizeof (GNUNET_SCHEDULER_TaskIdentifier));
2053     *(mdata->task) =
2054         GNUNET_SCHEDULER_add_delayed (UNACKNOWLEDGED_WAIT, &client_allow_send,
2055                                       t->client->handle);
2056   }
2057
2058   tree_iterate_children (t->tree, &tunnel_send_multicast_iterator, mdata);
2059   if (*(mdata->reference_counter) == 0)
2060   {
2061     GNUNET_free (mdata->data);
2062     GNUNET_free (mdata->reference_counter);
2063     if (NULL != mdata->task)
2064     {
2065       GNUNET_free (mdata->task);
2066     }
2067   }
2068   GNUNET_free (mdata);
2069 #if MESH_DEBUG
2070   GNUNET_log (GNUNET_ERROR_TYPE_DEBUG,
2071               "MESH:  sending a multicast packet done\n");
2072 #endif
2073   return;
2074 }
2075
2076
2077 /**
2078  * Send a message to all peers in this tunnel that the tunnel is no longer
2079  * valid.
2080  *
2081  * @param t The tunnel whose peers to notify.
2082  */
2083 static void
2084 tunnel_send_destroy (struct MeshTunnel *t)
2085 {
2086   struct GNUNET_MESH_TunnelDestroy msg;
2087
2088   msg.header.size = htons (sizeof (msg));
2089   msg.header.type = htons (GNUNET_MESSAGE_TYPE_MESH_TUNNEL_DESTROY);
2090   GNUNET_PEER_resolve (t->id.oid, &msg.oid);
2091   msg.tid = htonl (t->id.tid);
2092   tunnel_send_multicast (t, &msg.header);
2093 }
2094
2095
2096
2097 /**
2098  * Destroy the tunnel and free any allocated resources linked to it
2099  *
2100  * @param t the tunnel to destroy
2101  *
2102  * @return GNUNET_OK on success
2103  */
2104 static int
2105 tunnel_destroy (struct MeshTunnel *t)
2106 {
2107   struct MeshClient *c;
2108   struct MeshQueue *q;
2109   struct MeshQueue *qn;
2110   GNUNET_HashCode hash;
2111   int r;
2112
2113   if (NULL == t)
2114     return GNUNET_OK;
2115
2116   c = t->client;
2117 #if MESH_DEBUG
2118   {
2119     struct GNUNET_PeerIdentity id;
2120
2121     GNUNET_PEER_resolve (t->id.oid, &id);
2122     GNUNET_log (GNUNET_ERROR_TYPE_DEBUG, "MESH: destroying tunnel %s [%x]\n",
2123                 GNUNET_i2s (&id), t->id.tid);
2124     if (NULL != c)
2125       GNUNET_log (GNUNET_ERROR_TYPE_DEBUG, "MESH:   by client %u\n", c->id);
2126   }
2127 #endif
2128
2129   GNUNET_CRYPTO_hash (&t->id, sizeof (struct MESH_TunnelID), &hash);
2130   if (GNUNET_YES != GNUNET_CONTAINER_multihashmap_remove (tunnels, &hash, t))
2131   {
2132     r = GNUNET_SYSERR;
2133   }
2134
2135   GNUNET_CRYPTO_hash (&t->local_tid, sizeof (MESH_TunnelNumber), &hash);
2136   if (NULL != c &&
2137       GNUNET_YES != GNUNET_CONTAINER_multihashmap_remove (c->tunnels, &hash, t))
2138   {
2139     r = GNUNET_SYSERR;
2140   }
2141   if (t->local_tid >= GNUNET_MESH_LOCAL_TUNNEL_ID_SERV)
2142   {
2143     GNUNET_CRYPTO_hash (&t->local_tid, sizeof (MESH_TunnelNumber), &hash);
2144     GNUNET_break (GNUNET_YES ==
2145                   GNUNET_CONTAINER_multihashmap_remove (incoming_tunnels, &hash,
2146                                                         t));
2147   }
2148   if (NULL != t->peers)
2149   {
2150     GNUNET_CONTAINER_multihashmap_iterate (t->peers, &peer_info_delete_tunnel,
2151                                            t);
2152     GNUNET_CONTAINER_multihashmap_destroy (t->peers);
2153   }
2154   q = t->queue_head;
2155   while (NULL != q)
2156   {
2157     if (NULL != q->data)
2158       GNUNET_free (q->data);
2159     qn = q->next;
2160     GNUNET_free (q);
2161     q = qn;
2162     /* TODO cancel core transmit ready in case it was active */
2163   }
2164   tree_destroy (t->tree);
2165   if (NULL != t->dht_get_type)
2166     GNUNET_DHT_get_stop (t->dht_get_type);
2167   if (GNUNET_SCHEDULER_NO_TASK != t->timeout_task)
2168     GNUNET_SCHEDULER_cancel (t->timeout_task);
2169   if (GNUNET_SCHEDULER_NO_TASK != t->path_refresh_task)
2170     GNUNET_SCHEDULER_cancel (t->path_refresh_task);
2171   GNUNET_free (t);
2172   return r;
2173 }
2174
2175
2176 /**
2177  * Removes an explicit path from a tunnel, freeing all intermediate nodes
2178  * that are no longer needed, as well as nodes of no longer reachable peers.
2179  * The tunnel itself is also destoyed if results in a remote empty tunnel.
2180  *
2181  * @param t Tunnel from which to remove the path.
2182  * @param peer Short id of the peer which should be removed.
2183  */
2184 static void
2185 tunnel_delete_peer (struct MeshTunnel *t, GNUNET_PEER_Id peer)
2186 {
2187   if (GNUNET_NO == tree_del_peer (t->tree, peer, NULL, NULL))
2188     tunnel_destroy (t);
2189 }
2190
2191
2192 /**
2193  * tunnel_destroy_iterator: iterator for deleting each tunnel that belongs to a
2194  * client when the client disconnects.
2195  *
2196  * @param cls closure (client that is disconnecting)
2197  * @param key the hash of the local tunnel id (used to access the hashmap)
2198  * @param value the value stored at the key (tunnel to destroy)
2199  *
2200  * @return GNUNET_OK on success
2201  */
2202 static int
2203 tunnel_destroy_iterator (void *cls, const GNUNET_HashCode * key, void *value)
2204 {
2205   struct MeshTunnel *t = value;
2206   int r;
2207
2208   r = tunnel_destroy (t);
2209   return r;
2210 }
2211
2212
2213 /**
2214  * Timeout function, destroys tunnel if called
2215  *
2216  * @param cls Closure (tunnel to destroy).
2217  * @param tc TaskContext
2218  */
2219 static void
2220 tunnel_timeout (void *cls, const struct GNUNET_SCHEDULER_TaskContext *tc)
2221 {
2222   struct MeshTunnel *t = cls;
2223
2224   if (GNUNET_SCHEDULER_REASON_SHUTDOWN == tc->reason)
2225     return;
2226   t->timeout_task = GNUNET_SCHEDULER_NO_TASK;
2227   tunnel_destroy (t);
2228 }
2229
2230 /**
2231  * Resets the tunnel timeout. Starts it if no timeout was running.
2232  *
2233  * @param t Tunnel whose timeout to reset.
2234  */
2235 static void
2236 tunnel_reset_timeout (struct MeshTunnel *t)
2237 {
2238   if (GNUNET_SCHEDULER_NO_TASK != t->timeout_task)
2239     GNUNET_SCHEDULER_cancel (t->timeout_task);
2240   t->timeout_task =
2241       GNUNET_SCHEDULER_add_delayed (GNUNET_TIME_relative_multiply
2242                                     (REFRESH_PATH_TIME, 4), &tunnel_timeout, t);
2243 }
2244
2245
2246 /******************************************************************************/
2247 /****************      MESH NETWORK HANDLER HELPERS     ***********************/
2248 /******************************************************************************/
2249
2250 /**
2251  * Function called to notify a client about the socket
2252  * being ready to queue more data.  "buf" will be
2253  * NULL and "size" zero if the socket was closed for
2254  * writing in the meantime.
2255  *
2256  * @param cls closure
2257  * @param size number of bytes available in buf
2258  * @param buf where the callee should write the message
2259  * @return number of bytes written to buf
2260  */
2261 static size_t
2262 send_core_create_path (void *cls, size_t size, void *buf)
2263 {
2264   struct MeshPathInfo *info = cls;
2265   struct GNUNET_MESH_ManipulatePath *msg;
2266   struct GNUNET_PeerIdentity *peer_ptr;
2267   struct MeshPeerInfo *peer = info->peer;
2268   struct MeshTunnel *t = info->t;
2269   struct MeshPeerPath *p = info->path;
2270   size_t size_needed;
2271   int i;
2272
2273   GNUNET_log (GNUNET_ERROR_TYPE_DEBUG, "MESH: CREATE PATH sending...\n");
2274   size_needed =
2275       sizeof (struct GNUNET_MESH_ManipulatePath) +
2276       p->length * sizeof (struct GNUNET_PeerIdentity);
2277
2278   if (size < size_needed || NULL == buf)
2279   {
2280     GNUNET_log (GNUNET_ERROR_TYPE_DEBUG, "MESH: create path retransmit!\n");
2281     GNUNET_log (GNUNET_ERROR_TYPE_DEBUG, "MESH:   buf:  %p\n", buf);
2282     GNUNET_log (GNUNET_ERROR_TYPE_DEBUG, "MESH:   size: (%u/%u)\n", size,
2283                 size_needed);
2284     info->peer->core_transmit[info->pos] =
2285         GNUNET_CORE_notify_transmit_ready (core_handle, 0, 0,
2286                                            GNUNET_TIME_UNIT_FOREVER_REL,
2287                                            tree_get_first_hop (t->tree,
2288                                                                peer->id),
2289                                            size_needed, &send_core_create_path,
2290                                            info);
2291     return 0;
2292   }
2293   info->peer->core_transmit[info->pos] = NULL;
2294 #if MESH_DEBUG
2295   {
2296     struct GNUNET_PeerIdentity id;
2297
2298     GNUNET_PEER_resolve (peer->id, &id);
2299     GNUNET_log (GNUNET_ERROR_TYPE_DEBUG,
2300                 "MESH:   setting core_transmit %s [%u] to NULL\n",
2301                 GNUNET_i2s (&id), info->pos);
2302   }
2303 #endif
2304   msg = (struct GNUNET_MESH_ManipulatePath *) buf;
2305   msg->header.size = htons (size_needed);
2306   msg->header.type = htons (GNUNET_MESSAGE_TYPE_MESH_PATH_CREATE);
2307   msg->tid = ntohl (t->id.tid);
2308
2309   peer_ptr = (struct GNUNET_PeerIdentity *) &msg[1];
2310   for (i = 0; i < p->length; i++)
2311   {
2312     GNUNET_PEER_resolve (p->peers[i], peer_ptr++);
2313   }
2314
2315   path_destroy (p);
2316   GNUNET_free (info);
2317
2318   GNUNET_log (GNUNET_ERROR_TYPE_DEBUG,
2319               "MESH: CREATE PATH (%u bytes long) sent!\n", size_needed);
2320   return size_needed;
2321 }
2322
2323
2324 /**
2325  * Function called to notify a client about the socket
2326  * being ready to queue more data.  "buf" will be
2327  * NULL and "size" zero if the socket was closed for
2328  * writing in the meantime.
2329  *
2330  * @param cls closure (data itself)
2331  * @param size number of bytes available in buf
2332  * @param buf where the callee should write the message
2333  *
2334  * @return number of bytes written to buf
2335  */
2336 static size_t
2337 send_core_data_multicast (void *cls, size_t size, void *buf)
2338 {
2339   struct MeshDataDescriptor *info = cls;
2340   size_t total_size;
2341
2342   GNUNET_log (GNUNET_ERROR_TYPE_DEBUG, "MESH: Multicast callback.\n");
2343   GNUNET_assert (NULL != info);
2344   GNUNET_assert (NULL != info->peer);
2345   total_size = info->size;
2346   GNUNET_assert (total_size < GNUNET_SERVER_MAX_MESSAGE_SIZE);
2347
2348   if (total_size > size)
2349   {
2350     /* Retry */
2351     struct GNUNET_PeerIdentity id;
2352
2353     GNUNET_log (GNUNET_ERROR_TYPE_DEBUG,
2354                 "MESH: Multicast: retransmitting... (%u/%u)\n", size,
2355                 total_size);
2356     GNUNET_PEER_resolve (info->peer->id, &id);
2357     info->peer->core_transmit[info->handler_n] =
2358         GNUNET_CORE_notify_transmit_ready (core_handle, 0, 0,
2359                                            GNUNET_TIME_UNIT_FOREVER_REL, &id,
2360                                            total_size,
2361                                            &send_core_data_multicast, info);
2362     return 0;
2363   }
2364   info->peer->core_transmit[info->handler_n] = NULL;
2365   info->peer->infos[info->handler_n] = NULL;
2366   GNUNET_log (GNUNET_ERROR_TYPE_DEBUG, "MESH:  copying data...\n");
2367   memcpy (buf, info->data, total_size);
2368 #if MESH_DEBUG
2369   {
2370     struct GNUNET_MESH_Multicast *mc;
2371     struct GNUNET_MessageHeader *mh;
2372
2373     mh = buf;
2374     if (ntohs (mh->type) == GNUNET_MESSAGE_TYPE_MESH_MULTICAST)
2375     {
2376       mc = (struct GNUNET_MESH_Multicast *) mh;
2377       mh = (struct GNUNET_MessageHeader *) &mc[1];
2378       GNUNET_log (GNUNET_ERROR_TYPE_DEBUG,
2379                   "MESH:  multicast, payload type %u\n", ntohs (mh->type));
2380       GNUNET_log (GNUNET_ERROR_TYPE_DEBUG,
2381                   "MESH:  multicast, payload size %u\n", ntohs (mh->size));
2382     }
2383     else
2384     {
2385       GNUNET_log (GNUNET_ERROR_TYPE_DEBUG, "MESH:  type %u\n",
2386                   ntohs (mh->type));
2387     }
2388   }
2389 #endif
2390   data_descriptor_decrement_multicast (info);
2391   GNUNET_log (GNUNET_ERROR_TYPE_DEBUG, "MESH: freeing info...\n");
2392   GNUNET_free (info);
2393   GNUNET_log (GNUNET_ERROR_TYPE_DEBUG, "MESH: return %u\n", total_size);
2394   return total_size;
2395 }
2396
2397
2398 /**
2399  * Function called to notify a client about the socket
2400  * being ready to queue more data.  "buf" will be
2401  * NULL and "size" zero if the socket was closed for
2402  * writing in the meantime.
2403  *
2404  * @param cls closure (MeshDataDescriptor)
2405  * @param size number of bytes available in buf
2406  * @param buf where the callee should write the message
2407  * @return number of bytes written to buf
2408  */
2409 static size_t
2410 send_core_path_ack (void *cls, size_t size, void *buf)
2411 {
2412   struct MeshDataDescriptor *info = cls;
2413   struct GNUNET_MESH_PathACK *msg = buf;
2414
2415   GNUNET_assert (NULL != info);
2416   if (info->peer)
2417   {
2418     info->peer->core_transmit[info->handler_n] = NULL;
2419   }
2420   if (sizeof (struct GNUNET_MESH_PathACK) > size)
2421   {
2422     GNUNET_break (0);
2423     return 0;
2424   }
2425   msg->header.size = htons (sizeof (struct GNUNET_MESH_PathACK));
2426   msg->header.type = htons (GNUNET_MESSAGE_TYPE_MESH_PATH_ACK);
2427   GNUNET_PEER_resolve (info->origin->oid, &msg->oid);
2428   msg->tid = htonl (info->origin->tid);
2429   msg->peer_id = my_full_id;
2430   GNUNET_free (info);
2431   /* TODO add signature */
2432
2433   GNUNET_log (GNUNET_ERROR_TYPE_DEBUG, "MESH: PATH ACK sent!\n");
2434   return sizeof (struct GNUNET_MESH_PathACK);
2435 }
2436
2437
2438 /******************************************************************************/
2439 /********************      MESH NETWORK HANDLERS     **************************/
2440 /******************************************************************************/
2441
2442
2443 /**
2444  * Core handler for path creation
2445  *
2446  * @param cls closure
2447  * @param message message
2448  * @param peer peer identity this notification is about
2449  * @param atsi performance data
2450  * @param atsi_count number of records in 'atsi'
2451  *
2452  * @return GNUNET_OK to keep the connection open,
2453  *         GNUNET_SYSERR to close it (signal serious error)
2454  */
2455 static int
2456 handle_mesh_path_create (void *cls, const struct GNUNET_PeerIdentity *peer,
2457                          const struct GNUNET_MessageHeader *message,
2458                          const struct GNUNET_ATS_Information *atsi,
2459                          unsigned int atsi_count)
2460 {
2461   unsigned int own_pos;
2462   uint16_t size;
2463   uint16_t i;
2464   MESH_TunnelNumber tid;
2465   struct GNUNET_MESH_ManipulatePath *msg;
2466   struct GNUNET_PeerIdentity *pi;
2467   GNUNET_HashCode hash;
2468   struct MeshPeerPath *path;
2469   struct MeshPeerInfo *dest_peer_info;
2470   struct MeshPeerInfo *orig_peer_info;
2471   struct MeshTunnel *t;
2472
2473   GNUNET_log (GNUNET_ERROR_TYPE_DEBUG,
2474               "MESH: Received a path create msg [%s]\n",
2475               GNUNET_i2s (&my_full_id));
2476   size = ntohs (message->size);
2477   if (size < sizeof (struct GNUNET_MESH_ManipulatePath))
2478   {
2479     GNUNET_break_op (0);
2480     return GNUNET_OK;
2481   }
2482
2483   size -= sizeof (struct GNUNET_MESH_ManipulatePath);
2484   if (size % sizeof (struct GNUNET_PeerIdentity))
2485   {
2486     GNUNET_break_op (0);
2487     return GNUNET_OK;
2488   }
2489   size /= sizeof (struct GNUNET_PeerIdentity);
2490   if (size < 2)
2491   {
2492     GNUNET_break_op (0);
2493     return GNUNET_OK;
2494   }
2495   GNUNET_log (GNUNET_ERROR_TYPE_DEBUG, "MESH:     path has %u hops.\n", size);
2496   msg = (struct GNUNET_MESH_ManipulatePath *) message;
2497
2498   tid = ntohl (msg->tid);
2499   pi = (struct GNUNET_PeerIdentity *) &msg[1];
2500   t = tunnel_get (pi, tid);
2501   GNUNET_log (GNUNET_ERROR_TYPE_DEBUG,
2502               "MESH:     path is for tunnel %s [%X].\n", GNUNET_i2s (pi), tid);
2503   if (NULL == t)
2504   {
2505     GNUNET_log (GNUNET_ERROR_TYPE_DEBUG, "MESH:   Creating tunnel\n");
2506     t = GNUNET_malloc (sizeof (struct MeshTunnel));
2507     t->id.oid = GNUNET_PEER_intern (pi);
2508     t->id.tid = tid;
2509     while (NULL != tunnel_get_incoming (next_local_tid))
2510       next_local_tid = (next_local_tid + 1) | GNUNET_MESH_LOCAL_TUNNEL_ID_SERV;
2511     t->local_tid = next_local_tid++;
2512     next_local_tid = next_local_tid | GNUNET_MESH_LOCAL_TUNNEL_ID_SERV;
2513     t->tree = tree_new (t->id.oid);
2514
2515     GNUNET_CRYPTO_hash (&t->id, sizeof (struct MESH_TunnelID), &hash);
2516     if (GNUNET_OK !=
2517         GNUNET_CONTAINER_multihashmap_put (tunnels, &hash, t,
2518                                            GNUNET_CONTAINER_MULTIHASHMAPOPTION_UNIQUE_FAST))
2519     {
2520       tunnel_destroy (t);
2521       GNUNET_break (0);
2522       return GNUNET_OK;
2523     }
2524     tunnel_reset_timeout (t);
2525     GNUNET_CRYPTO_hash (&t->local_tid, sizeof (MESH_TunnelNumber), &hash);
2526     if (GNUNET_OK !=
2527         GNUNET_CONTAINER_multihashmap_put (incoming_tunnels, &hash, t,
2528                                            GNUNET_CONTAINER_MULTIHASHMAPOPTION_UNIQUE_FAST))
2529     {
2530       tunnel_destroy (t);
2531       GNUNET_break (0);
2532       return GNUNET_OK;
2533     }
2534   }
2535   dest_peer_info =
2536       GNUNET_CONTAINER_multihashmap_get (peers, &pi[size - 1].hashPubKey);
2537   if (NULL == dest_peer_info)
2538   {
2539     GNUNET_log (GNUNET_ERROR_TYPE_DEBUG,
2540                 "MESH:   Creating PeerInfo for destination.\n");
2541     dest_peer_info = GNUNET_malloc (sizeof (struct MeshPeerInfo));
2542     dest_peer_info->id = GNUNET_PEER_intern (&pi[size - 1]);
2543     GNUNET_CONTAINER_multihashmap_put (peers, &pi[size - 1].hashPubKey,
2544                                        dest_peer_info,
2545                                        GNUNET_CONTAINER_MULTIHASHMAPOPTION_UNIQUE_ONLY);
2546   }
2547   orig_peer_info = GNUNET_CONTAINER_multihashmap_get (peers, &pi->hashPubKey);
2548   if (NULL == orig_peer_info)
2549   {
2550     GNUNET_log (GNUNET_ERROR_TYPE_DEBUG,
2551                 "MESH:   Creating PeerInfo for origin.\n");
2552     orig_peer_info = GNUNET_malloc (sizeof (struct MeshPeerInfo));
2553     orig_peer_info->id = GNUNET_PEER_intern (pi);
2554     GNUNET_CONTAINER_multihashmap_put (peers, &pi->hashPubKey, orig_peer_info,
2555                                        GNUNET_CONTAINER_MULTIHASHMAPOPTION_UNIQUE_ONLY);
2556   }
2557   GNUNET_log (GNUNET_ERROR_TYPE_DEBUG, "MESH:   Creating path...\n");
2558   path = path_new (size);
2559   own_pos = 0;
2560   for (i = 0; i < size; i++)
2561   {
2562     GNUNET_log (GNUNET_ERROR_TYPE_DEBUG, "MESH:   ... adding %s\n",
2563                 GNUNET_i2s (&pi[i]));
2564     path->peers[i] = GNUNET_PEER_intern (&pi[i]);
2565     if (path->peers[i] == myid)
2566       own_pos = i;
2567   }
2568   GNUNET_log (GNUNET_ERROR_TYPE_DEBUG, "MESH:   Own position: %u\n", own_pos);
2569   if (own_pos == 0)
2570   {
2571     /* cannot be self, must be 'not found' */
2572     /* create path: self not found in path through self */
2573     GNUNET_break_op (0);
2574     path_destroy (path);
2575     /* FIXME error. destroy tunnel? leave for timeout? */
2576     return 0;
2577   }
2578   tunnel_add_path (t, path, own_pos);
2579   if (own_pos == size - 1)
2580   {
2581     /* It is for us! Send ack. */
2582     struct MeshDataDescriptor *info;
2583     unsigned int j;
2584
2585     GNUNET_log (GNUNET_ERROR_TYPE_DEBUG, "MESH:   It's for us!\n");
2586     peer_info_add_path_to_origin (orig_peer_info, path, GNUNET_NO);
2587     if (NULL == t->peers)
2588     {
2589       /* New tunnel! Notify clients! */
2590       struct GNUNET_MESH_TunnelNotification cmsg;
2591
2592       cmsg.header.size = htons (sizeof (cmsg));
2593       cmsg.header.type = htons (GNUNET_MESSAGE_TYPE_MESH_LOCAL_TUNNEL_CREATE);
2594       GNUNET_PEER_resolve (t->id.oid, &cmsg.peer);
2595       cmsg.tunnel_id = htonl (t->local_tid);
2596       GNUNET_SERVER_notification_context_broadcast (nc, &cmsg.header,
2597                                                     GNUNET_NO);
2598
2599       t->peers = GNUNET_CONTAINER_multihashmap_create (4);
2600     }
2601     GNUNET_break (GNUNET_OK ==
2602                   GNUNET_CONTAINER_multihashmap_put (t->peers,
2603                                                      &my_full_id.hashPubKey,
2604                                                      peer_info_get
2605                                                      (&my_full_id),
2606                                                      GNUNET_CONTAINER_MULTIHASHMAPOPTION_REPLACE));
2607     /* FIXME use send_message */
2608     info = GNUNET_malloc (sizeof (struct MeshDataDescriptor));
2609     info->origin = &t->id;
2610     info->peer = GNUNET_CONTAINER_multihashmap_get (peers, &peer->hashPubKey);
2611     GNUNET_assert (NULL != info->peer);
2612     j = peer_info_transmit_slot (info->peer);
2613     info->handler_n = j;
2614     info->peer->types[j] = GNUNET_MESSAGE_TYPE_MESH_PATH_ACK;
2615     info->peer->infos[j] = info;
2616     info->peer->core_transmit[j] =
2617         GNUNET_CORE_notify_transmit_ready (core_handle, 0, 100,
2618                                            GNUNET_TIME_UNIT_FOREVER_REL, peer,
2619                                            sizeof (struct GNUNET_MESH_PathACK),
2620                                            &send_core_path_ack, info);
2621   }
2622   else
2623   {
2624     struct MeshPeerPath *path2;
2625
2626     /* It's for somebody else! Retransmit. */
2627     path2 = path_duplicate (path);
2628     GNUNET_log (GNUNET_ERROR_TYPE_DEBUG, "MESH:   Retransmitting.\n");
2629     peer_info_add_path (dest_peer_info, path2, GNUNET_NO);
2630     path2 = path_duplicate (path);
2631     peer_info_add_path_to_origin (orig_peer_info, path2, GNUNET_NO);
2632     send_create_path (dest_peer_info, path, t);
2633   }
2634   return GNUNET_OK;
2635 }
2636
2637
2638 /**
2639  * Core handler for path destruction
2640  *
2641  * @param cls closure
2642  * @param message message
2643  * @param peer peer identity this notification is about
2644  * @param atsi performance data
2645  * @param atsi_count number of records in 'atsi'
2646  *
2647  * @return GNUNET_OK to keep the connection open,
2648  *         GNUNET_SYSERR to close it (signal serious error)
2649  */
2650 static int
2651 handle_mesh_path_destroy (void *cls, const struct GNUNET_PeerIdentity *peer,
2652                           const struct GNUNET_MessageHeader *message,
2653                           const struct GNUNET_ATS_Information *atsi,
2654                           unsigned int atsi_count)
2655 {
2656   struct GNUNET_MESH_ManipulatePath *msg;
2657   struct GNUNET_PeerIdentity *pi;
2658   struct MeshPeerPath *path;
2659   struct MeshTunnel *t;
2660   unsigned int own_pos;
2661   unsigned int i;
2662   size_t size;
2663
2664   GNUNET_log (GNUNET_ERROR_TYPE_DEBUG,
2665               "MESH: Received a PATH DESTROY msg from %s\n", GNUNET_i2s (peer));
2666   size = ntohs (message->size);
2667   if (size < sizeof (struct GNUNET_MESH_ManipulatePath))
2668   {
2669     GNUNET_break_op (0);
2670     return GNUNET_OK;
2671   }
2672
2673   size -= sizeof (struct GNUNET_MESH_ManipulatePath);
2674   if (size % sizeof (struct GNUNET_PeerIdentity))
2675   {
2676     GNUNET_break_op (0);
2677     return GNUNET_OK;
2678   }
2679   size /= sizeof (struct GNUNET_PeerIdentity);
2680   if (size < 2)
2681   {
2682     GNUNET_break_op (0);
2683     return GNUNET_OK;
2684   }
2685   GNUNET_log (GNUNET_ERROR_TYPE_DEBUG, "MESH:     path has %u hops.\n", size);
2686
2687   msg = (struct GNUNET_MESH_ManipulatePath *) message;
2688   pi = (struct GNUNET_PeerIdentity *) &msg[1];
2689   GNUNET_log (GNUNET_ERROR_TYPE_DEBUG,
2690               "MESH:     path is for tunnel %s [%X].\n", GNUNET_i2s (pi),
2691               msg->tid);
2692   t = tunnel_get (pi, ntohl (msg->tid));
2693   if (NULL == t)
2694   {
2695     /* TODO notify back: we don't know this tunnel */
2696     GNUNET_break_op (0);
2697     return GNUNET_OK;
2698   }
2699   GNUNET_log (GNUNET_ERROR_TYPE_DEBUG, "MESH:   Creating path...\n");
2700   path = path_new (size);
2701   own_pos = 0;
2702   for (i = 0; i < size; i++)
2703   {
2704     GNUNET_log (GNUNET_ERROR_TYPE_DEBUG, "MESH:   ... adding %s\n",
2705                 GNUNET_i2s (&pi[i]));
2706     path->peers[i] = GNUNET_PEER_intern (&pi[i]);
2707     if (path->peers[i] == myid)
2708       own_pos = i;
2709   }
2710   GNUNET_log (GNUNET_ERROR_TYPE_DEBUG, "MESH:   Own position: %u\n", own_pos);
2711   if (own_pos < path->length - 1)
2712     send_message (message, &pi[own_pos + 1]);
2713   tunnel_delete_peer (t, path->peers[path->length - 1]);
2714   path_destroy (path);
2715   return GNUNET_OK;
2716 }
2717
2718
2719 /**
2720  * Core handler for notifications of broken paths
2721  *
2722  * @param cls closure
2723  * @param message message
2724  * @param peer peer identity this notification is about
2725  * @param atsi performance data
2726  * @param atsi_count number of records in 'atsi'
2727  *
2728  * @return GNUNET_OK to keep the connection open,
2729  *         GNUNET_SYSERR to close it (signal serious error)
2730  */
2731 static int
2732 handle_mesh_path_broken (void *cls, const struct GNUNET_PeerIdentity *peer,
2733                          const struct GNUNET_MessageHeader *message,
2734                          const struct GNUNET_ATS_Information *atsi,
2735                          unsigned int atsi_count)
2736 {
2737   struct GNUNET_MESH_PathBroken *msg;
2738   struct MeshTunnel *t;
2739
2740   GNUNET_log (GNUNET_ERROR_TYPE_DEBUG,
2741               "MESH: Received a PATH BROKEN msg from %s\n", GNUNET_i2s (peer));
2742   msg = (struct GNUNET_MESH_PathBroken *) message;
2743   GNUNET_log (GNUNET_ERROR_TYPE_DEBUG, "MESH:   regarding %s\n",
2744               GNUNET_i2s (&msg->peer1));
2745   GNUNET_log (GNUNET_ERROR_TYPE_DEBUG, "MESH:   regarding %s\n",
2746               GNUNET_i2s (&msg->peer2));
2747   t = tunnel_get (&msg->oid, ntohl (msg->tid));
2748   if (NULL == t)
2749   {
2750     GNUNET_break_op (0);
2751     return GNUNET_OK;
2752   }
2753   tunnel_notify_connection_broken (t, GNUNET_PEER_search (&msg->peer1),
2754                                    GNUNET_PEER_search (&msg->peer2));
2755   return GNUNET_OK;
2756
2757 }
2758
2759
2760 /**
2761  * Core handler for tunnel destruction
2762  *
2763  * @param cls closure
2764  * @param message message
2765  * @param peer peer identity this notification is about
2766  * @param atsi performance data
2767  * @param atsi_count number of records in 'atsi'
2768  *
2769  * @return GNUNET_OK to keep the connection open,
2770  *         GNUNET_SYSERR to close it (signal serious error)
2771  */
2772 static int
2773 handle_mesh_tunnel_destroy (void *cls, const struct GNUNET_PeerIdentity *peer,
2774                             const struct GNUNET_MessageHeader *message,
2775                             const struct GNUNET_ATS_Information *atsi,
2776                             unsigned int atsi_count)
2777 {
2778   struct GNUNET_MESH_TunnelDestroy *msg;
2779   struct MeshTunnel *t;
2780
2781   GNUNET_log (GNUNET_ERROR_TYPE_DEBUG,
2782               "MESH: Got a TUNNEL DESTROY packet from %s\n", GNUNET_i2s (peer));
2783   msg = (struct GNUNET_MESH_TunnelDestroy *) message;
2784   GNUNET_log (GNUNET_ERROR_TYPE_DEBUG, "MESH:   for tunnel %s [%u]\n",
2785               GNUNET_i2s (&msg->oid), ntohl (msg->tid));
2786   t = tunnel_get (&msg->oid, ntohl (msg->tid));
2787   if (NULL == t)
2788   {
2789     /* Probably already got the message from another path,
2790      * destroyed the tunnel and retransmitted to children.
2791      * Safe to ignore.
2792      */
2793     return GNUNET_OK;
2794   }
2795   if (t->id.oid == myid)
2796   {
2797     GNUNET_break_op (0);
2798     return GNUNET_OK;
2799   }
2800   if (t->local_tid >= GNUNET_MESH_LOCAL_TUNNEL_ID_SERV)
2801   {
2802     /* Tunnel was incoming, notify clients */
2803     send_clients_tunnel_destroy (t);
2804   }
2805   tunnel_send_destroy (t);
2806   tunnel_destroy (t);
2807   return GNUNET_OK;
2808 }
2809
2810
2811 /**
2812  * Core handler for mesh network traffic going from the origin to a peer
2813  *
2814  * @param cls closure
2815  * @param peer peer identity this notification is about
2816  * @param message message
2817  * @param atsi performance data
2818  * @param atsi_count number of records in 'atsi'
2819  * @return GNUNET_OK to keep the connection open,
2820  *         GNUNET_SYSERR to close it (signal serious error)
2821  */
2822 static int
2823 handle_mesh_data_unicast (void *cls, const struct GNUNET_PeerIdentity *peer,
2824                           const struct GNUNET_MessageHeader *message,
2825                           const struct GNUNET_ATS_Information *atsi,
2826                           unsigned int atsi_count)
2827 {
2828   struct GNUNET_MESH_Unicast *msg;
2829   struct MeshTunnel *t;
2830   GNUNET_PEER_Id pid;
2831   size_t size;
2832
2833   GNUNET_log (GNUNET_ERROR_TYPE_DEBUG, "MESH: got a unicast packet from %s\n",
2834               GNUNET_i2s (peer));
2835   size = ntohs (message->size);
2836   if (size <
2837       sizeof (struct GNUNET_MESH_Unicast) +
2838       sizeof (struct GNUNET_MessageHeader))
2839   {
2840     GNUNET_break (0);
2841     return GNUNET_OK;
2842   }
2843   msg = (struct GNUNET_MESH_Unicast *) message;
2844   GNUNET_log (GNUNET_ERROR_TYPE_DEBUG, "MESH:  of type %u\n",
2845               ntohs (msg[1].header.type));
2846   t = tunnel_get (&msg->oid, ntohl (msg->tid));
2847   if (NULL == t)
2848   {
2849     /* TODO notify back: we don't know this tunnel */
2850     GNUNET_break_op (0);
2851     return GNUNET_OK;
2852   }
2853   tunnel_reset_timeout (t);
2854   pid = GNUNET_PEER_search (&msg->destination);
2855   if (pid == myid)
2856   {
2857     GNUNET_log (GNUNET_ERROR_TYPE_DEBUG,
2858                 "MESH:   it's for us! sending to clients...\n");
2859     send_subscribed_clients (message, (struct GNUNET_MessageHeader *) &msg[1]);
2860     return GNUNET_OK;
2861   }
2862   GNUNET_log (GNUNET_ERROR_TYPE_DEBUG,
2863               "MESH:   not for us, retransmitting...\n");
2864   send_message (message, tree_get_first_hop (t->tree, pid));
2865   return GNUNET_OK;
2866 }
2867
2868
2869 /**
2870  * Core handler for mesh network traffic going from the origin to all peers
2871  *
2872  * @param cls closure
2873  * @param message message
2874  * @param peer peer identity this notification is about
2875  * @param atsi performance data
2876  * @param atsi_count number of records in 'atsi'
2877  * @return GNUNET_OK to keep the connection open,
2878  *         GNUNET_SYSERR to close it (signal serious error)
2879  *
2880  * TODO: Check who we got this from, to validate route.
2881  */
2882 static int
2883 handle_mesh_data_multicast (void *cls, const struct GNUNET_PeerIdentity *peer,
2884                             const struct GNUNET_MessageHeader *message,
2885                             const struct GNUNET_ATS_Information *atsi,
2886                             unsigned int atsi_count)
2887 {
2888   struct GNUNET_MESH_Multicast *msg;
2889   struct MeshTunnel *t;
2890   size_t size;
2891
2892   GNUNET_log (GNUNET_ERROR_TYPE_DEBUG, "MESH: got a multicast packet from %s\n",
2893               GNUNET_i2s (peer));
2894   size = ntohs (message->size);
2895   if (sizeof (struct GNUNET_MESH_Multicast) +
2896       sizeof (struct GNUNET_MessageHeader) > size)
2897   {
2898     GNUNET_break_op (0);
2899     return GNUNET_OK;
2900   }
2901   msg = (struct GNUNET_MESH_Multicast *) message;
2902   t = tunnel_get (&msg->oid, ntohl (msg->tid));
2903
2904   if (NULL == t)
2905   {
2906     /* TODO notify that we dont know that tunnel */
2907     GNUNET_break_op (0);
2908     return GNUNET_OK;
2909   }
2910   if (t->mid == ntohl (msg->mid))
2911   {
2912     /* FIXME: already seen this packet, log dropping */
2913     GNUNET_log (GNUNET_ERROR_TYPE_WARNING,
2914                 "MESH:  Already seen mid %u, DROPPING!\n",
2915                 t->mid);
2916     return GNUNET_OK;
2917   }
2918 #if MESH_DEBUG
2919   else
2920   {
2921     GNUNET_log (GNUNET_ERROR_TYPE_DEBUG,
2922                 "MESH:  mid %u not seen yet, forwarding\n",
2923                 ntohl (msg->mid));
2924   }
2925 #endif
2926   t->mid = ntohl (msg->mid);
2927   tunnel_reset_timeout (t);
2928
2929   /* Transmit to locally interested clients */
2930   if (NULL != t->peers &&
2931       GNUNET_CONTAINER_multihashmap_contains (t->peers, &my_full_id.hashPubKey))
2932   {
2933     send_subscribed_clients (message, &msg[1].header);
2934   }
2935 #if MESH_DEBUG
2936   GNUNET_log (GNUNET_ERROR_TYPE_DEBUG,
2937               "MESH:    ttl: %u\n",
2938               ntohl (msg->ttl));
2939 #endif
2940   if (ntohl (msg->ttl) == 0)
2941   {
2942     /* FIXME: ttl is 0, log dropping */
2943     GNUNET_log (GNUNET_ERROR_TYPE_WARNING,
2944                 "MESH:  TTL is 0, DROPPING!\n");
2945     return GNUNET_OK;
2946   }
2947   tunnel_send_multicast (t, message);
2948   return GNUNET_OK;
2949 }
2950
2951
2952 /**
2953  * Core handler for mesh network traffic toward the owner of a tunnel
2954  *
2955  * @param cls closure
2956  * @param message message
2957  * @param peer peer identity this notification is about
2958  * @param atsi performance data
2959  * @param atsi_count number of records in 'atsi'
2960  *
2961  * @return GNUNET_OK to keep the connection open,
2962  *         GNUNET_SYSERR to close it (signal serious error)
2963  */
2964 static int
2965 handle_mesh_data_to_orig (void *cls, const struct GNUNET_PeerIdentity *peer,
2966                           const struct GNUNET_MessageHeader *message,
2967                           const struct GNUNET_ATS_Information *atsi,
2968                           unsigned int atsi_count)
2969 {
2970   struct GNUNET_MESH_ToOrigin *msg;
2971   struct GNUNET_PeerIdentity id;
2972   struct MeshPeerInfo *peer_info;
2973   struct MeshTunnel *t;
2974   size_t size;
2975
2976   GNUNET_log (GNUNET_ERROR_TYPE_DEBUG, "MESH: got a ToOrigin packet from %s\n",
2977               GNUNET_i2s (peer));
2978   size = ntohs (message->size);
2979   if (size < sizeof (struct GNUNET_MESH_ToOrigin) +     /* Payload must be */
2980       sizeof (struct GNUNET_MessageHeader))     /* at least a header */
2981   {
2982     GNUNET_break_op (0);
2983     return GNUNET_OK;
2984   }
2985   msg = (struct GNUNET_MESH_ToOrigin *) message;
2986   GNUNET_log (GNUNET_ERROR_TYPE_DEBUG, "MESH:  of type %u\n",
2987               ntohs (msg[1].header.type));
2988   t = tunnel_get (&msg->oid, ntohl (msg->tid));
2989
2990   if (NULL == t)
2991   {
2992     /* TODO notify that we dont know this tunnel (whom)? */
2993     GNUNET_break_op (0);
2994     return GNUNET_OK;
2995   }
2996
2997   if (t->id.oid == myid)
2998   {
2999     char cbuf[size];
3000     struct GNUNET_MESH_ToOrigin *copy;
3001
3002     GNUNET_log (GNUNET_ERROR_TYPE_DEBUG,
3003                 "MESH:   it's for us! sending to clients...\n");
3004     if (NULL == t->client)
3005     {
3006       /* got data packet for ownerless tunnel */
3007       GNUNET_log (GNUNET_ERROR_TYPE_DEBUG, "MESH:   no clients!\n");
3008       GNUNET_break_op (0);
3009       return GNUNET_OK;
3010     }
3011     /* TODO signature verification */
3012     memcpy (cbuf, message, size);
3013     copy = (struct GNUNET_MESH_ToOrigin *) cbuf;
3014     copy->tid = htonl (t->local_tid);
3015     GNUNET_SERVER_notification_context_unicast (nc, t->client->handle,
3016                                                 &copy->header, GNUNET_YES);
3017     return GNUNET_OK;
3018   }
3019   GNUNET_log (GNUNET_ERROR_TYPE_DEBUG,
3020               "MESH:   not for us, retransmitting...\n");
3021
3022   peer_info = peer_info_get (&msg->oid);
3023   if (NULL == peer_info)
3024   {
3025     /* unknown origin of tunnel */
3026     GNUNET_break (0);
3027     return GNUNET_OK;
3028   }
3029   GNUNET_PEER_resolve (tree_get_predecessor (t->tree), &id);
3030   send_message (message, &id);
3031
3032   return GNUNET_OK;
3033 }
3034
3035
3036 /**
3037  * Core handler for path ACKs
3038  *
3039  * @param cls closure
3040  * @param message message
3041  * @param peer peer identity this notification is about
3042  * @param atsi performance data
3043  * @param atsi_count number of records in 'atsi'
3044  *
3045  * @return GNUNET_OK to keep the connection open,
3046  *         GNUNET_SYSERR to close it (signal serious error)
3047  */
3048 static int
3049 handle_mesh_path_ack (void *cls, const struct GNUNET_PeerIdentity *peer,
3050                       const struct GNUNET_MessageHeader *message,
3051                       const struct GNUNET_ATS_Information *atsi,
3052                       unsigned int atsi_count)
3053 {
3054   struct GNUNET_MESH_PathACK *msg;
3055   struct GNUNET_PeerIdentity id;
3056   struct MeshPeerInfo *peer_info;
3057   struct MeshPeerPath *p;
3058   struct MeshTunnel *t;
3059   unsigned int i;
3060
3061   GNUNET_log (GNUNET_ERROR_TYPE_DEBUG, "MESH: Received a path ACK msg [%s]\n",
3062               GNUNET_i2s (&my_full_id));
3063   msg = (struct GNUNET_MESH_PathACK *) message;
3064   t = tunnel_get (&msg->oid, msg->tid);
3065   if (NULL == t)
3066   {
3067     /* TODO notify that we don't know the tunnel */
3068     return GNUNET_OK;
3069   }
3070
3071   /* Add paths to peers */
3072   peer_info = peer_info_get (&msg->peer_id);
3073   p = tree_get_path_to_peer(t->tree, peer_info->id);
3074   if (NULL != p)
3075   {
3076     for (i = 1; i < p->length && p->peers[i] != myid; i++) /* skip'em */;
3077     for (i++; i < p->length; i++)
3078     {
3079       struct MeshPeerInfo *aux;
3080       struct MeshPeerPath *copy;
3081
3082       aux = peer_info_get_short(p->peers[i]);
3083       copy = path_duplicate(p);
3084       copy->length = i;
3085       peer_info_add_path(aux, copy, 0);
3086     }
3087     path_destroy(p);
3088   }
3089   else
3090   {
3091     GNUNET_break (0);
3092   }
3093
3094   /* Message for us? */
3095   if (0 == memcmp (&msg->oid, &my_full_id, sizeof (struct GNUNET_PeerIdentity)))
3096   {
3097     GNUNET_log (GNUNET_ERROR_TYPE_DEBUG, "MESH:   It's for us!\n");
3098     if (NULL == t->client)
3099     {
3100       GNUNET_break_op (0);
3101       return GNUNET_OK;
3102     }
3103     if (NULL != t->dht_get_type)
3104     {
3105       GNUNET_DHT_get_stop (t->dht_get_type);
3106       t->dht_get_type = NULL;
3107     }
3108     if (tree_get_status(t->tree, peer_info->id) != MESH_PEER_READY)
3109     {
3110       tree_set_status (t->tree, peer_info->id, MESH_PEER_READY);
3111       send_client_peer_connected (t, peer_info->id);
3112     }
3113     return GNUNET_OK;
3114   }
3115
3116   GNUNET_log (GNUNET_ERROR_TYPE_DEBUG,
3117               "MESH:   not for us, retransmitting...\n");
3118   GNUNET_PEER_resolve (tree_get_predecessor (t->tree), &id);
3119   peer_info = peer_info_get (&msg->oid);
3120   if (NULL == peer_info)
3121   {
3122     /* If we know the tunnel, we should DEFINITELY know the peer */
3123     GNUNET_break (0);
3124     return GNUNET_OK;
3125   }
3126   send_message (message, &id);
3127   return GNUNET_OK;
3128 }
3129
3130
3131 /**
3132  * Functions to handle messages from core
3133  */
3134 static struct GNUNET_CORE_MessageHandler core_handlers[] = {
3135   {&handle_mesh_path_create, GNUNET_MESSAGE_TYPE_MESH_PATH_CREATE, 0},
3136   {&handle_mesh_path_destroy, GNUNET_MESSAGE_TYPE_MESH_PATH_DESTROY, 0},
3137   {&handle_mesh_path_broken, GNUNET_MESSAGE_TYPE_MESH_PATH_BROKEN,
3138    sizeof (struct GNUNET_MESH_PathBroken)},
3139   {&handle_mesh_tunnel_destroy, GNUNET_MESSAGE_TYPE_MESH_TUNNEL_DESTROY, 0},
3140   {&handle_mesh_data_unicast, GNUNET_MESSAGE_TYPE_MESH_UNICAST, 0},
3141   {&handle_mesh_data_multicast, GNUNET_MESSAGE_TYPE_MESH_MULTICAST, 0},
3142   {&handle_mesh_data_to_orig, GNUNET_MESSAGE_TYPE_MESH_TO_ORIGIN, 0},
3143   {&handle_mesh_path_ack, GNUNET_MESSAGE_TYPE_MESH_PATH_ACK,
3144    sizeof (struct GNUNET_MESH_PathACK)},
3145   {NULL, 0, 0}
3146 };
3147
3148
3149
3150 /******************************************************************************/
3151 /****************       MESH LOCAL HANDLER HELPERS      ***********************/
3152 /******************************************************************************/
3153
3154 /**
3155  * deregister_app: iterator for removing each application registered by a client
3156  *
3157  * @param cls closure
3158  * @param key the hash of the application id (used to access the hashmap)
3159  * @param value the value stored at the key (client)
3160  *
3161  * @return GNUNET_OK on success
3162  */
3163 static int
3164 deregister_app (void *cls, const GNUNET_HashCode * key, void *value)
3165 {
3166   GNUNET_break (GNUNET_YES ==
3167                 GNUNET_CONTAINER_multihashmap_remove (applications, key,
3168                                                       value));
3169   return GNUNET_OK;
3170 }
3171
3172 #if LATER
3173 /**
3174  * notify_client_connection_failure: notify a client that the connection to the
3175  * requested remote peer is not possible (for instance, no route found)
3176  * Function called when the socket is ready to queue more data. "buf" will be
3177  * NULL and "size" zero if the socket was closed for writing in the meantime.
3178  *
3179  * @param cls closure
3180  * @param size number of bytes available in buf
3181  * @param buf where the callee should write the message
3182  * @return number of bytes written to buf
3183  */
3184 static size_t
3185 notify_client_connection_failure (void *cls, size_t size, void *buf)
3186 {
3187   int size_needed;
3188   struct MeshPeerInfo *peer_info;
3189   struct GNUNET_MESH_PeerControl *msg;
3190   struct GNUNET_PeerIdentity id;
3191
3192   if (0 == size && NULL == buf)
3193   {
3194     // TODO retry? cancel?
3195     return 0;
3196   }
3197
3198   size_needed = sizeof (struct GNUNET_MESH_PeerControl);
3199   peer_info = (struct MeshPeerInfo *) cls;
3200   msg = (struct GNUNET_MESH_PeerControl *) buf;
3201   msg->header.size = htons (sizeof (struct GNUNET_MESH_PeerControl));
3202   msg->header.type = htons (GNUNET_MESSAGE_TYPE_MESH_LOCAL_PEER_DISCONNECTED);
3203 //     msg->tunnel_id = htonl(peer_info->t->tid);
3204   GNUNET_PEER_resolve (peer_info->id, &id);
3205   memcpy (&msg->peer, &id, sizeof (struct GNUNET_PeerIdentity));
3206
3207   return size_needed;
3208 }
3209 #endif
3210
3211
3212 /**
3213  * Send keepalive packets for a peer
3214  *
3215  * @param cls Closure (tunnel for which to send the keepalive).
3216  * @param tc Notification context.
3217  *
3218  * TODO: implement explicit multicast keepalive?
3219  */
3220 static void
3221 path_refresh (void *cls, const struct GNUNET_SCHEDULER_TaskContext *tc)
3222 {
3223   struct MeshTunnel *t = cls;
3224   struct GNUNET_MessageHeader *payload;
3225   struct GNUNET_MESH_Multicast *msg;
3226   size_t size =
3227       sizeof (struct GNUNET_MESH_Multicast) +
3228       sizeof (struct GNUNET_MessageHeader);
3229   char cbuf[size];
3230
3231   if (tc->reason == GNUNET_SCHEDULER_REASON_SHUTDOWN)
3232   {
3233     return;
3234   }
3235   t->path_refresh_task = GNUNET_SCHEDULER_NO_TASK;
3236
3237   GNUNET_log (GNUNET_ERROR_TYPE_DEBUG,
3238               "MESH: sending keepalive for tunnel %d\n", t->id.tid);
3239
3240   msg = (struct GNUNET_MESH_Multicast *) cbuf;
3241   msg->header.size = htons (size);
3242   msg->header.type = htons (GNUNET_MESSAGE_TYPE_MESH_MULTICAST);
3243   msg->oid = my_full_id;
3244   msg->tid = htonl (t->id.tid);
3245   payload = (struct GNUNET_MessageHeader *) &msg[1];
3246   payload->size = htons (sizeof (struct GNUNET_MessageHeader));
3247   payload->type = htons (GNUNET_MESSAGE_TYPE_MESH_PATH_KEEPALIVE);
3248   tunnel_send_multicast (t, &msg->header);
3249
3250   t->path_refresh_task =
3251       GNUNET_SCHEDULER_add_delayed (REFRESH_PATH_TIME, &path_refresh, t);
3252   return;
3253 }
3254
3255
3256 /**
3257  * Function to process paths received for a new peer addition. The recorded
3258  * paths form the initial tunnel, which can be optimized later.
3259  * Called on each result obtained for the DHT search.
3260  *
3261  * @param cls closure
3262  * @param exp when will this value expire
3263  * @param key key of the result
3264  * @param get_path path of the get request
3265  * @param get_path_length lenght of get_path
3266  * @param put_path path of the put request
3267  * @param put_path_length length of the put_path
3268  * @param type type of the result
3269  * @param size number of bytes in data
3270  * @param data pointer to the result data
3271  *
3272  * TODO: re-issue the request after certain time? cancel after X results?
3273  */
3274 static void
3275 dht_get_id_handler (void *cls, struct GNUNET_TIME_Absolute exp,
3276                     const GNUNET_HashCode * key,
3277                     const struct GNUNET_PeerIdentity *get_path,
3278                     unsigned int get_path_length,
3279                     const struct GNUNET_PeerIdentity *put_path,
3280                     unsigned int put_path_length, enum GNUNET_BLOCK_Type type,
3281                     size_t size, const void *data)
3282 {
3283   struct MeshPathInfo *path_info = cls;
3284   struct MeshPeerPath *p;
3285   struct GNUNET_PeerIdentity pi;
3286   int i;
3287
3288   GNUNET_log (GNUNET_ERROR_TYPE_DEBUG, "MESH: Got results from DHT!\n");
3289   GNUNET_PEER_resolve (path_info->peer->id, &pi);
3290   GNUNET_log (GNUNET_ERROR_TYPE_DEBUG, "MESH:   for %s\n", GNUNET_i2s (&pi));
3291
3292   p = path_build_from_dht (get_path, get_path_length, put_path,
3293                            put_path_length);
3294   peer_info_add_path (path_info->peer, p, GNUNET_NO);
3295   for (i = 0; i < path_info->peer->ntunnels; i++)
3296   {
3297     tunnel_add_peer (path_info->peer->tunnels[i], path_info->peer);
3298     peer_info_connect (path_info->peer, path_info->t);
3299   }
3300
3301   return;
3302 }
3303
3304
3305 /**
3306  * Function to process paths received for a new peer addition. The recorded
3307  * paths form the initial tunnel, which can be optimized later.
3308  * Called on each result obtained for the DHT search.
3309  *
3310  * @param cls closure
3311  * @param exp when will this value expire
3312  * @param key key of the result
3313  * @param get_path path of the get request
3314  * @param get_path_length lenght of get_path
3315  * @param put_path path of the put request
3316  * @param put_path_length length of the put_path
3317  * @param type type of the result
3318  * @param size number of bytes in data
3319  * @param data pointer to the result data
3320  */
3321 static void
3322 dht_get_type_handler (void *cls, struct GNUNET_TIME_Absolute exp,
3323                       const GNUNET_HashCode * key,
3324                       const struct GNUNET_PeerIdentity *get_path,
3325                       unsigned int get_path_length,
3326                       const struct GNUNET_PeerIdentity *put_path,
3327                       unsigned int put_path_length, enum GNUNET_BLOCK_Type type,
3328                       size_t size, const void *data)
3329 {
3330   const struct GNUNET_PeerIdentity *pi = data;
3331   struct MeshTunnel *t = cls;
3332   struct MeshPeerInfo *peer_info;
3333   struct MeshPeerPath *p;
3334
3335   if (size != sizeof (struct GNUNET_PeerIdentity))
3336   {
3337     GNUNET_break_op (0);
3338     return;
3339   }
3340   GNUNET_assert (NULL != t->client);
3341   peer_info = peer_info_get (pi);
3342   (void) GNUNET_CONTAINER_multihashmap_put (t->peers, &pi->hashPubKey,
3343                                             peer_info,
3344                                             GNUNET_CONTAINER_MULTIHASHMAPOPTION_REPLACE);
3345
3346   p = path_build_from_dht (get_path, get_path_length, put_path,
3347                            put_path_length);
3348   peer_info_add_path (peer_info, p, GNUNET_NO);
3349   tunnel_add_peer (t, peer_info);
3350   peer_info_connect (peer_info, t);
3351 }
3352
3353
3354 /******************************************************************************/
3355 /*********************       MESH LOCAL HANDLES      **************************/
3356 /******************************************************************************/
3357
3358
3359 /**
3360  * Handler for client disconnection
3361  *
3362  * @param cls closure
3363  * @param client identification of the client; NULL
3364  *        for the last call when the server is destroyed
3365  */
3366 static void
3367 handle_local_client_disconnect (void *cls, struct GNUNET_SERVER_Client *client)
3368 {
3369   struct MeshClient *c;
3370   struct MeshClient *next;
3371
3372   GNUNET_log (GNUNET_ERROR_TYPE_DEBUG, "MESH: client disconnected\n");
3373   if (client == NULL)
3374   {
3375     GNUNET_log (GNUNET_ERROR_TYPE_DEBUG, "MESH:    (SERVER DOWN)\n");
3376     return;
3377   }
3378   c = clients;
3379   while (NULL != c)
3380   {
3381     if (c->handle != client && NULL != client)
3382     {
3383       GNUNET_log (GNUNET_ERROR_TYPE_DEBUG, "MESH:    ... searching\n");
3384       c = c->next;
3385       continue;
3386     }
3387     GNUNET_log (GNUNET_ERROR_TYPE_DEBUG, "MESH: matching client found\n");
3388     GNUNET_SERVER_client_drop (c->handle);
3389     if (NULL != c->tunnels)
3390     {
3391       GNUNET_CONTAINER_multihashmap_iterate (c->tunnels,
3392                                              &tunnel_destroy_iterator, c);
3393       GNUNET_CONTAINER_multihashmap_destroy (c->tunnels);
3394     }
3395
3396     /* deregister clients applications */
3397     if (NULL != c->apps)
3398     {
3399       GNUNET_CONTAINER_multihashmap_iterate (c->apps, &deregister_app, NULL);
3400       GNUNET_CONTAINER_multihashmap_destroy (c->apps);
3401     }
3402     if (0 == GNUNET_CONTAINER_multihashmap_size (applications) &&
3403         GNUNET_SCHEDULER_NO_TASK != announce_applications_task)
3404     {
3405       GNUNET_SCHEDULER_cancel (announce_applications_task);
3406       announce_applications_task = GNUNET_SCHEDULER_NO_TASK;
3407     }
3408     if (NULL != c->types)
3409       GNUNET_CONTAINER_multihashmap_destroy (c->types);
3410     next = c->next;
3411     GNUNET_CONTAINER_DLL_remove (clients, clients_tail, c);
3412     GNUNET_log (GNUNET_ERROR_TYPE_DEBUG, "MESH:   CLIENT FREE at %p\n", c);
3413     GNUNET_free (c);
3414     c = next;
3415   }
3416
3417   GNUNET_log (GNUNET_ERROR_TYPE_DEBUG, "MESH:    done!\n");
3418   return;
3419 }
3420
3421
3422 /**
3423  * Handler for new clients
3424  *
3425  * @param cls closure
3426  * @param client identification of the client
3427  * @param message the actual message, which includes messages the client wants
3428  */
3429 static void
3430 handle_local_new_client (void *cls, struct GNUNET_SERVER_Client *client,
3431                          const struct GNUNET_MessageHeader *message)
3432 {
3433   struct GNUNET_MESH_ClientConnect *cc_msg;
3434   struct MeshClient *c;
3435   GNUNET_MESH_ApplicationType *a;
3436   unsigned int size;
3437   uint16_t ntypes;
3438   uint16_t *t;
3439   uint16_t napps;
3440   uint16_t i;
3441
3442   GNUNET_log (GNUNET_ERROR_TYPE_DEBUG, "MESH: new client connected\n");
3443   /* Check data sanity */
3444   size = ntohs (message->size) - sizeof (struct GNUNET_MESH_ClientConnect);
3445   cc_msg = (struct GNUNET_MESH_ClientConnect *) message;
3446   ntypes = ntohs (cc_msg->types);
3447   napps = ntohs (cc_msg->applications);
3448   if (size !=
3449       ntypes * sizeof (uint16_t) + napps * sizeof (GNUNET_MESH_ApplicationType))
3450   {
3451     GNUNET_break (0);
3452     GNUNET_SERVER_receive_done (client, GNUNET_SYSERR);
3453     return;
3454   }
3455
3456   /* Create new client structure */
3457   c = GNUNET_malloc (sizeof (struct MeshClient));
3458 #if MESH_DEBUG
3459   c->id = next_client_id++;
3460   GNUNET_log (GNUNET_ERROR_TYPE_DEBUG, "MESH:   CLIENT NEW %u at %p\n", c->id,
3461               c);
3462 #endif
3463   c->handle = client;
3464   GNUNET_SERVER_client_keep (client);
3465   a = (GNUNET_MESH_ApplicationType *) &cc_msg[1];
3466   if (napps > 0)
3467   {
3468     GNUNET_MESH_ApplicationType at;
3469     GNUNET_HashCode hc;
3470
3471     c->apps = GNUNET_CONTAINER_multihashmap_create (napps);
3472     for (i = 0; i < napps; i++)
3473     {
3474       at = ntohl (a[i]);
3475       GNUNET_log (GNUNET_ERROR_TYPE_DEBUG, "MESH:   app type: %u\n", at);
3476       GNUNET_CRYPTO_hash (&at, sizeof (at), &hc);
3477       /* store in clients hashmap */
3478       GNUNET_CONTAINER_multihashmap_put (c->apps, &hc, c,
3479                                          GNUNET_CONTAINER_MULTIHASHMAPOPTION_MULTIPLE);
3480       /* store in global hashmap, for announcements */
3481       GNUNET_CONTAINER_multihashmap_put (applications, &hc, c,
3482                                          GNUNET_CONTAINER_MULTIHASHMAPOPTION_MULTIPLE);
3483     }
3484     if (GNUNET_SCHEDULER_NO_TASK == announce_applications_task)
3485       announce_applications_task =
3486           GNUNET_SCHEDULER_add_now (&announce_applications, NULL);
3487
3488   }
3489   if (ntypes > 0)
3490   {
3491     uint16_t u16;
3492     GNUNET_HashCode hc;
3493
3494     t = (uint16_t *) & a[napps];
3495     c->types = GNUNET_CONTAINER_multihashmap_create (ntypes);
3496     for (i = 0; i < ntypes; i++)
3497     {
3498       u16 = ntohs (t[i]);
3499       GNUNET_CRYPTO_hash (&u16, sizeof (u16), &hc);
3500
3501       /* store in clients hashmap */
3502       GNUNET_CONTAINER_multihashmap_put (c->types, &hc, c,
3503                                          GNUNET_CONTAINER_MULTIHASHMAPOPTION_MULTIPLE);
3504       /* store in global hashmap */
3505       GNUNET_CONTAINER_multihashmap_put (types, &hc, c,
3506                                          GNUNET_CONTAINER_MULTIHASHMAPOPTION_MULTIPLE);
3507     }
3508   }
3509   GNUNET_log (GNUNET_ERROR_TYPE_DEBUG,
3510               "MESH:  client has %u+%u subscriptions\n", napps, ntypes);
3511
3512   GNUNET_CONTAINER_DLL_insert (clients, clients_tail, c);
3513   c->tunnels = GNUNET_CONTAINER_multihashmap_create (32);
3514   GNUNET_SERVER_notification_context_add (nc, client);
3515
3516   GNUNET_SERVER_receive_done (client, GNUNET_OK);
3517 #if MESH_DEBUG
3518   GNUNET_log (GNUNET_ERROR_TYPE_DEBUG, "MESH: new client processed\n");
3519 #endif
3520 }
3521
3522
3523 /**
3524  * Handler for requests of new tunnels
3525  *
3526  * @param cls closure
3527  * @param client identification of the client
3528  * @param message the actual message
3529  */
3530 static void
3531 handle_local_tunnel_create (void *cls, struct GNUNET_SERVER_Client *client,
3532                             const struct GNUNET_MessageHeader *message)
3533 {
3534   struct GNUNET_MESH_TunnelMessage *t_msg;
3535   struct MeshTunnel *t;
3536   struct MeshClient *c;
3537   GNUNET_HashCode hash;
3538
3539   GNUNET_log (GNUNET_ERROR_TYPE_DEBUG, "MESH: new tunnel requested\n");
3540
3541   /* Sanity check for client registration */
3542   if (NULL == (c = client_get (client)))
3543   {
3544     GNUNET_break (0);
3545     GNUNET_SERVER_receive_done (client, GNUNET_SYSERR);
3546     return;
3547   }
3548 #if MESH_DEBUG
3549   GNUNET_log (GNUNET_ERROR_TYPE_DEBUG, "MESH:   by client %u\n", c->id);
3550 #endif
3551
3552   /* Message sanity check */
3553   if (sizeof (struct GNUNET_MESH_TunnelMessage) != ntohs (message->size))
3554   {
3555     GNUNET_break (0);
3556     GNUNET_SERVER_receive_done (client, GNUNET_SYSERR);
3557     return;
3558   }
3559
3560   t_msg = (struct GNUNET_MESH_TunnelMessage *) message;
3561   /* Sanity check for tunnel numbering */
3562   if (0 == (ntohl (t_msg->tunnel_id) & GNUNET_MESH_LOCAL_TUNNEL_ID_CLI))
3563   {
3564     GNUNET_break (0);
3565     GNUNET_SERVER_receive_done (client, GNUNET_SYSERR);
3566     return;
3567   }
3568   /* Sanity check for duplicate tunnel IDs */
3569   if (NULL != tunnel_get_by_local_id (c, ntohl (t_msg->tunnel_id)))
3570   {
3571     GNUNET_break (0);
3572     GNUNET_SERVER_receive_done (client, GNUNET_SYSERR);
3573     return;
3574   }
3575
3576   t = GNUNET_malloc (sizeof (struct MeshTunnel));
3577   while (NULL != tunnel_get_by_pi (myid, next_tid))
3578     next_tid = (next_tid + 1) & ~GNUNET_MESH_LOCAL_TUNNEL_ID_CLI;
3579   t->id.tid = next_tid++;
3580   next_tid = next_tid & ~GNUNET_MESH_LOCAL_TUNNEL_ID_CLI;
3581   t->id.oid = myid;
3582   t->local_tid = ntohl (t_msg->tunnel_id);
3583 #if MESH_DEBUG
3584   GNUNET_log (GNUNET_ERROR_TYPE_DEBUG, "MESH: CREATED TUNNEL %s [%x] (%x)\n",
3585               GNUNET_i2s (&my_full_id), t->id.tid, t->local_tid);
3586 #endif
3587   t->client = c;
3588   t->peers = GNUNET_CONTAINER_multihashmap_create (32);
3589
3590   GNUNET_CRYPTO_hash (&t->local_tid, sizeof (MESH_TunnelNumber), &hash);
3591   if (GNUNET_OK !=
3592       GNUNET_CONTAINER_multihashmap_put (c->tunnels, &hash, t,
3593                                          GNUNET_CONTAINER_MULTIHASHMAPOPTION_UNIQUE_ONLY))
3594   {
3595     GNUNET_break (0);
3596     GNUNET_SERVER_receive_done (client, GNUNET_SYSERR);
3597     return;
3598   }
3599
3600   GNUNET_CRYPTO_hash (&t->id, sizeof (struct MESH_TunnelID), &hash);
3601   if (GNUNET_OK !=
3602       GNUNET_CONTAINER_multihashmap_put (tunnels, &hash, t,
3603                                          GNUNET_CONTAINER_MULTIHASHMAPOPTION_UNIQUE_ONLY))
3604   {
3605     GNUNET_break (0);
3606     GNUNET_SERVER_receive_done (client, GNUNET_SYSERR);
3607     return;
3608   }
3609   t->tree = tree_new (myid);
3610
3611   GNUNET_SERVER_receive_done (client, GNUNET_OK);
3612   return;
3613 }
3614
3615
3616 /**
3617  * Handler for requests of deleting tunnels
3618  *
3619  * @param cls closure
3620  * @param client identification of the client
3621  * @param message the actual message
3622  */
3623 static void
3624 handle_local_tunnel_destroy (void *cls, struct GNUNET_SERVER_Client *client,
3625                              const struct GNUNET_MessageHeader *message)
3626 {
3627   struct GNUNET_MESH_TunnelMessage *tunnel_msg;
3628   struct MeshClient *c;
3629   struct MeshTunnel *t;
3630   MESH_TunnelNumber tid;
3631   GNUNET_HashCode hash;
3632
3633   GNUNET_log (GNUNET_ERROR_TYPE_DEBUG,
3634               "MESH: Got a DESTROY TUNNEL from client!\n");
3635
3636   /* Sanity check for client registration */
3637   if (NULL == (c = client_get (client)))
3638   {
3639     GNUNET_break (0);
3640     GNUNET_SERVER_receive_done (client, GNUNET_SYSERR);
3641     return;
3642   }
3643   /* Message sanity check */
3644   if (sizeof (struct GNUNET_MESH_TunnelMessage) != ntohs (message->size))
3645   {
3646     GNUNET_break (0);
3647     GNUNET_SERVER_receive_done (client, GNUNET_SYSERR);
3648     return;
3649   }
3650 #if MESH_DEBUG
3651   GNUNET_log (GNUNET_ERROR_TYPE_DEBUG, "MESH:   by client %u\n", c->id);
3652 #endif
3653   tunnel_msg = (struct GNUNET_MESH_TunnelMessage *) message;
3654
3655   /* Retrieve tunnel */
3656   tid = ntohl (tunnel_msg->tunnel_id);
3657
3658   /* Remove from local id hashmap */
3659   GNUNET_CRYPTO_hash (&tid, sizeof (MESH_TunnelNumber), &hash);
3660   t = GNUNET_CONTAINER_multihashmap_get (c->tunnels, &hash);
3661   GNUNET_assert (GNUNET_YES ==
3662                  GNUNET_CONTAINER_multihashmap_remove (c->tunnels, &hash, t));
3663
3664   t->client = NULL;
3665   tunnel_send_destroy (t);
3666   tunnel_destroy (t);
3667   GNUNET_SERVER_receive_done (client, GNUNET_OK);
3668   return;
3669 }
3670
3671
3672 /**
3673  * Handler for connection requests to new peers
3674  *
3675  * @param cls closure
3676  * @param client identification of the client
3677  * @param message the actual message (PeerControl)
3678  */
3679 static void
3680 handle_local_connect_add (void *cls, struct GNUNET_SERVER_Client *client,
3681                           const struct GNUNET_MessageHeader *message)
3682 {
3683   struct GNUNET_MESH_PeerControl *peer_msg;
3684   struct MeshPeerInfo *peer_info;
3685   struct MeshClient *c;
3686   struct MeshTunnel *t;
3687   MESH_TunnelNumber tid;
3688
3689   GNUNET_log (GNUNET_ERROR_TYPE_DEBUG, "MESH: Got connection request\n");
3690   /* Sanity check for client registration */
3691   if (NULL == (c = client_get (client)))
3692   {
3693     GNUNET_break (0);
3694     GNUNET_SERVER_receive_done (client, GNUNET_SYSERR);
3695     return;
3696   }
3697
3698   peer_msg = (struct GNUNET_MESH_PeerControl *) message;
3699   /* Sanity check for message size */
3700   if (sizeof (struct GNUNET_MESH_PeerControl) != ntohs (peer_msg->header.size))
3701   {
3702     GNUNET_break (0);
3703     GNUNET_SERVER_receive_done (client, GNUNET_SYSERR);
3704     return;
3705   }
3706
3707   /* Tunnel exists? */
3708   tid = ntohl (peer_msg->tunnel_id);
3709   t = tunnel_get_by_local_id (c, tid);
3710   if (NULL == t)
3711   {
3712     GNUNET_break (0);
3713     GNUNET_SERVER_receive_done (client, GNUNET_SYSERR);
3714     return;
3715   }
3716
3717   /* Does client own tunnel? */
3718   if (t->client->handle != client)
3719   {
3720     GNUNET_break (0);
3721     GNUNET_SERVER_receive_done (client, GNUNET_SYSERR);
3722     return;
3723   }
3724   GNUNET_log (GNUNET_ERROR_TYPE_DEBUG, "MESH:      for %s\n",
3725               GNUNET_i2s (&peer_msg->peer));
3726   peer_info = peer_info_get (&peer_msg->peer);
3727
3728   tunnel_add_peer (t, peer_info);
3729   peer_info_connect (peer_info, t);
3730
3731   GNUNET_SERVER_receive_done (client, GNUNET_OK);
3732   return;
3733 }
3734
3735
3736 /**
3737  * Handler for disconnection requests of peers in a tunnel
3738  *
3739  * @param cls closure
3740  * @param client identification of the client
3741  * @param message the actual message (PeerControl)
3742  */
3743 static void
3744 handle_local_connect_del (void *cls, struct GNUNET_SERVER_Client *client,
3745                           const struct GNUNET_MessageHeader *message)
3746 {
3747   struct GNUNET_MESH_PeerControl *peer_msg;
3748   struct MeshPeerInfo *peer_info;
3749   struct MeshClient *c;
3750   struct MeshTunnel *t;
3751   MESH_TunnelNumber tid;
3752
3753   GNUNET_log (GNUNET_ERROR_TYPE_DEBUG, "MESH: Got a PEER DEL request\n");
3754   /* Sanity check for client registration */
3755   if (NULL == (c = client_get (client)))
3756   {
3757     GNUNET_break (0);
3758     GNUNET_SERVER_receive_done (client, GNUNET_SYSERR);
3759     return;
3760   }
3761   peer_msg = (struct GNUNET_MESH_PeerControl *) message;
3762   /* Sanity check for message size */
3763   if (sizeof (struct GNUNET_MESH_PeerControl) != ntohs (peer_msg->header.size))
3764   {
3765     GNUNET_break (0);
3766     GNUNET_SERVER_receive_done (client, GNUNET_SYSERR);
3767     return;
3768   }
3769
3770   /* Tunnel exists? */
3771   tid = ntohl (peer_msg->tunnel_id);
3772   t = tunnel_get_by_local_id (c, tid);
3773   if (NULL == t)
3774   {
3775     GNUNET_break (0);
3776     GNUNET_SERVER_receive_done (client, GNUNET_SYSERR);
3777     return;
3778   }
3779   GNUNET_log (GNUNET_ERROR_TYPE_DEBUG, "MESH:   on tunnel %X\n", t->id.tid);
3780
3781   /* Does client own tunnel? */
3782   if (t->client->handle != client)
3783   {
3784     GNUNET_break (0);
3785     GNUNET_SERVER_receive_done (client, GNUNET_SYSERR);
3786     return;
3787   }
3788
3789   GNUNET_log (GNUNET_ERROR_TYPE_DEBUG, "MESH:   for peer %s\n",
3790               GNUNET_i2s (&peer_msg->peer));
3791   /* Is the peer in the tunnel? */
3792   peer_info =
3793       GNUNET_CONTAINER_multihashmap_get (t->peers, &peer_msg->peer.hashPubKey);
3794   if (NULL == peer_info)
3795   {
3796     GNUNET_break (0);
3797     GNUNET_SERVER_receive_done (client, GNUNET_SYSERR);
3798     return;
3799   }
3800
3801   /* Ok, delete peer from tunnel */
3802   GNUNET_CONTAINER_multihashmap_remove_all (t->peers,
3803                                             &peer_msg->peer.hashPubKey);
3804
3805   send_destroy_path (t, peer_info->id);
3806   tunnel_delete_peer (t, peer_info->id);
3807   GNUNET_SERVER_receive_done (client, GNUNET_OK);
3808   return;
3809 }
3810
3811
3812 /**
3813  * Handler for connection requests to new peers by type
3814  *
3815  * @param cls closure
3816  * @param client identification of the client
3817  * @param message the actual message (ConnectPeerByType)
3818  */
3819 static void
3820 handle_local_connect_by_type (void *cls, struct GNUNET_SERVER_Client *client,
3821                               const struct GNUNET_MessageHeader *message)
3822 {
3823   struct GNUNET_MESH_ConnectPeerByType *connect_msg;
3824   struct MeshClient *c;
3825   struct MeshTunnel *t;
3826   GNUNET_HashCode hash;
3827   MESH_TunnelNumber tid;
3828
3829   GNUNET_log (GNUNET_ERROR_TYPE_DEBUG, "MESH: got connect by type request\n");
3830   /* Sanity check for client registration */
3831   if (NULL == (c = client_get (client)))
3832   {
3833     GNUNET_break (0);
3834     GNUNET_SERVER_receive_done (client, GNUNET_SYSERR);
3835     return;
3836   }
3837
3838   connect_msg = (struct GNUNET_MESH_ConnectPeerByType *) message;
3839   /* Sanity check for message size */
3840   if (sizeof (struct GNUNET_MESH_ConnectPeerByType) !=
3841       ntohs (connect_msg->header.size))
3842   {
3843     GNUNET_break (0);
3844     GNUNET_SERVER_receive_done (client, GNUNET_SYSERR);
3845     return;
3846   }
3847
3848   /* Tunnel exists? */
3849   tid = ntohl (connect_msg->tunnel_id);
3850   t = tunnel_get_by_local_id (c, tid);
3851   if (NULL == t)
3852   {
3853     GNUNET_break (0);
3854     GNUNET_SERVER_receive_done (client, GNUNET_SYSERR);
3855     return;
3856   }
3857
3858   /* Does client own tunnel? */
3859   if (t->client->handle != client)
3860   {
3861     GNUNET_break (0);
3862     GNUNET_SERVER_receive_done (client, GNUNET_SYSERR);
3863     return;
3864   }
3865
3866   /* Do WE have the service? */
3867   t->type = ntohl (connect_msg->type);
3868   GNUNET_log (GNUNET_ERROR_TYPE_DEBUG, "MESH:  type requested: %u\n", t->type);
3869   GNUNET_CRYPTO_hash (&t->type, sizeof (GNUNET_MESH_ApplicationType), &hash);
3870   if (GNUNET_CONTAINER_multihashmap_contains (applications, &hash) ==
3871       GNUNET_YES)
3872   {
3873     /* Yes! Fast forward, add ourselves to the tunnel and send the
3874      * good news to the client
3875      */
3876     GNUNET_log (GNUNET_ERROR_TYPE_DEBUG, "MESH:  available locally\n");
3877     GNUNET_CONTAINER_multihashmap_put (t->peers, &my_full_id.hashPubKey,
3878                                        peer_info_get (&my_full_id),
3879                                        GNUNET_CONTAINER_MULTIHASHMAPOPTION_UNIQUE_ONLY);
3880
3881     GNUNET_log (GNUNET_ERROR_TYPE_DEBUG, "MESH:  notifying client\n");
3882     send_client_peer_connected (t, myid);
3883     GNUNET_log (GNUNET_ERROR_TYPE_DEBUG, "MESH:  Done\n");
3884     GNUNET_SERVER_receive_done (client, GNUNET_OK);
3885     return;
3886   }
3887   /* Ok, lets find a peer offering the service */
3888   if (NULL != t->dht_get_type)
3889   {
3890     GNUNET_DHT_get_stop (t->dht_get_type);
3891   }
3892   GNUNET_log (GNUNET_ERROR_TYPE_DEBUG, "MESH:  looking in DHT for %s\n",
3893               GNUNET_h2s (&hash));
3894   t->dht_get_type =
3895       GNUNET_DHT_get_start (dht_handle, GNUNET_TIME_UNIT_FOREVER_REL,
3896                             GNUNET_BLOCK_TYPE_TEST, &hash, 10U,
3897                             GNUNET_DHT_RO_RECORD_ROUTE |
3898                             GNUNET_DHT_RO_DEMULTIPLEX_EVERYWHERE, NULL, 0,
3899                             &dht_get_type_handler, t);
3900
3901   GNUNET_SERVER_receive_done (client, GNUNET_OK);
3902   return;
3903 }
3904
3905
3906 /**
3907  * Handler for client traffic directed to one peer
3908  *
3909  * @param cls closure
3910  * @param client identification of the client
3911  * @param message the actual message
3912  */
3913 static void
3914 handle_local_unicast (void *cls, struct GNUNET_SERVER_Client *client,
3915                       const struct GNUNET_MessageHeader *message)
3916 {
3917   struct MeshClient *c;
3918   struct MeshTunnel *t;
3919   struct MeshPeerInfo *pi;
3920   struct GNUNET_MESH_Unicast *data_msg;
3921   MESH_TunnelNumber tid;
3922   size_t size;
3923
3924   GNUNET_log (GNUNET_ERROR_TYPE_DEBUG,
3925               "MESH: Got a unicast request from a client!\n");
3926
3927   /* Sanity check for client registration */
3928   if (NULL == (c = client_get (client)))
3929   {
3930     GNUNET_break (0);
3931     GNUNET_SERVER_receive_done (client, GNUNET_SYSERR);
3932     return;
3933   }
3934   data_msg = (struct GNUNET_MESH_Unicast *) message;
3935   /* Sanity check for message size */
3936   size = ntohs (message->size);
3937   if (sizeof (struct GNUNET_MESH_Unicast) +
3938       sizeof (struct GNUNET_MessageHeader) > size)
3939   {
3940     GNUNET_break (0);
3941     GNUNET_SERVER_receive_done (client, GNUNET_SYSERR);
3942     return;
3943   }
3944
3945   /* Tunnel exists? */
3946   tid = ntohl (data_msg->tid);
3947   t = tunnel_get_by_local_id (c, tid);
3948   if (NULL == t)
3949   {
3950     GNUNET_break (0);
3951     GNUNET_SERVER_receive_done (client, GNUNET_SYSERR);
3952     return;
3953   }
3954
3955   /*  Is it a local tunnel? Then, does client own the tunnel? */
3956   if (NULL != t->client && NULL != t->client->handle &&
3957       t->client->handle != client)
3958   {
3959     GNUNET_break (0);
3960     GNUNET_SERVER_receive_done (client, GNUNET_SYSERR);
3961     return;
3962   }
3963
3964   pi = GNUNET_CONTAINER_multihashmap_get (t->peers,
3965                                           &data_msg->destination.hashPubKey);
3966   /* Is the selected peer in the tunnel? */
3967   if (NULL == pi)
3968   {
3969     GNUNET_break (0);
3970     GNUNET_SERVER_receive_done (client, GNUNET_SYSERR);
3971     return;
3972   }
3973
3974   /* Ok, everything is correct, send the message
3975    * (pretend we got it from a mesh peer)
3976    */
3977   {
3978     char buf[ntohs (message->size)];
3979     struct GNUNET_MESH_Unicast *copy;
3980
3981     /* Work around const limitation */
3982     copy = (struct GNUNET_MESH_Unicast *) buf;
3983     memcpy (buf, data_msg, size);
3984     copy->oid = my_full_id;
3985     copy->tid = htonl (t->id.tid);
3986     GNUNET_log (GNUNET_ERROR_TYPE_DEBUG,
3987                 "MESH:   calling generic handler...\n");
3988     handle_mesh_data_unicast (NULL, &my_full_id, &copy->header, NULL, 0);
3989   }
3990   GNUNET_SERVER_receive_done (client, GNUNET_OK);
3991   return;
3992 }
3993
3994
3995 /**
3996  * Handler for client traffic directed to the origin
3997  *
3998  * @param cls closure
3999  * @param client identification of the client
4000  * @param message the actual message
4001  */
4002 static void
4003 handle_local_to_origin (void *cls, struct GNUNET_SERVER_Client *client,
4004                         const struct GNUNET_MessageHeader *message)
4005 {
4006   struct GNUNET_MESH_ToOrigin *data_msg;
4007   struct GNUNET_PeerIdentity id;
4008   struct MeshClient *c;
4009   struct MeshTunnel *t;
4010   MESH_TunnelNumber tid;
4011   size_t size;
4012
4013   GNUNET_log (GNUNET_ERROR_TYPE_DEBUG,
4014               "MESH: Got a ToOrigin request from a client!\n");
4015
4016   /* Sanity check for client registration */
4017   if (NULL == (c = client_get (client)))
4018   {
4019     GNUNET_break (0);
4020     GNUNET_SERVER_receive_done (client, GNUNET_SYSERR);
4021     return;
4022   }
4023   data_msg = (struct GNUNET_MESH_ToOrigin *) message;
4024   /* Sanity check for message size */
4025   size = ntohs (message->size);
4026   if (sizeof (struct GNUNET_MESH_ToOrigin) +
4027       sizeof (struct GNUNET_MessageHeader) > size)
4028   {
4029     GNUNET_break (0);
4030     GNUNET_SERVER_receive_done (client, GNUNET_SYSERR);
4031     return;
4032   }
4033
4034   /* Tunnel exists? */
4035   tid = ntohl (data_msg->tid);
4036   if (tid < GNUNET_MESH_LOCAL_TUNNEL_ID_SERV)
4037   {
4038     GNUNET_break (0);
4039     GNUNET_SERVER_receive_done (client, GNUNET_SYSERR);
4040     return;
4041   }
4042   t = tunnel_get_by_local_id (c, tid);
4043   if (NULL == t)
4044   {
4045     GNUNET_break (0);
4046     GNUNET_SERVER_receive_done (client, GNUNET_SYSERR);
4047     return;
4048   }
4049
4050   /*  It shouldn't be a local tunnel.  */
4051   if (NULL != t->client)
4052   {
4053     GNUNET_break (0);
4054     GNUNET_SERVER_receive_done (client, GNUNET_SYSERR);
4055     return;
4056   }
4057   GNUNET_PEER_resolve (t->id.oid, &id);
4058
4059   /* Ok, everything is correct, send the message
4060    * (pretend we got it from a mesh peer)
4061    */
4062   {
4063     char buf[ntohs (message->size)];
4064     struct GNUNET_MESH_ToOrigin *copy;
4065
4066     /* Work around const limitation */
4067     copy = (struct GNUNET_MESH_ToOrigin *) buf;
4068     memcpy (buf, data_msg, size);
4069     copy->oid = id;
4070     copy->tid = htonl (t->id.tid);
4071     copy->sender = my_full_id;
4072     GNUNET_log (GNUNET_ERROR_TYPE_DEBUG,
4073                 "MESH:   calling generic handler...\n");
4074     handle_mesh_data_to_orig (NULL, &my_full_id, &copy->header, NULL, 0);
4075   }
4076   GNUNET_SERVER_receive_done (client, GNUNET_OK);
4077   return;
4078 }
4079
4080
4081 /**
4082  * Handler for client traffic directed to all peers in a tunnel
4083  *
4084  * @param cls closure
4085  * @param client identification of the client
4086  * @param message the actual message
4087  */
4088 static void
4089 handle_local_multicast (void *cls, struct GNUNET_SERVER_Client *client,
4090                         const struct GNUNET_MessageHeader *message)
4091 {
4092   struct MeshClient *c;
4093   struct MeshTunnel *t;
4094   struct GNUNET_MESH_Multicast *data_msg;
4095   MESH_TunnelNumber tid;
4096
4097   GNUNET_log (GNUNET_ERROR_TYPE_DEBUG,
4098               "MESH: Got a multicast request from a client!\n");
4099
4100   /* Sanity check for client registration */
4101   if (NULL == (c = client_get (client)))
4102   {
4103     GNUNET_break (0);
4104     GNUNET_SERVER_receive_done (client, GNUNET_SYSERR);
4105     return;
4106   }
4107   data_msg = (struct GNUNET_MESH_Multicast *) message;
4108   /* Sanity check for message size */
4109   if (sizeof (struct GNUNET_MESH_Multicast) +
4110       sizeof (struct GNUNET_MessageHeader) > ntohs (data_msg->header.size))
4111   {
4112     GNUNET_break (0);
4113     GNUNET_SERVER_receive_done (client, GNUNET_SYSERR);
4114     return;
4115   }
4116
4117   /* Tunnel exists? */
4118   tid = ntohl (data_msg->tid);
4119   t = tunnel_get_by_local_id (c, tid);
4120   if (NULL == t)
4121   {
4122     GNUNET_break (0);
4123     GNUNET_SERVER_receive_done (client, GNUNET_SYSERR);
4124     return;
4125   }
4126
4127   /* Does client own tunnel? */
4128   if (t->client->handle != client)
4129   {
4130     GNUNET_break (0);
4131     GNUNET_SERVER_receive_done (client, GNUNET_SYSERR);
4132     return;
4133   }
4134
4135   {
4136     char buf[ntohs (message->size)];
4137     struct GNUNET_MESH_Multicast *copy;
4138
4139     copy = (struct GNUNET_MESH_Multicast *) buf;
4140     memcpy (buf, message, ntohs (message->size));
4141     copy->oid = my_full_id;
4142     copy->tid = htonl (t->id.tid);
4143     copy->ttl = htonl (DEFAULT_TTL);
4144     copy->mid = htonl (t->mid + 1);
4145     GNUNET_log (GNUNET_ERROR_TYPE_DEBUG,
4146                 "MESH:   calling generic handler...\n");
4147     handle_mesh_data_multicast (client, &my_full_id, &copy->header, NULL, 0);
4148   }
4149
4150   /* receive done gets called when last copy is sent to a neighbor */
4151   return;
4152 }
4153
4154 /**
4155  * Functions to handle messages from clients
4156  */
4157 static struct GNUNET_SERVER_MessageHandler client_handlers[] = {
4158   {&handle_local_new_client, NULL,
4159    GNUNET_MESSAGE_TYPE_MESH_LOCAL_CONNECT, 0},
4160   {&handle_local_tunnel_create, NULL,
4161    GNUNET_MESSAGE_TYPE_MESH_LOCAL_TUNNEL_CREATE,
4162    sizeof (struct GNUNET_MESH_TunnelMessage)},
4163   {&handle_local_tunnel_destroy, NULL,
4164    GNUNET_MESSAGE_TYPE_MESH_LOCAL_TUNNEL_DESTROY,
4165    sizeof (struct GNUNET_MESH_TunnelMessage)},
4166   {&handle_local_connect_add, NULL,
4167    GNUNET_MESSAGE_TYPE_MESH_LOCAL_PEER_ADD,
4168    sizeof (struct GNUNET_MESH_PeerControl)},
4169   {&handle_local_connect_del, NULL,
4170    GNUNET_MESSAGE_TYPE_MESH_LOCAL_PEER_DEL,
4171    sizeof (struct GNUNET_MESH_PeerControl)},
4172   {&handle_local_connect_by_type, NULL,
4173    GNUNET_MESSAGE_TYPE_MESH_LOCAL_PEER_ADD_BY_TYPE,
4174    sizeof (struct GNUNET_MESH_ConnectPeerByType)},
4175   {&handle_local_unicast, NULL,
4176    GNUNET_MESSAGE_TYPE_MESH_UNICAST, 0},
4177   {&handle_local_to_origin, NULL,
4178    GNUNET_MESSAGE_TYPE_MESH_TO_ORIGIN, 0},
4179   {&handle_local_multicast, NULL,
4180    GNUNET_MESSAGE_TYPE_MESH_MULTICAST, 0},
4181   {NULL, NULL, 0, 0}
4182 };
4183
4184
4185 /**
4186  * To be called on core init/fail.
4187  *
4188  * @param cls service closure
4189  * @param server handle to the server for this service
4190  * @param identity the public identity of this peer
4191  */
4192 static void
4193 core_init (void *cls, struct GNUNET_CORE_Handle *server,
4194            const struct GNUNET_PeerIdentity *identity)
4195 {
4196   GNUNET_log (GNUNET_ERROR_TYPE_DEBUG, "MESH: Core init\n");
4197   core_handle = server;
4198   if (0 != memcmp (identity, &my_full_id, sizeof (my_full_id)) ||
4199       NULL == server)
4200   {
4201     GNUNET_log (GNUNET_ERROR_TYPE_ERROR, _("MESH: Wrong CORE service\n"));
4202     GNUNET_SCHEDULER_shutdown ();
4203   }
4204   return;
4205 }
4206
4207 /**
4208  * Method called whenever a given peer connects.
4209  *
4210  * @param cls closure
4211  * @param peer peer identity this notification is about
4212  * @param atsi performance data for the connection
4213  * @param atsi_count number of records in 'atsi'
4214  */
4215 static void
4216 core_connect (void *cls, const struct GNUNET_PeerIdentity *peer,
4217               const struct GNUNET_ATS_Information *atsi,
4218               unsigned int atsi_count)
4219 {
4220   struct MeshPeerInfo *peer_info;
4221   struct MeshPeerPath *path;
4222
4223 #if MESH_DEBUG_CONNECTION
4224   GNUNET_log (GNUNET_ERROR_TYPE_DEBUG, "MESH: Peer connected\n");
4225   GNUNET_log (GNUNET_ERROR_TYPE_DEBUG, "MESH:      %s\n",
4226               GNUNET_i2s (&my_full_id));
4227 #endif
4228   peer_info = peer_info_get (peer);
4229   if (myid == peer_info->id)
4230   {
4231 #if MESH_DEBUG_CONNECTION
4232     GNUNET_log (GNUNET_ERROR_TYPE_DEBUG, "MESH:      (self)\n");
4233 #endif
4234     return;
4235   }
4236 #if MESH_DEBUG_CONNECTION
4237   else
4238   {
4239     GNUNET_log (GNUNET_ERROR_TYPE_DEBUG, "MESH:      %s\n", GNUNET_i2s (peer));
4240   }
4241 #endif
4242   path = path_new (2);
4243   path->peers[0] = myid;
4244   path->peers[1] = peer_info->id;
4245   GNUNET_PEER_change_rc (myid, 1);
4246   GNUNET_PEER_change_rc (peer_info->id, 1);
4247   peer_info_add_path (peer_info, path, GNUNET_YES);
4248   return;
4249 }
4250
4251 /**
4252  * Method called whenever a peer disconnects.
4253  *
4254  * @param cls closure
4255  * @param peer peer identity this notification is about
4256  */
4257 static void
4258 core_disconnect (void *cls, const struct GNUNET_PeerIdentity *peer)
4259 {
4260   struct MeshPeerInfo *pi;
4261   unsigned int i;
4262
4263 #if MESH_DEBUG_CONNECTION
4264   GNUNET_log (GNUNET_ERROR_TYPE_DEBUG, "MESH: Peer disconnected\n");
4265 #endif
4266   pi = GNUNET_CONTAINER_multihashmap_get (peers, &peer->hashPubKey);
4267   if (NULL == pi)
4268   {
4269     GNUNET_break (0);
4270     return;
4271   }
4272   for (i = 0; i < CORE_QUEUE_SIZE; i++)
4273   {
4274     /* TODO: notify that the transmission failed */
4275     peer_info_cancel_transmission (pi, i);
4276   }
4277   peer_info_remove_path (pi, pi->id, myid);
4278 #if MESH_DEBUG_CONNECTION
4279   if (myid == pi->id)
4280   {
4281     GNUNET_log (GNUNET_ERROR_TYPE_DEBUG, "MESH:      (self)\n");
4282   }
4283 #endif
4284   return;
4285 }
4286
4287
4288 /******************************************************************************/
4289 /************************      MAIN FUNCTIONS      ****************************/
4290 /******************************************************************************/
4291
4292 /**
4293  * Iterator over tunnel hash map entries to destroy the tunnel during shutdown.
4294  *
4295  * @param cls closure
4296  * @param key current key code
4297  * @param value value in the hash map
4298  * @return GNUNET_YES if we should continue to iterate,
4299  *         GNUNET_NO if not.
4300  */
4301 static int
4302 shutdown_tunnel (void *cls, const GNUNET_HashCode * key, void *value)
4303 {
4304   struct MeshTunnel *t = value;
4305
4306   tunnel_destroy (t);
4307   return GNUNET_YES;
4308 }
4309
4310 /**
4311  * Iterator over peer hash map entries to destroy the tunnel during shutdown.
4312  *
4313  * @param cls closure
4314  * @param key current key code
4315  * @param value value in the hash map
4316  * @return GNUNET_YES if we should continue to iterate,
4317  *         GNUNET_NO if not.
4318  */
4319 static int
4320 shutdown_peer (void *cls, const GNUNET_HashCode * key, void *value)
4321 {
4322   struct MeshPeerInfo *p = value;
4323
4324   peer_info_destroy (p);
4325   return GNUNET_YES;
4326 }
4327
4328 /**
4329  * Task run during shutdown.
4330  *
4331  * @param cls unused
4332  * @param tc unused
4333  */
4334 static void
4335 shutdown_task (void *cls, const struct GNUNET_SCHEDULER_TaskContext *tc)
4336 {
4337   GNUNET_log (GNUNET_ERROR_TYPE_DEBUG, "MESH: shutting down\n");
4338   /* TODO: destroy tunnels? */
4339   if (core_handle != NULL)
4340   {
4341     GNUNET_CORE_disconnect (core_handle);
4342     core_handle = NULL;
4343   }
4344   GNUNET_CONTAINER_multihashmap_iterate (tunnels, &shutdown_tunnel, NULL);
4345   GNUNET_CONTAINER_multihashmap_iterate (peers, &shutdown_peer, NULL);
4346   if (dht_handle != NULL)
4347   {
4348     GNUNET_DHT_disconnect (dht_handle);
4349     dht_handle = NULL;
4350   }
4351   if (nc != NULL)
4352   {
4353     GNUNET_SERVER_notification_context_destroy (nc);
4354     nc = NULL;
4355   }
4356   if (GNUNET_SCHEDULER_NO_TASK != announce_id_task)
4357   {
4358     GNUNET_SCHEDULER_cancel (announce_id_task);
4359     announce_id_task = GNUNET_SCHEDULER_NO_TASK;
4360   }
4361   GNUNET_log (GNUNET_ERROR_TYPE_DEBUG, "MESH: shut down\n");
4362 }
4363
4364 /**
4365  * Process mesh requests.
4366  *
4367  * @param cls closure
4368  * @param server the initialized server
4369  * @param c configuration to use
4370  */
4371 static void
4372 run (void *cls, struct GNUNET_SERVER_Handle *server,
4373      const struct GNUNET_CONFIGURATION_Handle *c)
4374 {
4375   struct MeshPeerInfo *peer;
4376   struct MeshPeerPath *p;
4377   char *keyfile;
4378
4379   GNUNET_log (GNUNET_ERROR_TYPE_DEBUG, "MESH: starting to run\n");
4380   server_handle = server;
4381   core_handle = GNUNET_CORE_connect (c, /* Main configuration */
4382                                      CORE_QUEUE_SIZE,   /* queue size */
4383                                      NULL,      /* Closure passed to MESH functions */
4384                                      &core_init,        /* Call core_init once connected */
4385                                      &core_connect,     /* Handle connects */
4386                                      &core_disconnect,  /* remove peers on disconnects */
4387                                      NULL,      /* Don't notify about all incoming messages */
4388                                      GNUNET_NO, /* For header only in notification */
4389                                      NULL,      /* Don't notify about all outbound messages */
4390                                      GNUNET_NO, /* For header-only out notification */
4391                                      core_handlers);    /* Register these handlers */
4392
4393   if (core_handle == NULL)
4394   {
4395     GNUNET_break (0);
4396     GNUNET_SCHEDULER_shutdown ();
4397     return;
4398   }
4399
4400   if (GNUNET_OK !=
4401       GNUNET_CONFIGURATION_get_value_filename (c, "GNUNETD", "HOSTKEY",
4402                                                &keyfile))
4403   {
4404     GNUNET_log (GNUNET_ERROR_TYPE_ERROR,
4405                 _
4406                 ("Mesh service is lacking key configuration settings.  Exiting.\n"));
4407     GNUNET_SCHEDULER_shutdown ();
4408     return;
4409   }
4410   my_private_key = GNUNET_CRYPTO_rsa_key_create_from_file (keyfile);
4411   GNUNET_free (keyfile);
4412   if (my_private_key == NULL)
4413   {
4414     GNUNET_log (GNUNET_ERROR_TYPE_ERROR,
4415                 _("Mesh service could not access hostkey.  Exiting.\n"));
4416     GNUNET_SCHEDULER_shutdown ();
4417     return;
4418   }
4419   GNUNET_CRYPTO_rsa_key_get_public (my_private_key, &my_public_key);
4420   GNUNET_CRYPTO_hash (&my_public_key, sizeof (my_public_key),
4421                       &my_full_id.hashPubKey);
4422   myid = GNUNET_PEER_intern (&my_full_id);
4423
4424 // //   transport_handle = GNUNET_TRANSPORT_connect(c,
4425 // //                                               &my_full_id,
4426 // //                                               NULL,
4427 // //                                               NULL,
4428 // //                                               NULL,
4429 // //                                               NULL);
4430
4431   dht_handle = GNUNET_DHT_connect (c, 64);
4432   if (dht_handle == NULL)
4433   {
4434     GNUNET_break (0);
4435   }
4436
4437   next_tid = 0;
4438   next_local_tid = GNUNET_MESH_LOCAL_TUNNEL_ID_SERV;
4439
4440   tunnels = GNUNET_CONTAINER_multihashmap_create (32);
4441   incoming_tunnels = GNUNET_CONTAINER_multihashmap_create (32);
4442   peers = GNUNET_CONTAINER_multihashmap_create (32);
4443   applications = GNUNET_CONTAINER_multihashmap_create (32);
4444   types = GNUNET_CONTAINER_multihashmap_create (32);
4445
4446   GNUNET_SERVER_add_handlers (server_handle, client_handlers);
4447   nc = GNUNET_SERVER_notification_context_create (server_handle,
4448                                                   LOCAL_QUEUE_SIZE);
4449   GNUNET_SERVER_disconnect_notify (server_handle,
4450                                    &handle_local_client_disconnect, NULL);
4451
4452
4453   clients = NULL;
4454   clients_tail = NULL;
4455 #if MESH_DEBUG
4456   next_client_id = 0;
4457 #endif
4458
4459   announce_applications_task = GNUNET_SCHEDULER_NO_TASK;
4460   announce_id_task = GNUNET_SCHEDULER_add_now (&announce_id, cls);
4461
4462   /* Create a peer_info for the local peer */
4463   peer = peer_info_get (&my_full_id);
4464   p = path_new (1);
4465   p->peers[0] = myid;
4466   GNUNET_PEER_change_rc (myid, 1);
4467   peer_info_add_path (peer, p, GNUNET_YES);
4468
4469   /* Scheduled the task to clean up when shutdown is called */
4470   GNUNET_SCHEDULER_add_delayed (GNUNET_TIME_UNIT_FOREVER_REL, &shutdown_task,
4471                                 NULL);
4472
4473   GNUNET_log (GNUNET_ERROR_TYPE_DEBUG, "MESH: end of run()\n");
4474 }
4475
4476 /**
4477  * The main function for the mesh service.
4478  *
4479  * @param argc number of arguments from the command line
4480  * @param argv command line arguments
4481  * @return 0 ok, 1 on error
4482  */
4483 int
4484 main (int argc, char *const *argv)
4485 {
4486   int ret;
4487
4488   GNUNET_log (GNUNET_ERROR_TYPE_DEBUG, "MESH: main()\n");
4489   ret =
4490       (GNUNET_OK ==
4491        GNUNET_SERVICE_run (argc, argv, "mesh", GNUNET_SERVICE_OPTION_NONE, &run,
4492                            NULL)) ? 0 : 1;
4493   GNUNET_log (GNUNET_ERROR_TYPE_DEBUG, "MESH: main() END\n");
4494
4495   return ret;
4496 }