- cancel queue on disconnect
[oweals/gnunet.git] / src / mesh / gnunet-service-mesh_new.c
1 /*
2      This file is part of GNUnet.
3      (C) 2001 - 2011 Christian Grothoff (and other contributing authors)
4
5      GNUnet is free software; you can redistribute it and/or modify
6      it under the terms of the GNU General Public License as published
7      by the Free Software Foundation; either version 3, or (at your
8      option) any later version.
9
10      GNUnet is distributed in the hope that it will be useful, but
11      WITHOUT ANY WARRANTY; without even the implied warranty of
12      MERCHANTABILITY or FITNESS FOR A PARTICULAR PURPOSE.  See the GNU
13      General Public License for more details.
14
15      You should have received a copy of the GNU General Public License
16      along with GNUnet; see the file COPYING.  If not, write to the
17      Free Software Foundation, Inc., 59 Temple Place - Suite 330,
18      Boston, MA 02111-1307, USA.
19 */
20
21 /**
22  * @file mesh/gnunet-service-mesh.c
23  * @brief GNUnet MESH service
24  * @author Bartlomiej Polot
25  *
26  * STRUCTURE:
27  * - DATA STRUCTURES
28  * - GLOBAL VARIABLES
29  * - GENERAL HELPERS
30  * - PERIODIC FUNCTIONS
31  * - MESH NETWORK HANDLER HELPERS
32  * - MESH NETWORK HANDLES
33  * - MESH LOCAL HANDLER HELPERS
34  * - MESH LOCAL HANDLES
35  * - MAIN FUNCTIONS (main & run)
36  *
37  * TODO:
38  * - error reporting (CREATE/CHANGE/ADD/DEL?) -- new message!
39  * - partial disconnect reporting -- same as error reporting?
40  * - add vs create? change vs. keep-alive? same msg or different ones? -- thinking...
41  * - speed requirement specification (change?) in mesh API -- API call
42  * - add ping message
43  * - relay corking down to core
44  * - set ttl relative to tree depth
45  * TODO END
46  */
47
48 #include "platform.h"
49 #include "mesh.h"
50 #include "mesh_protocol.h"
51 #include "gnunet_dht_service.h"
52 #include "mesh_tunnel_tree.h"
53
54 /* TODO: move into configuration file */
55 #define REFRESH_PATH_TIME       GNUNET_TIME_relative_multiply(\
56                                     GNUNET_TIME_UNIT_SECONDS,\
57                                     300)
58 #define APP_ANNOUNCE_TIME       GNUNET_TIME_relative_multiply(\
59                                     GNUNET_TIME_UNIT_SECONDS,\
60                                     5)
61
62 #define ID_ANNOUNCE_TIME        GNUNET_TIME_relative_multiply(\
63                                     GNUNET_TIME_UNIT_SECONDS,\
64                                     5)
65
66 #define UNACKNOWLEDGED_WAIT     GNUNET_TIME_relative_multiply(\
67                                     GNUNET_TIME_UNIT_SECONDS,\
68                                     2)
69 #define DEFAULT_TTL     64
70
71 /* TODO END */
72
73 #define MESH_DEBUG_DHT GNUNET_YES
74 #define MESH_DEBUG_CONNECTION GNUNET_NO
75
76 #if MESH_DEBUG_CONNECTION
77 #define DEBUG_CONN(...) GNUNET_log (GNUNET_ERROR_TYPE_DEBUG, __VA_ARGS__)
78 #else
79 #define DEBUG_CONN(...)
80 #endif
81
82 #if MESH_DEBUG_DHT
83 #define DEBUG_DHT(...) GNUNET_log (GNUNET_ERROR_TYPE_DEBUG, __VA_ARGS__)
84 #else
85 #define DEBUG_DHT(...)
86 #endif
87
88 /******************************************************************************/
89 /************************      DATA STRUCTURES     ****************************/
90 /******************************************************************************/
91
92 /** FWD declaration */
93 struct MeshPeerInfo;
94
95
96 /**
97  * Struct representing a piece of data being sent to other peers
98  */
99 struct MeshData
100 {
101   /** Tunnel it belongs to. */
102   struct MeshTunnel *t;
103
104   /** In case of a multicast, task to allow a client to send more data if
105    * some neighbor is too slow. */
106   GNUNET_SCHEDULER_TaskIdentifier *task;
107
108   /** How many remaining neighbors we need to send this to. */
109   unsigned int *reference_counter;
110
111   /** Size of the data. */
112   size_t data_len;
113
114   /** Data itself */
115   void *data;
116 };
117
118
119 /**
120  * Struct containing info about a queued transmission to this peer
121  */
122 struct MeshPeerQueue
123 {
124     /**
125       * DLL next
126       */
127   struct MeshPeerQueue *next;
128
129     /**
130       * DLL previous
131       */
132   struct MeshPeerQueue *prev;
133
134     /**
135      * Peer this transmission is directed to.
136      */
137   struct MeshPeerInfo *peer;
138
139     /**
140      * Pointer to info stucture used as cls.
141      */
142   void *cls;
143
144     /**
145      * Type of message
146      */
147   uint16_t type;
148
149     /**
150      * Size of the message
151      */
152   size_t size;
153 };
154
155
156 /**
157  * Struct containing all info possibly needed to build a package when called
158  * back by core.
159  */
160 struct MeshTransmissionDescriptor
161 {
162     /** ID of the tunnel this packet travels in */
163   struct MESH_TunnelID *origin;
164
165     /** Who was this message being sent to */
166   struct MeshPeerInfo *peer;
167
168     /** Ultimate destination of the packet */
169   GNUNET_PEER_Id destination;
170
171     /** Data descriptor */
172   struct MeshData* mesh_data;
173 };
174
175
176 /**
177  * Struct containing all information regarding a given peer
178  */
179 struct MeshPeerInfo
180 {
181     /**
182      * ID of the peer
183      */
184   GNUNET_PEER_Id id;
185
186     /**
187      * Last time we heard from this peer
188      */
189   struct GNUNET_TIME_Absolute last_contact;
190
191     /**
192      * Number of attempts to reconnect so far
193      */
194   int n_reconnect_attempts;
195
196     /**
197      * Paths to reach the peer, ordered by ascending hop count
198      */
199   struct MeshPeerPath *path_head;
200
201     /**
202      * Paths to reach the peer, ordered by ascending hop count
203      */
204   struct MeshPeerPath *path_tail;
205
206     /**
207      * Handle to stop the DHT search for a path to this peer
208      */
209   struct GNUNET_DHT_GetHandle *dhtget;
210
211     /**
212      * Closure given to the DHT GET
213      */
214   struct MeshPathInfo *dhtgetcls;
215   
216     /**
217      * Transmission queue to this peer, head
218      */
219   struct MeshPeerQueue *queue_head;
220
221     /**
222      * Transmission queue to this peer, tail
223      */
224   struct MeshPeerQueue *queue_tail;
225
226     /**
227      * Array of tunnels this peer participates in
228      * (most probably a small amount, therefore not a hashmap)
229      * When the path to the peer changes, notify these tunnels to let them
230      * re-adjust their path trees.
231      */
232   struct MeshTunnel **tunnels;
233
234     /**
235      * Number of tunnels this peers participates in
236      */
237   unsigned int ntunnels;
238
239     /**
240      * Handle to stop queued transmission
241      */
242   struct GNUNET_CORE_TransmitHandle *core_transmit;
243 };
244
245
246 /**
247  * Data scheduled to transmit (to local client or remote peer)
248  */
249 struct MeshQueue
250 {
251     /**
252      * Double linked list
253      */
254   struct MeshQueue *next;
255   struct MeshQueue *prev;
256
257     /**
258      * Target of the data (NULL if target is client)
259      */
260   struct MeshPeerInfo *peer;
261
262     /**
263      * Client to send the data to (NULL if target is peer)
264      */
265   struct MeshClient *client;
266
267     /**
268      * Size of the message to transmit
269      */
270   unsigned int size;
271
272     /**
273      * How old is the data?
274      */
275   struct GNUNET_TIME_Absolute timestamp;
276
277     /**
278      * Data itself
279      */
280   struct GNUNET_MessageHeader *data;
281 };
282
283 /**
284  * Globally unique tunnel identification (owner + number)
285  * DO NOT USE OVER THE NETWORK
286  */
287 struct MESH_TunnelID
288 {
289     /**
290      * Node that owns the tunnel
291      */
292   GNUNET_PEER_Id oid;
293
294     /**
295      * Tunnel number to differentiate all the tunnels owned by the node oid
296      * ( tid < GNUNET_MESH_LOCAL_TUNNEL_ID_CLI )
297      */
298   MESH_TunnelNumber tid;
299 };
300
301
302 struct MeshClient;              /* FWD declaration */
303
304 /**
305  * Struct containing all information regarding a tunnel
306  * For an intermediate node the improtant info used will be:
307  * - id        Tunnel unique identification
308  * - paths[0]  To know where to send it next
309  * - metainfo: ready, speeds, accounting
310  */
311 struct MeshTunnel
312 {
313     /**
314      * Tunnel ID
315      */
316   struct MESH_TunnelID id;
317
318     /**
319      * Local tunnel number ( >= GNUNET_MESH_LOCAL_TUNNEL_ID_CLI or 0 )
320      */
321   MESH_TunnelNumber local_tid;
322
323     /**
324      * Local tunnel number for local destination clients (incoming number)
325      * ( >= GNUNET_MESH_LOCAL_TUNNEL_ID_SERV or 0). All clients share the same
326      * number.
327      */
328   MESH_TunnelNumber local_tid_dest;
329
330     /**
331      * ID of the last multicast packet seen/sent.
332      */
333   uint32_t mid;
334
335     /**
336      * Last time the tunnel was used
337      */
338   struct GNUNET_TIME_Absolute timestamp;
339
340     /**
341      * Peers in the tunnel, indexed by PeerIdentity -> (MeshPeerInfo)
342      * containing peers added by id or by type, not intermediate peers.
343      */
344   struct GNUNET_CONTAINER_MultiHashMap *peers;
345
346     /**
347      * Number of peers that are connected and potentially ready to receive data
348      */
349   unsigned int peers_ready;
350
351     /**
352      * Number of peers that have been added to the tunnel
353      */
354   unsigned int peers_total;
355
356     /**
357      * Client owner of the tunnel, if any
358      */
359   struct MeshClient *owner;
360
361     /**
362      * Clients that have been informed about the tunnel, if any
363      */
364   struct MeshClient **clients;
365
366     /**
367      * Number of elements in clients
368      */
369   unsigned int nclients;
370
371     /**
372      * Clients that have requested to leave the tunnel
373      */
374   struct MeshClient **ignore;
375
376     /**
377      * Number of elements in clients
378      */
379   unsigned int nignore;
380
381     /**
382      * Messages ready to transmit
383      */
384   struct MeshQueue *queue_head;
385   struct MeshQueue *queue_tail;
386
387   /**
388    * Tunnel paths
389    */
390   struct MeshTunnelTree *tree;
391
392   /**
393    * Application type we are looking for in this tunnel
394    */
395   GNUNET_MESH_ApplicationType type;
396
397     /**
398      * Used to search peers offering a service
399      */
400   struct GNUNET_DHT_GetHandle *dht_get_type;
401
402   /**
403    * Task to keep the used paths alive
404    */
405   GNUNET_SCHEDULER_TaskIdentifier path_refresh_task;
406
407   /**
408    * Task to destroy the tunnel after timeout
409    *
410    * FIXME: merge the two? a tunnel will have either
411    * a path refresh OR a timeout, never both!
412    */
413   GNUNET_SCHEDULER_TaskIdentifier timeout_task;
414 };
415
416
417 /**
418  * Info needed to work with tunnel paths and peers
419  */
420 struct MeshPathInfo
421 {
422   /**
423    * Tunnel
424    */
425   struct MeshTunnel *t;
426
427   /**
428    * Neighbouring peer to whom we send the packet to
429    */
430   struct MeshPeerInfo *peer;
431
432   /**
433    * Path itself
434    */
435   struct MeshPeerPath *path;
436 };
437
438
439 /**
440  * Struct containing information about a client of the service
441  */
442 struct MeshClient
443 {
444     /**
445      * Linked list next
446      */
447   struct MeshClient *next;
448
449     /**
450      * Linked list prev
451      */
452   struct MeshClient *prev;
453
454     /**
455      * Tunnels that belong to this client, indexed by local id
456      */
457   struct GNUNET_CONTAINER_MultiHashMap *own_tunnels;
458
459    /**
460      * Tunnels this client has accepted, indexed by incoming local id
461      */
462   struct GNUNET_CONTAINER_MultiHashMap *incoming_tunnels;
463
464    /**
465      * Tunnels this client has rejected, indexed by incoming local id
466      */
467   struct GNUNET_CONTAINER_MultiHashMap *ignore_tunnels;
468     /**
469      * Handle to communicate with the client
470      */
471   struct GNUNET_SERVER_Client *handle;
472
473     /**
474      * Applications that this client has claimed to provide
475      */
476   struct GNUNET_CONTAINER_MultiHashMap *apps;
477
478     /**
479      * Messages that this client has declared interest in
480      */
481   struct GNUNET_CONTAINER_MultiHashMap *types;
482
483     /**
484      * Whether the client is active or shutting down (don't send confirmations
485      * to a client that is shutting down.
486      */
487   int shutting_down;
488
489     /**
490      * ID of the client, mainly for debug messages
491      */
492   unsigned int id;
493
494 };
495
496
497
498 /******************************************************************************/
499 /************************      DEBUG FUNCTIONS     ****************************/
500 /******************************************************************************/
501
502 #if MESH_DEBUG
503 /**
504  * GNUNET_SCHEDULER_Task for printing a message after some operation is done
505  * @param cls string to print
506  * @param success  GNUNET_OK if the PUT was transmitted,
507  *                GNUNET_NO on timeout,
508  *                GNUNET_SYSERR on disconnect from service
509  *                after the PUT message was transmitted
510  *                (so we don't know if it was received or not)
511  */
512
513 #if 0
514 static void
515 mesh_debug (void *cls, int success)
516 {
517   char *s = cls;
518
519   GNUNET_log (GNUNET_ERROR_TYPE_DEBUG, "%s (%d)\n", s, success);
520 }
521 #endif
522
523 #endif
524
525 /******************************************************************************/
526 /***********************      GLOBAL VARIABLES     ****************************/
527 /******************************************************************************/
528
529 /**
530  * All the clients
531  */
532 static struct MeshClient *clients;
533 static struct MeshClient *clients_tail;
534
535 /**
536  * Tunnels known, indexed by MESH_TunnelID (MeshTunnel)
537  */
538 static struct GNUNET_CONTAINER_MultiHashMap *tunnels;
539
540 /**
541  * Tunnels incoming, indexed by MESH_TunnelNumber
542  * (which is greater than GNUNET_MESH_LOCAL_TUNNEL_ID_SERV)
543  */
544 static struct GNUNET_CONTAINER_MultiHashMap *incoming_tunnels;
545
546 /**
547  * Peers known, indexed by PeerIdentity (MeshPeerInfo)
548  */
549 static struct GNUNET_CONTAINER_MultiHashMap *peers;
550
551 /**
552  * Handle to communicate with core
553  */
554 static struct GNUNET_CORE_Handle *core_handle;
555
556 /**
557  * Handle to communicate with transport
558  */
559 // static struct GNUNET_TRANSPORT_Handle *transport_handle;
560
561 /**
562  * Handle to use DHT
563  */
564 static struct GNUNET_DHT_Handle *dht_handle;
565
566 /**
567  * Handle to server
568  */
569 static struct GNUNET_SERVER_Handle *server_handle;
570
571 /**
572  * Notification context, to send messages to local clients
573  */
574 static struct GNUNET_SERVER_NotificationContext *nc;
575
576 /**
577  * Local peer own ID (memory efficient handle)
578  */
579 static GNUNET_PEER_Id myid;
580
581 /**
582  * Local peer own ID (full value)
583  */
584 static struct GNUNET_PeerIdentity my_full_id;
585
586 /**
587  * Own private key
588  */
589 static struct GNUNET_CRYPTO_RsaPrivateKey *my_private_key;
590
591 /**
592  * Own public key.
593  */
594 static struct GNUNET_CRYPTO_RsaPublicKeyBinaryEncoded my_public_key;
595
596 /**
597  * Tunnel ID for the next created tunnel (global tunnel number)
598  */
599 static MESH_TunnelNumber next_tid;
600
601 /**
602  * Tunnel ID for the next incoming tunnel (local tunnel number)
603  */
604 static MESH_TunnelNumber next_local_tid;
605
606 /**
607  * All application types provided by this peer
608  */
609 static struct GNUNET_CONTAINER_MultiHashMap *applications;
610
611 /**
612  * All message types clients of this peer are interested in
613  */
614 static struct GNUNET_CONTAINER_MultiHashMap *types;
615
616 /**
617  * Task to periodically announce provided applications
618  */
619 GNUNET_SCHEDULER_TaskIdentifier announce_applications_task;
620
621 /**
622  * Task to periodically announce itself in the network
623  */
624 GNUNET_SCHEDULER_TaskIdentifier announce_id_task;
625
626 /**
627  * Next ID to assign to a client
628  */
629 unsigned int next_client_id;
630
631
632
633 /******************************************************************************/
634 /************************         ITERATORS        ****************************/
635 /******************************************************************************/
636
637 /* FIXME move iterators here */
638
639
640 /******************************************************************************/
641 /************************    PERIODIC FUNCTIONS    ****************************/
642 /******************************************************************************/
643
644 /**
645  * Announce iterator over for each application provided by the peer
646  *
647  * @param cls closure
648  * @param key current key code
649  * @param value value in the hash map
650  * @return GNUNET_YES if we should continue to
651  *         iterate,
652  *         GNUNET_NO if not.
653  */
654 static int
655 announce_application (void *cls, const GNUNET_HashCode * key, void *value)
656 {
657   /* FIXME are hashes in multihash map equal on all aquitectures? */
658   /* FIXME: keep return value of 'put' to possibly cancel!? */
659   GNUNET_DHT_put (dht_handle, key, 10,
660                   GNUNET_DHT_RO_RECORD_ROUTE |
661                   GNUNET_DHT_RO_DEMULTIPLEX_EVERYWHERE, GNUNET_BLOCK_TYPE_TEST,
662                   sizeof (struct GNUNET_PeerIdentity),
663                   (const char *) &my_full_id,
664                   GNUNET_TIME_absolute_add (GNUNET_TIME_absolute_get (),
665                                             APP_ANNOUNCE_TIME),
666                   APP_ANNOUNCE_TIME, NULL, NULL);
667   return GNUNET_OK;
668 }
669
670
671 /**
672  * Periodically announce what applications are provided by local clients
673  *
674  * @param cls closure
675  * @param tc task context
676  */
677 static void
678 announce_applications (void *cls, const struct GNUNET_SCHEDULER_TaskContext *tc)
679 {
680   if (tc->reason == GNUNET_SCHEDULER_REASON_SHUTDOWN)
681   {
682     announce_applications_task = GNUNET_SCHEDULER_NO_TASK;
683     return;
684   }
685  
686   DEBUG_DHT ("Starting PUT for apps\n");
687
688   GNUNET_CONTAINER_multihashmap_iterate (applications, &announce_application,
689                                          NULL);
690   announce_applications_task =
691       GNUNET_SCHEDULER_add_delayed (APP_ANNOUNCE_TIME, &announce_applications,
692                                     cls);
693   DEBUG_DHT ("Finished PUT for apps\n");
694
695   return;
696 }
697
698
699 /**
700  * Periodically announce self id in the DHT
701  *
702  * @param cls closure
703  * @param tc task context
704  */
705 static void
706 announce_id (void *cls, const struct GNUNET_SCHEDULER_TaskContext *tc)
707 {
708   if (tc->reason == GNUNET_SCHEDULER_REASON_SHUTDOWN)
709   {
710     announce_id_task = GNUNET_SCHEDULER_NO_TASK;
711     return;
712   }
713   /* TODO
714    * - Set data expiration in function of X
715    * - Adapt X to churn
716    */
717   DEBUG_DHT ("DHT_put for ID %s started.\n", GNUNET_i2s (&my_full_id));
718
719   GNUNET_DHT_put (dht_handle,   /* DHT handle */
720                   &my_full_id.hashPubKey,       /* Key to use */
721                   10,          /* Replication level */
722                   GNUNET_DHT_RO_RECORD_ROUTE | GNUNET_DHT_RO_DEMULTIPLEX_EVERYWHERE,    /* DHT options */
723                   GNUNET_BLOCK_TYPE_TEST,       /* Block type */
724                   sizeof (my_full_id),  /* Size of the data */
725                   (char *) &my_full_id, /* Data itself */
726                   GNUNET_TIME_UNIT_FOREVER_ABS,  /* Data expiration */
727                   GNUNET_TIME_UNIT_FOREVER_REL, /* Retry time */
728                   NULL,         /* Continuation */
729                   NULL);        /* Continuation closure */
730   announce_id_task =
731       GNUNET_SCHEDULER_add_delayed (ID_ANNOUNCE_TIME, &announce_id, cls);
732 }
733
734
735 /**
736  * Function to process paths received for a new peer addition. The recorded
737  * paths form the initial tunnel, which can be optimized later.
738  * Called on each result obtained for the DHT search.
739  *
740  * @param cls closure
741  * @param exp when will this value expire
742  * @param key key of the result
743  * @param type type of the result
744  * @param size number of bytes in data
745  * @param data pointer to the result data
746  */
747 static void
748 dht_get_id_handler (void *cls, struct GNUNET_TIME_Absolute exp,
749                     const GNUNET_HashCode * key,
750                     const struct GNUNET_PeerIdentity *get_path,
751                     unsigned int get_path_length,
752                     const struct GNUNET_PeerIdentity *put_path,
753                     unsigned int put_path_length, enum GNUNET_BLOCK_Type type,
754                     size_t size, const void *data);
755
756
757 /******************************************************************************/
758 /******************      GENERAL HELPER FUNCTIONS      ************************/
759 /******************************************************************************/
760
761 /**
762  * Search for a tunnel by global ID using full PeerIdentities
763  *
764  * @param oid owner of the tunnel
765  * @param tid global tunnel number
766  *
767  * @return tunnel handler, NULL if doesn't exist
768  */
769 static struct MeshTunnel *
770 tunnel_get (struct GNUNET_PeerIdentity *oid, MESH_TunnelNumber tid);
771
772
773 /**
774  * Delete an active client from the tunnel.
775  * 
776  * @param t Tunnel.
777  * @param c Client.
778  */
779 static void
780 tunnel_delete_active_client (struct MeshTunnel *t, const struct MeshClient *c);
781
782 /**
783  * Notify a tunnel that a connection has broken that affects at least
784  * some of its peers.
785  *
786  * @param t Tunnel affected.
787  * @param p1 Peer that got disconnected from p2.
788  * @param p2 Peer that got disconnected from p1.
789  *
790  * @return Short ID of the peer disconnected (either p1 or p2).
791  *         0 if the tunnel remained unaffected.
792  */
793 static GNUNET_PEER_Id
794 tunnel_notify_connection_broken (struct MeshTunnel *t, GNUNET_PEER_Id p1,
795                                  GNUNET_PEER_Id p2);
796
797
798 /**
799  * Check if client has registered with the service and has not disconnected
800  *
801  * @param client the client to check
802  *
803  * @return non-NULL if client exists in the global DLL
804  */
805 static struct MeshClient *
806 client_get (struct GNUNET_SERVER_Client *client)
807 {
808   struct MeshClient *c;
809
810   c = clients;
811   while (NULL != c)
812   {
813     if (c->handle == client)
814       return c;
815     c = c->next;
816   }
817   return NULL;
818 }
819
820
821 /**
822  * Checks if a given client has subscribed to certain message type
823  *
824  * @param message_type Type of message to check
825  * @param c Client to check
826  *
827  * @return GNUNET_YES or GNUNET_NO, depending on subscription status
828  *
829  * TODO inline?
830  */
831 static int
832 client_is_subscribed (uint16_t message_type, struct MeshClient *c)
833 {
834   GNUNET_HashCode hc;
835
836   GNUNET_CRYPTO_hash (&message_type, sizeof (uint16_t), &hc);
837   return GNUNET_CONTAINER_multihashmap_contains (c->types, &hc);
838 }
839
840
841 /**
842  * Allow a client to send more data after transmitting a multicast message
843  * which some neighbor has not yet accepted altough a reasonable time has
844  * passed.
845  *
846  * @param cls Closure (DataDescriptor containing the task identifier)
847  * @param tc Task Context
848  * 
849  * FIXME reference counter cshould be just int
850  */
851 static void
852 client_allow_send (void *cls, const struct GNUNET_SCHEDULER_TaskContext *tc)
853 {
854   struct MeshData *mdata = cls;
855
856   if (GNUNET_SCHEDULER_REASON_SHUTDOWN == tc->reason)
857     return;
858   GNUNET_assert (NULL != mdata->reference_counter);
859   GNUNET_log (GNUNET_ERROR_TYPE_DEBUG,
860               "CLIENT ALLOW SEND DESPITE %u COPIES PENDING\n",
861               *(mdata->reference_counter));
862   *(mdata->task) = GNUNET_SCHEDULER_NO_TASK;
863   GNUNET_SERVER_receive_done (mdata->t->owner->handle, GNUNET_OK);
864 }
865
866
867 /**
868  * Check whether client wants traffic from a tunnel.
869  *
870  * @param c Client to check.
871  * @param t Tunnel to be found.
872  *
873  * @return GNUNET_YES if client knows tunnel.
874  * 
875  * TODO look in client hashmap
876  */
877 static int
878 client_wants_tunnel (struct MeshClient *c, struct MeshTunnel *t)
879 {
880   unsigned int i;
881
882   for (i = 0; i < t->nclients; i++)
883     if (t->clients[i] == c)
884       return GNUNET_YES;
885   return GNUNET_NO;
886 }
887
888
889 /**
890  * Check whether client has been informed about a tunnel.
891  *
892  * @param c Client to check.
893  * @param t Tunnel to be found.
894  *
895  * @return GNUNET_YES if client knows tunnel.
896  * 
897  * TODO look in client hashmap
898  */
899 static int
900 client_knows_tunnel (struct MeshClient *c, struct MeshTunnel *t)
901 {
902   unsigned int i;
903
904   for (i = 0; i < t->nignore; i++)
905     if (t->ignore[i] == c)
906       return GNUNET_YES;
907   return client_wants_tunnel(c, t);
908 }
909
910
911 /**
912  * Marks a client as uninterested in traffic from the tunnel, updating both
913  * client and tunnel to reflect this.
914  *
915  * @param c Client that doesn't want traffic anymore.
916  * @param t Tunnel which should be ignored.
917  *
918  * FIXME when to delete an incoming tunnel?
919  */
920 static void
921 client_ignore_tunnel (struct MeshClient *c, struct MeshTunnel *t)
922 {
923   GNUNET_HashCode hash;
924
925   GNUNET_CRYPTO_hash(&t->local_tid_dest, sizeof (MESH_TunnelNumber), &hash);
926   GNUNET_break (GNUNET_YES ==
927                 GNUNET_CONTAINER_multihashmap_remove (c->incoming_tunnels,
928                                                       &hash, t));
929   GNUNET_break (GNUNET_YES ==
930                 GNUNET_CONTAINER_multihashmap_put (c->ignore_tunnels, &hash, t,
931                                                    GNUNET_CONTAINER_MULTIHASHMAPOPTION_UNIQUE_FAST));
932   tunnel_delete_active_client (t, c);
933   GNUNET_array_append (t->ignore, t->nignore, c);
934 }
935
936
937 /**
938  * Deletes a tunnel from a client (either owner or destination). To be used on
939  * tunnel destroy, otherwise, use client_ignore_tunnel.
940  *
941  * @param c Client whose tunnel to delete.
942  * @param t Tunnel which should be deleted.
943  */
944 static void
945 client_delete_tunnel (struct MeshClient *c, struct MeshTunnel *t)
946 {
947   GNUNET_HashCode hash;
948
949   if (c == t->owner)
950   {
951     GNUNET_CRYPTO_hash(&t->local_tid, sizeof (MESH_TunnelNumber), &hash);
952     GNUNET_assert (GNUNET_YES ==
953                    GNUNET_CONTAINER_multihashmap_remove (c->own_tunnels,
954                                                          &hash,
955                                                          t));
956   }
957   else
958   {
959     GNUNET_CRYPTO_hash(&t->local_tid_dest, sizeof (MESH_TunnelNumber), &hash);
960     // FIXME XOR?
961     GNUNET_assert (GNUNET_YES ==
962                    GNUNET_CONTAINER_multihashmap_remove (c->incoming_tunnels,
963                                                          &hash,
964                                                          t) ||
965                    GNUNET_YES ==
966                    GNUNET_CONTAINER_multihashmap_remove (c->ignore_tunnels,
967                                                          &hash,
968                                                          t));
969   }
970     
971 }
972
973
974 /**
975  * Send the message to all clients that have subscribed to its type
976  *
977  * @param msg Pointer to the message itself
978  * @param payload Pointer to the payload of the message.
979  * @return number of clients this message was sent to
980  */
981 static unsigned int
982 send_subscribed_clients (const struct GNUNET_MessageHeader *msg,
983                          const struct GNUNET_MessageHeader *payload)
984 {
985   struct GNUNET_PeerIdentity *oid;
986   struct MeshClient *c;
987   struct MeshTunnel *t;
988   MESH_TunnelNumber *tid;
989   unsigned int count;
990   uint16_t type;
991   char cbuf[htons (msg->size)];
992
993   type = ntohs (payload->type);
994   GNUNET_log (GNUNET_ERROR_TYPE_DEBUG, "Sending to clients...\n");
995   GNUNET_log (GNUNET_ERROR_TYPE_DEBUG, "message of type %u\n", type);
996
997   memcpy (cbuf, msg, sizeof (cbuf));
998   switch (htons (msg->type))
999   {
1000     struct GNUNET_MESH_Unicast *uc;
1001     struct GNUNET_MESH_Multicast *mc;
1002     struct GNUNET_MESH_ToOrigin *to;
1003
1004   case GNUNET_MESSAGE_TYPE_MESH_UNICAST:
1005     uc = (struct GNUNET_MESH_Unicast *) cbuf;
1006     tid = &uc->tid;
1007     oid = &uc->oid;
1008     break;
1009   case GNUNET_MESSAGE_TYPE_MESH_MULTICAST:
1010     mc = (struct GNUNET_MESH_Multicast *) cbuf;
1011     tid = &mc->tid;
1012     oid = &mc->oid;
1013     break;
1014   case GNUNET_MESSAGE_TYPE_MESH_TO_ORIGIN:
1015     to = (struct GNUNET_MESH_ToOrigin *) cbuf;
1016     tid = &to->tid;
1017     oid = &to->oid;
1018     break;
1019   default:
1020     GNUNET_break (0);
1021     return 0;
1022   }
1023   t = tunnel_get (oid, ntohl (*tid));
1024   if (NULL == t)
1025   {
1026     GNUNET_break (0);
1027     return 0;
1028   }
1029
1030   for (count = 0, c = clients; c != NULL; c = c->next)
1031   {
1032     GNUNET_log (GNUNET_ERROR_TYPE_DEBUG, "   client %u\n", c->id);
1033     if (client_is_subscribed (type, c))
1034     {
1035       if (htons (msg->type) == GNUNET_MESSAGE_TYPE_MESH_TO_ORIGIN)
1036       {
1037         if (c != t->owner)
1038           continue;
1039         *tid = htonl (t->local_tid);
1040       }
1041       else
1042       {
1043         if (GNUNET_NO == client_knows_tunnel (c, t))
1044         {
1045           /* This client doesn't know the tunnel */
1046           struct GNUNET_MESH_TunnelNotification tmsg;
1047           GNUNET_HashCode hash;
1048
1049           tmsg.header.size = htons (sizeof (tmsg));
1050           tmsg.header.type = htons (GNUNET_MESSAGE_TYPE_MESH_LOCAL_TUNNEL_CREATE);
1051           GNUNET_PEER_resolve (t->id.oid, &tmsg.peer);
1052           tmsg.tunnel_id = htonl (t->local_tid_dest);
1053           GNUNET_SERVER_notification_context_unicast (nc, c->handle,
1054                                                       &tmsg.header, GNUNET_NO);
1055           GNUNET_array_append (t->clients, t->nclients, c);
1056           GNUNET_CRYPTO_hash (&t->local_tid_dest, sizeof (MESH_TunnelNumber),
1057                               &hash);
1058           GNUNET_break (GNUNET_OK == GNUNET_CONTAINER_multihashmap_put (
1059                                        c->incoming_tunnels, &hash, t,
1060                                        GNUNET_CONTAINER_MULTIHASHMAPOPTION_UNIQUE_FAST));
1061         }
1062         *tid = htonl (t->local_tid_dest);
1063       }
1064
1065       /* Check if the client wants to get traffic from the tunnel */
1066       if (GNUNET_NO == client_wants_tunnel(c, t))
1067         continue;
1068       count++;
1069       GNUNET_log (GNUNET_ERROR_TYPE_DEBUG, "     sending\n");
1070       GNUNET_SERVER_notification_context_unicast (nc, c->handle,
1071                                                   (struct GNUNET_MessageHeader
1072                                                    *) cbuf, GNUNET_YES);
1073     }
1074   }
1075   return count;
1076 }
1077
1078
1079 /**
1080  * Notify the client that owns the tunnel that a peer has connected to it
1081  * (the requested path to it has been confirmed).
1082  *
1083  * @param t Tunnel whose owner to notify
1084  * @param id Short id of the peer that has connected
1085  */
1086 static void
1087 send_client_peer_connected (const struct MeshTunnel *t, const GNUNET_PEER_Id id)
1088 {
1089   struct GNUNET_MESH_PeerControl pc;
1090
1091   pc.header.type = htons (GNUNET_MESSAGE_TYPE_MESH_LOCAL_PEER_ADD);
1092   pc.header.size = htons (sizeof (struct GNUNET_MESH_PeerControl));
1093   pc.tunnel_id = htonl (t->local_tid);
1094   GNUNET_PEER_resolve (id, &pc.peer);
1095   GNUNET_SERVER_notification_context_unicast (nc, t->owner->handle, &pc.header,
1096                                               GNUNET_NO);
1097 }
1098
1099
1100 /**
1101  * Notify all clients (not depending on registration status) that the incoming
1102  * tunnel is no longer valid.
1103  *
1104  * @param t Tunnel that was destroyed.
1105  */
1106 static void
1107 send_clients_tunnel_destroy (struct MeshTunnel *t)
1108 {
1109   struct GNUNET_MESH_TunnelMessage msg;
1110
1111   msg.header.size = htons (sizeof (msg));
1112   msg.header.type = htons (GNUNET_MESSAGE_TYPE_MESH_LOCAL_TUNNEL_DESTROY);
1113   msg.tunnel_id = htonl (t->local_tid_dest);
1114   GNUNET_SERVER_notification_context_broadcast (nc, &msg.header, GNUNET_NO);
1115 }
1116
1117
1118 /**
1119  * Notify clients of tunnel disconnections, if needed.
1120  * In case the origin disconnects, the destination clients get a tunnel destroy
1121  * notification. If the last destination disconnects (only one remaining client
1122  * in tunnel), the origin gets a (local ID) peer disconnected.
1123  * Note that the function must be called BEFORE removing the client from
1124  * the tunnel.
1125  *
1126  * @param t Tunnel that was destroyed.
1127  * @param c Client that disconnected.
1128  */
1129 static void
1130 send_client_tunnel_disconnect (struct MeshTunnel *t, struct MeshClient *c)
1131 {
1132   unsigned int i;
1133
1134   if (c == t->owner)
1135   {
1136     struct GNUNET_MESH_TunnelMessage msg;
1137
1138     msg.header.size = htons (sizeof (msg));
1139     msg.header.type = htons (GNUNET_MESSAGE_TYPE_MESH_LOCAL_TUNNEL_DESTROY);
1140     msg.tunnel_id = htonl (t->local_tid_dest);
1141     for (i = 0; i < t->nclients; i++)
1142       GNUNET_SERVER_notification_context_unicast (nc, t->clients[i]->handle,
1143                                                   &msg.header, GNUNET_NO);
1144   }
1145   // FIXME when to disconnect an incoming tunnel?
1146   else if (1 == t->nclients && NULL != t->owner)
1147   {
1148     struct GNUNET_MESH_PeerControl msg;
1149
1150     msg.header.size = htons (sizeof (msg));
1151     msg.header.type = htons (GNUNET_MESSAGE_TYPE_MESH_LOCAL_PEER_DEL);
1152     msg.tunnel_id = htonl (t->local_tid);
1153     msg.peer = my_full_id;
1154     GNUNET_SERVER_notification_context_unicast (nc, t->owner->handle,
1155                                                 &msg.header, GNUNET_NO);
1156   }
1157 }
1158
1159
1160 /**
1161  * Decrements the reference counter and frees all resources if needed
1162  *
1163  * @param mesh_data Data Descriptor used in a multicast message.
1164  *                  Freed no longer needed (last message).
1165  */
1166 static void
1167 data_descriptor_decrement_multicast (struct MeshData *mesh_data)
1168 {
1169   /* Make sure it's a multicast packet */
1170   GNUNET_assert (NULL != mesh_data->reference_counter);
1171
1172   if (0 == --(*(mesh_data->reference_counter)))
1173   {
1174     GNUNET_log (GNUNET_ERROR_TYPE_DEBUG, "Last copy!\n");
1175     if (NULL != mesh_data->task)
1176     {
1177       if (GNUNET_SCHEDULER_NO_TASK != *(mesh_data->task))
1178       {
1179         GNUNET_SCHEDULER_cancel (*(mesh_data->task));
1180         GNUNET_log (GNUNET_ERROR_TYPE_DEBUG, " notifying client...\n");
1181         GNUNET_SERVER_receive_done (mesh_data->t->owner->handle, GNUNET_OK);
1182       }
1183       GNUNET_free (mesh_data->task);
1184     }
1185     GNUNET_free (mesh_data->reference_counter);
1186     GNUNET_free (mesh_data->data);
1187     GNUNET_free (mesh_data);
1188   }
1189 }
1190
1191
1192 /**
1193  * Retrieve the MeshPeerInfo stucture associated with the peer, create one
1194  * and insert it in the appropiate structures if the peer is not known yet.
1195  *
1196  * @param peer Full identity of the peer.
1197  *
1198  * @return Existing or newly created peer info.
1199  */
1200 static struct MeshPeerInfo *
1201 peer_info_get (const struct GNUNET_PeerIdentity *peer)
1202 {
1203   struct MeshPeerInfo *peer_info;
1204
1205   peer_info = GNUNET_CONTAINER_multihashmap_get (peers, &peer->hashPubKey);
1206   if (NULL == peer_info)
1207   {
1208     peer_info =
1209         (struct MeshPeerInfo *) GNUNET_malloc (sizeof (struct MeshPeerInfo));
1210     GNUNET_CONTAINER_multihashmap_put (peers, &peer->hashPubKey, peer_info,
1211                                        GNUNET_CONTAINER_MULTIHASHMAPOPTION_UNIQUE_ONLY);
1212     peer_info->id = GNUNET_PEER_intern (peer);
1213   }
1214
1215   return peer_info;
1216 }
1217
1218
1219 /**
1220  * Retrieve the MeshPeerInfo stucture associated with the peer, create one
1221  * and insert it in the appropiate structures if the peer is not known yet.
1222  *
1223  * @param peer Short identity of the peer.
1224  *
1225  * @return Existing or newly created peer info.
1226  */
1227 static struct MeshPeerInfo *
1228 peer_info_get_short (const GNUNET_PEER_Id peer)
1229 {
1230   struct GNUNET_PeerIdentity id;
1231
1232   GNUNET_PEER_resolve (peer, &id);
1233   return peer_info_get (&id);
1234 }
1235
1236
1237 /**
1238  * Iterator to remove the tunnel from the list of tunnels a peer participates
1239  * in.
1240  *
1241  * @param cls Closure (tunnel info)
1242  * @param key GNUNET_PeerIdentity of the peer (unused)
1243  * @param value PeerInfo of the peer
1244  *
1245  * @return always GNUNET_YES, to keep iterating
1246  */
1247 static int
1248 peer_info_delete_tunnel (void *cls, const GNUNET_HashCode * key, void *value)
1249 {
1250   struct MeshTunnel *t = cls;
1251   struct MeshPeerInfo *peer = value;
1252   unsigned int i;
1253
1254   for (i = 0; i < peer->ntunnels; i++)
1255   {
1256     if (0 ==
1257         memcmp (&peer->tunnels[i]->id, &t->id, sizeof (struct MESH_TunnelID)))
1258     {
1259       peer->ntunnels--;
1260       peer->tunnels[i] = peer->tunnels[peer->ntunnels];
1261       peer->tunnels = GNUNET_realloc (peer->tunnels, peer->ntunnels);
1262       return GNUNET_YES;
1263     }
1264   }
1265   return GNUNET_YES;
1266 }
1267
1268
1269 /**
1270  * Queue and pass message to core when possible.
1271  *
1272  * @param cls Closure (type dependant).
1273  * @param type Type of the message.
1274  * @param size Size of the message.
1275  * @param dst Neighbor to send message to.
1276  */
1277 static void
1278 queue_add (void *cls, uint16_t type, size_t size, struct MeshPeerInfo *dst);
1279
1280 /**
1281   * Core callback to write a pre-constructed data packet to core buffer
1282   *
1283   * @param cls Closure (MeshTransmissionDescriptor with data in "data" member).
1284   * @param size Number of bytes available in buf.
1285   * @param buf Where the to write the message.
1286   *
1287   * @return number of bytes written to buf
1288   */
1289 static size_t
1290 send_core_data_raw (void *cls, size_t size, void *buf)
1291 {
1292   struct MeshTransmissionDescriptor *info = cls;
1293   struct GNUNET_MessageHeader *msg;
1294   size_t total_size;
1295
1296   GNUNET_assert (NULL != info);
1297   GNUNET_assert (NULL != info->mesh_data);
1298   msg = (struct GNUNET_MessageHeader *) info->mesh_data->data;
1299   total_size = ntohs (msg->size);
1300
1301   if (total_size > size)
1302   {
1303     GNUNET_break (0);
1304     return 0;
1305   }
1306   memcpy (buf, msg, total_size);
1307   GNUNET_free (info->mesh_data);
1308   GNUNET_free (info);
1309   return total_size;
1310 }
1311
1312
1313 /**
1314  * Sends an already built message to a peer, properly registrating
1315  * all used resources.
1316  *
1317  * @param message Message to send. Fucntion makes a copy of it.
1318  * @param peer Short ID of the neighbor whom to send the message.
1319  *
1320  * FIXME tunnel?
1321  */
1322 static void
1323 send_message (const struct GNUNET_MessageHeader *message,
1324               const struct GNUNET_PeerIdentity *peer)
1325 {
1326   struct MeshTransmissionDescriptor *info;
1327   struct MeshPeerInfo *neighbor;
1328   struct MeshPeerPath *p;
1329   size_t size;
1330
1331 //   GNUNET_TRANSPORT_try_connect(); FIXME use?
1332
1333   size = ntohs (message->size);
1334   info = GNUNET_malloc (sizeof (struct MeshTransmissionDescriptor));
1335   info->mesh_data = GNUNET_malloc (sizeof (struct MeshData));
1336   info->mesh_data->data = GNUNET_malloc (size);
1337   memcpy (info->mesh_data->data, message, size);
1338   info->mesh_data->data_len = size;
1339   neighbor = peer_info_get (peer);
1340   for (p = neighbor->path_head; NULL != p; p = p->next)
1341   {
1342     if (2 == p->length)
1343     {
1344       break;
1345     }
1346   }
1347   if (NULL == p)
1348   {
1349     GNUNET_break (0);
1350     GNUNET_free (info->mesh_data->data);
1351     GNUNET_free (info->mesh_data);
1352     GNUNET_free (info);
1353     return;
1354   }
1355   info->peer = neighbor;
1356   queue_add (info,
1357              GNUNET_MESSAGE_TYPE_MESH_UNICAST,
1358              size,
1359              neighbor);
1360 }
1361
1362
1363 /**
1364  * Sends a CREATE PATH message for a path to a peer, properly registrating
1365  * all used resources.
1366  *
1367  * @param peer PeerInfo of the final peer for whom this path is being created.
1368  * @param p Path itself.
1369  * @param t Tunnel for which the path is created.
1370  */
1371 static void
1372 send_create_path (struct MeshPeerInfo *peer, struct MeshPeerPath *p,
1373                   struct MeshTunnel *t)
1374 {
1375   struct GNUNET_PeerIdentity id;
1376   struct MeshPathInfo *path_info;
1377   struct MeshPeerInfo *neighbor;
1378
1379   unsigned int i;
1380
1381   if (NULL == p)
1382   {
1383     p = tree_get_path_to_peer (t->tree, peer->id);
1384     if (NULL == p)
1385     {
1386       GNUNET_break (0);
1387       return;
1388     }
1389   }
1390   for (i = 0; i < p->length; i++)
1391   {
1392     if (p->peers[i] == myid)
1393       break;
1394   }
1395   if (i >= p->length - 1)
1396   {
1397     path_destroy (p);
1398     GNUNET_break (0);
1399     return;
1400   }
1401   GNUNET_PEER_resolve (p->peers[i + 1], &id);
1402
1403   path_info = GNUNET_malloc (sizeof (struct MeshPathInfo));
1404   path_info->path = p;
1405   path_info->t = t;
1406   neighbor = peer_info_get (&id);
1407   path_info->peer = neighbor;
1408   queue_add (path_info,
1409              GNUNET_MESSAGE_TYPE_MESH_PATH_CREATE,
1410              sizeof (struct GNUNET_MESH_ManipulatePath) +
1411                 (p->length * sizeof (struct GNUNET_PeerIdentity)),
1412              neighbor);
1413 }
1414
1415
1416 /**
1417  * Sends a DESTROY PATH message to free resources for a path in a tunnel
1418  *
1419  * @param t Tunnel whose path to destroy.
1420  * @param destination Short ID of the peer to whom the path to destroy.
1421  */
1422 static void
1423 send_destroy_path (struct MeshTunnel *t, GNUNET_PEER_Id destination)
1424 {
1425   struct MeshPeerPath *p;
1426   size_t size;
1427
1428   p = tree_get_path_to_peer (t->tree, destination);
1429   if (NULL == p)
1430   {
1431     GNUNET_break (0);
1432     return;
1433   }
1434   size = sizeof (struct GNUNET_MESH_ManipulatePath);
1435   size += p->length * sizeof (struct GNUNET_PeerIdentity);
1436   {
1437     struct GNUNET_MESH_ManipulatePath *msg;
1438     struct GNUNET_PeerIdentity *pi;
1439     char cbuf[size];
1440     unsigned int i;
1441
1442     msg = (struct GNUNET_MESH_ManipulatePath *) cbuf;
1443     msg->header.size = htons (size);
1444     msg->header.type = htons (GNUNET_MESSAGE_TYPE_MESH_PATH_DESTROY);
1445     msg->tid = htonl (t->id.tid);
1446     pi = (struct GNUNET_PeerIdentity *) &msg[1];
1447     for (i = 0; i < p->length; i++)
1448     {
1449       GNUNET_PEER_resolve (p->peers[i], &pi[i]);
1450     }
1451     send_message (&msg->header, tree_get_first_hop (t->tree, destination));
1452   }
1453   path_destroy (p);
1454 }
1455
1456
1457 /**
1458  * Try to establish a new connection to this peer.
1459  * Use the best path for the given tunnel.
1460  * If the peer doesn't have any path to it yet, try to get one.
1461  * If the peer already has some path, send a CREATE PATH towards it.
1462  *
1463  * @param peer PeerInfo of the peer.
1464  * @param t Tunnel for which to create the path, if possible.
1465  */
1466 static void
1467 peer_info_connect (struct MeshPeerInfo *peer, struct MeshTunnel *t)
1468 {
1469   struct MeshPeerPath *p;
1470   struct MeshPathInfo *path_info;
1471
1472   if (NULL != peer->path_head)
1473   {
1474     p = tree_get_path_to_peer (t->tree, peer->id);
1475     if (NULL == p)
1476     {
1477       GNUNET_break (0);
1478       return;
1479     }
1480
1481     // FIXME always send create path to self
1482     if (p->length > 1)
1483     {
1484       send_create_path (peer, p, t);
1485     }
1486     else
1487     {
1488       GNUNET_HashCode hash;
1489
1490       path_destroy (p);
1491       send_client_peer_connected (t, myid);
1492       t->local_tid_dest = next_local_tid++;
1493       GNUNET_CRYPTO_hash (&t->local_tid_dest, sizeof (MESH_TunnelNumber),
1494                           &hash);
1495       if (GNUNET_OK !=
1496           GNUNET_CONTAINER_multihashmap_put (incoming_tunnels, &hash, t,
1497                                              GNUNET_CONTAINER_MULTIHASHMAPOPTION_UNIQUE_FAST))
1498       {
1499         GNUNET_break (0);
1500         return;
1501       }
1502     }
1503   }
1504   else if (NULL == peer->dhtget)
1505   {
1506     struct GNUNET_PeerIdentity id;
1507
1508     GNUNET_PEER_resolve (peer->id, &id);
1509     path_info = GNUNET_malloc (sizeof (struct MeshPathInfo));
1510     path_info->peer = peer;
1511     path_info->t = t;
1512     GNUNET_log (GNUNET_ERROR_TYPE_DEBUG,
1513                 "  Starting DHT GET for peer %s\n", GNUNET_i2s (&id));
1514     peer->dhtgetcls = path_info;
1515     peer->dhtget = GNUNET_DHT_get_start (dht_handle,    /* handle */
1516                                          GNUNET_BLOCK_TYPE_TEST,        /* type */
1517                                          &id.hashPubKey,        /* key to search */
1518                                          10,     /* replication level */
1519                                          GNUNET_DHT_RO_RECORD_ROUTE | GNUNET_DHT_RO_DEMULTIPLEX_EVERYWHERE, NULL,       /* xquery */
1520                                          0,     /* xquery bits */
1521                                          &dht_get_id_handler, path_info);
1522   }
1523   /* Otherwise, there is no path but the DHT get is already started. */
1524 }
1525
1526
1527 /**
1528  * Task to delay the connection of a peer
1529  *
1530  * @param cls Closure (path info with tunnel and peer to connect).
1531  *            Will be free'd on exection.
1532  * @param tc TaskContext
1533  */
1534 static void
1535 peer_info_connect_task (void *cls,
1536                         const struct GNUNET_SCHEDULER_TaskContext *tc)
1537 {
1538   struct MeshPathInfo *path_info = cls;
1539
1540   if (0 != (GNUNET_SCHEDULER_REASON_SHUTDOWN & tc->reason))
1541   {
1542     GNUNET_free (cls);
1543     return;
1544   }
1545   peer_info_connect (path_info->peer, path_info->t);
1546   GNUNET_free (cls);
1547 }
1548
1549
1550 /**
1551  * Destroy the peer_info and free any allocated resources linked to it
1552  *
1553  * @param pi The peer_info to destroy.
1554  *
1555  * @return GNUNET_OK on success
1556  */
1557 static int
1558 peer_info_destroy (struct MeshPeerInfo *pi)
1559 {
1560   struct GNUNET_PeerIdentity id;
1561   struct MeshPeerPath *p;
1562   struct MeshPeerPath *nextp;
1563
1564   GNUNET_PEER_resolve (pi->id, &id);
1565   GNUNET_PEER_change_rc (pi->id, -1);
1566
1567   if (GNUNET_YES !=
1568       GNUNET_CONTAINER_multihashmap_remove (peers, &id.hashPubKey, pi))
1569   {
1570     GNUNET_break (0);
1571     GNUNET_log (GNUNET_ERROR_TYPE_WARNING,
1572                 "removing peer %s, not in hashmap\n", GNUNET_i2s (&id));
1573   }
1574   if (NULL != pi->dhtget)
1575   {
1576     GNUNET_DHT_get_stop (pi->dhtget);
1577     GNUNET_free (pi->dhtgetcls);
1578   }
1579   p = pi->path_head;
1580   while (NULL != p)
1581   {
1582     nextp = p->next;
1583     GNUNET_CONTAINER_DLL_remove (pi->path_head, pi->path_tail, p);
1584     path_destroy (p);
1585     p = nextp;
1586   }
1587   GNUNET_free (pi);
1588   return GNUNET_OK;
1589 }
1590
1591
1592 /**
1593  * Remove all paths that rely on a direct connection between p1 and p2
1594  * from the peer itself and notify all tunnels about it.
1595  *
1596  * @param peer PeerInfo of affected peer.
1597  * @param p1 GNUNET_PEER_Id of one peer.
1598  * @param p2 GNUNET_PEER_Id of another peer that was connected to the first and
1599  *           no longer is.
1600  *
1601  * TODO: optimize (see below)
1602  */
1603 static void
1604 peer_info_remove_path (struct MeshPeerInfo *peer, GNUNET_PEER_Id p1,
1605                        GNUNET_PEER_Id p2)
1606 {
1607   struct MeshPeerPath *p;
1608   struct MeshPeerPath *aux;
1609   struct MeshPeerInfo *peer_d;
1610   GNUNET_PEER_Id d;
1611   unsigned int destroyed;
1612   unsigned int best;
1613   unsigned int cost;
1614   unsigned int i;
1615
1616   destroyed = 0;
1617   p = peer->path_head;
1618   while (NULL != p)
1619   {
1620     aux = p->next;
1621     for (i = 0; i < (p->length - 1); i++)
1622     {
1623       if ((p->peers[i] == p1 && p->peers[i + 1] == p2) ||
1624           (p->peers[i] == p2 && p->peers[i + 1] == p1))
1625       {
1626         GNUNET_CONTAINER_DLL_remove (peer->path_head, peer->path_tail, p);
1627         path_destroy (p);
1628         destroyed++;
1629         break;
1630       }
1631     }
1632     p = aux;
1633   }
1634   if (0 == destroyed)
1635     return;
1636
1637   for (i = 0; i < peer->ntunnels; i++)
1638   {
1639     d = tunnel_notify_connection_broken (peer->tunnels[i], p1, p2);
1640     if (0 == d)
1641       continue;
1642     /* TODO
1643      * Problem: one or more peers have been deleted from the tunnel tree.
1644      * We don't know who they are to try to add them again.
1645      * We need to try to find a new path for each of the disconnected peers.
1646      * Some of them might already have a path to reach them that does not
1647      * involve p1 and p2. Adding all anew might render in a better tree than
1648      * the trivial immediate fix.
1649      *
1650      * Trivial immiediate fix: try to reconnect to the disconnected node. All
1651      * its children will be reachable trough him.
1652      */
1653     peer_d = peer_info_get_short (d);
1654     best = UINT_MAX;
1655     aux = NULL;
1656     for (p = peer_d->path_head; NULL != p; p = p->next)
1657     {
1658       if ((cost = tree_get_path_cost (peer->tunnels[i]->tree, p)) < best)
1659       {
1660         best = cost;
1661         aux = p;
1662       }
1663     }
1664     if (NULL != aux)
1665     {
1666       /* No callback, as peer will be already disconnected and a connection
1667        * scheduled by tunnel_notify_connection_broken.
1668        */
1669       tree_add_path (peer->tunnels[i]->tree, aux, NULL, NULL);
1670     }
1671     else
1672     {
1673       peer_info_connect (peer_d, peer->tunnels[i]);
1674     }
1675   }
1676 }
1677
1678
1679 /**
1680  * Add the path to the peer and update the path used to reach it in case this
1681  * is the shortest.
1682  *
1683  * @param peer_info Destination peer to add the path to.
1684  * @param path New path to add. Last peer must be the peer in arg 1.
1685  *             Path will be either used of freed if already known.
1686  * @param trusted Do we trust that this path is real?
1687  */
1688 void
1689 peer_info_add_path (struct MeshPeerInfo *peer_info, struct MeshPeerPath *path,
1690                     int trusted)
1691 {
1692   struct MeshPeerPath *aux;
1693   unsigned int l;
1694   unsigned int l2;
1695
1696   if ((NULL == peer_info) || (NULL == path))
1697   {
1698     GNUNET_break (0);
1699     path_destroy (path);
1700     return;
1701   }
1702   if (path->peers[path->length - 1] != peer_info->id)
1703   {
1704     GNUNET_break (0);
1705     path_destroy (path);
1706     return;
1707   }
1708   if (path->length <= 2 && GNUNET_NO == trusted)
1709   {
1710     /* Only allow CORE to tell us about direct paths */
1711     path_destroy (path);
1712     return;
1713   }
1714   GNUNET_assert (peer_info->id == path->peers[path->length - 1]);
1715   for (l = 1; l < path->length; l++)
1716   {
1717     if (path->peers[l] == myid)
1718     {
1719       GNUNET_log (GNUNET_ERROR_TYPE_DEBUG, "shortening path by %u\n", l);
1720       for (l2 = 0; l2 < path->length - l; l2++)
1721       {
1722         path->peers[l2] = path->peers[l + l2];
1723       }
1724       path->length -= l;
1725       l = 1;
1726       path->peers =
1727           GNUNET_realloc (path->peers, path->length * sizeof (GNUNET_PEER_Id));
1728     }
1729   }
1730 #if MESH_DEBUG
1731   {
1732     struct GNUNET_PeerIdentity id;
1733
1734     GNUNET_PEER_resolve (peer_info->id, &id);
1735     GNUNET_log (GNUNET_ERROR_TYPE_DEBUG, "adding path [%u] to peer %s\n",
1736                 path->length, GNUNET_i2s (&id));
1737   }
1738 #endif
1739   l = path_get_length (path);
1740   if (0 == l)
1741   {
1742     GNUNET_free (path);
1743     return;
1744   }
1745
1746   GNUNET_assert (peer_info->id == path->peers[path->length - 1]);
1747   for (aux = peer_info->path_head; aux != NULL; aux = aux->next)
1748   {
1749     l2 = path_get_length (aux);
1750     if (l2 > l)
1751     {
1752       GNUNET_CONTAINER_DLL_insert_before (peer_info->path_head,
1753                                           peer_info->path_tail, aux, path);
1754       return;
1755     }
1756     else
1757     {
1758       if (l2 == l && memcmp (path->peers, aux->peers, l) == 0)
1759       {
1760         path_destroy (path);
1761         return;
1762       }
1763     }
1764   }
1765   GNUNET_CONTAINER_DLL_insert_tail (peer_info->path_head, peer_info->path_tail,
1766                                     path);
1767   return;
1768 }
1769
1770
1771 /**
1772  * Add the path to the origin peer and update the path used to reach it in case
1773  * this is the shortest.
1774  * The path is given in peer_info -> destination, therefore we turn the path
1775  * upside down first.
1776  *
1777  * @param peer_info Peer to add the path to, being the origin of the path.
1778  * @param path New path to add after being inversed.
1779  * @param trusted Do we trust that this path is real?
1780  */
1781 static void
1782 peer_info_add_path_to_origin (struct MeshPeerInfo *peer_info,
1783                               struct MeshPeerPath *path, int trusted)
1784 {
1785   path_invert (path);
1786   peer_info_add_path (peer_info, path, trusted);
1787 }
1788
1789
1790 /**
1791  * Build a PeerPath from the paths returned from the DHT, reversing the paths
1792  * to obtain a local peer -> destination path and interning the peer ids.
1793  *
1794  * @return Newly allocated and created path
1795  */
1796 static struct MeshPeerPath *
1797 path_build_from_dht (const struct GNUNET_PeerIdentity *get_path,
1798                      unsigned int get_path_length,
1799                      const struct GNUNET_PeerIdentity *put_path,
1800                      unsigned int put_path_length)
1801 {
1802   struct MeshPeerPath *p;
1803   GNUNET_PEER_Id id;
1804   int i;
1805
1806   p = path_new (1);
1807   p->peers[0] = myid;
1808   GNUNET_PEER_change_rc (myid, 1);
1809   i = get_path_length;
1810   GNUNET_log (GNUNET_ERROR_TYPE_DEBUG, "   GET has %d hops.\n", i);
1811   for (i--; i >= 0; i--)
1812   {
1813     id = GNUNET_PEER_intern (&get_path[i]);
1814     if (p->length > 0 && id == p->peers[p->length - 1])
1815     {
1816       GNUNET_log (GNUNET_ERROR_TYPE_DEBUG, "   Optimizing 1 hop out.\n");
1817       GNUNET_PEER_change_rc (id, -1);
1818     }
1819     else
1820     {
1821       GNUNET_log (GNUNET_ERROR_TYPE_DEBUG, "   Adding from GET: %s.\n",
1822                   GNUNET_i2s (&get_path[i]));
1823       p->length++;
1824       p->peers = GNUNET_realloc (p->peers, sizeof (GNUNET_PEER_Id) * p->length);
1825       p->peers[p->length - 1] = id;
1826     }
1827   }
1828   i = put_path_length;
1829   GNUNET_log (GNUNET_ERROR_TYPE_DEBUG, "   PUT has %d hops.\n", i);
1830   for (i--; i >= 0; i--)
1831   {
1832     id = GNUNET_PEER_intern (&put_path[i]);
1833     if (id == myid)
1834     {
1835       /* PUT path went through us, so discard the path up until now and start
1836        * from here to get a much shorter (and loop-free) path.
1837        */
1838       path_destroy (p);
1839       p = path_new (0);
1840     }
1841     if (p->length > 0 && id == p->peers[p->length - 1])
1842     {
1843       GNUNET_log (GNUNET_ERROR_TYPE_DEBUG, "   Optimizing 1 hop out.\n");
1844       GNUNET_PEER_change_rc (id, -1);
1845     }
1846     else
1847     {
1848       GNUNET_log (GNUNET_ERROR_TYPE_DEBUG, "   Adding from PUT: %s.\n",
1849                   GNUNET_i2s (&put_path[i]));
1850       p->length++;
1851       p->peers = GNUNET_realloc (p->peers, sizeof (GNUNET_PEER_Id) * p->length);
1852       p->peers[p->length - 1] = id;
1853     }
1854   }
1855 #if MESH_DEBUG
1856   if (get_path_length > 0)
1857     GNUNET_log (GNUNET_ERROR_TYPE_DEBUG, "   (first of GET: %s)\n",
1858                 GNUNET_i2s (&get_path[0]));
1859   if (put_path_length > 0)
1860     GNUNET_log (GNUNET_ERROR_TYPE_DEBUG, "   (first of PUT: %s)\n",
1861                 GNUNET_i2s (&put_path[0]));
1862   GNUNET_log (GNUNET_ERROR_TYPE_DEBUG, "   In total: %d hops\n",
1863               p->length);
1864   for (i = 0; i < p->length; i++)
1865   {
1866     struct GNUNET_PeerIdentity peer_id;
1867
1868     GNUNET_PEER_resolve (p->peers[i], &peer_id);
1869     GNUNET_log (GNUNET_ERROR_TYPE_DEBUG, "       %u: %s\n", p->peers[i],
1870                 GNUNET_i2s (&peer_id));
1871   }
1872 #endif
1873   return p;
1874 }
1875
1876
1877 /**
1878  * Adds a path to the peer_infos of all the peers in the path
1879  *
1880  * @param p Path to process.
1881  * @param confirmed Whether we know if the path works or not. FIXME use
1882  */
1883 static void
1884 path_add_to_peers (struct MeshPeerPath *p, int confirmed)
1885 {
1886   unsigned int i;
1887
1888   /* TODO: invert and add */
1889   for (i = 0; i < p->length && p->peers[i] != myid; i++) /* skip'em */ ;
1890   for (i++; i < p->length; i++)
1891   {
1892     struct MeshPeerInfo *aux;
1893     struct MeshPeerPath *copy;
1894
1895     aux = peer_info_get_short (p->peers[i]);
1896     copy = path_duplicate (p);
1897     copy->length = i + 1;
1898     peer_info_add_path (aux, copy, GNUNET_NO);
1899   }
1900 }
1901
1902
1903 /**
1904  * Send keepalive packets for a peer
1905  *
1906  * @param cls Closure (tunnel for which to send the keepalive).
1907  * @param tc Notification context.
1908  *
1909  * TODO: implement explicit multicast keepalive?
1910  */
1911 static void
1912 path_refresh (void *cls, const struct GNUNET_SCHEDULER_TaskContext *tc);
1913
1914
1915 /**
1916  * Search for a tunnel among the incoming tunnels
1917  *
1918  * @param tid the local id of the tunnel
1919  *
1920  * @return tunnel handler, NULL if doesn't exist
1921  */
1922 static struct MeshTunnel *
1923 tunnel_get_incoming (MESH_TunnelNumber tid)
1924 {
1925   GNUNET_HashCode hash;
1926
1927   GNUNET_assert (tid >= GNUNET_MESH_LOCAL_TUNNEL_ID_SERV);
1928   GNUNET_CRYPTO_hash (&tid, sizeof (MESH_TunnelNumber), &hash);
1929   return GNUNET_CONTAINER_multihashmap_get (incoming_tunnels, &hash);
1930 }
1931
1932
1933 /**
1934  * Search for a tunnel among the tunnels for a client
1935  *
1936  * @param c the client whose tunnels to search in
1937  * @param tid the local id of the tunnel
1938  *
1939  * @return tunnel handler, NULL if doesn't exist
1940  */
1941 static struct MeshTunnel *
1942 tunnel_get_by_local_id (struct MeshClient *c, MESH_TunnelNumber tid)
1943 {
1944   if (tid >= GNUNET_MESH_LOCAL_TUNNEL_ID_SERV)
1945   {
1946     return tunnel_get_incoming (tid);
1947   }
1948   else
1949   {
1950     GNUNET_HashCode hash;
1951
1952     GNUNET_CRYPTO_hash (&tid, sizeof (MESH_TunnelNumber), &hash);
1953     return GNUNET_CONTAINER_multihashmap_get (c->own_tunnels, &hash);
1954   }
1955 }
1956
1957
1958 /**
1959  * Search for a tunnel by global ID using PEER_ID
1960  *
1961  * @param pi owner of the tunnel
1962  * @param tid global tunnel number
1963  *
1964  * @return tunnel handler, NULL if doesn't exist
1965  */
1966 static struct MeshTunnel *
1967 tunnel_get_by_pi (GNUNET_PEER_Id pi, MESH_TunnelNumber tid)
1968 {
1969   struct MESH_TunnelID id;
1970   GNUNET_HashCode hash;
1971
1972   id.oid = pi;
1973   id.tid = tid;
1974
1975   GNUNET_CRYPTO_hash (&id, sizeof (struct MESH_TunnelID), &hash);
1976   return GNUNET_CONTAINER_multihashmap_get (tunnels, &hash);
1977 }
1978
1979
1980 /**
1981  * Search for a tunnel by global ID using full PeerIdentities
1982  *
1983  * @param oid owner of the tunnel
1984  * @param tid global tunnel number
1985  *
1986  * @return tunnel handler, NULL if doesn't exist
1987  */
1988 static struct MeshTunnel *
1989 tunnel_get (struct GNUNET_PeerIdentity *oid, MESH_TunnelNumber tid)
1990 {
1991   return tunnel_get_by_pi (GNUNET_PEER_search (oid), tid);
1992 }
1993
1994
1995 /**
1996  * Delete an active client from the tunnel.
1997  * 
1998  * @param t Tunnel.
1999  * @param c Client.
2000  */
2001 static void
2002 tunnel_delete_active_client (struct MeshTunnel *t, const struct MeshClient *c)
2003 {
2004   unsigned int i;
2005
2006   for (i = 0; i < t->nclients; i++)
2007   {
2008     if (t->clients[i] == c)
2009     {
2010       t->clients[i] = t->clients[t->nclients - 1];
2011       GNUNET_array_grow (t->clients, t->nclients, t->nclients - 1);
2012       break;
2013     }
2014   }
2015 }
2016
2017
2018 /**
2019  * Delete an ignored client from the tunnel.
2020  * 
2021  * @param t Tunnel.
2022  * @param c Client.
2023  */
2024 static void
2025 tunnel_delete_ignored_client (struct MeshTunnel *t, const struct MeshClient *c)
2026 {
2027   unsigned int i;
2028
2029   for (i = 0; i < t->nignore; i++)
2030   {
2031     if (t->ignore[i] == c)
2032     {
2033       t->ignore[i] = t->ignore[t->nignore - 1];
2034       GNUNET_array_grow (t->ignore, t->nignore, t->nignore - 1);
2035       break;
2036     }
2037   }
2038 }
2039
2040
2041 /**
2042  * Delete a client from the tunnel. It should be only done on
2043  * client disconnection, otherwise use client_ignore_tunnel.
2044  * 
2045  * @param t Tunnel.
2046  * @param c Client.
2047  */
2048 static void
2049 tunnel_delete_client (struct MeshTunnel *t, const struct MeshClient *c)
2050 {
2051   tunnel_delete_ignored_client (t, c);
2052   tunnel_delete_active_client (t, c);
2053 }
2054
2055
2056 /**
2057  * Callback used to notify a client owner of a tunnel that a peer has
2058  * disconnected, most likely because of a path change.
2059  *
2060  * @param cls Closure (tunnel this notification is about).
2061  * @param peer_id Short ID of disconnected peer.
2062  */
2063 void
2064 notify_peer_disconnected (void *cls, GNUNET_PEER_Id peer_id)
2065 {
2066   struct MeshTunnel *t = cls;
2067   struct MeshPeerInfo *peer;
2068   struct MeshPathInfo *path_info;
2069
2070   if (NULL != t->owner && NULL != nc)
2071   {
2072     struct GNUNET_MESH_PeerControl msg;
2073
2074     msg.header.size = htons (sizeof (msg));
2075     msg.header.type = htons (GNUNET_MESSAGE_TYPE_MESH_LOCAL_PEER_DEL);
2076     msg.tunnel_id = htonl (t->local_tid);
2077     GNUNET_PEER_resolve (peer_id, &msg.peer);
2078     GNUNET_SERVER_notification_context_unicast (nc, t->owner->handle,
2079                                                 &msg.header, GNUNET_NO);
2080   }
2081   peer = peer_info_get_short (peer_id);
2082   path_info = GNUNET_malloc (sizeof (struct MeshPathInfo));
2083   path_info->peer = peer;
2084   path_info->t = t;
2085   GNUNET_SCHEDULER_add_now (&peer_info_connect_task, path_info);
2086 }
2087
2088
2089 /**
2090  * Add a peer to a tunnel, accomodating paths accordingly and initializing all
2091  * needed rescources.
2092  * If peer already exists, reevaluate shortest path and change if different.
2093  *
2094  * @param t Tunnel we want to add a new peer to
2095  * @param peer PeerInfo of the peer being added
2096  *
2097  */
2098 static void
2099 tunnel_add_peer (struct MeshTunnel *t, struct MeshPeerInfo *peer)
2100 {
2101   struct GNUNET_PeerIdentity id;
2102   struct MeshPeerPath *best_p;
2103   struct MeshPeerPath *p;
2104   unsigned int best_cost;
2105   unsigned int cost;
2106
2107   GNUNET_PEER_resolve (peer->id, &id);
2108   if (GNUNET_NO ==
2109       GNUNET_CONTAINER_multihashmap_contains (t->peers, &id.hashPubKey))
2110   {
2111     t->peers_total++;
2112     GNUNET_array_append (peer->tunnels, peer->ntunnels, t);
2113     GNUNET_assert (GNUNET_OK ==
2114                    GNUNET_CONTAINER_multihashmap_put (t->peers, &id.hashPubKey,
2115                                                       peer,
2116                                                       GNUNET_CONTAINER_MULTIHASHMAPOPTION_UNIQUE_FAST));
2117   }
2118
2119   if (NULL != (p = peer->path_head))
2120   {
2121     best_p = p;
2122     best_cost = tree_get_path_cost (t->tree, p);
2123     while (NULL != p)
2124     {
2125       if ((cost = tree_get_path_cost (t->tree, p)) < best_cost)
2126       {
2127         best_cost = cost;
2128         best_p = p;
2129       }
2130       p = p->next;
2131     }
2132     tree_add_path (t->tree, best_p, &notify_peer_disconnected, t);
2133     if (GNUNET_SCHEDULER_NO_TASK == t->path_refresh_task)
2134       t->path_refresh_task =
2135           GNUNET_SCHEDULER_add_delayed (REFRESH_PATH_TIME, &path_refresh, t);
2136   }
2137   else
2138   {
2139     /* Start a DHT get */
2140     peer_info_connect (peer, t);
2141   }
2142 }
2143
2144 /**
2145  * Add a path to a tunnel which we don't own, just to remember the next hop.
2146  * If destination node was already in the tunnel, the first hop information
2147  * will be replaced with the new path.
2148  *
2149  * @param t Tunnel we want to add a new peer to
2150  * @param p Path to add
2151  * @param own_pos Position of local node in path.
2152  *
2153  */
2154 static void
2155 tunnel_add_path (struct MeshTunnel *t, struct MeshPeerPath *p,
2156                  unsigned int own_pos)
2157 {
2158   struct GNUNET_PeerIdentity id;
2159
2160   GNUNET_assert (0 != own_pos);
2161   tree_add_path (t->tree, p, NULL, NULL);
2162   if (own_pos < p->length - 1)
2163   {
2164     GNUNET_PEER_resolve (p->peers[own_pos + 1], &id);
2165     tree_update_first_hops (t->tree, myid, &id);
2166   }
2167 }
2168
2169
2170 /**
2171  * Notifies a tunnel that a connection has broken that affects at least
2172  * some of its peers. Sends a notification towards the root of the tree.
2173  * In case the peer is the owner of the tree, notifies the client that owns
2174  * the tunnel and tries to reconnect.
2175  *
2176  * @param t Tunnel affected.
2177  * @param p1 Peer that got disconnected from p2.
2178  * @param p2 Peer that got disconnected from p1.
2179  *
2180  * @return Short ID of the peer disconnected (either p1 or p2).
2181  *         0 if the tunnel remained unaffected.
2182  */
2183 static GNUNET_PEER_Id
2184 tunnel_notify_connection_broken (struct MeshTunnel *t, GNUNET_PEER_Id p1,
2185                                  GNUNET_PEER_Id p2)
2186 {
2187   GNUNET_PEER_Id pid;
2188
2189   pid =
2190       tree_notify_connection_broken (t->tree, p1, p2, &notify_peer_disconnected,
2191                                      t);
2192   if (myid != p1 && myid != p2)
2193   {
2194     return pid;
2195   }
2196   if (pid != myid)
2197   {
2198     if (tree_get_predecessor (t->tree) != 0)
2199     {
2200       /* We are the peer still connected, notify owner of the disconnection. */
2201       struct GNUNET_MESH_PathBroken msg;
2202       struct GNUNET_PeerIdentity neighbor;
2203
2204       msg.header.size = htons (sizeof (msg));
2205       msg.header.type = htons (GNUNET_MESSAGE_TYPE_MESH_PATH_BROKEN);
2206       GNUNET_PEER_resolve (t->id.oid, &msg.oid);
2207       msg.tid = htonl (t->id.tid);
2208       msg.peer1 = my_full_id;
2209       GNUNET_PEER_resolve (pid, &msg.peer2);
2210       GNUNET_PEER_resolve (tree_get_predecessor (t->tree), &neighbor);
2211       send_message (&msg.header, &neighbor);
2212     }
2213   }
2214   return pid;
2215 }
2216
2217
2218 /**
2219  * Send a multicast packet to a neighbor.
2220  *
2221  * @param cls Closure (Info about the multicast packet)
2222  * @param neighbor_id Short ID of the neighbor to send the packet to.
2223  */
2224 static void
2225 tunnel_send_multicast_iterator (void *cls, GNUNET_PEER_Id neighbor_id)
2226 {
2227   struct MeshData *mdata = cls;
2228   struct MeshTransmissionDescriptor *info;
2229   struct GNUNET_PeerIdentity neighbor;
2230
2231   info = GNUNET_malloc (sizeof (struct MeshTransmissionDescriptor));
2232
2233   info->mesh_data = mdata;
2234   (*(mdata->reference_counter)) ++;
2235   info->destination = neighbor_id;
2236   GNUNET_PEER_resolve (neighbor_id, &neighbor);
2237   GNUNET_log (GNUNET_ERROR_TYPE_DEBUG, "   sending to %s...\n",
2238               GNUNET_i2s (&neighbor));
2239   info->peer = peer_info_get (&neighbor);
2240   GNUNET_assert (NULL != info->peer);
2241   queue_add(info,
2242             GNUNET_MESSAGE_TYPE_MESH_MULTICAST,
2243             info->mesh_data->data_len,
2244             info->peer
2245            );
2246 }
2247
2248 /**
2249  * Send a message in a tunnel in multicast, sending a copy to each child node
2250  * down the local one in the tunnel tree.
2251  *
2252  * @param t Tunnel in which to send the data.
2253  * @param msg Message to be sent.
2254  * @param internal Has the service generated this message?
2255  */
2256 static void
2257 tunnel_send_multicast (struct MeshTunnel *t,
2258                        const struct GNUNET_MessageHeader *msg,
2259                        int internal)
2260 {
2261   struct MeshData *mdata;
2262
2263   GNUNET_log (GNUNET_ERROR_TYPE_DEBUG,
2264               " sending a multicast packet...\n");
2265   mdata = GNUNET_malloc (sizeof (struct MeshData));
2266   mdata->data_len = ntohs (msg->size);
2267   mdata->reference_counter = GNUNET_malloc (sizeof (unsigned int));
2268   mdata->t = t;
2269   mdata->data = GNUNET_malloc (mdata->data_len);
2270   memcpy (mdata->data, msg, mdata->data_len);
2271   if (ntohs (msg->type) == GNUNET_MESSAGE_TYPE_MESH_MULTICAST)
2272   {
2273     struct GNUNET_MESH_Multicast *mcast;
2274
2275     mcast = (struct GNUNET_MESH_Multicast *) mdata->data;
2276     mcast->ttl = htonl (ntohl (mcast->ttl) - 1);
2277     GNUNET_log (GNUNET_ERROR_TYPE_DEBUG, "  data packet, ttl: %u\n",
2278                 ntohl (mcast->ttl));
2279   }
2280   else
2281   {
2282     GNUNET_log (GNUNET_ERROR_TYPE_DEBUG, "  not a data packet, no ttl\n");
2283   }
2284   if (NULL != t->owner && GNUNET_YES != t->owner->shutting_down
2285       && GNUNET_NO == internal)
2286   {
2287     mdata->task = GNUNET_malloc (sizeof (GNUNET_SCHEDULER_TaskIdentifier));
2288     (*(mdata->task)) =
2289         GNUNET_SCHEDULER_add_delayed (UNACKNOWLEDGED_WAIT, &client_allow_send,
2290                                       mdata);
2291     GNUNET_log (GNUNET_ERROR_TYPE_DEBUG, "timeout task %u\n",
2292                 *(mdata->task));
2293   }
2294
2295   tree_iterate_children (t->tree, &tunnel_send_multicast_iterator, mdata);
2296   if (*(mdata->reference_counter) == 0)
2297   {
2298     GNUNET_free (mdata->data);
2299     GNUNET_free (mdata->reference_counter);
2300     if (NULL != mdata->task)
2301     {
2302       GNUNET_SCHEDULER_cancel(*(mdata->task));
2303       GNUNET_free (mdata->task);
2304       GNUNET_SERVER_receive_done(t->owner->handle, GNUNET_OK);
2305     }
2306     // FIXME change order?
2307     GNUNET_free (mdata);
2308   }
2309   GNUNET_log (GNUNET_ERROR_TYPE_DEBUG,
2310               " sending a multicast packet done\n");
2311   return;
2312 }
2313
2314
2315 /**
2316  * Send a message to all peers in this tunnel that the tunnel is no longer
2317  * valid.
2318  *
2319  * @param t The tunnel whose peers to notify.
2320  */
2321 static void
2322 tunnel_send_destroy (struct MeshTunnel *t)
2323 {
2324   struct GNUNET_MESH_TunnelDestroy msg;
2325
2326   msg.header.size = htons (sizeof (msg));
2327   msg.header.type = htons (GNUNET_MESSAGE_TYPE_MESH_TUNNEL_DESTROY);
2328   GNUNET_PEER_resolve (t->id.oid, &msg.oid);
2329   msg.tid = htonl (t->id.tid);
2330   tunnel_send_multicast (t, &msg.header, GNUNET_NO);
2331 }
2332
2333
2334
2335 /**
2336  * Destroy the tunnel and free any allocated resources linked to it.
2337  *
2338  * @param t the tunnel to destroy
2339  *
2340  * @return GNUNET_OK on success
2341  */
2342 static int
2343 tunnel_destroy (struct MeshTunnel *t)
2344 {
2345   struct MeshClient *c;
2346   struct MeshQueue *q;
2347   struct MeshQueue *qn;
2348   GNUNET_HashCode hash;
2349   unsigned int i;
2350   int r;
2351
2352   if (NULL == t)
2353     return GNUNET_OK;
2354
2355   r = GNUNET_OK;
2356   c = t->owner;
2357 #if MESH_DEBUG
2358   {
2359     struct GNUNET_PeerIdentity id;
2360
2361     GNUNET_PEER_resolve (t->id.oid, &id);
2362     GNUNET_log (GNUNET_ERROR_TYPE_DEBUG, "destroying tunnel %s [%x]\n",
2363                 GNUNET_i2s (&id), t->id.tid);
2364     if (NULL != c)
2365       GNUNET_log (GNUNET_ERROR_TYPE_DEBUG, "  by client %u\n", c->id);
2366   }
2367 #endif
2368
2369   GNUNET_CRYPTO_hash (&t->id, sizeof (struct MESH_TunnelID), &hash);
2370   if (GNUNET_YES != GNUNET_CONTAINER_multihashmap_remove (tunnels, &hash, t))
2371   {
2372     r = GNUNET_SYSERR;
2373   }
2374
2375   GNUNET_CRYPTO_hash (&t->local_tid, sizeof (MESH_TunnelNumber), &hash);
2376   if (NULL != c &&
2377       GNUNET_YES !=
2378       GNUNET_CONTAINER_multihashmap_remove (c->own_tunnels, &hash, t))
2379   {
2380     r = GNUNET_SYSERR;
2381   }
2382   GNUNET_CRYPTO_hash (&t->local_tid_dest, sizeof (MESH_TunnelNumber), &hash);
2383   for (i = 0; i < t->nclients; i++)
2384   {
2385     c = t->clients[i];
2386     if (GNUNET_YES !=
2387           GNUNET_CONTAINER_multihashmap_remove (c->incoming_tunnels, &hash, t))
2388     {
2389       r = GNUNET_SYSERR;
2390     }
2391   }
2392   for (i = 0; i < t->nignore; i++)
2393   {
2394     c = t->ignore[i];
2395     if (GNUNET_YES !=
2396           GNUNET_CONTAINER_multihashmap_remove (c->ignore_tunnels, &hash, t))
2397     {
2398       r = GNUNET_SYSERR;
2399     }
2400   }
2401   if (t->nclients > 0)
2402   {
2403     if (GNUNET_YES !=
2404         GNUNET_CONTAINER_multihashmap_remove (incoming_tunnels, &hash, t))
2405     {
2406       r = GNUNET_SYSERR;
2407     }
2408     GNUNET_free (t->clients);
2409   }
2410   if (NULL != t->peers)
2411   {
2412     GNUNET_CONTAINER_multihashmap_iterate (t->peers, &peer_info_delete_tunnel,
2413                                            t);
2414     GNUNET_CONTAINER_multihashmap_destroy (t->peers);
2415   }
2416   q = t->queue_head;
2417   while (NULL != q)
2418   {
2419     if (NULL != q->data)
2420       GNUNET_free (q->data);
2421     qn = q->next;
2422     GNUNET_free (q);
2423     q = qn;
2424     /* TODO cancel core transmit ready in case it was active */
2425   }
2426   tree_destroy (t->tree);
2427   if (NULL != t->dht_get_type)
2428     GNUNET_DHT_get_stop (t->dht_get_type);
2429   if (GNUNET_SCHEDULER_NO_TASK != t->timeout_task)
2430     GNUNET_SCHEDULER_cancel (t->timeout_task);
2431   if (GNUNET_SCHEDULER_NO_TASK != t->path_refresh_task)
2432     GNUNET_SCHEDULER_cancel (t->path_refresh_task);
2433   GNUNET_free (t);
2434   return r;
2435 }
2436
2437
2438 /**
2439  * Removes an explicit path from a tunnel, freeing all intermediate nodes
2440  * that are no longer needed, as well as nodes of no longer reachable peers.
2441  * The tunnel itself is also destoyed if results in a remote empty tunnel.
2442  *
2443  * @param t Tunnel from which to remove the path.
2444  * @param peer Short id of the peer which should be removed.
2445  */
2446 static void
2447 tunnel_delete_peer (struct MeshTunnel *t, GNUNET_PEER_Id peer)
2448 {
2449   if (GNUNET_NO == tree_del_peer (t->tree, peer, NULL, NULL))
2450     tunnel_destroy (t);
2451 }
2452
2453
2454 /**
2455  * tunnel_destroy_iterator: iterator for deleting each tunnel that belongs to a
2456  * client when the client disconnects. If the client is not the owner, the
2457  * owner will get notified if no more clients are in the tunnel and the client
2458  * get removed from the tunnel's list.
2459  *
2460  * @param cls closure (client that is disconnecting)
2461  * @param key the hash of the local tunnel id (used to access the hashmap)
2462  * @param value the value stored at the key (tunnel to destroy)
2463  *
2464  * @return GNUNET_OK on success
2465  */
2466 static int
2467 tunnel_destroy_iterator (void *cls, const GNUNET_HashCode * key, void *value)
2468 {
2469   struct MeshTunnel *t = value;
2470   struct MeshClient *c = cls;
2471   int r;
2472
2473   send_client_tunnel_disconnect(t, c);
2474   if (c != t->owner)
2475   {
2476     GNUNET_log (GNUNET_ERROR_TYPE_DEBUG,
2477                 "Client %u is destination, keeping the tunnel alive.\n", c->id);
2478     tunnel_delete_client(t, c);
2479     client_delete_tunnel(c, t);
2480     return GNUNET_OK;
2481   }
2482   tunnel_send_destroy(t);
2483   r = tunnel_destroy (t);
2484   return r;
2485 }
2486
2487
2488 /**
2489  * Timeout function, destroys tunnel if called
2490  *
2491  * @param cls Closure (tunnel to destroy).
2492  * @param tc TaskContext
2493  */
2494 static void
2495 tunnel_timeout (void *cls, const struct GNUNET_SCHEDULER_TaskContext *tc)
2496 {
2497   struct MeshTunnel *t = cls;
2498
2499   if (GNUNET_SCHEDULER_REASON_SHUTDOWN == tc->reason)
2500     return;
2501   t->timeout_task = GNUNET_SCHEDULER_NO_TASK;
2502   tunnel_destroy (t);
2503 }
2504
2505 /**
2506  * Resets the tunnel timeout. Starts it if no timeout was running.
2507  *
2508  * @param t Tunnel whose timeout to reset.
2509  */
2510 static void
2511 tunnel_reset_timeout (struct MeshTunnel *t)
2512 {
2513   if (GNUNET_SCHEDULER_NO_TASK != t->timeout_task)
2514     GNUNET_SCHEDULER_cancel (t->timeout_task);
2515   t->timeout_task =
2516       GNUNET_SCHEDULER_add_delayed (GNUNET_TIME_relative_multiply
2517                                     (REFRESH_PATH_TIME, 4), &tunnel_timeout, t);
2518 }
2519
2520
2521 /******************************************************************************/
2522 /****************      MESH NETWORK HANDLER HELPERS     ***********************/
2523 /******************************************************************************/
2524
2525 /**
2526  * Function to send a create path packet to a peer.
2527  *
2528  * @param cls closure
2529  * @param size number of bytes available in buf
2530  * @param buf where the callee should write the message
2531  * @return number of bytes written to buf
2532  */
2533 static size_t
2534 send_core_path_create (void *cls, size_t size, void *buf)
2535 {
2536   struct MeshPathInfo *info = cls;
2537   struct GNUNET_MESH_ManipulatePath *msg;
2538   struct GNUNET_PeerIdentity *peer_ptr;
2539   struct MeshTunnel *t = info->t;
2540   struct MeshPeerPath *p = info->path;
2541   size_t size_needed;
2542   int i;
2543
2544   GNUNET_log (GNUNET_ERROR_TYPE_DEBUG, "CREATE PATH sending...\n");
2545   size_needed =
2546       sizeof (struct GNUNET_MESH_ManipulatePath) +
2547       p->length * sizeof (struct GNUNET_PeerIdentity);
2548
2549   if (size < size_needed || NULL == buf)
2550   {
2551     GNUNET_break (0);
2552     return 0;
2553   }
2554   msg = (struct GNUNET_MESH_ManipulatePath *) buf;
2555   msg->header.size = htons (size_needed);
2556   msg->header.type = htons (GNUNET_MESSAGE_TYPE_MESH_PATH_CREATE);
2557   msg->tid = ntohl (t->id.tid);
2558
2559   peer_ptr = (struct GNUNET_PeerIdentity *) &msg[1];
2560   for (i = 0; i < p->length; i++)
2561   {
2562     GNUNET_PEER_resolve (p->peers[i], peer_ptr++);
2563   }
2564
2565   path_destroy (p);
2566   GNUNET_free (info);
2567
2568   GNUNET_log (GNUNET_ERROR_TYPE_DEBUG,
2569               "CREATE PATH (%u bytes long) sent!\n", size_needed);
2570   return size_needed;
2571 }
2572
2573
2574 /**
2575  * Fill the core buffer 
2576  *
2577  * @param cls closure (data itself)
2578  * @param size number of bytes available in buf
2579  * @param buf where the callee should write the message
2580  *
2581  * @return number of bytes written to buf
2582  */
2583 static size_t
2584 send_core_data_multicast (void *cls, size_t size, void *buf)
2585 {
2586   struct MeshTransmissionDescriptor *info = cls;
2587   size_t total_size;
2588
2589   GNUNET_log (GNUNET_ERROR_TYPE_DEBUG, "Multicast callback.\n");
2590   GNUNET_assert (NULL != info);
2591   GNUNET_assert (NULL != info->peer);
2592   total_size = info->mesh_data->data_len;
2593   GNUNET_assert (total_size < GNUNET_SERVER_MAX_MESSAGE_SIZE);
2594
2595   if (total_size > size)
2596   {
2597     GNUNET_break (0);
2598     return 0;
2599   }
2600   GNUNET_log (GNUNET_ERROR_TYPE_DEBUG, " copying data...\n");
2601   memcpy (buf, info->mesh_data->data, total_size);
2602 #if MESH_DEBUG
2603   {
2604     struct GNUNET_MESH_Multicast *mc;
2605     struct GNUNET_MessageHeader *mh;
2606
2607     mh = buf;
2608     if (ntohs (mh->type) == GNUNET_MESSAGE_TYPE_MESH_MULTICAST)
2609     {
2610       mc = (struct GNUNET_MESH_Multicast *) mh;
2611       mh = (struct GNUNET_MessageHeader *) &mc[1];
2612       GNUNET_log (GNUNET_ERROR_TYPE_DEBUG,
2613                   " multicast, payload type %u\n", ntohs (mh->type));
2614       GNUNET_log (GNUNET_ERROR_TYPE_DEBUG,
2615                   " multicast, payload size %u\n", ntohs (mh->size));
2616     }
2617     else
2618     {
2619       GNUNET_log (GNUNET_ERROR_TYPE_DEBUG, " type %u\n",
2620                   ntohs (mh->type));
2621     }
2622   }
2623 #endif
2624   data_descriptor_decrement_multicast (info->mesh_data);
2625   GNUNET_log (GNUNET_ERROR_TYPE_DEBUG, "freeing info...\n");
2626   GNUNET_free (info);
2627   GNUNET_log (GNUNET_ERROR_TYPE_DEBUG, "return %u\n", total_size);
2628   return total_size;
2629 }
2630
2631
2632 /**
2633  * Creates a path ack message in buf and frees all unused resources.
2634  *
2635  * @param cls closure (MeshTransmissionDescriptor)
2636  * @param size number of bytes available in buf
2637  * @param buf where the callee should write the message
2638  * @return number of bytes written to buf
2639  */
2640 static size_t
2641 send_core_path_ack (void *cls, size_t size, void *buf)
2642 {
2643   struct MeshTransmissionDescriptor *info = cls;
2644   struct GNUNET_MESH_PathACK *msg = buf;
2645
2646   GNUNET_assert (NULL != info);
2647   if (sizeof (struct GNUNET_MESH_PathACK) > size)
2648   {
2649     GNUNET_break (0);
2650     return 0;
2651   }
2652   msg->header.size = htons (sizeof (struct GNUNET_MESH_PathACK));
2653   msg->header.type = htons (GNUNET_MESSAGE_TYPE_MESH_PATH_ACK);
2654   GNUNET_PEER_resolve (info->origin->oid, &msg->oid);
2655   msg->tid = htonl (info->origin->tid);
2656   msg->peer_id = my_full_id;
2657
2658   GNUNET_free (info);
2659   /* TODO add signature */
2660
2661   GNUNET_log (GNUNET_ERROR_TYPE_DEBUG, "PATH ACK sent!\n");
2662   return sizeof (struct GNUNET_MESH_PathACK);
2663 }
2664
2665
2666 /**
2667  * Free a transmission that was already queued with all resources
2668  * associated to the request.
2669  *
2670  * @param queue Queue handler to cancel.
2671  * @param clear_cls Is it necessary to free associated cls?
2672  */
2673 static void
2674 queue_destroy (struct MeshPeerQueue *queue, int clear_cls)
2675 {
2676   struct MeshTransmissionDescriptor *dd;
2677   struct MeshPathInfo *path_info;
2678   struct MeshPeerInfo *peer;
2679
2680   peer = queue->peer;
2681   if (GNUNET_YES == clear_cls)
2682   {
2683     switch (queue->type)
2684     {
2685     case GNUNET_MESSAGE_TYPE_MESH_UNICAST:
2686     case GNUNET_MESSAGE_TYPE_MESH_TO_ORIGIN:
2687     case GNUNET_MESSAGE_TYPE_MESH_MULTICAST:
2688         GNUNET_log (GNUNET_ERROR_TYPE_DEBUG, "   type payload\n");
2689         dd = queue->cls;
2690         data_descriptor_decrement_multicast (dd->mesh_data);
2691         break;
2692     case GNUNET_MESSAGE_TYPE_MESH_PATH_CREATE:
2693         GNUNET_log (GNUNET_ERROR_TYPE_DEBUG, "   type create path\n");
2694         path_info = queue->cls;
2695         path_destroy (path_info->path);
2696         break;
2697     default:
2698         GNUNET_break (0);
2699         GNUNET_log (GNUNET_ERROR_TYPE_DEBUG, "   type unknown!\n");
2700     }
2701     GNUNET_free_non_null (queue->cls);
2702   }
2703   GNUNET_CONTAINER_DLL_remove (peer->queue_head, peer->queue_tail, queue);
2704   GNUNET_free(queue);
2705 }
2706
2707
2708 /**
2709   * Core callback to write a queued packet to core buffer
2710   *
2711   * @param cls Closure (peer info).
2712   * @param size Number of bytes available in buf.
2713   * @param buf Where the to write the message.
2714   *
2715   * @return number of bytes written to buf
2716   */
2717 static size_t
2718 queue_send (void *cls, size_t size, void *buf)
2719 {
2720     struct MeshPeerInfo *peer = cls;
2721     struct MeshPeerQueue *queue;
2722     size_t data_size;
2723
2724     peer->core_transmit = NULL;
2725     queue = peer->queue_head;
2726
2727     /* If queue is empty, send should have been cancelled */
2728     if (NULL == queue)
2729     {
2730         GNUNET_break(0);
2731         return 0;
2732     }
2733
2734     /* Check if buffer size is enough for the message */
2735     if (queue->size < size)
2736     {
2737         struct GNUNET_PeerIdentity id;
2738
2739         GNUNET_PEER_resolve (peer->id, &id);
2740         peer->core_transmit =
2741             GNUNET_CORE_notify_transmit_ready(core_handle,
2742                                               0,
2743                                               0,
2744                                               GNUNET_TIME_UNIT_FOREVER_REL,
2745                                               &id,
2746                                               queue->size,
2747                                               &queue_send,
2748                                               peer);
2749         return 0;
2750     }
2751
2752     /* Fill buf */
2753     switch (queue->type)
2754     {
2755         case GNUNET_MESSAGE_TYPE_MESH_UNICAST:
2756             data_size = send_core_data_raw (queue->cls, size, buf);
2757             break;
2758         case GNUNET_MESSAGE_TYPE_MESH_MULTICAST:
2759             data_size = send_core_data_multicast(queue->cls, size, buf);
2760             break;
2761         case GNUNET_MESSAGE_TYPE_MESH_TO_ORIGIN:
2762             data_size = 0;
2763             break;
2764         case GNUNET_MESSAGE_TYPE_MESH_PATH_CREATE:
2765             data_size = send_core_path_create(queue->cls, size, buf);
2766             break;
2767         case GNUNET_MESSAGE_TYPE_MESH_PATH_ACK:
2768             data_size = send_core_path_ack(queue->cls, size, buf);
2769             break;
2770         default:
2771             GNUNET_break (0);
2772             GNUNET_log (GNUNET_ERROR_TYPE_DEBUG, "   type unknown!\n");
2773             data_size = 0;
2774     }
2775
2776     /* Free queue, but cls was freed by send_core_* */
2777     queue_destroy(queue, GNUNET_NO);
2778
2779     /* If more data in queue, send next */
2780     if (NULL != peer->queue_head)
2781     {
2782         struct GNUNET_PeerIdentity id;
2783
2784         GNUNET_PEER_resolve (peer->id, &id);
2785         peer->core_transmit =
2786             GNUNET_CORE_notify_transmit_ready(core_handle,
2787                                               0,
2788                                               0,
2789                                               GNUNET_TIME_UNIT_FOREVER_REL,
2790                                               &id,
2791                                               peer->queue_head->size,
2792                                               &queue_send,
2793                                               peer);
2794     }
2795     return data_size;
2796 }
2797
2798
2799 /**
2800  * Queue and pass message to core when possible.
2801  *
2802  * @param cls Closure (type dependant).
2803  * @param type Type of the message.
2804  * @param size Size of the message.
2805  * @param dst Neighbor to send message to.
2806  */
2807 static void
2808 queue_add (void *cls, uint16_t type, size_t size, struct MeshPeerInfo *dst)
2809 {
2810     struct MeshPeerQueue *queue;
2811
2812     queue = GNUNET_malloc (sizeof (struct MeshPeerQueue));
2813     queue->cls = cls;
2814     queue->type = type;
2815     queue->size = size;
2816     queue->peer = dst;
2817     GNUNET_CONTAINER_DLL_insert_tail (dst->queue_head, dst->queue_tail, queue);
2818     if (NULL == dst->core_transmit)
2819     {
2820         struct GNUNET_PeerIdentity id;
2821
2822         GNUNET_PEER_resolve (dst->id, &id);
2823         dst->core_transmit =
2824             GNUNET_CORE_notify_transmit_ready(core_handle,
2825                                               0,
2826                                               0,
2827                                               GNUNET_TIME_UNIT_FOREVER_REL,
2828                                               &id,
2829                                               size,
2830                                               &queue_send,
2831                                               dst);
2832     }
2833 }
2834
2835
2836 /******************************************************************************/
2837 /********************      MESH NETWORK HANDLERS     **************************/
2838 /******************************************************************************/
2839
2840
2841 /**
2842  * Core handler for path creation
2843  *
2844  * @param cls closure
2845  * @param message message
2846  * @param peer peer identity this notification is about
2847  * @param atsi performance data
2848  * @param atsi_count number of records in 'atsi'
2849  *
2850  * @return GNUNET_OK to keep the connection open,
2851  *         GNUNET_SYSERR to close it (signal serious error)
2852  */
2853 static int
2854 handle_mesh_path_create (void *cls, const struct GNUNET_PeerIdentity *peer,
2855                          const struct GNUNET_MessageHeader *message,
2856                          const struct GNUNET_ATS_Information *atsi,
2857                          unsigned int atsi_count)
2858 {
2859   unsigned int own_pos;
2860   uint16_t size;
2861   uint16_t i;
2862   MESH_TunnelNumber tid;
2863   struct GNUNET_MESH_ManipulatePath *msg;
2864   struct GNUNET_PeerIdentity *pi;
2865   GNUNET_HashCode hash;
2866   struct MeshPeerPath *path;
2867   struct MeshPeerInfo *dest_peer_info;
2868   struct MeshPeerInfo *orig_peer_info;
2869   struct MeshTunnel *t;
2870
2871   GNUNET_log (GNUNET_ERROR_TYPE_DEBUG,
2872               "Received a path create msg [%s]\n",
2873               GNUNET_i2s (&my_full_id));
2874   size = ntohs (message->size);
2875   if (size < sizeof (struct GNUNET_MESH_ManipulatePath))
2876   {
2877     GNUNET_break_op (0);
2878     return GNUNET_OK;
2879   }
2880
2881   size -= sizeof (struct GNUNET_MESH_ManipulatePath);
2882   if (size % sizeof (struct GNUNET_PeerIdentity))
2883   {
2884     GNUNET_break_op (0);
2885     return GNUNET_OK;
2886   }
2887   size /= sizeof (struct GNUNET_PeerIdentity);
2888   if (size < 2)
2889   {
2890     GNUNET_break_op (0);
2891     return GNUNET_OK;
2892   }
2893   GNUNET_log (GNUNET_ERROR_TYPE_DEBUG, "    path has %u hops.\n", size);
2894   msg = (struct GNUNET_MESH_ManipulatePath *) message;
2895
2896   tid = ntohl (msg->tid);
2897   pi = (struct GNUNET_PeerIdentity *) &msg[1];
2898   GNUNET_log (GNUNET_ERROR_TYPE_DEBUG,
2899               "    path is for tunnel %s [%X].\n", GNUNET_i2s (pi), tid);
2900   t = tunnel_get (pi, tid);
2901   if (NULL == t)
2902   {
2903     GNUNET_log (GNUNET_ERROR_TYPE_DEBUG, "  Creating tunnel\n");
2904     t = GNUNET_malloc (sizeof (struct MeshTunnel));
2905     t->id.oid = GNUNET_PEER_intern (pi);
2906     t->id.tid = tid;
2907     while (NULL != tunnel_get_incoming (next_local_tid))
2908       next_local_tid = (next_local_tid + 1) | GNUNET_MESH_LOCAL_TUNNEL_ID_SERV;
2909     t->local_tid_dest = next_local_tid++;
2910     next_local_tid = next_local_tid | GNUNET_MESH_LOCAL_TUNNEL_ID_SERV;
2911     t->tree = tree_new (t->id.oid);
2912
2913     GNUNET_CRYPTO_hash (&t->id, sizeof (struct MESH_TunnelID), &hash);
2914     if (GNUNET_OK !=
2915         GNUNET_CONTAINER_multihashmap_put (tunnels, &hash, t,
2916                                            GNUNET_CONTAINER_MULTIHASHMAPOPTION_UNIQUE_FAST))
2917     {
2918       tunnel_destroy (t);
2919       GNUNET_break (0);
2920       return GNUNET_OK;
2921     }
2922     tunnel_reset_timeout (t);
2923     GNUNET_CRYPTO_hash (&t->local_tid_dest, sizeof (MESH_TunnelNumber), &hash);
2924     if (GNUNET_OK !=
2925         GNUNET_CONTAINER_multihashmap_put (incoming_tunnels, &hash, t,
2926                                            GNUNET_CONTAINER_MULTIHASHMAPOPTION_UNIQUE_FAST))
2927     {
2928       tunnel_destroy (t);
2929       GNUNET_break (0);
2930       return GNUNET_OK;
2931     }
2932   }
2933   dest_peer_info =
2934       GNUNET_CONTAINER_multihashmap_get (peers, &pi[size - 1].hashPubKey);
2935   if (NULL == dest_peer_info)
2936   {
2937     GNUNET_log (GNUNET_ERROR_TYPE_DEBUG,
2938                 "  Creating PeerInfo for destination.\n");
2939     dest_peer_info = GNUNET_malloc (sizeof (struct MeshPeerInfo));
2940     dest_peer_info->id = GNUNET_PEER_intern (&pi[size - 1]);
2941     GNUNET_CONTAINER_multihashmap_put (peers, &pi[size - 1].hashPubKey,
2942                                        dest_peer_info,
2943                                        GNUNET_CONTAINER_MULTIHASHMAPOPTION_UNIQUE_ONLY);
2944   }
2945   orig_peer_info = GNUNET_CONTAINER_multihashmap_get (peers, &pi->hashPubKey);
2946   if (NULL == orig_peer_info)
2947   {
2948     GNUNET_log (GNUNET_ERROR_TYPE_DEBUG,
2949                 "  Creating PeerInfo for origin.\n");
2950     orig_peer_info = GNUNET_malloc (sizeof (struct MeshPeerInfo));
2951     orig_peer_info->id = GNUNET_PEER_intern (pi);
2952     GNUNET_CONTAINER_multihashmap_put (peers, &pi->hashPubKey, orig_peer_info,
2953                                        GNUNET_CONTAINER_MULTIHASHMAPOPTION_UNIQUE_ONLY);
2954   }
2955   GNUNET_log (GNUNET_ERROR_TYPE_DEBUG, "  Creating path...\n");
2956   path = path_new (size);
2957   own_pos = 0;
2958   for (i = 0; i < size; i++)
2959   {
2960     GNUNET_log (GNUNET_ERROR_TYPE_DEBUG, "  ... adding %s\n",
2961                 GNUNET_i2s (&pi[i]));
2962     path->peers[i] = GNUNET_PEER_intern (&pi[i]);
2963     if (path->peers[i] == myid)
2964       own_pos = i;
2965   }
2966   GNUNET_log (GNUNET_ERROR_TYPE_DEBUG, "  Own position: %u\n", own_pos);
2967   if (own_pos == 0)
2968   {
2969     /* cannot be self, must be 'not found' */
2970     /* create path: self not found in path through self */
2971     GNUNET_break_op (0);
2972     path_destroy (path);
2973     /* FIXME error. destroy tunnel? leave for timeout? */
2974     return 0;
2975   }
2976   path_add_to_peers (path, GNUNET_NO);
2977   tunnel_add_path (t, path, own_pos);
2978   if (own_pos == size - 1)
2979   {
2980     /* It is for us! Send ack. */
2981     struct MeshTransmissionDescriptor *info;
2982
2983     GNUNET_log (GNUNET_ERROR_TYPE_DEBUG, "  It's for us!\n");
2984     peer_info_add_path_to_origin (orig_peer_info, path, GNUNET_NO);
2985     if (NULL == t->peers)
2986     {
2987       /* New tunnel! Notify clients on data. */
2988       t->peers = GNUNET_CONTAINER_multihashmap_create (4);
2989     }
2990     GNUNET_break (GNUNET_OK ==
2991                   GNUNET_CONTAINER_multihashmap_put (t->peers,
2992                                                      &my_full_id.hashPubKey,
2993                                                      peer_info_get
2994                                                      (&my_full_id),
2995                                                      GNUNET_CONTAINER_MULTIHASHMAPOPTION_REPLACE));
2996     info = GNUNET_malloc (sizeof (struct MeshTransmissionDescriptor));
2997     info->origin = &t->id;
2998     info->peer = GNUNET_CONTAINER_multihashmap_get (peers, &peer->hashPubKey);
2999     GNUNET_assert (NULL != info->peer);
3000     queue_add(info,
3001               GNUNET_MESSAGE_TYPE_MESH_PATH_ACK,
3002               sizeof (struct GNUNET_MESH_PathACK),
3003               info->peer);
3004   }
3005   else
3006   {
3007     struct MeshPeerPath *path2;
3008
3009     /* It's for somebody else! Retransmit. */
3010     path2 = path_duplicate (path);
3011     GNUNET_log (GNUNET_ERROR_TYPE_DEBUG, "  Retransmitting.\n");
3012     peer_info_add_path (dest_peer_info, path2, GNUNET_NO);
3013     path2 = path_duplicate (path);
3014     peer_info_add_path_to_origin (orig_peer_info, path2, GNUNET_NO);
3015     send_create_path (dest_peer_info, path, t);
3016   }
3017   return GNUNET_OK;
3018 }
3019
3020
3021 /**
3022  * Core handler for path destruction
3023  *
3024  * @param cls closure
3025  * @param message message
3026  * @param peer peer identity this notification is about
3027  * @param atsi performance data
3028  * @param atsi_count number of records in 'atsi'
3029  *
3030  * @return GNUNET_OK to keep the connection open,
3031  *         GNUNET_SYSERR to close it (signal serious error)
3032  */
3033 static int
3034 handle_mesh_path_destroy (void *cls, const struct GNUNET_PeerIdentity *peer,
3035                           const struct GNUNET_MessageHeader *message,
3036                           const struct GNUNET_ATS_Information *atsi,
3037                           unsigned int atsi_count)
3038 {
3039   struct GNUNET_MESH_ManipulatePath *msg;
3040   struct GNUNET_PeerIdentity *pi;
3041   struct MeshPeerPath *path;
3042   struct MeshTunnel *t;
3043   unsigned int own_pos;
3044   unsigned int i;
3045   size_t size;
3046
3047   GNUNET_log (GNUNET_ERROR_TYPE_DEBUG,
3048               "Received a PATH DESTROY msg from %s\n", GNUNET_i2s (peer));
3049   size = ntohs (message->size);
3050   if (size < sizeof (struct GNUNET_MESH_ManipulatePath))
3051   {
3052     GNUNET_break_op (0);
3053     return GNUNET_OK;
3054   }
3055
3056   size -= sizeof (struct GNUNET_MESH_ManipulatePath);
3057   if (size % sizeof (struct GNUNET_PeerIdentity))
3058   {
3059     GNUNET_break_op (0);
3060     return GNUNET_OK;
3061   }
3062   size /= sizeof (struct GNUNET_PeerIdentity);
3063   if (size < 2)
3064   {
3065     GNUNET_break_op (0);
3066     return GNUNET_OK;
3067   }
3068   GNUNET_log (GNUNET_ERROR_TYPE_DEBUG, "    path has %u hops.\n", size);
3069
3070   msg = (struct GNUNET_MESH_ManipulatePath *) message;
3071   pi = (struct GNUNET_PeerIdentity *) &msg[1];
3072   GNUNET_log (GNUNET_ERROR_TYPE_DEBUG,
3073               "    path is for tunnel %s [%X].\n", GNUNET_i2s (pi),
3074               msg->tid);
3075   t = tunnel_get (pi, ntohl (msg->tid));
3076   if (NULL == t)
3077   {
3078     /* TODO notify back: we don't know this tunnel */
3079     GNUNET_break_op (0);
3080     return GNUNET_OK;
3081   }
3082   GNUNET_log (GNUNET_ERROR_TYPE_DEBUG, "  Creating path...\n");
3083   path = path_new (size);
3084   own_pos = 0;
3085   for (i = 0; i < size; i++)
3086   {
3087     GNUNET_log (GNUNET_ERROR_TYPE_DEBUG, "  ... adding %s\n",
3088                 GNUNET_i2s (&pi[i]));
3089     path->peers[i] = GNUNET_PEER_intern (&pi[i]);
3090     if (path->peers[i] == myid)
3091       own_pos = i;
3092   }
3093   GNUNET_log (GNUNET_ERROR_TYPE_DEBUG, "  Own position: %u\n", own_pos);
3094   if (own_pos < path->length - 1)
3095     send_message (message, &pi[own_pos + 1]);
3096   else
3097     send_client_tunnel_disconnect(t, NULL);
3098
3099   tunnel_delete_peer (t, path->peers[path->length - 1]);
3100   path_destroy (path);
3101   return GNUNET_OK;
3102 }
3103
3104
3105 /**
3106  * Core handler for notifications of broken paths
3107  *
3108  * @param cls closure
3109  * @param message message
3110  * @param peer peer identity this notification is about
3111  * @param atsi performance data
3112  * @param atsi_count number of records in 'atsi'
3113  *
3114  * @return GNUNET_OK to keep the connection open,
3115  *         GNUNET_SYSERR to close it (signal serious error)
3116  */
3117 static int
3118 handle_mesh_path_broken (void *cls, const struct GNUNET_PeerIdentity *peer,
3119                          const struct GNUNET_MessageHeader *message,
3120                          const struct GNUNET_ATS_Information *atsi,
3121                          unsigned int atsi_count)
3122 {
3123   struct GNUNET_MESH_PathBroken *msg;
3124   struct MeshTunnel *t;
3125
3126   GNUNET_log (GNUNET_ERROR_TYPE_DEBUG,
3127               "Received a PATH BROKEN msg from %s\n", GNUNET_i2s (peer));
3128   msg = (struct GNUNET_MESH_PathBroken *) message;
3129   GNUNET_log (GNUNET_ERROR_TYPE_DEBUG, "  regarding %s\n",
3130               GNUNET_i2s (&msg->peer1));
3131   GNUNET_log (GNUNET_ERROR_TYPE_DEBUG, "  regarding %s\n",
3132               GNUNET_i2s (&msg->peer2));
3133   t = tunnel_get (&msg->oid, ntohl (msg->tid));
3134   if (NULL == t)
3135   {
3136     GNUNET_break_op (0);
3137     return GNUNET_OK;
3138   }
3139   tunnel_notify_connection_broken (t, GNUNET_PEER_search (&msg->peer1),
3140                                    GNUNET_PEER_search (&msg->peer2));
3141   return GNUNET_OK;
3142
3143 }
3144
3145
3146 /**
3147  * Core handler for tunnel destruction
3148  *
3149  * @param cls closure
3150  * @param message message
3151  * @param peer peer identity this notification is about
3152  * @param atsi performance data
3153  * @param atsi_count number of records in 'atsi'
3154  *
3155  * @return GNUNET_OK to keep the connection open,
3156  *         GNUNET_SYSERR to close it (signal serious error)
3157  */
3158 static int
3159 handle_mesh_tunnel_destroy (void *cls, const struct GNUNET_PeerIdentity *peer,
3160                             const struct GNUNET_MessageHeader *message,
3161                             const struct GNUNET_ATS_Information *atsi,
3162                             unsigned int atsi_count)
3163 {
3164   struct GNUNET_MESH_TunnelDestroy *msg;
3165   struct MeshTunnel *t;
3166
3167   GNUNET_log (GNUNET_ERROR_TYPE_DEBUG,
3168               "Got a TUNNEL DESTROY packet from %s\n", GNUNET_i2s (peer));
3169   msg = (struct GNUNET_MESH_TunnelDestroy *) message;
3170   GNUNET_log (GNUNET_ERROR_TYPE_DEBUG, "  for tunnel %s [%u]\n",
3171               GNUNET_i2s (&msg->oid), ntohl (msg->tid));
3172   t = tunnel_get (&msg->oid, ntohl (msg->tid));
3173   if (NULL == t)
3174   {
3175     /* Probably already got the message from another path,
3176      * destroyed the tunnel and retransmitted to children.
3177      * Safe to ignore.
3178      */
3179     return GNUNET_OK;
3180   }
3181   if (t->id.oid == myid)
3182   {
3183     GNUNET_break_op (0);
3184     return GNUNET_OK;
3185   }
3186   if (t->local_tid_dest >= GNUNET_MESH_LOCAL_TUNNEL_ID_SERV)
3187   {
3188     /* Tunnel was incoming, notify clients */
3189     GNUNET_log (GNUNET_ERROR_TYPE_DEBUG, "INCOMING TUNNEL %X %X\n",
3190                 t->local_tid, t->local_tid_dest);
3191     send_clients_tunnel_destroy (t);
3192   }
3193   tunnel_send_destroy (t);
3194   tunnel_destroy (t);
3195   return GNUNET_OK;
3196 }
3197
3198
3199 /**
3200  * Core handler for mesh network traffic going from the origin to a peer
3201  *
3202  * @param cls closure
3203  * @param peer peer identity this notification is about
3204  * @param message message
3205  * @param atsi performance data
3206  * @param atsi_count number of records in 'atsi'
3207  * @return GNUNET_OK to keep the connection open,
3208  *         GNUNET_SYSERR to close it (signal serious error)
3209  */
3210 static int
3211 handle_mesh_data_unicast (void *cls, const struct GNUNET_PeerIdentity *peer,
3212                           const struct GNUNET_MessageHeader *message,
3213                           const struct GNUNET_ATS_Information *atsi,
3214                           unsigned int atsi_count)
3215 {
3216   struct GNUNET_MESH_Unicast *msg;
3217   struct MeshTunnel *t;
3218   GNUNET_PEER_Id pid;
3219   size_t size;
3220
3221   GNUNET_log (GNUNET_ERROR_TYPE_DEBUG, "got a unicast packet from %s\n",
3222               GNUNET_i2s (peer));
3223   size = ntohs (message->size);
3224   if (size <
3225       sizeof (struct GNUNET_MESH_Unicast) +
3226       sizeof (struct GNUNET_MessageHeader))
3227   {
3228     GNUNET_break (0);
3229     return GNUNET_OK;
3230   }
3231   msg = (struct GNUNET_MESH_Unicast *) message;
3232   GNUNET_log (GNUNET_ERROR_TYPE_DEBUG, " of type %u\n",
3233               ntohs (msg[1].header.type));
3234   t = tunnel_get (&msg->oid, ntohl (msg->tid));
3235   if (NULL == t)
3236   {
3237     /* TODO notify back: we don't know this tunnel */
3238     GNUNET_break_op (0);
3239     return GNUNET_OK;
3240   }
3241   tunnel_reset_timeout (t);
3242   pid = GNUNET_PEER_search (&msg->destination);
3243   if (pid == myid)
3244   {
3245     GNUNET_log (GNUNET_ERROR_TYPE_DEBUG,
3246                 "  it's for us! sending to clients...\n");
3247     send_subscribed_clients (message, (struct GNUNET_MessageHeader *) &msg[1]);
3248     return GNUNET_OK;
3249   }
3250   GNUNET_log (GNUNET_ERROR_TYPE_DEBUG,
3251               "  not for us, retransmitting...\n");
3252   send_message (message, tree_get_first_hop (t->tree, pid));
3253   return GNUNET_OK;
3254 }
3255
3256
3257 /**
3258  * Core handler for mesh network traffic going from the origin to all peers
3259  *
3260  * @param cls closure
3261  * @param message message
3262  * @param peer peer identity this notification is about
3263  * @param atsi performance data
3264  * @param atsi_count number of records in 'atsi'
3265  * @return GNUNET_OK to keep the connection open,
3266  *         GNUNET_SYSERR to close it (signal serious error)
3267  *
3268  * TODO: Check who we got this from, to validate route.
3269  */
3270 static int
3271 handle_mesh_data_multicast (void *cls, const struct GNUNET_PeerIdentity *peer,
3272                             const struct GNUNET_MessageHeader *message,
3273                             const struct GNUNET_ATS_Information *atsi,
3274                             unsigned int atsi_count)
3275 {
3276   struct GNUNET_MESH_Multicast *msg;
3277   struct MeshTunnel *t;
3278   size_t size;
3279
3280   GNUNET_log (GNUNET_ERROR_TYPE_DEBUG, "got a multicast packet from %s\n",
3281               GNUNET_i2s (peer));
3282   size = ntohs (message->size);
3283   if (sizeof (struct GNUNET_MESH_Multicast) +
3284       sizeof (struct GNUNET_MessageHeader) > size)
3285   {
3286     GNUNET_break_op (0);
3287     return GNUNET_OK;
3288   }
3289   msg = (struct GNUNET_MESH_Multicast *) message;
3290   t = tunnel_get (&msg->oid, ntohl (msg->tid));
3291
3292   if (NULL == t)
3293   {
3294     /* TODO notify that we dont know that tunnel */
3295     GNUNET_break_op (0);
3296     return GNUNET_OK;
3297   }
3298   if (t->mid == ntohl (msg->mid))
3299   {
3300     /* FIXME: already seen this packet, log dropping */
3301     GNUNET_log (GNUNET_ERROR_TYPE_WARNING,
3302                 " Already seen mid %u, DROPPING!\n", t->mid);
3303     return GNUNET_OK;
3304   }
3305   else
3306   {
3307     GNUNET_log (GNUNET_ERROR_TYPE_DEBUG,
3308                 " mid %u not seen yet, forwarding\n", ntohl (msg->mid));
3309   }
3310   t->mid = ntohl (msg->mid);
3311   tunnel_reset_timeout (t);
3312
3313   /* Transmit to locally interested clients */
3314   if (NULL != t->peers &&
3315       GNUNET_CONTAINER_multihashmap_contains (t->peers, &my_full_id.hashPubKey))
3316   {
3317     send_subscribed_clients (message, &msg[1].header);
3318   }
3319   GNUNET_log (GNUNET_ERROR_TYPE_DEBUG, "   ttl: %u\n", ntohl (msg->ttl));
3320   if (ntohl (msg->ttl) == 0)
3321   {
3322     /* FIXME: ttl is 0, log dropping */
3323     GNUNET_log (GNUNET_ERROR_TYPE_WARNING, " TTL is 0, DROPPING!\n");
3324     return GNUNET_OK;
3325   }
3326   tunnel_send_multicast (t, message, GNUNET_NO);
3327   return GNUNET_OK;
3328 }
3329
3330
3331 /**
3332  * Core handler for mesh network traffic toward the owner of a tunnel
3333  *
3334  * @param cls closure
3335  * @param message message
3336  * @param peer peer identity this notification is about
3337  * @param atsi performance data
3338  * @param atsi_count number of records in 'atsi'
3339  *
3340  * @return GNUNET_OK to keep the connection open,
3341  *         GNUNET_SYSERR to close it (signal serious error)
3342  */
3343 static int
3344 handle_mesh_data_to_orig (void *cls, const struct GNUNET_PeerIdentity *peer,
3345                           const struct GNUNET_MessageHeader *message,
3346                           const struct GNUNET_ATS_Information *atsi,
3347                           unsigned int atsi_count)
3348 {
3349   struct GNUNET_MESH_ToOrigin *msg;
3350   struct GNUNET_PeerIdentity id;
3351   struct MeshPeerInfo *peer_info;
3352   struct MeshTunnel *t;
3353   size_t size;
3354
3355   GNUNET_log (GNUNET_ERROR_TYPE_DEBUG, "got a ToOrigin packet from %s\n",
3356               GNUNET_i2s (peer));
3357   size = ntohs (message->size);
3358   if (size < sizeof (struct GNUNET_MESH_ToOrigin) +     /* Payload must be */
3359       sizeof (struct GNUNET_MessageHeader))     /* at least a header */
3360   {
3361     GNUNET_break_op (0);
3362     return GNUNET_OK;
3363   }
3364   msg = (struct GNUNET_MESH_ToOrigin *) message;
3365   GNUNET_log (GNUNET_ERROR_TYPE_DEBUG, " of type %u\n",
3366               ntohs (msg[1].header.type));
3367   t = tunnel_get (&msg->oid, ntohl (msg->tid));
3368
3369   if (NULL == t)
3370   {
3371     /* TODO notify that we dont know this tunnel (whom)? */
3372     GNUNET_break_op (0);
3373     return GNUNET_OK;
3374   }
3375
3376   if (t->id.oid == myid)
3377   {
3378     char cbuf[size];
3379     struct GNUNET_MESH_ToOrigin *copy;
3380
3381     GNUNET_log (GNUNET_ERROR_TYPE_DEBUG,
3382                 "  it's for us! sending to clients...\n");
3383     if (NULL == t->owner)
3384     {
3385       /* got data packet for ownerless tunnel */
3386       GNUNET_log (GNUNET_ERROR_TYPE_DEBUG, "  no clients!\n");
3387       GNUNET_break_op (0);
3388       return GNUNET_OK;
3389     }
3390     /* TODO signature verification */
3391     memcpy (cbuf, message, size);
3392     copy = (struct GNUNET_MESH_ToOrigin *) cbuf;
3393     copy->tid = htonl (t->local_tid);
3394     GNUNET_SERVER_notification_context_unicast (nc, t->owner->handle,
3395                                                 &copy->header, GNUNET_YES);
3396     return GNUNET_OK;
3397   }
3398   GNUNET_log (GNUNET_ERROR_TYPE_DEBUG,
3399               "  not for us, retransmitting...\n");
3400
3401   peer_info = peer_info_get (&msg->oid);
3402   if (NULL == peer_info)
3403   {
3404     /* unknown origin of tunnel */
3405     GNUNET_break (0);
3406     return GNUNET_OK;
3407   }
3408   GNUNET_PEER_resolve (tree_get_predecessor (t->tree), &id);
3409   send_message (message, &id);
3410
3411   return GNUNET_OK;
3412 }
3413
3414
3415 /**
3416  * Core handler for path ACKs
3417  *
3418  * @param cls closure
3419  * @param message message
3420  * @param peer peer identity this notification is about
3421  * @param atsi performance data
3422  * @param atsi_count number of records in 'atsi'
3423  *
3424  * @return GNUNET_OK to keep the connection open,
3425  *         GNUNET_SYSERR to close it (signal serious error)
3426  */
3427 static int
3428 handle_mesh_path_ack (void *cls, const struct GNUNET_PeerIdentity *peer,
3429                       const struct GNUNET_MessageHeader *message,
3430                       const struct GNUNET_ATS_Information *atsi,
3431                       unsigned int atsi_count)
3432 {
3433   struct GNUNET_MESH_PathACK *msg;
3434   struct GNUNET_PeerIdentity id;
3435   struct MeshPeerInfo *peer_info;
3436   struct MeshPeerPath *p;
3437   struct MeshTunnel *t;
3438
3439   GNUNET_log (GNUNET_ERROR_TYPE_DEBUG, "Received a path ACK msg [%s]\n",
3440               GNUNET_i2s (&my_full_id));
3441   msg = (struct GNUNET_MESH_PathACK *) message;
3442   t = tunnel_get (&msg->oid, msg->tid);
3443   if (NULL == t)
3444   {
3445     /* TODO notify that we don't know the tunnel */
3446     return GNUNET_OK;
3447   }
3448
3449   peer_info = peer_info_get (&msg->peer_id);
3450
3451   /* Add paths to peers? */
3452   p = tree_get_path_to_peer (t->tree, peer_info->id);
3453   if (NULL != p)
3454   {
3455     path_add_to_peers (p, GNUNET_YES);
3456     path_destroy (p);
3457   }
3458   else
3459   {
3460     GNUNET_break (0);
3461   }
3462
3463   /* Message for us? */
3464   if (0 == memcmp (&msg->oid, &my_full_id, sizeof (struct GNUNET_PeerIdentity)))
3465   {
3466     GNUNET_log (GNUNET_ERROR_TYPE_DEBUG, "  It's for us!\n");
3467     if (NULL == t->owner)
3468     {
3469       GNUNET_break_op (0);
3470       return GNUNET_OK;
3471     }
3472     if (NULL != t->dht_get_type)
3473     {
3474       GNUNET_DHT_get_stop (t->dht_get_type);
3475       t->dht_get_type = NULL;
3476     }
3477     if (tree_get_status (t->tree, peer_info->id) != MESH_PEER_READY)
3478     {
3479       tree_set_status (t->tree, peer_info->id, MESH_PEER_READY);
3480       send_client_peer_connected (t, peer_info->id);
3481     }
3482     return GNUNET_OK;
3483   }
3484
3485   GNUNET_log (GNUNET_ERROR_TYPE_DEBUG,
3486               "  not for us, retransmitting...\n");
3487   GNUNET_PEER_resolve (tree_get_predecessor (t->tree), &id);
3488   peer_info = peer_info_get (&msg->oid);
3489   if (NULL == peer_info)
3490   {
3491     /* If we know the tunnel, we should DEFINITELY know the peer */
3492     GNUNET_break (0);
3493     return GNUNET_OK;
3494   }
3495   send_message (message, &id);
3496   return GNUNET_OK;
3497 }
3498
3499
3500 /**
3501  * Functions to handle messages from core
3502  */
3503 static struct GNUNET_CORE_MessageHandler core_handlers[] = {
3504   {&handle_mesh_path_create, GNUNET_MESSAGE_TYPE_MESH_PATH_CREATE, 0},
3505   {&handle_mesh_path_destroy, GNUNET_MESSAGE_TYPE_MESH_PATH_DESTROY, 0},
3506   {&handle_mesh_path_broken, GNUNET_MESSAGE_TYPE_MESH_PATH_BROKEN,
3507    sizeof (struct GNUNET_MESH_PathBroken)},
3508   {&handle_mesh_tunnel_destroy, GNUNET_MESSAGE_TYPE_MESH_TUNNEL_DESTROY, 0},
3509   {&handle_mesh_data_unicast, GNUNET_MESSAGE_TYPE_MESH_UNICAST, 0},
3510   {&handle_mesh_data_multicast, GNUNET_MESSAGE_TYPE_MESH_MULTICAST, 0},
3511   {&handle_mesh_data_to_orig, GNUNET_MESSAGE_TYPE_MESH_TO_ORIGIN, 0},
3512   {&handle_mesh_path_ack, GNUNET_MESSAGE_TYPE_MESH_PATH_ACK,
3513    sizeof (struct GNUNET_MESH_PathACK)},
3514   {NULL, 0, 0}
3515 };
3516
3517
3518
3519 /******************************************************************************/
3520 /****************       MESH LOCAL HANDLER HELPERS      ***********************/
3521 /******************************************************************************/
3522
3523 /**
3524  * deregister_app: iterator for removing each application registered by a client
3525  *
3526  * @param cls closure
3527  * @param key the hash of the application id (used to access the hashmap)
3528  * @param value the value stored at the key (client)
3529  *
3530  * @return GNUNET_OK on success
3531  */
3532 static int
3533 deregister_app (void *cls, const GNUNET_HashCode * key, void *value)
3534 {
3535   GNUNET_break (GNUNET_YES ==
3536                 GNUNET_CONTAINER_multihashmap_remove (applications, key,
3537                                                       value));
3538   return GNUNET_OK;
3539 }
3540
3541 #if LATER
3542 /**
3543  * notify_client_connection_failure: notify a client that the connection to the
3544  * requested remote peer is not possible (for instance, no route found)
3545  * Function called when the socket is ready to queue more data. "buf" will be
3546  * NULL and "size" zero if the socket was closed for writing in the meantime.
3547  *
3548  * @param cls closure
3549  * @param size number of bytes available in buf
3550  * @param buf where the callee should write the message
3551  * @return number of bytes written to buf
3552  */
3553 static size_t
3554 notify_client_connection_failure (void *cls, size_t size, void *buf)
3555 {
3556   int size_needed;
3557   struct MeshPeerInfo *peer_info;
3558   struct GNUNET_MESH_PeerControl *msg;
3559   struct GNUNET_PeerIdentity id;
3560
3561   if (0 == size && NULL == buf)
3562   {
3563     // TODO retry? cancel?
3564     return 0;
3565   }
3566
3567   size_needed = sizeof (struct GNUNET_MESH_PeerControl);
3568   peer_info = (struct MeshPeerInfo *) cls;
3569   msg = (struct GNUNET_MESH_PeerControl *) buf;
3570   msg->header.size = htons (sizeof (struct GNUNET_MESH_PeerControl));
3571   msg->header.type = htons (GNUNET_MESSAGE_TYPE_MESH_LOCAL_PEER_DISCONNECTED);
3572 //     msg->tunnel_id = htonl(peer_info->t->tid);
3573   GNUNET_PEER_resolve (peer_info->id, &id);
3574   memcpy (&msg->peer, &id, sizeof (struct GNUNET_PeerIdentity));
3575
3576   return size_needed;
3577 }
3578 #endif
3579
3580
3581 /**
3582  * Send keepalive packets for a peer
3583  *
3584  * @param cls Closure (tunnel for which to send the keepalive).
3585  * @param tc Notification context.
3586  *
3587  * TODO: implement explicit multicast keepalive?
3588  */
3589 static void
3590 path_refresh (void *cls, const struct GNUNET_SCHEDULER_TaskContext *tc)
3591 {
3592   struct MeshTunnel *t = cls;
3593   struct GNUNET_MessageHeader *payload;
3594   struct GNUNET_MESH_Multicast *msg;
3595   size_t size =
3596       sizeof (struct GNUNET_MESH_Multicast) +
3597       sizeof (struct GNUNET_MessageHeader);
3598   char cbuf[size];
3599
3600   if (tc->reason == GNUNET_SCHEDULER_REASON_SHUTDOWN)
3601   {
3602     return;
3603   }
3604   t->path_refresh_task = GNUNET_SCHEDULER_NO_TASK;
3605
3606   GNUNET_log (GNUNET_ERROR_TYPE_DEBUG,
3607               "sending keepalive for tunnel %d\n", t->id.tid);
3608
3609   msg = (struct GNUNET_MESH_Multicast *) cbuf;
3610   msg->header.size = htons (size);
3611   msg->header.type = htons (GNUNET_MESSAGE_TYPE_MESH_MULTICAST);
3612   msg->oid = my_full_id;
3613   msg->tid = htonl (t->id.tid);
3614   msg->ttl = htonl (DEFAULT_TTL);
3615   msg->mid = htonl (t->mid + 1);
3616   t->mid++;
3617   payload = (struct GNUNET_MessageHeader *) &msg[1];
3618   payload->size = htons (sizeof (struct GNUNET_MessageHeader));
3619   payload->type = htons (GNUNET_MESSAGE_TYPE_MESH_PATH_KEEPALIVE);
3620   tunnel_send_multicast (t, &msg->header, GNUNET_YES);
3621
3622   t->path_refresh_task =
3623       GNUNET_SCHEDULER_add_delayed (REFRESH_PATH_TIME, &path_refresh, t);
3624   return;
3625 }
3626
3627
3628 /**
3629  * Function to process paths received for a new peer addition. The recorded
3630  * paths form the initial tunnel, which can be optimized later.
3631  * Called on each result obtained for the DHT search.
3632  *
3633  * @param cls closure
3634  * @param exp when will this value expire
3635  * @param key key of the result
3636  * @param get_path path of the get request
3637  * @param get_path_length lenght of get_path
3638  * @param put_path path of the put request
3639  * @param put_path_length length of the put_path
3640  * @param type type of the result
3641  * @param size number of bytes in data
3642  * @param data pointer to the result data
3643  *
3644  * TODO: re-issue the request after certain time? cancel after X results?
3645  */
3646 static void
3647 dht_get_id_handler (void *cls, struct GNUNET_TIME_Absolute exp,
3648                     const GNUNET_HashCode * key,
3649                     const struct GNUNET_PeerIdentity *get_path,
3650                     unsigned int get_path_length,
3651                     const struct GNUNET_PeerIdentity *put_path,
3652                     unsigned int put_path_length, enum GNUNET_BLOCK_Type type,
3653                     size_t size, const void *data)
3654 {
3655   struct MeshPathInfo *path_info = cls;
3656   struct MeshPeerPath *p;
3657   struct GNUNET_PeerIdentity pi;
3658   int i;
3659
3660   GNUNET_log (GNUNET_ERROR_TYPE_DEBUG, "Got results from DHT!\n");
3661   GNUNET_PEER_resolve (path_info->peer->id, &pi);
3662   GNUNET_log (GNUNET_ERROR_TYPE_DEBUG, "  for %s\n", GNUNET_i2s (&pi));
3663
3664   p = path_build_from_dht (get_path, get_path_length, put_path,
3665                            put_path_length);
3666   path_add_to_peers (p, GNUNET_NO);
3667   path_destroy(p);
3668   for (i = 0; i < path_info->peer->ntunnels; i++)
3669   {
3670     tunnel_add_peer (path_info->peer->tunnels[i], path_info->peer);
3671     peer_info_connect (path_info->peer, path_info->t);
3672   }
3673
3674   return;
3675 }
3676
3677
3678 /**
3679  * Function to process paths received for a new peer addition. The recorded
3680  * paths form the initial tunnel, which can be optimized later.
3681  * Called on each result obtained for the DHT search.
3682  *
3683  * @param cls closure
3684  * @param exp when will this value expire
3685  * @param key key of the result
3686  * @param get_path path of the get request
3687  * @param get_path_length lenght of get_path
3688  * @param put_path path of the put request
3689  * @param put_path_length length of the put_path
3690  * @param type type of the result
3691  * @param size number of bytes in data
3692  * @param data pointer to the result data
3693  */
3694 static void
3695 dht_get_type_handler (void *cls, struct GNUNET_TIME_Absolute exp,
3696                       const GNUNET_HashCode * key,
3697                       const struct GNUNET_PeerIdentity *get_path,
3698                       unsigned int get_path_length,
3699                       const struct GNUNET_PeerIdentity *put_path,
3700                       unsigned int put_path_length, enum GNUNET_BLOCK_Type type,
3701                       size_t size, const void *data)
3702 {
3703   const struct GNUNET_PeerIdentity *pi = data;
3704   struct MeshTunnel *t = cls;
3705   struct MeshPeerInfo *peer_info;
3706   struct MeshPeerPath *p;
3707
3708   GNUNET_log (GNUNET_ERROR_TYPE_DEBUG, "got type DHT result!\n");
3709   if (size != sizeof (struct GNUNET_PeerIdentity))
3710   {
3711     GNUNET_break_op (0);
3712     return;
3713   }
3714   GNUNET_assert (NULL != t->owner);
3715   peer_info = peer_info_get (pi);
3716   (void) GNUNET_CONTAINER_multihashmap_put (t->peers, &pi->hashPubKey,
3717                                             peer_info,
3718                                             GNUNET_CONTAINER_MULTIHASHMAPOPTION_REPLACE);
3719
3720   p = path_build_from_dht (get_path, get_path_length, put_path,
3721                            put_path_length);
3722   path_add_to_peers (p, GNUNET_NO);
3723   path_destroy(p);
3724   tunnel_add_peer (t, peer_info);
3725   peer_info_connect (peer_info, t);
3726 }
3727
3728
3729 /******************************************************************************/
3730 /*********************       MESH LOCAL HANDLES      **************************/
3731 /******************************************************************************/
3732
3733
3734 /**
3735  * Handler for client disconnection
3736  *
3737  * @param cls closure
3738  * @param client identification of the client; NULL
3739  *        for the last call when the server is destroyed
3740  */
3741 static void
3742 handle_local_client_disconnect (void *cls, struct GNUNET_SERVER_Client *client)
3743 {
3744   struct MeshClient *c;
3745   struct MeshClient *next;
3746
3747   GNUNET_log (GNUNET_ERROR_TYPE_DEBUG, "client disconnected\n");
3748   if (client == NULL)
3749   {
3750     GNUNET_log (GNUNET_ERROR_TYPE_DEBUG, "   (SERVER DOWN)\n");
3751     return;
3752   }
3753   c = clients;
3754   while (NULL != c)
3755   {
3756     if (c->handle != client)
3757     {
3758       GNUNET_log (GNUNET_ERROR_TYPE_DEBUG, "   ... searching\n");
3759       c = c->next;
3760       continue;
3761     }
3762     GNUNET_log (GNUNET_ERROR_TYPE_DEBUG, "matching client found (%u)\n",
3763                 c->id);
3764     GNUNET_SERVER_client_drop (c->handle);
3765     c->shutting_down = GNUNET_YES;
3766     GNUNET_assert (NULL != c->own_tunnels);
3767     GNUNET_assert (NULL != c->incoming_tunnels);
3768     GNUNET_CONTAINER_multihashmap_iterate (c->own_tunnels,
3769                                            &tunnel_destroy_iterator, c);
3770     GNUNET_CONTAINER_multihashmap_iterate (c->incoming_tunnels,
3771                                            &tunnel_destroy_iterator, c);
3772     GNUNET_CONTAINER_multihashmap_iterate (c->ignore_tunnels,
3773                                            &tunnel_destroy_iterator, c);
3774     GNUNET_CONTAINER_multihashmap_destroy (c->own_tunnels);
3775     GNUNET_CONTAINER_multihashmap_destroy (c->incoming_tunnels);
3776     GNUNET_CONTAINER_multihashmap_destroy (c->ignore_tunnels);
3777
3778     /* deregister clients applications */
3779     if (NULL != c->apps)
3780     {
3781       GNUNET_CONTAINER_multihashmap_iterate (c->apps, &deregister_app, NULL);
3782       GNUNET_CONTAINER_multihashmap_destroy (c->apps);
3783     }
3784     if (0 == GNUNET_CONTAINER_multihashmap_size (applications) &&
3785         GNUNET_SCHEDULER_NO_TASK != announce_applications_task)
3786     {
3787       GNUNET_SCHEDULER_cancel (announce_applications_task);
3788       announce_applications_task = GNUNET_SCHEDULER_NO_TASK;
3789     }
3790     if (NULL != c->types)
3791       GNUNET_CONTAINER_multihashmap_destroy (c->types);
3792     next = c->next;
3793     GNUNET_CONTAINER_DLL_remove (clients, clients_tail, c);
3794     GNUNET_log (GNUNET_ERROR_TYPE_DEBUG, "  CLIENT FREE at %p\n", c);
3795     GNUNET_free (c);
3796     c = next;
3797   }
3798   GNUNET_log (GNUNET_ERROR_TYPE_DEBUG, "   done!\n");
3799   return;
3800 }
3801
3802
3803 /**
3804  * Handler for new clients
3805  *
3806  * @param cls closure
3807  * @param client identification of the client
3808  * @param message the actual message, which includes messages the client wants
3809  */
3810 static void
3811 handle_local_new_client (void *cls, struct GNUNET_SERVER_Client *client,
3812                          const struct GNUNET_MessageHeader *message)
3813 {
3814   struct GNUNET_MESH_ClientConnect *cc_msg;
3815   struct MeshClient *c;
3816   GNUNET_MESH_ApplicationType *a;
3817   unsigned int size;
3818   uint16_t ntypes;
3819   uint16_t *t;
3820   uint16_t napps;
3821   uint16_t i;
3822
3823   GNUNET_log (GNUNET_ERROR_TYPE_DEBUG, "new client connected\n");
3824   /* Check data sanity */
3825   size = ntohs (message->size) - sizeof (struct GNUNET_MESH_ClientConnect);
3826   cc_msg = (struct GNUNET_MESH_ClientConnect *) message;
3827   ntypes = ntohs (cc_msg->types);
3828   napps = ntohs (cc_msg->applications);
3829   if (size !=
3830       ntypes * sizeof (uint16_t) + napps * sizeof (GNUNET_MESH_ApplicationType))
3831   {
3832     GNUNET_break (0);
3833     GNUNET_SERVER_receive_done (client, GNUNET_SYSERR);
3834     return;
3835   }
3836
3837   /* Create new client structure */
3838   c = GNUNET_malloc (sizeof (struct MeshClient));
3839   c->id = next_client_id++;
3840   GNUNET_log (GNUNET_ERROR_TYPE_DEBUG, "  CLIENT NEW %u\n", c->id);
3841   c->handle = client;
3842   GNUNET_SERVER_client_keep (client);
3843   a = (GNUNET_MESH_ApplicationType *) &cc_msg[1];
3844   if (napps > 0)
3845   {
3846     GNUNET_MESH_ApplicationType at;
3847     GNUNET_HashCode hc;
3848
3849     c->apps = GNUNET_CONTAINER_multihashmap_create (napps);
3850     for (i = 0; i < napps; i++)
3851     {
3852       at = ntohl (a[i]);
3853       GNUNET_log (GNUNET_ERROR_TYPE_DEBUG, "  app type: %u\n", at);
3854       GNUNET_CRYPTO_hash (&at, sizeof (at), &hc);
3855       /* store in clients hashmap */
3856       GNUNET_CONTAINER_multihashmap_put (c->apps, &hc, c,
3857                                          GNUNET_CONTAINER_MULTIHASHMAPOPTION_MULTIPLE);
3858       /* store in global hashmap, for announcements */
3859       GNUNET_CONTAINER_multihashmap_put (applications, &hc, c,
3860                                          GNUNET_CONTAINER_MULTIHASHMAPOPTION_MULTIPLE);
3861     }
3862     if (GNUNET_SCHEDULER_NO_TASK == announce_applications_task)
3863       announce_applications_task =
3864           GNUNET_SCHEDULER_add_now (&announce_applications, NULL);
3865
3866   }
3867   if (ntypes > 0)
3868   {
3869     uint16_t u16;
3870     GNUNET_HashCode hc;
3871
3872     t = (uint16_t *) & a[napps];
3873     c->types = GNUNET_CONTAINER_multihashmap_create (ntypes);
3874     for (i = 0; i < ntypes; i++)
3875     {
3876       u16 = ntohs (t[i]);
3877       GNUNET_log (GNUNET_ERROR_TYPE_DEBUG, "  msg type: %u\n", u16);
3878       GNUNET_CRYPTO_hash (&u16, sizeof (u16), &hc);
3879
3880       /* store in clients hashmap */
3881       GNUNET_CONTAINER_multihashmap_put (c->types, &hc, c,
3882                                          GNUNET_CONTAINER_MULTIHASHMAPOPTION_MULTIPLE);
3883       /* store in global hashmap */
3884       GNUNET_CONTAINER_multihashmap_put (types, &hc, c,
3885                                          GNUNET_CONTAINER_MULTIHASHMAPOPTION_MULTIPLE);
3886     }
3887   }
3888   GNUNET_log (GNUNET_ERROR_TYPE_DEBUG,
3889               " client has %u+%u subscriptions\n", napps, ntypes);
3890
3891   GNUNET_CONTAINER_DLL_insert (clients, clients_tail, c);
3892   c->own_tunnels = GNUNET_CONTAINER_multihashmap_create (32);
3893   c->incoming_tunnels = GNUNET_CONTAINER_multihashmap_create (32);
3894   c->ignore_tunnels = GNUNET_CONTAINER_multihashmap_create (32);
3895   GNUNET_SERVER_notification_context_add (nc, client);
3896
3897   GNUNET_SERVER_receive_done (client, GNUNET_OK);
3898   GNUNET_log (GNUNET_ERROR_TYPE_DEBUG, "new client processed\n");
3899 }
3900
3901
3902 /**
3903  * Handler for requests of new tunnels
3904  *
3905  * @param cls closure
3906  * @param client identification of the client
3907  * @param message the actual message
3908  */
3909 static void
3910 handle_local_tunnel_create (void *cls, struct GNUNET_SERVER_Client *client,
3911                             const struct GNUNET_MessageHeader *message)
3912 {
3913   struct GNUNET_MESH_TunnelMessage *t_msg;
3914   struct MeshTunnel *t;
3915   struct MeshClient *c;
3916   GNUNET_HashCode hash;
3917
3918   GNUNET_log (GNUNET_ERROR_TYPE_DEBUG, "new tunnel requested\n");
3919
3920   /* Sanity check for client registration */
3921   if (NULL == (c = client_get (client)))
3922   {
3923     GNUNET_break (0);
3924     GNUNET_SERVER_receive_done (client, GNUNET_SYSERR);
3925     return;
3926   }
3927   GNUNET_log (GNUNET_ERROR_TYPE_DEBUG, "  by client %u\n", c->id);
3928
3929   /* Message sanity check */
3930   if (sizeof (struct GNUNET_MESH_TunnelMessage) != ntohs (message->size))
3931   {
3932     GNUNET_break (0);
3933     GNUNET_SERVER_receive_done (client, GNUNET_SYSERR);
3934     return;
3935   }
3936
3937   t_msg = (struct GNUNET_MESH_TunnelMessage *) message;
3938   /* Sanity check for tunnel numbering */
3939   if (0 == (ntohl (t_msg->tunnel_id) & GNUNET_MESH_LOCAL_TUNNEL_ID_CLI))
3940   {
3941     GNUNET_break (0);
3942     GNUNET_SERVER_receive_done (client, GNUNET_SYSERR);
3943     return;
3944   }
3945   /* Sanity check for duplicate tunnel IDs */
3946   if (NULL != tunnel_get_by_local_id (c, ntohl (t_msg->tunnel_id)))
3947   {
3948     GNUNET_break (0);
3949     GNUNET_SERVER_receive_done (client, GNUNET_SYSERR);
3950     return;
3951   }
3952
3953   t = GNUNET_malloc (sizeof (struct MeshTunnel));
3954   while (NULL != tunnel_get_by_pi (myid, next_tid))
3955     next_tid = (next_tid + 1) & ~GNUNET_MESH_LOCAL_TUNNEL_ID_CLI;
3956   t->id.tid = next_tid++;
3957   next_tid = next_tid & ~GNUNET_MESH_LOCAL_TUNNEL_ID_CLI;
3958   t->id.oid = myid;
3959   t->local_tid = ntohl (t_msg->tunnel_id);
3960   GNUNET_log (GNUNET_ERROR_TYPE_DEBUG, "CREATED TUNNEL %s [%x] (%x)\n",
3961               GNUNET_i2s (&my_full_id), t->id.tid, t->local_tid);
3962   t->owner = c;
3963   t->peers = GNUNET_CONTAINER_multihashmap_create (32);
3964
3965   GNUNET_CRYPTO_hash (&t->local_tid, sizeof (MESH_TunnelNumber), &hash);
3966   if (GNUNET_OK !=
3967       GNUNET_CONTAINER_multihashmap_put (c->own_tunnels, &hash, t,
3968                                          GNUNET_CONTAINER_MULTIHASHMAPOPTION_UNIQUE_ONLY))
3969   {
3970     GNUNET_break (0);
3971     GNUNET_SERVER_receive_done (client, GNUNET_SYSERR);
3972     return;
3973   }
3974
3975   GNUNET_CRYPTO_hash (&t->id, sizeof (struct MESH_TunnelID), &hash);
3976   if (GNUNET_OK !=
3977       GNUNET_CONTAINER_multihashmap_put (tunnels, &hash, t,
3978                                          GNUNET_CONTAINER_MULTIHASHMAPOPTION_UNIQUE_ONLY))
3979   {
3980     GNUNET_break (0);
3981     GNUNET_SERVER_receive_done (client, GNUNET_SYSERR);
3982     return;
3983   }
3984   t->tree = tree_new (myid);
3985
3986   GNUNET_log (GNUNET_ERROR_TYPE_DEBUG, "new tunnel created\n");
3987   GNUNET_SERVER_receive_done (client, GNUNET_OK);
3988   return;
3989 }
3990
3991
3992 /**
3993  * Handler for requests of deleting tunnels
3994  *
3995  * @param cls closure
3996  * @param client identification of the client
3997  * @param message the actual message
3998  */
3999 static void
4000 handle_local_tunnel_destroy (void *cls, struct GNUNET_SERVER_Client *client,
4001                              const struct GNUNET_MessageHeader *message)
4002 {
4003   struct GNUNET_MESH_TunnelMessage *tunnel_msg;
4004   struct MeshClient *c;
4005   struct MeshTunnel *t;
4006   MESH_TunnelNumber tid;
4007
4008   GNUNET_log (GNUNET_ERROR_TYPE_DEBUG,
4009               "Got a DESTROY TUNNEL from client!\n");
4010
4011   /* Sanity check for client registration */
4012   if (NULL == (c = client_get (client)))
4013   {
4014     GNUNET_break (0);
4015     GNUNET_SERVER_receive_done (client, GNUNET_SYSERR);
4016     return;
4017   }
4018   /* Message sanity check */
4019   if (sizeof (struct GNUNET_MESH_TunnelMessage) != ntohs (message->size))
4020   {
4021     GNUNET_break (0);
4022     GNUNET_SERVER_receive_done (client, GNUNET_SYSERR);
4023     return;
4024   }
4025   GNUNET_log (GNUNET_ERROR_TYPE_DEBUG, "  by client %u\n", c->id);
4026   tunnel_msg = (struct GNUNET_MESH_TunnelMessage *) message;
4027
4028   /* Retrieve tunnel */
4029   tid = ntohl (tunnel_msg->tunnel_id);
4030   t = tunnel_get_by_local_id(c, tid);
4031   if (NULL == t)
4032   {
4033     GNUNET_break (0);
4034     GNUNET_log (GNUNET_ERROR_TYPE_ERROR, "  tunnel %X not found\n", tid);
4035     GNUNET_SERVER_receive_done (client, GNUNET_SYSERR);
4036     return;
4037   }
4038   if (c != t->owner || tid >= GNUNET_MESH_LOCAL_TUNNEL_ID_SERV)
4039   {
4040     client_ignore_tunnel (c, t);
4041 #if 0
4042     // TODO: when to destroy incoming tunnel?
4043     if (t->nclients == 0)
4044     {
4045       GNUNET_assert (GNUNET_YES ==
4046                      GNUNET_CONTAINER_multihashmap_remove (incoming_tunnels,
4047                                                            &hash, t));
4048       GNUNET_assert (GNUNET_YES ==
4049                      GNUNET_CONTAINER_multihashmap_remove (t->peers,
4050                                                            &my_full_id.hashPubKey,
4051                                                            t));
4052     }
4053 #endif
4054     GNUNET_SERVER_receive_done (client, GNUNET_OK);
4055     return;
4056   }
4057   send_client_tunnel_disconnect(t, c);
4058   client_delete_tunnel(c, t);
4059
4060   /* Don't try to ACK the client about the tunnel_destroy multicast packet */
4061   t->owner = NULL;
4062   tunnel_send_destroy (t);
4063   tunnel_destroy (t);
4064   GNUNET_SERVER_receive_done (client, GNUNET_OK);
4065   return;
4066 }
4067
4068
4069 /**
4070  * Handler for connection requests to new peers
4071  *
4072  * @param cls closure
4073  * @param client identification of the client
4074  * @param message the actual message (PeerControl)
4075  */
4076 static void
4077 handle_local_connect_add (void *cls, struct GNUNET_SERVER_Client *client,
4078                           const struct GNUNET_MessageHeader *message)
4079 {
4080   struct GNUNET_MESH_PeerControl *peer_msg;
4081   struct MeshPeerInfo *peer_info;
4082   struct MeshClient *c;
4083   struct MeshTunnel *t;
4084   MESH_TunnelNumber tid;
4085
4086   GNUNET_log (GNUNET_ERROR_TYPE_DEBUG, "Got connection request\n");
4087   /* Sanity check for client registration */
4088   if (NULL == (c = client_get (client)))
4089   {
4090     GNUNET_break (0);
4091     GNUNET_SERVER_receive_done (client, GNUNET_SYSERR);
4092     return;
4093   }
4094
4095   peer_msg = (struct GNUNET_MESH_PeerControl *) message;
4096   /* Sanity check for message size */
4097   if (sizeof (struct GNUNET_MESH_PeerControl) != ntohs (peer_msg->header.size))
4098   {
4099     GNUNET_break (0);
4100     GNUNET_SERVER_receive_done (client, GNUNET_SYSERR);
4101     return;
4102   }
4103
4104   /* Tunnel exists? */
4105   tid = ntohl (peer_msg->tunnel_id);
4106   t = tunnel_get_by_local_id (c, tid);
4107   if (NULL == t)
4108   {
4109     GNUNET_break (0);
4110     GNUNET_SERVER_receive_done (client, GNUNET_SYSERR);
4111     return;
4112   }
4113
4114   /* Does client own tunnel? */
4115   if (t->owner->handle != client)
4116   {
4117     GNUNET_break (0);
4118     GNUNET_SERVER_receive_done (client, GNUNET_SYSERR);
4119     return;
4120   }
4121   GNUNET_log (GNUNET_ERROR_TYPE_DEBUG, "     for %s\n",
4122               GNUNET_i2s (&peer_msg->peer));
4123   peer_info = peer_info_get (&peer_msg->peer);
4124
4125   tunnel_add_peer (t, peer_info);
4126   peer_info_connect (peer_info, t);
4127
4128   GNUNET_SERVER_receive_done (client, GNUNET_OK);
4129   return;
4130 }
4131
4132
4133 /**
4134  * Handler for disconnection requests of peers in a tunnel
4135  *
4136  * @param cls closure
4137  * @param client identification of the client
4138  * @param message the actual message (PeerControl)
4139  */
4140 static void
4141 handle_local_connect_del (void *cls, struct GNUNET_SERVER_Client *client,
4142                           const struct GNUNET_MessageHeader *message)
4143 {
4144   struct GNUNET_MESH_PeerControl *peer_msg;
4145   struct MeshPeerInfo *peer_info;
4146   struct MeshClient *c;
4147   struct MeshTunnel *t;
4148   MESH_TunnelNumber tid;
4149
4150   GNUNET_log (GNUNET_ERROR_TYPE_DEBUG, "Got a PEER DEL request\n");
4151   /* Sanity check for client registration */
4152   if (NULL == (c = client_get (client)))
4153   {
4154     GNUNET_break (0);
4155     GNUNET_SERVER_receive_done (client, GNUNET_SYSERR);
4156     return;
4157   }
4158   peer_msg = (struct GNUNET_MESH_PeerControl *) message;
4159   /* Sanity check for message size */
4160   if (sizeof (struct GNUNET_MESH_PeerControl) != ntohs (peer_msg->header.size))
4161   {
4162     GNUNET_break (0);
4163     GNUNET_SERVER_receive_done (client, GNUNET_SYSERR);
4164     return;
4165   }
4166
4167   /* Tunnel exists? */
4168   tid = ntohl (peer_msg->tunnel_id);
4169   t = tunnel_get_by_local_id (c, tid);
4170   if (NULL == t)
4171   {
4172     GNUNET_break (0);
4173     GNUNET_SERVER_receive_done (client, GNUNET_SYSERR);
4174     return;
4175   }
4176   GNUNET_log (GNUNET_ERROR_TYPE_DEBUG, "  on tunnel %X\n", t->id.tid);
4177
4178   /* Does client own tunnel? */
4179   if (t->owner->handle != client)
4180   {
4181     GNUNET_break (0);
4182     GNUNET_SERVER_receive_done (client, GNUNET_SYSERR);
4183     return;
4184   }
4185
4186   GNUNET_log (GNUNET_ERROR_TYPE_DEBUG, "  for peer %s\n",
4187               GNUNET_i2s (&peer_msg->peer));
4188   /* Is the peer in the tunnel? */
4189   peer_info =
4190       GNUNET_CONTAINER_multihashmap_get (t->peers, &peer_msg->peer.hashPubKey);
4191   if (NULL == peer_info)
4192   {
4193     GNUNET_break (0);
4194     GNUNET_SERVER_receive_done (client, GNUNET_SYSERR);
4195     return;
4196   }
4197
4198   /* Ok, delete peer from tunnel */
4199   GNUNET_CONTAINER_multihashmap_remove_all (t->peers,
4200                                             &peer_msg->peer.hashPubKey);
4201
4202   send_destroy_path (t, peer_info->id);
4203   tunnel_delete_peer (t, peer_info->id);
4204   GNUNET_SERVER_receive_done (client, GNUNET_OK);
4205   return;
4206 }
4207
4208
4209 /**
4210  * Handler for connection requests to new peers by type
4211  *
4212  * @param cls closure
4213  * @param client identification of the client
4214  * @param message the actual message (ConnectPeerByType)
4215  */
4216 static void
4217 handle_local_connect_by_type (void *cls, struct GNUNET_SERVER_Client *client,
4218                               const struct GNUNET_MessageHeader *message)
4219 {
4220   struct GNUNET_MESH_ConnectPeerByType *connect_msg;
4221   struct MeshClient *c;
4222   struct MeshTunnel *t;
4223   GNUNET_HashCode hash;
4224   MESH_TunnelNumber tid;
4225
4226   GNUNET_log (GNUNET_ERROR_TYPE_DEBUG, "got connect by type request\n");
4227   /* Sanity check for client registration */
4228   if (NULL == (c = client_get (client)))
4229   {
4230     GNUNET_break (0);
4231     GNUNET_SERVER_receive_done (client, GNUNET_SYSERR);
4232     return;
4233   }
4234
4235   connect_msg = (struct GNUNET_MESH_ConnectPeerByType *) message;
4236   /* Sanity check for message size */
4237   if (sizeof (struct GNUNET_MESH_ConnectPeerByType) !=
4238       ntohs (connect_msg->header.size))
4239   {
4240     GNUNET_break (0);
4241     GNUNET_SERVER_receive_done (client, GNUNET_SYSERR);
4242     return;
4243   }
4244
4245   /* Tunnel exists? */
4246   tid = ntohl (connect_msg->tunnel_id);
4247   t = tunnel_get_by_local_id (c, tid);
4248   if (NULL == t)
4249   {
4250     GNUNET_break (0);
4251     GNUNET_SERVER_receive_done (client, GNUNET_SYSERR);
4252     return;
4253   }
4254
4255   /* Does client own tunnel? */
4256   if (t->owner->handle != client)
4257   {
4258     GNUNET_break (0);
4259     GNUNET_SERVER_receive_done (client, GNUNET_SYSERR);
4260     return;
4261   }
4262
4263   /* Do WE have the service? */
4264   t->type = ntohl (connect_msg->type);
4265   GNUNET_log (GNUNET_ERROR_TYPE_DEBUG, " type requested: %u\n", t->type);
4266   GNUNET_CRYPTO_hash (&t->type, sizeof (GNUNET_MESH_ApplicationType), &hash);
4267   if (GNUNET_CONTAINER_multihashmap_contains (applications, &hash) ==
4268       GNUNET_YES)
4269   {
4270     /* Yes! Fast forward, add ourselves to the tunnel and send the
4271      * good news to the client, and alert the destination client of
4272      * an incoming tunnel.
4273      *
4274      * FIXME send a path create to self, avoid code duplication
4275      */
4276     GNUNET_log (GNUNET_ERROR_TYPE_DEBUG, " available locally\n");
4277     GNUNET_CONTAINER_multihashmap_put (t->peers, &my_full_id.hashPubKey,
4278                                        peer_info_get (&my_full_id),
4279                                        GNUNET_CONTAINER_MULTIHASHMAPOPTION_UNIQUE_FAST);
4280
4281     GNUNET_log (GNUNET_ERROR_TYPE_DEBUG, " notifying client\n");
4282     send_client_peer_connected (t, myid);
4283     GNUNET_log (GNUNET_ERROR_TYPE_DEBUG, " Done\n");
4284     GNUNET_SERVER_receive_done (client, GNUNET_OK);
4285
4286     t->local_tid_dest = next_local_tid++;
4287     GNUNET_CRYPTO_hash (&t->local_tid_dest, sizeof (MESH_TunnelNumber), &hash);
4288     GNUNET_CONTAINER_multihashmap_put (incoming_tunnels, &hash, t,
4289                                        GNUNET_CONTAINER_MULTIHASHMAPOPTION_UNIQUE_FAST);
4290
4291     return;
4292   }
4293   /* Ok, lets find a peer offering the service */
4294   if (NULL != t->dht_get_type)
4295   {
4296     GNUNET_DHT_get_stop (t->dht_get_type);
4297   }
4298   GNUNET_log (GNUNET_ERROR_TYPE_DEBUG, " looking in DHT for %s\n",
4299               GNUNET_h2s (&hash));
4300   t->dht_get_type =
4301       GNUNET_DHT_get_start (dht_handle, 
4302                             GNUNET_BLOCK_TYPE_TEST, &hash, 10,
4303                             GNUNET_DHT_RO_RECORD_ROUTE |
4304                             GNUNET_DHT_RO_DEMULTIPLEX_EVERYWHERE, NULL, 0,
4305                             &dht_get_type_handler, t);
4306
4307   GNUNET_SERVER_receive_done (client, GNUNET_OK);
4308   return;
4309 }
4310
4311
4312 /**
4313  * Handler for client traffic directed to one peer
4314  *
4315  * @param cls closure
4316  * @param client identification of the client
4317  * @param message the actual message
4318  */
4319 static void
4320 handle_local_unicast (void *cls, struct GNUNET_SERVER_Client *client,
4321                       const struct GNUNET_MessageHeader *message)
4322 {
4323   struct MeshClient *c;
4324   struct MeshTunnel *t;
4325   struct MeshPeerInfo *pi;
4326   struct GNUNET_MESH_Unicast *data_msg;
4327   MESH_TunnelNumber tid;
4328   size_t size;
4329
4330   GNUNET_log (GNUNET_ERROR_TYPE_DEBUG,
4331               "Got a unicast request from a client!\n");
4332
4333   /* Sanity check for client registration */
4334   if (NULL == (c = client_get (client)))
4335   {
4336     GNUNET_break (0);
4337     GNUNET_SERVER_receive_done (client, GNUNET_SYSERR);
4338     return;
4339   }
4340   data_msg = (struct GNUNET_MESH_Unicast *) message;
4341   /* Sanity check for message size */
4342   size = ntohs (message->size);
4343   if (sizeof (struct GNUNET_MESH_Unicast) +
4344       sizeof (struct GNUNET_MessageHeader) > size)
4345   {
4346     GNUNET_break (0);
4347     GNUNET_SERVER_receive_done (client, GNUNET_SYSERR);
4348     return;
4349   }
4350
4351   /* Tunnel exists? */
4352   tid = ntohl (data_msg->tid);
4353   t = tunnel_get_by_local_id (c, tid);
4354   if (NULL == t)
4355   {
4356     GNUNET_break (0);
4357     GNUNET_SERVER_receive_done (client, GNUNET_SYSERR);
4358     return;
4359   }
4360
4361   /*  Is it a local tunnel? Then, does client own the tunnel? */
4362   if (t->owner->handle != client)
4363   {
4364     GNUNET_break (0);
4365     GNUNET_SERVER_receive_done (client, GNUNET_SYSERR);
4366     return;
4367   }
4368
4369   pi = GNUNET_CONTAINER_multihashmap_get (t->peers,
4370                                           &data_msg->destination.hashPubKey);
4371   /* Is the selected peer in the tunnel? */
4372   if (NULL == pi)
4373   {
4374     GNUNET_break (0);
4375     GNUNET_SERVER_receive_done (client, GNUNET_SYSERR);
4376     return;
4377   }
4378
4379   /* Ok, everything is correct, send the message
4380    * (pretend we got it from a mesh peer)
4381    */
4382   {
4383     char buf[ntohs (message->size)] GNUNET_ALIGN;
4384     struct GNUNET_MESH_Unicast *copy;
4385
4386     /* Work around const limitation */
4387     copy = (struct GNUNET_MESH_Unicast *) buf;
4388     memcpy (buf, data_msg, size);
4389     copy->oid = my_full_id;
4390     copy->tid = htonl (t->id.tid);
4391     GNUNET_log (GNUNET_ERROR_TYPE_DEBUG,
4392                 "  calling generic handler...\n");
4393     handle_mesh_data_unicast (NULL, &my_full_id, &copy->header, NULL, 0);
4394   }
4395   GNUNET_SERVER_receive_done (client, GNUNET_OK);
4396   return;
4397 }
4398
4399
4400 /**
4401  * Handler for client traffic directed to the origin
4402  *
4403  * @param cls closure
4404  * @param client identification of the client
4405  * @param message the actual message
4406  */
4407 static void
4408 handle_local_to_origin (void *cls, struct GNUNET_SERVER_Client *client,
4409                         const struct GNUNET_MessageHeader *message)
4410 {
4411   struct GNUNET_MESH_ToOrigin *data_msg;
4412   struct GNUNET_PeerIdentity id;
4413   struct MeshClient *c;
4414   struct MeshTunnel *t;
4415   MESH_TunnelNumber tid;
4416   size_t size;
4417
4418   /* Sanity check for client registration */
4419   if (NULL == (c = client_get (client)))
4420   {
4421     GNUNET_break (0);
4422     GNUNET_SERVER_receive_done (client, GNUNET_SYSERR);
4423     return;
4424   }
4425   data_msg = (struct GNUNET_MESH_ToOrigin *) message;
4426   /* Sanity check for message size */
4427   size = ntohs (message->size);
4428   if (sizeof (struct GNUNET_MESH_ToOrigin) +
4429       sizeof (struct GNUNET_MessageHeader) > size)
4430   {
4431     GNUNET_break (0);
4432     GNUNET_SERVER_receive_done (client, GNUNET_SYSERR);
4433     return;
4434   }
4435
4436   /* Tunnel exists? */
4437   tid = ntohl (data_msg->tid);
4438   GNUNET_log (GNUNET_ERROR_TYPE_DEBUG,
4439               "Got a ToOrigin request from a client! Tunnel %X\n", tid);
4440   if (tid < GNUNET_MESH_LOCAL_TUNNEL_ID_SERV)
4441   {
4442     GNUNET_break (0);
4443     GNUNET_SERVER_receive_done (client, GNUNET_SYSERR);
4444     return;
4445   }
4446   t = tunnel_get_by_local_id (c, tid);
4447   if (NULL == t)
4448   {
4449     GNUNET_break (0);
4450     GNUNET_SERVER_receive_done (client, GNUNET_SYSERR);
4451     return;
4452   }
4453
4454   /*  It should be sent by someone who has this as incoming tunnel. */
4455   if (-1 == client_knows_tunnel (c, t))
4456   {
4457     GNUNET_break (0);
4458     GNUNET_SERVER_receive_done (client, GNUNET_SYSERR);
4459     return;
4460   }
4461   GNUNET_PEER_resolve (t->id.oid, &id);
4462
4463   /* Ok, everything is correct, send the message
4464    * (pretend we got it from a mesh peer)
4465    */
4466   {
4467     char buf[ntohs (message->size)] GNUNET_ALIGN;
4468     struct GNUNET_MESH_ToOrigin *copy;
4469
4470     /* Work around const limitation */
4471     copy = (struct GNUNET_MESH_ToOrigin *) buf;
4472     memcpy (buf, data_msg, size);
4473     copy->oid = id;
4474     copy->tid = htonl (t->id.tid);
4475     copy->sender = my_full_id;
4476     GNUNET_log (GNUNET_ERROR_TYPE_DEBUG,
4477                 "  calling generic handler...\n");
4478     handle_mesh_data_to_orig (NULL, &my_full_id, &copy->header, NULL, 0);
4479   }
4480   GNUNET_SERVER_receive_done (client, GNUNET_OK);
4481   return;
4482 }
4483
4484
4485 /**
4486  * Handler for client traffic directed to all peers in a tunnel
4487  *
4488  * @param cls closure
4489  * @param client identification of the client
4490  * @param message the actual message
4491  */
4492 static void
4493 handle_local_multicast (void *cls, struct GNUNET_SERVER_Client *client,
4494                         const struct GNUNET_MessageHeader *message)
4495 {
4496   struct MeshClient *c;
4497   struct MeshTunnel *t;
4498   struct GNUNET_MESH_Multicast *data_msg;
4499   MESH_TunnelNumber tid;
4500
4501   GNUNET_log (GNUNET_ERROR_TYPE_DEBUG,
4502               "Got a multicast request from a client!\n");
4503
4504   /* Sanity check for client registration */
4505   if (NULL == (c = client_get (client)))
4506   {
4507     GNUNET_break (0);
4508     GNUNET_SERVER_receive_done (client, GNUNET_SYSERR);
4509     return;
4510   }
4511   data_msg = (struct GNUNET_MESH_Multicast *) message;
4512   /* Sanity check for message size */
4513   if (sizeof (struct GNUNET_MESH_Multicast) +
4514       sizeof (struct GNUNET_MessageHeader) > ntohs (data_msg->header.size))
4515   {
4516     GNUNET_break (0);
4517     GNUNET_SERVER_receive_done (client, GNUNET_SYSERR);
4518     return;
4519   }
4520
4521   /* Tunnel exists? */
4522   tid = ntohl (data_msg->tid);
4523   t = tunnel_get_by_local_id (c, tid);
4524   if (NULL == t)
4525   {
4526     GNUNET_break (0);
4527     GNUNET_SERVER_receive_done (client, GNUNET_SYSERR);
4528     return;
4529   }
4530
4531   /* Does client own tunnel? */
4532   if (t->owner->handle != client)
4533   {
4534     GNUNET_break (0);
4535     GNUNET_SERVER_receive_done (client, GNUNET_SYSERR);
4536     return;
4537   }
4538
4539   {
4540     char buf[ntohs (message->size)] GNUNET_ALIGN;
4541     struct GNUNET_MESH_Multicast *copy;
4542
4543     copy = (struct GNUNET_MESH_Multicast *) buf;
4544     memcpy (buf, message, ntohs (message->size));
4545     copy->oid = my_full_id;
4546     copy->tid = htonl (t->id.tid);
4547     copy->ttl = htonl (DEFAULT_TTL);
4548     copy->mid = htonl (t->mid + 1);
4549     GNUNET_log (GNUNET_ERROR_TYPE_DEBUG,
4550                 "  calling generic handler...\n");
4551     handle_mesh_data_multicast (client, &my_full_id, &copy->header, NULL, 0);
4552   }
4553
4554   /* receive done gets called when last copy is sent to a neighbor */
4555   return;
4556 }
4557
4558 /**
4559  * Functions to handle messages from clients
4560  */
4561 static struct GNUNET_SERVER_MessageHandler client_handlers[] = {
4562   {&handle_local_new_client, NULL,
4563    GNUNET_MESSAGE_TYPE_MESH_LOCAL_CONNECT, 0},
4564   {&handle_local_tunnel_create, NULL,
4565    GNUNET_MESSAGE_TYPE_MESH_LOCAL_TUNNEL_CREATE,
4566    sizeof (struct GNUNET_MESH_TunnelMessage)},
4567   {&handle_local_tunnel_destroy, NULL,
4568    GNUNET_MESSAGE_TYPE_MESH_LOCAL_TUNNEL_DESTROY,
4569    sizeof (struct GNUNET_MESH_TunnelMessage)},
4570   {&handle_local_connect_add, NULL,
4571    GNUNET_MESSAGE_TYPE_MESH_LOCAL_PEER_ADD,
4572    sizeof (struct GNUNET_MESH_PeerControl)},
4573   {&handle_local_connect_del, NULL,
4574    GNUNET_MESSAGE_TYPE_MESH_LOCAL_PEER_DEL,
4575    sizeof (struct GNUNET_MESH_PeerControl)},
4576   {&handle_local_connect_by_type, NULL,
4577    GNUNET_MESSAGE_TYPE_MESH_LOCAL_PEER_ADD_BY_TYPE,
4578    sizeof (struct GNUNET_MESH_ConnectPeerByType)},
4579   {&handle_local_unicast, NULL,
4580    GNUNET_MESSAGE_TYPE_MESH_UNICAST, 0},
4581   {&handle_local_to_origin, NULL,
4582    GNUNET_MESSAGE_TYPE_MESH_TO_ORIGIN, 0},
4583   {&handle_local_multicast, NULL,
4584    GNUNET_MESSAGE_TYPE_MESH_MULTICAST, 0},
4585   {NULL, NULL, 0, 0}
4586 };
4587
4588
4589 /**
4590  * To be called on core init/fail.
4591  *
4592  * @param cls service closure
4593  * @param server handle to the server for this service
4594  * @param identity the public identity of this peer
4595  */
4596 static void
4597 core_init (void *cls, struct GNUNET_CORE_Handle *server,
4598            const struct GNUNET_PeerIdentity *identity)
4599 {
4600   GNUNET_log (GNUNET_ERROR_TYPE_DEBUG, "Core init\n");
4601   core_handle = server;
4602   if (0 != memcmp (identity, &my_full_id, sizeof (my_full_id)) ||
4603       NULL == server)
4604   {
4605     GNUNET_log (GNUNET_ERROR_TYPE_ERROR, _("Wrong CORE service\n"));
4606     GNUNET_SCHEDULER_shutdown ();
4607   }
4608   return;
4609 }
4610
4611 /**
4612  * Method called whenever a given peer connects.
4613  *
4614  * @param cls closure
4615  * @param peer peer identity this notification is about
4616  * @param atsi performance data for the connection
4617  * @param atsi_count number of records in 'atsi'
4618  */
4619 static void
4620 core_connect (void *cls, const struct GNUNET_PeerIdentity *peer,
4621               const struct GNUNET_ATS_Information *atsi,
4622               unsigned int atsi_count)
4623 {
4624   struct MeshPeerInfo *peer_info;
4625   struct MeshPeerPath *path;
4626
4627   DEBUG_CONN ("Peer connected\n");
4628   DEBUG_CONN ("     %s\n", GNUNET_i2s (&my_full_id));
4629   peer_info = peer_info_get (peer);
4630   if (myid == peer_info->id)
4631   {
4632     DEBUG_CONN ("     (self)\n");
4633     return;
4634   }
4635   else
4636   {
4637     DEBUG_CONN ("     %s\n", GNUNET_i2s (peer));
4638   }
4639   path = path_new (2);
4640   path->peers[0] = myid;
4641   path->peers[1] = peer_info->id;
4642   GNUNET_PEER_change_rc (myid, 1);
4643   GNUNET_PEER_change_rc (peer_info->id, 1);
4644   peer_info_add_path (peer_info, path, GNUNET_YES);
4645   return;
4646 }
4647
4648 /**
4649  * Method called whenever a peer disconnects.
4650  *
4651  * @param cls closure
4652  * @param peer peer identity this notification is about
4653  */
4654 static void
4655 core_disconnect (void *cls, const struct GNUNET_PeerIdentity *peer)
4656 {
4657   struct MeshPeerInfo *pi;
4658
4659   DEBUG_CONN ("Peer disconnected\n");
4660   pi = GNUNET_CONTAINER_multihashmap_get (peers, &peer->hashPubKey);
4661   if (NULL == pi)
4662   {
4663     GNUNET_break (0);
4664     return;
4665   }
4666   while (NULL != pi->queue_head)
4667   {
4668       queue_destroy(pi->queue_head, GNUNET_YES);
4669   }
4670   peer_info_remove_path (pi, pi->id, myid);
4671   if (myid == pi->id)
4672   {
4673     DEBUG_CONN ("     (self)\n");
4674   }
4675   return;
4676 }
4677
4678
4679 /******************************************************************************/
4680 /************************      MAIN FUNCTIONS      ****************************/
4681 /******************************************************************************/
4682
4683 /**
4684  * Iterator over tunnel hash map entries to destroy the tunnel during shutdown.
4685  *
4686  * @param cls closure
4687  * @param key current key code
4688  * @param value value in the hash map
4689  * @return GNUNET_YES if we should continue to iterate,
4690  *         GNUNET_NO if not.
4691  */
4692 static int
4693 shutdown_tunnel (void *cls, const GNUNET_HashCode * key, void *value)
4694 {
4695   struct MeshTunnel *t = value;
4696
4697   tunnel_destroy (t);
4698   return GNUNET_YES;
4699 }
4700
4701 /**
4702  * Iterator over peer hash map entries to destroy the tunnel during shutdown.
4703  *
4704  * @param cls closure
4705  * @param key current key code
4706  * @param value value in the hash map
4707  * @return GNUNET_YES if we should continue to iterate,
4708  *         GNUNET_NO if not.
4709  */
4710 static int
4711 shutdown_peer (void *cls, const GNUNET_HashCode * key, void *value)
4712 {
4713   struct MeshPeerInfo *p = value;
4714
4715   while (NULL != p->queue_head)
4716   {
4717       queue_destroy(p->queue_head, GNUNET_YES);
4718   }
4719   peer_info_destroy (p);
4720   return GNUNET_YES;
4721 }
4722
4723 /**
4724  * Task run during shutdown.
4725  *
4726  * @param cls unused
4727  * @param tc unused
4728  */
4729 static void
4730 shutdown_task (void *cls, const struct GNUNET_SCHEDULER_TaskContext *tc)
4731 {
4732   GNUNET_log (GNUNET_ERROR_TYPE_DEBUG, "shutting down\n");
4733
4734   if (core_handle != NULL)
4735   {
4736     GNUNET_CORE_disconnect (core_handle);
4737     core_handle = NULL;
4738   }
4739   GNUNET_CONTAINER_multihashmap_iterate (tunnels, &shutdown_tunnel, NULL);
4740   GNUNET_CONTAINER_multihashmap_iterate (peers, &shutdown_peer, NULL);
4741   if (dht_handle != NULL)
4742   {
4743     GNUNET_DHT_disconnect (dht_handle);
4744     dht_handle = NULL;
4745   }
4746   if (nc != NULL)
4747   {
4748     GNUNET_SERVER_notification_context_destroy (nc);
4749     nc = NULL;
4750   }
4751   if (GNUNET_SCHEDULER_NO_TASK != announce_id_task)
4752   {
4753     GNUNET_SCHEDULER_cancel (announce_id_task);
4754     announce_id_task = GNUNET_SCHEDULER_NO_TASK;
4755   }
4756   GNUNET_log (GNUNET_ERROR_TYPE_DEBUG, "shut down\n");
4757 }
4758
4759 /**
4760  * Process mesh requests.
4761  *
4762  * @param cls closure
4763  * @param server the initialized server
4764  * @param c configuration to use
4765  */
4766 static void
4767 run (void *cls, struct GNUNET_SERVER_Handle *server,
4768      const struct GNUNET_CONFIGURATION_Handle *c)
4769 {
4770   struct MeshPeerInfo *peer;
4771   struct MeshPeerPath *p;
4772   char *keyfile;
4773
4774   GNUNET_log (GNUNET_ERROR_TYPE_DEBUG, "starting to run\n");
4775   server_handle = server;
4776   core_handle = GNUNET_CORE_connect (c, /* Main configuration */
4777                                      1,   /* queue size */
4778                                      NULL,      /* Closure passed to MESH functions */
4779                                      &core_init,        /* Call core_init once connected */
4780                                      &core_connect,     /* Handle connects */
4781                                      &core_disconnect,  /* remove peers on disconnects */
4782                                      NULL,      /* Don't notify about all incoming messages */
4783                                      GNUNET_NO, /* For header only in notification */
4784                                      NULL,      /* Don't notify about all outbound messages */
4785                                      GNUNET_NO, /* For header-only out notification */
4786                                      core_handlers);    /* Register these handlers */
4787
4788   if (core_handle == NULL)
4789   {
4790     GNUNET_break (0);
4791     GNUNET_SCHEDULER_shutdown ();
4792     return;
4793   }
4794
4795   if (GNUNET_OK !=
4796       GNUNET_CONFIGURATION_get_value_filename (c, "GNUNETD", "HOSTKEY",
4797                                                &keyfile))
4798   {
4799     GNUNET_log (GNUNET_ERROR_TYPE_ERROR,
4800                 _
4801                 ("Mesh service is lacking key configuration settings.  Exiting.\n"));
4802     GNUNET_SCHEDULER_shutdown ();
4803     return;
4804   }
4805   my_private_key = GNUNET_CRYPTO_rsa_key_create_from_file (keyfile);
4806   GNUNET_free (keyfile);
4807   if (my_private_key == NULL)
4808   {
4809     GNUNET_log (GNUNET_ERROR_TYPE_ERROR,
4810                 _("Mesh service could not access hostkey.  Exiting.\n"));
4811     GNUNET_SCHEDULER_shutdown ();
4812     return;
4813   }
4814   GNUNET_CRYPTO_rsa_key_get_public (my_private_key, &my_public_key);
4815   GNUNET_CRYPTO_hash (&my_public_key, sizeof (my_public_key),
4816                       &my_full_id.hashPubKey);
4817   myid = GNUNET_PEER_intern (&my_full_id);
4818
4819 // //   transport_handle = GNUNET_TRANSPORT_connect(c,
4820 // //                                               &my_full_id,
4821 // //                                               NULL,
4822 // //                                               NULL,
4823 // //                                               NULL,
4824 // //                                               NULL);
4825
4826   dht_handle = GNUNET_DHT_connect (c, 64);
4827   if (dht_handle == NULL)
4828   {
4829     GNUNET_break (0);
4830   }
4831
4832   next_tid = 0;
4833   next_local_tid = GNUNET_MESH_LOCAL_TUNNEL_ID_SERV;
4834
4835   tunnels = GNUNET_CONTAINER_multihashmap_create (32);
4836   incoming_tunnels = GNUNET_CONTAINER_multihashmap_create (32);
4837   peers = GNUNET_CONTAINER_multihashmap_create (32);
4838   applications = GNUNET_CONTAINER_multihashmap_create (32);
4839   types = GNUNET_CONTAINER_multihashmap_create (32);
4840
4841   GNUNET_SERVER_add_handlers (server_handle, client_handlers);
4842   nc = GNUNET_SERVER_notification_context_create (server_handle,
4843                                                   LOCAL_QUEUE_SIZE);
4844   GNUNET_SERVER_disconnect_notify (server_handle,
4845                                    &handle_local_client_disconnect, NULL);
4846
4847
4848   clients = NULL;
4849   clients_tail = NULL;
4850   next_client_id = 0;
4851
4852   announce_applications_task = GNUNET_SCHEDULER_NO_TASK;
4853   announce_id_task = GNUNET_SCHEDULER_add_now (&announce_id, cls);
4854
4855   /* Create a peer_info for the local peer */
4856   peer = peer_info_get (&my_full_id);
4857   p = path_new (1);
4858   p->peers[0] = myid;
4859   GNUNET_PEER_change_rc (myid, 1);
4860   peer_info_add_path (peer, p, GNUNET_YES);
4861
4862   /* Scheduled the task to clean up when shutdown is called */
4863   GNUNET_SCHEDULER_add_delayed (GNUNET_TIME_UNIT_FOREVER_REL, &shutdown_task,
4864                                 NULL);
4865
4866   GNUNET_log (GNUNET_ERROR_TYPE_DEBUG, "end of run()\n");
4867 }
4868
4869 /**
4870  * The main function for the mesh service.
4871  *
4872  * @param argc number of arguments from the command line
4873  * @param argv command line arguments
4874  * @return 0 ok, 1 on error
4875  */
4876 int
4877 main (int argc, char *const *argv)
4878 {
4879   int ret;
4880
4881   GNUNET_log (GNUNET_ERROR_TYPE_DEBUG, "main()\n");
4882   ret =
4883       (GNUNET_OK ==
4884        GNUNET_SERVICE_run (argc, argv, "mesh", GNUNET_SERVICE_OPTION_NONE, &run,
4885                            NULL)) ? 0 : 1;
4886   GNUNET_log (GNUNET_ERROR_TYPE_DEBUG, "main() END\n");
4887
4888   return ret;
4889 }