- refactoring, oneliners
[oweals/gnunet.git] / src / mesh / gnunet-service-mesh-new.c
1 /*
2      This file is part of GNUnet.
3      (C) 2001-2012 Christian Grothoff (and other contributing authors)
4
5      GNUnet is free software; you can redistribute it and/or modify
6      it under the terms of the GNU General Public License as published
7      by the Free Software Foundation; either version 3, or (at your
8      option) any later version.
9
10      GNUnet is distributed in the hope that it will be useful, but
11      WITHOUT ANY WARRANTY; without even the implied warranty of
12      MERCHANTABILITY or FITNESS FOR A PARTICULAR PURPOSE.  See the GNU
13      General Public License for more details.
14
15      You should have received a copy of the GNU General Public License
16      along with GNUnet; see the file COPYING.  If not, write to the
17      Free Software Foundation, Inc., 59 Temple Place - Suite 330,
18      Boston, MA 02111-1307, USA.
19 */
20
21 /**
22  * @file mesh/gnunet-service-mesh.c
23  * @brief GNUnet MESH service
24  * @author Bartlomiej Polot
25  *
26  * STRUCTURE:
27  * - DATA STRUCTURES
28  * - GLOBAL VARIABLES
29  * - GENERAL HELPERS
30  * - PERIODIC FUNCTIONS
31  * - MESH NETWORK HANDLER HELPERS
32  * - MESH NETWORK HANDLES
33  * - MESH LOCAL HANDLER HELPERS
34  * - MESH LOCAL HANDLES
35  * - MAIN FUNCTIONS (main & run)
36  *
37  * TODO:
38  * - error reporting (CREATE/CHANGE/ADD/DEL?) -- new message!
39  * - partial disconnect reporting -- same as error reporting?
40  * - add ping message
41  * - relay corking down to core
42  * - set ttl relative to tree depth
43  * - Add data ACK count in path ACK
44  * - Make common GNUNET_MESH_Data header for unicast, to_orig, multicast
45  * TODO END
46  */
47
48 #include "platform.h"
49 #include "mesh.h"
50 #include "mesh_protocol.h"
51 #include "mesh_tunnel_tree.h"
52 #include "block_mesh.h"
53 #include "mesh_block_lib.h"
54 #include "gnunet_dht_service.h"
55 #include "gnunet_statistics_service.h"
56 #include "gnunet_regex_lib.h"
57
58 #define MESH_BLOOM_SIZE         128
59
60 #define MESH_DEBUG_DHT          GNUNET_NO
61 #define MESH_DEBUG_CONNECTION   GNUNET_NO
62 #define MESH_DEBUG_TIMING       __LINUX__ && GNUNET_NO
63
64 #if MESH_DEBUG_CONNECTION
65 #define DEBUG_CONN(...) GNUNET_log (GNUNET_ERROR_TYPE_DEBUG, __VA_ARGS__)
66 #else
67 #define DEBUG_CONN(...)
68 #endif
69
70 #if MESH_DEBUG_DHT
71 #define DEBUG_DHT(...) GNUNET_log (GNUNET_ERROR_TYPE_DEBUG, __VA_ARGS__)
72 #else
73 #define DEBUG_DHT(...)
74 #endif
75
76 #if MESH_DEBUG_TIMING
77 #include <time.h>
78 double __sum;
79 uint64_t __count;
80 struct timespec __mesh_start;
81 struct timespec __mesh_end;
82 #define INTERVAL_START clock_gettime(CLOCK_PROCESS_CPUTIME_ID, &(__mesh_start))
83 #define INTERVAL_END \
84 do {\
85   clock_gettime(CLOCK_PROCESS_CPUTIME_ID, &(__mesh_end));\
86   double __diff = __mesh_end.tv_nsec - __mesh_start.tv_nsec;\
87   if (__diff < 0) __diff += 1000000000;\
88   __sum += __diff;\
89   __count++;\
90 } while (0)
91 #define INTERVAL_SHOW \
92 if (0 < __count)\
93   GNUNET_log (GNUNET_ERROR_TYPE_INFO, "AVG process time: %f ns\n", __sum/__count)
94 #else
95 #define INTERVAL_START
96 #define INTERVAL_END
97 #define INTERVAL_SHOW
98 #endif
99
100 /******************************************************************************/
101 /************************      DATA STRUCTURES     ****************************/
102 /******************************************************************************/
103
104 /** FWD declaration */
105 struct MeshPeerInfo;
106 struct MeshClient;
107
108
109 /**
110  * Struct representing a piece of data being sent to other peers
111  */
112 struct MeshData
113 {
114   /** Tunnel it belongs to. */
115   struct MeshTunnel *t;
116
117   /** How many remaining neighbors still hav't got it. */
118   unsigned int reference_counter;
119
120   /** How many remaining neighbors we need to send this to. */
121   unsigned int total_out;
122
123   /** Size of the data. */
124   size_t data_len;
125
126   /** Data itself */
127   void *data;
128 };
129
130
131 /**
132  * Struct containing info about a queued transmission to this peer
133  */
134 struct MeshPeerQueue
135 {
136     /**
137       * DLL next
138       */
139   struct MeshPeerQueue *next;
140
141     /**
142       * DLL previous
143       */
144   struct MeshPeerQueue *prev;
145
146     /**
147      * Peer this transmission is directed to.
148      */
149   struct MeshPeerInfo *peer;
150
151     /**
152      * Tunnel this message belongs to.
153      */
154   struct MeshTunnel *tunnel;
155
156     /**
157      * Pointer to info stucture used as cls.
158      */
159   void *cls;
160
161     /**
162      * Type of message
163      */
164   uint16_t type;
165
166     /**
167      * Size of the message
168      */
169   size_t size;
170 };
171
172
173 /**
174  * Struct to store regex information announced by clients.
175  */
176 struct MeshRegexDescriptor
177 {
178     /**
179      * Regular expression itself.
180      */
181   char *regex;
182
183     /**
184      * How many characters per edge can we squeeze?
185      */
186   uint16_t compression;
187 };
188
189 /**
190  * Struct containing all info possibly needed to build a package when called
191  * back by core.
192  */
193 struct MeshTransmissionDescriptor
194 {
195     /** ID of the tunnel this packet travels in */
196   struct MESH_TunnelID *origin;
197
198     /** Who was this message being sent to */
199   struct MeshPeerInfo *peer;
200
201     /** Ultimate destination of the packet */
202   GNUNET_PEER_Id destination;
203
204     /** Data descriptor */
205   struct MeshData* mesh_data;
206 };
207
208
209 /**
210  * Struct containing all information regarding a given peer
211  */
212 struct MeshPeerInfo
213 {
214     /**
215      * ID of the peer
216      */
217   GNUNET_PEER_Id id;
218
219     /**
220      * Last time we heard from this peer
221      */
222   struct GNUNET_TIME_Absolute last_contact;
223
224     /**
225      * Task handler for delayed connect task;
226      */
227   GNUNET_SCHEDULER_TaskIdentifier connect_task;
228
229     /**
230      * Number of attempts to reconnect so far
231      */
232   int n_reconnect_attempts;
233
234     /**
235      * Paths to reach the peer, ordered by ascending hop count
236      */
237   struct MeshPeerPath *path_head;
238
239     /**
240      * Paths to reach the peer, ordered by ascending hop count
241      */
242   struct MeshPeerPath *path_tail;
243
244     /**
245      * Handle to stop the DHT search for a path to this peer
246      */
247   struct GNUNET_DHT_GetHandle *dhtget;
248
249     /**
250      * Closure given to the DHT GET
251      */
252   struct MeshPathInfo *dhtgetcls;
253
254     /**
255      * Array of tunnels this peer participates in
256      * (most probably a small amount, therefore not a hashmap)
257      * When the path to the peer changes, notify these tunnels to let them
258      * re-adjust their path trees.
259      */
260   struct MeshTunnel **tunnels;
261
262     /**
263      * Number of tunnels this peers participates in
264      */
265   unsigned int ntunnels;
266
267    /**
268     * Transmission queue to core DLL head
269     */
270   struct MeshPeerQueue *queue_head;
271
272    /**
273     * Transmission queue to core DLL tail
274     */
275    struct MeshPeerQueue *queue_tail;
276
277    /**
278     * How many messages are in the queue to this peer.
279     */
280    unsigned int queue_n;
281
282    /**
283     * Handle to for queued transmissions
284     */
285   struct GNUNET_CORE_TransmitHandle *core_transmit;
286 };
287
288
289 /**
290  * Globally unique tunnel identification (owner + number)
291  * DO NOT USE OVER THE NETWORK
292  */
293 struct MESH_TunnelID
294 {
295     /**
296      * Node that owns the tunnel
297      */
298   GNUNET_PEER_Id oid;
299
300     /**
301      * Tunnel number to differentiate all the tunnels owned by the node oid
302      * ( tid < GNUNET_MESH_LOCAL_TUNNEL_ID_CLI )
303      */
304   MESH_TunnelNumber tid;
305 };
306
307
308 /**
309  * Struct containing all information regarding a tunnel
310  * For an intermediate node the improtant info used will be:
311  * - id        Tunnel unique identification
312  * - paths[0]  To know where to send it next
313  * - metainfo: ready, speeds, accounting
314  */
315 struct MeshTunnel
316 {
317     /**
318      * Tunnel ID
319      */
320   struct MESH_TunnelID id;
321
322     /**
323      * Local tunnel number ( >= GNUNET_MESH_LOCAL_TUNNEL_ID_CLI or 0 )
324      */
325   MESH_TunnelNumber local_tid;
326
327     /**
328      * Local tunnel number for local destination clients (incoming number)
329      * ( >= GNUNET_MESH_LOCAL_TUNNEL_ID_SERV or 0). All clients share the same
330      * number.
331      */
332   MESH_TunnelNumber local_tid_dest;
333
334     /**
335      * Is the speed on the tunnel limited to the slowest peer?
336      */
337   int speed_min;
338
339     /**
340      * Is the tunnel bufferless (minimum latency)?
341      */
342   int nobuffer;
343
344     /**
345      * Packet ID of the last fwd packet seen (sent/retransmitted/received).
346      */
347   uint32_t fwd_pid;
348
349     /**
350      * Packet ID of the last bck packet sent (unique counter per hop).
351      */
352   uint32_t bck_pid;
353
354   /**
355      * SKIP value for this tunnel.
356      */
357   uint32_t skip;
358
359     /**
360      * MeshTunnelFlowControlInfo of all children, indexed by GNUNET_PEER_Id.
361      * Contains the Flow Control info: FWD ACK value received,
362      * last BCK ACK sent, PID and SKIP values.
363      */
364   struct GNUNET_CONTAINER_MultiHashMap *children_fc;
365
366     /**
367      * Last ACK sent towards the origin (for traffic towards leaf node).
368      */
369   uint32_t last_fwd_ack;
370
371   /**
372    * BCK ACK value received from the hop towards the owner of the tunnel,
373    * (previous node / owner): up to what message PID can we sent back to him.
374    */
375   uint32_t bck_ack;
376
377     /**
378      * How many messages are in the forward queue (towards leaves).
379      */
380   unsigned int fwd_queue_n;
381
382     /**
383      * How many messages do we accept in the forward queue.
384      */
385   unsigned int fwd_queue_max;
386
387     /**
388      * How many messages are in the backward queue (towards origin).
389      */
390   unsigned int bck_queue_n;
391
392     /**
393      * How many messages do we accept in the backward queue.
394     */
395    unsigned int bck_queue_max;
396
397     /**
398      * Task to poll peer in case of a stall.
399      */
400    GNUNET_SCHEDULER_TaskIdentifier fc_poll_bck;
401
402     /**
403      * Last time the tunnel was used
404      */
405   struct GNUNET_TIME_Absolute timestamp;
406
407     /**
408      * Peers in the tunnel, indexed by PeerIdentity -> (MeshPeerInfo)
409      * containing peers added by id or by type, not intermediate peers.
410      */
411   struct GNUNET_CONTAINER_MultiHashMap *peers;
412
413     /**
414      * Number of peers that are connected and potentially ready to receive data
415      */
416   unsigned int peers_ready;
417
418     /**
419      * Number of peers that have been added to the tunnel
420      */
421   unsigned int peers_total;
422
423     /**
424      * Client owner of the tunnel, if any
425      */
426   struct MeshClient *owner;
427
428     /**
429      * Clients that have been informed about and want to stay in the tunnel.
430      */
431   struct MeshClient **clients;
432
433     /**
434      * Flow control info for each client.
435      */
436   struct MeshTunnelFlowControlInfo *clients_fc;
437
438   /**
439      * Number of elements in clients/clients_fc
440      */
441   unsigned int nclients;
442
443     /**
444      * Clients that have been informed but requested to leave the tunnel.
445      */
446   struct MeshClient **ignore;
447
448     /**
449      * Number of elements in clients
450      */
451   unsigned int nignore;
452
453     /**
454      * Blacklisted peers
455      */
456   GNUNET_PEER_Id *blacklisted;
457
458     /**
459      * Number of elements in blacklisted
460      */
461   unsigned int nblacklisted;
462
463   /**
464    * Bloomfilter (for peer identities) to stop circular routes
465    */
466   char bloomfilter[MESH_BLOOM_SIZE];
467
468   /**
469    * Tunnel paths
470    */
471   struct MeshTunnelTree *tree;
472
473   /**
474    * Application type we are looking for in this tunnel
475    */
476   GNUNET_MESH_ApplicationType type;
477
478     /**
479      * Used to search peers offering a service
480      */
481   struct GNUNET_DHT_GetHandle *dht_get_type;
482
483     /**
484      * Initial context of the regex search for a connect_by_string
485      */
486   struct MeshRegexSearchContext *regex_ctx;
487
488     /**
489      * Task to keep the used paths alive
490      */
491   GNUNET_SCHEDULER_TaskIdentifier path_refresh_task;
492
493     /**
494      * Task to destroy the tunnel after timeout
495      *
496      * FIXME: merge the two? a tunnel will have either
497      * a path refresh OR a timeout, never both!
498      */
499   GNUNET_SCHEDULER_TaskIdentifier timeout_task;
500
501     /**
502      * Flag to signal the destruction of the tunnel.
503      * If this is set GNUNET_YES the tunnel will be destroyed
504      * when the queue is empty.
505      */
506   int destroy;
507 };
508
509
510 /**
511  * Flow control info about a node in a tunnel. The node can be a local client
512  * or a remote peer.
513  */
514 struct MeshTunnelFlowControlInfo
515 {
516     /**
517      * Peer info of the node, NULL if local client.
518      */
519   struct MeshPeerInfo *peer;
520
521     /**
522      * Client info of the node, NULL if remote peer.
523      */
524   struct MeshClient *client;
525
526     /**
527      * SKIP value.
528      */
529   uint32_t skip;
530
531     /**
532      * Last PID sent.
533      */
534   uint32_t fwd_pid;
535
536     /**
537      * Last PID received.
538      */
539   uint32_t bck_pid;
540
541     /**
542      * Maximum PID they allowed us to send (FWD ACK received).
543      */
544   uint32_t fwd_ack;
545
546     /**
547      * Maximum PID we allowed them to send (BCK ACK sent).
548      */
549   uint32_t bck_ack;
550
551     /**
552      * Circular buffer pointing to MeshPeerQueue elements for all
553      * payload traffic going to this node.
554      * Size determined by the tunnel queue size (@c t->fwd_queue_max).
555      */
556   struct MeshPeerQueue **send_buffer;
557
558     /**
559      * Index of the oldest element in the send_buffer.
560      */
561   unsigned int send_buffer_start;
562
563     /**
564      * How many elements are already in the buffer.
565      */
566   unsigned int send_buffer_n;
567
568     /**
569      * Tunnel this info is about
570      */
571   struct MeshTunnel *t;
572
573     /**
574      * Task to poll peer in case of a stall.
575      */
576    GNUNET_SCHEDULER_TaskIdentifier fc_poll;
577 };
578
579
580 /**
581  * Info collected during iteration of child nodes in order to get the ACK value
582  * for a tunnel.
583  */
584 struct MeshTunnelChildIteratorContext
585 {
586     /**
587      * Tunnel whose info is being collected.
588      */
589   struct MeshTunnel *t;
590
591     /**
592      * Is this context initialized? Is the value in max_child_ack valid?
593      */
594   int init;
595
596     /**
597      * Maximum child ACK so far.
598      */
599   uint32_t max_child_ack;
600
601     /**
602      * Number of children nodes
603      */
604   unsigned int nchildren;
605 };
606
607
608 /**
609  * Info needed to work with tunnel paths and peers
610  */
611 struct MeshPathInfo
612 {
613   /**
614    * Tunnel
615    */
616   struct MeshTunnel *t;
617
618   /**
619    * Neighbouring peer to whom we send the packet to
620    */
621   struct MeshPeerInfo *peer;
622
623   /**
624    * Path itself
625    */
626   struct MeshPeerPath *path;
627 };
628
629
630 /**
631  * Struct containing information about a client of the service
632  */
633 struct MeshClient
634 {
635     /**
636      * Linked list next
637      */
638   struct MeshClient *next;
639
640     /**
641      * Linked list prev
642      */
643   struct MeshClient *prev;
644
645     /**
646      * Tunnels that belong to this client, indexed by local id
647      */
648   struct GNUNET_CONTAINER_MultiHashMap *own_tunnels;
649
650    /**
651      * Tunnels this client has accepted, indexed by incoming local id
652      */
653   struct GNUNET_CONTAINER_MultiHashMap *incoming_tunnels;
654
655    /**
656      * Tunnels this client has rejected, indexed by incoming local id
657      */
658   struct GNUNET_CONTAINER_MultiHashMap *ignore_tunnels;
659     /**
660      * Handle to communicate with the client
661      */
662   struct GNUNET_SERVER_Client *handle;
663
664     /**
665      * Applications that this client has claimed to provide
666      */
667   struct GNUNET_CONTAINER_MultiHashMap *apps;
668
669     /**
670      * Messages that this client has declared interest in
671      */
672   struct GNUNET_CONTAINER_MultiHashMap *types;
673
674     /**
675      * Whether the client is active or shutting down (don't send confirmations
676      * to a client that is shutting down.
677      */
678   int shutting_down;
679
680     /**
681      * ID of the client, mainly for debug messages
682      */
683   unsigned int id;
684   
685     /**
686      * Regular expressions describing the services offered by this client.
687      */
688   struct MeshRegexDescriptor *regexes; // FIXME regex add timeout? API to remove a regex?
689
690     /**
691      * Number of regular expressions in regexes.
692      */
693   unsigned int n_regex;
694
695     /**
696      * Task to refresh all regular expresions in the DHT.
697      */
698   GNUNET_SCHEDULER_TaskIdentifier regex_announce_task;
699
700 };
701
702
703 /**
704  * Struct to keep information of searches of services described by a regex
705  * using a user-provided string service description.
706  */
707 struct MeshRegexSearchInfo
708 {
709     /**
710      * Which tunnel is this for
711      */
712   struct MeshTunnel *t;
713
714     /**
715      * User provided description of the searched service.
716      */
717   char *description;
718
719     /**
720      * Part of the description already consumed by the search.
721      */
722   size_t position;
723
724     /**
725      * Running DHT GETs.
726      */
727   struct GNUNET_CONTAINER_MultiHashMap *dht_get_handles;
728
729     /**
730      * Results from running DHT GETs.
731      */
732   struct GNUNET_CONTAINER_MultiHashMap *dht_get_results;
733
734     /**
735      * Contexts, for each running DHT GET. Free all on end of search.
736      */
737   struct MeshRegexSearchContext **contexts;
738
739     /**
740      * Number of contexts (branches/steps in search).
741      */
742   unsigned int n_contexts;
743
744     /**
745      * Peer that is connecting via connect_by_string. When connected, free ctx.
746      */
747   GNUNET_PEER_Id peer;
748
749     /**
750      * Other peers that are found but not yet being connected to.
751      */
752   GNUNET_PEER_Id *peers;
753
754     /**
755      * Number of elements in peers.
756      */
757   unsigned int n_peers;
758
759     /**
760      * Next peer to try to connect to.
761      */
762   unsigned int i_peer;
763
764     /**
765      * Timeout for a connect attempt.
766      * When reached, try to connect to a different peer, if any. If not,
767      * try the same peer again.
768      */
769   GNUNET_SCHEDULER_TaskIdentifier timeout;
770
771 };
772
773 /**
774  * Struct to keep state of running searches that have consumed a part of
775  * the inital string.
776  */
777 struct MeshRegexSearchContext
778 {
779     /**
780      * Part of the description already consumed by
781      * this particular search branch.
782      */
783   size_t position;
784
785     /**
786      * Information about the search.
787      */
788   struct MeshRegexSearchInfo *info;
789
790     /**
791      * We just want to look for one edge, the longer the better.
792      * Keep its length.
793      */
794   unsigned int longest_match;
795
796     /**
797      * Destination hash of the longest match.
798      */
799   struct GNUNET_HashCode hash;
800 };
801
802 /******************************************************************************/
803 /************************      DEBUG FUNCTIONS     ****************************/
804 /******************************************************************************/
805
806 #if MESH_DEBUG
807 /**
808  * GNUNET_SCHEDULER_Task for printing a message after some operation is done
809  * @param cls string to print
810  * @param success  GNUNET_OK if the PUT was transmitted,
811  *                GNUNET_NO on timeout,
812  *                GNUNET_SYSERR on disconnect from service
813  *                after the PUT message was transmitted
814  *                (so we don't know if it was received or not)
815  */
816
817 #if 0
818 static void
819 mesh_debug (void *cls, int success)
820 {
821   char *s = cls;
822
823   GNUNET_log (GNUNET_ERROR_TYPE_DEBUG, "%s (%d)\n", s, success);
824 }
825 #endif
826
827 unsigned int debug_fwd_ack;
828 unsigned int debug_bck_ack;
829
830 #endif
831
832 /******************************************************************************/
833 /***********************      GLOBAL VARIABLES     ****************************/
834 /******************************************************************************/
835
836 /**
837  * Configuration parameters
838  */
839 static struct GNUNET_TIME_Relative refresh_path_time;
840 static struct GNUNET_TIME_Relative app_announce_time;
841 static struct GNUNET_TIME_Relative id_announce_time;
842 static struct GNUNET_TIME_Relative unacknowledged_wait_time;
843 static struct GNUNET_TIME_Relative connect_timeout;
844 static unsigned long long default_ttl;
845 static unsigned long long dht_replication_level;
846 static unsigned long long max_tunnels;
847 static unsigned long long max_msgs_queue;
848
849
850 /**
851  * Hostkey generation context
852  */
853 static struct GNUNET_CRYPTO_RsaKeyGenerationContext *keygen;
854
855 /**
856  * DLL with all the clients, head.
857  */
858 static struct MeshClient *clients;
859
860 /**
861  * DLL with all the clients, tail.
862  */
863 static struct MeshClient *clients_tail;
864
865 /**
866  * Tunnels known, indexed by MESH_TunnelID (MeshTunnel).
867  */
868 static struct GNUNET_CONTAINER_MultiHashMap *tunnels;
869
870 /**
871  * Number of tunnels known.
872  */
873 static unsigned long long n_tunnels;
874
875 /**
876  * Tunnels incoming, indexed by MESH_TunnelNumber
877  * (which is greater than GNUNET_MESH_LOCAL_TUNNEL_ID_SERV).
878  */
879 static struct GNUNET_CONTAINER_MultiHashMap *incoming_tunnels;
880
881 /**
882  * Peers known, indexed by PeerIdentity (MeshPeerInfo).
883  */
884 static struct GNUNET_CONTAINER_MultiHashMap *peers;
885
886 /*
887  * Handle to communicate with transport
888  */
889 // static struct GNUNET_TRANSPORT_Handle *transport_handle;
890
891 /**
892  * Handle to communicate with core.
893  */
894 static struct GNUNET_CORE_Handle *core_handle;
895
896 /**
897  * Handle to use DHT.
898  */
899 static struct GNUNET_DHT_Handle *dht_handle;
900
901 /**
902  * Handle to server.
903  */
904 static struct GNUNET_SERVER_Handle *server_handle;
905
906 /**
907  * Handle to the statistics service.
908  */
909 static struct GNUNET_STATISTICS_Handle *stats;
910
911 /**
912  * Notification context, to send messages to local clients.
913  */
914 static struct GNUNET_SERVER_NotificationContext *nc;
915
916 /**
917  * Local peer own ID (memory efficient handle).
918  */
919 static GNUNET_PEER_Id myid;
920
921 /**
922  * Local peer own ID (full value).
923  */
924 static struct GNUNET_PeerIdentity my_full_id;
925
926 /**
927  * Own private key.
928  */
929 static struct GNUNET_CRYPTO_RsaPrivateKey *my_private_key;
930
931 /**
932  * Own public key.
933  */
934 static struct GNUNET_CRYPTO_RsaPublicKeyBinaryEncoded my_public_key;
935
936 /**
937  * Tunnel ID for the next created tunnel (global tunnel number).
938  */
939 static MESH_TunnelNumber next_tid;
940
941 /**
942  * Tunnel ID for the next incoming tunnel (local tunnel number).
943  */
944 static MESH_TunnelNumber next_local_tid;
945
946 /**
947  * All application types provided by this peer.
948  */
949 static struct GNUNET_CONTAINER_MultiHashMap *applications;
950
951 /**
952  * All message types clients of this peer are interested in.
953  */
954 static struct GNUNET_CONTAINER_MultiHashMap *types;
955
956 /**
957  * Task to periodically announce provided applications.
958  */
959 GNUNET_SCHEDULER_TaskIdentifier announce_applications_task;
960
961 /**
962  * Task to periodically announce itself in the network.
963  */
964 GNUNET_SCHEDULER_TaskIdentifier announce_id_task;
965
966 /**
967  * Next ID to assign to a client.
968  */
969 unsigned int next_client_id;
970
971
972 /******************************************************************************/
973 /***********************         DECLARATIONS        **************************/
974 /******************************************************************************/
975
976 /**
977  * Function to process paths received for a new peer addition. The recorded
978  * paths form the initial tunnel, which can be optimized later.
979  * Called on each result obtained for the DHT search.
980  *
981  * @param cls closure
982  * @param exp when will this value expire
983  * @param key key of the result
984  * @param type type of the result
985  * @param size number of bytes in data
986  * @param data pointer to the result data
987  */
988 static void
989 dht_get_id_handler (void *cls, struct GNUNET_TIME_Absolute exp,
990                     const struct GNUNET_HashCode * key,
991                     const struct GNUNET_PeerIdentity *get_path,
992                     unsigned int get_path_length,
993                     const struct GNUNET_PeerIdentity *put_path,
994                     unsigned int put_path_length, enum GNUNET_BLOCK_Type type,
995                     size_t size, const void *data);
996
997
998 /**
999  * Function to process DHT string to regex matching.
1000  * Called on each result obtained for the DHT search.
1001  *
1002  * @param cls closure (search context)
1003  * @param exp when will this value expire
1004  * @param key key of the result
1005  * @param get_path path of the get request (not used)
1006  * @param get_path_length lenght of get_path (not used)
1007  * @param put_path path of the put request (not used)
1008  * @param put_path_length length of the put_path (not used)
1009  * @param type type of the result
1010  * @param size number of bytes in data
1011  * @param data pointer to the result data
1012  *
1013  * TODO: re-issue the request after certain time? cancel after X results?
1014  */
1015 static void
1016 dht_get_string_handler (void *cls, struct GNUNET_TIME_Absolute exp,
1017                         const struct GNUNET_HashCode * key,
1018                         const struct GNUNET_PeerIdentity *get_path,
1019                         unsigned int get_path_length,
1020                         const struct GNUNET_PeerIdentity *put_path,
1021                         unsigned int put_path_length, enum GNUNET_BLOCK_Type type,
1022                         size_t size, const void *data);
1023
1024
1025 /**
1026  * Function to process DHT string to regex matching.
1027  * Called on each result obtained for the DHT search.
1028  *
1029  * @param cls closure (search context)
1030  * @param exp when will this value expire
1031  * @param key key of the result
1032  * @param get_path path of the get request (not used)
1033  * @param get_path_length lenght of get_path (not used)
1034  * @param put_path path of the put request (not used)
1035  * @param put_path_length length of the put_path (not used)
1036  * @param type type of the result
1037  * @param size number of bytes in data
1038  * @param data pointer to the result data
1039  */
1040 static void
1041 dht_get_string_accept_handler (void *cls, struct GNUNET_TIME_Absolute exp,
1042                                const struct GNUNET_HashCode * key,
1043                                const struct GNUNET_PeerIdentity *get_path,
1044                                unsigned int get_path_length,
1045                                const struct GNUNET_PeerIdentity *put_path,
1046                                unsigned int put_path_length,
1047                                enum GNUNET_BLOCK_Type type,
1048                                size_t size, const void *data);
1049
1050
1051 /**
1052  * Retrieve the MeshPeerInfo stucture associated with the peer, create one
1053  * and insert it in the appropiate structures if the peer is not known yet.
1054  *
1055  * @param peer Short identity of the peer.
1056  *
1057  * @return Existing or newly created peer info.
1058  */
1059 static struct MeshPeerInfo *
1060 peer_info_get_short (const GNUNET_PEER_Id peer);
1061
1062
1063 /**
1064  * Try to establish a new connection to this peer.
1065  * Use the best path for the given tunnel.
1066  * If the peer doesn't have any path to it yet, try to get one.
1067  * If the peer already has some path, send a CREATE PATH towards it.
1068  *
1069  * @param peer PeerInfo of the peer.
1070  * @param t Tunnel for which to create the path, if possible.
1071  */
1072 static void
1073 peer_info_connect (struct MeshPeerInfo *peer, struct MeshTunnel *t);
1074
1075
1076 /**
1077  * Add a peer to a tunnel, accomodating paths accordingly and initializing all
1078  * needed rescources.
1079  * If peer already exists, reevaluate shortest path and change if different.
1080  *
1081  * @param t Tunnel we want to add a new peer to
1082  * @param peer PeerInfo of the peer being added
1083  *
1084  */
1085 static void
1086 tunnel_add_peer (struct MeshTunnel *t, struct MeshPeerInfo *peer);
1087
1088
1089 /**
1090  * Removes an explicit path from a tunnel, freeing all intermediate nodes
1091  * that are no longer needed, as well as nodes of no longer reachable peers.
1092  * The tunnel itself is also destoyed if results in a remote empty tunnel.
1093  *
1094  * @param t Tunnel from which to remove the path.
1095  * @param peer Short id of the peer which should be removed.
1096  */
1097 static void
1098 tunnel_delete_peer (struct MeshTunnel *t, GNUNET_PEER_Id peer);
1099
1100
1101 /**
1102  * Search for a tunnel by global ID using full PeerIdentities.
1103  *
1104  * @param oid owner of the tunnel.
1105  * @param tid global tunnel number.
1106  *
1107  * @return tunnel handler, NULL if doesn't exist.
1108  */
1109 static struct MeshTunnel *
1110 tunnel_get (struct GNUNET_PeerIdentity *oid, MESH_TunnelNumber tid);
1111
1112
1113 /**
1114  * Delete an active client from the tunnel.
1115  *
1116  * @param t Tunnel.
1117  * @param c Client.
1118  */
1119 static void
1120 tunnel_delete_active_client (struct MeshTunnel *t, const struct MeshClient *c);
1121
1122 /**
1123  * Notify a tunnel that a connection has broken that affects at least
1124  * some of its peers.
1125  *
1126  * @param t Tunnel affected.
1127  * @param p1 Peer that got disconnected from p2.
1128  * @param p2 Peer that got disconnected from p1.
1129  *
1130  * @return Short ID of the peer disconnected (either p1 or p2).
1131  *         0 if the tunnel remained unaffected.
1132  */
1133 static GNUNET_PEER_Id
1134 tunnel_notify_connection_broken (struct MeshTunnel *t, GNUNET_PEER_Id p1,
1135                                  GNUNET_PEER_Id p2);
1136
1137
1138 /**
1139  * Get the current ack value for a tunnel, for data going from root to leaves,
1140  * taking in account the tunnel mode and the status of all children and clients.
1141  *
1142  * @param t Tunnel.
1143  *
1144  * @return Maximum PID allowed.
1145  */
1146 static uint32_t
1147 tunnel_get_fwd_ack (struct MeshTunnel *t);
1148
1149
1150 /**
1151  * Add a client to a tunnel, initializing all needed data structures.
1152  * 
1153  * @param t Tunnel to which add the client.
1154  * @param c Client which to add to the tunnel.
1155  */
1156 static void
1157 tunnel_add_client (struct MeshTunnel *t, struct MeshClient *c);
1158
1159
1160 /**
1161  * Jump to the next edge, with the longest matching token.
1162  *
1163  * @param block Block found in the DHT.
1164  * @param size Size of the block.
1165  * @param ctx Context of the search.
1166  *
1167  * @return GNUNET_YES if should keep iterating, GNUNET_NO otherwise.
1168  */
1169 static void
1170 regex_next_edge (const struct MeshRegexBlock *block,
1171                  size_t size,
1172                  struct MeshRegexSearchContext *ctx);
1173
1174
1175 /**
1176  * Find a path to a peer that offers a regex servcie compatible
1177  * with a given string.
1178  * 
1179  * @param key The key of the accepting state.
1180  * @param ctx Context containing info about the string, tunnel, etc.
1181  */
1182 static void
1183 regex_find_path (const struct GNUNET_HashCode *key,
1184                  struct MeshRegexSearchContext *ctx);
1185
1186
1187 /**
1188  * @brief Queue and pass message to core when possible.
1189  * 
1190  * If type is payload (UNICAST, TO_ORIGIN, MULTICAST) checks for queue status
1191  * and accounts for it. In case the queue is full, the message is dropped and
1192  * a break issued.
1193  * 
1194  * Otherwise, message is treated as internal and allowed to go regardless of 
1195  * queue status.
1196  *
1197  * @param cls Closure (@c type dependant). It will be used by queue_send to
1198  *            build the message to be sent if not already prebuilt.
1199  * @param type Type of the message, 0 for a raw message.
1200  * @param size Size of the message.
1201  * @param dst Neighbor to send message to.
1202  * @param t Tunnel this message belongs to.
1203  */
1204 static void
1205 queue_add (void *cls, uint16_t type, size_t size,
1206            struct MeshPeerInfo *dst, struct MeshTunnel *t);
1207
1208
1209 /**
1210  * Free a transmission that was already queued with all resources
1211  * associated to the request.
1212  *
1213  * @param queue Queue handler to cancel.
1214  * @param clear_cls Is it necessary to free associated cls?
1215  */
1216 static void
1217 queue_destroy (struct MeshPeerQueue *queue, int clear_cls);
1218
1219
1220 /**
1221  * @brief Get the next transmittable message from the queue.
1222  *
1223  * This will be the head, except in the case of being a data packet
1224  * not allowed by the destination peer.
1225  *
1226  * @param peer Destination peer.
1227  *
1228  * @return The next viable MeshPeerQueue element to send to that peer.
1229  *         NULL when there are no transmittable messages.
1230  */
1231 struct MeshPeerQueue *
1232 queue_get_next (const struct MeshPeerInfo *peer);
1233
1234
1235 /**
1236  * Core callback to write a queued packet to core buffer
1237  *
1238  * @param cls Closure (peer info).
1239  * @param size Number of bytes available in buf.
1240  * @param buf Where the to write the message.
1241  *
1242  * @return number of bytes written to buf
1243  */
1244 static size_t
1245 queue_send (void *cls, size_t size, void *buf);
1246
1247 /******************************************************************************/
1248 /************************         ITERATORS        ****************************/
1249 /******************************************************************************/
1250
1251 /**
1252  * Iterator over found existing mesh regex blocks that match an ongoing search.
1253  *
1254  * @param cls closure
1255  * @param key current key code
1256  * @param value value in the hash map
1257  * @return GNUNET_YES if we should continue to iterate,
1258  *         GNUNET_NO if not.
1259  */
1260 static int
1261 regex_result_iterator (void *cls,
1262                        const struct GNUNET_HashCode * key,
1263                        void *value)
1264 {
1265   struct MeshRegexBlock *block = value;
1266   struct MeshRegexSearchContext *ctx = cls;
1267
1268   if (GNUNET_YES == ntohl(block->accepting) &&
1269       ctx->position == strlen (ctx->info->description))
1270   {
1271     GNUNET_log (GNUNET_ERROR_TYPE_DEBUG, "* Found accepting known block\n");
1272     regex_find_path (key, ctx);
1273     return GNUNET_YES; // We found an accept state!
1274   }
1275   else
1276   {
1277     GNUNET_log (GNUNET_ERROR_TYPE_DEBUG, "* %u, %u, [%u]\n",
1278                 ctx->position, strlen(ctx->info->description),
1279                 ntohl(block->accepting));
1280
1281   }
1282   regex_next_edge(block, SIZE_MAX, ctx);
1283
1284   GNUNET_STATISTICS_update (stats, "# regex mesh blocks iterated", 1, GNUNET_NO);
1285
1286   return GNUNET_YES;
1287 }
1288
1289
1290 /**
1291  * Iterator over edges in a regex block retrieved from the DHT.
1292  *
1293  * @param cls Closure (context of the search).
1294  * @param token Token that follows to next state.
1295  * @param len Lenght of token.
1296  * @param key Hash of next state.
1297  *
1298  * @return GNUNET_YES if should keep iterating, GNUNET_NO otherwise.
1299  */
1300 static int
1301 regex_edge_iterator (void *cls,
1302                      const char *token,
1303                      size_t len,
1304                      const struct GNUNET_HashCode *key)
1305 {
1306   struct MeshRegexSearchContext *ctx = cls;
1307   struct MeshRegexSearchInfo *info = ctx->info;
1308   char *current;
1309   size_t current_len;
1310
1311   GNUNET_STATISTICS_update (stats, "# regex edges iterated", 1, GNUNET_NO);
1312
1313   GNUNET_log (GNUNET_ERROR_TYPE_DEBUG, "*    Start of regex edge iterator\n");
1314   GNUNET_log (GNUNET_ERROR_TYPE_DEBUG, "*     descr : %s\n", info->description);
1315   GNUNET_log (GNUNET_ERROR_TYPE_DEBUG, "*     posit : %u\n", ctx->position);
1316   current = &info->description[ctx->position];
1317   GNUNET_log (GNUNET_ERROR_TYPE_DEBUG, "*     currt : %s\n", current);
1318   current_len = strlen (info->description) - ctx->position;
1319   GNUNET_log (GNUNET_ERROR_TYPE_DEBUG, "*     ctlen : %u\n", current_len);
1320   GNUNET_log (GNUNET_ERROR_TYPE_DEBUG, "*     tklen : %u\n", len);
1321   GNUNET_log (GNUNET_ERROR_TYPE_DEBUG, "*     tk[0] : %c\n", token[0]);
1322   GNUNET_log (GNUNET_ERROR_TYPE_DEBUG, "*     nextk : %s\n", GNUNET_h2s(key));
1323   if (len > current_len)
1324   {
1325     GNUNET_log (GNUNET_ERROR_TYPE_DEBUG, "*     Token too long, END\n");
1326     return GNUNET_YES; // Token too long, wont match
1327   }
1328   if (0 != strncmp (current, token, len))
1329   {
1330     GNUNET_log (GNUNET_ERROR_TYPE_DEBUG, "*     Token doesn't match, END\n");
1331     return GNUNET_YES; // Token doesn't match
1332   }
1333
1334   if (len > ctx->longest_match)
1335   {
1336     GNUNET_log (GNUNET_ERROR_TYPE_DEBUG, "*     Token is longer, KEEP\n");
1337     ctx->longest_match = len;
1338     ctx->hash = *key;
1339   }
1340   else
1341   {
1342     GNUNET_log (GNUNET_ERROR_TYPE_DEBUG, "*     Token is not longer, IGNORE\n");
1343   }
1344
1345   GNUNET_log (GNUNET_ERROR_TYPE_DEBUG, "*    End of regex edge iterator\n");
1346   return GNUNET_YES;
1347 }
1348
1349
1350 /**
1351  * Jump to the next edge, with the longest matching token.
1352  *
1353  * @param block Block found in the DHT.
1354  * @param size Size of the block.
1355  * @param ctx Context of the search.
1356  *
1357  * @return GNUNET_YES if should keep iterating, GNUNET_NO otherwise.
1358  */
1359 static void
1360 regex_next_edge (const struct MeshRegexBlock *block,
1361                  size_t size,
1362                  struct MeshRegexSearchContext *ctx)
1363 {
1364   struct MeshRegexSearchContext *new_ctx;
1365   struct MeshRegexSearchInfo *info = ctx->info;
1366   struct GNUNET_DHT_GetHandle *get_h;
1367
1368   int result;
1369
1370   /* Find the longest match for the current string position, 
1371    * among tokens in the given block */
1372   ctx->longest_match = 0;
1373   result = GNUNET_MESH_regex_block_iterate (block, size,
1374                                             &regex_edge_iterator, ctx);
1375   GNUNET_break (GNUNET_OK == result || SIZE_MAX == size);
1376
1377   /* Did anything match? */
1378   if (0 == ctx->longest_match)
1379     return;
1380
1381   new_ctx = GNUNET_malloc (sizeof (struct MeshRegexSearchContext));
1382   new_ctx->info = info;
1383   new_ctx->position = ctx->position + ctx->longest_match;
1384   GNUNET_array_append (info->contexts, info->n_contexts, new_ctx);
1385
1386   /* Check whether we already have a DHT GET running for it */
1387   if (GNUNET_YES ==
1388       GNUNET_CONTAINER_multihashmap_contains(info->dht_get_handles, &ctx->hash))
1389   {
1390     GNUNET_log (GNUNET_ERROR_TYPE_DEBUG, "*     GET running, END\n");
1391     GNUNET_CONTAINER_multihashmap_get_multiple (info->dht_get_results,
1392                                                 &ctx->hash,
1393                                                 &regex_result_iterator,
1394                                                 new_ctx);
1395     return; // We are already looking for it
1396   }
1397
1398   GNUNET_STATISTICS_update (stats, "# regex nodes traversed", 1, GNUNET_NO);
1399
1400   /* Start search in DHT */
1401   get_h = 
1402       GNUNET_DHT_get_start (dht_handle,    /* handle */
1403                             GNUNET_BLOCK_TYPE_MESH_REGEX, /* type */
1404                             &ctx->hash,     /* key to search */
1405                             dht_replication_level, /* replication level */
1406                             GNUNET_DHT_RO_DEMULTIPLEX_EVERYWHERE,
1407                             NULL,       /* xquery */ // FIXME BLOOMFILTER
1408                             0,     /* xquery bits */ // FIXME BLOOMFILTER SIZE
1409                             &dht_get_string_handler, new_ctx);
1410   if (GNUNET_OK !=
1411       GNUNET_CONTAINER_multihashmap_put(info->dht_get_handles,
1412                                         &ctx->hash,
1413                                         get_h,
1414                                         GNUNET_CONTAINER_MULTIHASHMAPOPTION_UNIQUE_FAST))
1415   {
1416     GNUNET_break (0);
1417     return;
1418   }
1419 }
1420
1421
1422 /**
1423  * Iterator over hash map entries to cancel DHT GET requests after a
1424  * successful connect_by_string.
1425  *
1426  * @param cls Closure (unused).
1427  * @param key Current key code (unused).
1428  * @param value Value in the hash map (get handle).
1429  * @return GNUNET_YES if we should continue to iterate,
1430  *         GNUNET_NO if not.
1431  */
1432 static int
1433 regex_cancel_dht_get (void *cls,
1434                       const struct GNUNET_HashCode * key,
1435                       void *value)
1436 {
1437   struct GNUNET_DHT_GetHandle *h = value;
1438
1439   GNUNET_DHT_get_stop (h);
1440   return GNUNET_YES;
1441 }
1442
1443
1444 /**
1445  * Iterator over hash map entries to free MeshRegexBlocks stored during the
1446  * search for connect_by_string.
1447  *
1448  * @param cls Closure (unused).
1449  * @param key Current key code (unused).
1450  * @param value MeshRegexBlock in the hash map.
1451  * @return GNUNET_YES if we should continue to iterate,
1452  *         GNUNET_NO if not.
1453  */
1454 static int
1455 regex_free_result (void *cls,
1456                    const struct GNUNET_HashCode * key,
1457                    void *value)
1458 {
1459
1460   GNUNET_free (value);
1461   return GNUNET_YES;
1462 }
1463
1464
1465 /**
1466  * Regex callback iterator to store own service description in the DHT.
1467  *
1468  * @param cls closure.
1469  * @param key hash for current state.
1470  * @param proof proof for current state.
1471  * @param accepting GNUNET_YES if this is an accepting state, GNUNET_NO if not.
1472  * @param num_edges number of edges leaving current state.
1473  * @param edges edges leaving current state.
1474  */
1475 void
1476 regex_iterator (void *cls,
1477                 const struct GNUNET_HashCode *key,
1478                 const char *proof,
1479                 int accepting,
1480                 unsigned int num_edges,
1481                 const struct GNUNET_REGEX_Edge *edges)
1482 {
1483     struct MeshRegexBlock *block;
1484     struct MeshRegexEdge *block_edge;
1485     enum GNUNET_DHT_RouteOption opt;
1486     size_t size;
1487     size_t len;
1488     unsigned int i;
1489     unsigned int offset;
1490     char *aux;
1491
1492     GNUNET_log (GNUNET_ERROR_TYPE_DEBUG,
1493                 "  regex dht put for state %s\n",
1494                 GNUNET_h2s(key));
1495     GNUNET_log (GNUNET_ERROR_TYPE_DEBUG,
1496                 "   proof: %s\n",
1497                 proof);
1498     GNUNET_log (GNUNET_ERROR_TYPE_DEBUG,
1499                 "   num edges: %u\n",
1500                 num_edges);
1501
1502     opt = GNUNET_DHT_RO_DEMULTIPLEX_EVERYWHERE;
1503     if (GNUNET_YES == accepting)
1504     {
1505         struct MeshRegexAccept block;
1506
1507         GNUNET_log (GNUNET_ERROR_TYPE_DEBUG,
1508                     "   state %s is accepting, putting own id\n",
1509                     GNUNET_h2s(key));
1510         size = sizeof (block);
1511         block.key = *key;
1512         block.id = my_full_id;
1513         (void)
1514         GNUNET_DHT_put(dht_handle, key,
1515                        dht_replication_level,
1516                        opt | GNUNET_DHT_RO_RECORD_ROUTE,
1517                        GNUNET_BLOCK_TYPE_MESH_REGEX_ACCEPT,
1518                        size,
1519                        (char *) &block,
1520                        GNUNET_TIME_absolute_add (GNUNET_TIME_absolute_get (),
1521                                                  app_announce_time),
1522                        app_announce_time,
1523                        NULL, NULL);
1524     }
1525     len = strlen(proof);
1526     size = sizeof (struct MeshRegexBlock) + len;
1527     block = GNUNET_malloc (size);
1528
1529     block->key = *key;
1530     block->n_proof = htonl (len);
1531     block->n_edges = htonl (num_edges);
1532     block->accepting = htonl (accepting);
1533
1534     /* Store the proof at the end of the block. */
1535     aux = (char *) &block[1];
1536     memcpy (aux, proof, len);
1537     aux = &aux[len];
1538
1539     /* Store each edge in a variable length MeshEdge struct at the
1540      * very end of the MeshRegexBlock structure.
1541      */
1542     for (i = 0; i < num_edges; i++)
1543     {
1544         GNUNET_log (GNUNET_ERROR_TYPE_DEBUG,
1545                     "    edge %s towards %s\n",
1546                     edges[i].label,
1547                     GNUNET_h2s(&edges[i].destination));
1548
1549         /* aux points at the end of the last block */
1550         len = strlen (edges[i].label);
1551         size += sizeof (struct MeshRegexEdge) + len;
1552         // Calculate offset FIXME is this ok? use size instead?
1553         offset = aux - (char *) block;
1554         block = GNUNET_realloc (block, size);
1555         aux = &((char *) block)[offset];
1556         block_edge = (struct MeshRegexEdge *) aux;
1557         block_edge->key = edges[i].destination;
1558         block_edge->n_token = htonl (len);
1559         aux = (char *) &block_edge[1];
1560         memcpy (aux, edges[i].label, len);
1561         aux = &aux[len];
1562     }
1563     (void)
1564     GNUNET_DHT_put(dht_handle, key,
1565                    dht_replication_level,
1566                    opt,
1567                    GNUNET_BLOCK_TYPE_MESH_REGEX, size,
1568                    (char *) block,
1569                    GNUNET_TIME_absolute_add (GNUNET_TIME_absolute_get (),
1570                                             app_announce_time),
1571                    app_announce_time,
1572                    NULL, NULL);
1573     GNUNET_free (block);
1574 }
1575
1576
1577 /**
1578  * Store the regular expression describing a local service into the DHT.
1579  *
1580  * @param regex The regular expresion.
1581  */
1582 static void
1583 regex_put (const struct MeshRegexDescriptor *regex)
1584 {
1585   struct GNUNET_REGEX_Automaton *dfa;
1586
1587   DEBUG_DHT ("  regex_put (%s) start\n", regex->regex);
1588   dfa = GNUNET_REGEX_construct_dfa (regex->regex,
1589                                     strlen(regex->regex),
1590                                     regex->compression);
1591   GNUNET_REGEX_iterate_all_edges (dfa, &regex_iterator, NULL);
1592   GNUNET_REGEX_automaton_destroy (dfa);
1593   DEBUG_DHT ("  regex_put (%s) end\n", regex);
1594
1595 }
1596
1597 /**
1598  * Find a path to a peer that offers a regex servcie compatible
1599  * with a given string.
1600  * 
1601  * @param key The key of the accepting state.
1602  * @param ctx Context containing info about the string, tunnel, etc.
1603  */
1604 static void
1605 regex_find_path (const struct GNUNET_HashCode *key,
1606                  struct MeshRegexSearchContext *ctx)
1607 {
1608   struct GNUNET_DHT_GetHandle *get_h;
1609
1610   GNUNET_log (GNUNET_ERROR_TYPE_DEBUG, "Found peer by service\n");
1611   get_h = GNUNET_DHT_get_start (dht_handle,    /* handle */
1612                                 GNUNET_BLOCK_TYPE_MESH_REGEX_ACCEPT, /* type */
1613                                 key,     /* key to search */
1614                                 dht_replication_level, /* replication level */
1615                                 GNUNET_DHT_RO_DEMULTIPLEX_EVERYWHERE |
1616                                 GNUNET_DHT_RO_RECORD_ROUTE,
1617                                 NULL,       /* xquery */ // FIXME BLOOMFILTER
1618                                 0,     /* xquery bits */ // FIXME BLOOMFILTER SIZE
1619                                 &dht_get_string_accept_handler, ctx);
1620   GNUNET_break (GNUNET_OK ==
1621                 GNUNET_CONTAINER_multihashmap_put(ctx->info->dht_get_handles,
1622                                                   key,
1623                                                   get_h,
1624                                                   GNUNET_CONTAINER_MULTIHASHMAPOPTION_MULTIPLE));
1625 }
1626
1627
1628 /**
1629  * Function called if the connect attempt to a peer found via
1630  * connect_by_string times out. Try to connect to another peer, if any.
1631  * Otherwise try to reconnect to the same peer.
1632  *
1633  * @param cls Closure (info about regex search).
1634  * @param tc TaskContext.
1635  */
1636 static void
1637 regex_connect_timeout (void *cls, const struct GNUNET_SCHEDULER_TaskContext *tc)
1638 {
1639   struct MeshRegexSearchInfo *info = cls;
1640   struct MeshPeerInfo *peer_info;
1641   GNUNET_PEER_Id id;
1642   GNUNET_PEER_Id old;
1643
1644   GNUNET_log (GNUNET_ERROR_TYPE_DEBUG, "Regex connect timeout\n");
1645   info->timeout = GNUNET_SCHEDULER_NO_TASK;
1646   if (0 != (tc->reason & GNUNET_SCHEDULER_REASON_SHUTDOWN))
1647   {
1648     return;
1649   }
1650
1651   old = info->peer;
1652   GNUNET_log (GNUNET_ERROR_TYPE_DEBUG, "  timed out: %u\n", old);
1653
1654   if (0 < info->n_peers)
1655   {
1656     // Select next peer, put current in that spot.
1657     id = info->peers[info->i_peer];
1658     info->peers[info->i_peer] = info->peer;
1659     info->i_peer = (info->i_peer + 1) % info->n_peers;
1660   }
1661   else
1662   {
1663     // Try to connect to same peer again.
1664     id = info->peer;
1665   }
1666   GNUNET_log (GNUNET_ERROR_TYPE_DEBUG, "  trying: %u\n", id);
1667
1668   peer_info = peer_info_get_short(id);
1669   tunnel_add_peer (info->t, peer_info);
1670   if (old != id)
1671     tunnel_delete_peer (info->t, old);
1672   peer_info_connect (peer_info, info->t);
1673   info->timeout = GNUNET_SCHEDULER_add_delayed (connect_timeout,
1674                                                 &regex_connect_timeout,
1675                                                 info);
1676   GNUNET_log (GNUNET_ERROR_TYPE_DEBUG, "Regex connect timeout END\n");
1677 }
1678
1679
1680 /**
1681  * Cancel an ongoing regex search in the DHT and free all resources.
1682  *
1683  * @param ctx The search context.
1684  */
1685 static void
1686 regex_cancel_search(struct MeshRegexSearchContext *ctx)
1687 {
1688   struct MeshRegexSearchInfo *info = ctx->info;
1689   int i;
1690
1691   GNUNET_free (info->description);
1692   GNUNET_CONTAINER_multihashmap_iterate (info->dht_get_handles,
1693                                              &regex_cancel_dht_get, NULL);
1694   GNUNET_CONTAINER_multihashmap_iterate (info->dht_get_results,
1695                                          &regex_free_result, NULL);
1696   GNUNET_CONTAINER_multihashmap_destroy (info->dht_get_results);
1697   GNUNET_CONTAINER_multihashmap_destroy (info->dht_get_handles);
1698   info->t->regex_ctx = NULL;
1699   for (i = 0; i < info->n_contexts; i++)
1700   {
1701     GNUNET_free (info->contexts[i]);
1702   }
1703   if (0 < info->n_contexts)
1704     GNUNET_free (info->contexts);
1705   if (0 < info->n_peers)
1706     GNUNET_free (info->peers);
1707   if (GNUNET_SCHEDULER_NO_TASK != info->timeout)
1708   {
1709     GNUNET_SCHEDULER_cancel(info->timeout);
1710   }
1711   GNUNET_free (info);
1712 }
1713
1714
1715 /******************************************************************************/
1716 /************************    PERIODIC FUNCTIONS    ****************************/
1717 /******************************************************************************/
1718
1719 /**
1720  * Announce iterator over for each application provided by the peer
1721  *
1722  * @param cls closure
1723  * @param key current key code
1724  * @param value value in the hash map
1725  * @return GNUNET_YES if we should continue to
1726  *         iterate,
1727  *         GNUNET_NO if not.
1728  */
1729 static int
1730 announce_application (void *cls, const struct GNUNET_HashCode * key, void *value)
1731 {
1732   struct PBlock block;
1733   struct MeshClient *c;
1734
1735   block.id = my_full_id;
1736   c =  GNUNET_CONTAINER_multihashmap_get (applications, key);
1737   GNUNET_assert(NULL != c);
1738   block.type = (long) GNUNET_CONTAINER_multihashmap_get (c->apps, key);
1739   if (0 == block.type)
1740   {
1741     GNUNET_break(0);
1742     return GNUNET_YES;
1743   }
1744   block.type = htonl (block.type);
1745
1746   GNUNET_break (NULL != 
1747                 GNUNET_DHT_put (dht_handle, key,
1748                   dht_replication_level,
1749                   GNUNET_DHT_RO_RECORD_ROUTE |
1750                   GNUNET_DHT_RO_DEMULTIPLEX_EVERYWHERE,
1751                   GNUNET_BLOCK_TYPE_MESH_PEER_BY_TYPE,
1752                   sizeof (block),
1753                   (const char *) &block,
1754                   GNUNET_TIME_absolute_add (GNUNET_TIME_absolute_get (),
1755                                             app_announce_time),
1756                   app_announce_time, NULL, NULL));
1757   return GNUNET_OK;
1758 }
1759
1760
1761 /**
1762  * Periodically announce what applications are provided by local clients
1763  * (by regex)
1764  *
1765  * @param cls closure
1766  * @param tc task context
1767  */
1768 static void
1769 announce_regex (void *cls, const struct GNUNET_SCHEDULER_TaskContext *tc)
1770 {
1771   struct MeshClient *c = cls;
1772   unsigned int i;
1773
1774   c->regex_announce_task = GNUNET_SCHEDULER_NO_TASK;
1775   if (0 != (tc->reason & GNUNET_SCHEDULER_REASON_SHUTDOWN))
1776   {
1777     return;
1778   }
1779
1780   DEBUG_DHT ("Starting PUT for regex\n");
1781
1782   for (i = 0; i < c->n_regex; i++)
1783   {
1784     regex_put (&c->regexes[i]);
1785   }
1786   c->regex_announce_task = GNUNET_SCHEDULER_add_delayed (app_announce_time,
1787                                                          &announce_regex,
1788                                                          cls);
1789   DEBUG_DHT ("Finished PUT for regex\n");
1790
1791   return;
1792 }
1793
1794
1795 /**
1796  * Periodically announce what applications are provided by local clients
1797  * (by type)
1798  *
1799  * @param cls closure
1800  * @param tc task context
1801  */
1802 static void
1803 announce_applications (void *cls, const struct GNUNET_SCHEDULER_TaskContext *tc)
1804 {
1805   if (0 != (tc->reason & GNUNET_SCHEDULER_REASON_SHUTDOWN))
1806   {
1807     announce_applications_task = GNUNET_SCHEDULER_NO_TASK;
1808     return;
1809   }
1810  
1811   DEBUG_DHT ("Starting PUT for apps\n");
1812
1813   GNUNET_CONTAINER_multihashmap_iterate (applications, &announce_application,
1814                                          NULL);
1815   announce_applications_task =
1816       GNUNET_SCHEDULER_add_delayed (app_announce_time, &announce_applications,
1817                                     cls);
1818   DEBUG_DHT ("Finished PUT for apps\n");
1819
1820   return;
1821 }
1822
1823
1824 /**
1825  * Periodically announce self id in the DHT
1826  *
1827  * @param cls closure
1828  * @param tc task context
1829  */
1830 static void
1831 announce_id (void *cls, const struct GNUNET_SCHEDULER_TaskContext *tc)
1832 {
1833   struct PBlock block;
1834
1835   if (0 != (tc->reason & GNUNET_SCHEDULER_REASON_SHUTDOWN))
1836   {
1837     announce_id_task = GNUNET_SCHEDULER_NO_TASK;
1838     return;
1839   }
1840   /* TODO
1841    * - Set data expiration in function of X
1842    * - Adapt X to churn
1843    */
1844   DEBUG_DHT ("DHT_put for ID %s started.\n", GNUNET_i2s (&my_full_id));
1845
1846   block.id = my_full_id;
1847   block.type = htonl (0);
1848   GNUNET_DHT_put (dht_handle,   /* DHT handle */
1849                   &my_full_id.hashPubKey,       /* Key to use */
1850                   dht_replication_level,     /* Replication level */
1851                   GNUNET_DHT_RO_RECORD_ROUTE | GNUNET_DHT_RO_DEMULTIPLEX_EVERYWHERE,    /* DHT options */
1852                   GNUNET_BLOCK_TYPE_MESH_PEER,       /* Block type */
1853                   sizeof (block),  /* Size of the data */
1854                   (const char *) &block, /* Data itself */
1855                   GNUNET_TIME_UNIT_FOREVER_ABS,  /* Data expiration */
1856                   GNUNET_TIME_UNIT_FOREVER_REL, /* Retry time */
1857                   NULL,         /* Continuation */
1858                   NULL);        /* Continuation closure */
1859   announce_id_task =
1860       GNUNET_SCHEDULER_add_delayed (id_announce_time, &announce_id, cls);
1861 }
1862
1863
1864 /******************************************************************************/
1865 /******************      GENERAL HELPER FUNCTIONS      ************************/
1866 /******************************************************************************/
1867
1868 /**
1869  * Decrements the reference counter and frees all resources if needed
1870  *
1871  * @param mesh_data Data Descriptor used in a multicast message.
1872  *                  Freed no longer needed (last message).
1873  */
1874 static void
1875 data_descriptor_decrement_rc (struct MeshData *mesh_data)
1876 {
1877   if (0 == --(mesh_data->reference_counter))
1878   {
1879     GNUNET_log (GNUNET_ERROR_TYPE_DEBUG, "Last copy!\n");
1880     GNUNET_free (mesh_data->data);
1881     GNUNET_free (mesh_data);
1882   }
1883 }
1884
1885
1886 /**
1887  * Check if client has registered with the service and has not disconnected
1888  *
1889  * @param client the client to check
1890  *
1891  * @return non-NULL if client exists in the global DLL
1892  */
1893 static struct MeshClient *
1894 client_get (struct GNUNET_SERVER_Client *client)
1895 {
1896   struct MeshClient *c;
1897
1898   c = clients;
1899   while (NULL != c)
1900   {
1901     if (c->handle == client)
1902       return c;
1903     c = c->next;
1904   }
1905   return NULL;
1906 }
1907
1908
1909 /**
1910  * Checks if a given client has subscribed to certain message type
1911  *
1912  * @param message_type Type of message to check
1913  * @param c Client to check
1914  *
1915  * @return GNUNET_YES or GNUNET_NO, depending on subscription status
1916  * 
1917  * FIXME: use of crypto_hash slows it down
1918  *  The hash function alone takes 8-10us out of the ~55us for the whole
1919  * process of retransmitting the message from one local client to another.
1920  * Find faster implementation!
1921  */
1922 static int
1923 client_is_subscribed (uint16_t message_type, struct MeshClient *c)
1924 {
1925   struct GNUNET_HashCode hc;
1926
1927   if (NULL == c->types)
1928     return GNUNET_NO;
1929
1930   GNUNET_CRYPTO_hash (&message_type, sizeof (uint16_t), &hc);
1931   return GNUNET_CONTAINER_multihashmap_contains (c->types, &hc);
1932 }
1933
1934
1935 /**
1936  * Check whether client wants traffic from a tunnel.
1937  *
1938  * @param c Client to check.
1939  * @param t Tunnel to be found.
1940  *
1941  * @return GNUNET_YES if client knows tunnel.
1942  * 
1943  * TODO look in client hashmap
1944  */
1945 static int
1946 client_wants_tunnel (struct MeshClient *c, struct MeshTunnel *t)
1947 {
1948   unsigned int i;
1949
1950   for (i = 0; i < t->nclients; i++)
1951     if (t->clients[i] == c)
1952       return GNUNET_YES;
1953   return GNUNET_NO;
1954 }
1955
1956
1957 /**
1958  * Check whether client has been informed about a tunnel.
1959  *
1960  * @param c Client to check.
1961  * @param t Tunnel to be found.
1962  *
1963  * @return GNUNET_YES if client knows tunnel.
1964  * 
1965  * TODO look in client hashmap
1966  */
1967 static int
1968 client_knows_tunnel (struct MeshClient *c, struct MeshTunnel *t)
1969 {
1970   unsigned int i;
1971
1972   for (i = 0; i < t->nignore; i++)
1973     if (t->ignore[i] == c)
1974       return GNUNET_YES;
1975   return client_wants_tunnel(c, t);
1976 }
1977
1978
1979 /**
1980  * Marks a client as uninterested in traffic from the tunnel, updating both
1981  * client and tunnel to reflect this.
1982  *
1983  * @param c Client that doesn't want traffic anymore.
1984  * @param t Tunnel which should be ignored.
1985  *
1986  * FIXME when to delete an incoming tunnel?
1987  */
1988 static void
1989 client_ignore_tunnel (struct MeshClient *c, struct MeshTunnel *t)
1990 {
1991   struct GNUNET_HashCode hash;
1992
1993   GNUNET_CRYPTO_hash (&t->local_tid_dest, sizeof (MESH_TunnelNumber), &hash);
1994   GNUNET_break (GNUNET_YES ==
1995                 GNUNET_CONTAINER_multihashmap_remove (c->incoming_tunnels,
1996                                                       &hash, t));
1997   GNUNET_break (GNUNET_YES ==
1998                 GNUNET_CONTAINER_multihashmap_put (c->ignore_tunnels, &hash, t,
1999                                                    GNUNET_CONTAINER_MULTIHASHMAPOPTION_UNIQUE_FAST));
2000   tunnel_delete_active_client (t, c);
2001   GNUNET_array_append (t->ignore, t->nignore, c);
2002 }
2003
2004
2005 /**
2006  * Deletes a tunnel from a client (either owner or destination). To be used on
2007  * tunnel destroy, otherwise, use client_ignore_tunnel.
2008  *
2009  * @param c Client whose tunnel to delete.
2010  * @param t Tunnel which should be deleted.
2011  */
2012 static void
2013 client_delete_tunnel (struct MeshClient *c, struct MeshTunnel *t)
2014 {
2015   struct GNUNET_HashCode hash;
2016
2017   if (c == t->owner)
2018   {
2019     GNUNET_CRYPTO_hash(&t->local_tid, sizeof (MESH_TunnelNumber), &hash);
2020     GNUNET_assert (GNUNET_YES ==
2021                    GNUNET_CONTAINER_multihashmap_remove (c->own_tunnels,
2022                                                          &hash,
2023                                                          t));
2024   }
2025   else
2026   {
2027     GNUNET_CRYPTO_hash(&t->local_tid_dest, sizeof (MESH_TunnelNumber), &hash);
2028     // FIXME XOR?
2029     GNUNET_assert (GNUNET_YES ==
2030                    GNUNET_CONTAINER_multihashmap_remove (c->incoming_tunnels,
2031                                                          &hash,
2032                                                          t) ||
2033                    GNUNET_YES ==
2034                    GNUNET_CONTAINER_multihashmap_remove (c->ignore_tunnels,
2035                                                          &hash,
2036                                                          t));
2037   }
2038 }
2039
2040
2041 /**
2042  * Send the message to all clients that have subscribed to its type
2043  *
2044  * @param msg Pointer to the message itself
2045  * @param payload Pointer to the payload of the message.
2046  * @param t The tunnel to whose clients this message goes.
2047  * 
2048  * @return number of clients this message was sent to
2049  */
2050 static unsigned int
2051 send_subscribed_clients (const struct GNUNET_MessageHeader *msg,
2052                          const struct GNUNET_MessageHeader *payload,
2053                          struct MeshTunnel *t)
2054 {
2055   struct MeshClient *c;
2056   MESH_TunnelNumber *tid;
2057   unsigned int count;
2058   uint16_t type;
2059   char cbuf[htons (msg->size)];
2060
2061   type = ntohs (payload->type);
2062   GNUNET_log (GNUNET_ERROR_TYPE_DEBUG, "Sending to clients...\n");
2063   GNUNET_log (GNUNET_ERROR_TYPE_DEBUG, "message of type %s\n",
2064               GNUNET_MESH_DEBUG_M2S (type));
2065
2066   memcpy (cbuf, msg, sizeof (cbuf));
2067   switch (htons (msg->type))
2068   {
2069     struct GNUNET_MESH_Unicast *uc;
2070     struct GNUNET_MESH_Multicast *mc;
2071     struct GNUNET_MESH_ToOrigin *to;
2072
2073     case GNUNET_MESSAGE_TYPE_MESH_UNICAST:
2074       uc = (struct GNUNET_MESH_Unicast *) cbuf;
2075       tid = &uc->tid;
2076       break;
2077     case GNUNET_MESSAGE_TYPE_MESH_MULTICAST:
2078       mc = (struct GNUNET_MESH_Multicast *) cbuf;
2079       tid = &mc->tid;
2080       break;
2081     case GNUNET_MESSAGE_TYPE_MESH_TO_ORIGIN:
2082       to = (struct GNUNET_MESH_ToOrigin *) cbuf;
2083       tid = &to->tid;
2084       break;
2085     default:
2086       GNUNET_break (0);
2087       return 0;
2088   }
2089
2090   for (count = 0, c = clients; c != NULL; c = c->next)
2091   {
2092     GNUNET_log (GNUNET_ERROR_TYPE_DEBUG, "   client %u\n", c->id);
2093     if (client_is_subscribed (type, c))
2094     {
2095       if (htons (msg->type) == GNUNET_MESSAGE_TYPE_MESH_TO_ORIGIN)
2096       {
2097         if (c != t->owner)
2098           continue;
2099         *tid = htonl (t->local_tid);
2100       }
2101       else
2102       {
2103         if (GNUNET_NO == client_knows_tunnel (c, t))
2104         {
2105           /* This client doesn't know the tunnel */
2106           struct GNUNET_MESH_TunnelNotification tmsg;
2107           struct GNUNET_HashCode hash;
2108
2109           GNUNET_log (GNUNET_ERROR_TYPE_DEBUG, "     sending tunnel create\n");
2110           tmsg.header.size = htons (sizeof (tmsg));
2111           tmsg.header.type = htons (GNUNET_MESSAGE_TYPE_MESH_LOCAL_TUNNEL_CREATE);
2112           GNUNET_PEER_resolve (t->id.oid, &tmsg.peer);
2113           tmsg.tunnel_id = htonl (t->local_tid_dest);
2114           tmsg.opt = 0;
2115           if (GNUNET_YES == t->speed_min)
2116             tmsg.opt |= MESH_TUNNEL_OPT_SPEED_MIN;
2117           if (GNUNET_YES == t->nobuffer)
2118             tmsg.opt |= MESH_TUNNEL_OPT_NOBUFFER;
2119           GNUNET_SERVER_notification_context_unicast (nc, c->handle,
2120                                                       &tmsg.header, GNUNET_NO);
2121           tunnel_add_client (t, c);
2122           GNUNET_CRYPTO_hash (&t->local_tid_dest, sizeof (MESH_TunnelNumber),
2123                               &hash);
2124           GNUNET_break (GNUNET_OK == GNUNET_CONTAINER_multihashmap_put (
2125                                        c->incoming_tunnels, &hash, t,
2126                                        GNUNET_CONTAINER_MULTIHASHMAPOPTION_UNIQUE_FAST));
2127         }
2128         *tid = htonl (t->local_tid_dest);
2129       }
2130
2131       /* Check if the client wants to get traffic from the tunnel */
2132       if (GNUNET_NO == client_wants_tunnel(c, t))
2133         continue;
2134       count++;
2135       GNUNET_log (GNUNET_ERROR_TYPE_DEBUG, "     sending\n");
2136       GNUNET_SERVER_notification_context_unicast (nc, c->handle,
2137                                                   (struct GNUNET_MessageHeader
2138                                                    *) cbuf, GNUNET_NO);
2139     }
2140   }
2141
2142   return count;
2143 }
2144
2145
2146 /**
2147  * Notify the client that owns the tunnel that a peer has connected to it
2148  * (the requested path to it has been confirmed).
2149  *
2150  * @param t Tunnel whose owner to notify
2151  * @param id Short id of the peer that has connected
2152  */
2153 static void
2154 send_client_peer_connected (const struct MeshTunnel *t, const GNUNET_PEER_Id id)
2155 {
2156   struct GNUNET_MESH_PeerControl pc;
2157
2158   pc.header.type = htons (GNUNET_MESSAGE_TYPE_MESH_LOCAL_PEER_ADD);
2159   pc.header.size = htons (sizeof (struct GNUNET_MESH_PeerControl));
2160   pc.tunnel_id = htonl (t->local_tid);
2161   GNUNET_PEER_resolve (id, &pc.peer);
2162   GNUNET_SERVER_notification_context_unicast (nc, t->owner->handle, &pc.header,
2163                                               GNUNET_NO);
2164 }
2165
2166
2167 /**
2168  * Notify all clients (not depending on registration status) that the incoming
2169  * tunnel is no longer valid.
2170  *
2171  * @param t Tunnel that was destroyed.
2172  */
2173 static void
2174 send_clients_tunnel_destroy (struct MeshTunnel *t)
2175 {
2176   struct GNUNET_MESH_TunnelMessage msg;
2177
2178   msg.header.size = htons (sizeof (msg));
2179   msg.header.type = htons (GNUNET_MESSAGE_TYPE_MESH_LOCAL_TUNNEL_DESTROY);
2180   msg.tunnel_id = htonl (t->local_tid_dest);
2181   GNUNET_SERVER_notification_context_broadcast (nc, &msg.header, GNUNET_NO);
2182 }
2183
2184
2185 /**
2186  * Notify clients of tunnel disconnections, if needed.
2187  * In case the origin disconnects, the destination clients get a tunnel destroy
2188  * notification. If the last destination disconnects (only one remaining client
2189  * in tunnel), the origin gets a (local ID) peer disconnected.
2190  * Note that the function must be called BEFORE removing the client from
2191  * the tunnel.
2192  *
2193  * @param t Tunnel that was destroyed.
2194  * @param c Client that disconnected.
2195  */
2196 static void
2197 send_client_tunnel_disconnect (struct MeshTunnel *t, struct MeshClient *c)
2198 {
2199   unsigned int i;
2200
2201   if (c == t->owner)
2202   {
2203     struct GNUNET_MESH_TunnelMessage msg;
2204
2205     msg.header.size = htons (sizeof (msg));
2206     msg.header.type = htons (GNUNET_MESSAGE_TYPE_MESH_LOCAL_TUNNEL_DESTROY);
2207     msg.tunnel_id = htonl (t->local_tid_dest);
2208     for (i = 0; i < t->nclients; i++)
2209       GNUNET_SERVER_notification_context_unicast (nc, t->clients[i]->handle,
2210                                                   &msg.header, GNUNET_NO);
2211   }
2212   // FIXME when to disconnect an incoming tunnel?
2213   else if (1 == t->nclients && NULL != t->owner)
2214   {
2215     struct GNUNET_MESH_PeerControl msg;
2216
2217     msg.header.size = htons (sizeof (msg));
2218     msg.header.type = htons (GNUNET_MESSAGE_TYPE_MESH_LOCAL_PEER_DEL);
2219     msg.tunnel_id = htonl (t->local_tid);
2220     msg.peer = my_full_id;
2221     GNUNET_SERVER_notification_context_unicast (nc, t->owner->handle,
2222                                                 &msg.header, GNUNET_NO);
2223   }
2224 }
2225
2226
2227 /**
2228  * Retrieve the MeshPeerInfo stucture associated with the peer, create one
2229  * and insert it in the appropiate structures if the peer is not known yet.
2230  *
2231  * @param peer Full identity of the peer.
2232  *
2233  * @return Existing or newly created peer info.
2234  */
2235 static struct MeshPeerInfo *
2236 peer_info_get (const struct GNUNET_PeerIdentity *peer)
2237 {
2238   struct MeshPeerInfo *peer_info;
2239
2240   peer_info = GNUNET_CONTAINER_multihashmap_get (peers, &peer->hashPubKey);
2241   if (NULL == peer_info)
2242   {
2243     peer_info =
2244         (struct MeshPeerInfo *) GNUNET_malloc (sizeof (struct MeshPeerInfo));
2245     GNUNET_CONTAINER_multihashmap_put (peers, &peer->hashPubKey, peer_info,
2246                                        GNUNET_CONTAINER_MULTIHASHMAPOPTION_UNIQUE_ONLY);
2247     peer_info->id = GNUNET_PEER_intern (peer);
2248   }
2249
2250   return peer_info;
2251 }
2252
2253
2254 /**
2255  * Retrieve the MeshPeerInfo stucture associated with the peer, create one
2256  * and insert it in the appropiate structures if the peer is not known yet.
2257  *
2258  * @param peer Short identity of the peer.
2259  *
2260  * @return Existing or newly created peer info.
2261  */
2262 static struct MeshPeerInfo *
2263 peer_info_get_short (const GNUNET_PEER_Id peer)
2264 {
2265   struct GNUNET_PeerIdentity id;
2266
2267   GNUNET_PEER_resolve (peer, &id);
2268   return peer_info_get (&id);
2269 }
2270
2271
2272 /**
2273  * Iterator to remove the tunnel from the list of tunnels a peer participates
2274  * in.
2275  *
2276  * @param cls Closure (tunnel info)
2277  * @param key GNUNET_PeerIdentity of the peer (unused)
2278  * @param value PeerInfo of the peer
2279  *
2280  * @return always GNUNET_YES, to keep iterating
2281  */
2282 static int
2283 peer_info_delete_tunnel (void *cls, const struct GNUNET_HashCode * key, void *value)
2284 {
2285   struct MeshTunnel *t = cls;
2286   struct MeshPeerInfo *peer = value;
2287   unsigned int i;
2288
2289   for (i = 0; i < peer->ntunnels; i++)
2290   {
2291     if (0 ==
2292         memcmp (&peer->tunnels[i]->id, &t->id, sizeof (struct MESH_TunnelID)))
2293     {
2294       peer->ntunnels--;
2295       peer->tunnels[i] = peer->tunnels[peer->ntunnels];
2296       peer->tunnels = GNUNET_realloc (peer->tunnels, peer->ntunnels);
2297       return GNUNET_YES;
2298     }
2299   }
2300   return GNUNET_YES;
2301 }
2302
2303
2304 /**
2305   * Core callback to write a pre-constructed data packet to core buffer
2306   *
2307   * @param cls Closure (MeshTransmissionDescriptor with data in "data" member).
2308   * @param size Number of bytes available in buf.
2309   * @param buf Where the to write the message.
2310   *
2311   * @return number of bytes written to buf
2312   */
2313 static size_t
2314 send_core_data_raw (void *cls, size_t size, void *buf)
2315 {
2316   struct MeshTransmissionDescriptor *info = cls;
2317   struct GNUNET_MessageHeader *msg;
2318   size_t total_size;
2319
2320   GNUNET_assert (NULL != info);
2321   GNUNET_assert (NULL != info->mesh_data);
2322   msg = (struct GNUNET_MessageHeader *) info->mesh_data->data;
2323   total_size = ntohs (msg->size);
2324
2325   if (total_size > size)
2326   {
2327     GNUNET_break (0);
2328     return 0;
2329   }
2330   memcpy (buf, msg, total_size);
2331   data_descriptor_decrement_rc (info->mesh_data);
2332   GNUNET_free (info);
2333   return total_size;
2334 }
2335
2336
2337 /**
2338  * Sends an already built non-multicast message to a peer,
2339  * properly registrating all used resources.
2340  *
2341  * @param message Message to send. Function makes a copy of it.
2342  * @param peer Short ID of the neighbor whom to send the message.
2343  * @param t Tunnel on which this message is transmitted.
2344  */
2345 static void
2346 send_prebuilt_message (const struct GNUNET_MessageHeader *message,
2347                        const struct GNUNET_PeerIdentity *peer,
2348                        struct MeshTunnel *t)
2349 {
2350   struct MeshTransmissionDescriptor *info;
2351   struct MeshPeerInfo *neighbor;
2352   struct MeshPeerPath *p;
2353   size_t size;
2354   uint16_t type;
2355
2356 //   GNUNET_TRANSPORT_try_connect(); FIXME use?
2357
2358   size = ntohs (message->size);
2359   info = GNUNET_malloc (sizeof (struct MeshTransmissionDescriptor));
2360   info->mesh_data = GNUNET_malloc (sizeof (struct MeshData));
2361   info->mesh_data->data = GNUNET_malloc (size);
2362   memcpy (info->mesh_data->data, message, size);
2363   type = ntohs(message->type);
2364   switch (type)
2365   {
2366     struct GNUNET_MESH_Unicast *m;
2367     struct GNUNET_MESH_ToOrigin *to;
2368
2369     case GNUNET_MESSAGE_TYPE_MESH_UNICAST:
2370       m = (struct GNUNET_MESH_Unicast *) info->mesh_data->data;
2371       m->ttl = htonl (ntohl (m->ttl) - 1);
2372       break;
2373     case GNUNET_MESSAGE_TYPE_MESH_TO_ORIGIN:
2374       to = (struct GNUNET_MESH_ToOrigin *) info->mesh_data->data;
2375       t->bck_pid++;
2376       to->pid = htonl(t->bck_pid);
2377   }
2378   info->mesh_data->data_len = size;
2379   info->mesh_data->reference_counter = 1;
2380   info->mesh_data->total_out = 1;
2381   neighbor = peer_info_get (peer);
2382   for (p = neighbor->path_head; NULL != p; p = p->next)
2383   {
2384     if (2 >= p->length)
2385     {
2386       break;
2387     }
2388   }
2389   if (NULL == p)
2390   {
2391 #if MESH_DEBUG
2392     GNUNET_log (GNUNET_ERROR_TYPE_DEBUG,
2393                 "  %s IS NOT DIRECTLY CONNECTED\n",
2394                 GNUNET_i2s(peer));
2395     GNUNET_log (GNUNET_ERROR_TYPE_DEBUG,
2396                 "  PATHS TO %s:\n",
2397                 GNUNET_i2s(peer));
2398     for (p = neighbor->path_head; NULL != p; p = p->next)
2399     {
2400       struct GNUNET_PeerIdentity debug_id;
2401       unsigned int i;
2402
2403       GNUNET_log (GNUNET_ERROR_TYPE_DEBUG,
2404                   "    path with %u hops through:\n",
2405                   p->length);
2406       for (i = 0; i < p->length; i++)
2407       {
2408         GNUNET_PEER_resolve(p->peers[i], &debug_id);
2409         GNUNET_log (GNUNET_ERROR_TYPE_DEBUG,
2410                     "      hop %u: %s\n",
2411                     i, GNUNET_i2s(&debug_id));
2412       }
2413     }
2414 #endif
2415     GNUNET_break (0); // FIXME sometimes fails (testing disconnect?)
2416     GNUNET_free (info->mesh_data->data);
2417     GNUNET_free (info->mesh_data);
2418     GNUNET_free (info);
2419     return;
2420   }
2421   info->peer = neighbor;
2422   if (GNUNET_MESSAGE_TYPE_MESH_PATH_ACK == type)
2423     type = 0;
2424   queue_add (info,
2425              type,
2426              size,
2427              neighbor,
2428              t);
2429 }
2430
2431
2432 /**
2433  * Sends a CREATE PATH message for a path to a peer, properly registrating
2434  * all used resources.
2435  *
2436  * @param peer PeerInfo of the final peer for whom this path is being created.
2437  * @param p Path itself.
2438  * @param t Tunnel for which the path is created.
2439  */
2440 static void
2441 send_create_path (struct MeshPeerInfo *peer, struct MeshPeerPath *p,
2442                   struct MeshTunnel *t)
2443 {
2444   struct GNUNET_PeerIdentity id;
2445   struct MeshPathInfo *path_info;
2446   struct MeshPeerInfo *neighbor;
2447
2448   unsigned int i;
2449
2450   if (NULL == p)
2451   {
2452     p = tree_get_path_to_peer (t->tree, peer->id);
2453     if (NULL == p)
2454     {
2455       GNUNET_break (0);
2456       return;
2457     }
2458   }
2459   for (i = 0; i < p->length; i++)
2460   {
2461     if (p->peers[i] == myid)
2462       break;
2463   }
2464   if (i >= p->length - 1)
2465   {
2466     path_destroy (p);
2467     GNUNET_break (0);
2468     return;
2469   }
2470   GNUNET_PEER_resolve (p->peers[i + 1], &id);
2471
2472   path_info = GNUNET_malloc (sizeof (struct MeshPathInfo));
2473   path_info->path = p;
2474   path_info->t = t;
2475   neighbor = peer_info_get (&id);
2476   path_info->peer = neighbor;
2477   queue_add (path_info,
2478              GNUNET_MESSAGE_TYPE_MESH_PATH_CREATE,
2479              sizeof (struct GNUNET_MESH_ManipulatePath) +
2480                 (p->length * sizeof (struct GNUNET_PeerIdentity)),
2481              neighbor,
2482              t);
2483 }
2484
2485
2486 /**
2487  * Sends a DESTROY PATH message to free resources for a path in a tunnel
2488  *
2489  * @param t Tunnel whose path to destroy.
2490  * @param destination Short ID of the peer to whom the path to destroy.
2491  */
2492 static void
2493 send_destroy_path (struct MeshTunnel *t, GNUNET_PEER_Id destination)
2494 {
2495   struct MeshPeerPath *p;
2496   size_t size;
2497
2498   p = tree_get_path_to_peer (t->tree, destination);
2499   if (NULL == p)
2500   {
2501     GNUNET_break (0);
2502     return;
2503   }
2504   size = sizeof (struct GNUNET_MESH_ManipulatePath);
2505   size += p->length * sizeof (struct GNUNET_PeerIdentity);
2506   {
2507     struct GNUNET_MESH_ManipulatePath *msg;
2508     struct GNUNET_PeerIdentity *pi;
2509     char cbuf[size];
2510     unsigned int i;
2511
2512     msg = (struct GNUNET_MESH_ManipulatePath *) cbuf;
2513     msg->header.size = htons (size);
2514     msg->header.type = htons (GNUNET_MESSAGE_TYPE_MESH_PATH_DESTROY);
2515     msg->tid = htonl (t->id.tid);
2516     pi = (struct GNUNET_PeerIdentity *) &msg[1];
2517     for (i = 0; i < p->length; i++)
2518     {
2519       GNUNET_PEER_resolve (p->peers[i], &pi[i]);
2520     }
2521     send_prebuilt_message (&msg->header, tree_get_first_hop (t->tree, destination), t);
2522   }
2523   path_destroy (p);
2524 }
2525
2526
2527 /**
2528  * Sends a PATH ACK message in reponse to a received PATH_CREATE directed to us.
2529  *
2530  * @param t Tunnel which to confirm.
2531  */
2532 static void
2533 send_path_ack (struct MeshTunnel *t) 
2534 {
2535   struct MeshTransmissionDescriptor *info;
2536   struct GNUNET_PeerIdentity id;
2537   GNUNET_PEER_Id peer;
2538
2539   peer = tree_get_predecessor (t->tree);
2540   GNUNET_PEER_resolve (peer, &id);
2541   info = GNUNET_malloc (sizeof (struct MeshTransmissionDescriptor));
2542   info->origin = &t->id;
2543   info->peer = GNUNET_CONTAINER_multihashmap_get (peers, &id.hashPubKey);
2544   GNUNET_assert (NULL != info->peer);
2545
2546   queue_add (info,
2547              GNUNET_MESSAGE_TYPE_MESH_PATH_ACK,
2548              sizeof (struct GNUNET_MESH_PathACK),
2549              info->peer,
2550              t);
2551 }
2552
2553
2554 /**
2555  * Try to establish a new connection to this peer.
2556  * Use the best path for the given tunnel.
2557  * If the peer doesn't have any path to it yet, try to get one.
2558  * If the peer already has some path, send a CREATE PATH towards it.
2559  *
2560  * @param peer PeerInfo of the peer.
2561  * @param t Tunnel for which to create the path, if possible.
2562  */
2563 static void
2564 peer_info_connect (struct MeshPeerInfo *peer, struct MeshTunnel *t)
2565 {
2566   struct MeshPeerPath *p;
2567   struct MeshPathInfo *path_info;
2568
2569   if (NULL != peer->path_head)
2570   {
2571     p = tree_get_path_to_peer (t->tree, peer->id);
2572     if (NULL == p)
2573     {
2574       GNUNET_break (0);
2575       return;
2576     }
2577
2578     // FIXME always send create path to self
2579     if (p->length > 1)
2580     {
2581       send_create_path (peer, p, t);
2582     }
2583     else
2584     {
2585       struct GNUNET_HashCode hash;
2586
2587       path_destroy (p);
2588       send_client_peer_connected (t, myid);
2589       t->local_tid_dest = next_local_tid++;
2590       GNUNET_CRYPTO_hash (&t->local_tid_dest, sizeof (MESH_TunnelNumber),
2591                           &hash);
2592       if (GNUNET_OK !=
2593           GNUNET_CONTAINER_multihashmap_put (incoming_tunnels, &hash, t,
2594                                              GNUNET_CONTAINER_MULTIHASHMAPOPTION_UNIQUE_FAST))
2595       {
2596         GNUNET_break (0);
2597         return;
2598       }
2599     }
2600   }
2601   else if (NULL == peer->dhtget)
2602   {
2603     struct GNUNET_PeerIdentity id;
2604
2605     GNUNET_PEER_resolve (peer->id, &id);
2606     path_info = GNUNET_malloc (sizeof (struct MeshPathInfo));
2607     path_info->peer = peer;
2608     path_info->t = t;
2609     GNUNET_log (GNUNET_ERROR_TYPE_DEBUG,
2610                 "  Starting DHT GET for peer %s\n", GNUNET_i2s (&id));
2611     peer->dhtgetcls = path_info;
2612     peer->dhtget = GNUNET_DHT_get_start (dht_handle,    /* handle */
2613                                          GNUNET_BLOCK_TYPE_MESH_PEER, /* type */
2614                                          &id.hashPubKey,     /* key to search */
2615                                          dht_replication_level, /* replication level */
2616                                          GNUNET_DHT_RO_RECORD_ROUTE |
2617                                          GNUNET_DHT_RO_DEMULTIPLEX_EVERYWHERE,
2618                                          NULL,       /* xquery */ // FIXME BLOOMFILTER
2619                                          0,     /* xquery bits */ // FIXME BLOOMFILTER SIZE
2620                                          &dht_get_id_handler, path_info);
2621   }
2622   /* Otherwise, there is no path but the DHT get is already started. */
2623 }
2624
2625
2626 /**
2627  * Task to delay the connection of a peer
2628  *
2629  * @param cls Closure (path info with tunnel and peer to connect).
2630  *            Will be free'd on exection.
2631  * @param tc TaskContext
2632  */
2633 static void
2634 peer_info_connect_task (void *cls,
2635                         const struct GNUNET_SCHEDULER_TaskContext *tc)
2636 {
2637   struct MeshPathInfo *path_info = cls;
2638
2639   path_info->peer->connect_task = GNUNET_SCHEDULER_NO_TASK;
2640
2641   if (0 != (GNUNET_SCHEDULER_REASON_SHUTDOWN & tc->reason))
2642   {
2643     GNUNET_free (cls);
2644     return;
2645   }
2646   peer_info_connect (path_info->peer, path_info->t);
2647   GNUNET_free (cls);
2648 }
2649
2650
2651 /**
2652  * Destroy the peer_info and free any allocated resources linked to it
2653  *
2654  * @param pi The peer_info to destroy.
2655  *
2656  * @return GNUNET_OK on success
2657  */
2658 static int
2659 peer_info_destroy (struct MeshPeerInfo *pi)
2660 {
2661   struct GNUNET_PeerIdentity id;
2662   struct MeshPeerPath *p;
2663   struct MeshPeerPath *nextp;
2664
2665   GNUNET_PEER_resolve (pi->id, &id);
2666   GNUNET_PEER_change_rc (pi->id, -1);
2667
2668   if (GNUNET_YES !=
2669       GNUNET_CONTAINER_multihashmap_remove (peers, &id.hashPubKey, pi))
2670   {
2671     GNUNET_break (0);
2672     GNUNET_log (GNUNET_ERROR_TYPE_WARNING,
2673                 "removing peer %s, not in hashmap\n", GNUNET_i2s (&id));
2674   }
2675   if (NULL != pi->dhtget)
2676   {
2677     GNUNET_DHT_get_stop (pi->dhtget);
2678     GNUNET_free (pi->dhtgetcls);
2679   }
2680   p = pi->path_head;
2681   while (NULL != p)
2682   {
2683     nextp = p->next;
2684     GNUNET_CONTAINER_DLL_remove (pi->path_head, pi->path_tail, p);
2685     path_destroy (p);
2686     p = nextp;
2687   }
2688   if (GNUNET_SCHEDULER_NO_TASK != pi->connect_task)
2689   {
2690     GNUNET_free (GNUNET_SCHEDULER_cancel (pi->connect_task));
2691   }
2692   GNUNET_free (pi);
2693   return GNUNET_OK;
2694 }
2695
2696
2697 /**
2698  * Remove all paths that rely on a direct connection between p1 and p2
2699  * from the peer itself and notify all tunnels about it.
2700  *
2701  * @param peer PeerInfo of affected peer.
2702  * @param p1 GNUNET_PEER_Id of one peer.
2703  * @param p2 GNUNET_PEER_Id of another peer that was connected to the first and
2704  *           no longer is.
2705  *
2706  * TODO: optimize (see below)
2707  */
2708 static void
2709 peer_info_remove_path (struct MeshPeerInfo *peer, GNUNET_PEER_Id p1,
2710                        GNUNET_PEER_Id p2)
2711 {
2712   struct MeshPeerPath *p;
2713   struct MeshPeerPath *aux;
2714   struct MeshPeerInfo *peer_d;
2715   GNUNET_PEER_Id d;
2716   unsigned int destroyed;
2717   unsigned int best;
2718   unsigned int cost;
2719   unsigned int i;
2720
2721   GNUNET_log (GNUNET_ERROR_TYPE_DEBUG, "peer_info_remove_path\n");
2722   destroyed = 0;
2723   p = peer->path_head;
2724   while (NULL != p)
2725   {
2726     aux = p->next;
2727     for (i = 0; i < (p->length - 1); i++)
2728     {
2729       if ((p->peers[i] == p1 && p->peers[i + 1] == p2) ||
2730           (p->peers[i] == p2 && p->peers[i + 1] == p1))
2731       {
2732         GNUNET_CONTAINER_DLL_remove (peer->path_head, peer->path_tail, p);
2733         path_destroy (p);
2734         destroyed++;
2735         break;
2736       }
2737     }
2738     p = aux;
2739   }
2740   if (0 == destroyed)
2741     return;
2742
2743   for (i = 0; i < peer->ntunnels; i++)
2744   {
2745     d = tunnel_notify_connection_broken (peer->tunnels[i], p1, p2);
2746     if (0 == d)
2747       continue;
2748     /* TODO
2749      * Problem: one or more peers have been deleted from the tunnel tree.
2750      * We don't know who they are to try to add them again.
2751      * We need to try to find a new path for each of the disconnected peers.
2752      * Some of them might already have a path to reach them that does not
2753      * involve p1 and p2. Adding all anew might render in a better tree than
2754      * the trivial immediate fix.
2755      *
2756      * Trivial immiediate fix: try to reconnect to the disconnected node. All
2757      * its children will be reachable trough him.
2758      */
2759     peer_d = peer_info_get_short (d);
2760     best = UINT_MAX;
2761     aux = NULL;
2762     for (p = peer_d->path_head; NULL != p; p = p->next)
2763     {
2764       if ((cost = tree_get_path_cost (peer->tunnels[i]->tree, p)) < best)
2765       {
2766         best = cost;
2767         aux = p;
2768       }
2769     }
2770     if (NULL != aux)
2771     {
2772       /* No callback, as peer will be already disconnected and a connection
2773        * scheduled by tunnel_notify_connection_broken.
2774        */
2775       tree_add_path (peer->tunnels[i]->tree, aux, NULL, NULL);
2776     }
2777     else
2778     {
2779       peer_info_connect (peer_d, peer->tunnels[i]);
2780     }
2781   }
2782   GNUNET_log (GNUNET_ERROR_TYPE_DEBUG, "peer_info_remove_path END\n");
2783 }
2784
2785
2786 /**
2787  * Add the path to the peer and update the path used to reach it in case this
2788  * is the shortest.
2789  *
2790  * @param peer_info Destination peer to add the path to.
2791  * @param path New path to add. Last peer must be the peer in arg 1.
2792  *             Path will be either used of freed if already known.
2793  * @param trusted Do we trust that this path is real?
2794  */
2795 void
2796 peer_info_add_path (struct MeshPeerInfo *peer_info, struct MeshPeerPath *path,
2797                     int trusted)
2798 {
2799   struct MeshPeerPath *aux;
2800   unsigned int l;
2801   unsigned int l2;
2802
2803   if ((NULL == peer_info) || (NULL == path))
2804   {
2805     GNUNET_break (0);
2806     path_destroy (path);
2807     return;
2808   }
2809   if (path->peers[path->length - 1] != peer_info->id)
2810   {
2811     GNUNET_break (0);
2812     path_destroy (path);
2813     return;
2814   }
2815   if (path->length <= 2 && GNUNET_NO == trusted)
2816   {
2817     /* Only allow CORE to tell us about direct paths */
2818     path_destroy (path);
2819     return;
2820   }
2821   GNUNET_assert (peer_info->id == path->peers[path->length - 1]);
2822   for (l = 1; l < path->length; l++)
2823   {
2824     if (path->peers[l] == myid)
2825     {
2826       GNUNET_log (GNUNET_ERROR_TYPE_DEBUG, "shortening path by %u\n", l);
2827       for (l2 = 0; l2 < path->length - l; l2++)
2828       {
2829         path->peers[l2] = path->peers[l + l2];
2830       }
2831       path->length -= l;
2832       l = 1;
2833       path->peers =
2834           GNUNET_realloc (path->peers, path->length * sizeof (GNUNET_PEER_Id));
2835     }
2836   }
2837 #if MESH_DEBUG
2838   {
2839     struct GNUNET_PeerIdentity id;
2840
2841     GNUNET_PEER_resolve (peer_info->id, &id);
2842     GNUNET_log (GNUNET_ERROR_TYPE_DEBUG, "adding path [%u] to peer %s\n",
2843                 path->length, GNUNET_i2s (&id));
2844   }
2845 #endif
2846   l = path_get_length (path);
2847   if (0 == l)
2848   {
2849     GNUNET_free (path);
2850     return;
2851   }
2852
2853   GNUNET_assert (peer_info->id == path->peers[path->length - 1]);
2854   for (aux = peer_info->path_head; aux != NULL; aux = aux->next)
2855   {
2856     l2 = path_get_length (aux);
2857     if (l2 > l)
2858     {
2859       GNUNET_CONTAINER_DLL_insert_before (peer_info->path_head,
2860                                           peer_info->path_tail, aux, path);
2861       return;
2862     }
2863     else
2864     {
2865       if (l2 == l && memcmp (path->peers, aux->peers, l) == 0)
2866       {
2867         path_destroy (path);
2868         return;
2869       }
2870     }
2871   }
2872   GNUNET_CONTAINER_DLL_insert_tail (peer_info->path_head, peer_info->path_tail,
2873                                     path);
2874   return;
2875 }
2876
2877
2878 /**
2879  * Add the path to the origin peer and update the path used to reach it in case
2880  * this is the shortest.
2881  * The path is given in peer_info -> destination, therefore we turn the path
2882  * upside down first.
2883  *
2884  * @param peer_info Peer to add the path to, being the origin of the path.
2885  * @param path New path to add after being inversed.
2886  * @param trusted Do we trust that this path is real?
2887  */
2888 static void
2889 peer_info_add_path_to_origin (struct MeshPeerInfo *peer_info,
2890                               struct MeshPeerPath *path, int trusted)
2891 {
2892   path_invert (path);
2893   peer_info_add_path (peer_info, path, trusted);
2894 }
2895
2896
2897 /**
2898  * Function called if the connection to the peer has been stalled for a while,
2899  * possibly due to a missed ACK. Poll the peer about its ACK status.
2900  *
2901  * @param cls Closure (MeshPeerInfo of stalled peer).
2902  * @param tc TaskContext.
2903  */
2904 static void
2905 tunnel_poll (void *cls, const struct GNUNET_SCHEDULER_TaskContext *tc)
2906 {
2907   struct MeshTunnelFlowControlInfo *fcinfo = cls;
2908   struct GNUNET_MESH_Poll msg;
2909   struct GNUNET_PeerIdentity id;
2910   struct MeshTunnel *t;
2911
2912   // FIXME fc include code to poll clients
2913   if (NULL == fcinfo->peer)
2914     return;
2915   fcinfo->fc_poll = GNUNET_SCHEDULER_NO_TASK;
2916   if (0 != (tc->reason & GNUNET_SCHEDULER_REASON_SHUTDOWN))
2917   {
2918     return;
2919   }
2920
2921   t = fcinfo->t;
2922   msg.header.type = htons (GNUNET_MESSAGE_TYPE_MESH_POLL);
2923   msg.header.size = htons (sizeof (msg));
2924   msg.tid = htonl (t->id.tid);
2925   GNUNET_PEER_resolve (t->id.oid, &msg.oid);
2926   msg.last_ack = htonl (fcinfo->fwd_ack);
2927
2928   GNUNET_PEER_resolve (fcinfo->peer->id, &id);
2929   send_prebuilt_message (&msg.header, &id, fcinfo->t);
2930   fcinfo->fc_poll = GNUNET_SCHEDULER_add_delayed(GNUNET_TIME_UNIT_SECONDS,
2931                                                     &tunnel_poll, fcinfo);
2932
2933 }
2934
2935
2936 /**
2937  * Build a PeerPath from the paths returned from the DHT, reversing the paths
2938  * to obtain a local peer -> destination path and interning the peer ids.
2939  *
2940  * @return Newly allocated and created path
2941  */
2942 static struct MeshPeerPath *
2943 path_build_from_dht (const struct GNUNET_PeerIdentity *get_path,
2944                      unsigned int get_path_length,
2945                      const struct GNUNET_PeerIdentity *put_path,
2946                      unsigned int put_path_length)
2947 {
2948   struct MeshPeerPath *p;
2949   GNUNET_PEER_Id id;
2950   int i;
2951
2952   p = path_new (1);
2953   p->peers[0] = myid;
2954   GNUNET_PEER_change_rc (myid, 1);
2955   i = get_path_length;
2956   GNUNET_log (GNUNET_ERROR_TYPE_DEBUG, "   GET has %d hops.\n", i);
2957   for (i--; i >= 0; i--)
2958   {
2959     id = GNUNET_PEER_intern (&get_path[i]);
2960     if (p->length > 0 && id == p->peers[p->length - 1])
2961     {
2962       GNUNET_log (GNUNET_ERROR_TYPE_DEBUG, "   Optimizing 1 hop out.\n");
2963       GNUNET_PEER_change_rc (id, -1);
2964     }
2965     else
2966     {
2967       GNUNET_log (GNUNET_ERROR_TYPE_DEBUG, "   Adding from GET: %s.\n",
2968                   GNUNET_i2s (&get_path[i]));
2969       p->length++;
2970       p->peers = GNUNET_realloc (p->peers, sizeof (GNUNET_PEER_Id) * p->length);
2971       p->peers[p->length - 1] = id;
2972     }
2973   }
2974   i = put_path_length;
2975   GNUNET_log (GNUNET_ERROR_TYPE_DEBUG, "   PUT has %d hops.\n", i);
2976   for (i--; i >= 0; i--)
2977   {
2978     id = GNUNET_PEER_intern (&put_path[i]);
2979     if (id == myid)
2980     {
2981       /* PUT path went through us, so discard the path up until now and start
2982        * from here to get a much shorter (and loop-free) path.
2983        */
2984       path_destroy (p);
2985       p = path_new (0);
2986     }
2987     if (p->length > 0 && id == p->peers[p->length - 1])
2988     {
2989       GNUNET_log (GNUNET_ERROR_TYPE_DEBUG, "   Optimizing 1 hop out.\n");
2990       GNUNET_PEER_change_rc (id, -1);
2991     }
2992     else
2993     {
2994       GNUNET_log (GNUNET_ERROR_TYPE_DEBUG, "   Adding from PUT: %s.\n",
2995                   GNUNET_i2s (&put_path[i]));
2996       p->length++;
2997       p->peers = GNUNET_realloc (p->peers, sizeof (GNUNET_PEER_Id) * p->length);
2998       p->peers[p->length - 1] = id;
2999     }
3000   }
3001 #if MESH_DEBUG
3002   if (get_path_length > 0)
3003     GNUNET_log (GNUNET_ERROR_TYPE_DEBUG, "   (first of GET: %s)\n",
3004                 GNUNET_i2s (&get_path[0]));
3005   if (put_path_length > 0)
3006     GNUNET_log (GNUNET_ERROR_TYPE_DEBUG, "   (first of PUT: %s)\n",
3007                 GNUNET_i2s (&put_path[0]));
3008   GNUNET_log (GNUNET_ERROR_TYPE_DEBUG, "   In total: %d hops\n",
3009               p->length);
3010   for (i = 0; i < p->length; i++)
3011   {
3012     struct GNUNET_PeerIdentity peer_id;
3013
3014     GNUNET_PEER_resolve (p->peers[i], &peer_id);
3015     GNUNET_log (GNUNET_ERROR_TYPE_DEBUG, "       %u: %s\n", p->peers[i],
3016                 GNUNET_i2s (&peer_id));
3017   }
3018 #endif
3019   return p;
3020 }
3021
3022
3023 /**
3024  * Adds a path to the peer_infos of all the peers in the path
3025  *
3026  * @param p Path to process.
3027  * @param confirmed Whether we know if the path works or not.
3028  */
3029 static void
3030 path_add_to_peers (struct MeshPeerPath *p, int confirmed)
3031 {
3032   unsigned int i;
3033
3034   /* TODO: invert and add */
3035   for (i = 0; i < p->length && p->peers[i] != myid; i++) /* skip'em */ ;
3036   for (i++; i < p->length; i++)
3037   {
3038     struct MeshPeerInfo *aux;
3039     struct MeshPeerPath *copy;
3040
3041     aux = peer_info_get_short (p->peers[i]);
3042     copy = path_duplicate (p);
3043     copy->length = i + 1;
3044     peer_info_add_path (aux, copy, GNUNET_NO);
3045   }
3046 }
3047
3048
3049 /**
3050  * Send keepalive packets for a peer
3051  *
3052  * @param cls Closure (tunnel for which to send the keepalive).
3053  * @param tc Notification context.
3054  *
3055  * TODO: implement explicit multicast keepalive?
3056  */
3057 static void
3058 path_refresh (void *cls, const struct GNUNET_SCHEDULER_TaskContext *tc);
3059
3060
3061 /**
3062  * Search for a tunnel among the incoming tunnels
3063  *
3064  * @param tid the local id of the tunnel
3065  *
3066  * @return tunnel handler, NULL if doesn't exist
3067  */
3068 static struct MeshTunnel *
3069 tunnel_get_incoming (MESH_TunnelNumber tid)
3070 {
3071   struct GNUNET_HashCode hash;
3072
3073   GNUNET_assert (tid >= GNUNET_MESH_LOCAL_TUNNEL_ID_SERV);
3074   GNUNET_CRYPTO_hash (&tid, sizeof (MESH_TunnelNumber), &hash);
3075   return GNUNET_CONTAINER_multihashmap_get (incoming_tunnels, &hash);
3076 }
3077
3078
3079 /**
3080  * Search for a tunnel among the tunnels for a client
3081  *
3082  * @param c the client whose tunnels to search in
3083  * @param tid the local id of the tunnel
3084  *
3085  * @return tunnel handler, NULL if doesn't exist
3086  */
3087 static struct MeshTunnel *
3088 tunnel_get_by_local_id (struct MeshClient *c, MESH_TunnelNumber tid)
3089 {
3090   if (tid >= GNUNET_MESH_LOCAL_TUNNEL_ID_SERV)
3091   {
3092     return tunnel_get_incoming (tid);
3093   }
3094   else
3095   {
3096     struct GNUNET_HashCode hash;
3097
3098     GNUNET_CRYPTO_hash (&tid, sizeof (MESH_TunnelNumber), &hash);
3099     return GNUNET_CONTAINER_multihashmap_get (c->own_tunnels, &hash);
3100   }
3101 }
3102
3103
3104 /**
3105  * Search for a tunnel by global ID using PEER_ID
3106  *
3107  * @param pi owner of the tunnel
3108  * @param tid global tunnel number
3109  *
3110  * @return tunnel handler, NULL if doesn't exist
3111  */
3112 static struct MeshTunnel *
3113 tunnel_get_by_pi (GNUNET_PEER_Id pi, MESH_TunnelNumber tid)
3114 {
3115   struct MESH_TunnelID id;
3116   struct GNUNET_HashCode hash;
3117
3118   id.oid = pi;
3119   id.tid = tid;
3120
3121   GNUNET_CRYPTO_hash (&id, sizeof (struct MESH_TunnelID), &hash);
3122   return GNUNET_CONTAINER_multihashmap_get (tunnels, &hash);
3123 }
3124
3125
3126 /**
3127  * Search for a tunnel by global ID using full PeerIdentities
3128  *
3129  * @param oid owner of the tunnel
3130  * @param tid global tunnel number
3131  *
3132  * @return tunnel handler, NULL if doesn't exist
3133  */
3134 static struct MeshTunnel *
3135 tunnel_get (struct GNUNET_PeerIdentity *oid, MESH_TunnelNumber tid)
3136 {
3137   return tunnel_get_by_pi (GNUNET_PEER_search (oid), tid);
3138 }
3139
3140
3141 /**
3142  * Delete an active client from the tunnel.
3143  * 
3144  * @param t Tunnel.
3145  * @param c Client.
3146  */
3147 static void
3148 tunnel_delete_active_client (struct MeshTunnel *t, const struct MeshClient *c)
3149 {
3150   unsigned int i;
3151
3152   for (i = 0; i < t->nclients; i++)
3153   {
3154     if (t->clients[i] == c)
3155     {
3156       t->clients[i] = t->clients[t->nclients - 1];
3157       t->clients_fc[i] = t->clients_fc[t->nclients - 1];
3158       GNUNET_array_grow (t->clients, t->nclients, t->nclients - 1);
3159       t->nclients++;
3160       GNUNET_array_grow (t->clients_fc, t->nclients, t->nclients - 1);
3161       break;
3162     }
3163   }
3164 }
3165
3166
3167 /**
3168  * Delete an ignored client from the tunnel.
3169  * 
3170  * @param t Tunnel.
3171  * @param c Client.
3172  */
3173 static void
3174 tunnel_delete_ignored_client (struct MeshTunnel *t, const struct MeshClient *c)
3175 {
3176   unsigned int i;
3177
3178   for (i = 0; i < t->nignore; i++)
3179   {
3180     if (t->ignore[i] == c)
3181     {
3182       t->ignore[i] = t->ignore[t->nignore - 1];
3183       GNUNET_array_grow (t->ignore, t->nignore, t->nignore - 1);
3184       break;
3185     }
3186   }
3187 }
3188
3189
3190 /**
3191  * Delete a client from the tunnel. It should be only done on
3192  * client disconnection, otherwise use client_ignore_tunnel.
3193  * 
3194  * @param t Tunnel.
3195  * @param c Client.
3196  */
3197 static void
3198 tunnel_delete_client (struct MeshTunnel *t, const struct MeshClient *c)
3199 {
3200   tunnel_delete_ignored_client (t, c);
3201   tunnel_delete_active_client (t, c);
3202 }
3203
3204
3205 /**
3206  * @brief Iterator to destroy MeshTunnelChildInfo of tunnel children.
3207  * 
3208  * Destroys queue elements of all waiting transmissions and frees all memory
3209  * used by the struct and its elements.
3210  *
3211  * @param cls Closure (tunnel info).
3212  * @param key Hash of GNUNET_PEER_Id (unused).
3213  * @param value MeshTunnelChildInfo of the child.
3214  *
3215  * @return always GNUNET_YES, to keep iterating
3216  */
3217 static int
3218 tunnel_destroy_child (void *cls,
3219                       const struct GNUNET_HashCode * key,
3220                       void *value)
3221 {
3222   struct MeshTunnelFlowControlInfo *cinfo = value;
3223   struct MeshTunnel *t = cls;
3224   struct MeshPeerQueue *q;
3225   unsigned int c;
3226   unsigned int i;
3227
3228   for (c = 0; c < cinfo->send_buffer_n; c++)
3229   {
3230     i = (cinfo->send_buffer_start + c) % t->fwd_queue_max;
3231     q = cinfo->send_buffer[i];
3232     cinfo->send_buffer[i] = NULL;
3233     if (NULL != q)
3234       queue_destroy (q, GNUNET_YES);
3235     else
3236       GNUNET_break (0);
3237     GNUNET_log (GNUNET_ERROR_TYPE_INFO, "%u %u\n", c, cinfo->send_buffer_n);
3238   }
3239   GNUNET_free_non_null (cinfo->send_buffer);
3240   GNUNET_free (cinfo);
3241   return GNUNET_YES;
3242 }
3243
3244
3245 /**
3246  * Callback used to notify a client owner of a tunnel that a peer has
3247  * disconnected, most likely because of a path change.
3248  *
3249  * @param cls Closure (tunnel this notification is about).
3250  * @param peer_id Short ID of disconnected peer.
3251  */
3252 void
3253 tunnel_notify_client_peer_disconnected (void *cls, GNUNET_PEER_Id peer_id)
3254 {
3255   struct MeshTunnel *t = cls;
3256   struct MeshPeerInfo *peer;
3257   struct MeshPathInfo *path_info;
3258
3259   if (NULL != t->owner && NULL != nc)
3260   {
3261     struct GNUNET_MESH_PeerControl msg;
3262
3263     msg.header.size = htons (sizeof (msg));
3264     msg.header.type = htons (GNUNET_MESSAGE_TYPE_MESH_LOCAL_PEER_DEL);
3265     msg.tunnel_id = htonl (t->local_tid);
3266     GNUNET_PEER_resolve (peer_id, &msg.peer);
3267     GNUNET_SERVER_notification_context_unicast (nc, t->owner->handle,
3268                                                 &msg.header, GNUNET_NO);
3269   }
3270   peer = peer_info_get_short (peer_id);
3271   path_info = GNUNET_malloc (sizeof (struct MeshPathInfo));
3272   path_info->peer = peer;
3273   path_info->t = t;
3274   peer->connect_task = GNUNET_SCHEDULER_add_now (&peer_info_connect_task,
3275                                                  path_info);
3276 }
3277
3278
3279 /**
3280  * Add a peer to a tunnel, accomodating paths accordingly and initializing all
3281  * needed rescources.
3282  * If peer already exists, reevaluate shortest path and change if different.
3283  *
3284  * @param t Tunnel we want to add a new peer to
3285  * @param peer PeerInfo of the peer being added
3286  *
3287  */
3288 static void
3289 tunnel_add_peer (struct MeshTunnel *t, struct MeshPeerInfo *peer)
3290 {
3291   struct GNUNET_PeerIdentity id;
3292   struct MeshPeerPath *best_p;
3293   struct MeshPeerPath *p;
3294   unsigned int best_cost;
3295   unsigned int cost;
3296
3297   GNUNET_log (GNUNET_ERROR_TYPE_DEBUG, "tunnel_add_peer\n");
3298   GNUNET_PEER_resolve (peer->id, &id);
3299   if (GNUNET_NO ==
3300       GNUNET_CONTAINER_multihashmap_contains (t->peers, &id.hashPubKey))
3301   {
3302     t->peers_total++;
3303     GNUNET_array_append (peer->tunnels, peer->ntunnels, t);
3304     GNUNET_assert (GNUNET_OK ==
3305                    GNUNET_CONTAINER_multihashmap_put (t->peers, &id.hashPubKey,
3306                                                       peer,
3307                                                       GNUNET_CONTAINER_MULTIHASHMAPOPTION_UNIQUE_FAST));
3308   }
3309
3310   if (NULL != (p = peer->path_head))
3311   {
3312     best_p = p;
3313     best_cost = tree_get_path_cost (t->tree, p);
3314     while (NULL != p)
3315     {
3316       if ((cost = tree_get_path_cost (t->tree, p)) < best_cost)
3317       {
3318         best_cost = cost;
3319         best_p = p;
3320       }
3321       p = p->next;
3322     }
3323     tree_add_path (t->tree, best_p, &tunnel_notify_client_peer_disconnected, t);
3324     if (GNUNET_SCHEDULER_NO_TASK == t->path_refresh_task)
3325       t->path_refresh_task =
3326           GNUNET_SCHEDULER_add_delayed (refresh_path_time, &path_refresh, t);
3327   }
3328   else
3329   {
3330     /* Start a DHT get */
3331     peer_info_connect (peer, t);
3332   }
3333   GNUNET_log (GNUNET_ERROR_TYPE_DEBUG, "tunnel_add_peer END\n");
3334 }
3335
3336 /**
3337  * Add a path to a tunnel which we don't own, just to remember the next hop.
3338  * If destination node was already in the tunnel, the first hop information
3339  * will be replaced with the new path.
3340  *
3341  * @param t Tunnel we want to add a new peer to
3342  * @param p Path to add
3343  * @param own_pos Position of local node in path.
3344  *
3345  */
3346 static void
3347 tunnel_add_path (struct MeshTunnel *t, struct MeshPeerPath *p,
3348                  unsigned int own_pos)
3349 {
3350   struct GNUNET_PeerIdentity id;
3351
3352   GNUNET_log (GNUNET_ERROR_TYPE_DEBUG, "tunnel_add_path\n");
3353   GNUNET_assert (0 != own_pos);
3354   tree_add_path (t->tree, p, NULL, NULL);
3355   if (own_pos < p->length - 1)
3356   {
3357     GNUNET_PEER_resolve (p->peers[own_pos + 1], &id);
3358     tree_update_first_hops (t->tree, myid, &id);
3359   }
3360   GNUNET_log (GNUNET_ERROR_TYPE_DEBUG, "tunnel_add_path END\n");
3361 }
3362
3363 /**
3364  * Add a client to a tunnel, initializing all needed data structures.
3365  * 
3366  * @param t Tunnel to which add the client.
3367  * @param c Client which to add to the tunnel.
3368  */
3369 static void
3370 tunnel_add_client (struct MeshTunnel *t, struct MeshClient *c)
3371 {
3372   struct MeshTunnelFlowControlInfo fcinfo;
3373
3374   GNUNET_array_append (t->clients, t->nclients, c);
3375   fcinfo.client = c;
3376   fcinfo.fwd_ack = t->fwd_pid + 1;
3377   fcinfo.bck_ack = t->nobuffer ? 1 : INITIAL_WINDOW_SIZE - 1;
3378   fcinfo.fwd_pid = t->fwd_pid;
3379   fcinfo.bck_pid = (uint32_t) -1; // Expected next: 0
3380   // FIXME fc buffering is done by context_notify. Confirm this is OK.
3381
3382   t->nclients--;
3383   GNUNET_array_append (t->clients_fc, t->nclients, fcinfo);
3384 }
3385
3386
3387 /**
3388  * Notifies a tunnel that a connection has broken that affects at least
3389  * some of its peers. Sends a notification towards the root of the tree.
3390  * In case the peer is the owner of the tree, notifies the client that owns
3391  * the tunnel and tries to reconnect.
3392  *
3393  * @param t Tunnel affected.
3394  * @param p1 Peer that got disconnected from p2.
3395  * @param p2 Peer that got disconnected from p1.
3396  *
3397  * @return Short ID of the peer disconnected (either p1 or p2).
3398  *         0 if the tunnel remained unaffected.
3399  */
3400 static GNUNET_PEER_Id
3401 tunnel_notify_connection_broken (struct MeshTunnel *t, GNUNET_PEER_Id p1,
3402                                  GNUNET_PEER_Id p2)
3403 {
3404   GNUNET_PEER_Id pid;
3405
3406   pid =
3407       tree_notify_connection_broken (t->tree, p1, p2,
3408                                      &tunnel_notify_client_peer_disconnected,
3409                                      t);
3410   if (myid != p1 && myid != p2)
3411   {
3412     return pid;
3413   }
3414   if (pid != myid)
3415   {
3416     if (tree_get_predecessor (t->tree) != 0)
3417     {
3418       /* We are the peer still connected, notify owner of the disconnection. */
3419       struct GNUNET_MESH_PathBroken msg;
3420       struct GNUNET_PeerIdentity neighbor;
3421
3422       msg.header.size = htons (sizeof (msg));
3423       msg.header.type = htons (GNUNET_MESSAGE_TYPE_MESH_PATH_BROKEN);
3424       GNUNET_PEER_resolve (t->id.oid, &msg.oid);
3425       msg.tid = htonl (t->id.tid);
3426       msg.peer1 = my_full_id;
3427       GNUNET_PEER_resolve (pid, &msg.peer2);
3428       GNUNET_PEER_resolve (tree_get_predecessor (t->tree), &neighbor);
3429       send_prebuilt_message (&msg.header, &neighbor, t);
3430     }
3431   }
3432   return pid;
3433 }
3434
3435
3436 /**
3437  * Send a multicast packet to a neighbor.
3438  *
3439  * @param cls Closure (Info about the multicast packet)
3440  * @param neighbor_id Short ID of the neighbor to send the packet to.
3441  */
3442 static void
3443 tunnel_send_multicast_iterator (void *cls, GNUNET_PEER_Id neighbor_id)
3444 {
3445   struct MeshData *mdata = cls;
3446   struct MeshTransmissionDescriptor *info;
3447   struct GNUNET_PeerIdentity neighbor;
3448   struct GNUNET_MessageHeader *msg;
3449
3450   info = GNUNET_malloc (sizeof (struct MeshTransmissionDescriptor));
3451
3452   info->mesh_data = mdata;
3453   (mdata->reference_counter) ++;
3454   info->destination = neighbor_id;
3455   GNUNET_PEER_resolve (neighbor_id, &neighbor);
3456   GNUNET_log (GNUNET_ERROR_TYPE_DEBUG, "   sending to %s...\n",
3457               GNUNET_i2s (&neighbor));
3458   info->peer = peer_info_get (&neighbor);
3459   GNUNET_assert (NULL != info->peer);
3460   msg = (struct GNUNET_MessageHeader *) mdata->data;
3461   queue_add(info,
3462             ntohs (msg->type),
3463             info->mesh_data->data_len,
3464             info->peer,
3465             mdata->t);
3466 }
3467
3468
3469 /**
3470  * Queue a message in a tunnel in multicast, sending a copy to each child node
3471  * down the local one in the tunnel tree.
3472  *
3473  * @param t Tunnel in which to send the data.
3474  * @param msg Message to be sent.
3475  */
3476 static void
3477 tunnel_send_multicast (struct MeshTunnel *t,
3478                        const struct GNUNET_MessageHeader *msg)
3479 {
3480   struct MeshData *mdata;
3481
3482   GNUNET_log (GNUNET_ERROR_TYPE_DEBUG,
3483               " sending a multicast packet...\n");
3484
3485   mdata = GNUNET_malloc (sizeof (struct MeshData));
3486   mdata->data_len = ntohs (msg->size);
3487   mdata->t = t;
3488   mdata->data = GNUNET_malloc (mdata->data_len);
3489   memcpy (mdata->data, msg, mdata->data_len);
3490   if (ntohs (msg->type) == GNUNET_MESSAGE_TYPE_MESH_MULTICAST)
3491   {
3492     struct GNUNET_MESH_Multicast *mcast;
3493
3494     mcast = (struct GNUNET_MESH_Multicast *) mdata->data;
3495     if (t->fwd_queue_n >= t->fwd_queue_max)
3496     {
3497       GNUNET_break (0);
3498       GNUNET_log (GNUNET_ERROR_TYPE_ERROR, "  queue full!\n");
3499       GNUNET_log (GNUNET_ERROR_TYPE_ERROR,
3500                   "  message from %s!\n",
3501                   GNUNET_i2s(&mcast->oid));
3502       GNUNET_log (GNUNET_ERROR_TYPE_ERROR,
3503                   "  message at %s!\n",
3504                   GNUNET_i2s(&my_full_id));
3505       GNUNET_free (mdata->data);
3506       GNUNET_free (mdata);
3507       return;
3508     }
3509     t->fwd_queue_n++;
3510     mcast->ttl = htonl (ntohl (mcast->ttl) - 1);
3511     GNUNET_log (GNUNET_ERROR_TYPE_DEBUG, "  data packet, ttl: %u\n",
3512                 ntohl (mcast->ttl));
3513   }
3514   else
3515   {
3516     GNUNET_log (GNUNET_ERROR_TYPE_DEBUG, "  not a data packet, no ttl\n");
3517   }
3518
3519   tree_iterate_children (t->tree, &tunnel_send_multicast_iterator, mdata);
3520   if (mdata->reference_counter == 0)
3521   {
3522     GNUNET_log (GNUNET_ERROR_TYPE_DEBUG,
3523               "  no one to send data to\n");
3524     GNUNET_free (mdata->data);
3525     GNUNET_free (mdata);
3526     t->fwd_queue_n--;
3527   }
3528   else
3529   {
3530     mdata->total_out = mdata->reference_counter;
3531   }
3532   GNUNET_log (GNUNET_ERROR_TYPE_DEBUG,
3533               " sending a multicast packet done\n");
3534   return;
3535 }
3536
3537
3538 /**
3539  * Increase the SKIP value of all peers that
3540  * have not received a unicast message.
3541  *
3542  * @param cls Closure (ID of the peer that HAS received the message).
3543  * @param key ID of the neighbor.
3544  * @param value Information about the neighbor.
3545  *
3546  * @return GNUNET_YES to keep iterating.
3547  */
3548 static int
3549 tunnel_add_skip (void *cls,
3550                  const struct GNUNET_HashCode * key,
3551                  void *value)
3552 {
3553   struct GNUNET_PeerIdentity *neighbor = cls;
3554   struct MeshTunnelFlowControlInfo *fcinfo = value;
3555
3556   /* TODO compare only pointers? key == neighbor? */
3557   if (0 == memcmp (&neighbor->hashPubKey, key, sizeof (struct GNUNET_HashCode)))
3558   {
3559     return GNUNET_YES;
3560   }
3561   fcinfo->skip++;
3562   return GNUNET_YES;
3563 }
3564
3565
3566 /**
3567  * @brief Get neighbor's Flow Control information.
3568  *
3569  * Retrieves the MeshTunnelFlowControlInfo containing Flow Control data about
3570  * a direct descendant of the local node in a certain tunnel.
3571  * If the info is not yet there (recently created path), creates the data struct
3572  * and inserts it into the tunnel info, initialized to the current tunnel ACK
3573  * values.
3574  *
3575  * @param t Tunnel related.
3576  * @param peer Neighbor whose Flow Control info is needed.
3577  *
3578  * @return Neighbor's Flow Control info.
3579  */
3580 static struct MeshTunnelFlowControlInfo *
3581 tunnel_get_neighbor_fc (struct MeshTunnel *t,
3582                         const struct GNUNET_PeerIdentity *peer)
3583 {
3584   struct MeshTunnelFlowControlInfo *fcinfo;
3585
3586   if (NULL == t->children_fc)
3587     return NULL;
3588
3589   fcinfo = GNUNET_CONTAINER_multihashmap_get (t->children_fc,
3590                                              &peer->hashPubKey);
3591   if (NULL == fcinfo)
3592   {
3593     uint32_t delta;
3594
3595     fcinfo = GNUNET_malloc (sizeof (struct MeshTunnelFlowControlInfo));
3596     fcinfo->peer = peer_info_get(peer);
3597     fcinfo->skip = t->fwd_pid;
3598     fcinfo->t = t;
3599
3600     delta = t->nobuffer ? 1 : INITIAL_WINDOW_SIZE;
3601     fcinfo->fwd_ack = t->fwd_pid + delta;
3602     fcinfo->bck_ack = delta;
3603     fcinfo->bck_pid = -1;
3604
3605     fcinfo->send_buffer =
3606         GNUNET_malloc (sizeof(struct MeshPeerQueue *) * t->fwd_queue_max);
3607
3608     GNUNET_assert (GNUNET_OK ==
3609       GNUNET_CONTAINER_multihashmap_put (t->children_fc,
3610                                          &peer->hashPubKey,
3611                                          fcinfo,
3612                                          GNUNET_CONTAINER_MULTIHASHMAPOPTION_UNIQUE_FAST));
3613   }
3614   return fcinfo;
3615 }
3616
3617
3618 /**
3619  * Get the Flow Control info of a client.
3620  * 
3621  * @param t Tunnel on which to look.
3622  * @param c Client whose ACK to get.
3623  * 
3624  * @return ACK value.
3625  */
3626 static struct MeshTunnelFlowControlInfo *
3627 tunnel_get_client_fc (struct MeshTunnel *t,
3628                       struct MeshClient *c)
3629 {
3630   unsigned int i;
3631
3632   for (i = 0; i < t->nclients; i++)
3633   {
3634     if (t->clients[i] != c)
3635       continue;
3636     return &t->clients_fc[i];
3637   }
3638   GNUNET_assert (0);
3639   return NULL; // won't get here. Just to avoid compiler / coverity complaints.
3640 }
3641
3642
3643 /**
3644  * Iterator to get the appropiate ACK value from all children nodes.
3645  *
3646  * @param cls Closue (tunnel).
3647  * @param id Id of the child node.
3648  */
3649 static void
3650 tunnel_get_child_fwd_ack (void *cls,
3651                           GNUNET_PEER_Id id)
3652 {
3653   struct GNUNET_PeerIdentity peer_id;
3654   struct MeshTunnelFlowControlInfo *fcinfo;
3655   struct MeshTunnelChildIteratorContext *ctx = cls;
3656   struct MeshTunnel *t = ctx->t;
3657   uint32_t ack;
3658
3659   GNUNET_PEER_resolve (id, &peer_id);
3660   fcinfo = tunnel_get_neighbor_fc (t, &peer_id);
3661   ack = fcinfo->fwd_ack;
3662
3663   ctx->nchildren++;
3664   if (GNUNET_NO == ctx->init)
3665   {
3666     ctx->max_child_ack = ack;
3667     ctx->init = GNUNET_YES;
3668   }
3669
3670   if (GNUNET_YES == t->speed_min)
3671   {
3672     ctx->max_child_ack = ctx->max_child_ack > ack ? ack : ctx->max_child_ack;
3673   }
3674   else
3675   {
3676     ctx->max_child_ack = ctx->max_child_ack > ack ? ctx->max_child_ack : ack;
3677   }
3678 }
3679
3680
3681 /**
3682  * Get the maximum PID allowed to transmit to any
3683  * tunnel child of the local peer, depending on the tunnel
3684  * buffering/speed settings.
3685  *
3686  * @param t Tunnel.
3687  *
3688  * @return Maximum PID allowed (uint32 MAX), -1LL if node has no children.
3689  */
3690 static int64_t
3691 tunnel_get_children_fwd_ack (struct MeshTunnel *t)
3692 {
3693   struct MeshTunnelChildIteratorContext ctx;
3694   ctx.t = t;
3695   ctx.max_child_ack = 0;
3696   ctx.nchildren = 0;
3697   ctx.init = GNUNET_NO;
3698   tree_iterate_children (t->tree, tunnel_get_child_fwd_ack, &ctx);
3699
3700   if (0 == ctx.nchildren)
3701   {
3702     GNUNET_log (GNUNET_ERROR_TYPE_DEBUG,
3703             "  tunnel has no children, no FWD ACK\n");
3704     return -1LL;
3705   }
3706
3707   if (GNUNET_YES == t->nobuffer && GMC_is_pid_bigger(ctx.max_child_ack, t->fwd_pid))
3708     ctx.max_child_ack = t->fwd_pid + 1; // Might overflow, it's ok.
3709
3710   return (int64_t) ctx.max_child_ack;
3711 }
3712
3713
3714 /**
3715  * Set the FWD ACK value of a client in a particular tunnel.
3716  * 
3717  * @param t Tunnel affected.
3718  * @param c Client whose ACK to set.
3719  * @param ack ACK value.
3720  */
3721 static void
3722 tunnel_set_client_fwd_ack (struct MeshTunnel *t,
3723                            struct MeshClient *c, 
3724                            uint32_t ack)
3725 {
3726   unsigned int i;
3727
3728   for (i = 0; i < t->nclients; i++)
3729   {
3730     if (t->clients[i] != c)
3731       continue;
3732     t->clients_fc[i].fwd_ack = ack;
3733     return;
3734   }
3735   GNUNET_break (0);
3736 }
3737
3738
3739 /**
3740  * Get the highest ACK value of all clients in a particular tunnel,
3741  * according to the buffering/speed settings.
3742  * 
3743  * @param t Tunnel on which to look.
3744  * 
3745  * @return Corresponding ACK value (max uint32_t).
3746  *         If no clients are suscribed, -1LL.
3747  */
3748 static int64_t
3749 tunnel_get_clients_fwd_ack (struct MeshTunnel *t)
3750 {
3751   unsigned int i;
3752   int64_t ack;
3753
3754   if (0 == t->nclients)
3755   {
3756     GNUNET_log (GNUNET_ERROR_TYPE_DEBUG,
3757                 "  tunnel has no clients, no FWD ACK\n");
3758     return -1LL;
3759   }
3760
3761   for (ack = -1LL, i = 0; i < t->nclients; i++)
3762   {
3763     if (-1LL == ack ||
3764         (GNUNET_YES == t->speed_min &&
3765          GNUNET_YES == GMC_is_pid_bigger (ack, t->clients_fc[i].fwd_ack)) ||
3766         (GNUNET_NO == t->speed_min &&
3767          GNUNET_YES == GMC_is_pid_bigger (t->clients_fc[i].fwd_ack, ack)))
3768     {
3769       ack = t->clients_fc[i].fwd_ack;
3770     }
3771   }
3772
3773   if (GNUNET_YES == t->nobuffer && GMC_is_pid_bigger(ack, t->fwd_pid))
3774     ack = (uint32_t) t->fwd_pid + 1; // Might overflow, it's ok.
3775
3776   return (uint32_t) ack;
3777 }
3778
3779
3780 /**
3781  * Get the current fwd ack value for a tunnel, taking in account the tunnel
3782  * mode and the status of all children nodes.
3783  *
3784  * @param t Tunnel.
3785  *
3786  * @return Maximum PID allowed.
3787  */
3788 static uint32_t
3789 tunnel_get_fwd_ack (struct MeshTunnel *t)
3790 {
3791   uint32_t ack;
3792   uint32_t count;
3793   uint32_t buffer_free;
3794   int64_t child_ack;
3795   int64_t client_ack;
3796
3797   count = t->fwd_pid - t->skip;
3798   buffer_free = t->fwd_queue_max - t->fwd_queue_n;
3799   child_ack = tunnel_get_children_fwd_ack (t);
3800   client_ack = tunnel_get_clients_fwd_ack (t);
3801   if (GNUNET_YES == t->nobuffer)
3802   {
3803     ack = count;
3804     if (-1LL == child_ack)
3805       child_ack = client_ack;
3806     if (-1LL == child_ack)
3807     {
3808       GNUNET_break (0);
3809       client_ack = child_ack = ack;
3810     }
3811   }
3812   else
3813   {
3814     ack = count + buffer_free; // Overflow? OK!
3815   }
3816   if (-1LL == child_ack)
3817   {
3818     // Node has no children, child_ack AND core buffer are irrelevant.
3819     GNUNET_break (-1LL != client_ack); // No children AND no clients? Not good!
3820     return (uint32_t) client_ack;
3821   }
3822   if (-1LL == client_ack)
3823   {
3824     client_ack = ack;
3825   }
3826   if (GNUNET_YES == t->speed_min)
3827   {
3828     ack = GMC_min_pid ((uint32_t) child_ack, ack);
3829     ack = GMC_min_pid ((uint32_t) client_ack, ack);
3830   }
3831   else
3832   {
3833     ack = GMC_max_pid ((uint32_t) child_ack, ack);
3834     ack = GMC_max_pid ((uint32_t) client_ack, ack);
3835   }
3836   GNUNET_log (GNUNET_ERROR_TYPE_DEBUG,
3837               "c %u, bf %u, ch %lld, cl %lld, ACK: %u\n",
3838               count, buffer_free, child_ack, client_ack, ack);
3839   return ack;
3840 }
3841
3842
3843 /**
3844  * Build a local ACK message and send it to a local client.
3845  * 
3846  * @param t Tunnel on which to send the ACK.
3847  * @param c Client to whom send the ACK.
3848  * @param ack Value of the ACK.
3849  */
3850 static void
3851 send_local_ack (struct MeshTunnel *t, struct MeshClient *c, uint32_t ack)
3852 {
3853   struct GNUNET_MESH_LocalAck msg;
3854
3855   msg.header.size = htons (sizeof (msg));
3856   msg.header.type = htons (GNUNET_MESSAGE_TYPE_MESH_LOCAL_ACK);
3857   msg.tunnel_id = htonl (t->owner == c ? t->local_tid : t->local_tid_dest);
3858   msg.max_pid = htonl (ack); 
3859   GNUNET_SERVER_notification_context_unicast(nc,
3860                                               c->handle,
3861                                               &msg.header,
3862                                               GNUNET_NO);
3863 }
3864
3865 /**
3866  * Build an ACK message and queue it to send to the given peer.
3867  * 
3868  * @param t Tunnel on which to send the ACK.
3869  * @param peer Peer to whom send the ACK.
3870  * @param ack Value of the ACK.
3871  */
3872 static void
3873 send_ack (struct MeshTunnel *t, struct GNUNET_PeerIdentity *peer,  uint32_t ack)
3874 {
3875   struct GNUNET_MESH_ACK msg;
3876
3877   GNUNET_PEER_resolve (t->id.oid, &msg.oid);
3878   msg.header.size = htons (sizeof (msg));
3879   msg.header.type = htons (GNUNET_MESSAGE_TYPE_MESH_ACK);
3880   msg.pid = htonl (ack);
3881   msg.tid = htonl (t->id.tid);
3882
3883   send_prebuilt_message (&msg.header, peer, t);
3884 }
3885
3886
3887 /**
3888  * Notify a the owner of a tunnel about how many more
3889  * payload packages will we accept on a given tunnel.
3890  *
3891  * @param t Tunnel on which to send the ACK.
3892  */
3893 static void
3894 tunnel_send_client_fwd_ack (struct MeshTunnel *t)
3895 {
3896   uint32_t ack;
3897
3898   GNUNET_log (GNUNET_ERROR_TYPE_DEBUG,
3899               "Sending client FWD ACK on tunnel %X\n",
3900               t->local_tid);
3901
3902   ack = tunnel_get_fwd_ack (t);
3903
3904   GNUNET_log (GNUNET_ERROR_TYPE_DEBUG, " ack %u\n", ack);
3905   if (t->last_fwd_ack == ack)
3906   {
3907     GNUNET_log (GNUNET_ERROR_TYPE_DEBUG, " same as last, not sending!\n");
3908     return;
3909   }
3910
3911   GNUNET_log (GNUNET_ERROR_TYPE_DEBUG, " sending!\n");
3912   t->last_fwd_ack = ack;
3913   send_local_ack (t, t->owner, ack);
3914 }
3915
3916
3917 /**
3918  * Send an ACK informing the predecessor about the available buffer space.
3919  * In case there is no predecessor, inform the owning client.
3920  * If buffering is off, send only on behalf of children or self if endpoint.
3921  * If buffering is on, send when sent to children and buffer space is free.
3922  * Note that although the name is fwd_ack, the FWD mean forward *traffic*,
3923  * the ACK itself goes "back" (towards root).
3924  * 
3925  * @param t Tunnel on which to send the ACK.
3926  * @param type Type of message that triggered the ACK transmission.
3927  */
3928 static void
3929 tunnel_send_fwd_ack (struct MeshTunnel *t, uint16_t type)
3930 {
3931   struct GNUNET_PeerIdentity id;
3932   uint32_t ack;
3933
3934   if (NULL != t->owner)
3935   {
3936     tunnel_send_client_fwd_ack (t);
3937     return;
3938   }
3939   /* Is it after unicast / multicast retransmission? */
3940   switch (type)
3941   {
3942     case GNUNET_MESSAGE_TYPE_MESH_UNICAST:
3943     case GNUNET_MESSAGE_TYPE_MESH_MULTICAST:
3944       GNUNET_log (GNUNET_ERROR_TYPE_DEBUG,
3945                   "ACK due to FWD DATA retransmission\n");
3946       if (GNUNET_YES == t->nobuffer)
3947       {
3948         GNUNET_log (GNUNET_ERROR_TYPE_DEBUG, "Not sending ACK, nobuffer\n");
3949         return;
3950       }
3951       break;
3952     case GNUNET_MESSAGE_TYPE_MESH_ACK:
3953     case GNUNET_MESSAGE_TYPE_MESH_LOCAL_ACK:
3954       break;
3955     default:
3956       GNUNET_break (0);
3957   }
3958
3959   /* Check if we need no retransmit the ACK */
3960   if (t->fwd_queue_max > t->fwd_queue_n * 4 &&
3961       GMC_is_pid_bigger(t->last_fwd_ack, t->fwd_pid))
3962   {
3963     GNUNET_log (GNUNET_ERROR_TYPE_DEBUG, "Not sending ACK, buffer free\n");
3964     GNUNET_log (GNUNET_ERROR_TYPE_DEBUG,
3965                 "  t->qmax: %u, t->qn: %u\n",
3966                 t->fwd_queue_max, t->fwd_queue_n);
3967     GNUNET_log (GNUNET_ERROR_TYPE_DEBUG,
3968                 "  t->pid: %u, t->ack: %u\n",
3969                 t->fwd_pid, t->last_fwd_ack);
3970     return;
3971   }
3972
3973   /* Ok, ACK might be necessary, what PID to ACK? */
3974   ack = tunnel_get_fwd_ack (t);
3975
3976   /* If speed_min and not all children have ack'd, dont send yet */
3977   if (ack == t->last_fwd_ack)
3978   {
3979     GNUNET_log (GNUNET_ERROR_TYPE_DEBUG, "Not sending FWD ACK, not ready\n");
3980     return;
3981   }
3982
3983   t->last_fwd_ack = ack;
3984   GNUNET_PEER_resolve (tree_get_predecessor (t->tree), &id);
3985   send_ack (t, &id, ack);
3986   debug_fwd_ack++;
3987 }
3988
3989
3990 /**
3991  * Iterator to send a child node a BCK ACK to allow him to send more
3992  * to_origin data.
3993  *
3994  * @param cls Closure (tunnel).
3995  * @param id Id of the child node.
3996  */
3997 static void
3998 tunnel_send_child_bck_ack (void *cls,
3999                            GNUNET_PEER_Id id)
4000 {
4001   struct MeshTunnel *t = cls;
4002   struct MeshTunnelChildInfo *cinfo;
4003   struct GNUNET_PeerIdentity peer;
4004
4005   GNUNET_PEER_resolve (id, &peer);
4006   cinfo = tunnel_get_neighbor_fc (t, &peer);
4007
4008   if (cinfo->bck_ack != cinfo->bck_pid &&
4009       GNUNET_NO == GMC_is_pid_bigger (cinfo->bck_ack, cinfo->bck_pid))
4010   {
4011     GNUNET_log (GNUNET_ERROR_TYPE_DEBUG,
4012                 "    Not sending ACK, not needed\n");
4013     return;
4014   }
4015
4016   cinfo->bck_ack = t->bck_queue_max - t->bck_queue_n + cinfo->bck_pid;
4017   GNUNET_log (GNUNET_ERROR_TYPE_DEBUG,
4018               "    Sending BCK ACK %u\n",
4019               cinfo->bck_ack);
4020   send_ack (t, &peer, cinfo->bck_ack);
4021 }
4022
4023
4024 /**
4025  * @brief Send BCK ACKs to clients to allow them more to_origin traffic
4026  * 
4027  * Iterates over all clients and sends BCK ACKs to the ones that need it.
4028  *
4029  * FIXME fc: what happens if we have 2 clients but q_size is 1?
4030  *           - implement a size 1 buffer in each client_fc AND children_fc
4031  *           to hold at least 1 message per "child".
4032  *             problem: violates no buffer policy
4033  *           - ack 0 and make "children" poll for transmission slots
4034  *             problem: big overhead, extra latency even in low traffic
4035  *                      settings
4036  * 
4037  * @param t Tunnel on which to send the BCK ACKs.
4038  */
4039 static void
4040 tunnel_send_clients_bck_ack (struct MeshTunnel *t)
4041 {
4042   unsigned int i;
4043   unsigned int tunnel_delta;
4044
4045   GNUNET_log (GNUNET_ERROR_TYPE_DEBUG, "  Sending BCK ACK to clients\n");
4046
4047   tunnel_delta = t->bck_queue_max - t->bck_queue_n;
4048   GNUNET_log (GNUNET_ERROR_TYPE_DEBUG, "   tunnel delta: %u\n", tunnel_delta);
4049
4050   /* Find client whom to allow to send to origin (with lowest buffer space) */
4051   for (i = 0; i < t->nclients; i++)
4052   {
4053     struct MeshTunnelClientInfo *clinfo;
4054     unsigned int delta;
4055
4056     clinfo = &t->clients_fc[i];
4057     delta = clinfo->bck_ack - clinfo->bck_pid;
4058     GNUNET_log (GNUNET_ERROR_TYPE_DEBUG, "    client %u delta: %u\n",
4059          t->clients[i]->id, delta);
4060
4061     if ((GNUNET_NO == t->nobuffer && tunnel_delta > delta) ||
4062         (GNUNET_YES == t->nobuffer && 0 == delta))
4063     {
4064       uint32_t ack;
4065
4066       ack = clinfo->bck_pid;
4067       ack += t->nobuffer ? 1 : tunnel_delta;
4068       GNUNET_log (GNUNET_ERROR_TYPE_DEBUG,
4069                   "    sending ack to client %u: %u\n",
4070                   t->clients[i]->id, ack);
4071       send_local_ack (t, t->clients[i], ack);
4072       clinfo->bck_ack = ack;
4073     }
4074     else
4075     {
4076       GNUNET_log (GNUNET_ERROR_TYPE_DEBUG,
4077                   "    not sending ack to client %u (td %u, d %u)\n",
4078                   t->clients[i]->id, tunnel_delta, delta);
4079     }
4080   }
4081 }
4082
4083
4084 /**
4085  * Send an ACK informing the children nodes and destination clients about
4086  * the available buffer space.
4087  * If buffering is off, send only on behalf of root (can be self).
4088  * If buffering is on, send when sent to predecessor and buffer space is free.
4089  * Note that although the name is bck_ack, the BCK mean backwards *traffic*,
4090  * the ACK itself goes "forward" (towards children/clients).
4091  * 
4092  * @param t Tunnel on which to send the ACK.
4093  * @param type Type of message that triggered the ACK transmission.
4094  */
4095 static void
4096 tunnel_send_bck_ack (struct MeshTunnel *t, uint16_t type)
4097 {
4098   GNUNET_log (GNUNET_ERROR_TYPE_DEBUG,
4099               "Sending BCK ACK on tunnel %u [%u] due to %s\n",
4100               t->id.oid, t->id.tid, GNUNET_MESH_DEBUG_M2S(type));
4101   /* Is it after data to_origin retransmission? */
4102   switch (type)
4103   {
4104     case GNUNET_MESSAGE_TYPE_MESH_TO_ORIGIN:
4105       if (GNUNET_YES == t->nobuffer)
4106       {
4107         GNUNET_log (GNUNET_ERROR_TYPE_DEBUG,
4108                     "    Not sending ACK, nobuffer\n");
4109         return;
4110       }
4111       break;
4112     case GNUNET_MESSAGE_TYPE_MESH_ACK:
4113     case GNUNET_MESSAGE_TYPE_MESH_LOCAL_ACK:
4114     case GNUNET_MESSAGE_TYPE_MESH_POLL:
4115       break;
4116     default:
4117       GNUNET_break (0);
4118   }
4119
4120   tunnel_send_clients_bck_ack (t);
4121   tree_iterate_children (t->tree, &tunnel_send_child_bck_ack, t);
4122 }
4123
4124
4125 /**
4126  * @brief Re-initiate traffic to this peer if necessary.
4127  *
4128  * Check if there is traffic queued towards this peer
4129  * and the core transmit handle is NULL (traffic was stalled).
4130  * If so, call core tmt rdy.
4131  *
4132  * @param cls Closure (unused)
4133  * @param peer_id Short ID of peer to which initiate traffic.
4134  */
4135 static void
4136 peer_unlock_queue(void *cls, GNUNET_PEER_Id peer_id)
4137 {
4138   struct MeshPeerInfo *peer;
4139   struct GNUNET_PeerIdentity id;
4140   struct MeshPeerQueue *q;
4141   size_t size;
4142
4143   peer = peer_info_get_short(peer_id);
4144   if (NULL != peer->core_transmit)
4145     return;
4146
4147   q = queue_get_next(peer);
4148   if (NULL == q)
4149   {
4150     /* Might br multicast traffic already sent to this particular peer but
4151      * not to other children in this tunnel.
4152      * This way t->queue_n would be > 0 but the queue of this particular peer
4153      * would be empty.
4154      */
4155     return;
4156   }
4157   size = q->size;
4158   GNUNET_PEER_resolve (peer->id, &id);
4159   peer->core_transmit =
4160         GNUNET_CORE_notify_transmit_ready(core_handle,
4161                                           0,
4162                                           0,
4163                                           GNUNET_TIME_UNIT_FOREVER_REL,
4164                                           &id,
4165                                           size,
4166                                           &queue_send,
4167                                           peer);
4168         return;
4169 }
4170
4171
4172 /**
4173  * @brief Allow transmission of FWD traffic on this tunnel
4174  *
4175  * Check if there is traffic queued towards any children
4176  * and the core transmit handle is NULL, and if so, call core tmt rdy.
4177  *
4178  * @param t Tunnel on which to unlock FWD traffic.
4179  */
4180 static void
4181 tunnel_unlock_fwd_queues (struct MeshTunnel *t)
4182 {
4183   if (0 == t->fwd_queue_n)
4184     return;
4185
4186   tree_iterate_children (t->tree, &peer_unlock_queue, NULL);
4187 }
4188
4189
4190 /**
4191  * @brief Allow transmission of BCK traffic on this tunnel
4192  *
4193  * Check if there is traffic queued towards the root of the tree
4194  * and the core transmit handle is NULL, and if so, call core tmt rdy.
4195  *
4196  * @param t Tunnel on which to unlock BCK traffic.
4197  */
4198 static void
4199 tunnel_unlock_bck_queue (struct MeshTunnel *t)
4200 {
4201   if (0 == t->bck_queue_n)
4202     return;
4203
4204   peer_unlock_queue(NULL, tree_get_predecessor(t->tree));
4205 }
4206
4207
4208 /**
4209  * Send a message to all peers in this tunnel that the tunnel is no longer
4210  * valid.
4211  *
4212  * @param t The tunnel whose peers to notify.
4213  */
4214 static void
4215 tunnel_send_destroy (struct MeshTunnel *t)
4216 {
4217   struct GNUNET_MESH_TunnelDestroy msg;
4218
4219   msg.header.size = htons (sizeof (msg));
4220   msg.header.type = htons (GNUNET_MESSAGE_TYPE_MESH_TUNNEL_DESTROY);
4221   GNUNET_PEER_resolve (t->id.oid, &msg.oid);
4222   msg.tid = htonl (t->id.tid);
4223   tunnel_send_multicast (t, &msg.header);
4224 }
4225
4226
4227 /**
4228  * Cancel all transmissions towards a neighbor that belong to a certain tunnel.
4229  *
4230  * @param cls Closure (Tunnel which to cancel).
4231  * @param neighbor_id Short ID of the neighbor to whom cancel the transmissions.
4232  */
4233 static void
4234 tunnel_cancel_queues (void *cls, GNUNET_PEER_Id neighbor_id)
4235 {
4236   struct MeshTunnel *t = cls;
4237   struct MeshPeerInfo *peer_info;
4238   struct MeshPeerQueue *pq;
4239   struct MeshPeerQueue *next;
4240
4241   peer_info = peer_info_get_short (neighbor_id);
4242   for (pq = peer_info->queue_head; NULL != pq; pq = next)
4243   {
4244     next = pq->next;
4245     if (pq->tunnel == t)
4246     {
4247       if (GNUNET_MESSAGE_TYPE_MESH_MULTICAST == pq->type ||
4248           GNUNET_MESSAGE_TYPE_MESH_UNICAST == pq->type ||
4249           GNUNET_MESSAGE_TYPE_MESH_TO_ORIGIN == pq->type)
4250       {
4251         // Should have been removed on destroy children
4252         GNUNET_break (0);
4253       }
4254       queue_destroy (pq, GNUNET_YES);
4255     }
4256   }
4257   if (NULL == peer_info->queue_head && NULL != peer_info->core_transmit)
4258   {
4259     GNUNET_CORE_notify_transmit_ready_cancel(peer_info->core_transmit);
4260     peer_info->core_transmit = NULL;
4261   }
4262 }
4263
4264 /**
4265  * Destroy the tunnel and free any allocated resources linked to it.
4266  *
4267  * @param t the tunnel to destroy
4268  *
4269  * @return GNUNET_OK on success
4270  */
4271 static int
4272 tunnel_destroy (struct MeshTunnel *t)
4273 {
4274   struct MeshClient *c;
4275   struct GNUNET_HashCode hash;
4276   unsigned int i;
4277   int r;
4278
4279   if (NULL == t)
4280     return GNUNET_OK;
4281
4282   r = GNUNET_OK;
4283   c = t->owner;
4284 #if MESH_DEBUG
4285   {
4286     struct GNUNET_PeerIdentity id;
4287
4288     GNUNET_PEER_resolve (t->id.oid, &id);
4289     GNUNET_log (GNUNET_ERROR_TYPE_DEBUG, "destroying tunnel %s [%x]\n",
4290                 GNUNET_i2s (&id), t->id.tid);
4291     if (NULL != c)
4292       GNUNET_log (GNUNET_ERROR_TYPE_DEBUG, "  by client %u\n", c->id);
4293   }
4294 #endif
4295
4296   GNUNET_CRYPTO_hash (&t->id, sizeof (struct MESH_TunnelID), &hash);
4297   if (GNUNET_YES != GNUNET_CONTAINER_multihashmap_remove (tunnels, &hash, t))
4298   {
4299     GNUNET_break (0);
4300     r = GNUNET_SYSERR;
4301   }
4302
4303   if (NULL != c)
4304   {
4305     GNUNET_CRYPTO_hash (&t->local_tid, sizeof (MESH_TunnelNumber), &hash);
4306     if (GNUNET_YES !=
4307         GNUNET_CONTAINER_multihashmap_remove (c->own_tunnels, &hash, t))
4308     {
4309       GNUNET_break (0);
4310       r = GNUNET_SYSERR;
4311     }
4312   }
4313
4314   GNUNET_CRYPTO_hash (&t->local_tid_dest, sizeof (MESH_TunnelNumber), &hash);
4315   for (i = 0; i < t->nclients; i++)
4316   {
4317     c = t->clients[i];
4318     if (GNUNET_YES !=
4319           GNUNET_CONTAINER_multihashmap_remove (c->incoming_tunnels, &hash, t))
4320     {
4321       GNUNET_break (0);
4322       r = GNUNET_SYSERR;
4323     }
4324   }
4325   for (i = 0; i < t->nignore; i++)
4326   {
4327     c = t->ignore[i];
4328     if (GNUNET_YES !=
4329           GNUNET_CONTAINER_multihashmap_remove (c->ignore_tunnels, &hash, t))
4330     {
4331       GNUNET_break (0);
4332       r = GNUNET_SYSERR;
4333     }
4334   }
4335
4336   if (t->nclients > 0)
4337   {
4338     if (GNUNET_YES !=
4339         GNUNET_CONTAINER_multihashmap_remove (incoming_tunnels, &hash, t))
4340     {
4341       GNUNET_break (0);
4342       r = GNUNET_SYSERR;
4343     }
4344     GNUNET_free (t->clients);
4345     GNUNET_free (t->clients_fc);
4346   }
4347
4348   if (NULL != t->peers)
4349   {
4350     GNUNET_CONTAINER_multihashmap_iterate (t->peers, &peer_info_delete_tunnel,
4351                                            t);
4352     GNUNET_CONTAINER_multihashmap_destroy (t->peers);
4353   }
4354
4355   GNUNET_CONTAINER_multihashmap_iterate (t->children_fc,
4356                                          &tunnel_destroy_child,
4357                                          t);
4358   GNUNET_CONTAINER_multihashmap_destroy (t->children_fc);
4359   t->children_fc = NULL;
4360
4361   tree_iterate_children (t->tree, &tunnel_cancel_queues, t);
4362   tree_destroy (t->tree);
4363
4364   if (NULL != t->regex_ctx)
4365     regex_cancel_search (t->regex_ctx);
4366   if (NULL != t->dht_get_type)
4367     GNUNET_DHT_get_stop (t->dht_get_type);
4368   if (GNUNET_SCHEDULER_NO_TASK != t->timeout_task)
4369     GNUNET_SCHEDULER_cancel (t->timeout_task);
4370   if (GNUNET_SCHEDULER_NO_TASK != t->path_refresh_task)
4371     GNUNET_SCHEDULER_cancel (t->path_refresh_task);
4372
4373   n_tunnels--;
4374   GNUNET_STATISTICS_update (stats, "# tunnels", -1, GNUNET_NO);
4375   GNUNET_free (t);
4376   return r;
4377 }
4378
4379
4380 /**
4381  * Create a new tunnel
4382  * 
4383  * @param owner Who is the owner of the tunnel (short ID).
4384  * @param tid Tunnel Number of the tunnel.
4385  * @param client Clients that owns the tunnel, NULL for foreign tunnels.
4386  * @param local Tunnel Number for the tunnel, for the client point of view.
4387  * 
4388  * @return A new initialized tunnel. NULL on error.
4389  */
4390 static struct MeshTunnel *
4391 tunnel_new (GNUNET_PEER_Id owner,
4392             MESH_TunnelNumber tid,
4393             struct MeshClient *client,
4394             MESH_TunnelNumber local)
4395 {
4396   struct MeshTunnel *t;
4397   struct GNUNET_HashCode hash;
4398
4399   if (n_tunnels >= max_tunnels && NULL == client)
4400     return NULL;
4401
4402   t = GNUNET_malloc (sizeof (struct MeshTunnel));
4403   t->id.oid = owner;
4404   t->id.tid = tid;
4405   t->fwd_queue_max = (max_msgs_queue / max_tunnels) + 1;
4406   t->bck_queue_max = t->fwd_queue_max;
4407   t->tree = tree_new (owner);
4408   t->owner = client;
4409   t->fwd_pid = (uint32_t) -1; // Next (expected) = 0
4410   t->bck_pid = (uint32_t) -1; // Next (expected) = 0
4411   t->bck_ack = INITIAL_WINDOW_SIZE - 1;
4412   t->last_fwd_ack = INITIAL_WINDOW_SIZE - 1;
4413   t->local_tid = local;
4414   t->children_fc = GNUNET_CONTAINER_multihashmap_create (8, GNUNET_NO);
4415   n_tunnels++;
4416   GNUNET_STATISTICS_update (stats, "# tunnels", 1, GNUNET_NO);
4417
4418   GNUNET_CRYPTO_hash (&t->id, sizeof (struct MESH_TunnelID), &hash);
4419   if (GNUNET_OK !=
4420       GNUNET_CONTAINER_multihashmap_put (tunnels, &hash, t,
4421                                          GNUNET_CONTAINER_MULTIHASHMAPOPTION_UNIQUE_ONLY))
4422   {
4423     GNUNET_break (0);
4424     tunnel_destroy (t);
4425     if (NULL != client)
4426     {
4427       GNUNET_break (0);
4428       GNUNET_SERVER_receive_done (client->handle, GNUNET_SYSERR);
4429     }
4430     return NULL;
4431   }
4432
4433   if (NULL != client)
4434   {
4435     GNUNET_CRYPTO_hash (&t->local_tid, sizeof (MESH_TunnelNumber), &hash);
4436     if (GNUNET_OK !=
4437         GNUNET_CONTAINER_multihashmap_put (client->own_tunnels, &hash, t,
4438                                           GNUNET_CONTAINER_MULTIHASHMAPOPTION_UNIQUE_ONLY))
4439     {
4440       tunnel_destroy (t);
4441       GNUNET_break (0);
4442       GNUNET_SERVER_receive_done (client->handle, GNUNET_SYSERR);
4443       return NULL;
4444     }
4445   }
4446
4447   return t;
4448 }
4449
4450
4451 /**
4452  * Removes an explicit path from a tunnel, freeing all intermediate nodes
4453  * that are no longer needed, as well as nodes of no longer reachable peers.
4454  * The tunnel itself is also destoyed if results in a remote empty tunnel.
4455  *
4456  * @param t Tunnel from which to remove the path.
4457  * @param peer Short id of the peer which should be removed.
4458  */
4459 static void
4460 tunnel_delete_peer (struct MeshTunnel *t, GNUNET_PEER_Id peer)
4461 {
4462   if (GNUNET_NO == tree_del_peer (t->tree, peer, NULL, NULL))
4463     tunnel_destroy (t);
4464 }
4465
4466
4467 /**
4468  * tunnel_destroy_iterator: iterator for deleting each tunnel that belongs to a
4469  * client when the client disconnects. If the client is not the owner, the
4470  * owner will get notified if no more clients are in the tunnel and the client
4471  * get removed from the tunnel's list.
4472  *
4473  * @param cls closure (client that is disconnecting)
4474  * @param key the hash of the local tunnel id (used to access the hashmap)
4475  * @param value the value stored at the key (tunnel to destroy)
4476  *
4477  * @return GNUNET_OK, keep iterating.
4478  */
4479 static int
4480 tunnel_destroy_iterator (void *cls, const struct GNUNET_HashCode * key, void *value)
4481 {
4482   struct MeshTunnel *t = value;
4483   struct MeshClient *c = cls;
4484
4485   send_client_tunnel_disconnect(t, c);
4486   if (c != t->owner)
4487   {
4488     GNUNET_log (GNUNET_ERROR_TYPE_DEBUG,
4489                 "Client %u is destination, keeping the tunnel alive.\n", c->id);
4490     tunnel_delete_client(t, c);
4491     client_delete_tunnel(c, t);
4492     return GNUNET_OK;
4493   }
4494   tunnel_send_destroy(t);
4495   t->owner = NULL;
4496   t->destroy = GNUNET_YES;
4497
4498   return GNUNET_OK;
4499 }
4500
4501
4502 /**
4503  * Timeout function, destroys tunnel if called
4504  *
4505  * @param cls Closure (tunnel to destroy).
4506  * @param tc TaskContext
4507  */
4508 static void
4509 tunnel_timeout (void *cls, const struct GNUNET_SCHEDULER_TaskContext *tc)
4510 {
4511   struct MeshTunnel *t = cls;
4512   struct GNUNET_PeerIdentity id;
4513
4514   t->timeout_task = GNUNET_SCHEDULER_NO_TASK;
4515   if (0 != (tc->reason & GNUNET_SCHEDULER_REASON_SHUTDOWN))
4516     return;
4517   GNUNET_PEER_resolve(t->id.oid, &id);
4518   GNUNET_log (GNUNET_ERROR_TYPE_INFO,
4519               "Tunnel %s [%X] timed out. Destroying.\n",
4520               GNUNET_i2s(&id), t->id.tid);
4521   send_clients_tunnel_destroy (t);
4522   tunnel_destroy (t);
4523 }
4524
4525 /**
4526  * Resets the tunnel timeout. Starts it if no timeout was running.
4527  *
4528  * @param t Tunnel whose timeout to reset.
4529  *
4530  * TODO use heap to improve efficiency of scheduler.
4531  */
4532 static void
4533 tunnel_reset_timeout (struct MeshTunnel *t)
4534 {
4535   if (GNUNET_SCHEDULER_NO_TASK != t->timeout_task)
4536     GNUNET_SCHEDULER_cancel (t->timeout_task);
4537   t->timeout_task =
4538       GNUNET_SCHEDULER_add_delayed (GNUNET_TIME_relative_multiply
4539                                     (refresh_path_time, 4), &tunnel_timeout, t);
4540 }
4541
4542
4543 /******************************************************************************/
4544 /****************      MESH NETWORK HANDLER HELPERS     ***********************/
4545 /******************************************************************************/
4546
4547 /**
4548  * Function to send a create path packet to a peer.
4549  *
4550  * @param cls closure
4551  * @param size number of bytes available in buf
4552  * @param buf where the callee should write the message
4553  * @return number of bytes written to buf
4554  */
4555 static size_t
4556 send_core_path_create (void *cls, size_t size, void *buf)
4557 {
4558   struct MeshPathInfo *info = cls;
4559   struct GNUNET_MESH_ManipulatePath *msg;
4560   struct GNUNET_PeerIdentity *peer_ptr;
4561   struct MeshTunnel *t = info->t;
4562   struct MeshPeerPath *p = info->path;
4563   size_t size_needed;
4564   uint32_t opt;
4565   int i;
4566
4567   GNUNET_log (GNUNET_ERROR_TYPE_DEBUG, "CREATE PATH sending...\n");
4568   size_needed =
4569       sizeof (struct GNUNET_MESH_ManipulatePath) +
4570       p->length * sizeof (struct GNUNET_PeerIdentity);
4571
4572   if (size < size_needed || NULL == buf)
4573   {
4574     GNUNET_break (0);
4575     return 0;
4576   }
4577   msg = (struct GNUNET_MESH_ManipulatePath *) buf;
4578   msg->header.size = htons (size_needed);
4579   msg->header.type = htons (GNUNET_MESSAGE_TYPE_MESH_PATH_CREATE);
4580   msg->tid = ntohl (t->id.tid);
4581
4582   opt = 0;
4583   if (GNUNET_YES == t->speed_min)
4584     opt |= MESH_TUNNEL_OPT_SPEED_MIN;
4585   if (GNUNET_YES == t->nobuffer)
4586     opt |= MESH_TUNNEL_OPT_NOBUFFER;
4587   msg->opt = htonl(opt);
4588   msg->reserved = 0;
4589
4590   peer_ptr = (struct GNUNET_PeerIdentity *) &msg[1];
4591   for (i = 0; i < p->length; i++)
4592   {
4593     GNUNET_PEER_resolve (p->peers[i], peer_ptr++);
4594   }
4595
4596   path_destroy (p);
4597   GNUNET_free (info);
4598
4599   GNUNET_log (GNUNET_ERROR_TYPE_DEBUG,
4600               "CREATE PATH (%u bytes long) sent!\n", size_needed);
4601   return size_needed;
4602 }
4603
4604
4605 /**
4606  * Fill the core buffer 
4607  *
4608  * @param cls closure (data itself)
4609  * @param size number of bytes available in buf
4610  * @param buf where the callee should write the message
4611  *
4612  * @return number of bytes written to buf
4613  */
4614 static size_t
4615 send_core_data_multicast (void *cls, size_t size, void *buf)
4616 {
4617   struct MeshTransmissionDescriptor *info = cls;
4618   size_t total_size;
4619
4620   GNUNET_log (GNUNET_ERROR_TYPE_DEBUG, "Multicast callback.\n");
4621   GNUNET_assert (NULL != info);
4622   GNUNET_assert (NULL != info->peer);
4623   total_size = info->mesh_data->data_len;
4624   GNUNET_assert (total_size < GNUNET_SERVER_MAX_MESSAGE_SIZE);
4625
4626   if (total_size > size)
4627   {
4628     GNUNET_break (0);
4629     return 0;
4630   }
4631   GNUNET_log (GNUNET_ERROR_TYPE_DEBUG, " copying data...\n");
4632   memcpy (buf, info->mesh_data->data, total_size);
4633 #if MESH_DEBUG
4634   {
4635     struct GNUNET_MESH_Multicast *mc;
4636     struct GNUNET_MessageHeader *mh;
4637
4638     mh = buf;
4639     if (ntohs (mh->type) == GNUNET_MESSAGE_TYPE_MESH_MULTICAST)
4640     {
4641       mc = (struct GNUNET_MESH_Multicast *) mh;
4642       mh = (struct GNUNET_MessageHeader *) &mc[1];
4643       GNUNET_log (GNUNET_ERROR_TYPE_DEBUG,
4644                   " multicast, payload type %s\n",
4645                   GNUNET_MESH_DEBUG_M2S (ntohs (mh->type)));
4646       GNUNET_log (GNUNET_ERROR_TYPE_DEBUG,
4647                   " multicast, payload size %u\n", ntohs (mh->size));
4648     }
4649     else
4650     {
4651       GNUNET_log (GNUNET_ERROR_TYPE_DEBUG, " type %s\n",
4652                   GNUNET_MESH_DEBUG_M2S (ntohs (mh->type)));
4653     }
4654   }
4655 #endif
4656   data_descriptor_decrement_rc (info->mesh_data);
4657   GNUNET_log (GNUNET_ERROR_TYPE_DEBUG, "freeing info...\n");
4658   GNUNET_free (info);
4659   GNUNET_log (GNUNET_ERROR_TYPE_DEBUG, "return %u\n", total_size);
4660   return total_size;
4661 }
4662
4663
4664 /**
4665  * Creates a path ack message in buf and frees all unused resources.
4666  *
4667  * @param cls closure (MeshTransmissionDescriptor)
4668  * @param size number of bytes available in buf
4669  * @param buf where the callee should write the message
4670  * @return number of bytes written to buf
4671  */
4672 static size_t
4673 send_core_path_ack (void *cls, size_t size, void *buf)
4674 {
4675   struct MeshTransmissionDescriptor *info = cls;
4676   struct GNUNET_MESH_PathACK *msg = buf;
4677
4678   GNUNET_assert (NULL != info);
4679   if (sizeof (struct GNUNET_MESH_PathACK) > size)
4680   {
4681     GNUNET_break (0);
4682     return 0;
4683   }
4684   msg->header.size = htons (sizeof (struct GNUNET_MESH_PathACK));
4685   msg->header.type = htons (GNUNET_MESSAGE_TYPE_MESH_PATH_ACK);
4686   GNUNET_PEER_resolve (info->origin->oid, &msg->oid);
4687   msg->tid = htonl (info->origin->tid);
4688   msg->peer_id = my_full_id;
4689
4690   GNUNET_free (info);
4691   /* TODO add signature */
4692
4693   GNUNET_log (GNUNET_ERROR_TYPE_DEBUG, "PATH ACK sent!\n");
4694   return sizeof (struct GNUNET_MESH_PathACK);
4695 }
4696
4697
4698 /**
4699  * Free a transmission that was already queued with all resources
4700  * associated to the request.
4701  *
4702  * @param queue Queue handler to cancel.
4703  * @param clear_cls Is it necessary to free associated cls?
4704  */
4705 static void
4706 queue_destroy (struct MeshPeerQueue *queue, int clear_cls)
4707 {
4708   struct MeshTransmissionDescriptor *dd;
4709   struct MeshPathInfo *path_info;
4710   struct MeshTunnelChildInfo *cinfo;
4711   struct GNUNET_PeerIdentity id;
4712   unsigned int i;
4713   unsigned int max;
4714
4715   if (GNUNET_YES == clear_cls)
4716   {
4717     switch (queue->type)
4718     {
4719       case GNUNET_MESSAGE_TYPE_MESH_TUNNEL_DESTROY:
4720         GNUNET_log (GNUNET_ERROR_TYPE_ERROR, "   cancelling TUNNEL_DESTROY\n");
4721         GNUNET_assert (GNUNET_YES == queue->tunnel->destroy);
4722         /* FIXME: don't cancel, send and destroy tunnel in queue_send */
4723         /* fall through */
4724       case GNUNET_MESSAGE_TYPE_MESH_UNICAST:
4725       case GNUNET_MESSAGE_TYPE_MESH_MULTICAST:
4726       case GNUNET_MESSAGE_TYPE_MESH_TO_ORIGIN:
4727       case GNUNET_MESSAGE_TYPE_MESH_ACK:
4728       case GNUNET_MESSAGE_TYPE_MESH_PATH_KEEPALIVE:
4729         GNUNET_log (GNUNET_ERROR_TYPE_DEBUG,
4730                     "   prebuilt message\n");
4731         GNUNET_log (GNUNET_ERROR_TYPE_DEBUG,
4732                     "   type %s\n",
4733                     GNUNET_MESH_DEBUG_M2S(queue->type));
4734         dd = queue->cls;
4735         data_descriptor_decrement_rc (dd->mesh_data);
4736         break;
4737       case GNUNET_MESSAGE_TYPE_MESH_PATH_CREATE:
4738         GNUNET_log (GNUNET_ERROR_TYPE_DEBUG, "   type create path\n");
4739         path_info = queue->cls;
4740         path_destroy (path_info->path);
4741         break;
4742       default:
4743         GNUNET_break (0);
4744         GNUNET_log (GNUNET_ERROR_TYPE_ERROR,
4745                     "   type %s unknown!\n",
4746                     GNUNET_MESH_DEBUG_M2S(queue->type));
4747     }
4748     GNUNET_free_non_null (queue->cls);
4749   }
4750   GNUNET_CONTAINER_DLL_remove (queue->peer->queue_head,
4751                                queue->peer->queue_tail,
4752                                queue);
4753
4754   /* Delete from child_fc in the appropiate tunnel */
4755   max = queue->tunnel->fwd_queue_max;
4756   GNUNET_PEER_resolve (queue->peer->id, &id);
4757   cinfo = tunnel_get_neighbor_fc (queue->tunnel, &id);
4758   if (NULL != cinfo)
4759   {
4760     for (i = 0; i < cinfo->send_buffer_n; i++)
4761     {
4762       unsigned int i2;
4763       i2 = (cinfo->send_buffer_start + i) % max;
4764       if (cinfo->send_buffer[i2] == queue)
4765       {
4766         /* Found corresponding entry in the send_buffer. Move all others back. */
4767         unsigned int j;
4768         unsigned int j2;
4769         unsigned int j3;
4770
4771         for (j = i, j2 = 0, j3 = 0; j < cinfo->send_buffer_n - 1; j++)
4772         {
4773           j2 = (cinfo->send_buffer_start + j) % max;
4774           j3 = (cinfo->send_buffer_start + j + 1) % max;
4775           cinfo->send_buffer[j2] = cinfo->send_buffer[j3];
4776         }
4777
4778         cinfo->send_buffer[j3] = NULL;
4779         cinfo->send_buffer_n--;
4780       }
4781     }
4782   }
4783
4784   GNUNET_free (queue);
4785 }
4786
4787
4788 /**
4789  * @brief Get the next transmittable message from the queue.
4790  *
4791  * This will be the head, except in the case of being a data packet
4792  * not allowed by the destination peer.
4793  *
4794  * @param peer Destination peer.
4795  *
4796  * @return The next viable MeshPeerQueue element to send to that peer.
4797  *         NULL when there are no transmittable messages.
4798  */
4799 struct MeshPeerQueue *
4800 queue_get_next (const struct MeshPeerInfo *peer)
4801 {
4802   struct MeshPeerQueue *q;
4803   struct MeshTunnel *t;
4804   struct MeshTransmissionDescriptor *info;
4805   struct MeshTunnelChildInfo *cinfo;
4806   struct GNUNET_MESH_Unicast *ucast;
4807   struct GNUNET_MESH_ToOrigin *to_orig;
4808   struct GNUNET_MESH_Multicast *mcast;
4809   struct GNUNET_PeerIdentity id;
4810   uint32_t pid;
4811   uint32_t ack;
4812
4813   GNUNET_log (GNUNET_ERROR_TYPE_DEBUG, "*********   selecting message\n");
4814   for (q = peer->queue_head; NULL != q; q = q->next)
4815   {
4816     t = q->tunnel;
4817     info = q->cls;
4818     GNUNET_log (GNUNET_ERROR_TYPE_DEBUG,
4819                 "*********     %s\n",
4820                 GNUNET_MESH_DEBUG_M2S(q->type));
4821     switch (q->type)
4822     {
4823       case GNUNET_MESSAGE_TYPE_MESH_UNICAST:
4824         ucast = (struct GNUNET_MESH_Unicast *) info->mesh_data->data;
4825         pid = ntohl (ucast->pid);
4826         GNUNET_PEER_resolve (info->peer->id, &id);
4827         cinfo = tunnel_get_neighbor_fc(t, &id);
4828         ack = cinfo->fwd_ack;
4829         break;
4830       case GNUNET_MESSAGE_TYPE_MESH_TO_ORIGIN:
4831         to_orig = (struct GNUNET_MESH_ToOrigin *) info->mesh_data->data;
4832         pid = ntohl (to_orig->pid);
4833         ack = t->bck_ack;
4834         break;
4835       case GNUNET_MESSAGE_TYPE_MESH_MULTICAST:
4836         mcast = (struct GNUNET_MESH_Multicast *) info->mesh_data->data;
4837         if (GNUNET_MESSAGE_TYPE_MESH_MULTICAST != ntohs(mcast->header.type)) 
4838         {
4839           // Not a multicast payload: multicast control traffic (destroy, etc)
4840           return q;
4841         }
4842         pid = ntohl (mcast->pid);
4843         GNUNET_PEER_resolve (info->peer->id, &id);
4844         cinfo = tunnel_get_neighbor_fc(t, &id);
4845         ack = cinfo->fwd_ack;
4846         break;
4847       default:
4848         GNUNET_log (GNUNET_ERROR_TYPE_DEBUG,
4849                     "*********   OK!\n");
4850         return q;
4851     }
4852         GNUNET_log (GNUNET_ERROR_TYPE_DEBUG,
4853                     "*********     ACK: %u, PID: %u\n",
4854                     ack, pid);
4855     if (GNUNET_NO == GMC_is_pid_bigger(pid, ack))
4856     {
4857       GNUNET_log (GNUNET_ERROR_TYPE_DEBUG,
4858                   "*********   OK!\n");
4859       return q;
4860     }
4861     else
4862     {
4863       GNUNET_log (GNUNET_ERROR_TYPE_DEBUG,
4864                   "*********     NEXT!\n");
4865     }
4866   }
4867   GNUNET_log (GNUNET_ERROR_TYPE_DEBUG,
4868                 "*********   nothing found\n");
4869   return NULL;
4870 }
4871
4872
4873 /**
4874   * Core callback to write a queued packet to core buffer
4875   *
4876   * @param cls Closure (peer info).
4877   * @param size Number of bytes available in buf.
4878   * @param buf Where the to write the message.
4879   *
4880   * @return number of bytes written to buf
4881   */
4882 static size_t
4883 queue_send (void *cls, size_t size, void *buf)
4884 {
4885     struct MeshPeerInfo *peer = cls;
4886     struct GNUNET_MessageHeader *msg;
4887     struct MeshPeerQueue *queue;
4888     struct MeshTunnel *t;
4889     struct MeshTunnelChildInfo *cinfo;
4890     struct GNUNET_PeerIdentity dst_id;
4891     size_t data_size;
4892
4893     peer->core_transmit = NULL;
4894     cinfo = NULL;
4895
4896     GNUNET_log (GNUNET_ERROR_TYPE_DEBUG, "********* Queue send\n");
4897     queue = queue_get_next (peer);
4898
4899     /* Queue has no internal mesh traffic nor sendable payload */
4900     if (NULL == queue)
4901     {
4902       GNUNET_log (GNUNET_ERROR_TYPE_DEBUG, "*********   not ready, return\n");
4903       if (NULL == peer->queue_head)
4904         GNUNET_break (0); // Should've been canceled
4905       return 0;
4906     }
4907     GNUNET_log (GNUNET_ERROR_TYPE_DEBUG, "*********   not empty\n");
4908
4909     GNUNET_PEER_resolve (peer->id, &dst_id);
4910     GNUNET_log (GNUNET_ERROR_TYPE_DEBUG,
4911                 "*********   towards %s\n",
4912                 GNUNET_i2s(&dst_id));
4913     /* Check if buffer size is enough for the message */
4914     if (queue->size > size)
4915     {
4916         GNUNET_log (GNUNET_ERROR_TYPE_DEBUG,
4917                     "*********   not enough room, reissue\n");
4918         peer->core_transmit =
4919             GNUNET_CORE_notify_transmit_ready (core_handle,
4920                                                0,
4921                                                0,
4922                                                GNUNET_TIME_UNIT_FOREVER_REL,
4923                                                &dst_id,
4924                                                queue->size,
4925                                                &queue_send,
4926                                                peer);
4927         return 0;
4928     }
4929     GNUNET_log (GNUNET_ERROR_TYPE_DEBUG, "*********   size ok\n");
4930
4931     t = queue->tunnel;
4932     if (GNUNET_MESSAGE_TYPE_MESH_UNICAST == queue->type)
4933     {
4934       t->fwd_queue_n--;
4935       GNUNET_log (GNUNET_ERROR_TYPE_DEBUG,
4936                   "*********   unicast: t->q (%u/%u)\n",
4937                   t->fwd_queue_n, t->fwd_queue_max);
4938     }
4939     else if (GNUNET_MESSAGE_TYPE_MESH_TO_ORIGIN == queue->type)
4940     {
4941       t->bck_queue_n--;
4942       GNUNET_log (GNUNET_ERROR_TYPE_DEBUG, "*********   to origin\n");
4943     }
4944
4945     /* Fill buf */
4946     switch (queue->type)
4947     {
4948       case 0:
4949       case GNUNET_MESSAGE_TYPE_MESH_ACK:
4950       case GNUNET_MESSAGE_TYPE_MESH_PATH_BROKEN:
4951       case GNUNET_MESSAGE_TYPE_MESH_PATH_DESTROY:
4952       case GNUNET_MESSAGE_TYPE_MESH_TUNNEL_DESTROY:
4953         GNUNET_log (GNUNET_ERROR_TYPE_DEBUG,
4954                     "*********   raw: %s\n",
4955                     GNUNET_MESH_DEBUG_M2S (queue->type));
4956         /* Fall through */
4957       case GNUNET_MESSAGE_TYPE_MESH_UNICAST:
4958       case GNUNET_MESSAGE_TYPE_MESH_TO_ORIGIN:
4959         data_size = send_core_data_raw (queue->cls, size, buf);
4960         msg = (struct GNUNET_MessageHeader *) buf;
4961         switch (ntohs (msg->type)) // Type of preconstructed message
4962         {
4963           case GNUNET_MESSAGE_TYPE_MESH_UNICAST:
4964             tunnel_send_fwd_ack (t, GNUNET_MESSAGE_TYPE_MESH_UNICAST);
4965             break;
4966           case GNUNET_MESSAGE_TYPE_MESH_TO_ORIGIN:
4967             tunnel_send_bck_ack (t, GNUNET_MESSAGE_TYPE_MESH_TO_ORIGIN);
4968             break;
4969           default:
4970               break;
4971         }
4972         break;
4973       case GNUNET_MESSAGE_TYPE_MESH_MULTICAST:
4974         GNUNET_log (GNUNET_ERROR_TYPE_DEBUG, "*********   multicast\n");
4975         {
4976           struct MeshTransmissionDescriptor *info = queue->cls;
4977
4978           if ((1 == info->mesh_data->reference_counter
4979               && GNUNET_YES == t->speed_min)
4980               ||
4981               (info->mesh_data->total_out == info->mesh_data->reference_counter
4982               && GNUNET_NO == t->speed_min))
4983           {
4984             GNUNET_log (GNUNET_ERROR_TYPE_DEBUG,
4985                         "*********   considered sent\n");
4986             t->fwd_queue_n--;
4987           }
4988         }
4989         data_size = send_core_data_multicast(queue->cls, size, buf);
4990         tunnel_send_fwd_ack (t, GNUNET_MESSAGE_TYPE_MESH_MULTICAST);
4991         break;
4992       case GNUNET_MESSAGE_TYPE_MESH_PATH_CREATE:
4993         GNUNET_log (GNUNET_ERROR_TYPE_DEBUG, "*********   path create\n");
4994         data_size = send_core_path_create (queue->cls, size, buf);
4995         break;
4996       case GNUNET_MESSAGE_TYPE_MESH_PATH_ACK:
4997         GNUNET_log (GNUNET_ERROR_TYPE_DEBUG, "*********   path ack\n");
4998         data_size = send_core_path_ack (queue->cls, size, buf);
4999         break;
5000       case GNUNET_MESSAGE_TYPE_MESH_PATH_KEEPALIVE:
5001         GNUNET_log (GNUNET_ERROR_TYPE_DEBUG, "*********   path keepalive\n");
5002         data_size = send_core_data_multicast (queue->cls, size, buf);
5003         break;
5004       default:
5005         GNUNET_break (0);
5006         GNUNET_log (GNUNET_ERROR_TYPE_WARNING,
5007                     "*********   type unknown: %u\n",
5008                     queue->type);
5009         data_size = 0;
5010     }
5011     switch (queue->type)
5012     {
5013       case GNUNET_MESSAGE_TYPE_MESH_UNICAST:
5014       case GNUNET_MESSAGE_TYPE_MESH_TO_ORIGIN:
5015       case GNUNET_MESSAGE_TYPE_MESH_MULTICAST:
5016         cinfo = tunnel_get_neighbor_fc (t, &dst_id);
5017         if (cinfo->send_buffer[cinfo->send_buffer_start] != queue)
5018         {
5019           GNUNET_break (0);
5020           GNUNET_log (GNUNET_ERROR_TYPE_ERROR,
5021                       "at pos %u (%p) != %p\n",
5022                       cinfo->send_buffer_start,
5023                       cinfo->send_buffer[cinfo->send_buffer_start],
5024                       queue);
5025         }
5026         if (cinfo->send_buffer_n > 0)
5027         {
5028           cinfo->send_buffer[cinfo->send_buffer_start] = NULL;
5029           cinfo->send_buffer_n--;
5030           cinfo->send_buffer_start++;
5031           cinfo->send_buffer_start %= t->fwd_queue_max;
5032         }
5033         else
5034         {
5035           GNUNET_break (0);
5036         }
5037         break;
5038       default:
5039         break;
5040     }
5041
5042     /* Free queue, but cls was freed by send_core_* */
5043     queue_destroy (queue, GNUNET_NO);
5044
5045     if (GNUNET_YES == t->destroy)
5046     {
5047       // FIXME fc tunnel destroy all pending traffic? wait for it?
5048       GNUNET_log (GNUNET_ERROR_TYPE_DEBUG, "*********  destroying tunnel!\n");
5049       tunnel_destroy (t);
5050     }
5051
5052     /* If more data in queue, send next */
5053     queue = queue_get_next(peer);
5054     if (NULL != queue)
5055     {
5056         struct GNUNET_PeerIdentity id;
5057
5058         GNUNET_log (GNUNET_ERROR_TYPE_DEBUG, "*********   more data!\n");
5059         GNUNET_PEER_resolve (peer->id, &id);
5060         peer->core_transmit =
5061             GNUNET_CORE_notify_transmit_ready(core_handle,
5062                                               0,
5063                                               0,
5064                                               GNUNET_TIME_UNIT_FOREVER_REL,
5065                                               &id,
5066                                               queue->size,
5067                                               &queue_send,
5068                                               peer);
5069     }
5070     else
5071     {
5072       if (NULL != peer->queue_head)
5073       {
5074         GNUNET_log (GNUNET_ERROR_TYPE_INFO,
5075                     "*********   %s stalled\n",
5076                     GNUNET_i2s(&my_full_id));
5077         if (NULL == cinfo)
5078           cinfo = tunnel_get_neighbor_fc (t, &dst_id);
5079         cinfo->fc_poll = GNUNET_SCHEDULER_add_delayed(GNUNET_TIME_UNIT_SECONDS,
5080                                                      &tunnel_poll, cinfo);
5081       }
5082     }
5083     GNUNET_log (GNUNET_ERROR_TYPE_DEBUG, "*********   return %d\n", data_size);
5084     return data_size;
5085 }
5086
5087
5088 /**
5089  * @brief Queue and pass message to core when possible.
5090  * 
5091  * If type is payload (UNICAST, TO_ORIGIN, MULTICAST) checks for queue status
5092  * and accounts for it. In case the queue is full, the message is dropped and
5093  * a break issued.
5094  * 
5095  * Otherwise, message is treated as internal and allowed to go regardless of 
5096  * queue status.
5097  *
5098  * @param cls Closure (@c type dependant). It will be used by queue_send to
5099  *            build the message to be sent if not already prebuilt.
5100  * @param type Type of the message, 0 for a raw message.
5101  * @param size Size of the message.
5102  * @param dst Neighbor to send message to.
5103  * @param t Tunnel this message belongs to.
5104  */
5105 static void
5106 queue_add (void *cls, uint16_t type, size_t size,
5107            struct MeshPeerInfo *dst, struct MeshTunnel *t)
5108 {
5109   struct MeshPeerQueue *queue;
5110   struct MeshTunnelChildInfo *cinfo;
5111   struct GNUNET_PeerIdentity id;
5112   unsigned int *max;
5113   unsigned int *n;
5114   unsigned int i;
5115
5116   n = NULL;
5117   if (GNUNET_MESSAGE_TYPE_MESH_UNICAST == type ||
5118       GNUNET_MESSAGE_TYPE_MESH_MULTICAST == type)
5119   {
5120     n = &t->fwd_queue_n;
5121     max = &t->fwd_queue_max;
5122   }
5123   else if (GNUNET_MESSAGE_TYPE_MESH_TO_ORIGIN == type)
5124   {
5125     n = &t->bck_queue_n;
5126     max = &t->bck_queue_max;
5127   }
5128   if (NULL != n)
5129   {
5130     if (*n >= *max)
5131     {
5132       struct MeshTransmissionDescriptor *td = cls;
5133       struct GNUNET_MESH_ToOrigin *to;
5134
5135       to = td->mesh_data->data;
5136       GNUNET_break(0);
5137       GNUNET_log (GNUNET_ERROR_TYPE_WARNING,
5138                   "bck pid %u, bck ack %u, msg pid %u\n",
5139                   t->bck_pid, t->bck_ack, ntohl(to->pid));
5140       GNUNET_STATISTICS_update(stats, "# messages dropped (buffer full)",
5141                                1, GNUNET_NO);
5142       return;                       // Drop message
5143     }
5144     (*n)++;
5145   }
5146   queue = GNUNET_malloc (sizeof (struct MeshPeerQueue));
5147   queue->cls = cls;
5148   queue->type = type;
5149   queue->size = size;
5150   queue->peer = dst;
5151   queue->tunnel = t;
5152   GNUNET_CONTAINER_DLL_insert_tail (dst->queue_head, dst->queue_tail, queue);
5153   GNUNET_PEER_resolve (dst->id, &id);
5154   if (NULL == dst->core_transmit)
5155   {
5156       dst->core_transmit =
5157           GNUNET_CORE_notify_transmit_ready (core_handle,
5158                                              0,
5159                                              0,
5160                                              GNUNET_TIME_UNIT_FOREVER_REL,
5161                                              &id,
5162                                              size,
5163                                              &queue_send,
5164                                              dst);
5165   }
5166   if (NULL == n) // Is this internal mesh traffic?
5167     return;
5168
5169   // It's payload, keep track of buffer per peer.
5170   cinfo = tunnel_get_neighbor_fc(t, &id);
5171   i = (cinfo->send_buffer_start + cinfo->send_buffer_n) % t->fwd_queue_max;
5172   if (NULL != cinfo->send_buffer[i])
5173   {
5174     GNUNET_break (cinfo->send_buffer_n == t->fwd_queue_max); // aka i == start
5175     queue_destroy (cinfo->send_buffer[cinfo->send_buffer_start], GNUNET_YES);
5176     cinfo->send_buffer_start++;
5177     cinfo->send_buffer_start %= t->fwd_queue_max;
5178   }
5179   else
5180   {
5181     cinfo->send_buffer_n++;
5182   }
5183   cinfo->send_buffer[i] = queue;
5184   if (cinfo->send_buffer_n > t->fwd_queue_max)
5185   {
5186     GNUNET_break (0);
5187     cinfo->send_buffer_n = t->fwd_queue_max;
5188   }
5189 }
5190
5191
5192 /******************************************************************************/
5193 /********************      MESH NETWORK HANDLERS     **************************/
5194 /******************************************************************************/
5195
5196
5197 /**
5198  * Core handler for path creation
5199  *
5200  * @param cls closure
5201  * @param message message
5202  * @param peer peer identity this notification is about
5203  * @param atsi performance data
5204  * @param atsi_count number of records in 'atsi'
5205  *
5206  * @return GNUNET_OK to keep the connection open,
5207  *         GNUNET_SYSERR to close it (signal serious error)
5208  */
5209 static int
5210 handle_mesh_path_create (void *cls, const struct GNUNET_PeerIdentity *peer,
5211                          const struct GNUNET_MessageHeader *message,
5212                          const struct GNUNET_ATS_Information *atsi,
5213                          unsigned int atsi_count)
5214 {
5215   unsigned int own_pos;
5216   uint16_t size;
5217   uint16_t i;
5218   MESH_TunnelNumber tid;
5219   struct GNUNET_MESH_ManipulatePath *msg;
5220   struct GNUNET_PeerIdentity *pi;
5221   struct GNUNET_HashCode hash;
5222   struct MeshPeerPath *path;
5223   struct MeshPeerInfo *dest_peer_info;
5224   struct MeshPeerInfo *orig_peer_info;
5225   struct MeshTunnel *t;
5226
5227   GNUNET_log (GNUNET_ERROR_TYPE_DEBUG,
5228               "Received a path create msg [%s]\n",
5229               GNUNET_i2s (&my_full_id));
5230   size = ntohs (message->size);
5231   if (size < sizeof (struct GNUNET_MESH_ManipulatePath))
5232   {
5233     GNUNET_break_op (0);
5234     return GNUNET_OK;
5235   }
5236
5237   size -= sizeof (struct GNUNET_MESH_ManipulatePath);
5238   if (size % sizeof (struct GNUNET_PeerIdentity))
5239   {
5240     GNUNET_break_op (0);
5241     return GNUNET_OK;
5242   }
5243   size /= sizeof (struct GNUNET_PeerIdentity);
5244   if (size < 2)
5245   {
5246     GNUNET_break_op (0);
5247     return GNUNET_OK;
5248   }
5249   GNUNET_log (GNUNET_ERROR_TYPE_DEBUG, "    path has %u hops.\n", size);
5250   msg = (struct GNUNET_MESH_ManipulatePath *) message;
5251
5252   tid = ntohl (msg->tid);
5253   pi = (struct GNUNET_PeerIdentity *) &msg[1];
5254   GNUNET_log (GNUNET_ERROR_TYPE_DEBUG,
5255               "    path is for tunnel %s [%X].\n", GNUNET_i2s (pi), tid);
5256   t = tunnel_get (pi, tid);
5257   if (NULL == t) // FIXME only for INCOMING tunnels?
5258   {
5259     uint32_t opt;
5260
5261     GNUNET_log (GNUNET_ERROR_TYPE_DEBUG, "  Creating tunnel\n");
5262     t = tunnel_new (GNUNET_PEER_intern (pi), tid, NULL, 0);
5263     if (NULL == t)
5264     {
5265       // FIXME notify failure
5266       return GNUNET_OK;
5267     }
5268     opt = ntohl (msg->opt);
5269     t->speed_min = (0 != (opt & MESH_TUNNEL_OPT_SPEED_MIN)) ?
5270                    GNUNET_YES : GNUNET_NO;
5271     if (0 != (opt & MESH_TUNNEL_OPT_NOBUFFER))
5272     {
5273       t->nobuffer = GNUNET_YES;
5274       t->last_fwd_ack = t->fwd_pid + 1;
5275     }
5276     GNUNET_log (GNUNET_ERROR_TYPE_DEBUG,
5277                 "  speed_min: %d, nobuffer:%d\n",
5278                 t->speed_min, t->nobuffer);
5279
5280     if (GNUNET_YES == t->nobuffer)
5281     {
5282       t->bck_queue_max = 1;
5283       t->fwd_queue_max = 1;
5284     }
5285
5286     // FIXME only assign a local tid if a local client is interested (on demand)
5287     while (NULL != tunnel_get_incoming (next_local_tid))
5288       next_local_tid = (next_local_tid + 1) | GNUNET_MESH_LOCAL_TUNNEL_ID_SERV;
5289     t->local_tid_dest = next_local_tid++;
5290     next_local_tid = next_local_tid | GNUNET_MESH_LOCAL_TUNNEL_ID_SERV;
5291     // FIXME end
5292
5293     tunnel_reset_timeout (t);
5294     GNUNET_CRYPTO_hash (&t->local_tid_dest, sizeof (MESH_TunnelNumber), &hash);
5295     if (GNUNET_OK !=
5296         GNUNET_CONTAINER_multihashmap_put (incoming_tunnels, &hash, t,
5297                                            GNUNET_CONTAINER_MULTIHASHMAPOPTION_UNIQUE_FAST))
5298     {
5299       tunnel_destroy (t);
5300       GNUNET_break (0);
5301       return GNUNET_OK;
5302     }
5303   }
5304   dest_peer_info =
5305       GNUNET_CONTAINER_multihashmap_get (peers, &pi[size - 1].hashPubKey);
5306   if (NULL == dest_peer_info)
5307   {
5308     GNUNET_log (GNUNET_ERROR_TYPE_DEBUG,
5309                 "  Creating PeerInfo for destination.\n");
5310     dest_peer_info = GNUNET_malloc (sizeof (struct MeshPeerInfo));
5311     dest_peer_info->id = GNUNET_PEER_intern (&pi[size - 1]);
5312     GNUNET_CONTAINER_multihashmap_put (peers, &pi[size - 1].hashPubKey,
5313                                        dest_peer_info,
5314                                        GNUNET_CONTAINER_MULTIHASHMAPOPTION_UNIQUE_ONLY);
5315   }
5316   orig_peer_info = GNUNET_CONTAINER_multihashmap_get (peers, &pi->hashPubKey);
5317   if (NULL == orig_peer_info)
5318   {
5319     GNUNET_log (GNUNET_ERROR_TYPE_DEBUG,
5320                 "  Creating PeerInfo for origin.\n");
5321     orig_peer_info = GNUNET_malloc (sizeof (struct MeshPeerInfo));
5322     orig_peer_info->id = GNUNET_PEER_intern (pi);
5323     GNUNET_CONTAINER_multihashmap_put (peers, &pi->hashPubKey, orig_peer_info,
5324                                        GNUNET_CONTAINER_MULTIHASHMAPOPTION_UNIQUE_ONLY);
5325   }
5326   GNUNET_log (GNUNET_ERROR_TYPE_DEBUG, "  Creating path...\n");
5327   path = path_new (size);
5328   own_pos = 0;
5329   for (i = 0; i < size; i++)
5330   {
5331     GNUNET_log (GNUNET_ERROR_TYPE_DEBUG, "  ... adding %s\n",
5332                 GNUNET_i2s (&pi[i]));
5333     path->peers[i] = GNUNET_PEER_intern (&pi[i]);
5334     if (path->peers[i] == myid)
5335       own_pos = i;
5336   }
5337   GNUNET_log (GNUNET_ERROR_TYPE_DEBUG, "  Own position: %u\n", own_pos);
5338   if (own_pos == 0)
5339   {
5340     /* cannot be self, must be 'not found' */
5341     /* create path: self not found in path through self */
5342     GNUNET_break_op (0);
5343     path_destroy (path);
5344     tunnel_destroy (t);
5345     return GNUNET_OK;
5346   }
5347   path_add_to_peers (path, GNUNET_NO);
5348   tunnel_add_path (t, path, own_pos);
5349   if (own_pos == size - 1)
5350   {
5351     /* It is for us! Send ack. */
5352     GNUNET_log (GNUNET_ERROR_TYPE_DEBUG, "  It's for us!\n");
5353     peer_info_add_path_to_origin (orig_peer_info, path, GNUNET_NO);
5354     if (NULL == t->peers)
5355     {
5356       /* New tunnel! Notify clients on first payload message. */
5357       t->peers = GNUNET_CONTAINER_multihashmap_create (4, GNUNET_NO);
5358     }
5359     GNUNET_break (GNUNET_SYSERR !=
5360                   GNUNET_CONTAINER_multihashmap_put (t->peers,
5361                                                      &my_full_id.hashPubKey,
5362                                                      peer_info_get
5363                                                      (&my_full_id),
5364                                                      GNUNET_CONTAINER_MULTIHASHMAPOPTION_REPLACE));
5365     send_path_ack (t);
5366   }
5367   else
5368   {
5369     struct MeshPeerPath *path2;
5370
5371     /* It's for somebody else! Retransmit. */
5372     path2 = path_duplicate (path);
5373     GNUNET_log (GNUNET_ERROR_TYPE_DEBUG, "  Retransmitting.\n");
5374     peer_info_add_path (dest_peer_info, path2, GNUNET_NO);
5375     path2 = path_duplicate (path);
5376     peer_info_add_path_to_origin (orig_peer_info, path2, GNUNET_NO);
5377     send_create_path (dest_peer_info, path, t);
5378   }
5379   return GNUNET_OK;
5380 }
5381
5382
5383 /**
5384  * Core handler for path destruction
5385  *
5386  * @param cls closure
5387  * @param message message
5388  * @param peer peer identity this notification is about
5389  * @param atsi performance data
5390  * @param atsi_count number of records in 'atsi'
5391  *
5392  * @return GNUNET_OK to keep the connection open,
5393  *         GNUNET_SYSERR to close it (signal serious error)
5394  */
5395 static int
5396 handle_mesh_path_destroy (void *cls, const struct GNUNET_PeerIdentity *peer,
5397                           const struct GNUNET_MessageHeader *message,
5398                           const struct GNUNET_ATS_Information *atsi,
5399                           unsigned int atsi_count)
5400 {
5401   struct GNUNET_MESH_ManipulatePath *msg;
5402   struct GNUNET_PeerIdentity *pi;
5403   struct MeshPeerPath *path;
5404   struct MeshTunnel *t;
5405   unsigned int own_pos;
5406   unsigned int i;
5407   size_t size;
5408
5409   GNUNET_log (GNUNET_ERROR_TYPE_DEBUG,
5410               "Received a PATH DESTROY msg from %s\n", GNUNET_i2s (peer));
5411   size = ntohs (message->size);
5412   if (size < sizeof (struct GNUNET_MESH_ManipulatePath))
5413   {
5414     GNUNET_break_op (0);
5415     return GNUNET_OK;
5416   }
5417
5418   size -= sizeof (struct GNUNET_MESH_ManipulatePath);
5419   if (size % sizeof (struct GNUNET_PeerIdentity))
5420   {
5421     GNUNET_break_op (0);
5422     return GNUNET_OK;
5423   }
5424   size /= sizeof (struct GNUNET_PeerIdentity);
5425   if (size < 2)
5426   {
5427     GNUNET_break_op (0);
5428     return GNUNET_OK;
5429   }
5430   GNUNET_log (GNUNET_ERROR_TYPE_DEBUG, "    path has %u hops.\n", size);
5431
5432   msg = (struct GNUNET_MESH_ManipulatePath *) message;
5433   pi = (struct GNUNET_PeerIdentity *) &msg[1];
5434   GNUNET_log (GNUNET_ERROR_TYPE_DEBUG,
5435               "    path is for tunnel %s [%X].\n", GNUNET_i2s (pi),
5436               msg->tid);
5437   t = tunnel_get (pi, ntohl (msg->tid));
5438   if (NULL == t)
5439   {
5440     /* TODO notify back: we don't know this tunnel */
5441     GNUNET_break_op (0);
5442     return GNUNET_OK;
5443   }
5444   GNUNET_log (GNUNET_ERROR_TYPE_DEBUG, "  Creating path...\n");
5445   path = path_new (size);
5446   own_pos = 0;
5447   for (i = 0; i < size; i++)
5448   {
5449     GNUNET_log (GNUNET_ERROR_TYPE_DEBUG, "  ... adding %s\n",
5450                 GNUNET_i2s (&pi[i]));
5451     path->peers[i] = GNUNET_PEER_intern (&pi[i]);
5452     if (path->peers[i] == myid)
5453       own_pos = i;
5454   }
5455   GNUNET_log (GNUNET_ERROR_TYPE_DEBUG, "  Own position: %u\n", own_pos);
5456   if (own_pos < path->length - 1)
5457     send_prebuilt_message (message, &pi[own_pos + 1], t);
5458   else
5459     send_client_tunnel_disconnect(t, NULL);
5460
5461   tunnel_delete_peer (t, path->peers[path->length - 1]);
5462   path_destroy (path);
5463   return GNUNET_OK;
5464 }
5465
5466
5467 /**
5468  * Core handler for notifications of broken paths
5469  *
5470  * @param cls closure
5471  * @param message message
5472  * @param peer peer identity this notification is about
5473  * @param atsi performance data
5474  * @param atsi_count number of records in 'atsi'
5475  *
5476  * @return GNUNET_OK to keep the connection open,
5477  *         GNUNET_SYSERR to close it (signal serious error)
5478  */
5479 static int
5480 handle_mesh_path_broken (void *cls, const struct GNUNET_PeerIdentity *peer,
5481                          const struct GNUNET_MessageHeader *message,
5482                          const struct GNUNET_ATS_Information *atsi,
5483                          unsigned int atsi_count)
5484 {
5485   struct GNUNET_MESH_PathBroken *msg;
5486   struct MeshTunnel *t;
5487
5488   GNUNET_log (GNUNET_ERROR_TYPE_DEBUG,
5489               "Received a PATH BROKEN msg from %s\n", GNUNET_i2s (peer));
5490   msg = (struct GNUNET_MESH_PathBroken *) message;
5491   GNUNET_log (GNUNET_ERROR_TYPE_DEBUG, "  regarding %s\n",
5492               GNUNET_i2s (&msg->peer1));
5493   GNUNET_log (GNUNET_ERROR_TYPE_DEBUG, "  regarding %s\n",
5494               GNUNET_i2s (&msg->peer2));
5495   t = tunnel_get (&msg->oid, ntohl (msg->tid));
5496   if (NULL == t)
5497   {
5498     GNUNET_break_op (0);
5499     return GNUNET_OK;
5500   }
5501   tunnel_notify_connection_broken (t, GNUNET_PEER_search (&msg->peer1),
5502                                    GNUNET_PEER_search (&msg->peer2));
5503   return GNUNET_OK;
5504
5505 }
5506
5507
5508 /**
5509  * Core handler for tunnel destruction
5510  *
5511  * @param cls closure
5512  * @param message message
5513  * @param peer peer identity this notification is about
5514  * @param atsi performance data
5515  * @param atsi_count number of records in 'atsi'
5516  *
5517  * @return GNUNET_OK to keep the connection open,
5518  *         GNUNET_SYSERR to close it (signal serious error)
5519  */
5520 static int
5521 handle_mesh_tunnel_destroy (void *cls, const struct GNUNET_PeerIdentity *peer,
5522                             const struct GNUNET_MessageHeader *message,
5523                             const struct GNUNET_ATS_Information *atsi,
5524                             unsigned int atsi_count)
5525 {
5526   struct GNUNET_MESH_TunnelDestroy *msg;
5527   struct MeshTunnel *t;
5528
5529   GNUNET_log (GNUNET_ERROR_TYPE_DEBUG,
5530               "Got a TUNNEL DESTROY packet from %s\n", GNUNET_i2s (peer));
5531   msg = (struct GNUNET_MESH_TunnelDestroy *) message;
5532   GNUNET_log (GNUNET_ERROR_TYPE_DEBUG, "  for tunnel %s [%u]\n",
5533               GNUNET_i2s (&msg->oid), ntohl (msg->tid));
5534   t = tunnel_get (&msg->oid, ntohl (msg->tid));
5535   if (NULL == t)
5536   {
5537     /* Probably already got the message from another path,
5538      * destroyed the tunnel and retransmitted to children.
5539      * Safe to ignore.
5540      */
5541     GNUNET_STATISTICS_update (stats, "# control on unknown tunnel", 1, GNUNET_NO);
5542     return GNUNET_OK;
5543   }
5544   if (t->id.oid == myid)
5545   {
5546     GNUNET_break_op (0);
5547     return GNUNET_OK;
5548   }
5549   if (t->local_tid_dest >= GNUNET_MESH_LOCAL_TUNNEL_ID_SERV)
5550   {
5551     /* Tunnel was incoming, notify clients */
5552     GNUNET_log (GNUNET_ERROR_TYPE_DEBUG, "INCOMING TUNNEL %X %X\n",
5553                 t->local_tid, t->local_tid_dest);
5554     send_clients_tunnel_destroy (t);
5555   }
5556   tunnel_send_destroy (t);
5557   t->destroy = GNUNET_YES;
5558   // TODO: add timeout to destroy the tunnel anyway
5559   return GNUNET_OK;
5560 }
5561
5562
5563 /**
5564  * Core handler for mesh network traffic going from the origin to a peer
5565  *
5566  * @param cls closure
5567  * @param peer peer identity this notification is about
5568  * @param message message
5569  * @param atsi performance data
5570  * @param atsi_count number of records in 'atsi'
5571  * @return GNUNET_OK to keep the connection open,
5572  *         GNUNET_SYSERR to close it (signal serious error)
5573  */
5574 static int
5575 handle_mesh_data_unicast (void *cls, const struct GNUNET_PeerIdentity *peer,
5576                           const struct GNUNET_MessageHeader *message,
5577                           const struct GNUNET_ATS_Information *atsi,
5578                           unsigned int atsi_count)
5579 {
5580   struct GNUNET_MESH_Unicast *msg;
5581   struct GNUNET_PeerIdentity *neighbor;
5582   struct MeshTunnelChildInfo *cinfo;
5583   struct MeshTunnel *t;
5584   GNUNET_PEER_Id dest_id;
5585   uint32_t pid;
5586   uint32_t ttl;
5587   size_t size;
5588
5589   GNUNET_log (GNUNET_ERROR_TYPE_DEBUG, "got a unicast packet from %s\n",
5590               GNUNET_i2s (peer));
5591   /* Check size */
5592   size = ntohs (message->size);
5593   if (size <
5594       sizeof (struct GNUNET_MESH_Unicast) +
5595       sizeof (struct GNUNET_MessageHeader))
5596   {
5597     GNUNET_break (0);
5598     return GNUNET_OK;
5599   }
5600   msg = (struct GNUNET_MESH_Unicast *) message;
5601   GNUNET_log (GNUNET_ERROR_TYPE_DEBUG, " of type %s\n",
5602               GNUNET_MESH_DEBUG_M2S (ntohs (msg[1].header.type)));
5603   /* Check tunnel */
5604   t = tunnel_get (&msg->oid, ntohl (msg->tid));
5605   if (NULL == t)
5606   {
5607     /* TODO notify back: we don't know this tunnel */
5608     GNUNET_STATISTICS_update (stats, "# data on unknown tunnel", 1, GNUNET_NO);
5609     GNUNET_break_op (0);
5610     return GNUNET_OK;
5611   }
5612   pid = ntohl (msg->pid);
5613   if (t->fwd_pid == pid)
5614   {
5615     GNUNET_STATISTICS_update (stats, "# duplicate PID drops", 1, GNUNET_NO);
5616     GNUNET_log (GNUNET_ERROR_TYPE_WARNING,
5617                 " Already seen pid %u, DROPPING!\n", pid);
5618     return GNUNET_OK;
5619   }
5620   else
5621   {
5622     GNUNET_log (GNUNET_ERROR_TYPE_DEBUG,
5623                 " pid %u not seen yet, forwarding\n", pid);
5624   }
5625
5626   t->skip += (pid - t->fwd_pid) - 1;
5627   t->fwd_pid = pid;
5628
5629   if (GMC_is_pid_bigger (pid, t->last_fwd_ack))
5630   {
5631     GNUNET_STATISTICS_update (stats, "# unsolicited unicast", 1, GNUNET_NO);
5632     GNUNET_break_op (0);
5633     GNUNET_log (GNUNET_ERROR_TYPE_DEBUG,
5634                 "Received PID %u, ACK %u\n",
5635                 pid, t->last_fwd_ack);
5636     return GNUNET_OK;
5637   }
5638
5639   tunnel_reset_timeout (t);
5640   dest_id = GNUNET_PEER_search (&msg->destination);
5641   if (dest_id == myid)
5642   {
5643     GNUNET_log (GNUNET_ERROR_TYPE_DEBUG,
5644                 "  it's for us! sending to clients...\n");
5645     GNUNET_STATISTICS_update (stats, "# unicast received", 1, GNUNET_NO);
5646     send_subscribed_clients (message, &msg[1].header, t);
5647     tunnel_send_fwd_ack (t, GNUNET_MESSAGE_TYPE_MESH_UNICAST);
5648     return GNUNET_OK;
5649   }
5650   ttl = ntohl (msg->ttl);
5651   GNUNET_log (GNUNET_ERROR_TYPE_DEBUG, "   ttl: %u\n", ttl);
5652   if (ttl == 0)
5653   {
5654     GNUNET_STATISTICS_update (stats, "# TTL drops", 1, GNUNET_NO);
5655     GNUNET_log (GNUNET_ERROR_TYPE_WARNING, " TTL is 0, DROPPING!\n");
5656     tunnel_send_fwd_ack (t, GNUNET_MESSAGE_TYPE_MESH_ACK);
5657     return GNUNET_OK;
5658   }
5659   GNUNET_log (GNUNET_ERROR_TYPE_DEBUG,
5660               "  not for us, retransmitting...\n");
5661
5662   neighbor = tree_get_first_hop (t->tree, dest_id);
5663   cinfo = tunnel_get_neighbor_fc (t, neighbor);
5664   cinfo->fwd_pid = pid;
5665   GNUNET_CONTAINER_multihashmap_iterate (t->children_fc,
5666                                          &tunnel_add_skip,
5667                                          &neighbor);
5668   if (GNUNET_YES == t->nobuffer &&
5669       GNUNET_YES == GMC_is_pid_bigger (pid, cinfo->fwd_ack))
5670   {
5671     GNUNET_STATISTICS_update (stats, "# unsolicited unicast", 1, GNUNET_NO);
5672     GNUNET_log (GNUNET_ERROR_TYPE_INFO, "  %u > %u\n", pid, cinfo->fwd_ack);
5673     GNUNET_break_op (0);
5674     return GNUNET_OK;
5675   }
5676   send_prebuilt_message (message, neighbor, t);
5677   GNUNET_STATISTICS_update (stats, "# unicast forwarded", 1, GNUNET_NO);
5678   return GNUNET_OK;
5679 }
5680
5681
5682 /**
5683  * Core handler for mesh network traffic going from the origin to all peers
5684  *
5685  * @param cls closure
5686  * @param message message
5687  * @param peer peer identity this notification is about
5688  * @param atsi performance data
5689  * @param atsi_count number of records in 'atsi'
5690  * @return GNUNET_OK to keep the connection open,
5691  *         GNUNET_SYSERR to close it (signal serious error)
5692  *
5693  * TODO: Check who we got this from, to validate route.
5694  */
5695 static int
5696 handle_mesh_data_multicast (void *cls, const struct GNUNET_PeerIdentity *peer,
5697                             const struct GNUNET_MessageHeader *message,
5698                             const struct GNUNET_ATS_Information *atsi,
5699                             unsigned int atsi_count)
5700 {
5701   struct GNUNET_MESH_Multicast *msg;
5702   struct MeshTunnel *t;
5703   size_t size;
5704   uint32_t pid;
5705
5706   GNUNET_log (GNUNET_ERROR_TYPE_DEBUG, "got a multicast packet from %s\n",
5707               GNUNET_i2s (peer));
5708   size = ntohs (message->size);
5709   if (sizeof (struct GNUNET_MESH_Multicast) +
5710       sizeof (struct GNUNET_MessageHeader) > size)
5711   {
5712     GNUNET_break_op (0);
5713     return GNUNET_OK;
5714   }
5715   msg = (struct GNUNET_MESH_Multicast *) message;
5716   t = tunnel_get (&msg->oid, ntohl (msg->tid));
5717
5718   if (NULL == t)
5719   {
5720     /* TODO notify that we dont know that tunnel */
5721     GNUNET_STATISTICS_update (stats, "# data on unknown tunnel", 1, GNUNET_NO);
5722     GNUNET_break_op (0);
5723     return GNUNET_OK;
5724   }
5725   pid = ntohl (msg->pid);
5726   if (t->fwd_pid == pid)
5727   {
5728     /* already seen this packet, drop */
5729     GNUNET_STATISTICS_update (stats, "# duplicate PID drops", 1, GNUNET_NO);
5730     GNUNET_log (GNUNET_ERROR_TYPE_DEBUG,
5731                 " Already seen pid %u, DROPPING!\n", pid);
5732     tunnel_send_fwd_ack (t, GNUNET_MESSAGE_TYPE_MESH_ACK);
5733     return GNUNET_OK;
5734   }
5735   else
5736   {
5737     GNUNET_log (GNUNET_ERROR_TYPE_DEBUG,
5738                 " pid %u not seen yet, forwarding\n", pid);
5739   }
5740   t->skip += (pid - t->fwd_pid) - 1;
5741   t->fwd_pid = pid;
5742   tunnel_reset_timeout (t);
5743
5744   /* Transmit to locally interested clients */
5745   if (NULL != t->peers &&
5746       GNUNET_CONTAINER_multihashmap_contains (t->peers, &my_full_id.hashPubKey))
5747   {
5748     GNUNET_STATISTICS_update (stats, "# multicast received", 1, GNUNET_NO);
5749     send_subscribed_clients (message, &msg[1].header, t);
5750     tunnel_send_fwd_ack(t, GNUNET_MESSAGE_TYPE_MESH_MULTICAST);
5751   }
5752   GNUNET_log (GNUNET_ERROR_TYPE_DEBUG, "   ttl: %u\n", ntohl (msg->ttl));
5753   if (ntohl (msg->ttl) == 0)
5754   {
5755     GNUNET_STATISTICS_update (stats, "# TTL drops", 1, GNUNET_NO);
5756     GNUNET_log (GNUNET_ERROR_TYPE_WARNING, " TTL is 0, DROPPING!\n");
5757     tunnel_send_fwd_ack (t, GNUNET_MESSAGE_TYPE_MESH_ACK);
5758     return GNUNET_OK;
5759   }
5760   GNUNET_STATISTICS_update (stats, "# multicast forwarded", 1, GNUNET_NO);
5761   tunnel_send_multicast (t, message);
5762   return GNUNET_OK;
5763 }
5764
5765
5766 /**
5767  * Core handler for mesh network traffic toward the owner of a tunnel
5768  *
5769  * @param cls closure
5770  * @param message message
5771  * @param peer peer identity this notification is about
5772  * @param atsi performance data
5773  * @param atsi_count number of records in 'atsi'
5774  *
5775  * @return GNUNET_OK to keep the connection open,
5776  *         GNUNET_SYSERR to close it (signal serious error)
5777  */
5778 static int
5779 handle_mesh_data_to_orig (void *cls, const struct GNUNET_PeerIdentity *peer,
5780                           const struct GNUNET_MessageHeader *message,
5781                           const struct GNUNET_ATS_Information *atsi,
5782                           unsigned int atsi_count)
5783 {
5784   struct GNUNET_MESH_ToOrigin *msg;
5785   struct GNUNET_PeerIdentity id;
5786   struct MeshPeerInfo *peer_info;
5787   struct MeshTunnel *t;
5788   struct MeshTunnelChildInfo *cinfo;
5789   size_t size;
5790   uint32_t pid;
5791
5792   GNUNET_log (GNUNET_ERROR_TYPE_DEBUG, "got a ToOrigin packet from %s\n",
5793               GNUNET_i2s (peer));
5794   size = ntohs (message->size);
5795   if (size < sizeof (struct GNUNET_MESH_ToOrigin) +     /* Payload must be */
5796       sizeof (struct GNUNET_MessageHeader))     /* at least a header */
5797   {
5798     GNUNET_break_op (0);
5799     return GNUNET_OK;
5800   }
5801   msg = (struct GNUNET_MESH_ToOrigin *) message;
5802   GNUNET_log (GNUNET_ERROR_TYPE_DEBUG, " of type %s\n",
5803               GNUNET_MESH_DEBUG_M2S (ntohs (msg[1].header.type)));
5804   t = tunnel_get (&msg->oid, ntohl (msg->tid));
5805   pid = ntohl (msg->pid);
5806
5807   if (NULL == t)
5808   {
5809     /* TODO notify that we dont know this tunnel (whom)? */
5810     GNUNET_STATISTICS_update (stats, "# data on unknown tunnel", 1, GNUNET_NO);
5811     GNUNET_break_op (0);
5812     GNUNET_log (GNUNET_ERROR_TYPE_DEBUG,
5813                 "Received to_origin with PID %u on unknown tunnel\n",
5814                 pid);
5815     return GNUNET_OK;
5816   }
5817
5818   cinfo = tunnel_get_neighbor_fc(t, peer);
5819   if (NULL == cinfo)
5820   {
5821     GNUNET_break (0);
5822     return GNUNET_OK;
5823   }
5824
5825   if (cinfo->bck_pid == pid)
5826   {
5827     /* already seen this packet, drop */
5828     GNUNET_STATISTICS_update (stats, "# duplicate PID drops BCK", 1, GNUNET_NO);
5829     GNUNET_log (GNUNET_ERROR_TYPE_DEBUG,
5830                 " Already seen pid %u, DROPPING!\n", pid);
5831     tunnel_send_bck_ack (t, GNUNET_MESSAGE_TYPE_MESH_ACK);
5832     return GNUNET_OK;
5833   }
5834
5835   GNUNET_log (GNUNET_ERROR_TYPE_DEBUG,
5836               " pid %u not seen yet, forwarding\n", pid);
5837   cinfo->bck_pid = pid;
5838
5839   if (NULL != t->owner)
5840   {
5841     char cbuf[size];
5842     struct GNUNET_MESH_ToOrigin *copy;
5843
5844     GNUNET_log (GNUNET_ERROR_TYPE_DEBUG,
5845                 "  it's for us! sending to clients...\n");
5846     /* TODO signature verification */
5847     memcpy (cbuf, message, size);
5848     copy = (struct GNUNET_MESH_ToOrigin *) cbuf;
5849     copy->tid = htonl (t->local_tid);
5850     t->bck_pid++;
5851     copy->pid = htonl (t->bck_pid);
5852     GNUNET_STATISTICS_update (stats, "# to origin received", 1, GNUNET_NO);
5853     GNUNET_SERVER_notification_context_unicast (nc, t->owner->handle,
5854                                                 &copy->header, GNUNET_NO);
5855     tunnel_send_bck_ack (t, GNUNET_MESSAGE_TYPE_MESH_TO_ORIGIN);
5856     return GNUNET_OK;
5857   }
5858   GNUNET_log (GNUNET_ERROR_TYPE_DEBUG,
5859               "  not for us, retransmitting...\n");
5860
5861   peer_info = peer_info_get (&msg->oid);
5862   if (NULL == peer_info)
5863   {
5864     /* unknown origin of tunnel */
5865     GNUNET_break (0);
5866     return GNUNET_OK;
5867   }
5868   GNUNET_PEER_resolve (tree_get_predecessor (t->tree), &id);
5869   send_prebuilt_message (message, &id, t);
5870   GNUNET_STATISTICS_update (stats, "# to origin forwarded", 1, GNUNET_NO);
5871
5872   return GNUNET_OK;
5873 }
5874
5875
5876 /**
5877  * Core handler for mesh network traffic point-to-point acks.
5878  *
5879  * @param cls closure
5880  * @param message message
5881  * @param peer peer identity this notification is about
5882  * @param atsi performance data
5883  * @param atsi_count number of records in 'atsi'
5884  *
5885  * @return GNUNET_OK to keep the connection open,
5886  *         GNUNET_SYSERR to close it (signal serious error)
5887  */
5888 static int
5889 handle_mesh_ack (void *cls, const struct GNUNET_PeerIdentity *peer,
5890                  const struct GNUNET_MessageHeader *message,
5891                  const struct GNUNET_ATS_Information *atsi,
5892                  unsigned int atsi_count)
5893 {
5894   struct GNUNET_MESH_ACK *msg;
5895   struct MeshTunnel *t;
5896   uint32_t ack;
5897
5898   GNUNET_log (GNUNET_ERROR_TYPE_DEBUG, "Got an ACK packet from %s!\n",
5899               GNUNET_i2s (peer));
5900   msg = (struct GNUNET_MESH_ACK *) message;
5901
5902   t = tunnel_get (&msg->oid, ntohl (msg->tid));
5903
5904   if (NULL == t)
5905   {
5906     /* TODO notify that we dont know this tunnel (whom)? */
5907     GNUNET_STATISTICS_update (stats, "# ack on unknown tunnel", 1, GNUNET_NO);
5908     GNUNET_break_op (0);
5909     return GNUNET_OK;
5910   }
5911   ack = ntohl (msg->pid);
5912   GNUNET_log (GNUNET_ERROR_TYPE_DEBUG, "  ACK %u\n", ack);
5913
5914   /* Is this a forward or backward ACK? */
5915   if (tree_get_predecessor(t->tree) != GNUNET_PEER_search(peer))
5916   {
5917     struct MeshTunnelChildInfo *cinfo;
5918
5919     debug_bck_ack++;
5920     GNUNET_log (GNUNET_ERROR_TYPE_DEBUG, "  FWD ACK\n");
5921     cinfo = tunnel_get_neighbor_fc (t, peer);
5922     cinfo->fwd_ack = ack;
5923     tunnel_send_fwd_ack (t, GNUNET_MESSAGE_TYPE_MESH_ACK);
5924     tunnel_unlock_fwd_queues (t);
5925   }
5926   else
5927   {
5928     GNUNET_log (GNUNET_ERROR_TYPE_DEBUG, "  BCK ACK\n");
5929     t->bck_ack = ack;
5930     tunnel_send_bck_ack (t, GNUNET_MESSAGE_TYPE_MESH_ACK);
5931     tunnel_unlock_bck_queue (t);
5932   }
5933   return GNUNET_OK;
5934 }
5935
5936
5937 /**
5938  * Core handler for mesh network traffic point-to-point ack polls.
5939  *
5940  * @param cls closure
5941  * @param message message
5942  * @param peer peer identity this notification is about
5943  * @param atsi performance data
5944  * @param atsi_count number of records in 'atsi'
5945  *
5946  * @return GNUNET_OK to keep the connection open,
5947  *         GNUNET_SYSERR to close it (signal serious error)
5948  */
5949 static int
5950 handle_mesh_poll (void *cls, const struct GNUNET_PeerIdentity *peer,
5951                   const struct GNUNET_MessageHeader *message,
5952                   const struct GNUNET_ATS_Information *atsi,
5953                   unsigned int atsi_count)
5954 {
5955   struct GNUNET_MESH_Poll *msg;
5956   struct MeshTunnel *t;
5957
5958   GNUNET_log (GNUNET_ERROR_TYPE_DEBUG, "Got an POLL packet from %s!\n",
5959               GNUNET_i2s (peer));
5960
5961   msg = (struct GNUNET_MESH_Poll *) message;
5962
5963   t = tunnel_get (&msg->oid, ntohl (msg->tid));
5964
5965   if (NULL == t)
5966   {
5967     /* TODO notify that we dont know this tunnel (whom)? */
5968     GNUNET_STATISTICS_update (stats, "# poll on unknown tunnel", 1, GNUNET_NO);
5969     GNUNET_break_op (0);
5970     return GNUNET_OK;
5971   }
5972
5973   /* Is this a forward or backward ACK? */
5974   if (tree_get_predecessor(t->tree) != GNUNET_PEER_search(peer))
5975   {
5976     struct MeshTunnelChildInfo *cinfo;
5977
5978     GNUNET_log (GNUNET_ERROR_TYPE_DEBUG, "  from FWD\n");
5979     cinfo = tunnel_get_neighbor_fc (t, peer);
5980     cinfo->bck_ack = cinfo->fwd_pid; // mark as ready to send
5981     tunnel_send_bck_ack (t, GNUNET_MESSAGE_TYPE_MESH_POLL);
5982   }
5983   else
5984   {
5985     GNUNET_log (GNUNET_ERROR_TYPE_DEBUG, "  from BCK\n");
5986     tunnel_send_fwd_ack (t, GNUNET_MESSAGE_TYPE_MESH_POLL);
5987   }
5988
5989   return GNUNET_OK;
5990 }
5991
5992
5993 /**
5994  * Core handler for path ACKs
5995  *
5996  * @param cls closure
5997  * @param message message
5998  * @param peer peer identity this notification is about
5999  * @param atsi performance data
6000  * @param atsi_count number of records in 'atsi'
6001  *
6002  * @return GNUNET_OK to keep the connection open,
6003  *         GNUNET_SYSERR to close it (signal serious error)
6004  */
6005 static int
6006 handle_mesh_path_ack (void *cls, const struct GNUNET_PeerIdentity *peer,
6007                       const struct GNUNET_MessageHeader *message,
6008                       const struct GNUNET_ATS_Information *atsi,
6009                       unsigned int atsi_count)
6010 {
6011   struct GNUNET_MESH_PathACK *msg;
6012   struct GNUNET_PeerIdentity id;
6013   struct MeshPeerInfo *peer_info;
6014   struct MeshPeerPath *p;
6015   struct MeshTunnel *t;
6016
6017   GNUNET_log (GNUNET_ERROR_TYPE_DEBUG, "Received a path ACK msg [%s]\n",
6018               GNUNET_i2s (&my_full_id));
6019   msg = (struct GNUNET_MESH_PathACK *) message;
6020   t = tunnel_get (&msg->oid, ntohl(msg->tid));
6021   if (NULL == t)
6022   {
6023     /* TODO notify that we don't know the tunnel */
6024     GNUNET_STATISTICS_update (stats, "# control on unknown tunnel", 1, GNUNET_NO);
6025     GNUNET_log (GNUNET_ERROR_TYPE_DEBUG, "  don't know the tunnel %s [%X]!\n",
6026                 GNUNET_i2s (&msg->oid), ntohl(msg->tid));
6027     return GNUNET_OK;
6028   }
6029   GNUNET_log (GNUNET_ERROR_TYPE_DEBUG, "  on tunnel %s [%X]\n",
6030               GNUNET_i2s (&msg->oid), ntohl(msg->tid));
6031
6032   peer_info = peer_info_get (&msg->peer_id);
6033   GNUNET_log (GNUNET_ERROR_TYPE_DEBUG, "  by peer %s\n",
6034               GNUNET_i2s (&msg->peer_id));
6035   GNUNET_log (GNUNET_ERROR_TYPE_DEBUG, "  via peer %s\n",
6036               GNUNET_i2s (peer));
6037
6038   if (NULL != t->regex_ctx && t->regex_ctx->info->peer == peer_info->id)
6039   {
6040     GNUNET_log (GNUNET_ERROR_TYPE_DEBUG,
6041                 "connect_by_string completed, stopping search\n");
6042     regex_cancel_search (t->regex_ctx);
6043     t->regex_ctx = NULL;
6044   }
6045
6046   /* Add paths to peers? */
6047   p = tree_get_path_to_peer (t->tree, peer_info->id);
6048   if (NULL != p)
6049   {
6050     path_add_to_peers (p, GNUNET_YES);
6051     path_destroy (p);
6052   }
6053   else
6054   {
6055     GNUNET_break (0);
6056   }
6057
6058   /* Message for us? */
6059   if (0 == memcmp (&msg->oid, &my_full_id, sizeof (struct GNUNET_PeerIdentity)))
6060   {
6061     GNUNET_log (GNUNET_ERROR_TYPE_DEBUG, "  It's for us!\n");
6062     if (NULL == t->owner)
6063     {
6064       GNUNET_break_op (0);
6065       return GNUNET_OK;
6066     }
6067     if (NULL != t->dht_get_type)
6068     {
6069       GNUNET_DHT_get_stop (t->dht_get_type);
6070       t->dht_get_type = NULL;
6071     }
6072     if (tree_get_status (t->tree, peer_info->id) != MESH_PEER_READY)
6073     {
6074       tree_set_status (t->tree, peer_info->id, MESH_PEER_READY);
6075       send_client_peer_connected (t, peer_info->id);
6076     }
6077     return GNUNET_OK;
6078   }
6079
6080   GNUNET_log (GNUNET_ERROR_TYPE_DEBUG,
6081               "  not for us, retransmitting...\n");
6082   GNUNET_PEER_resolve (tree_get_predecessor (t->tree), &id);
6083   peer_info = peer_info_get (&msg->oid);
6084   if (NULL == peer_info)
6085   {
6086     /* If we know the tunnel, we should DEFINITELY know the peer */
6087     GNUNET_break (0);
6088     return GNUNET_OK;
6089   }
6090   send_prebuilt_message (message, &id, t);
6091   return GNUNET_OK;
6092 }
6093
6094
6095 /**
6096  * Core handler for mesh keepalives.
6097  *
6098  * @param cls closure
6099  * @param message message
6100  * @param peer peer identity this notification is about
6101  * @param atsi performance data
6102  * @param atsi_count number of records in 'atsi'
6103  * @return GNUNET_OK to keep the connection open,
6104  *         GNUNET_SYSERR to close it (signal serious error)
6105  *
6106  * TODO: Check who we got this from, to validate route.
6107  */
6108 static int
6109 handle_mesh_keepalive (void *cls, const struct GNUNET_PeerIdentity *peer,
6110                        const struct GNUNET_MessageHeader *message,
6111                        const struct GNUNET_ATS_Information *atsi,
6112                        unsigned int atsi_count)
6113 {
6114   struct GNUNET_MESH_TunnelKeepAlive *msg;
6115   struct MeshTunnel *t;
6116
6117   GNUNET_log (GNUNET_ERROR_TYPE_DEBUG, "got a keepalive packet from %s\n",
6118               GNUNET_i2s (peer));
6119
6120   msg = (struct GNUNET_MESH_TunnelKeepAlive *) message;
6121   t = tunnel_get (&msg->oid, ntohl (msg->tid));
6122
6123   if (NULL == t)
6124   {
6125     /* TODO notify that we dont know that tunnel */
6126     GNUNET_STATISTICS_update (stats, "# keepalive on unknown tunnel", 1, GNUNET_NO);
6127     GNUNET_break_op (0);
6128     return GNUNET_OK;
6129   }
6130
6131   tunnel_reset_timeout (t);
6132
6133   GNUNET_STATISTICS_update (stats, "# keepalives forwarded", 1, GNUNET_NO);
6134   tunnel_send_multicast (t, message);
6135   return GNUNET_OK;
6136   }
6137
6138
6139
6140 /**
6141  * Functions to handle messages from core
6142  */
6143 static struct GNUNET_CORE_MessageHandler core_handlers[] = {
6144   {&handle_mesh_path_create, GNUNET_MESSAGE_TYPE_MESH_PATH_CREATE, 0},
6145   {&handle_mesh_path_destroy, GNUNET_MESSAGE_TYPE_MESH_PATH_DESTROY, 0},
6146   {&handle_mesh_path_broken, GNUNET_MESSAGE_TYPE_MESH_PATH_BROKEN,
6147    sizeof (struct GNUNET_MESH_PathBroken)},
6148   {&handle_mesh_tunnel_destroy, GNUNET_MESSAGE_TYPE_MESH_TUNNEL_DESTROY,
6149    sizeof (struct GNUNET_MESH_TunnelDestroy)},
6150   {&handle_mesh_data_unicast, GNUNET_MESSAGE_TYPE_MESH_UNICAST, 0},
6151   {&handle_mesh_data_multicast, GNUNET_MESSAGE_TYPE_MESH_MULTICAST, 0},
6152   {&handle_mesh_keepalive, GNUNET_MESSAGE_TYPE_MESH_PATH_KEEPALIVE,
6153     sizeof (struct GNUNET_MESH_TunnelKeepAlive)},
6154   {&handle_mesh_data_to_orig, GNUNET_MESSAGE_TYPE_MESH_TO_ORIGIN, 0},
6155   {&handle_mesh_ack, GNUNET_MESSAGE_TYPE_MESH_ACK,
6156     sizeof (struct GNUNET_MESH_ACK)},
6157   {&handle_mesh_poll, GNUNET_MESSAGE_TYPE_MESH_POLL,
6158     sizeof (struct GNUNET_MESH_Poll)},
6159   {&handle_mesh_path_ack, GNUNET_MESSAGE_TYPE_MESH_PATH_ACK,
6160    sizeof (struct GNUNET_MESH_PathACK)},
6161   {NULL, 0, 0}
6162 };
6163
6164
6165
6166 /******************************************************************************/
6167 /****************       MESH LOCAL HANDLER HELPERS      ***********************/
6168 /******************************************************************************/
6169
6170 /**
6171  * deregister_app: iterator for removing each application registered by a client
6172  *
6173  * @param cls closure
6174  * @param key the hash of the application id (used to access the hashmap)
6175  * @param value the value stored at the key (client)
6176  *
6177  * @return GNUNET_OK on success
6178  */
6179 static int
6180 deregister_app (void *cls, const struct GNUNET_HashCode * key, void *value)
6181 {
6182   struct GNUNET_CONTAINER_MultiHashMap *h = cls;
6183   GNUNET_break (GNUNET_YES ==
6184                 GNUNET_CONTAINER_multihashmap_remove (h, key, value));
6185   return GNUNET_OK;
6186 }
6187
6188 #if LATER
6189 /**
6190  * notify_client_connection_failure: notify a client that the connection to the
6191  * requested remote peer is not possible (for instance, no route found)
6192  * Function called when the socket is ready to queue more data. "buf" will be
6193  * NULL and "size" zero if the socket was closed for writing in the meantime.
6194  *
6195  * @param cls closure
6196  * @param size number of bytes available in buf
6197  * @param buf where the callee should write the message
6198  * @return number of bytes written to buf
6199  */
6200 static size_t
6201 notify_client_connection_failure (void *cls, size_t size, void *buf)
6202 {
6203   int size_needed;
6204   struct MeshPeerInfo *peer_info;
6205   struct GNUNET_MESH_PeerControl *msg;
6206   struct GNUNET_PeerIdentity id;
6207
6208   if (0 == size && NULL == buf)
6209   {
6210     // TODO retry? cancel?
6211     return 0;
6212   }
6213
6214   size_needed = sizeof (struct GNUNET_MESH_PeerControl);
6215   peer_info = (struct MeshPeerInfo *) cls;
6216   msg = (struct GNUNET_MESH_PeerControl *) buf;
6217   msg->header.size = htons (sizeof (struct GNUNET_MESH_PeerControl));
6218   msg->header.type = htons (GNUNET_MESSAGE_TYPE_MESH_LOCAL_PEER_DISCONNECTED);
6219 //     msg->tunnel_id = htonl(peer_info->t->tid);
6220   GNUNET_PEER_resolve (peer_info->id, &id);
6221   memcpy (&msg->peer, &id, sizeof (struct GNUNET_PeerIdentity));
6222
6223   return size_needed;
6224 }
6225 #endif
6226
6227
6228 /**
6229  * Send keepalive packets for a peer
6230  *
6231  * @param cls Closure (tunnel for which to send the keepalive).
6232  * @param tc Notification context.
6233  */
6234 static void
6235 path_refresh (void *cls, const struct GNUNET_SCHEDULER_TaskContext *tc)
6236 {
6237   struct MeshTunnel *t = cls;
6238   struct GNUNET_MESH_TunnelKeepAlive *msg;
6239   size_t size = sizeof (struct GNUNET_MESH_TunnelKeepAlive);
6240   char cbuf[size];
6241
6242   t->path_refresh_task = GNUNET_SCHEDULER_NO_TASK;
6243   if (0 != (tc->reason & GNUNET_SCHEDULER_REASON_SHUTDOWN))
6244   {
6245     return;
6246   }
6247
6248   GNUNET_log (GNUNET_ERROR_TYPE_DEBUG,
6249               "sending keepalive for tunnel %d\n", t->id.tid);
6250
6251   msg = (struct GNUNET_MESH_TunnelKeepAlive *) cbuf;
6252   msg->header.size = htons (size);
6253   msg->header.type = htons (GNUNET_MESSAGE_TYPE_MESH_PATH_KEEPALIVE);
6254   msg->oid = my_full_id;
6255   msg->tid = htonl (t->id.tid);
6256   tunnel_send_multicast (t, &msg->header);
6257
6258   t->path_refresh_task =
6259       GNUNET_SCHEDULER_add_delayed (refresh_path_time, &path_refresh, t);
6260   tunnel_reset_timeout(t);
6261 }
6262
6263
6264 /**
6265  * Function to process paths received for a new peer addition. The recorded
6266  * paths form the initial tunnel, which can be optimized later.
6267  * Called on each result obtained for the DHT search.
6268  *
6269  * @param cls closure
6270  * @param exp when will this value expire
6271  * @param key key of the result
6272  * @param get_path path of the get request
6273  * @param get_path_length lenght of get_path
6274  * @param put_path path of the put request
6275  * @param put_path_length length of the put_path
6276  * @param type type of the result
6277  * @param size number of bytes in data
6278  * @param data pointer to the result data
6279  *
6280  * TODO: re-issue the request after certain time? cancel after X results?
6281  */
6282 static void
6283 dht_get_id_handler (void *cls, struct GNUNET_TIME_Absolute exp,
6284                     const struct GNUNET_HashCode * key,
6285                     const struct GNUNET_PeerIdentity *get_path,
6286                     unsigned int get_path_length,
6287                     const struct GNUNET_PeerIdentity *put_path,
6288                     unsigned int put_path_length, enum GNUNET_BLOCK_Type type,
6289                     size_t size, const void *data)
6290 {
6291   struct MeshPathInfo *path_info = cls;
6292   struct MeshPeerPath *p;
6293   struct GNUNET_PeerIdentity pi;
6294   int i;
6295
6296   GNUNET_log (GNUNET_ERROR_TYPE_DEBUG, "Got results from DHT!\n");
6297   GNUNET_PEER_resolve (path_info->peer->id, &pi);
6298   GNUNET_log (GNUNET_ERROR_TYPE_DEBUG, "  for %s\n", GNUNET_i2s (&pi));
6299
6300   p = path_build_from_dht (get_path, get_path_length, put_path,
6301                            put_path_length);
6302   path_add_to_peers (p, GNUNET_NO);
6303   path_destroy(p);
6304   for (i = 0; i < path_info->peer->ntunnels; i++)
6305   {
6306     tunnel_add_peer (path_info->peer->tunnels[i], path_info->peer);
6307     peer_info_connect (path_info->peer, path_info->t);
6308   }
6309
6310   return;
6311 }
6312
6313
6314 /**
6315  * Function to process paths received for a new peer addition. The recorded
6316  * paths form the initial tunnel, which can be optimized later.
6317  * Called on each result obtained for the DHT search.
6318  *
6319  * @param cls closure
6320  * @param exp when will this value expire
6321  * @param key key of the result
6322  * @param get_path path of the get request
6323  * @param get_path_length lenght of get_path
6324  * @param put_path path of the put request
6325  * @param put_path_length length of the put_path
6326  * @param type type of the result
6327  * @param size number of bytes in data
6328  * @param data pointer to the result data
6329  */
6330 static void
6331 dht_get_type_handler (void *cls, struct GNUNET_TIME_Absolute exp,
6332                       const struct GNUNET_HashCode * key,
6333                       const struct GNUNET_PeerIdentity *get_path,
6334                       unsigned int get_path_length,
6335                       const struct GNUNET_PeerIdentity *put_path,
6336                       unsigned int put_path_length, enum GNUNET_BLOCK_Type type,
6337                       size_t size, const void *data)
6338 {
6339   const struct PBlock *pb = data;
6340   const struct GNUNET_PeerIdentity *pi = &pb->id;
6341   struct MeshTunnel *t = cls;
6342   struct MeshPeerInfo *peer_info;
6343   struct MeshPeerPath *p;
6344
6345   GNUNET_log (GNUNET_ERROR_TYPE_DEBUG, "got type DHT result!\n");
6346   if (size != sizeof (struct PBlock))
6347   {
6348     GNUNET_break_op (0);
6349     return;
6350   }
6351   if (ntohl(pb->type) != t->type)
6352   {
6353     GNUNET_break_op (0);
6354     return;
6355   }
6356   GNUNET_assert (NULL != t->owner);
6357   peer_info = peer_info_get (pi);
6358   (void) GNUNET_CONTAINER_multihashmap_put (t->peers, &pi->hashPubKey,
6359                                             peer_info,
6360                                             GNUNET_CONTAINER_MULTIHASHMAPOPTION_REPLACE);
6361
6362   p = path_build_from_dht (get_path, get_path_length, put_path,
6363                            put_path_length);
6364   path_add_to_peers (p, GNUNET_NO);
6365   path_destroy(p);
6366   tunnel_add_peer (t, peer_info);
6367   peer_info_connect (peer_info, t);
6368 }
6369
6370
6371 /**
6372  * Function to process DHT string to regex matching.
6373  * Called on each result obtained for the DHT search.
6374  *
6375  * @param cls closure (search context)
6376  * @param exp when will this value expire
6377  * @param key key of the result
6378  * @param get_path path of the get request (not used)
6379  * @param get_path_length lenght of get_path (not used)
6380  * @param put_path path of the put request (not used)
6381  * @param put_path_length length of the put_path (not used)
6382  * @param type type of the result
6383  * @param size number of bytes in data
6384  * @param data pointer to the result data
6385  */
6386 static void
6387 dht_get_string_accept_handler (void *cls, struct GNUNET_TIME_Absolute exp,
6388                                const struct GNUNET_HashCode * key,
6389                                const struct GNUNET_PeerIdentity *get_path,
6390                                unsigned int get_path_length,
6391                                const struct GNUNET_PeerIdentity *put_path,
6392                                unsigned int put_path_length,
6393                                enum GNUNET_BLOCK_Type type,
6394                                size_t size, const void *data)
6395 {
6396   const struct MeshRegexAccept *block = data;
6397   struct MeshRegexSearchContext *ctx = cls;
6398   struct MeshRegexSearchInfo *info = ctx->info;
6399   struct MeshPeerPath *p;
6400   struct MeshPeerInfo *peer_info;
6401
6402   GNUNET_log (GNUNET_ERROR_TYPE_DEBUG, "Got regex results from DHT!\n");
6403   GNUNET_log (GNUNET_ERROR_TYPE_DEBUG, "  for %s\n", info->description);
6404
6405   peer_info = peer_info_get(&block->id);
6406   p = path_build_from_dht (get_path, get_path_length, put_path,
6407                            put_path_length);
6408   path_add_to_peers (p, GNUNET_NO);
6409   path_destroy(p);
6410
6411   tunnel_add_peer (info->t, peer_info);
6412   peer_info_connect (peer_info, info->t);
6413   if (0 == info->peer)
6414   {
6415     info->peer = peer_info->id;
6416   }
6417   else
6418   {
6419     GNUNET_array_append (info->peers, info->n_peers, peer_info->id);
6420   }
6421
6422   info->timeout = GNUNET_SCHEDULER_add_delayed (connect_timeout,
6423                                                 &regex_connect_timeout,
6424                                                 info);
6425
6426   return;
6427 }
6428
6429
6430 /**
6431  * Function to process DHT string to regex matching.
6432  * Called on each result obtained for the DHT search.
6433  *
6434  * @param cls closure (search context)
6435  * @param exp when will this value expire
6436  * @param key key of the result
6437  * @param get_path path of the get request (not used)
6438  * @param get_path_length lenght of get_path (not used)
6439  * @param put_path path of the put request (not used)
6440  * @param put_path_length length of the put_path (not used)
6441  * @param type type of the result
6442  * @param size number of bytes in data
6443  * @param data pointer to the result data
6444  *
6445  * TODO: re-issue the request after certain time? cancel after X results?
6446  */
6447 static void
6448 dht_get_string_handler (void *cls, struct GNUNET_TIME_Absolute exp,
6449                         const struct GNUNET_HashCode * key,
6450                         const struct GNUNET_PeerIdentity *get_path,
6451                         unsigned int get_path_length,
6452                         const struct GNUNET_PeerIdentity *put_path,
6453                         unsigned int put_path_length,
6454                         enum GNUNET_BLOCK_Type type,
6455                         size_t size, const void *data)
6456 {
6457   const struct MeshRegexBlock *block = data;
6458   struct MeshRegexSearchContext *ctx = cls;
6459   struct MeshRegexSearchInfo *info = ctx->info;
6460   void *copy;
6461   size_t len;
6462
6463   GNUNET_log (GNUNET_ERROR_TYPE_DEBUG,
6464               "DHT GET STRING RETURNED RESULTS\n");
6465   GNUNET_log (GNUNET_ERROR_TYPE_DEBUG,
6466               "  key: %s\n", GNUNET_h2s (key));
6467
6468   copy = GNUNET_malloc (size);
6469   memcpy (copy, data, size);
6470   GNUNET_break (GNUNET_OK ==
6471                 GNUNET_CONTAINER_multihashmap_put(info->dht_get_results, key, copy,
6472                                                   GNUNET_CONTAINER_MULTIHASHMAPOPTION_MULTIPLE));
6473   len = ntohl (block->n_proof);
6474   {
6475     char proof[len + 1];
6476
6477     memcpy (proof, &block[1], len);
6478     proof[len] = '\0';
6479     if (GNUNET_OK != GNUNET_REGEX_check_proof (proof, key))
6480     {
6481       GNUNET_break_op (0);
6482       return;
6483     }
6484   }
6485   len = strlen (info->description);
6486   if (len == ctx->position) // String processed
6487   {
6488     if (GNUNET_YES == ntohl (block->accepting))
6489     {
6490       regex_find_path(key, ctx);
6491     }
6492     else
6493     {
6494       GNUNET_log (GNUNET_ERROR_TYPE_DEBUG, "  block not accepting!\n");
6495       // FIXME REGEX this block not successful, wait for more? start timeout?
6496     }
6497     return;
6498   }
6499
6500   regex_next_edge (block, size, ctx);
6501
6502   return;
6503 }
6504
6505 /******************************************************************************/
6506 /*********************       MESH LOCAL HANDLES      **************************/
6507 /******************************************************************************/
6508
6509
6510 /**
6511  * Handler for client disconnection
6512  *
6513  * @param cls closure
6514  * @param client identification of the client; NULL
6515  *        for the last call when the server is destroyed
6516  */
6517 static void
6518 handle_local_client_disconnect (void *cls, struct GNUNET_SERVER_Client *client)
6519 {
6520   struct MeshClient *c;
6521   struct MeshClient *next;
6522   unsigned int i;
6523
6524   GNUNET_log (GNUNET_ERROR_TYPE_DEBUG, "client disconnected\n");
6525   if (client == NULL)
6526   {
6527     GNUNET_log (GNUNET_ERROR_TYPE_DEBUG, "   (SERVER DOWN)\n");
6528     return;
6529   }
6530   c = clients;
6531   while (NULL != c)
6532   {
6533     if (c->handle != client)
6534     {
6535       GNUNET_log (GNUNET_ERROR_TYPE_DEBUG, "   ... searching\n");
6536       c = c->next;
6537       continue;
6538     }
6539     GNUNET_log (GNUNET_ERROR_TYPE_DEBUG, "matching client found (%u)\n",
6540                 c->id);
6541     GNUNET_SERVER_client_drop (c->handle);
6542     c->shutting_down = GNUNET_YES;
6543     GNUNET_assert (NULL != c->own_tunnels);
6544     GNUNET_assert (NULL != c->incoming_tunnels);
6545     GNUNET_CONTAINER_multihashmap_iterate (c->own_tunnels,
6546                                            &tunnel_destroy_iterator, c);
6547     GNUNET_CONTAINER_multihashmap_iterate (c->incoming_tunnels,
6548                                            &tunnel_destroy_iterator, c);
6549     GNUNET_CONTAINER_multihashmap_iterate (c->ignore_tunnels,
6550                                            &tunnel_destroy_iterator, c);
6551     GNUNET_CONTAINER_multihashmap_destroy (c->own_tunnels);
6552     GNUNET_CONTAINER_multihashmap_destroy (c->incoming_tunnels);
6553     GNUNET_CONTAINER_multihashmap_destroy (c->ignore_tunnels);
6554
6555     /* deregister clients applications */
6556     if (NULL != c->apps)
6557     {
6558       GNUNET_CONTAINER_multihashmap_iterate (c->apps, &deregister_app, c->apps);
6559       GNUNET_CONTAINER_multihashmap_destroy (c->apps);
6560     }
6561     if (0 == GNUNET_CONTAINER_multihashmap_size (applications) &&
6562         GNUNET_SCHEDULER_NO_TASK != announce_applications_task)
6563     {
6564       GNUNET_SCHEDULER_cancel (announce_applications_task);
6565       announce_applications_task = GNUNET_SCHEDULER_NO_TASK;
6566     }
6567     if (NULL != c->types)
6568       GNUNET_CONTAINER_multihashmap_destroy (c->types);
6569     for (i = 0; i < c->n_regex; i++)
6570     {
6571       GNUNET_free (c->regexes[i].regex);
6572     }
6573     GNUNET_free_non_null (c->regexes);
6574     if (GNUNET_SCHEDULER_NO_TASK != c->regex_announce_task)
6575       GNUNET_SCHEDULER_cancel (c->regex_announce_task);
6576     next = c->next;
6577     GNUNET_CONTAINER_DLL_remove (clients, clients_tail, c);
6578     GNUNET_log (GNUNET_ERROR_TYPE_DEBUG, "  CLIENT FREE at %p\n", c);
6579     GNUNET_free (c);
6580     GNUNET_STATISTICS_update (stats, "# clients", -1, GNUNET_NO);
6581     c = next;
6582   }
6583   GNUNET_log (GNUNET_ERROR_TYPE_DEBUG, "   done!\n");
6584   return;
6585 }
6586
6587
6588 /**
6589  * Handler for new clients
6590  *
6591  * @param cls closure
6592  * @param client identification of the client
6593  * @param message the actual message, which includes messages the client wants
6594  */
6595 static void
6596 handle_local_new_client (void *cls, struct GNUNET_SERVER_Client *client,
6597                          const struct GNUNET_MessageHeader *message)
6598 {
6599   struct GNUNET_MESH_ClientConnect *cc_msg;
6600   struct MeshClient *c;
6601   GNUNET_MESH_ApplicationType *a;
6602   unsigned int size;
6603   uint16_t ntypes;
6604   uint16_t *t;
6605   uint16_t napps;
6606   uint16_t i;
6607
6608   GNUNET_log (GNUNET_ERROR_TYPE_DEBUG, "new client connected\n");
6609   /* Check data sanity */
6610   size = ntohs (message->size) - sizeof (struct GNUNET_MESH_ClientConnect);
6611   cc_msg = (struct GNUNET_MESH_ClientConnect *) message;
6612   ntypes = ntohs (cc_msg->types);
6613   napps = ntohs (cc_msg->applications);
6614   if (size !=
6615       ntypes * sizeof (uint16_t) + napps * sizeof (GNUNET_MESH_ApplicationType))
6616   {
6617     GNUNET_break (0);
6618     GNUNET_SERVER_receive_done (client, GNUNET_SYSERR);
6619     return;
6620   }
6621
6622   /* Create new client structure */
6623   c = GNUNET_malloc (sizeof (struct MeshClient));
6624   c->id = next_client_id++;
6625   GNUNET_log (GNUNET_ERROR_TYPE_DEBUG, "  CLIENT NEW %u\n", c->id);
6626   c->handle = client;
6627   GNUNET_SERVER_client_keep (client);
6628   a = (GNUNET_MESH_ApplicationType *) &cc_msg[1];
6629   if (napps > 0)
6630   {
6631     GNUNET_MESH_ApplicationType at;
6632     struct GNUNET_HashCode hc;
6633
6634     c->apps = GNUNET_CONTAINER_multihashmap_create (napps, GNUNET_NO);
6635     for (i = 0; i < napps; i++)
6636     {
6637       at = ntohl (a[i]);
6638       GNUNET_log (GNUNET_ERROR_TYPE_DEBUG, "  app type: %u\n", at);
6639       GNUNET_CRYPTO_hash (&at, sizeof (at), &hc);
6640       /* store in clients hashmap */
6641       GNUNET_CONTAINER_multihashmap_put (c->apps, &hc, (void *) (long) at,
6642                                          GNUNET_CONTAINER_MULTIHASHMAPOPTION_MULTIPLE);
6643       /* store in global hashmap, for announcements */
6644       GNUNET_CONTAINER_multihashmap_put (applications, &hc, c,
6645                                          GNUNET_CONTAINER_MULTIHASHMAPOPTION_MULTIPLE);
6646     }
6647     if (GNUNET_SCHEDULER_NO_TASK == announce_applications_task)
6648       announce_applications_task =
6649           GNUNET_SCHEDULER_add_now (&announce_applications, NULL);
6650
6651   }
6652   if (ntypes > 0)
6653   {
6654     uint16_t u16;
6655     struct GNUNET_HashCode hc;
6656
6657     t = (uint16_t *) & a[napps];
6658     c->types = GNUNET_CONTAINER_multihashmap_create (ntypes, GNUNET_NO);
6659     for (i = 0; i < ntypes; i++)
6660     {
6661       u16 = ntohs (t[i]);
6662       GNUNET_log (GNUNET_ERROR_TYPE_DEBUG, "  msg type: %u\n", u16);
6663       GNUNET_CRYPTO_hash (&u16, sizeof (u16), &hc);
6664
6665       /* store in clients hashmap */
6666       GNUNET_CONTAINER_multihashmap_put (c->types, &hc, c,
6667                                          GNUNET_CONTAINER_MULTIHASHMAPOPTION_MULTIPLE);
6668       /* store in global hashmap */
6669       GNUNET_CONTAINER_multihashmap_put (types, &hc, c,
6670                                          GNUNET_CONTAINER_MULTIHASHMAPOPTION_MULTIPLE);
6671     }
6672   }
6673   GNUNET_log (GNUNET_ERROR_TYPE_DEBUG,
6674               " client has %u+%u subscriptions\n", napps, ntypes);
6675
6676   GNUNET_CONTAINER_DLL_insert (clients, clients_tail, c);
6677   c->own_tunnels = GNUNET_CONTAINER_multihashmap_create (32, GNUNET_NO);
6678   c->incoming_tunnels = GNUNET_CONTAINER_multihashmap_create (32, GNUNET_NO);
6679   c->ignore_tunnels = GNUNET_CONTAINER_multihashmap_create (32, GNUNET_NO);
6680   GNUNET_SERVER_notification_context_add (nc, client);
6681   GNUNET_STATISTICS_update (stats, "# clients", 1, GNUNET_NO);
6682
6683   GNUNET_SERVER_receive_done (client, GNUNET_OK);
6684   GNUNET_log (GNUNET_ERROR_TYPE_DEBUG, "new client processed\n");
6685 }
6686
6687
6688 /**
6689  * Handler for clients announcing available services by a regular expression.
6690  *
6691  * @param cls closure
6692  * @param client identification of the client
6693  * @param message the actual message, which includes messages the client wants
6694  */
6695 static void
6696 handle_local_announce_regex (void *cls, struct GNUNET_SERVER_Client *client,
6697                              const struct GNUNET_MessageHeader *message)
6698 {
6699   struct GNUNET_MESH_RegexAnnounce *msg;
6700   struct MeshRegexDescriptor rd;
6701   struct MeshClient *c;
6702   char *regex;
6703   size_t len;
6704
6705   GNUNET_log (GNUNET_ERROR_TYPE_DEBUG, "announce regex started\n");
6706
6707   /* Sanity check for client registration */
6708   if (NULL == (c = client_get (client)))
6709   {
6710     GNUNET_break (0);
6711     GNUNET_SERVER_receive_done (client, GNUNET_SYSERR);
6712     return;
6713   }
6714   GNUNET_log (GNUNET_ERROR_TYPE_DEBUG, "  by client %u\n", c->id);
6715
6716   msg = (struct GNUNET_MESH_RegexAnnounce *) message;
6717   len = ntohs (message->size) - sizeof(struct GNUNET_MESH_RegexAnnounce);
6718   regex = GNUNET_malloc (len + 1);
6719   memcpy (regex, &msg[1], len);
6720   regex[len] = '\0';
6721   rd.regex = regex;
6722   rd.compression = ntohs (msg->compression_characters);
6723   GNUNET_log (GNUNET_ERROR_TYPE_DEBUG, "  length %u\n", len);
6724   GNUNET_log (GNUNET_ERROR_TYPE_DEBUG, "  regex %s\n", regex);
6725   GNUNET_log (GNUNET_ERROR_TYPE_DEBUG, "  cm %u\n", ntohs(rd.compression));
6726   GNUNET_array_append (c->regexes, c->n_regex, rd);
6727   if (GNUNET_SCHEDULER_NO_TASK == c->regex_announce_task)
6728   {
6729     c->regex_announce_task = GNUNET_SCHEDULER_add_now(&announce_regex, c);
6730   }
6731   else
6732   {
6733     regex_put(&rd);
6734   }
6735   GNUNET_SERVER_receive_done (client, GNUNET_OK);
6736   GNUNET_log (GNUNET_ERROR_TYPE_DEBUG, "announce regex processed\n");
6737 }
6738
6739
6740 /**
6741  * Handler for requests of new tunnels
6742  *
6743  * @param cls closure
6744  * @param client identification of the client
6745  * @param message the actual message
6746  */
6747 static void
6748 handle_local_tunnel_create (void *cls, struct GNUNET_SERVER_Client *client,
6749                             const struct GNUNET_MessageHeader *message)
6750 {
6751   struct GNUNET_MESH_TunnelMessage *t_msg;
6752   struct MeshTunnel *t;
6753   struct MeshClient *c;
6754   MESH_TunnelNumber tid;
6755
6756   GNUNET_log (GNUNET_ERROR_TYPE_DEBUG, "new tunnel requested\n");
6757
6758   /* Sanity check for client registration */
6759   if (NULL == (c = client_get (client)))
6760   {
6761     GNUNET_break (0);
6762     GNUNET_SERVER_receive_done (client, GNUNET_SYSERR);
6763     return;
6764   }
6765   GNUNET_log (GNUNET_ERROR_TYPE_DEBUG, "  by client %u\n", c->id);
6766
6767   /* Message sanity check */
6768   if (sizeof (struct GNUNET_MESH_TunnelMessage) != ntohs (message->size))
6769   {
6770     GNUNET_break (0);
6771     GNUNET_SERVER_receive_done (client, GNUNET_SYSERR);
6772     return;
6773   }
6774
6775   t_msg = (struct GNUNET_MESH_TunnelMessage *) message;
6776   /* Sanity check for tunnel numbering */
6777   tid = ntohl (t_msg->tunnel_id);
6778   if (0 == (tid & GNUNET_MESH_LOCAL_TUNNEL_ID_CLI))
6779   {
6780     GNUNET_break (0);
6781     GNUNET_SERVER_receive_done (client, GNUNET_SYSERR);
6782     return;
6783   }
6784   /* Sanity check for duplicate tunnel IDs */
6785   if (NULL != tunnel_get_by_local_id (c, tid))
6786   {
6787     GNUNET_break (0);
6788     GNUNET_SERVER_receive_done (client, GNUNET_SYSERR);
6789     return;
6790   }
6791
6792   while (NULL != tunnel_get_by_pi (myid, next_tid))
6793     next_tid = (next_tid + 1) & ~GNUNET_MESH_LOCAL_TUNNEL_ID_CLI;
6794   t = tunnel_new (myid, next_tid++, c, tid);
6795   if (NULL == t)
6796   {
6797     GNUNET_log (GNUNET_ERROR_TYPE_ERROR, "Tunnel creation failed.\n");
6798     GNUNET_break (0);
6799     GNUNET_SERVER_receive_done (client, GNUNET_SYSERR);
6800     return;
6801   }
6802   next_tid = next_tid & ~GNUNET_MESH_LOCAL_TUNNEL_ID_CLI;
6803   GNUNET_log (GNUNET_ERROR_TYPE_DEBUG, "CREATED TUNNEL %s [%x] (%x)\n",
6804               GNUNET_i2s (&my_full_id), t->id.tid, t->local_tid);
6805   t->peers = GNUNET_CONTAINER_multihashmap_create (32, GNUNET_NO);
6806
6807   GNUNET_log (GNUNET_ERROR_TYPE_DEBUG, "new tunnel created\n");
6808   GNUNET_SERVER_receive_done (client, GNUNET_OK);
6809   return;
6810 }
6811
6812
6813 /**
6814  * Handler for requests of deleting tunnels
6815  *
6816  * @param cls closure
6817  * @param client identification of the client
6818  * @param message the actual message
6819  */
6820 static void
6821 handle_local_tunnel_destroy (void *cls, struct GNUNET_SERVER_Client *client,
6822                              const struct GNUNET_MessageHeader *message)
6823 {
6824   struct GNUNET_MESH_TunnelMessage *tunnel_msg;
6825   struct MeshClient *c;
6826   struct MeshTunnel *t;
6827   MESH_TunnelNumber tid;
6828
6829   GNUNET_log (GNUNET_ERROR_TYPE_DEBUG,
6830               "Got a DESTROY TUNNEL from client!\n");
6831
6832   /* Sanity check for client registration */
6833   if (NULL == (c = client_get (client)))
6834   {
6835     GNUNET_break (0);
6836     GNUNET_SERVER_receive_done (client, GNUNET_SYSERR);
6837     return;
6838   }
6839   GNUNET_log (GNUNET_ERROR_TYPE_DEBUG, "  by client %u\n", c->id);
6840
6841   /* Message sanity check */
6842   if (sizeof (struct GNUNET_MESH_TunnelMessage) != ntohs (message->size))
6843   {
6844     GNUNET_break (0);
6845     GNUNET_SERVER_receive_done (client, GNUNET_SYSERR);
6846     return;
6847   }
6848
6849   tunnel_msg = (struct GNUNET_MESH_TunnelMessage *) message;
6850
6851   /* Retrieve tunnel */
6852   tid = ntohl (tunnel_msg->tunnel_id);
6853   t = tunnel_get_by_local_id(c, tid);
6854   if (NULL == t)
6855   {
6856     GNUNET_log (GNUNET_ERROR_TYPE_ERROR, "  tunnel %X not found\n", tid);
6857     GNUNET_break (0);
6858     GNUNET_SERVER_receive_done (client, GNUNET_SYSERR);
6859     return;
6860   }
6861   if (c != t->owner || tid >= GNUNET_MESH_LOCAL_TUNNEL_ID_SERV)
6862   {
6863     client_ignore_tunnel (c, t);
6864 #if 0
6865     // TODO: when to destroy incoming tunnel?
6866     if (t->nclients == 0)
6867     {
6868       GNUNET_assert (GNUNET_YES ==
6869                      GNUNET_CONTAINER_multihashmap_remove (incoming_tunnels,
6870                                                            &hash, t));
6871       GNUNET_assert (GNUNET_YES ==
6872                      GNUNET_CONTAINER_multihashmap_remove (t->peers,
6873                                                            &my_full_id.hashPubKey,
6874                                                            t));
6875     }
6876 #endif
6877     GNUNET_SERVER_receive_done (client, GNUNET_OK);
6878     return;
6879   }
6880   send_client_tunnel_disconnect(t, c);
6881   client_delete_tunnel(c, t);
6882
6883   /* Don't try to ACK the client about the tunnel_destroy multicast packet */
6884   t->owner = NULL;
6885   tunnel_send_destroy (t);
6886   t->destroy = GNUNET_YES;
6887   // The tunnel will be destroyed when the last message is transmitted.
6888   GNUNET_SERVER_receive_done (client, GNUNET_OK);
6889   return;
6890 }
6891
6892
6893 /**
6894  * Handler for requests of seeting tunnel's speed.
6895  *
6896  * @param cls Closure (unused).
6897  * @param client Identification of the client.
6898  * @param message The actual message.
6899  */
6900 static void
6901 handle_local_tunnel_speed (void *cls, struct GNUNET_SERVER_Client *client,
6902                            const struct GNUNET_MessageHeader *message)
6903 {
6904   struct GNUNET_MESH_TunnelMessage *tunnel_msg;
6905   struct MeshClient *c;
6906   struct MeshTunnel *t;
6907   MESH_TunnelNumber tid;
6908
6909   GNUNET_log (GNUNET_ERROR_TYPE_DEBUG,
6910               "Got a SPEED request from client!\n");
6911
6912   /* Sanity check for client registration */
6913   if (NULL == (c = client_get (client)))
6914   {
6915     GNUNET_break (0);
6916     GNUNET_SERVER_receive_done (client, GNUNET_SYSERR);
6917     return;
6918   }
6919
6920   GNUNET_log (GNUNET_ERROR_TYPE_DEBUG, "  by client %u\n", c->id);
6921
6922   tunnel_msg = (struct GNUNET_MESH_TunnelMessage *) message;
6923
6924   /* Retrieve tunnel */
6925   tid = ntohl (tunnel_msg->tunnel_id);
6926   t = tunnel_get_by_local_id(c, tid);
6927   if (NULL == t)
6928   {
6929     GNUNET_log (GNUNET_ERROR_TYPE_WARNING, "  tunnel %X not found\n", tid);
6930     GNUNET_break (0);
6931     GNUNET_SERVER_receive_done (client, GNUNET_SYSERR);
6932     return;
6933   }
6934
6935   switch (ntohs(message->type))
6936   {
6937       case GNUNET_MESSAGE_TYPE_MESH_LOCAL_TUNNEL_MIN:
6938           t->speed_min = GNUNET_YES;
6939           break;
6940       case GNUNET_MESSAGE_TYPE_MESH_LOCAL_TUNNEL_MAX:
6941           t->speed_min = GNUNET_NO;
6942           break;
6943       default:
6944           GNUNET_break (0);
6945   }
6946   GNUNET_SERVER_receive_done (client, GNUNET_OK);
6947 }
6948
6949
6950 /**
6951  * Handler for requests of seeting tunnel's buffering policy.
6952  *
6953  * @param cls Closure (unused).
6954  * @param client Identification of the client.
6955  * @param message The actual message.
6956  */
6957 static void
6958 handle_local_tunnel_buffer (void *cls, struct GNUNET_SERVER_Client *client,
6959                             const struct GNUNET_MessageHeader *message)
6960 {
6961   struct GNUNET_MESH_TunnelMessage *tunnel_msg;
6962   struct MeshClient *c;
6963   struct MeshTunnel *t;
6964   MESH_TunnelNumber tid;
6965
6966   GNUNET_log (GNUNET_ERROR_TYPE_DEBUG,
6967               "Got a BUFFER request from client!\n");
6968
6969   /* Sanity check for client registration */
6970   if (NULL == (c = client_get (client)))
6971   {
6972     GNUNET_break (0);
6973     GNUNET_SERVER_receive_done (client, GNUNET_SYSERR);
6974     return;
6975   }
6976   GNUNET_log (GNUNET_ERROR_TYPE_DEBUG, "  by client %u\n", c->id);
6977
6978   tunnel_msg = (struct GNUNET_MESH_TunnelMessage *) message;
6979
6980   /* Retrieve tunnel */
6981   tid = ntohl (tunnel_msg->tunnel_id);
6982   t = tunnel_get_by_local_id(c, tid);
6983   if (NULL == t)
6984   {
6985     GNUNET_log (GNUNET_ERROR_TYPE_ERROR, "  tunnel %X not found\n", tid);
6986     GNUNET_break (0);
6987     GNUNET_SERVER_receive_done (client, GNUNET_SYSERR);
6988     return;
6989   }
6990
6991   switch (ntohs(message->type))
6992   {
6993       case GNUNET_MESSAGE_TYPE_MESH_LOCAL_TUNNEL_BUFFER:
6994           t->nobuffer = GNUNET_NO;
6995           break;
6996       case GNUNET_MESSAGE_TYPE_MESH_LOCAL_TUNNEL_NOBUFFER:
6997           t->nobuffer = GNUNET_YES;
6998           break;
6999       default:
7000           GNUNET_break (0);
7001   }
7002
7003   GNUNET_SERVER_receive_done (client, GNUNET_OK);
7004 }
7005
7006
7007 /**
7008  * Handler for connection requests to new peers
7009  *
7010  * @param cls closure
7011  * @param client identification of the client
7012  * @param message the actual message (PeerControl)
7013  */
7014 static void
7015 handle_local_connect_add (void *cls, struct GNUNET_SERVER_Client *client,
7016                           const struct GNUNET_MessageHeader *message)
7017 {
7018   struct GNUNET_MESH_PeerControl *peer_msg;
7019   struct MeshPeerInfo *peer_info;
7020   struct MeshClient *c;
7021   struct MeshTunnel *t;
7022   MESH_TunnelNumber tid;
7023
7024   GNUNET_log (GNUNET_ERROR_TYPE_DEBUG, "Got connection request\n");
7025   /* Sanity check for client registration */
7026   if (NULL == (c = client_get (client)))
7027   {
7028     GNUNET_break (0);
7029     GNUNET_SERVER_receive_done (client, GNUNET_SYSERR);
7030     return;
7031   }
7032   GNUNET_log (GNUNET_ERROR_TYPE_DEBUG, "  by client %u\n", c->id);
7033
7034   peer_msg = (struct GNUNET_MESH_PeerControl *) message;
7035
7036   /* Sanity check for message size */
7037   if (sizeof (struct GNUNET_MESH_PeerControl) != ntohs (peer_msg->header.size))
7038   {
7039     GNUNET_break (0);
7040     GNUNET_SERVER_receive_done (client, GNUNET_SYSERR);
7041     return;
7042   }
7043
7044   /* Tunnel exists? */
7045   tid = ntohl (peer_msg->tunnel_id);
7046   t = tunnel_get_by_local_id (c, tid);
7047   if (NULL == t)
7048   {
7049     GNUNET_break (0);
7050     GNUNET_SERVER_receive_done (client, GNUNET_SYSERR);
7051     return;
7052   }
7053
7054   /* Does client own tunnel? */
7055   if (t->owner->handle != client)
7056   {
7057     GNUNET_break (0);
7058     GNUNET_SERVER_receive_done (client, GNUNET_SYSERR);
7059     return;
7060   }
7061   GNUNET_log (GNUNET_ERROR_TYPE_DEBUG, "     for %s\n",
7062               GNUNET_i2s (&peer_msg->peer));
7063   peer_info = peer_info_get (&peer_msg->peer);
7064
7065   tunnel_add_peer (t, peer_info);
7066   peer_info_connect (peer_info, t);
7067
7068   GNUNET_SERVER_receive_done (client, GNUNET_OK);
7069   return;
7070 }
7071
7072
7073 /**
7074  * Handler for disconnection requests of peers in a tunnel
7075  *
7076  * @param cls closure
7077  * @param client identification of the client
7078  * @param message the actual message (PeerControl)
7079  */
7080 static void
7081 handle_local_connect_del (void *cls, struct GNUNET_SERVER_Client *client,
7082                           const struct GNUNET_MessageHeader *message)
7083 {
7084   struct GNUNET_MESH_PeerControl *peer_msg;
7085   struct MeshPeerInfo *peer_info;
7086   struct MeshClient *c;
7087   struct MeshTunnel *t;
7088   MESH_TunnelNumber tid;
7089
7090   GNUNET_log (GNUNET_ERROR_TYPE_DEBUG, "Got a PEER DEL request\n");
7091   /* Sanity check for client registration */
7092   if (NULL == (c = client_get (client)))
7093   {
7094     GNUNET_break (0);
7095     GNUNET_SERVER_receive_done (client, GNUNET_SYSERR);
7096     return;
7097   }
7098   GNUNET_log (GNUNET_ERROR_TYPE_DEBUG, "  by client %u\n", c->id);
7099
7100   peer_msg = (struct GNUNET_MESH_PeerControl *) message;
7101
7102   /* Sanity check for message size */
7103   if (sizeof (struct GNUNET_MESH_PeerControl) != ntohs (peer_msg->header.size))
7104   {
7105     GNUNET_break (0);
7106     GNUNET_SERVER_receive_done (client, GNUNET_SYSERR);
7107     return;
7108   }
7109
7110   /* Tunnel exists? */
7111   tid = ntohl (peer_msg->tunnel_id);
7112   t = tunnel_get_by_local_id (c, tid);
7113   if (NULL == t)
7114   {
7115     GNUNET_break (0);
7116     GNUNET_SERVER_receive_done (client, GNUNET_SYSERR);
7117     return;
7118   }
7119   GNUNET_log (GNUNET_ERROR_TYPE_DEBUG, "  on tunnel %X\n", t->id.tid);
7120
7121   /* Does client own tunnel? */
7122   if (t->owner->handle != client)
7123   {
7124     GNUNET_break (0);
7125     GNUNET_SERVER_receive_done (client, GNUNET_SYSERR);
7126     return;
7127   }
7128
7129   GNUNET_log (GNUNET_ERROR_TYPE_DEBUG, "  for peer %s\n",
7130               GNUNET_i2s (&peer_msg->peer));
7131   /* Is the peer in the tunnel? */
7132   peer_info =
7133       GNUNET_CONTAINER_multihashmap_get (t->peers, &peer_msg->peer.hashPubKey);
7134   if (NULL == peer_info)
7135   {
7136     GNUNET_break (0);
7137     GNUNET_SERVER_receive_done (client, GNUNET_SYSERR);
7138     return;
7139   }
7140
7141   /* Ok, delete peer from tunnel */
7142   GNUNET_CONTAINER_multihashmap_remove_all (t->peers,
7143                                             &peer_msg->peer.hashPubKey);
7144
7145   send_destroy_path (t, peer_info->id);
7146   tunnel_delete_peer (t, peer_info->id);
7147   GNUNET_SERVER_receive_done (client, GNUNET_OK);
7148   return;
7149 }
7150
7151 /**
7152  * Handler for blacklist requests of peers in a tunnel
7153  *
7154  * @param cls closure
7155  * @param client identification of the client
7156  * @param message the actual message (PeerControl)
7157  * 
7158  * FIXME implement DHT block bloomfilter
7159  */
7160 static void
7161 handle_local_blacklist (void *cls, struct GNUNET_SERVER_Client *client,
7162                           const struct GNUNET_MessageHeader *message)
7163 {
7164   struct GNUNET_MESH_PeerControl *peer_msg;
7165   struct MeshClient *c;
7166   struct MeshTunnel *t;
7167   MESH_TunnelNumber tid;
7168
7169   GNUNET_log (GNUNET_ERROR_TYPE_DEBUG, "Got a PEER BLACKLIST request\n");
7170   /* Sanity check for client registration */
7171   if (NULL == (c = client_get (client)))
7172   {
7173     GNUNET_break (0);
7174     GNUNET_SERVER_receive_done (client, GNUNET_SYSERR);
7175     return;
7176   }
7177   GNUNET_log (GNUNET_ERROR_TYPE_DEBUG, "  by client %u\n", c->id);
7178
7179   peer_msg = (struct GNUNET_MESH_PeerControl *) message;
7180
7181   /* Sanity check for message size */
7182   if (sizeof (struct GNUNET_MESH_PeerControl) != ntohs (peer_msg->header.size))
7183   {
7184     GNUNET_break (0);
7185     GNUNET_SERVER_receive_done (client, GNUNET_SYSERR);
7186     return;
7187   }
7188
7189   /* Tunnel exists? */
7190   tid = ntohl (peer_msg->tunnel_id);
7191   t = tunnel_get_by_local_id (c, tid);
7192   if (NULL == t)
7193   {
7194     GNUNET_break (0);
7195     GNUNET_SERVER_receive_done (client, GNUNET_SYSERR);
7196     return;
7197   }
7198   GNUNET_log (GNUNET_ERROR_TYPE_DEBUG, "  on tunnel %X\n", t->id.tid);
7199
7200   GNUNET_array_append(t->blacklisted, t->nblacklisted,
7201                       GNUNET_PEER_intern(&peer_msg->peer));
7202 }
7203
7204
7205 /**
7206  * Handler for unblacklist requests of peers in a tunnel
7207  *
7208  * @param cls closure
7209  * @param client identification of the client
7210  * @param message the actual message (PeerControl)
7211  */
7212 static void
7213 handle_local_unblacklist (void *cls, struct GNUNET_SERVER_Client *client,
7214                           const struct GNUNET_MessageHeader *message)
7215 {
7216   struct GNUNET_MESH_PeerControl *peer_msg;
7217   struct MeshClient *c;
7218   struct MeshTunnel *t;
7219   MESH_TunnelNumber tid;
7220   GNUNET_PEER_Id pid;
7221   unsigned int i;
7222
7223   GNUNET_log (GNUNET_ERROR_TYPE_DEBUG, "Got a PEER UNBLACKLIST request\n");
7224   /* Sanity check for client registration */
7225   if (NULL == (c = client_get (client)))
7226   {
7227     GNUNET_break (0);
7228     GNUNET_SERVER_receive_done (client, GNUNET_SYSERR);
7229     return;
7230   }
7231   GNUNET_log (GNUNET_ERROR_TYPE_DEBUG, "  by client %u\n", c->id);
7232
7233   peer_msg = (struct GNUNET_MESH_PeerControl *) message;
7234
7235   /* Sanity check for message size */
7236   if (sizeof (struct GNUNET_MESH_PeerControl) != ntohs (peer_msg->header.size))
7237   {
7238     GNUNET_break (0);
7239     GNUNET_SERVER_receive_done (client, GNUNET_SYSERR);
7240     return;
7241   }
7242
7243   /* Tunnel exists? */
7244   tid = ntohl (peer_msg->tunnel_id);
7245   t = tunnel_get_by_local_id (c, tid);
7246   if (NULL == t)
7247   {
7248     GNUNET_break (0);
7249     GNUNET_SERVER_receive_done (client, GNUNET_SYSERR);
7250     return;
7251   }
7252   GNUNET_log (GNUNET_ERROR_TYPE_DEBUG, "  on tunnel %X\n", t->id.tid);
7253
7254   /* if peer is not known, complain */
7255   pid = GNUNET_PEER_search (&peer_msg->peer);
7256   if (0 == pid)
7257   {
7258     GNUNET_break (0);
7259     return;
7260   }
7261
7262   /* search and remove from list */
7263   for (i = 0; i < t->nblacklisted; i++)
7264   {
7265     if (t->blacklisted[i] == pid)
7266     {
7267       t->blacklisted[i] = t->blacklisted[t->nblacklisted - 1];
7268       GNUNET_array_grow (t->blacklisted, t->nblacklisted, t->nblacklisted - 1);
7269       return;
7270     }
7271   }
7272
7273   /* if peer hasn't been blacklisted, complain */
7274   GNUNET_break (0);
7275 }
7276
7277
7278 /**
7279  * Handler for connection requests to new peers by type
7280  *
7281  * @param cls closure
7282  * @param client identification of the client
7283  * @param message the actual message (ConnectPeerByType)
7284  */
7285 static void
7286 handle_local_connect_by_type (void *cls, struct GNUNET_SERVER_Client *client,
7287                               const struct GNUNET_MessageHeader *message)
7288 {
7289   struct GNUNET_MESH_ConnectPeerByType *connect_msg;
7290   struct MeshClient *c;
7291   struct MeshTunnel *t;
7292   struct GNUNET_HashCode hash;
7293   MESH_TunnelNumber tid;
7294
7295   GNUNET_log (GNUNET_ERROR_TYPE_DEBUG, "got connect by type request\n");
7296   /* Sanity check for client registration */
7297   if (NULL == (c = client_get (client)))
7298   {
7299     GNUNET_break (0);
7300     GNUNET_SERVER_receive_done (client, GNUNET_SYSERR);
7301     return;
7302   }
7303   GNUNET_log (GNUNET_ERROR_TYPE_DEBUG, "  by client %u\n", c->id);
7304
7305   connect_msg = (struct GNUNET_MESH_ConnectPeerByType *) message;
7306
7307   /* Sanity check for message size */
7308   if (sizeof (struct GNUNET_MESH_ConnectPeerByType) !=
7309       ntohs (connect_msg->header.size))
7310   {
7311     GNUNET_break (0);
7312     GNUNET_SERVER_receive_done (client, GNUNET_SYSERR);
7313     return;
7314   }
7315
7316   /* Tunnel exists? */
7317   tid = ntohl (connect_msg->tunnel_id);
7318   t = tunnel_get_by_local_id (c, tid);
7319   if (NULL == t)
7320   {
7321     GNUNET_break (0);
7322     GNUNET_SERVER_receive_done (client, GNUNET_SYSERR);
7323     return;
7324   }
7325
7326   /* Does client own tunnel? */
7327   if (t->owner->handle != client)
7328   {
7329     GNUNET_break (0);
7330     GNUNET_SERVER_receive_done (client, GNUNET_SYSERR);
7331     return;
7332   }
7333
7334   /* Do WE have the service? */
7335   t->type = ntohl (connect_msg->type);
7336   GNUNET_log (GNUNET_ERROR_TYPE_DEBUG, " type requested: %u\n", t->type);
7337   GNUNET_CRYPTO_hash (&t->type, sizeof (GNUNET_MESH_ApplicationType), &hash);
7338   if (GNUNET_CONTAINER_multihashmap_contains (applications, &hash) ==
7339       GNUNET_YES)
7340   {
7341     /* Yes! Fast forward, add ourselves to the tunnel and send the
7342      * good news to the client, and alert the destination client of
7343      * an incoming tunnel.
7344      *
7345      * FIXME send a path create to self, avoid code duplication
7346      */
7347     GNUNET_log (GNUNET_ERROR_TYPE_DEBUG, " available locally\n");
7348     GNUNET_CONTAINER_multihashmap_put (t->peers, &my_full_id.hashPubKey,
7349                                        peer_info_get (&my_full_id),
7350                                        GNUNET_CONTAINER_MULTIHASHMAPOPTION_UNIQUE_FAST);
7351
7352     GNUNET_log (GNUNET_ERROR_TYPE_DEBUG, " notifying client\n");
7353     send_client_peer_connected (t, myid);
7354     GNUNET_log (GNUNET_ERROR_TYPE_DEBUG, " Done\n");
7355     GNUNET_SERVER_receive_done (client, GNUNET_OK);
7356
7357     t->local_tid_dest = next_local_tid++;
7358     GNUNET_CRYPTO_hash (&t->local_tid_dest, sizeof (MESH_TunnelNumber), &hash);
7359     GNUNET_CONTAINER_multihashmap_put (incoming_tunnels, &hash, t,
7360                                        GNUNET_CONTAINER_MULTIHASHMAPOPTION_UNIQUE_FAST);
7361
7362     return;
7363   }
7364   /* Ok, lets find a peer offering the service */
7365   if (NULL != t->dht_get_type)
7366   {
7367     GNUNET_DHT_get_stop (t->dht_get_type);
7368   }
7369   GNUNET_log (GNUNET_ERROR_TYPE_DEBUG, " looking in DHT for %s\n",
7370               GNUNET_h2s (&hash));
7371   t->dht_get_type =
7372       GNUNET_DHT_get_start (dht_handle, 
7373                             GNUNET_BLOCK_TYPE_MESH_PEER_BY_TYPE,
7374                             &hash,
7375                             dht_replication_level,
7376                             GNUNET_DHT_RO_RECORD_ROUTE |
7377                             GNUNET_DHT_RO_DEMULTIPLEX_EVERYWHERE,
7378                             NULL, 0,
7379                             &dht_get_type_handler, t);
7380
7381   GNUNET_SERVER_receive_done (client, GNUNET_OK);
7382   return;
7383 }
7384
7385
7386 /**
7387  * Handler for connection requests to new peers by a string service description.
7388  *
7389  * @param cls closure
7390  * @param client identification of the client
7391  * @param message the actual message, which includes messages the client wants
7392  */
7393 static void
7394 handle_local_connect_by_string (void *cls, struct GNUNET_SERVER_Client *client,
7395                                 const struct GNUNET_MessageHeader *message)
7396 {
7397   struct GNUNET_MESH_ConnectPeerByString *msg;
7398   struct MeshRegexSearchContext *ctx;
7399   struct MeshRegexSearchInfo *info;
7400   struct GNUNET_DHT_GetHandle *get_h;
7401   struct GNUNET_HashCode key;
7402   struct MeshTunnel *t;
7403   struct MeshClient *c;
7404   MESH_TunnelNumber tid;
7405   const char *string;
7406   size_t size;
7407   size_t len;
7408   GNUNET_log (GNUNET_ERROR_TYPE_DEBUG,
7409               "Connect by string started\n");
7410   msg = (struct GNUNET_MESH_ConnectPeerByString *) message;
7411   size = htons (message->size);
7412
7413   /* Sanity check for client registration */
7414   if (NULL == (c = client_get (client)))
7415   {
7416     GNUNET_break (0);
7417     GNUNET_SERVER_receive_done (client, GNUNET_SYSERR);
7418     return;
7419   }
7420   GNUNET_log (GNUNET_ERROR_TYPE_DEBUG, "  by client %u\n", c->id);
7421
7422   /* Message size sanity check */
7423   if (sizeof(struct GNUNET_MESH_ConnectPeerByString) >= size)
7424   {
7425     GNUNET_break (0);
7426     GNUNET_SERVER_receive_done (client, GNUNET_SYSERR);
7427     return;
7428   }
7429
7430   /* Tunnel exists? */
7431   tid = ntohl (msg->tunnel_id);
7432   t = tunnel_get_by_local_id (c, tid);
7433   if (NULL == t)
7434   {
7435     GNUNET_break (0);
7436     GNUNET_SERVER_receive_done (client, GNUNET_SYSERR);
7437     return;
7438   }
7439
7440   /* Does client own tunnel? */
7441   if (t->owner->handle != client)
7442   {
7443     GNUNET_break (0);
7444     GNUNET_SERVER_receive_done (client, GNUNET_SYSERR);
7445     return;
7446   }
7447
7448   GNUNET_log (GNUNET_ERROR_TYPE_DEBUG,
7449               "  on tunnel %s [%u]\n",
7450               GNUNET_i2s(&my_full_id),
7451               t->id.tid);
7452
7453   /* Only one connect_by_string allowed at the same time! */
7454   /* FIXME: allow more, return handle at api level to cancel, document */
7455   if (NULL != t->regex_ctx)
7456   {
7457     GNUNET_break (0);
7458     GNUNET_SERVER_receive_done (client, GNUNET_SYSERR);
7459     return;
7460   }
7461
7462   /* Find string itself */
7463   len = size - sizeof(struct GNUNET_MESH_ConnectPeerByString);
7464   string = (const char *) &msg[1];
7465
7466   /* Initialize context */
7467   size = GNUNET_REGEX_get_first_key(string, len, &key);
7468   GNUNET_log (GNUNET_ERROR_TYPE_DEBUG,
7469               "  consumed %u bits out of %u\n", size, len);
7470   GNUNET_log (GNUNET_ERROR_TYPE_DEBUG,
7471               "  looking for %s\n", GNUNET_h2s (&key));
7472
7473   info = GNUNET_malloc (sizeof (struct MeshRegexSearchInfo));
7474   info->t = t;
7475   info->description = GNUNET_malloc (len + 1);
7476   memcpy (info->description, string, len);
7477   info->description[len] = '\0';
7478   info->dht_get_handles = GNUNET_CONTAINER_multihashmap_create(32, GNUNET_NO);
7479   info->dht_get_results = GNUNET_CONTAINER_multihashmap_create(32, GNUNET_NO);
7480   GNUNET_log (GNUNET_ERROR_TYPE_DEBUG, "   string: %s\n", info->description);
7481
7482   ctx = GNUNET_malloc (sizeof (struct MeshRegexSearchContext));
7483   ctx->position = size;
7484   ctx->info = info;
7485   t->regex_ctx = ctx;
7486
7487   GNUNET_array_append (info->contexts, info->n_contexts, ctx);
7488
7489   /* Start search in DHT */
7490   get_h = GNUNET_DHT_get_start (dht_handle,    /* handle */
7491                                 GNUNET_BLOCK_TYPE_MESH_REGEX, /* type */
7492                                 &key,     /* key to search */
7493                                 dht_replication_level, /* replication level */
7494                                 GNUNET_DHT_RO_DEMULTIPLEX_EVERYWHERE,
7495                                 NULL,       /* xquery */ // FIXME BLOOMFILTER
7496                                 0,     /* xquery bits */ // FIXME BLOOMFILTER SIZE
7497                                 &dht_get_string_handler, ctx);
7498
7499   GNUNET_break (GNUNET_OK ==
7500                 GNUNET_CONTAINER_multihashmap_put(info->dht_get_handles,
7501                                                   &key,
7502                                                   get_h,
7503                                                   GNUNET_CONTAINER_MULTIHASHMAPOPTION_UNIQUE_FAST));
7504
7505   GNUNET_SERVER_receive_done (client, GNUNET_OK);
7506   GNUNET_log (GNUNET_ERROR_TYPE_DEBUG, "connect by string processed\n");
7507 }
7508
7509
7510 /**
7511  * Handler for client traffic directed to one peer
7512  *
7513  * @param cls closure
7514  * @param client identification of the client
7515  * @param message the actual message
7516  */
7517 static void
7518 handle_local_unicast (void *cls, struct GNUNET_SERVER_Client *client,
7519                       const struct GNUNET_MessageHeader *message)
7520 {
7521   struct MeshClient *c;
7522   struct MeshTunnel *t;
7523   struct MeshPeerInfo *pi;
7524   struct GNUNET_MESH_Unicast *data_msg;
7525   MESH_TunnelNumber tid;
7526   size_t size;
7527
7528   GNUNET_log (GNUNET_ERROR_TYPE_DEBUG,
7529               "Got a unicast request from a client!\n");
7530
7531   /* Sanity check for client registration */
7532   if (NULL == (c = client_get (client)))
7533   {
7534     GNUNET_break (0);
7535     GNUNET_SERVER_receive_done (client, GNUNET_SYSERR);
7536     return;
7537   }
7538   GNUNET_log (GNUNET_ERROR_TYPE_DEBUG, "  by client %u\n", c->id);
7539
7540   data_msg = (struct GNUNET_MESH_Unicast *) message;
7541
7542   /* Sanity check for message size */
7543   size = ntohs (message->size);
7544   if (sizeof (struct GNUNET_MESH_Unicast) +
7545       sizeof (struct GNUNET_MessageHeader) > size)
7546   {
7547     GNUNET_break (0);
7548     GNUNET_SERVER_receive_done (client, GNUNET_SYSERR);
7549     return;
7550   }
7551
7552   /* Tunnel exists? */
7553   tid = ntohl (data_msg->tid);
7554   t = tunnel_get_by_local_id (c, tid);
7555   if (NULL == t)
7556   {
7557     GNUNET_break (0);
7558     GNUNET_SERVER_receive_done (client, GNUNET_SYSERR);
7559     return;
7560   }
7561
7562   /*  Is it a local tunnel? Then, does client own the tunnel? */
7563   if (t->owner->handle != client)
7564   {
7565     GNUNET_break (0);
7566     GNUNET_SERVER_receive_done (client, GNUNET_SYSERR);
7567     return;
7568   }
7569
7570   pi = GNUNET_CONTAINER_multihashmap_get (t->peers,
7571                                           &data_msg->destination.hashPubKey);
7572   /* Is the selected peer in the tunnel? */
7573   if (NULL == pi)
7574   {
7575     GNUNET_break (0);
7576     GNUNET_SERVER_receive_done (client, GNUNET_SYSERR);
7577     return;
7578   }
7579
7580   /* PID should be as expected */
7581   if (ntohl (data_msg->pid) != t->fwd_pid + 1)
7582   {
7583     GNUNET_break (0);
7584     GNUNET_log (GNUNET_ERROR_TYPE_WARNING,
7585               "Unicast PID, expected %u, got %u\n",
7586               t->fwd_pid + 1, ntohl (data_msg->pid));
7587     GNUNET_SERVER_receive_done (client, GNUNET_SYSERR);
7588     return;
7589   }
7590
7591   /* Ok, everything is correct, send the message
7592    * (pretend we got it from a mesh peer)
7593    */
7594   {
7595     /* Work around const limitation */
7596     char buf[ntohs (message->size)] GNUNET_ALIGN;
7597     struct GNUNET_MESH_Unicast *copy;
7598
7599     copy = (struct GNUNET_MESH_Unicast *) buf;
7600     memcpy (buf, data_msg, size);
7601     copy->oid = my_full_id;
7602     copy->tid = htonl (t->id.tid);
7603     copy->ttl = htonl (default_ttl);
7604     GNUNET_log (GNUNET_ERROR_TYPE_DEBUG,
7605                 "  calling generic handler...\n");
7606     handle_mesh_data_unicast (NULL, &my_full_id, &copy->header, NULL, 0);
7607   }
7608   GNUNET_log (GNUNET_ERROR_TYPE_DEBUG, "receive done OK\n");
7609   GNUNET_SERVER_receive_done (client, GNUNET_OK);
7610
7611   return;
7612 }
7613
7614
7615 /**
7616  * Handler for client traffic directed to the origin
7617  *
7618  * @param cls closure
7619  * @param client identification of the client
7620  * @param message the actual message
7621  */
7622 static void
7623 handle_local_to_origin (void *cls, struct GNUNET_SERVER_Client *client,
7624                         const struct GNUNET_MessageHeader *message)
7625 {
7626   struct GNUNET_MESH_ToOrigin *data_msg;
7627   struct MeshTunnelClientInfo *clinfo;
7628   struct MeshClient *c;
7629   struct MeshTunnel *t;
7630   MESH_TunnelNumber tid;
7631   size_t size;
7632
7633   GNUNET_log (GNUNET_ERROR_TYPE_DEBUG,
7634               "Got a ToOrigin request from a client!\n");
7635   /* Sanity check for client registration */
7636   if (NULL == (c = client_get (client)))
7637   {
7638     GNUNET_break (0);
7639     GNUNET_SERVER_receive_done (client, GNUNET_SYSERR);
7640     return;
7641   }
7642   GNUNET_log (GNUNET_ERROR_TYPE_DEBUG, "  by client %u\n", c->id);
7643
7644   data_msg = (struct GNUNET_MESH_ToOrigin *) message;
7645
7646   /* Sanity check for message size */
7647   size = ntohs (message->size);
7648   if (sizeof (struct GNUNET_MESH_ToOrigin) +
7649       sizeof (struct GNUNET_MessageHeader) > size)
7650   {
7651     GNUNET_break (0);
7652     GNUNET_SERVER_receive_done (client, GNUNET_SYSERR);
7653     return;
7654   }
7655
7656   /* Tunnel exists? */
7657   tid = ntohl (data_msg->tid);
7658   GNUNET_log (GNUNET_ERROR_TYPE_DEBUG, "  on tunnel %X\n", tid);
7659   if (tid < GNUNET_MESH_LOCAL_TUNNEL_ID_SERV)
7660   {
7661     GNUNET_break (0);
7662     GNUNET_SERVER_receive_done (client, GNUNET_SYSERR);
7663     return;
7664   }
7665   t = tunnel_get_by_local_id (c, tid);
7666   if (NULL == t)
7667   {
7668     GNUNET_log (GNUNET_ERROR_TYPE_WARNING, "Tunnel %X unknown.\n", tid);
7669     GNUNET_log (GNUNET_ERROR_TYPE_WARNING, "  for client %u.\n", c->id);
7670     GNUNET_break (0);
7671     GNUNET_SERVER_receive_done (client, GNUNET_SYSERR);
7672     return;
7673   }
7674
7675   /*  It should be sent by someone who has this as incoming tunnel. */
7676   if (GNUNET_NO == client_knows_tunnel (c, t))
7677   {
7678     GNUNET_break (0);
7679     GNUNET_SERVER_receive_done (client, GNUNET_SYSERR);
7680     return;
7681   }
7682
7683   /* PID should be as expected */
7684   clinfo = tunnel_get_client_fc (t, c);
7685   if (ntohl (data_msg->pid) != clinfo->bck_pid + 1)
7686   {
7687     GNUNET_break (0);
7688     GNUNET_log (GNUNET_ERROR_TYPE_WARNING,
7689                 "To Origin PID, expected %u, got %u\n",
7690                 clinfo->bck_pid + 1,
7691                 ntohl (data_msg->pid));
7692     GNUNET_SERVER_receive_done (client, GNUNET_SYSERR);
7693     return;
7694   }
7695   clinfo->bck_pid++;
7696
7697   /* Ok, everything is correct, send the message
7698    * (pretend we got it from a mesh peer)
7699    */
7700   {
7701     char buf[ntohs (message->size)] GNUNET_ALIGN;
7702     struct GNUNET_MESH_ToOrigin *copy;
7703
7704     /* Work around const limitation */
7705     copy = (struct GNUNET_MESH_ToOrigin *) buf;
7706     memcpy (buf, data_msg, size);
7707     GNUNET_PEER_resolve (t->id.oid, &copy->oid);
7708     copy->tid = htonl (t->id.tid);
7709     copy->ttl = htonl (default_ttl);
7710     copy->pid = htonl (++(t->bck_pid));
7711
7712     copy->sender = my_full_id;
7713     GNUNET_log (GNUNET_ERROR_TYPE_DEBUG,
7714                 "  calling generic handler...\n");
7715     handle_mesh_data_to_orig (NULL, &my_full_id, &copy->header, NULL, 0);
7716   }
7717   GNUNET_SERVER_receive_done (client, GNUNET_OK);
7718
7719   return;
7720 }
7721
7722
7723 /**
7724  * Handler for client traffic directed to all peers in a tunnel
7725  *
7726  * @param cls closure
7727  * @param client identification of the client
7728  * @param message the actual message
7729  */
7730 static void
7731 handle_local_multicast (void *cls, struct GNUNET_SERVER_Client *client,
7732                         const struct GNUNET_MessageHeader *message)
7733 {
7734   struct MeshClient *c;
7735   struct MeshTunnel *t;
7736   struct GNUNET_MESH_Multicast *data_msg;
7737   MESH_TunnelNumber tid;
7738
7739   GNUNET_log (GNUNET_ERROR_TYPE_DEBUG,
7740               "Got a multicast request from a client!\n");
7741
7742   /* Sanity check for client registration */
7743   if (NULL == (c = client_get (client)))
7744   {
7745     GNUNET_break (0);
7746     GNUNET_SERVER_receive_done (client, GNUNET_SYSERR);
7747     return;
7748   }
7749   GNUNET_log (GNUNET_ERROR_TYPE_DEBUG, "  by client %u\n", c->id);
7750
7751   data_msg = (struct GNUNET_MESH_Multicast *) message;
7752
7753   /* Sanity check for message size */
7754   if (sizeof (struct GNUNET_MESH_Multicast) +
7755       sizeof (struct GNUNET_MessageHeader) > ntohs (data_msg->header.size))
7756   {
7757     GNUNET_break (0);
7758     GNUNET_SERVER_receive_done (client, GNUNET_SYSERR);
7759     return;
7760   }
7761
7762   /* Tunnel exists? */
7763   tid = ntohl (data_msg->tid);
7764   t = tunnel_get_by_local_id (c, tid);
7765   if (NULL == t)
7766   {
7767     GNUNET_break (0);
7768     GNUNET_log (GNUNET_ERROR_TYPE_WARNING, "Tunnel %X unknown.\n", tid);
7769     GNUNET_log (GNUNET_ERROR_TYPE_WARNING, "  for client %u.\n", c->id);
7770     GNUNET_break (0);
7771     GNUNET_SERVER_receive_done (client, GNUNET_SYSERR);
7772     return;
7773   }
7774
7775   /* Does client own tunnel? */
7776   if (t->owner->handle != client)
7777   {
7778     GNUNET_break (0);
7779     GNUNET_SERVER_receive_done (client, GNUNET_SYSERR);
7780     return;
7781   }
7782
7783   /* PID should be as expected */
7784   if (ntohl (data_msg->pid) != t->fwd_pid + 1)
7785   {
7786     GNUNET_break (0);
7787     GNUNET_log (GNUNET_ERROR_TYPE_WARNING,
7788               "Multicast PID, expected %u, got %u\n",
7789               t->fwd_pid + 1, ntohl (data_msg->pid));
7790     GNUNET_SERVER_receive_done (client, GNUNET_SYSERR);
7791     return;
7792   }
7793
7794   {
7795     char buf[ntohs (message->size)] GNUNET_ALIGN;
7796     struct GNUNET_MESH_Multicast *copy;
7797
7798     copy = (struct GNUNET_MESH_Multicast *) buf;
7799     memcpy (buf, message, ntohs (message->size));
7800     copy->oid = my_full_id;
7801     copy->tid = htonl (t->id.tid);
7802     copy->ttl = htonl (default_ttl);
7803     GNUNET_assert (ntohl (copy->pid) == (t->fwd_pid + 1));
7804     GNUNET_log (GNUNET_ERROR_TYPE_DEBUG,
7805                 "  calling generic handler...\n");
7806     handle_mesh_data_multicast (client, &my_full_id, &copy->header, NULL, 0);
7807   }
7808
7809   GNUNET_SERVER_receive_done (t->owner->handle, GNUNET_OK);
7810   return;
7811 }
7812
7813
7814 /**
7815  * Handler for client's ACKs for payload traffic.
7816  *
7817  * @param cls Closure (unused).
7818  * @param client Identification of the client.
7819  * @param message The actual message.
7820  */
7821 static void
7822 handle_local_ack (void *cls, struct GNUNET_SERVER_Client *client,
7823                   const struct GNUNET_MessageHeader *message)
7824 {
7825   struct GNUNET_MESH_LocalAck *msg;
7826   struct MeshTunnel *t;
7827   struct MeshClient *c;
7828   MESH_TunnelNumber tid;
7829   uint32_t ack;
7830
7831   GNUNET_log (GNUNET_ERROR_TYPE_DEBUG, "Got a local ACK\n");
7832   /* Sanity check for client registration */
7833   if (NULL == (c = client_get (client)))
7834   {
7835     GNUNET_break (0);
7836     GNUNET_SERVER_receive_done (client, GNUNET_SYSERR);
7837     return;
7838   }
7839   GNUNET_log (GNUNET_ERROR_TYPE_DEBUG, "  by client %u\n", c->id);
7840
7841   msg = (struct GNUNET_MESH_LocalAck *) message;
7842
7843   /* Tunnel exists? */
7844   tid = ntohl (msg->tunnel_id);
7845   GNUNET_log (GNUNET_ERROR_TYPE_DEBUG, "  on tunnel %X\n", tid);
7846   t = tunnel_get_by_local_id (c, tid);
7847   if (NULL == t)
7848   {
7849     GNUNET_break (0);
7850     GNUNET_log (GNUNET_ERROR_TYPE_WARNING, "Tunnel %X unknown.\n", tid);
7851     GNUNET_log (GNUNET_ERROR_TYPE_WARNING, "  for client %u.\n", c->id);
7852     GNUNET_SERVER_receive_done (client, GNUNET_SYSERR);
7853     return;
7854   }
7855
7856   ack = ntohl (msg->max_pid);
7857   GNUNET_log (GNUNET_ERROR_TYPE_DEBUG, "  ack %u\n", ack);
7858
7859   /* Does client own tunnel? I.E: Is this and ACK for BCK traffic? */
7860   if (NULL != t->owner && t->owner->handle == client)
7861   {
7862     /* The client owns the tunnel, ACK is for data to_origin, send BCK ACK. */
7863     t->bck_ack = ack;
7864     tunnel_send_bck_ack(t, GNUNET_MESSAGE_TYPE_MESH_LOCAL_ACK);
7865   }
7866   else
7867   {
7868     /* The client doesn't own the tunnel, this ACK is for FWD traffic. */
7869     tunnel_set_client_fwd_ack (t, c, ack);
7870     tunnel_send_fwd_ack (t, GNUNET_MESSAGE_TYPE_MESH_LOCAL_ACK);
7871   }
7872
7873   GNUNET_SERVER_receive_done (client, GNUNET_OK);  
7874
7875   return;
7876 }
7877
7878
7879 /**
7880  * Functions to handle messages from clients
7881  */
7882 static struct GNUNET_SERVER_MessageHandler client_handlers[] = {
7883   {&handle_local_new_client, NULL,
7884    GNUNET_MESSAGE_TYPE_MESH_LOCAL_CONNECT, 0},
7885   {&handle_local_announce_regex, NULL,
7886    GNUNET_MESSAGE_TYPE_MESH_LOCAL_ANNOUNCE_REGEX, 0},
7887   {&handle_local_tunnel_create, NULL,
7888    GNUNET_MESSAGE_TYPE_MESH_LOCAL_TUNNEL_CREATE,
7889    sizeof (struct GNUNET_MESH_TunnelMessage)},
7890   {&handle_local_tunnel_destroy, NULL,
7891    GNUNET_MESSAGE_TYPE_MESH_LOCAL_TUNNEL_DESTROY,
7892    sizeof (struct GNUNET_MESH_TunnelMessage)},
7893   {&handle_local_tunnel_speed, NULL,
7894    GNUNET_MESSAGE_TYPE_MESH_LOCAL_TUNNEL_MIN,
7895    sizeof (struct GNUNET_MESH_TunnelMessage)},
7896   {&handle_local_tunnel_speed, NULL,
7897    GNUNET_MESSAGE_TYPE_MESH_LOCAL_TUNNEL_MAX,
7898    sizeof (struct GNUNET_MESH_TunnelMessage)},
7899   {&handle_local_tunnel_buffer, NULL,
7900    GNUNET_MESSAGE_TYPE_MESH_LOCAL_TUNNEL_BUFFER,
7901    sizeof (struct GNUNET_MESH_TunnelMessage)},
7902   {&handle_local_tunnel_buffer, NULL,
7903    GNUNET_MESSAGE_TYPE_MESH_LOCAL_TUNNEL_NOBUFFER,
7904    sizeof (struct GNUNET_MESH_TunnelMessage)},
7905   {&handle_local_connect_add, NULL,
7906    GNUNET_MESSAGE_TYPE_MESH_LOCAL_PEER_ADD,
7907    sizeof (struct GNUNET_MESH_PeerControl)},
7908   {&handle_local_connect_del, NULL,
7909    GNUNET_MESSAGE_TYPE_MESH_LOCAL_PEER_DEL,
7910    sizeof (struct GNUNET_MESH_PeerControl)},
7911   {&handle_local_blacklist, NULL,
7912    GNUNET_MESSAGE_TYPE_MESH_LOCAL_PEER_BLACKLIST,
7913    sizeof (struct GNUNET_MESH_PeerControl)},
7914   {&handle_local_unblacklist, NULL,
7915    GNUNET_MESSAGE_TYPE_MESH_LOCAL_PEER_UNBLACKLIST,
7916    sizeof (struct GNUNET_MESH_PeerControl)},
7917   {&handle_local_connect_by_type, NULL,
7918    GNUNET_MESSAGE_TYPE_MESH_LOCAL_PEER_ADD_BY_TYPE,
7919    sizeof (struct GNUNET_MESH_ConnectPeerByType)},
7920   {&handle_local_connect_by_string, NULL,
7921    GNUNET_MESSAGE_TYPE_MESH_LOCAL_PEER_ADD_BY_STRING, 0},
7922   {&handle_local_unicast, NULL,
7923    GNUNET_MESSAGE_TYPE_MESH_UNICAST, 0},
7924   {&handle_local_to_origin, NULL,
7925    GNUNET_MESSAGE_TYPE_MESH_TO_ORIGIN, 0},
7926   {&handle_local_multicast, NULL,
7927    GNUNET_MESSAGE_TYPE_MESH_MULTICAST, 0},
7928   {&handle_local_ack, NULL,
7929    GNUNET_MESSAGE_TYPE_MESH_LOCAL_ACK,
7930    sizeof (struct GNUNET_MESH_LocalAck)},
7931   {NULL, NULL, 0, 0}
7932 };
7933
7934
7935 /**
7936  * To be called on core init/fail.
7937  *
7938  * @param cls service closure
7939  * @param server handle to the server for this service
7940  * @param identity the public identity of this peer
7941  */
7942 static void
7943 core_init (void *cls, struct GNUNET_CORE_Handle *server,
7944            const struct GNUNET_PeerIdentity *identity)
7945 {
7946   static int i = 0;
7947   GNUNET_log (GNUNET_ERROR_TYPE_DEBUG, "Core init\n");
7948   core_handle = server;
7949   if (0 != memcmp (identity, &my_full_id, sizeof (my_full_id)) ||
7950       NULL == server)
7951   {
7952     GNUNET_log (GNUNET_ERROR_TYPE_ERROR, _("Wrong CORE service\n"));
7953     GNUNET_SCHEDULER_shutdown (); // Try gracefully
7954     if (10 < i++)
7955       GNUNET_abort(); // Try harder
7956   }
7957   return;
7958 }
7959
7960
7961 /**
7962  * Method called whenever a given peer connects.
7963  *
7964  * @param cls closure
7965  * @param peer peer identity this notification is about
7966  * @param atsi performance data for the connection
7967  * @param atsi_count number of records in 'atsi'
7968  */
7969 static void
7970 core_connect (void *cls, const struct GNUNET_PeerIdentity *peer,
7971               const struct GNUNET_ATS_Information *atsi,
7972               unsigned int atsi_count)
7973 {
7974   struct MeshPeerInfo *peer_info;
7975   struct MeshPeerPath *path;
7976
7977   DEBUG_CONN ("Peer connected\n");
7978   DEBUG_CONN ("     %s\n", GNUNET_i2s (&my_full_id));
7979   peer_info = peer_info_get (peer);
7980   if (myid == peer_info->id)
7981   {
7982     DEBUG_CONN ("     (self)\n");
7983     return;
7984   }
7985   else
7986   {
7987     DEBUG_CONN ("     %s\n", GNUNET_i2s (peer));
7988   }
7989   path = path_new (2);
7990   path->peers[0] = myid;
7991   path->peers[1] = peer_info->id;
7992   GNUNET_PEER_change_rc (myid, 1);
7993   GNUNET_PEER_change_rc (peer_info->id, 1);
7994   peer_info_add_path (peer_info, path, GNUNET_YES);
7995   GNUNET_STATISTICS_update (stats, "# peers", 1, GNUNET_NO);
7996   return;
7997 }
7998
7999
8000 /**
8001  * Method called whenever a peer disconnects.
8002  *
8003  * @param cls closure
8004  * @param peer peer identity this notification is about
8005  */
8006 static void
8007 core_disconnect (void *cls, const struct GNUNET_PeerIdentity *peer)
8008 {
8009   struct MeshPeerInfo *pi;
8010   struct MeshPeerQueue *q;
8011   struct MeshPeerQueue *n;
8012
8013   DEBUG_CONN ("Peer disconnected\n");
8014   pi = GNUNET_CONTAINER_multihashmap_get (peers, &peer->hashPubKey);
8015   if (NULL == pi)
8016   {
8017     GNUNET_break (0);
8018     return;
8019   }
8020   q = pi->queue_head;
8021   while (NULL != q)
8022   {
8023       n = q->next;
8024       /* TODO try to reroute this traffic instead */
8025       queue_destroy(q, GNUNET_YES);
8026       q = n;
8027   }
8028   if (NULL != pi->core_transmit)
8029   {
8030     GNUNET_CORE_notify_transmit_ready_cancel(pi->core_transmit);
8031     pi->core_transmit = NULL;
8032   }
8033   peer_info_remove_path (pi, pi->id, myid);
8034   if (myid == pi->id)
8035   {
8036     DEBUG_CONN ("     (self)\n");
8037   }
8038   GNUNET_STATISTICS_update (stats, "# peers", -1, GNUNET_NO);
8039   return;
8040 }
8041
8042
8043 /******************************************************************************/
8044 /************************      MAIN FUNCTIONS      ****************************/
8045 /******************************************************************************/
8046
8047 /**
8048  * Iterator over tunnel hash map entries to destroy the tunnel during shutdown.
8049  *
8050  * @param cls closure
8051  * @param key current key code
8052  * @param value value in the hash map
8053  * @return GNUNET_YES if we should continue to iterate,
8054  *         GNUNET_NO if not.
8055  */
8056 static int
8057 shutdown_tunnel (void *cls, const struct GNUNET_HashCode * key, void *value)
8058 {
8059   struct MeshTunnel *t = value;
8060
8061   tunnel_destroy (t);
8062   return GNUNET_YES;
8063 }
8064
8065 /**
8066  * Iterator over peer hash map entries to destroy the tunnel during shutdown.
8067  *
8068  * @param cls closure
8069  * @param key current key code
8070  * @param value value in the hash map
8071  * @return GNUNET_YES if we should continue to iterate,
8072  *         GNUNET_NO if not.
8073  */
8074 static int
8075 shutdown_peer (void *cls, const struct GNUNET_HashCode * key, void *value)
8076 {
8077   struct MeshPeerInfo *p = value;
8078   struct MeshPeerQueue *q;
8079   struct MeshPeerQueue *n;
8080
8081   q = p->queue_head;
8082   while (NULL != q)
8083   {
8084       n = q->next;
8085       if (q->peer == p)
8086       {
8087         queue_destroy(q, GNUNET_YES);
8088       }
8089       q = n;
8090   }
8091   peer_info_destroy (p);
8092   return GNUNET_YES;
8093 }
8094
8095
8096 /**
8097  * Task run during shutdown.
8098  *
8099  * @param cls unused
8100  * @param tc unused
8101  */
8102 static void
8103 shutdown_task (void *cls, const struct GNUNET_SCHEDULER_TaskContext *tc)
8104 {
8105   GNUNET_log (GNUNET_ERROR_TYPE_DEBUG, "shutting down\n");
8106
8107   if (core_handle != NULL)
8108   {
8109     GNUNET_CORE_disconnect (core_handle);
8110     core_handle = NULL;
8111   }
8112  if (NULL != keygen)
8113   {
8114     GNUNET_CRYPTO_rsa_key_create_stop (keygen);
8115     keygen = NULL;
8116   }
8117   GNUNET_CONTAINER_multihashmap_iterate (tunnels, &shutdown_tunnel, NULL);
8118   GNUNET_CONTAINER_multihashmap_iterate (peers, &shutdown_peer, NULL);
8119   if (dht_handle != NULL)
8120   {
8121     GNUNET_DHT_disconnect (dht_handle);
8122     dht_handle = NULL;
8123   }
8124   if (nc != NULL)
8125   {
8126     GNUNET_SERVER_notification_context_destroy (nc);
8127     nc = NULL;
8128   }
8129   if (GNUNET_SCHEDULER_NO_TASK != announce_id_task)
8130   {
8131     GNUNET_SCHEDULER_cancel (announce_id_task);
8132     announce_id_task = GNUNET_SCHEDULER_NO_TASK;
8133   }
8134   GNUNET_log (GNUNET_ERROR_TYPE_DEBUG, "shut down\n");
8135 }
8136
8137
8138 /**
8139  * Callback for hostkey read/generation
8140  *
8141  * @param cls NULL
8142  * @param pk the private key
8143  * @param emsg error message
8144  */
8145 static void
8146 key_generation_cb (void *cls,
8147                    struct GNUNET_CRYPTO_RsaPrivateKey *pk,
8148                    const char *emsg)
8149 {
8150   struct MeshPeerInfo *peer;
8151   struct MeshPeerPath *p;
8152
8153   keygen = NULL;  
8154   if (NULL == pk)
8155   {
8156     GNUNET_log (GNUNET_ERROR_TYPE_ERROR,
8157                 _("Mesh service could not access hostkey.  Exiting.\n"));
8158     GNUNET_SCHEDULER_shutdown ();
8159     return;
8160   }
8161   my_private_key = pk;
8162   GNUNET_CRYPTO_rsa_key_get_public (my_private_key, &my_public_key);
8163   GNUNET_CRYPTO_hash (&my_public_key, sizeof (my_public_key),
8164                       &my_full_id.hashPubKey);
8165   myid = GNUNET_PEER_intern (&my_full_id);
8166   GNUNET_log (GNUNET_ERROR_TYPE_INFO,
8167               "Mesh for peer [%s] starting\n",
8168               GNUNET_i2s(&my_full_id));
8169
8170 //   transport_handle = GNUNET_TRANSPORT_connect(c,
8171 //                                               &my_full_id,
8172 //                                               NULL,
8173 //                                               NULL,
8174 //                                               NULL,
8175 //                                               NULL);
8176
8177
8178
8179   next_tid = 0;
8180   next_local_tid = GNUNET_MESH_LOCAL_TUNNEL_ID_SERV;
8181
8182
8183   GNUNET_SERVER_add_handlers (server_handle, client_handlers);
8184   nc = GNUNET_SERVER_notification_context_create (server_handle, 1);
8185   GNUNET_SERVER_disconnect_notify (server_handle,
8186                                    &handle_local_client_disconnect, NULL);
8187
8188
8189   clients = NULL;
8190   clients_tail = NULL;
8191   next_client_id = 0;
8192
8193   announce_applications_task = GNUNET_SCHEDULER_NO_TASK;
8194   announce_id_task = GNUNET_SCHEDULER_add_now (&announce_id, cls);
8195
8196   /* Create a peer_info for the local peer */
8197   peer = peer_info_get (&my_full_id);
8198   p = path_new (1);
8199   p->peers[0] = myid;
8200   GNUNET_PEER_change_rc (myid, 1);
8201   peer_info_add_path (peer, p, GNUNET_YES);
8202   GNUNET_SERVER_resume (server_handle);
8203   GNUNET_log (GNUNET_ERROR_TYPE_DEBUG, "Mesh service running\n");
8204 }
8205
8206
8207 /**
8208  * Process mesh requests.
8209  *
8210  * @param cls closure
8211  * @param server the initialized server
8212  * @param c configuration to use
8213  */
8214 static void
8215 run (void *cls, struct GNUNET_SERVER_Handle *server,
8216      const struct GNUNET_CONFIGURATION_Handle *c)
8217 {
8218   char *keyfile;
8219
8220   GNUNET_log (GNUNET_ERROR_TYPE_DEBUG, "starting to run\n");
8221   server_handle = server;
8222   core_handle = GNUNET_CORE_connect (c, /* Main configuration */
8223                                      NULL,      /* Closure passed to MESH functions */
8224                                      &core_init,        /* Call core_init once connected */
8225                                      &core_connect,     /* Handle connects */
8226                                      &core_disconnect,  /* remove peers on disconnects */
8227                                      NULL,      /* Don't notify about all incoming messages */
8228                                      GNUNET_NO, /* For header only in notification */
8229                                      NULL,      /* Don't notify about all outbound messages */
8230                                      GNUNET_NO, /* For header-only out notification */
8231                                      core_handlers);    /* Register these handlers */
8232
8233   if (core_handle == NULL)
8234   {
8235     GNUNET_break (0);
8236     GNUNET_SCHEDULER_shutdown ();
8237     return;
8238   }
8239
8240   if (GNUNET_OK !=
8241       GNUNET_CONFIGURATION_get_value_filename (c, "GNUNETD", "HOSTKEY",
8242                                                &keyfile))
8243   {
8244     GNUNET_log (GNUNET_ERROR_TYPE_ERROR,
8245                 _
8246                 ("%s service is lacking key configuration settings (%s).  Exiting.\n"),
8247                 "mesh", "hostkey");
8248     GNUNET_SCHEDULER_shutdown ();
8249     return;
8250   }
8251
8252   if (GNUNET_OK !=
8253       GNUNET_CONFIGURATION_get_value_time (c, "MESH", "REFRESH_PATH_TIME",
8254                                            &refresh_path_time))
8255   {
8256     GNUNET_log (GNUNET_ERROR_TYPE_ERROR,
8257                 _
8258                 ("%s service is lacking key configuration settings (%s).  Exiting.\n"),
8259                 "mesh", "refresh path time");
8260     GNUNET_SCHEDULER_shutdown ();
8261     return;
8262   }
8263
8264   if (GNUNET_OK !=
8265       GNUNET_CONFIGURATION_get_value_time (c, "MESH", "APP_ANNOUNCE_TIME",
8266                                            &app_announce_time))
8267   {
8268     GNUNET_log (GNUNET_ERROR_TYPE_ERROR,
8269                 _
8270                 ("%s service is lacking key configuration settings (%s).  Exiting.\n"),
8271                 "mesh", "app announce time");
8272     GNUNET_SCHEDULER_shutdown ();
8273     return;
8274   }
8275   GNUNET_log (GNUNET_ERROR_TYPE_DEBUG, "APP_ANNOUNCE_TIME %llu ms\n", app_announce_time.rel_value);
8276
8277   if (GNUNET_OK !=
8278       GNUNET_CONFIGURATION_get_value_time (c, "MESH", "ID_ANNOUNCE_TIME",
8279                                            &id_announce_time))
8280   {
8281     GNUNET_log (GNUNET_ERROR_TYPE_ERROR,
8282                 _
8283                 ("%s service is lacking key configuration settings (%s).  Exiting.\n"),
8284                 "mesh", "id announce time");
8285     GNUNET_SCHEDULER_shutdown ();
8286     return;
8287   }
8288   else
8289   {
8290   }
8291
8292   if (GNUNET_OK !=
8293       GNUNET_CONFIGURATION_get_value_time (c, "MESH", "UNACKNOWLEDGED_WAIT",
8294                                            &unacknowledged_wait_time))
8295   {
8296     GNUNET_log (GNUNET_ERROR_TYPE_ERROR,
8297                 _
8298                 ("%s service is lacking key configuration settings (%s).  Exiting.\n"),
8299                 "mesh", "unacknowledged wait time");
8300     GNUNET_SCHEDULER_shutdown ();
8301     return;
8302   }
8303
8304   if (GNUNET_OK !=
8305       GNUNET_CONFIGURATION_get_value_time (c, "MESH", "CONNECT_TIMEOUT",
8306                                            &connect_timeout))
8307   {
8308     GNUNET_log (GNUNET_ERROR_TYPE_ERROR,
8309                 _
8310                 ("%s service is lacking key configuration settings (%s).  Exiting.\n"),
8311                 "mesh", "connect timeout");
8312     GNUNET_SCHEDULER_shutdown ();
8313     return;
8314   }
8315
8316   if (GNUNET_OK !=
8317       GNUNET_CONFIGURATION_get_value_number (c, "MESH", "MAX_MSGS_QUEUE",
8318                                              &max_msgs_queue))
8319   {
8320     GNUNET_log (GNUNET_ERROR_TYPE_ERROR,
8321                 _
8322                 ("%s service is lacking key configuration settings (%s).  Exiting.\n"),
8323                 "mesh", "max msgs queue");
8324     GNUNET_SCHEDULER_shutdown ();
8325     return;
8326   }
8327
8328   if (GNUNET_OK !=
8329       GNUNET_CONFIGURATION_get_value_number (c, "MESH", "MAX_TUNNELS",
8330                                              &max_tunnels))
8331   {
8332     GNUNET_log (GNUNET_ERROR_TYPE_ERROR,
8333                 _
8334                 ("%s service is lacking key configuration settings (%s).  Exiting.\n"),
8335                 "mesh", "max tunnels");
8336     GNUNET_SCHEDULER_shutdown ();
8337     return;
8338   }
8339
8340   if (GNUNET_OK !=
8341       GNUNET_CONFIGURATION_get_value_number (c, "MESH", "DEFAULT_TTL",
8342                                              &default_ttl))
8343   {
8344     GNUNET_log (GNUNET_ERROR_TYPE_WARNING,
8345                 _
8346                 ("%s service is lacking key configuration settings (%s). Using default (%u).\n"),
8347                 "mesh", "default ttl", 64);
8348     default_ttl = 64;
8349   }
8350
8351   if (GNUNET_OK !=
8352       GNUNET_CONFIGURATION_get_value_number (c, "MESH", "DHT_REPLICATION_LEVEL",
8353                                              &dht_replication_level))
8354   {
8355     GNUNET_log (GNUNET_ERROR_TYPE_WARNING,
8356                 _
8357                 ("%s service is lacking key configuration settings (%s). Using default (%u).\n"),
8358                 "mesh", "dht replication level", 10);
8359     dht_replication_level = 10;
8360   }
8361
8362   tunnels = GNUNET_CONTAINER_multihashmap_create (32, GNUNET_NO);
8363   incoming_tunnels = GNUNET_CONTAINER_multihashmap_create (32, GNUNET_NO);
8364   peers = GNUNET_CONTAINER_multihashmap_create (32, GNUNET_NO);
8365   applications = GNUNET_CONTAINER_multihashmap_create (32, GNUNET_NO);
8366   types = GNUNET_CONTAINER_multihashmap_create (32, GNUNET_NO);
8367
8368   dht_handle = GNUNET_DHT_connect (c, 64);
8369   if (NULL == dht_handle)
8370   {
8371     GNUNET_break (0);
8372   }
8373   stats = GNUNET_STATISTICS_create ("mesh", c);
8374
8375   GNUNET_SERVER_suspend (server_handle);
8376   /* Scheduled the task to clean up when shutdown is called */
8377   GNUNET_SCHEDULER_add_delayed (GNUNET_TIME_UNIT_FOREVER_REL, &shutdown_task,
8378                                 NULL);
8379   keygen = GNUNET_CRYPTO_rsa_key_create_start (keyfile, &key_generation_cb, NULL);
8380   GNUNET_free (keyfile);
8381 }
8382
8383
8384 /**
8385  * The main function for the mesh service.
8386  *
8387  * @param argc number of arguments from the command line
8388  * @param argv command line arguments
8389  * @return 0 ok, 1 on error
8390  */
8391 int
8392 main (int argc, char *const *argv)
8393 {
8394   int ret;
8395   int r;
8396
8397   GNUNET_log (GNUNET_ERROR_TYPE_DEBUG, "main()\n");
8398   r = GNUNET_SERVICE_run (argc, argv, "mesh", GNUNET_SERVICE_OPTION_NONE, &run,
8399                           NULL);
8400   ret = (GNUNET_OK == r) ? 0 : 1;
8401   GNUNET_log (GNUNET_ERROR_TYPE_DEBUG, "main() END\n");
8402
8403   INTERVAL_SHOW;
8404
8405   GNUNET_log (GNUNET_ERROR_TYPE_INFO,
8406               "Mesh for peer [%s] FWD ACKs %u, BCK ACKs %u\n",
8407               GNUNET_i2s(&my_full_id), debug_fwd_ack, debug_bck_ack);
8408
8409   return ret;
8410 }