- log fixes, limit kx to live tunnels
[oweals/gnunet.git] / src / mesh / gnunet-service-mesh_peer.c
1 /*
2      This file is part of GNUnet.
3      (C) 2013 Christian Grothoff (and other contributing authors)
4
5      GNUnet is free software; you can redistribute it and/or modify
6      it under the terms of the GNU General Public License as published
7      by the Free Software Foundation; either version 3, or (at your
8      option) any later version.
9
10      GNUnet is distributed in the hope that it will be useful, but
11      WITHOUT ANY WARRANTY; without even the implied warranty of
12      MERCHANTABILITY or FITNESS FOR A PARTICULAR PURPOSE.  See the GNU
13      General Public License for more details.
14
15      You should have received a copy of the GNU General Public License
16      along with GNUnet; see the file COPYING.  If not, write to the
17      Free Software Foundation, Inc., 59 Temple Place - Suite 330,
18      Boston, MA 02111-1307, USA.
19 */
20
21
22 #include "platform.h"
23 #include "gnunet_util_lib.h"
24
25 #include "gnunet_core_service.h"
26 #include "gnunet_statistics_service.h"
27
28 #include "mesh_protocol.h"
29
30 #include "gnunet-service-mesh_peer.h"
31 #include "gnunet-service-mesh_dht.h"
32 #include "gnunet-service-mesh_connection.h"
33 #include "gnunet-service-mesh_tunnel.h"
34 #include "mesh_path.h"
35
36 #define LOG(level, ...) GNUNET_log_from (level,"mesh-p2p",__VA_ARGS__)
37
38 /******************************************************************************/
39 /********************************   STRUCTS  **********************************/
40 /******************************************************************************/
41
42 /**
43  * Struct containing info about a queued transmission to this peer
44  */
45 struct MeshPeerQueue
46 {
47     /**
48       * DLL next
49       */
50   struct MeshPeerQueue *next;
51
52     /**
53       * DLL previous
54       */
55   struct MeshPeerQueue *prev;
56
57     /**
58      * Peer this transmission is directed to.
59      */
60   struct MeshPeer *peer;
61
62     /**
63      * Connection this message belongs to.
64      */
65   struct MeshConnection *c;
66
67     /**
68      * Is FWD in c?
69      */
70   int fwd;
71
72     /**
73      * Pointer to info stucture used as cls.
74      */
75   void *cls;
76
77     /**
78      * Type of message
79      */
80   uint16_t type;
81
82     /**
83      * Size of the message
84      */
85   size_t size;
86
87     /**
88      * Set when this message starts waiting for CORE.
89      */
90   struct GNUNET_TIME_Absolute start_waiting;
91
92     /**
93      * Function to call on sending.
94      */
95   GMP_sent callback;
96
97     /**
98      * Closure for callback.
99      */
100   void *callback_cls;
101 };
102
103 /**
104  * Struct containing all information regarding a given peer
105  */
106 struct MeshPeer
107 {
108     /**
109      * ID of the peer
110      */
111   GNUNET_PEER_Id id;
112
113     /**
114      * Last time we heard from this peer
115      */
116   struct GNUNET_TIME_Absolute last_contact;
117
118     /**
119      * Paths to reach the peer, ordered by ascending hop count
120      */
121   struct MeshPeerPath *path_head;
122
123     /**
124      * Paths to reach the peer, ordered by ascending hop count
125      */
126   struct MeshPeerPath *path_tail;
127
128     /**
129      * Handle to stop the DHT search for paths to this peer
130      */
131   struct GMD_search_handle *search_h;
132
133     /**
134      * Tunnel to this peer, if any.
135      */
136   struct MeshTunnel3 *tunnel;
137
138     /**
139      * Connections that go through this peer, indexed by tid;
140      */
141   struct GNUNET_CONTAINER_MultiHashMap *connections;
142
143     /**
144      * Handle for queued transmissions
145      */
146   struct GNUNET_CORE_TransmitHandle *core_transmit;
147
148   /**
149    * Transmission queue to core DLL head
150    */
151   struct MeshPeerQueue *queue_head;
152
153   /**
154    * Transmission queue to core DLL tail
155    */
156   struct MeshPeerQueue *queue_tail;
157
158   /**
159    * How many messages are in the queue to this peer.
160    */
161   unsigned int queue_n;
162 };
163
164
165 /******************************************************************************/
166 /*******************************   GLOBALS  ***********************************/
167 /******************************************************************************/
168
169 /**
170  * Global handle to the statistics service.
171  */
172 extern struct GNUNET_STATISTICS_Handle *stats;
173
174 /**
175  * Local peer own ID (full value).
176  */
177 extern struct GNUNET_PeerIdentity my_full_id;
178
179 /**
180  * Local peer own ID (short)
181  */
182 extern GNUNET_PEER_Id myid;
183
184 /**
185  * Peers known, indexed by PeerIdentity (MeshPeer).
186  */
187 static struct GNUNET_CONTAINER_MultiPeerMap *peers;
188
189 /**
190  * How many peers do we want to remember?
191  */
192 static unsigned long long max_peers;
193
194 /**
195  * Percentage of messages that will be dropped (for test purposes only).
196  */
197 static unsigned long long drop_percent;
198
199 /**
200  * Handle to communicate with core.
201  */
202 static struct GNUNET_CORE_Handle *core_handle;
203
204
205 /******************************************************************************/
206 /***************************** CORE CALLBACKS *********************************/
207 /******************************************************************************/
208
209
210 /**
211  * Iterator to notify all connections of a broken link. Mark connections
212  * to destroy after all traffic has been sent.
213  *
214  * @param cls Closure (peer disconnected).
215  * @param key Current key code (peer id).
216  * @param value Value in the hash map (connection).
217  *
218  * @return #GNUNET_YES to continue to iterate.
219  */
220 static int
221 notify_broken (void *cls,
222                const struct GNUNET_HashCode *key,
223                void *value)
224 {
225   struct MeshPeer *peer = cls;
226   struct MeshConnection *c = value;
227
228   LOG (GNUNET_ERROR_TYPE_DEBUG, "  notifying %s due to %s\n",
229        GMC_2s (c), GMP_2s (peer));
230   GMC_notify_broken (c, peer);
231
232   return GNUNET_YES;
233 }
234
235
236 /**
237  * Method called whenever a given peer connects.
238  *
239  * @param cls closure
240  * @param peer peer identity this notification is about
241  */
242 static void
243 core_connect (void *cls, const struct GNUNET_PeerIdentity *peer)
244 {
245   struct MeshPeer *mp;
246   struct MeshPeerPath *path;
247
248   LOG (GNUNET_ERROR_TYPE_DEBUG, "Peer connected\n");
249   LOG (GNUNET_ERROR_TYPE_DEBUG, "     %s\n", GNUNET_i2s (&my_full_id));
250   mp = GMP_get (peer);
251   if (myid == mp->id)
252   {
253     LOG (GNUNET_ERROR_TYPE_DEBUG, "     (self)\n");
254     path = path_new (1);
255   }
256   else
257   {
258     LOG (GNUNET_ERROR_TYPE_DEBUG, "     %s\n", GNUNET_i2s (peer));
259     path = path_new (2);
260     path->peers[1] = mp->id;
261     GNUNET_PEER_change_rc (mp->id, 1);
262     GNUNET_STATISTICS_update (stats, "# peers", 1, GNUNET_NO);
263   }
264   path->peers[0] = myid;
265   GNUNET_PEER_change_rc (myid, 1);
266   GMP_add_path (mp, path, GNUNET_YES);
267
268   mp->connections = GNUNET_CONTAINER_multihashmap_create (32, GNUNET_YES);
269   return;
270 }
271
272
273 /**
274  * Method called whenever a peer disconnects.
275  *
276  * @param cls closure
277  * @param peer peer identity this notification is about
278  */
279 static void
280 core_disconnect (void *cls, const struct GNUNET_PeerIdentity *peer)
281 {
282   struct MeshPeer *p;
283
284   LOG (GNUNET_ERROR_TYPE_DEBUG, "Peer disconnected\n");
285   p = GNUNET_CONTAINER_multipeermap_get (peers, peer);
286   if (NULL == p)
287   {
288     GNUNET_break (0);
289     return;
290   }
291   if (myid == p->id)
292     LOG (GNUNET_ERROR_TYPE_DEBUG, "     (self: %s)\n", GMP_2s (p));
293   else
294     LOG (GNUNET_ERROR_TYPE_DEBUG, "     %s\n", GMP_2s (p));
295
296
297   GNUNET_CONTAINER_multihashmap_iterate (p->connections, &notify_broken, p);
298   GNUNET_CONTAINER_multihashmap_destroy (p->connections);
299   p->connections = NULL;
300   if (NULL != p->core_transmit)
301     {
302       GNUNET_CORE_notify_transmit_ready_cancel (p->core_transmit);
303       p->core_transmit = NULL;
304     }
305   GNUNET_STATISTICS_update (stats, "# peers", -1, GNUNET_NO);
306
307   return;
308 }
309
310
311 /**
312  * Functions to handle messages from core
313  */
314 static struct GNUNET_CORE_MessageHandler core_handlers[] = {
315   {&GMC_handle_create, GNUNET_MESSAGE_TYPE_MESH_CONNECTION_CREATE,
316     0},
317   {&GMC_handle_confirm, GNUNET_MESSAGE_TYPE_MESH_CONNECTION_ACK,
318     sizeof (struct GNUNET_MESH_ConnectionACK)},
319   {&GMC_handle_broken, GNUNET_MESSAGE_TYPE_MESH_CONNECTION_BROKEN,
320     sizeof (struct GNUNET_MESH_ConnectionBroken)},
321   {&GMC_handle_destroy, GNUNET_MESSAGE_TYPE_MESH_CONNECTION_DESTROY,
322     sizeof (struct GNUNET_MESH_ConnectionDestroy)},
323   {&GMC_handle_keepalive, GNUNET_MESSAGE_TYPE_MESH_KEEPALIVE,
324     sizeof (struct GNUNET_MESH_ConnectionKeepAlive)},
325   {&GMC_handle_ack, GNUNET_MESSAGE_TYPE_MESH_ACK,
326     sizeof (struct GNUNET_MESH_ACK)},
327   {&GMC_handle_poll, GNUNET_MESSAGE_TYPE_MESH_POLL,
328     sizeof (struct GNUNET_MESH_Poll)},
329   {&GMC_handle_encrypted, GNUNET_MESSAGE_TYPE_MESH_ENCRYPTED, 0},
330   {&GMC_handle_kx, GNUNET_MESSAGE_TYPE_MESH_KX, 0},
331   {NULL, 0, 0}
332 };
333
334
335 /**
336  * To be called on core init/fail.
337  *
338  * @param cls Closure (config)
339  * @param identity the public identity of this peer
340  */
341 static void
342 core_init (void *cls,
343            const struct GNUNET_PeerIdentity *identity)
344 {
345   const struct GNUNET_CONFIGURATION_Handle *c = cls;
346   static int i = 0;
347
348   LOG (GNUNET_ERROR_TYPE_DEBUG, "Core init\n");
349   if (0 != memcmp (identity, &my_full_id, sizeof (my_full_id)))
350   {
351     LOG (GNUNET_ERROR_TYPE_ERROR, _("Wrong CORE service\n"));
352     LOG (GNUNET_ERROR_TYPE_ERROR, " core id %s\n", GNUNET_i2s (identity));
353     LOG (GNUNET_ERROR_TYPE_ERROR, " my id %s\n", GNUNET_i2s (&my_full_id));
354     GNUNET_CORE_disconnect (core_handle);
355     core_handle = GNUNET_CORE_connect (c, /* Main configuration */
356                                        NULL,      /* Closure passed to MESH functions */
357                                        &core_init,        /* Call core_init once connected */
358                                        &core_connect,     /* Handle connects */
359                                        &core_disconnect,  /* remove peers on disconnects */
360                                        NULL,      /* Don't notify about all incoming messages */
361                                        GNUNET_NO, /* For header only in notification */
362                                        NULL,      /* Don't notify about all outbound messages */
363                                        GNUNET_NO, /* For header-only out notification */
364                                        core_handlers);    /* Register these handlers */
365     if (10 < i++)
366       GNUNET_abort();
367   }
368   GML_start ();
369   return;
370 }
371
372 /**
373   * Core callback to write a pre-constructed data packet to core buffer
374   *
375   * @param cls Closure (MeshTransmissionDescriptor with data in "data" member).
376   * @param size Number of bytes available in buf.
377   * @param buf Where the to write the message.
378   *
379   * @return number of bytes written to buf
380   */
381 static size_t
382 send_core_data_raw (void *cls, size_t size, void *buf)
383 {
384   struct GNUNET_MessageHeader *msg = cls;
385   size_t total_size;
386
387   GNUNET_assert (NULL != msg);
388   total_size = ntohs (msg->size);
389
390   if (total_size > size)
391   {
392     GNUNET_break (0);
393     return 0;
394   }
395   memcpy (buf, msg, total_size);
396   GNUNET_free (cls);
397   return total_size;
398 }
399
400
401 /**
402  * Function to send a create connection message to a peer.
403  *
404  * @param c Connection to create.
405  * @param size number of bytes available in buf
406  * @param buf where the callee should write the message
407  * @return number of bytes written to buf
408  */
409 static size_t
410 send_core_connection_create (struct MeshConnection *c, size_t size, void *buf)
411 {
412   struct GNUNET_MESH_ConnectionCreate *msg;
413   struct GNUNET_PeerIdentity *peer_ptr;
414   const struct MeshPeerPath *p = GMC_get_path (c);
415   size_t size_needed;
416   int i;
417
418   if (NULL == p)
419     return 0;
420
421   LOG (GNUNET_ERROR_TYPE_DEBUG, "Sending CONNECTION CREATE...\n");
422   size_needed =
423       sizeof (struct GNUNET_MESH_ConnectionCreate) +
424       p->length * sizeof (struct GNUNET_PeerIdentity);
425
426   if (size < size_needed || NULL == buf)
427   {
428     GNUNET_break (0);
429     return 0;
430   }
431   msg = (struct GNUNET_MESH_ConnectionCreate *) buf;
432   msg->header.size = htons (size_needed);
433   msg->header.type = htons (GNUNET_MESSAGE_TYPE_MESH_CONNECTION_CREATE);
434   msg->cid = *GMC_get_id (c);
435
436   peer_ptr = (struct GNUNET_PeerIdentity *) &msg[1];
437   for (i = 0; i < p->length; i++)
438   {
439     GNUNET_PEER_resolve (p->peers[i], peer_ptr++);
440   }
441
442   LOG (GNUNET_ERROR_TYPE_DEBUG,
443        "CONNECTION CREATE (%u bytes long) sent!\n",
444        size_needed);
445   return size_needed;
446 }
447
448
449 /**
450  * Creates a path ack message in buf and frees all unused resources.
451  *
452  * @param c Connection to send an ACK on.
453  * @param size number of bytes available in buf
454  * @param buf where the callee should write the message
455  *
456  * @return number of bytes written to buf
457  */
458 static size_t
459 send_core_connection_ack (struct MeshConnection *c, size_t size, void *buf)
460 {
461   struct GNUNET_MESH_ConnectionACK *msg = buf;
462
463   LOG (GNUNET_ERROR_TYPE_DEBUG, "Sending CONNECTION ACK...\n");
464   if (sizeof (struct GNUNET_MESH_ConnectionACK) > size)
465   {
466     GNUNET_break (0);
467     return 0;
468   }
469   msg->header.size = htons (sizeof (struct GNUNET_MESH_ConnectionACK));
470   msg->header.type = htons (GNUNET_MESSAGE_TYPE_MESH_CONNECTION_ACK);
471   msg->cid = *GMC_get_id (c);
472   msg->reserved = 0;
473
474   /* TODO add signature */
475
476   LOG (GNUNET_ERROR_TYPE_DEBUG, "CONNECTION ACK sent!\n");
477   return sizeof (struct GNUNET_MESH_ConnectionACK);
478 }
479
480
481 /******************************************************************************/
482 /********************************   STATIC  ***********************************/
483 /******************************************************************************/
484
485 /**
486  * Iterator over tunnel hash map entries to destroy the tunnel during shutdown.
487  *
488  * @param cls closure
489  * @param key current key code
490  * @param value value in the hash map
491  * @return #GNUNET_YES if we should continue to iterate,
492  *         #GNUNET_NO if not.
493  */
494 static int
495 shutdown_tunnel (void *cls,
496                  const struct GNUNET_PeerIdentity *key,
497                  void *value)
498 {
499   struct MeshPeer *p = value;
500   struct MeshTunnel3 *t = p->tunnel;
501
502   if (NULL != t)
503     GMT_destroy (t);
504   return GNUNET_YES;
505 }
506
507
508
509 /**
510  * Destroy the peer_info and free any allocated resources linked to it
511  *
512  * @param peer The peer_info to destroy.
513  *
514  * @return GNUNET_OK on success
515  */
516 static int
517 peer_destroy (struct MeshPeer *peer)
518 {
519   struct GNUNET_PeerIdentity id;
520   struct MeshPeerPath *p;
521   struct MeshPeerPath *nextp;
522
523   GNUNET_PEER_resolve (peer->id, &id);
524   GNUNET_PEER_change_rc (peer->id, -1);
525
526   LOG (GNUNET_ERROR_TYPE_WARNING, "destroying peer %s\n", GNUNET_i2s (&id));
527
528   if (GNUNET_YES !=
529     GNUNET_CONTAINER_multipeermap_remove (peers, &id, peer))
530   {
531     GNUNET_break (0);
532     LOG (GNUNET_ERROR_TYPE_WARNING, " not in peermap!!\n");
533   }
534   if (NULL != peer->search_h)
535   {
536     GMD_search_stop (peer->search_h);
537   }
538   p = peer->path_head;
539   while (NULL != p)
540   {
541     nextp = p->next;
542     GNUNET_CONTAINER_DLL_remove (peer->path_head, peer->path_tail, p);
543     path_destroy (p);
544     p = nextp;
545   }
546   GMT_destroy_empty (peer->tunnel);
547   GNUNET_free (peer);
548   return GNUNET_OK;
549 }
550
551
552 /**
553  * Returns if peer is used (has a tunnel or is neighbor).
554  *
555  * @param peer Peer to check.
556  *
557  * @return #GNUNET_YES if peer is in use.
558  */
559 static int
560 peer_is_used (struct MeshPeer *peer)
561 {
562   struct MeshPeerPath *p;
563
564   if (NULL != peer->tunnel)
565     return GNUNET_YES;
566
567   for (p = peer->path_head; NULL != p; p = p->next)
568   {
569     if (p->length < 3)
570       return GNUNET_YES;
571   }
572     return GNUNET_NO;
573 }
574
575
576 /**
577  * Iterator over all the peers to get the oldest timestamp.
578  *
579  * @param cls Closure (unsued).
580  * @param key ID of the peer.
581  * @param value Peer_Info of the peer.
582  */
583 static int
584 peer_get_oldest (void *cls,
585                  const struct GNUNET_PeerIdentity *key,
586                  void *value)
587 {
588   struct MeshPeer *p = value;
589   struct GNUNET_TIME_Absolute *abs = cls;
590
591   /* Don't count active peers */
592   if (GNUNET_YES == peer_is_used (p))
593     return GNUNET_YES;
594
595   if (abs->abs_value_us < p->last_contact.abs_value_us)
596     abs->abs_value_us = p->last_contact.abs_value_us;
597
598   return GNUNET_YES;
599 }
600
601
602 /**
603  * Iterator over all the peers to remove the oldest entry.
604  *
605  * @param cls Closure (unsued).
606  * @param key ID of the peer.
607  * @param value Peer_Info of the peer.
608  */
609 static int
610 peer_timeout (void *cls,
611               const struct GNUNET_PeerIdentity *key,
612               void *value)
613 {
614   struct MeshPeer *p = value;
615   struct GNUNET_TIME_Absolute *abs = cls;
616
617   LOG (GNUNET_ERROR_TYPE_WARNING,
618        "peer %s timeout\n", GNUNET_i2s (key));
619
620   if (p->last_contact.abs_value_us == abs->abs_value_us &&
621       GNUNET_NO == peer_is_used (p))
622   {
623     peer_destroy (p);
624     return GNUNET_NO;
625   }
626     return GNUNET_YES;
627 }
628
629
630 /**
631  * Delete oldest unused peer.
632  */
633 static void
634 peer_delete_oldest (void)
635 {
636   struct GNUNET_TIME_Absolute abs;
637
638   abs = GNUNET_TIME_UNIT_FOREVER_ABS;
639
640   GNUNET_CONTAINER_multipeermap_iterate (peers,
641                                          &peer_get_oldest,
642                                          &abs);
643   GNUNET_CONTAINER_multipeermap_iterate (peers,
644                                          &peer_timeout,
645                                          &abs);
646 }
647
648
649 /**
650  * Choose the best (yet unused) path towards a peer,
651  * considering the tunnel properties.
652  *
653  * @param peer The destination peer.
654  *
655  * @return Best current known path towards the peer, if any.
656  */
657 static struct MeshPeerPath *
658 peer_get_best_path (const struct MeshPeer *peer)
659 {
660   struct MeshPeerPath *best_p;
661   struct MeshPeerPath *p;
662   unsigned int best_cost;
663   unsigned int cost;
664
665   best_cost = UINT_MAX;
666   best_p = NULL;
667   for (p = peer->path_head; NULL != p; p = p->next)
668   {
669     if (GNUNET_YES == GMT_is_path_used (peer->tunnel, p))
670       continue; /* If path is already in use, skip it. */
671
672     if ((cost = GMT_get_path_cost (peer->tunnel, p)) < best_cost)
673     {
674       best_cost = cost;
675       best_p = p;
676     }
677   }
678   return best_p;
679 }
680
681
682 static int
683 queue_is_sendable (struct MeshPeerQueue *q)
684 {
685   /* Is PID-independent? */
686   switch (q->type)
687   {
688     case GNUNET_MESSAGE_TYPE_MESH_ACK:
689     case GNUNET_MESSAGE_TYPE_MESH_POLL:
690     case GNUNET_MESSAGE_TYPE_MESH_KX:
691     case GNUNET_MESSAGE_TYPE_MESH_CONNECTION_CREATE:
692     case GNUNET_MESSAGE_TYPE_MESH_CONNECTION_ACK:
693     case GNUNET_MESSAGE_TYPE_MESH_CONNECTION_DESTROY:
694     case GNUNET_MESSAGE_TYPE_MESH_CONNECTION_BROKEN:
695     case GNUNET_MESSAGE_TYPE_MESH_KEEPALIVE:
696       return GNUNET_YES;
697
698     case GNUNET_MESSAGE_TYPE_MESH_ENCRYPTED:
699       break;
700
701     default:
702       GNUNET_break (0);
703   }
704
705   if (GMC_is_sendable (q->c, q->fwd))
706     return GNUNET_YES;
707
708   return GNUNET_NO;
709 }
710
711
712 /**
713  * Get first sendable message.
714  *
715  * @param peer The destination peer.
716  *
717  * @return Best current known path towards the peer, if any.
718  */
719 static struct MeshPeerQueue *
720 peer_get_first_message (const struct MeshPeer *peer)
721 {
722   struct MeshPeerQueue *q;
723
724   for (q = peer->queue_head; NULL != q; q = q->next)
725   {
726     if (queue_is_sendable (q))
727       return q;
728   }
729
730   return NULL;
731 }
732
733
734 /**
735  * Function to process paths received for a new peer addition. The recorded
736  * paths form the initial tunnel, which can be optimized later.
737  * Called on each result obtained for the DHT search.
738  *
739  * @param cls closure
740  * @param path
741  */
742 static void
743 search_handler (void *cls, const struct MeshPeerPath *path)
744 {
745   struct MeshPeer *peer = cls;
746   unsigned int connection_count;
747
748   GMP_add_path_to_all (path, GNUNET_NO);
749
750   /* Count connections */
751   connection_count = GMT_count_connections (peer->tunnel);
752
753   /* If we already have 3 (or more (?!)) connections, it's enough */
754   if (3 <= connection_count)
755     return;
756
757   if (MESH_TUNNEL3_SEARCHING == GMT_get_cstate (peer->tunnel))
758   {
759     LOG (GNUNET_ERROR_TYPE_DEBUG, " ... connect!\n");
760     GMP_connect (peer);
761   }
762   return;
763 }
764
765
766 /**
767  * Core callback to write a queued packet to core buffer
768  *
769  * @param cls Closure (peer info).
770  * @param size Number of bytes available in buf.
771  * @param buf Where the to write the message.
772  *
773  * @return number of bytes written to buf
774  */
775 static size_t
776 queue_send (void *cls, size_t size, void *buf)
777 {
778   struct MeshPeer *peer = cls;
779   struct MeshConnection *c;
780   struct MeshPeerQueue *queue;
781   const struct GNUNET_PeerIdentity *dst_id;
782   size_t data_size;
783
784   peer->core_transmit = NULL;
785   LOG (GNUNET_ERROR_TYPE_DEBUG, "* Queue send towards %s (max %u)\n",
786        GMP_2s (peer), size);
787
788   if (NULL == buf || 0 == size)
789   {
790     LOG (GNUNET_ERROR_TYPE_DEBUG, "* Buffer size 0.\n");
791     return 0;
792   }
793
794   /* Initialize */
795   queue = peer_get_first_message (peer);
796   if (NULL == queue)
797   {
798     GNUNET_break (0); /* Core tmt_rdy should've been canceled */
799     return 0;
800   }
801   c = queue->c;
802
803   dst_id = GNUNET_PEER_resolve2 (peer->id);
804   LOG (GNUNET_ERROR_TYPE_DEBUG, "*   on connection %s\n", GMC_2s (c));
805   /* Check if buffer size is enough for the message */
806   if (queue->size > size)
807   {
808       LOG (GNUNET_ERROR_TYPE_DEBUG, "*   not enough room, reissue\n");
809       peer->core_transmit =
810           GNUNET_CORE_notify_transmit_ready (core_handle,
811                                              GNUNET_NO,
812                                              0,
813                                              GNUNET_TIME_UNIT_FOREVER_REL,
814                                              dst_id,
815                                              queue->size,
816                                              &queue_send,
817                                              peer);
818       return 0;
819   }
820   LOG (GNUNET_ERROR_TYPE_DEBUG, "*   size %u ok\n", queue->size);
821
822   /* Fill buf */
823   switch (queue->type)
824   {
825     case GNUNET_MESSAGE_TYPE_MESH_CONNECTION_DESTROY:
826     case GNUNET_MESSAGE_TYPE_MESH_CONNECTION_BROKEN:
827     case GNUNET_MESSAGE_TYPE_MESH_KEEPALIVE:
828     case GNUNET_MESSAGE_TYPE_MESH_ENCRYPTED:
829     case GNUNET_MESSAGE_TYPE_MESH_KX:
830     case GNUNET_MESSAGE_TYPE_MESH_ACK:
831     case GNUNET_MESSAGE_TYPE_MESH_POLL:
832       LOG (GNUNET_ERROR_TYPE_DEBUG,
833                   "*   raw: %s\n",
834                   GM_m2s (queue->type));
835       data_size = send_core_data_raw (queue->cls, size, buf);
836       break;
837     case GNUNET_MESSAGE_TYPE_MESH_CONNECTION_CREATE:
838       LOG (GNUNET_ERROR_TYPE_DEBUG, "*   path create\n");
839       if (GMC_is_origin (c, GNUNET_YES))
840         data_size = send_core_connection_create (queue->c, size, buf);
841       else
842         data_size = send_core_data_raw (queue->cls, size, buf);
843       break;
844     case GNUNET_MESSAGE_TYPE_MESH_CONNECTION_ACK:
845       LOG (GNUNET_ERROR_TYPE_DEBUG, "*   path ack\n");
846       if (GMC_is_origin (c, GNUNET_NO) ||
847           GMC_is_origin (c, GNUNET_YES))
848         data_size = send_core_connection_ack (queue->c, size, buf);
849       else
850         data_size = send_core_data_raw (queue->cls, size, buf);
851       break;
852     case GNUNET_MESSAGE_TYPE_MESH_DATA:
853     case GNUNET_MESSAGE_TYPE_MESH_CHANNEL_CREATE:
854     case GNUNET_MESSAGE_TYPE_MESH_CHANNEL_DESTROY:
855       /* This should be encapsulted */
856       GNUNET_break (0);
857       data_size = 0;
858       break;
859     default:
860       GNUNET_break (0);
861       LOG (GNUNET_ERROR_TYPE_WARNING, "*   type unknown: %u\n", queue->type);
862       data_size = 0;
863   }
864
865   if (0 < drop_percent &&
866       GNUNET_CRYPTO_random_u32 (GNUNET_CRYPTO_QUALITY_WEAK, 101) < drop_percent)
867   {
868     LOG (GNUNET_ERROR_TYPE_WARNING,
869                 "Dropping message of type %s\n",
870                 GM_m2s (queue->type));
871     data_size = 0;
872   }
873
874   /* Free queue, but cls was freed by send_core_* */
875   GMP_queue_destroy (queue, GNUNET_NO);
876
877   /* If more data in queue, send next */
878   queue = peer_get_first_message (peer);
879   if (NULL != queue)
880   {
881     LOG (GNUNET_ERROR_TYPE_DEBUG, "*   more data!\n");
882     if (NULL == peer->core_transmit)
883     {
884       peer->core_transmit =
885           GNUNET_CORE_notify_transmit_ready(core_handle,
886                                             0,
887                                             0,
888                                             GNUNET_TIME_UNIT_FOREVER_REL,
889                                             dst_id,
890                                             queue->size,
891                                             &queue_send,
892                                             peer);
893       queue->start_waiting = GNUNET_TIME_absolute_get ();
894     }
895     else
896     {
897       LOG (GNUNET_ERROR_TYPE_DEBUG,
898                   "*   tmt rdy called somewhere else\n");
899     }
900 //     GMC_start_poll (); FIXME needed?
901   }
902   else
903   {
904 //     GMC_stop_poll(); FIXME needed?
905   }
906
907   LOG (GNUNET_ERROR_TYPE_DEBUG, "*  Return %d\n", data_size);
908   return data_size;
909 }
910
911
912 /******************************************************************************/
913 /********************************    API    ***********************************/
914 /******************************************************************************/
915
916
917 /**
918  * Free a transmission that was already queued with all resources
919  * associated to the request.
920  *
921  * @param queue Queue handler to cancel.
922  * @param clear_cls Is it necessary to free associated cls?
923  */
924 void
925 GMP_queue_destroy (struct MeshPeerQueue *queue, int clear_cls)
926 {
927   struct MeshPeer *peer;
928
929   peer = queue->peer;
930   GNUNET_assert (NULL != queue->c);
931
932   if (GNUNET_YES == clear_cls)
933   {
934     LOG (GNUNET_ERROR_TYPE_DEBUG, "#   queue destroy type %s\n",
935                 GM_m2s (queue->type));
936     switch (queue->type)
937     {
938       case GNUNET_MESSAGE_TYPE_MESH_CONNECTION_DESTROY:
939         LOG (GNUNET_ERROR_TYPE_INFO, "destroying a DESTROY message\n");
940         /* fall through */
941       case GNUNET_MESSAGE_TYPE_MESH_CONNECTION_ACK:
942       case GNUNET_MESSAGE_TYPE_MESH_CONNECTION_CREATE:
943       case GNUNET_MESSAGE_TYPE_MESH_CONNECTION_BROKEN:
944       case GNUNET_MESSAGE_TYPE_MESH_KEEPALIVE:
945       case GNUNET_MESSAGE_TYPE_MESH_KX:
946       case GNUNET_MESSAGE_TYPE_MESH_ENCRYPTED:
947       case GNUNET_MESSAGE_TYPE_MESH_ACK:
948       case GNUNET_MESSAGE_TYPE_MESH_POLL:
949         GNUNET_free_non_null (queue->cls);
950         break;
951
952       default:
953         GNUNET_break (0);
954         LOG (GNUNET_ERROR_TYPE_ERROR, "#   type %s unknown!\n",
955                     GM_m2s (queue->type));
956     }
957   }
958   GNUNET_CONTAINER_DLL_remove (peer->queue_head, peer->queue_tail, queue);
959
960   if (queue->type != GNUNET_MESSAGE_TYPE_MESH_ACK &&
961       queue->type != GNUNET_MESSAGE_TYPE_MESH_POLL)
962   {
963     peer->queue_n--;
964   }
965
966   if (NULL != queue->callback)
967   {
968     LOG (GNUNET_ERROR_TYPE_DEBUG, "#   Calling callback\n");
969     queue->callback (queue->callback_cls,
970                      queue->c, queue->type,
971                      queue->fwd, queue->size,
972                      GNUNET_TIME_absolute_get_duration (queue->start_waiting));
973   }
974
975   GNUNET_free (queue);
976 }
977
978
979 /**
980  * @brief Queue and pass message to core when possible.
981  *
982  * @param peer Peer towards which to queue the message.
983  * @param cls Closure (@c type dependant). It will be used by queue_send to
984  *            build the message to be sent if not already prebuilt.
985  * @param type Type of the message, 0 for a raw message.
986  * @param size Size of the message.
987  * @param c Connection this message belongs to (cannot be NULL).
988  * @param fwd Is this a message going root->dest? (FWD ACK are NOT FWD!)
989  * @param cont Continuation to be called once CORE has taken the message.
990  * @param cont_cls Closure for @c cont.
991  *
992  * @return Handle to cancel the message before it is sent. Once cont is called
993  *         message has been sent and therefore the handle is no longer valid.
994  */
995 struct MeshPeerQueue *
996 GMP_queue_add (struct MeshPeer *peer, void *cls, uint16_t type, size_t size,
997                struct MeshConnection *c, int fwd,
998                GMP_sent cont, void *cont_cls)
999 {
1000   struct MeshPeerQueue *queue;
1001   int priority;
1002   int call_core;
1003
1004   LOG (GNUNET_ERROR_TYPE_DEBUG,
1005        "queue add %s %s towards %s (size %u) on c %p (%s)\n",
1006        GM_f2s (fwd),  GM_m2s (type), GMP_2s(peer),
1007        size, c, GMC_2s (c));
1008   GNUNET_assert (NULL != c);
1009
1010   if (NULL == peer->connections)
1011   {
1012     /* We are not connected to this peer, ignore request. */
1013     LOG (GNUNET_ERROR_TYPE_DEBUG, "WARNING %s not a neighbor\n", GMP_2s (peer));
1014     GNUNET_STATISTICS_update (stats, "# messages dropped due to wrong hop", 1,
1015                               GNUNET_NO);
1016     return NULL;
1017   }
1018
1019   priority = 0;
1020
1021   if (GNUNET_MESSAGE_TYPE_MESH_POLL == type ||
1022       GNUNET_MESSAGE_TYPE_MESH_ACK == type)
1023   {
1024     priority = 100;
1025   }
1026
1027   LOG (GNUNET_ERROR_TYPE_DEBUG, "priority %d\n", priority);
1028
1029   call_core = GMC_is_sendable (c, fwd);
1030   queue = GNUNET_malloc (sizeof (struct MeshPeerQueue));
1031   queue->cls = cls;
1032   queue->type = type;
1033   queue->size = size;
1034   queue->peer = peer;
1035   queue->c = c;
1036   queue->fwd = fwd;
1037   queue->callback = cont;
1038   queue->callback_cls = cont_cls;
1039   if (100 > priority)
1040   {
1041     GNUNET_CONTAINER_DLL_insert_tail (peer->queue_head, peer->queue_tail, queue);
1042     peer->queue_n++;
1043   }
1044   else
1045   {
1046     GNUNET_CONTAINER_DLL_insert (peer->queue_head, peer->queue_tail, queue);
1047     call_core = GNUNET_YES;
1048   }
1049
1050   if (NULL == peer->core_transmit && GNUNET_YES == call_core)
1051   {
1052     LOG (GNUNET_ERROR_TYPE_DEBUG,
1053                 "calling core tmt rdy towards %s for %u bytes\n",
1054                 GMP_2s (peer), size);
1055     peer->core_transmit =
1056         GNUNET_CORE_notify_transmit_ready (core_handle,
1057                                            0,
1058                                            0,
1059                                            GNUNET_TIME_UNIT_FOREVER_REL,
1060                                            GNUNET_PEER_resolve2 (peer->id),
1061                                            size,
1062                                            &queue_send,
1063                                            peer);
1064     queue->start_waiting = GNUNET_TIME_absolute_get ();
1065   }
1066   else
1067   {
1068     LOG (GNUNET_ERROR_TYPE_DEBUG,
1069                 "core tmt rdy towards %s already called\n",
1070                 GMP_2s (peer));
1071
1072   }
1073   return queue;
1074 }
1075
1076
1077 /**
1078  * Cancel all queued messages to a peer that belong to a certain connection.
1079  *
1080  * @param peer Peer towards whom to cancel.
1081  * @param c Connection whose queued messages to cancel. Might be destroyed by
1082  *          the sent continuation call.
1083  */
1084 void
1085 GMP_queue_cancel (struct MeshPeer *peer, struct MeshConnection *c)
1086 {
1087   struct MeshPeerQueue *q;
1088   struct MeshPeerQueue *next;
1089   struct MeshPeerQueue *prev;
1090
1091   for (q = peer->queue_head; NULL != q; q = next)
1092   {
1093     prev = q->prev;
1094     if (q->c == c)
1095     {
1096       LOG (GNUNET_ERROR_TYPE_DEBUG, "GMP_cancel_queue %s\n", GM_m2s (q->type));
1097       GMP_queue_destroy (q, GNUNET_YES);
1098
1099       /* Get next from prev, q->next might be already freed:
1100        * queue destroy -> callback -> GMC_destroy -> cancel_queues -> here
1101        */
1102       if (NULL == prev)
1103         next = peer->queue_head;
1104       else
1105         next = prev->next;
1106     }
1107     else
1108     {
1109       next = q->next;
1110     }
1111   }
1112   if (NULL == peer->queue_head)
1113   {
1114     if (NULL != peer->core_transmit)
1115     {
1116       GNUNET_CORE_notify_transmit_ready_cancel (peer->core_transmit);
1117       peer->core_transmit = NULL;
1118     }
1119   }
1120 }
1121
1122
1123 /**
1124  * Get the first transmittable message for a connection.
1125  *
1126  * @param peer Neighboring peer.
1127  * @param c Connection.
1128  *
1129  * @return First transmittable message.
1130  */
1131 static struct MeshPeerQueue *
1132 connection_get_first_message (struct MeshPeer *peer, struct MeshConnection *c)
1133 {
1134   struct MeshPeerQueue *q;
1135
1136   for (q = peer->queue_head; NULL != q; q = q->next)
1137   {
1138     if (q->c != c)
1139       continue;
1140     if (queue_is_sendable (q))
1141     {
1142       LOG (GNUNET_ERROR_TYPE_DEBUG, "  sendable!!\n");
1143       return q;
1144     }
1145     LOG (GNUNET_ERROR_TYPE_DEBUG, "  not sendable\n");
1146   }
1147
1148   return NULL;
1149 }
1150
1151
1152 void
1153 GMP_queue_unlock (struct MeshPeer *peer, struct MeshConnection *c)
1154 {
1155   struct MeshPeerQueue *q;
1156   size_t size;
1157
1158   if (NULL != peer->core_transmit)
1159   {
1160     LOG (GNUNET_ERROR_TYPE_DEBUG, "  already unlocked!\n");
1161     return; /* Already unlocked */
1162   }
1163
1164   q = connection_get_first_message (peer, c);
1165   if (NULL == q)
1166   {
1167     LOG (GNUNET_ERROR_TYPE_DEBUG, "  queue empty!\n");
1168     return; /* Nothing to transmit */
1169   }
1170
1171   size = q->size;
1172   peer->core_transmit =
1173       GNUNET_CORE_notify_transmit_ready (core_handle,
1174                                          GNUNET_NO,
1175                                          0,
1176                                          GNUNET_TIME_UNIT_FOREVER_REL,
1177                                          GNUNET_PEER_resolve2 (peer->id),
1178                                          size,
1179                                          &queue_send,
1180                                          peer);
1181 }
1182
1183
1184 /**
1185  * Initialize the peer subsystem.
1186  *
1187  * @param c Configuration.
1188  */
1189 void
1190 GMP_init (const struct GNUNET_CONFIGURATION_Handle *c)
1191 {
1192   LOG (GNUNET_ERROR_TYPE_DEBUG, "init\n");
1193   peers = GNUNET_CONTAINER_multipeermap_create (128, GNUNET_NO);
1194   if (GNUNET_OK !=
1195       GNUNET_CONFIGURATION_get_value_number (c, "MESH", "MAX_PEERS",
1196                                              &max_peers))
1197   {
1198     GNUNET_log_config_invalid (GNUNET_ERROR_TYPE_WARNING,
1199                                "MESH", "MAX_PEERS", "USING DEFAULT");
1200     max_peers = 1000;
1201   }
1202
1203   if (GNUNET_OK !=
1204       GNUNET_CONFIGURATION_get_value_number (c, "MESH", "DROP_PERCENT",
1205                                              &drop_percent))
1206   {
1207     drop_percent = 0;
1208   }
1209   else
1210   {
1211     LOG (GNUNET_ERROR_TYPE_WARNING,
1212                 "\n***************************************\n"
1213                 "Mesh is running with drop mode enabled.\n"
1214                 "This is NOT a good idea!\n"
1215                 "Remove the DROP_PERCENT option from your configuration.\n"
1216                 "***************************************\n");
1217   }
1218
1219   core_handle = GNUNET_CORE_connect (c, /* Main configuration */
1220                                      NULL,      /* Closure passed to MESH functions */
1221                                      &core_init,        /* Call core_init once connected */
1222                                      &core_connect,     /* Handle connects */
1223                                      &core_disconnect,  /* remove peers on disconnects */
1224                                      NULL,      /* Don't notify about all incoming messages */
1225                                      GNUNET_NO, /* For header only in notification */
1226                                      NULL,      /* Don't notify about all outbound messages */
1227                                      GNUNET_NO, /* For header-only out notification */
1228                                      core_handlers);    /* Register these handlers */
1229   if (NULL == core_handle)
1230   {
1231     GNUNET_break (0);
1232     GNUNET_SCHEDULER_shutdown ();
1233     return;
1234   }
1235 }
1236
1237 /**
1238  * Shut down the peer subsystem.
1239  */
1240 void
1241 GMP_shutdown (void)
1242 {
1243   GNUNET_CONTAINER_multipeermap_iterate (peers, &shutdown_tunnel, NULL);
1244
1245   if (core_handle != NULL)
1246   {
1247     GNUNET_CORE_disconnect (core_handle);
1248     core_handle = NULL;
1249   }
1250   GNUNET_PEER_change_rc (myid, -1);
1251 }
1252
1253 /**
1254  * Retrieve the MeshPeer stucture associated with the peer, create one
1255  * and insert it in the appropriate structures if the peer is not known yet.
1256  *
1257  * @param peer_id Full identity of the peer.
1258  *
1259  * @return Existing or newly created peer structure.
1260  */
1261 struct MeshPeer *
1262 GMP_get (const struct GNUNET_PeerIdentity *peer_id)
1263 {
1264   struct MeshPeer *peer;
1265
1266   peer = GNUNET_CONTAINER_multipeermap_get (peers, peer_id);
1267   if (NULL == peer)
1268   {
1269     peer = GNUNET_new (struct MeshPeer);
1270     if (GNUNET_CONTAINER_multipeermap_size (peers) > max_peers)
1271     {
1272       peer_delete_oldest ();
1273     }
1274         GNUNET_CONTAINER_multipeermap_put (peers, peer_id, peer,
1275                                            GNUNET_CONTAINER_MULTIHASHMAPOPTION_UNIQUE_FAST);
1276         peer->id = GNUNET_PEER_intern (peer_id);
1277   }
1278   peer->last_contact = GNUNET_TIME_absolute_get();
1279
1280   return peer;
1281 }
1282
1283
1284 /**
1285  * Retrieve the MeshPeer stucture associated with the peer, create one
1286  * and insert it in the appropriate structures if the peer is not known yet.
1287  *
1288  * @param peer Short identity of the peer.
1289  *
1290  * @return Existing or newly created peer structure.
1291  */
1292 struct MeshPeer *
1293 GMP_get_short (const GNUNET_PEER_Id peer)
1294 {
1295   return GMP_get (GNUNET_PEER_resolve2 (peer));
1296 }
1297
1298
1299 /**
1300  * Try to establish a new connection to this peer (in its tunnel).
1301  * If the peer doesn't have any path to it yet, try to get one.
1302  * If the peer already has some path, send a CREATE CONNECTION towards it.
1303  *
1304  * @param peer Peer to connect to.
1305  */
1306 void
1307 GMP_connect (struct MeshPeer *peer)
1308 {
1309   struct MeshTunnel3 *t;
1310   struct MeshPeerPath *p;
1311   struct MeshConnection *c;
1312   int rerun_search;
1313
1314   LOG (GNUNET_ERROR_TYPE_DEBUG, "peer_connect towards %s\n", GMP_2s (peer));
1315   t = peer->tunnel;
1316   c = NULL;
1317   rerun_search = GNUNET_NO;
1318
1319   if (NULL != peer->path_head)
1320   {
1321     LOG (GNUNET_ERROR_TYPE_DEBUG, "  some path exists\n");
1322     p = peer_get_best_path (peer);
1323     if (NULL != p)
1324     {
1325       LOG (GNUNET_ERROR_TYPE_DEBUG, "  %u hops\n", p->length);
1326       c = GMT_use_path (t, p);
1327       if (NULL == c)
1328       {
1329         /* This case can happen when the path includes a first hop that is
1330          * not yet known to be connected.
1331          *
1332          * This happens quite often during testing when running mesh
1333          * under valgrind: core connect notifications come very late and the
1334          * DHT result has already come and created a valid path.
1335          * In this case, the peer->connections hashmap will be NULL and
1336          * tunnel_use_path will not be able to create a connection from that
1337          * path.
1338          *
1339          * Re-running the DHT GET should give core time to callback.
1340          *
1341          * GMT_use_path -> GMC_new -> register_neighbors takes care of
1342          * updating statistics about this issue.
1343          */
1344         rerun_search = GNUNET_YES;
1345       }
1346       else
1347       {
1348         GMC_send_create (c);
1349         return;
1350       }
1351     }
1352     else
1353     {
1354       LOG (GNUNET_ERROR_TYPE_DEBUG, "  but is NULL, all paths are in use\n");
1355     }
1356   }
1357
1358   if (NULL != peer->search_h && GNUNET_YES == rerun_search)
1359   {
1360     GMD_search_stop (peer->search_h);
1361     peer->search_h = NULL;
1362     LOG (GNUNET_ERROR_TYPE_DEBUG,
1363          "  Stopping DHT GET for peer %s\n",
1364          GMP_2s (peer));
1365   }
1366
1367   if (NULL == peer->search_h)
1368   {
1369     const struct GNUNET_PeerIdentity *id;
1370
1371     id = GNUNET_PEER_resolve2 (peer->id);
1372     LOG (GNUNET_ERROR_TYPE_DEBUG,
1373                 "  Starting DHT GET for peer %s\n", GMP_2s (peer));
1374     peer->search_h = GMD_search (id, &search_handler, peer);
1375     if (MESH_TUNNEL3_NEW == GMT_get_cstate (t))
1376       GMT_change_cstate (t, MESH_TUNNEL3_SEARCHING);
1377   }
1378 }
1379
1380
1381 /**
1382  * Set tunnel.
1383  *
1384  * @param peer Peer.
1385  * @param t Tunnel.
1386  */
1387 void
1388 GMP_set_tunnel (struct MeshPeer *peer, struct MeshTunnel3 *t)
1389 {
1390   peer->tunnel = t;
1391 }
1392
1393
1394 /**
1395  * Chech whether there is a direct (core level)  connection to peer.
1396  *
1397  * @param peer Peer to check.
1398  *
1399  * @return #GNUNET_YES if there is a direct connection.
1400  */
1401 int
1402 GMP_is_neighbor (const struct MeshPeer *peer)
1403 {
1404   struct MeshPeerPath *path;
1405
1406   if (NULL == peer->connections)
1407     return GNUNET_NO;
1408
1409   for (path = peer->path_head; NULL != path; path = path->next)
1410   {
1411     if (3 > path->length)
1412       return GNUNET_YES;
1413   }
1414
1415   GNUNET_break (0); /* Is not a neighbor but connections is not NULL */
1416   return GNUNET_NO;
1417 }
1418
1419
1420 /**
1421  * Create and initialize a new tunnel towards a peer, in case it has none.
1422  * In case the peer already has a tunnel, nothing is done.
1423  *
1424  * Does not generate any traffic, just creates the local data structures.
1425  *
1426  * @param peer Peer towards which to create the tunnel.
1427  */
1428 void
1429 GMP_add_tunnel (struct MeshPeer *peer)
1430 {
1431   if (NULL != peer->tunnel)
1432     return;
1433   peer->tunnel = GMT_new (peer);
1434 }
1435
1436
1437 /**
1438  * Add a connection to a neighboring peer.
1439  *
1440  * Store that the peer is the first hop of the connection in one
1441  * direction and that on peer disconnect the connection must be
1442  * notified and destroyed, for it will no longer be valid.
1443  *
1444  * @param peer Peer to add connection to.
1445  * @param c Connection to add.
1446  *
1447  * @return GNUNET_OK on success.
1448  */
1449 int
1450 GMP_add_connection (struct MeshPeer *peer,
1451                     struct MeshConnection *c)
1452 {
1453   if (NULL == peer->connections)
1454   {
1455     GNUNET_break (0);
1456     return GNUNET_SYSERR;
1457   }
1458   return GNUNET_CONTAINER_multihashmap_put (peer->connections,
1459                                             GMC_get_id (c),
1460                                             c,
1461                                             GNUNET_CONTAINER_MULTIHASHMAPOPTION_UNIQUE_FAST);
1462 }
1463
1464
1465 /**
1466  * Add the path to the peer and update the path used to reach it in case this
1467  * is the shortest.
1468  *
1469  * @param peer Destination peer to add the path to.
1470  * @param path New path to add. Last peer must be the peer in arg 1.
1471  *             Path will be either used of freed if already known.
1472  * @param trusted Do we trust that this path is real?
1473  *
1474  * @return path if path was taken, pointer to existing duplicate if exists
1475  *         NULL on error.
1476  */
1477 struct MeshPeerPath *
1478 GMP_add_path (struct MeshPeer *peer, struct MeshPeerPath *path,
1479               int trusted)
1480 {
1481   struct MeshPeerPath *aux;
1482   unsigned int l;
1483   unsigned int l2;
1484
1485   LOG (GNUNET_ERROR_TYPE_DEBUG, "adding path [%u] to peer %s\n",
1486        path->length, GMP_2s (peer));
1487
1488   if ((NULL == peer) || (NULL == path))
1489   {
1490     GNUNET_break (0);
1491     path_destroy (path);
1492     return NULL;
1493   }
1494   if (path->peers[path->length - 1] != peer->id)
1495   {
1496     GNUNET_break (0);
1497     path_destroy (path);
1498     return NULL;
1499   }
1500   if (2 >= path->length && GNUNET_NO == trusted)
1501   {
1502     /* Only allow CORE to tell us about direct paths */
1503     path_destroy (path);
1504     return NULL;
1505   }
1506   for (l = 1; l < path->length; l++)
1507   {
1508     if (path->peers[l] == myid)
1509     {
1510       LOG (GNUNET_ERROR_TYPE_DEBUG, "shortening path by %u\n", l);
1511       for (l2 = 0; l2 < path->length - l; l2++)
1512       {
1513         path->peers[l2] = path->peers[l + l2];
1514       }
1515       path->length -= l;
1516       l = 1;
1517       path->peers = GNUNET_realloc (path->peers,
1518                                     path->length * sizeof (GNUNET_PEER_Id));
1519     }
1520   }
1521
1522   LOG (GNUNET_ERROR_TYPE_DEBUG, "adding path [%u]\n", path->length);
1523
1524   l = path_get_length (path);
1525   if (0 == l)
1526   {
1527     path_destroy (path);
1528     return NULL;
1529   }
1530
1531   GNUNET_assert (peer->id == path->peers[path->length - 1]);
1532   for (aux = peer->path_head; aux != NULL; aux = aux->next)
1533   {
1534     l2 = path_get_length (aux);
1535     if (l2 > l)
1536     {
1537       LOG (GNUNET_ERROR_TYPE_DEBUG, "  added\n");
1538       GNUNET_CONTAINER_DLL_insert_before (peer->path_head,
1539                                           peer->path_tail, aux, path);
1540       return path;
1541     }
1542     else
1543     {
1544       if (l2 == l && memcmp (path->peers, aux->peers, l) == 0)
1545       {
1546         LOG (GNUNET_ERROR_TYPE_DEBUG, "  already known\n");
1547         path_destroy (path);
1548         return aux;
1549       }
1550     }
1551   }
1552   GNUNET_CONTAINER_DLL_insert_tail (peer->path_head, peer->path_tail,
1553                                     path);
1554   LOG (GNUNET_ERROR_TYPE_DEBUG, "  added last\n");
1555   return path;
1556 }
1557
1558
1559 /**
1560  * Add the path to the origin peer and update the path used to reach it in case
1561  * this is the shortest.
1562  * The path is given in peer_info -> destination, therefore we turn the path
1563  * upside down first.
1564  *
1565  * @param peer Peer to add the path to, being the origin of the path.
1566  * @param path New path to add after being inversed.
1567  *             Path will be either used or freed.
1568  * @param trusted Do we trust that this path is real?
1569  *
1570  * @return path if path was taken, pointer to existing duplicate if exists
1571  *         NULL on error.
1572  */
1573 struct MeshPeerPath *
1574 GMP_add_path_to_origin (struct MeshPeer *peer,
1575                         struct MeshPeerPath *path,
1576                         int trusted)
1577 {
1578   if (NULL == path)
1579     return NULL;
1580   path_invert (path);
1581   return GMP_add_path (peer, path, trusted);
1582 }
1583
1584
1585 /**
1586  * Adds a path to the info of all the peers in the path
1587  *
1588  * @param p Path to process.
1589  * @param confirmed Whether we know if the path works or not.
1590  */
1591 void
1592 GMP_add_path_to_all (const struct MeshPeerPath *p, int confirmed)
1593 {
1594   unsigned int i;
1595
1596   /* TODO: invert and add */
1597   for (i = 0; i < p->length && p->peers[i] != myid; i++) /* skip'em */ ;
1598   for (i++; i < p->length; i++)
1599   {
1600     struct MeshPeer *aux;
1601     struct MeshPeerPath *copy;
1602
1603     aux = GMP_get_short (p->peers[i]);
1604     copy = path_duplicate (p);
1605     copy->length = i + 1;
1606     GMP_add_path (aux, copy, p->length < 3 ? GNUNET_NO : confirmed);
1607   }
1608 }
1609
1610
1611 /**
1612  * Remove any path to the peer that has the extact same peers as the one given.
1613  *
1614  * @param peer Peer to remove the path from.
1615  * @param path Path to remove. Is always destroyed .
1616  */
1617 void
1618 GMP_remove_path (struct MeshPeer *peer, struct MeshPeerPath *path)
1619 {
1620   struct MeshPeerPath *iter;
1621   struct MeshPeerPath *next;
1622
1623   GNUNET_assert (myid == path->peers[0]);
1624   GNUNET_assert (peer->id == path->peers[path->length - 1]);
1625
1626   for (iter = peer->path_head; NULL != iter; iter = next)
1627   {
1628     next = iter->next;
1629     if (0 == memcmp (path->peers, iter->peers,
1630                      sizeof (GNUNET_PEER_Id) * path->length))
1631     {
1632       GNUNET_CONTAINER_DLL_remove (peer->path_head, peer->path_tail, iter);
1633       path_destroy (iter);
1634       if (path == iter)
1635         return;
1636     }
1637   }
1638   path_destroy (path);
1639 }
1640
1641
1642 /**
1643  * Remove a connection from a neighboring peer.
1644  *
1645  * @param peer Peer to remove connection from.
1646  * @param c Connection to remove.
1647  *
1648  * @return GNUNET_OK on success.
1649  */
1650 int
1651 GMP_remove_connection (struct MeshPeer *peer,
1652                        const struct MeshConnection *c)
1653 {
1654   LOG (GNUNET_ERROR_TYPE_DEBUG,
1655        "removing connection %s from peer %s\n",
1656        GMC_2s (c), GMP_2s (peer));
1657   if (NULL == peer || NULL == peer->connections)
1658   {
1659     LOG (GNUNET_ERROR_TYPE_DEBUG,
1660          "Peer %s is not a neighbor!\n",
1661          GMP_2s (peer));
1662     return GNUNET_SYSERR;
1663   }
1664   return GNUNET_CONTAINER_multihashmap_remove (peer->connections,
1665                                                GMC_get_id (c),
1666                                                c);
1667 }
1668
1669 /**
1670  * Start the DHT search for new paths towards the peer: we don't have
1671  * enough good connections.
1672  *
1673  * @param peer Destination peer.
1674  */
1675 void
1676 GMP_start_search (struct MeshPeer *peer)
1677 {
1678   if (NULL != peer->search_h)
1679   {
1680     GNUNET_break (0);
1681     return;
1682   }
1683
1684   peer->search_h = GMD_search (GMP_get_id (peer), &search_handler, peer);
1685 }
1686
1687
1688 /**
1689  * Stop the DHT search for new paths towards the peer: we already have
1690  * enough good connections.
1691  *
1692  * @param peer Destination peer.
1693  */
1694 void
1695 GMP_stop_search (struct MeshPeer *peer)
1696 {
1697   if (NULL == peer->search_h)
1698   {
1699     GNUNET_break (0);
1700     return;
1701   }
1702
1703   GMD_search_stop (peer->search_h);
1704   peer->search_h = NULL;
1705 }
1706
1707
1708 /**
1709  * Get the Full ID of a peer.
1710  *
1711  * @param peer Peer to get from.
1712  *
1713  * @return Full ID of peer.
1714  */
1715 const struct GNUNET_PeerIdentity *
1716 GMP_get_id (const struct MeshPeer *peer)
1717 {
1718   return GNUNET_PEER_resolve2 (peer->id);
1719 }
1720
1721
1722 /**
1723  * Get the Short ID of a peer.
1724  *
1725  * @param peer Peer to get from.
1726  *
1727  * @return Short ID of peer.
1728  */
1729 GNUNET_PEER_Id
1730 GMP_get_short_id (const struct MeshPeer *peer)
1731 {
1732   return peer->id;
1733 }
1734
1735
1736 /**
1737  * Get the tunnel towards a peer.
1738  *
1739  * @param peer Peer to get from.
1740  *
1741  * @return Tunnel towards peer.
1742  */
1743 struct MeshTunnel3 *
1744 GMP_get_tunnel (const struct MeshPeer *peer)
1745 {
1746   GNUNET_assert (NULL != peer->tunnel);
1747   return peer->tunnel;
1748 }
1749
1750
1751 /**
1752  * Get the static string for a peer ID.
1753  *
1754  * @param peer Peer.
1755  *
1756  * @return Static string for it's ID.
1757  */
1758 const char *
1759 GMP_2s (const struct MeshPeer *peer)
1760 {
1761   if (NULL == peer)
1762     return "(NULL)";
1763   return GNUNET_i2s (GNUNET_PEER_resolve2 (peer->id));
1764 }