-log
[oweals/gnunet.git] / src / mesh / gnunet-service-mesh_peer.c
1 /*
2      This file is part of GNUnet.
3      (C) 2013 Christian Grothoff (and other contributing authors)
4
5      GNUnet is free software; you can redistribute it and/or modify
6      it under the terms of the GNU General Public License as published
7      by the Free Software Foundation; either version 3, or (at your
8      option) any later version.
9
10      GNUnet is distributed in the hope that it will be useful, but
11      WITHOUT ANY WARRANTY; without even the implied warranty of
12      MERCHANTABILITY or FITNESS FOR A PARTICULAR PURPOSE.  See the GNU
13      General Public License for more details.
14
15      You should have received a copy of the GNU General Public License
16      along with GNUnet; see the file COPYING.  If not, write to the
17      Free Software Foundation, Inc., 59 Temple Place - Suite 330,
18      Boston, MA 02111-1307, USA.
19 */
20
21
22 #include "platform.h"
23 #include "gnunet_util_lib.h"
24
25 #include "gnunet_transport_service.h"
26 #include "gnunet_core_service.h"
27 #include "gnunet_statistics_service.h"
28
29 #include "mesh_protocol.h"
30
31 #include "gnunet-service-mesh_peer.h"
32 #include "gnunet-service-mesh_dht.h"
33 #include "gnunet-service-mesh_connection.h"
34 #include "gnunet-service-mesh_tunnel.h"
35 #include "mesh_path.h"
36
37 #define LOG(level, ...) GNUNET_log_from (level,"mesh-p2p",__VA_ARGS__)
38
39 /******************************************************************************/
40 /********************************   STRUCTS  **********************************/
41 /******************************************************************************/
42
43 /**
44  * Struct containing info about a queued transmission to this peer
45  */
46 struct MeshPeerQueue
47 {
48     /**
49       * DLL next
50       */
51   struct MeshPeerQueue *next;
52
53     /**
54       * DLL previous
55       */
56   struct MeshPeerQueue *prev;
57
58     /**
59      * Peer this transmission is directed to.
60      */
61   struct MeshPeer *peer;
62
63     /**
64      * Connection this message belongs to.
65      */
66   struct MeshConnection *c;
67
68     /**
69      * Is FWD in c?
70      */
71   int fwd;
72
73     /**
74      * Pointer to info stucture used as cls.
75      */
76   void *cls;
77
78     /**
79      * Type of message
80      */
81   uint16_t type;
82
83     /**
84      * Size of the message
85      */
86   size_t size;
87
88     /**
89      * Set when this message starts waiting for CORE.
90      */
91   struct GNUNET_TIME_Absolute start_waiting;
92
93     /**
94      * Function to call on sending.
95      */
96   GMP_sent callback;
97
98     /**
99      * Closure for callback.
100      */
101   void *callback_cls;
102 };
103
104 /**
105  * Struct containing all information regarding a given peer
106  */
107 struct MeshPeer
108 {
109     /**
110      * ID of the peer
111      */
112   GNUNET_PEER_Id id;
113
114     /**
115      * Last time we heard from this peer
116      */
117   struct GNUNET_TIME_Absolute last_contact;
118
119     /**
120      * Paths to reach the peer, ordered by ascending hop count
121      */
122   struct MeshPeerPath *path_head;
123
124     /**
125      * Paths to reach the peer, ordered by ascending hop count
126      */
127   struct MeshPeerPath *path_tail;
128
129     /**
130      * Handle to stop the DHT search for paths to this peer
131      */
132   struct GMD_search_handle *search_h;
133
134     /**
135      * Tunnel to this peer, if any.
136      */
137   struct MeshTunnel3 *tunnel;
138
139     /**
140      * Connections that go through this peer, indexed by tid;
141      */
142   struct GNUNET_CONTAINER_MultiHashMap *connections;
143
144     /**
145      * Handle for queued transmissions
146      */
147   struct GNUNET_CORE_TransmitHandle *core_transmit;
148
149   /**
150    * Transmission queue to core DLL head
151    */
152   struct MeshPeerQueue *queue_head;
153
154   /**
155    * Transmission queue to core DLL tail
156    */
157   struct MeshPeerQueue *queue_tail;
158
159   /**
160    * How many messages are in the queue to this peer.
161    */
162   unsigned int queue_n;
163
164   /**
165    * Hello message.
166    */
167   struct GNUNET_HELLO_Message* hello;
168 };
169
170
171 /******************************************************************************/
172 /*******************************   GLOBALS  ***********************************/
173 /******************************************************************************/
174
175 /**
176  * Global handle to the statistics service.
177  */
178 extern struct GNUNET_STATISTICS_Handle *stats;
179
180 /**
181  * Local peer own ID (full value).
182  */
183 extern struct GNUNET_PeerIdentity my_full_id;
184
185 /**
186  * Local peer own ID (short)
187  */
188 extern GNUNET_PEER_Id myid;
189
190 /**
191  * Peers known, indexed by PeerIdentity (MeshPeer).
192  */
193 static struct GNUNET_CONTAINER_MultiPeerMap *peers;
194
195 /**
196  * How many peers do we want to remember?
197  */
198 static unsigned long long max_peers;
199
200 /**
201  * Percentage of messages that will be dropped (for test purposes only).
202  */
203 static unsigned long long drop_percent;
204
205 /**
206  * Handle to communicate with core.
207  */
208 static struct GNUNET_CORE_Handle *core_handle;
209
210 static struct GNUNET_TRANSPORT_Handle *transport_handle;
211
212
213 /******************************************************************************/
214 /***************************** CORE CALLBACKS *********************************/
215 /******************************************************************************/
216
217
218 /**
219  * Iterator to notify all connections of a broken link. Mark connections
220  * to destroy after all traffic has been sent.
221  *
222  * @param cls Closure (peer disconnected).
223  * @param key Current key code (peer id).
224  * @param value Value in the hash map (connection).
225  *
226  * @return #GNUNET_YES to continue to iterate.
227  */
228 static int
229 notify_broken (void *cls,
230                const struct GNUNET_HashCode *key,
231                void *value)
232 {
233   struct MeshPeer *peer = cls;
234   struct MeshConnection *c = value;
235
236   LOG (GNUNET_ERROR_TYPE_DEBUG, "  notifying %s due to %s\n",
237        GMC_2s (c), GMP_2s (peer));
238   GMC_notify_broken (c, peer);
239
240   return GNUNET_YES;
241 }
242
243
244 /**
245  * Remove the direct path to the peer.
246  *
247  * @param peer Peer to remove the direct path from.
248  *
249  */
250 static struct MeshPeerPath *
251 pop_direct_path (struct MeshPeer *peer)
252 {
253   struct MeshPeerPath *iter;
254
255   for (iter = peer->path_head; NULL != iter; iter = iter->next)
256   {
257     if (2 <= iter->length)
258     {
259       GNUNET_CONTAINER_DLL_remove (peer->path_head, peer->path_tail, iter);
260       return iter;
261     }
262   }
263   return NULL;
264 }
265
266
267
268 /**
269  * Method called whenever a given peer connects.
270  *
271  * @param cls closure
272  * @param peer peer identity this notification is about
273  */
274 static void
275 core_connect (void *cls, const struct GNUNET_PeerIdentity *peer)
276 {
277   struct MeshPeer *mp;
278   struct MeshPeerPath *path;
279
280   LOG (GNUNET_ERROR_TYPE_DEBUG, "Peer connected\n");
281   LOG (GNUNET_ERROR_TYPE_DEBUG, "     %s\n", GNUNET_i2s (&my_full_id));
282   mp = GMP_get (peer);
283   if (myid == mp->id)
284   {
285     LOG (GNUNET_ERROR_TYPE_DEBUG, "     (self)\n");
286     path = path_new (1);
287   }
288   else
289   {
290     LOG (GNUNET_ERROR_TYPE_DEBUG, "     %s\n", GNUNET_i2s (peer));
291     path = path_new (2);
292     path->peers[1] = mp->id;
293     GNUNET_PEER_change_rc (mp->id, 1);
294     GNUNET_STATISTICS_update (stats, "# peers", 1, GNUNET_NO);
295   }
296   path->peers[0] = myid;
297   GNUNET_PEER_change_rc (myid, 1);
298   GMP_add_path (mp, path, GNUNET_YES);
299
300   mp->connections = GNUNET_CONTAINER_multihashmap_create (32, GNUNET_YES);
301   return;
302 }
303
304
305 /**
306  * Method called whenever a peer disconnects.
307  *
308  * @param cls closure
309  * @param peer peer identity this notification is about
310  */
311 static void
312 core_disconnect (void *cls, const struct GNUNET_PeerIdentity *peer)
313 {
314   struct MeshPeer *p;
315   struct MeshPeerPath *direct_path;
316
317   LOG (GNUNET_ERROR_TYPE_DEBUG, "Peer disconnected\n");
318   p = GNUNET_CONTAINER_multipeermap_get (peers, peer);
319   if (NULL == p)
320   {
321     GNUNET_break (0);
322     return;
323   }
324   if (myid == p->id)
325     LOG (GNUNET_ERROR_TYPE_DEBUG, "     (self: %s)\n", GMP_2s (p));
326   else
327     LOG (GNUNET_ERROR_TYPE_DEBUG, "     %s\n", GMP_2s (p));
328
329   direct_path = pop_direct_path (p);
330   GNUNET_CONTAINER_multihashmap_iterate (p->connections, &notify_broken, p);
331   GNUNET_CONTAINER_multihashmap_destroy (p->connections);
332   p->connections = NULL;
333   if (NULL != p->core_transmit)
334     {
335       GNUNET_CORE_notify_transmit_ready_cancel (p->core_transmit);
336       p->core_transmit = NULL;
337     }
338   GNUNET_STATISTICS_update (stats, "# peers", -1, GNUNET_NO);
339
340   path_destroy (direct_path);
341   return;
342 }
343
344
345 /**
346  * Functions to handle messages from core
347  */
348 static struct GNUNET_CORE_MessageHandler core_handlers[] = {
349   {&GMC_handle_create, GNUNET_MESSAGE_TYPE_MESH_CONNECTION_CREATE,
350     0},
351   {&GMC_handle_confirm, GNUNET_MESSAGE_TYPE_MESH_CONNECTION_ACK,
352     sizeof (struct GNUNET_MESH_ConnectionACK)},
353   {&GMC_handle_broken, GNUNET_MESSAGE_TYPE_MESH_CONNECTION_BROKEN,
354     sizeof (struct GNUNET_MESH_ConnectionBroken)},
355   {&GMC_handle_destroy, GNUNET_MESSAGE_TYPE_MESH_CONNECTION_DESTROY,
356     sizeof (struct GNUNET_MESH_ConnectionDestroy)},
357   {&GMC_handle_keepalive, GNUNET_MESSAGE_TYPE_MESH_KEEPALIVE,
358     sizeof (struct GNUNET_MESH_ConnectionKeepAlive)},
359   {&GMC_handle_ack, GNUNET_MESSAGE_TYPE_MESH_ACK,
360     sizeof (struct GNUNET_MESH_ACK)},
361   {&GMC_handle_poll, GNUNET_MESSAGE_TYPE_MESH_POLL,
362     sizeof (struct GNUNET_MESH_Poll)},
363   {&GMC_handle_encrypted, GNUNET_MESSAGE_TYPE_MESH_ENCRYPTED, 0},
364   {&GMC_handle_kx, GNUNET_MESSAGE_TYPE_MESH_KX, 0},
365   {NULL, 0, 0}
366 };
367
368
369 /**
370  * To be called on core init/fail.
371  *
372  * @param cls Closure (config)
373  * @param identity the public identity of this peer
374  */
375 static void
376 core_init (void *cls,
377            const struct GNUNET_PeerIdentity *identity)
378 {
379   const struct GNUNET_CONFIGURATION_Handle *c = cls;
380   static int i = 0;
381
382   LOG (GNUNET_ERROR_TYPE_DEBUG, "Core init\n");
383   if (0 != memcmp (identity, &my_full_id, sizeof (my_full_id)))
384   {
385     LOG (GNUNET_ERROR_TYPE_ERROR, _("Wrong CORE service\n"));
386     LOG (GNUNET_ERROR_TYPE_ERROR, " core id %s\n", GNUNET_i2s (identity));
387     LOG (GNUNET_ERROR_TYPE_ERROR, " my id %s\n", GNUNET_i2s (&my_full_id));
388     GNUNET_CORE_disconnect (core_handle);
389     core_handle = GNUNET_CORE_connect (c, /* Main configuration */
390                                        NULL,      /* Closure passed to MESH functions */
391                                        &core_init,        /* Call core_init once connected */
392                                        &core_connect,     /* Handle connects */
393                                        &core_disconnect,  /* remove peers on disconnects */
394                                        NULL,      /* Don't notify about all incoming messages */
395                                        GNUNET_NO, /* For header only in notification */
396                                        NULL,      /* Don't notify about all outbound messages */
397                                        GNUNET_NO, /* For header-only out notification */
398                                        core_handlers);    /* Register these handlers */
399     if (10 < i++)
400       GNUNET_abort();
401   }
402   GML_start ();
403   return;
404 }
405
406 /**
407   * Core callback to write a pre-constructed data packet to core buffer
408   *
409   * @param cls Closure (MeshTransmissionDescriptor with data in "data" member).
410   * @param size Number of bytes available in buf.
411   * @param buf Where the to write the message.
412   *
413   * @return number of bytes written to buf
414   */
415 static size_t
416 send_core_data_raw (void *cls, size_t size, void *buf)
417 {
418   struct GNUNET_MessageHeader *msg = cls;
419   size_t total_size;
420
421   GNUNET_assert (NULL != msg);
422   total_size = ntohs (msg->size);
423
424   if (total_size > size)
425   {
426     GNUNET_break (0);
427     return 0;
428   }
429   memcpy (buf, msg, total_size);
430   GNUNET_free (cls);
431   return total_size;
432 }
433
434
435 /**
436  * Function to send a create connection message to a peer.
437  *
438  * @param c Connection to create.
439  * @param size number of bytes available in buf
440  * @param buf where the callee should write the message
441  * @return number of bytes written to buf
442  */
443 static size_t
444 send_core_connection_create (struct MeshConnection *c, size_t size, void *buf)
445 {
446   struct GNUNET_MESH_ConnectionCreate *msg;
447   struct GNUNET_PeerIdentity *peer_ptr;
448   const struct MeshPeerPath *p = GMC_get_path (c);
449   size_t size_needed;
450   int i;
451
452   if (NULL == p)
453     return 0;
454
455   LOG (GNUNET_ERROR_TYPE_DEBUG, "Sending CONNECTION CREATE...\n");
456   size_needed =
457       sizeof (struct GNUNET_MESH_ConnectionCreate) +
458       p->length * sizeof (struct GNUNET_PeerIdentity);
459
460   if (size < size_needed || NULL == buf)
461   {
462     GNUNET_break (0);
463     return 0;
464   }
465   msg = (struct GNUNET_MESH_ConnectionCreate *) buf;
466   msg->header.size = htons (size_needed);
467   msg->header.type = htons (GNUNET_MESSAGE_TYPE_MESH_CONNECTION_CREATE);
468   msg->cid = *GMC_get_id (c);
469
470   peer_ptr = (struct GNUNET_PeerIdentity *) &msg[1];
471   for (i = 0; i < p->length; i++)
472   {
473     GNUNET_PEER_resolve (p->peers[i], peer_ptr++);
474   }
475
476   LOG (GNUNET_ERROR_TYPE_DEBUG,
477        "CONNECTION CREATE (%u bytes long) sent!\n",
478        size_needed);
479   return size_needed;
480 }
481
482
483 /**
484  * Creates a path ack message in buf and frees all unused resources.
485  *
486  * @param c Connection to send an ACK on.
487  * @param size number of bytes available in buf
488  * @param buf where the callee should write the message
489  *
490  * @return number of bytes written to buf
491  */
492 static size_t
493 send_core_connection_ack (struct MeshConnection *c, size_t size, void *buf)
494 {
495   struct GNUNET_MESH_ConnectionACK *msg = buf;
496
497   LOG (GNUNET_ERROR_TYPE_DEBUG, "Sending CONNECTION ACK...\n");
498   if (sizeof (struct GNUNET_MESH_ConnectionACK) > size)
499   {
500     GNUNET_break (0);
501     return 0;
502   }
503   msg->header.size = htons (sizeof (struct GNUNET_MESH_ConnectionACK));
504   msg->header.type = htons (GNUNET_MESSAGE_TYPE_MESH_CONNECTION_ACK);
505   msg->cid = *GMC_get_id (c);
506   msg->reserved = 0;
507
508   /* TODO add signature */
509
510   LOG (GNUNET_ERROR_TYPE_DEBUG, "CONNECTION ACK sent!\n");
511   return sizeof (struct GNUNET_MESH_ConnectionACK);
512 }
513
514
515 /******************************************************************************/
516 /********************************   STATIC  ***********************************/
517 /******************************************************************************/
518
519
520 /**
521  * Get priority for a queued message.
522  *
523  * @param q Queued message
524  *
525  * @return CORE priority to use.
526  */
527 static enum GNUNET_CORE_Priority
528 get_priority (struct MeshPeerQueue *q)
529 {
530   enum GNUNET_CORE_Priority low;
531   enum GNUNET_CORE_Priority high;
532
533   if (NULL == q)
534   {
535     GNUNET_break (0);
536     return GNUNET_CORE_PRIO_BACKGROUND;
537   }
538
539   /* Relayed traffic has lower priority, our own traffic has higher */
540   if (NULL == q->c || GNUNET_NO == GMC_is_origin (q->c, q->fwd))
541   {
542     low = GNUNET_CORE_PRIO_BEST_EFFORT;
543     high = GNUNET_CORE_PRIO_URGENT;
544   }
545   else
546   {
547     low = GNUNET_CORE_PRIO_URGENT;
548     high = GNUNET_CORE_PRIO_CRITICAL_CONTROL;
549   }
550
551   /* Bulky payload has lower priority, control traffic has higher. */
552   if (GNUNET_MESSAGE_TYPE_MESH_ENCRYPTED == q->type)
553     return low;
554   else
555     return high;
556 }
557
558
559 /**
560  * Iterator over tunnel hash map entries to destroy the tunnel during shutdown.
561  *
562  * @param cls closure
563  * @param key current key code
564  * @param value value in the hash map
565  * @return #GNUNET_YES if we should continue to iterate,
566  *         #GNUNET_NO if not.
567  */
568 static int
569 shutdown_tunnel (void *cls,
570                  const struct GNUNET_PeerIdentity *key,
571                  void *value)
572 {
573   struct MeshPeer *p = value;
574   struct MeshTunnel3 *t = p->tunnel;
575
576   if (NULL != t)
577     GMT_destroy (t);
578   return GNUNET_YES;
579 }
580
581
582 /**
583  * Destroy the peer_info and free any allocated resources linked to it
584  *
585  * @param peer The peer_info to destroy.
586  *
587  * @return GNUNET_OK on success
588  */
589 static int
590 peer_destroy (struct MeshPeer *peer)
591 {
592   struct GNUNET_PeerIdentity id;
593   struct MeshPeerPath *p;
594   struct MeshPeerPath *nextp;
595
596   GNUNET_PEER_resolve (peer->id, &id);
597   GNUNET_PEER_change_rc (peer->id, -1);
598
599   LOG (GNUNET_ERROR_TYPE_WARNING, "destroying peer %s\n", GNUNET_i2s (&id));
600
601   if (GNUNET_YES !=
602     GNUNET_CONTAINER_multipeermap_remove (peers, &id, peer))
603   {
604     GNUNET_break (0);
605     LOG (GNUNET_ERROR_TYPE_WARNING, " not in peermap!!\n");
606   }
607   if (NULL != peer->search_h)
608   {
609     GMD_search_stop (peer->search_h);
610   }
611   p = peer->path_head;
612   while (NULL != p)
613   {
614     nextp = p->next;
615     GNUNET_CONTAINER_DLL_remove (peer->path_head, peer->path_tail, p);
616     path_destroy (p);
617     p = nextp;
618   }
619   GMT_destroy_empty (peer->tunnel);
620   GNUNET_free (peer);
621   return GNUNET_OK;
622 }
623
624
625 /**
626  * Returns if peer is used (has a tunnel or is neighbor).
627  *
628  * @param peer Peer to check.
629  *
630  * @return #GNUNET_YES if peer is in use.
631  */
632 static int
633 peer_is_used (struct MeshPeer *peer)
634 {
635   struct MeshPeerPath *p;
636
637   if (NULL != peer->tunnel)
638     return GNUNET_YES;
639
640   for (p = peer->path_head; NULL != p; p = p->next)
641   {
642     if (p->length < 3)
643       return GNUNET_YES;
644   }
645     return GNUNET_NO;
646 }
647
648
649 /**
650  * Iterator over all the peers to get the oldest timestamp.
651  *
652  * @param cls Closure (unsued).
653  * @param key ID of the peer.
654  * @param value Peer_Info of the peer.
655  */
656 static int
657 peer_get_oldest (void *cls,
658                  const struct GNUNET_PeerIdentity *key,
659                  void *value)
660 {
661   struct MeshPeer *p = value;
662   struct GNUNET_TIME_Absolute *abs = cls;
663
664   /* Don't count active peers */
665   if (GNUNET_YES == peer_is_used (p))
666     return GNUNET_YES;
667
668   if (abs->abs_value_us < p->last_contact.abs_value_us)
669     abs->abs_value_us = p->last_contact.abs_value_us;
670
671   return GNUNET_YES;
672 }
673
674
675 /**
676  * Iterator over all the peers to remove the oldest entry.
677  *
678  * @param cls Closure (unsued).
679  * @param key ID of the peer.
680  * @param value Peer_Info of the peer.
681  */
682 static int
683 peer_timeout (void *cls,
684               const struct GNUNET_PeerIdentity *key,
685               void *value)
686 {
687   struct MeshPeer *p = value;
688   struct GNUNET_TIME_Absolute *abs = cls;
689
690   LOG (GNUNET_ERROR_TYPE_WARNING,
691        "peer %s timeout\n", GNUNET_i2s (key));
692
693   if (p->last_contact.abs_value_us == abs->abs_value_us &&
694       GNUNET_NO == peer_is_used (p))
695   {
696     peer_destroy (p);
697     return GNUNET_NO;
698   }
699     return GNUNET_YES;
700 }
701
702
703 /**
704  * Delete oldest unused peer.
705  */
706 static void
707 peer_delete_oldest (void)
708 {
709   struct GNUNET_TIME_Absolute abs;
710
711   abs = GNUNET_TIME_UNIT_FOREVER_ABS;
712
713   GNUNET_CONTAINER_multipeermap_iterate (peers,
714                                          &peer_get_oldest,
715                                          &abs);
716   GNUNET_CONTAINER_multipeermap_iterate (peers,
717                                          &peer_timeout,
718                                          &abs);
719 }
720
721
722 /**
723  * Choose the best (yet unused) path towards a peer,
724  * considering the tunnel properties.
725  *
726  * @param peer The destination peer.
727  *
728  * @return Best current known path towards the peer, if any.
729  */
730 static struct MeshPeerPath *
731 peer_get_best_path (const struct MeshPeer *peer)
732 {
733   struct MeshPeerPath *best_p;
734   struct MeshPeerPath *p;
735   unsigned int best_cost;
736   unsigned int cost;
737
738   best_cost = UINT_MAX;
739   best_p = NULL;
740   for (p = peer->path_head; NULL != p; p = p->next)
741   {
742     if (GNUNET_YES == GMT_is_path_used (peer->tunnel, p))
743       continue; /* If path is already in use, skip it. */
744
745     if (GNUNET_NO == path_is_valid (p))
746       continue; /* Don't use invalid paths. */
747
748     if ((cost = GMT_get_path_cost (peer->tunnel, p)) < best_cost)
749     {
750       best_cost = cost;
751       best_p = p;
752     }
753   }
754   return best_p;
755 }
756
757
758 static int
759 queue_is_sendable (struct MeshPeerQueue *q)
760 {
761   /* Is PID-independent? */
762   switch (q->type)
763   {
764     case GNUNET_MESSAGE_TYPE_MESH_ACK:
765     case GNUNET_MESSAGE_TYPE_MESH_POLL:
766     case GNUNET_MESSAGE_TYPE_MESH_KX:
767     case GNUNET_MESSAGE_TYPE_MESH_CONNECTION_CREATE:
768     case GNUNET_MESSAGE_TYPE_MESH_CONNECTION_ACK:
769     case GNUNET_MESSAGE_TYPE_MESH_CONNECTION_DESTROY:
770     case GNUNET_MESSAGE_TYPE_MESH_CONNECTION_BROKEN:
771     case GNUNET_MESSAGE_TYPE_MESH_KEEPALIVE:
772       return GNUNET_YES;
773
774     case GNUNET_MESSAGE_TYPE_MESH_ENCRYPTED:
775       break;
776
777     default:
778       GNUNET_break (0);
779   }
780
781   if (GMC_is_sendable (q->c, q->fwd))
782     return GNUNET_YES;
783
784   return GNUNET_NO;
785 }
786
787
788 /**
789  * Get first sendable message.
790  *
791  * @param peer The destination peer.
792  *
793  * @return Best current known path towards the peer, if any.
794  */
795 static struct MeshPeerQueue *
796 peer_get_first_message (const struct MeshPeer *peer)
797 {
798   struct MeshPeerQueue *q;
799
800   for (q = peer->queue_head; NULL != q; q = q->next)
801   {
802     if (queue_is_sendable (q))
803       return q;
804   }
805
806   return NULL;
807 }
808
809
810 /**
811  * Function to process paths received for a new peer addition. The recorded
812  * paths form the initial tunnel, which can be optimized later.
813  * Called on each result obtained for the DHT search.
814  *
815  * @param cls closure
816  * @param path
817  */
818 static void
819 search_handler (void *cls, const struct MeshPeerPath *path)
820 {
821   struct MeshPeer *peer = cls;
822   unsigned int connection_count;
823
824   GMP_add_path_to_all (path, GNUNET_NO);
825
826   /* Count connections */
827   connection_count = GMT_count_connections (peer->tunnel);
828
829   /* If we already have 3 (or more (?!)) connections, it's enough */
830   if (3 <= connection_count)
831     return;
832
833   if (MESH_TUNNEL3_SEARCHING == GMT_get_cstate (peer->tunnel))
834   {
835     LOG (GNUNET_ERROR_TYPE_DEBUG, " ... connect!\n");
836     GMP_connect (peer);
837   }
838   return;
839 }
840
841
842
843 /**
844  * Core callback to write a queued packet to core buffer
845  *
846  * @param cls Closure (peer info).
847  * @param size Number of bytes available in buf.
848  * @param buf Where the to write the message.
849  *
850  * @return number of bytes written to buf
851  */
852 static size_t
853 queue_send (void *cls, size_t size, void *buf)
854 {
855   struct MeshPeer *peer = cls;
856   struct MeshConnection *c;
857   struct MeshPeerQueue *queue;
858   const struct GNUNET_PeerIdentity *dst_id;
859   size_t data_size;
860
861   peer->core_transmit = NULL;
862   LOG (GNUNET_ERROR_TYPE_DEBUG, "* Queue send towards %s (max %u)\n",
863        GMP_2s (peer), size);
864
865   if (NULL == buf || 0 == size)
866   {
867     LOG (GNUNET_ERROR_TYPE_DEBUG, "* Buffer size 0.\n");
868     return 0;
869   }
870
871   /* Initialize */
872   queue = peer_get_first_message (peer);
873   if (NULL == queue)
874   {
875     GNUNET_break (0); /* Core tmt_rdy should've been canceled */
876     return 0;
877   }
878   c = queue->c;
879
880   dst_id = GNUNET_PEER_resolve2 (peer->id);
881   LOG (GNUNET_ERROR_TYPE_DEBUG, "*   on connection %s\n", GMC_2s (c));
882   /* Check if buffer size is enough for the message */
883   if (queue->size > size)
884   {
885     LOG (GNUNET_ERROR_TYPE_WARNING, "not enough room (%u vs %u), reissue\n",
886          queue->size, size);
887     peer->core_transmit =
888       GNUNET_CORE_notify_transmit_ready (core_handle,
889                                          GNUNET_NO, get_priority (queue),
890                                          GNUNET_TIME_UNIT_FOREVER_REL,
891                                          dst_id,
892                                          queue->size,
893                                          &queue_send,
894                                          peer);
895     return 0;
896   }
897   LOG (GNUNET_ERROR_TYPE_DEBUG, "*   size %u ok\n", queue->size);
898
899   /* Fill buf */
900   switch (queue->type)
901   {
902     case GNUNET_MESSAGE_TYPE_MESH_CONNECTION_DESTROY:
903     case GNUNET_MESSAGE_TYPE_MESH_CONNECTION_BROKEN:
904     case GNUNET_MESSAGE_TYPE_MESH_KEEPALIVE:
905     case GNUNET_MESSAGE_TYPE_MESH_ENCRYPTED:
906     case GNUNET_MESSAGE_TYPE_MESH_KX:
907     case GNUNET_MESSAGE_TYPE_MESH_ACK:
908     case GNUNET_MESSAGE_TYPE_MESH_POLL:
909       LOG (GNUNET_ERROR_TYPE_DEBUG, "*   raw: %s\n", GM_m2s (queue->type));
910       data_size = send_core_data_raw (queue->cls, size, buf);
911       break;
912     case GNUNET_MESSAGE_TYPE_MESH_CONNECTION_CREATE:
913       LOG (GNUNET_ERROR_TYPE_DEBUG, "*   path create\n");
914       if (GMC_is_origin (c, GNUNET_YES))
915         data_size = send_core_connection_create (queue->c, size, buf);
916       else
917         data_size = send_core_data_raw (queue->cls, size, buf);
918       break;
919     case GNUNET_MESSAGE_TYPE_MESH_CONNECTION_ACK:
920       LOG (GNUNET_ERROR_TYPE_DEBUG, "*   path ack\n");
921       if (GMC_is_origin (c, GNUNET_NO) ||
922           GMC_is_origin (c, GNUNET_YES))
923         data_size = send_core_connection_ack (queue->c, size, buf);
924       else
925         data_size = send_core_data_raw (queue->cls, size, buf);
926       break;
927     case GNUNET_MESSAGE_TYPE_MESH_DATA:
928     case GNUNET_MESSAGE_TYPE_MESH_CHANNEL_CREATE:
929     case GNUNET_MESSAGE_TYPE_MESH_CHANNEL_DESTROY:
930       /* This should be encapsulted */
931       GNUNET_break (0);
932       data_size = 0;
933       break;
934     default:
935       GNUNET_break (0);
936       LOG (GNUNET_ERROR_TYPE_WARNING, "*   type unknown: %u\n", queue->type);
937       data_size = 0;
938   }
939
940   if (0 < drop_percent &&
941       GNUNET_CRYPTO_random_u32 (GNUNET_CRYPTO_QUALITY_WEAK, 101) < drop_percent)
942   {
943     LOG (GNUNET_ERROR_TYPE_WARNING, "DD %s on connection\n",
944          GM_m2s (queue->type), GMC_2s (c));
945     data_size = 0;
946   }
947   else
948   {
949     LOG (GNUNET_ERROR_TYPE_INFO,
950         "ss %s on connection %s (%p) %s (size %u)\n",
951         GM_m2s (queue->type), GMC_2s (c), c, GM_f2s (queue->fwd), data_size);
952   }
953
954   /* Free queue, but cls was freed by send_core_* */
955   GMP_queue_destroy (queue, GNUNET_NO);
956
957   /* If more data in queue, send next */
958   queue = peer_get_first_message (peer);
959   if (NULL != queue)
960   {
961     LOG (GNUNET_ERROR_TYPE_DEBUG, "*   more data!\n");
962     if (NULL == peer->core_transmit)
963     {
964       peer->core_transmit =
965           GNUNET_CORE_notify_transmit_ready (core_handle,
966                                              GNUNET_NO, get_priority (queue),
967                                              GNUNET_TIME_UNIT_FOREVER_REL,
968                                              dst_id,
969                                              queue->size,
970                                              &queue_send,
971                                              peer);
972       queue->start_waiting = GNUNET_TIME_absolute_get ();
973     }
974     else
975     {
976       LOG (GNUNET_ERROR_TYPE_DEBUG,
977                   "*   tmt rdy called somewhere else\n");
978     }
979 //     GMC_start_poll (); FIXME needed?
980   }
981   else
982   {
983 //     GMC_stop_poll(); FIXME needed?
984   }
985
986   LOG (GNUNET_ERROR_TYPE_DEBUG, "*  Return %d\n", data_size);
987   return data_size;
988 }
989
990
991 /******************************************************************************/
992 /********************************    API    ***********************************/
993 /******************************************************************************/
994
995
996 /**
997  * Free a transmission that was already queued with all resources
998  * associated to the request.
999  *
1000  * @param queue Queue handler to cancel.
1001  * @param clear_cls Is it necessary to free associated cls?
1002  */
1003 void
1004 GMP_queue_destroy (struct MeshPeerQueue *queue, int clear_cls)
1005 {
1006   struct MeshPeer *peer;
1007
1008   peer = queue->peer;
1009
1010   if (GNUNET_YES == clear_cls)
1011   {
1012     LOG (GNUNET_ERROR_TYPE_DEBUG, "#   queue destroy type %s\n",
1013                 GM_m2s (queue->type));
1014     switch (queue->type)
1015     {
1016       case GNUNET_MESSAGE_TYPE_MESH_CONNECTION_DESTROY:
1017         LOG (GNUNET_ERROR_TYPE_INFO, "destroying a DESTROY message\n");
1018         /* fall through */
1019       case GNUNET_MESSAGE_TYPE_MESH_CONNECTION_ACK:
1020       case GNUNET_MESSAGE_TYPE_MESH_CONNECTION_CREATE:
1021       case GNUNET_MESSAGE_TYPE_MESH_CONNECTION_BROKEN:
1022       case GNUNET_MESSAGE_TYPE_MESH_KEEPALIVE:
1023       case GNUNET_MESSAGE_TYPE_MESH_KX:
1024       case GNUNET_MESSAGE_TYPE_MESH_ENCRYPTED:
1025       case GNUNET_MESSAGE_TYPE_MESH_ACK:
1026       case GNUNET_MESSAGE_TYPE_MESH_POLL:
1027         GNUNET_free_non_null (queue->cls);
1028         break;
1029
1030       default:
1031         GNUNET_break (0);
1032         LOG (GNUNET_ERROR_TYPE_ERROR, "#   type %s unknown!\n",
1033                     GM_m2s (queue->type));
1034     }
1035   }
1036   GNUNET_CONTAINER_DLL_remove (peer->queue_head, peer->queue_tail, queue);
1037
1038   if (queue->type != GNUNET_MESSAGE_TYPE_MESH_ACK &&
1039       queue->type != GNUNET_MESSAGE_TYPE_MESH_POLL)
1040   {
1041     peer->queue_n--;
1042   }
1043
1044   if (NULL != queue->callback)
1045   {
1046     LOG (GNUNET_ERROR_TYPE_DEBUG, "#   Calling callback\n");
1047     queue->callback (queue->callback_cls,
1048                      queue->c, queue->type,
1049                      queue->fwd, queue->size,
1050                      GNUNET_TIME_absolute_get_duration (queue->start_waiting));
1051   }
1052
1053   GNUNET_free (queue);
1054 }
1055
1056
1057 /**
1058  * @brief Queue and pass message to core when possible.
1059  *
1060  * @param peer Peer towards which to queue the message.
1061  * @param cls Closure (@c type dependant). It will be used by queue_send to
1062  *            build the message to be sent if not already prebuilt.
1063  * @param type Type of the message, 0 for a raw message.
1064  * @param size Size of the message.
1065  * @param c Connection this message belongs to (can be NULL).
1066  * @param fwd Is this a message going root->dest? (FWD ACK are NOT FWD!)
1067  * @param cont Continuation to be called once CORE has taken the message.
1068  * @param cont_cls Closure for @c cont.
1069  *
1070  * @return Handle to cancel the message before it is sent. Once cont is called
1071  *         message has been sent and therefore the handle is no longer valid.
1072  */
1073 struct MeshPeerQueue *
1074 GMP_queue_add (struct MeshPeer *peer, void *cls, uint16_t type, size_t size,
1075                struct MeshConnection *c, int fwd,
1076                GMP_sent cont, void *cont_cls)
1077 {
1078   struct MeshPeerQueue *queue;
1079   int priority;
1080   int call_core;
1081
1082   LOG (GNUNET_ERROR_TYPE_INFO, "qq %s on connection %s (%p) %s towards %s (size %u)\n",
1083        GM_m2s (type), GMC_2s (c), c, GM_f2s (fwd), GMP_2s(peer), size);
1084
1085   if (NULL == peer->connections)
1086   {
1087     /* We are not connected to this peer, ignore request. */
1088     LOG (GNUNET_ERROR_TYPE_DEBUG, "WARNING %s not a neighbor\n", GMP_2s (peer));
1089     GNUNET_STATISTICS_update (stats, "# messages dropped due to wrong hop", 1,
1090                               GNUNET_NO);
1091     return NULL;
1092   }
1093
1094   priority = 0;
1095
1096   if (GNUNET_MESSAGE_TYPE_MESH_POLL == type ||
1097       GNUNET_MESSAGE_TYPE_MESH_ACK == type)
1098   {
1099     priority = 100;
1100   }
1101
1102   LOG (GNUNET_ERROR_TYPE_DEBUG, "priority %d\n", priority);
1103
1104   call_core = NULL == c ? GNUNET_YES : GMC_is_sendable (c, fwd);
1105   queue = GNUNET_new (struct MeshPeerQueue);
1106   queue->cls = cls;
1107   queue->type = type;
1108   queue->size = size;
1109   queue->peer = peer;
1110   queue->c = c;
1111   queue->fwd = fwd;
1112   queue->callback = cont;
1113   queue->callback_cls = cont_cls;
1114   if (100 > priority)
1115   {
1116     GNUNET_CONTAINER_DLL_insert_tail (peer->queue_head, peer->queue_tail, queue);
1117     peer->queue_n++;
1118   }
1119   else
1120   {
1121     GNUNET_CONTAINER_DLL_insert (peer->queue_head, peer->queue_tail, queue);
1122     call_core = GNUNET_YES;
1123   }
1124
1125   if (NULL == peer->core_transmit && GNUNET_YES == call_core)
1126   {
1127     LOG (GNUNET_ERROR_TYPE_DEBUG,
1128                 "calling core tmt rdy towards %s for %u bytes\n",
1129                 GMP_2s (peer), size);
1130     peer->core_transmit =
1131         GNUNET_CORE_notify_transmit_ready (core_handle,
1132                                            GNUNET_NO, get_priority (queue),
1133                                            GNUNET_TIME_UNIT_FOREVER_REL,
1134                                            GNUNET_PEER_resolve2 (peer->id),
1135                                            size,
1136                                            &queue_send,
1137                                            peer);
1138     queue->start_waiting = GNUNET_TIME_absolute_get ();
1139   }
1140   else
1141   {
1142     LOG (GNUNET_ERROR_TYPE_DEBUG,
1143                 "core tmt rdy towards %s already called\n",
1144                 GMP_2s (peer));
1145
1146   }
1147   return queue;
1148 }
1149
1150
1151 /**
1152  * Cancel all queued messages to a peer that belong to a certain connection.
1153  *
1154  * @param peer Peer towards whom to cancel.
1155  * @param c Connection whose queued messages to cancel. Might be destroyed by
1156  *          the sent continuation call.
1157  */
1158 void
1159 GMP_queue_cancel (struct MeshPeer *peer, struct MeshConnection *c)
1160 {
1161   struct MeshPeerQueue *q;
1162   struct MeshPeerQueue *next;
1163   struct MeshPeerQueue *prev;
1164
1165   for (q = peer->queue_head; NULL != q; q = next)
1166   {
1167     prev = q->prev;
1168     if (q->c == c)
1169     {
1170       LOG (GNUNET_ERROR_TYPE_DEBUG, "GMP_cancel_queue %s\n", GM_m2s (q->type));
1171       GMP_queue_destroy (q, GNUNET_YES);
1172
1173       /* Get next from prev, q->next might be already freed:
1174        * queue destroy -> callback -> GMC_destroy -> cancel_queues -> here
1175        */
1176       if (NULL == prev)
1177         next = peer->queue_head;
1178       else
1179         next = prev->next;
1180     }
1181     else
1182     {
1183       next = q->next;
1184     }
1185   }
1186   if (NULL == peer->queue_head)
1187   {
1188     if (NULL != peer->core_transmit)
1189     {
1190       GNUNET_CORE_notify_transmit_ready_cancel (peer->core_transmit);
1191       peer->core_transmit = NULL;
1192     }
1193   }
1194 }
1195
1196
1197 /**
1198  * Get the first transmittable message for a connection.
1199  *
1200  * @param peer Neighboring peer.
1201  * @param c Connection.
1202  *
1203  * @return First transmittable message.
1204  */
1205 static struct MeshPeerQueue *
1206 connection_get_first_message (struct MeshPeer *peer, struct MeshConnection *c)
1207 {
1208   struct MeshPeerQueue *q;
1209
1210   for (q = peer->queue_head; NULL != q; q = q->next)
1211   {
1212     if (q->c != c)
1213       continue;
1214     if (queue_is_sendable (q))
1215     {
1216       LOG (GNUNET_ERROR_TYPE_DEBUG, "  sendable!!\n");
1217       return q;
1218     }
1219     LOG (GNUNET_ERROR_TYPE_DEBUG, "  not sendable\n");
1220   }
1221
1222   return NULL;
1223 }
1224
1225
1226 void
1227 GMP_queue_unlock (struct MeshPeer *peer, struct MeshConnection *c)
1228 {
1229   struct MeshPeerQueue *q;
1230   size_t size;
1231
1232   if (NULL != peer->core_transmit)
1233   {
1234     LOG (GNUNET_ERROR_TYPE_DEBUG, "  already unlocked!\n");
1235     return; /* Already unlocked */
1236   }
1237
1238   q = connection_get_first_message (peer, c);
1239   if (NULL == q)
1240   {
1241     LOG (GNUNET_ERROR_TYPE_DEBUG, "  queue empty!\n");
1242     return; /* Nothing to transmit */
1243   }
1244
1245   size = q->size;
1246   peer->core_transmit =
1247       GNUNET_CORE_notify_transmit_ready (core_handle,
1248                                          GNUNET_NO, get_priority (q),
1249                                          GNUNET_TIME_UNIT_FOREVER_REL,
1250                                          GNUNET_PEER_resolve2 (peer->id),
1251                                          size,
1252                                          &queue_send,
1253                                          peer);
1254 }
1255
1256
1257 /**
1258  * Initialize the peer subsystem.
1259  *
1260  * @param c Configuration.
1261  */
1262 void
1263 GMP_init (const struct GNUNET_CONFIGURATION_Handle *c)
1264 {
1265   LOG (GNUNET_ERROR_TYPE_DEBUG, "init\n");
1266   peers = GNUNET_CONTAINER_multipeermap_create (128, GNUNET_NO);
1267   if (GNUNET_OK !=
1268       GNUNET_CONFIGURATION_get_value_number (c, "MESH", "MAX_PEERS",
1269                                              &max_peers))
1270   {
1271     GNUNET_log_config_invalid (GNUNET_ERROR_TYPE_WARNING,
1272                                "MESH", "MAX_PEERS", "USING DEFAULT");
1273     max_peers = 1000;
1274   }
1275
1276   if (GNUNET_OK !=
1277       GNUNET_CONFIGURATION_get_value_number (c, "MESH", "DROP_PERCENT",
1278                                              &drop_percent))
1279   {
1280     drop_percent = 0;
1281   }
1282   else
1283   {
1284     LOG (GNUNET_ERROR_TYPE_WARNING,
1285                 "\n***************************************\n"
1286                 "Mesh is running with drop mode enabled.\n"
1287                 "This is NOT a good idea!\n"
1288                 "Remove the DROP_PERCENT option from your configuration.\n"
1289                 "***************************************\n");
1290   }
1291
1292   core_handle = GNUNET_CORE_connect (c, /* Main configuration */
1293                                      NULL,      /* Closure passed to MESH functions */
1294                                      &core_init,        /* Call core_init once connected */
1295                                      &core_connect,     /* Handle connects */
1296                                      &core_disconnect,  /* remove peers on disconnects */
1297                                      NULL,      /* Don't notify about all incoming messages */
1298                                      GNUNET_NO, /* For header only in notification */
1299                                      NULL,      /* Don't notify about all outbound messages */
1300                                      GNUNET_NO, /* For header-only out notification */
1301                                      core_handlers);    /* Register these handlers */
1302   transport_handle = GNUNET_TRANSPORT_connect (c, &my_full_id,
1303                                         NULL, /* cls */
1304                                         NULL, NULL, NULL); /* Notify callbacks */
1305
1306   if (NULL == core_handle || NULL == transport_handle)
1307   {
1308     GNUNET_break (0);
1309     GNUNET_SCHEDULER_shutdown ();
1310     return;
1311   }
1312
1313 }
1314
1315 /**
1316  * Shut down the peer subsystem.
1317  */
1318 void
1319 GMP_shutdown (void)
1320 {
1321   GNUNET_CONTAINER_multipeermap_iterate (peers, &shutdown_tunnel, NULL);
1322
1323   if (core_handle != NULL)
1324   {
1325     GNUNET_CORE_disconnect (core_handle);
1326     core_handle = NULL;
1327   }
1328   if (transport_handle != NULL)
1329   {
1330     GNUNET_TRANSPORT_disconnect (transport_handle);
1331     transport_handle = NULL;
1332   }
1333   GNUNET_PEER_change_rc (myid, -1);
1334 }
1335
1336 /**
1337  * Retrieve the MeshPeer stucture associated with the peer, create one
1338  * and insert it in the appropriate structures if the peer is not known yet.
1339  *
1340  * @param peer_id Full identity of the peer.
1341  *
1342  * @return Existing or newly created peer structure.
1343  */
1344 struct MeshPeer *
1345 GMP_get (const struct GNUNET_PeerIdentity *peer_id)
1346 {
1347   struct MeshPeer *peer;
1348
1349   peer = GNUNET_CONTAINER_multipeermap_get (peers, peer_id);
1350   if (NULL == peer)
1351   {
1352     peer = GNUNET_new (struct MeshPeer);
1353     if (GNUNET_CONTAINER_multipeermap_size (peers) > max_peers)
1354     {
1355       peer_delete_oldest ();
1356     }
1357         GNUNET_CONTAINER_multipeermap_put (peers, peer_id, peer,
1358                                            GNUNET_CONTAINER_MULTIHASHMAPOPTION_UNIQUE_FAST);
1359         peer->id = GNUNET_PEER_intern (peer_id);
1360   }
1361   peer->last_contact = GNUNET_TIME_absolute_get();
1362
1363   return peer;
1364 }
1365
1366
1367 /**
1368  * Retrieve the MeshPeer stucture associated with the peer, create one
1369  * and insert it in the appropriate structures if the peer is not known yet.
1370  *
1371  * @param peer Short identity of the peer.
1372  *
1373  * @return Existing or newly created peer structure.
1374  */
1375 struct MeshPeer *
1376 GMP_get_short (const GNUNET_PEER_Id peer)
1377 {
1378   return GMP_get (GNUNET_PEER_resolve2 (peer));
1379 }
1380
1381
1382 /**
1383  * Try to connect to a peer on transport level.
1384  *
1385  * @param cls Closure (peer).
1386  * @param tc TaskContext.
1387  */
1388 static void
1389 try_connect (void *cls, const struct GNUNET_SCHEDULER_TaskContext *tc)
1390 {
1391   struct MeshPeer *peer = cls;
1392
1393   if (0 != (GNUNET_SCHEDULER_REASON_SHUTDOWN & tc->reason))
1394     return;
1395
1396   GNUNET_TRANSPORT_try_connect (transport_handle,
1397                                 GNUNET_PEER_resolve2 (peer->id), NULL, NULL);
1398 }
1399
1400
1401 /**
1402  * Try to establish a new connection to this peer (in its tunnel).
1403  * If the peer doesn't have any path to it yet, try to get one.
1404  * If the peer already has some path, send a CREATE CONNECTION towards it.
1405  *
1406  * @param peer Peer to connect to.
1407  */
1408 void
1409 GMP_connect (struct MeshPeer *peer)
1410 {
1411   struct MeshTunnel3 *t;
1412   struct MeshPeerPath *p;
1413   struct MeshConnection *c;
1414   int rerun_search;
1415
1416   LOG (GNUNET_ERROR_TYPE_DEBUG, "peer_connect towards %s\n", GMP_2s (peer));
1417
1418   /* If we have a current hello, try to connect using it. */
1419   GMP_try_connect (peer);
1420
1421   t = peer->tunnel;
1422   c = NULL;
1423   rerun_search = GNUNET_NO;
1424
1425   if (NULL != peer->path_head)
1426   {
1427     LOG (GNUNET_ERROR_TYPE_DEBUG, "  some path exists\n");
1428     p = peer_get_best_path (peer);
1429     if (NULL != p)
1430     {
1431       LOG (GNUNET_ERROR_TYPE_DEBUG, "  %u hops\n", p->length);
1432       c = GMT_use_path (t, p);
1433       if (NULL == c)
1434       {
1435         /* This case can happen when the path includes a first hop that is
1436          * not yet known to be connected.
1437          *
1438          * This happens quite often during testing when running mesh
1439          * under valgrind: core connect notifications come very late and the
1440          * DHT result has already come and created a valid path.
1441          * In this case, the peer->connections hashmap will be NULL and
1442          * tunnel_use_path will not be able to create a connection from that
1443          * path.
1444          *
1445          * Re-running the DHT GET should give core time to callback.
1446          *
1447          * GMT_use_path -> GMC_new -> register_neighbors takes care of
1448          * updating statistics about this issue.
1449          */
1450         rerun_search = GNUNET_YES;
1451       }
1452       else
1453       {
1454         GMC_send_create (c);
1455         return;
1456       }
1457     }
1458     else
1459     {
1460       LOG (GNUNET_ERROR_TYPE_DEBUG, "  but is NULL, all paths are in use\n");
1461     }
1462   }
1463
1464   if (NULL != peer->search_h && GNUNET_YES == rerun_search)
1465   {
1466     GMD_search_stop (peer->search_h);
1467     peer->search_h = NULL;
1468     LOG (GNUNET_ERROR_TYPE_DEBUG,
1469          "  Stopping DHT GET for peer %s\n",
1470          GMP_2s (peer));
1471   }
1472
1473   if (NULL == peer->search_h)
1474   {
1475     const struct GNUNET_PeerIdentity *id;
1476
1477     id = GNUNET_PEER_resolve2 (peer->id);
1478     LOG (GNUNET_ERROR_TYPE_DEBUG,
1479                 "  Starting DHT GET for peer %s\n", GMP_2s (peer));
1480     peer->search_h = GMD_search (id, &search_handler, peer);
1481     if (MESH_TUNNEL3_NEW == GMT_get_cstate (t))
1482       GMT_change_cstate (t, MESH_TUNNEL3_SEARCHING);
1483   }
1484 }
1485
1486
1487 /**
1488  * Chech whether there is a direct (core level)  connection to peer.
1489  *
1490  * @param peer Peer to check.
1491  *
1492  * @return #GNUNET_YES if there is a direct connection.
1493  */
1494 int
1495 GMP_is_neighbor (const struct MeshPeer *peer)
1496 {
1497   struct MeshPeerPath *path;
1498
1499   if (NULL == peer->connections)
1500     return GNUNET_NO;
1501
1502   for (path = peer->path_head; NULL != path; path = path->next)
1503   {
1504     if (3 > path->length)
1505       return GNUNET_YES;
1506   }
1507
1508   /* Is not a neighbor but connections is not NULL, probably disconnecting */
1509   return GNUNET_NO;
1510 }
1511
1512
1513 /**
1514  * Create and initialize a new tunnel towards a peer, in case it has none.
1515  * In case the peer already has a tunnel, nothing is done.
1516  *
1517  * Does not generate any traffic, just creates the local data structures.
1518  *
1519  * @param peer Peer towards which to create the tunnel.
1520  */
1521 void
1522 GMP_add_tunnel (struct MeshPeer *peer)
1523 {
1524   if (NULL != peer->tunnel)
1525     return;
1526   peer->tunnel = GMT_new (peer);
1527 }
1528
1529
1530 /**
1531  * Add a connection to a neighboring peer.
1532  *
1533  * Store that the peer is the first hop of the connection in one
1534  * direction and that on peer disconnect the connection must be
1535  * notified and destroyed, for it will no longer be valid.
1536  *
1537  * @param peer Peer to add connection to.
1538  * @param c Connection to add.
1539  *
1540  * @return GNUNET_OK on success.
1541  */
1542 int
1543 GMP_add_connection (struct MeshPeer *peer,
1544                     struct MeshConnection *c)
1545 {
1546   int result;
1547   LOG (GNUNET_ERROR_TYPE_DEBUG, "adding connection %s\n", GMC_2s (c));
1548   LOG (GNUNET_ERROR_TYPE_DEBUG, "to peer %s\n", GMP_2s (peer));
1549
1550   if (NULL == peer->connections)
1551   {
1552     GNUNET_break (0);
1553     LOG (GNUNET_ERROR_TYPE_DEBUG,
1554          "Peer %s is not a neighbor!\n",
1555          GMP_2s (peer));
1556     return GNUNET_SYSERR;
1557   }
1558   LOG (GNUNET_ERROR_TYPE_DEBUG,
1559        "peer %s ok, has %u connections.\n",
1560        GMP_2s (peer), GNUNET_CONTAINER_multihashmap_size (peer->connections));
1561   result = GNUNET_CONTAINER_multihashmap_put (peer->connections,
1562                                               GMC_get_id (c),
1563                                               c,
1564                                               GNUNET_CONTAINER_MULTIHASHMAPOPTION_UNIQUE_FAST);
1565   LOG (GNUNET_ERROR_TYPE_DEBUG,
1566        " now has %u connections.\n",
1567        GNUNET_CONTAINER_multihashmap_size (peer->connections));
1568   LOG (GNUNET_ERROR_TYPE_DEBUG, "result %u\n", result);
1569
1570   return result;
1571 }
1572
1573
1574 /**
1575  * Add the path to the peer and update the path used to reach it in case this
1576  * is the shortest.
1577  *
1578  * @param peer Destination peer to add the path to.
1579  * @param path New path to add. Last peer must be the peer in arg 1.
1580  *             Path will be either used of freed if already known.
1581  * @param trusted Do we trust that this path is real?
1582  *
1583  * @return path if path was taken, pointer to existing duplicate if exists
1584  *         NULL on error.
1585  */
1586 struct MeshPeerPath *
1587 GMP_add_path (struct MeshPeer *peer, struct MeshPeerPath *path,
1588               int trusted)
1589 {
1590   struct MeshPeerPath *aux;
1591   unsigned int l;
1592   unsigned int l2;
1593
1594   LOG (GNUNET_ERROR_TYPE_DEBUG, "adding path [%u] to peer %s\n",
1595        path->length, GMP_2s (peer));
1596
1597   if ((NULL == peer) || (NULL == path))
1598   {
1599     GNUNET_break (0);
1600     path_destroy (path);
1601     return NULL;
1602   }
1603   if (path->peers[path->length - 1] != peer->id)
1604   {
1605     GNUNET_break (0);
1606     path_destroy (path);
1607     return NULL;
1608   }
1609   if (2 >= path->length && GNUNET_NO == trusted)
1610   {
1611     /* Only allow CORE to tell us about direct paths */
1612     path_destroy (path);
1613     return NULL;
1614   }
1615   for (l = 1; l < path->length; l++)
1616   {
1617     if (path->peers[l] == myid)
1618     {
1619       LOG (GNUNET_ERROR_TYPE_DEBUG, "shortening path by %u\n", l);
1620       for (l2 = 0; l2 < path->length - l; l2++)
1621       {
1622         path->peers[l2] = path->peers[l + l2];
1623       }
1624       path->length -= l;
1625       l = 1;
1626       path->peers = GNUNET_realloc (path->peers,
1627                                     path->length * sizeof (GNUNET_PEER_Id));
1628     }
1629   }
1630
1631   LOG (GNUNET_ERROR_TYPE_DEBUG, "adding path [%u]\n", path->length);
1632
1633   l = path_get_length (path);
1634   if (0 == l)
1635   {
1636     path_destroy (path);
1637     return NULL;
1638   }
1639
1640   GNUNET_assert (peer->id == path->peers[path->length - 1]);
1641   for (aux = peer->path_head; aux != NULL; aux = aux->next)
1642   {
1643     l2 = path_get_length (aux);
1644     if (l2 > l)
1645     {
1646       LOG (GNUNET_ERROR_TYPE_DEBUG, "  added\n");
1647       GNUNET_CONTAINER_DLL_insert_before (peer->path_head,
1648                                           peer->path_tail, aux, path);
1649       return path;
1650     }
1651     else
1652     {
1653       if (l2 == l && memcmp (path->peers, aux->peers, l) == 0)
1654       {
1655         LOG (GNUNET_ERROR_TYPE_DEBUG, "  already known\n");
1656         path_destroy (path);
1657         return aux;
1658       }
1659     }
1660   }
1661   GNUNET_CONTAINER_DLL_insert_tail (peer->path_head, peer->path_tail,
1662                                     path);
1663   LOG (GNUNET_ERROR_TYPE_DEBUG, "  added last\n");
1664   return path;
1665 }
1666
1667
1668 /**
1669  * Add the path to the origin peer and update the path used to reach it in case
1670  * this is the shortest.
1671  * The path is given in peer_info -> destination, therefore we turn the path
1672  * upside down first.
1673  *
1674  * @param peer Peer to add the path to, being the origin of the path.
1675  * @param path New path to add after being inversed.
1676  *             Path will be either used or freed.
1677  * @param trusted Do we trust that this path is real?
1678  *
1679  * @return path if path was taken, pointer to existing duplicate if exists
1680  *         NULL on error.
1681  */
1682 struct MeshPeerPath *
1683 GMP_add_path_to_origin (struct MeshPeer *peer,
1684                         struct MeshPeerPath *path,
1685                         int trusted)
1686 {
1687   if (NULL == path)
1688     return NULL;
1689   path_invert (path);
1690   return GMP_add_path (peer, path, trusted);
1691 }
1692
1693
1694 /**
1695  * Adds a path to the info of all the peers in the path
1696  *
1697  * @param p Path to process.
1698  * @param confirmed Whether we know if the path works or not.
1699  */
1700 void
1701 GMP_add_path_to_all (const struct MeshPeerPath *p, int confirmed)
1702 {
1703   unsigned int i;
1704
1705   /* TODO: invert and add */
1706   for (i = 0; i < p->length && p->peers[i] != myid; i++) /* skip'em */ ;
1707   for (i++; i < p->length; i++)
1708   {
1709     struct MeshPeer *aux;
1710     struct MeshPeerPath *copy;
1711
1712     aux = GMP_get_short (p->peers[i]);
1713     copy = path_duplicate (p);
1714     copy->length = i + 1;
1715     GMP_add_path (aux, copy, p->length < 3 ? GNUNET_NO : confirmed);
1716   }
1717 }
1718
1719
1720 /**
1721  * Remove any path to the peer that has the extact same peers as the one given.
1722  *
1723  * @param peer Peer to remove the path from.
1724  * @param path Path to remove. Is always destroyed .
1725  */
1726 void
1727 GMP_remove_path (struct MeshPeer *peer, struct MeshPeerPath *path)
1728 {
1729   struct MeshPeerPath *iter;
1730   struct MeshPeerPath *next;
1731
1732   GNUNET_assert (myid == path->peers[0]);
1733   GNUNET_assert (peer->id == path->peers[path->length - 1]);
1734
1735   for (iter = peer->path_head; NULL != iter; iter = next)
1736   {
1737     next = iter->next;
1738     if (0 == memcmp (path->peers, iter->peers,
1739                      sizeof (GNUNET_PEER_Id) * path->length))
1740     {
1741       GNUNET_CONTAINER_DLL_remove (peer->path_head, peer->path_tail, iter);
1742       path_destroy (iter);
1743       if (path == iter)
1744         return;
1745     }
1746   }
1747   path_destroy (path);
1748 }
1749
1750
1751 /**
1752  * Remove a connection from a neighboring peer.
1753  *
1754  * @param peer Peer to remove connection from.
1755  * @param c Connection to remove.
1756  *
1757  * @return GNUNET_OK on success.
1758  */
1759 int
1760 GMP_remove_connection (struct MeshPeer *peer,
1761                        const struct MeshConnection *c)
1762 {
1763   LOG (GNUNET_ERROR_TYPE_DEBUG, "removing connection %s\n", GMC_2s (c));
1764   LOG (GNUNET_ERROR_TYPE_DEBUG, "from peer %s\n", GMP_2s (peer));
1765
1766   if (NULL == peer || NULL == peer->connections)
1767   {
1768     LOG (GNUNET_ERROR_TYPE_DEBUG,
1769          "Peer %s is not a neighbor!\n",
1770          GMP_2s (peer));
1771     return GNUNET_SYSERR;
1772   }
1773   LOG (GNUNET_ERROR_TYPE_DEBUG,
1774        "peer %s ok, has %u connections.\n",
1775        GMP_2s (peer), GNUNET_CONTAINER_multihashmap_size (peer->connections));
1776
1777   return GNUNET_CONTAINER_multihashmap_remove (peer->connections,
1778                                                GMC_get_id (c),
1779                                                c);
1780 }
1781
1782 /**
1783  * Start the DHT search for new paths towards the peer: we don't have
1784  * enough good connections.
1785  *
1786  * @param peer Destination peer.
1787  */
1788 void
1789 GMP_start_search (struct MeshPeer *peer)
1790 {
1791   if (NULL != peer->search_h)
1792   {
1793     GNUNET_break (0);
1794     return;
1795   }
1796
1797   peer->search_h = GMD_search (GMP_get_id (peer), &search_handler, peer);
1798 }
1799
1800
1801 /**
1802  * Stop the DHT search for new paths towards the peer: we already have
1803  * enough good connections.
1804  *
1805  * @param peer Destination peer.
1806  */
1807 void
1808 GMP_stop_search (struct MeshPeer *peer)
1809 {
1810   if (NULL == peer->search_h)
1811   {
1812     GNUNET_break (0);
1813     return;
1814   }
1815
1816   GMD_search_stop (peer->search_h);
1817   peer->search_h = NULL;
1818 }
1819
1820
1821 /**
1822  * Get the Full ID of a peer.
1823  *
1824  * @param peer Peer to get from.
1825  *
1826  * @return Full ID of peer.
1827  */
1828 const struct GNUNET_PeerIdentity *
1829 GMP_get_id (const struct MeshPeer *peer)
1830 {
1831   return GNUNET_PEER_resolve2 (peer->id);
1832 }
1833
1834
1835 /**
1836  * Get the Short ID of a peer.
1837  *
1838  * @param peer Peer to get from.
1839  *
1840  * @return Short ID of peer.
1841  */
1842 GNUNET_PEER_Id
1843 GMP_get_short_id (const struct MeshPeer *peer)
1844 {
1845   return peer->id;
1846 }
1847
1848
1849 /**
1850  * Set tunnel.
1851  *
1852  * @param peer Peer.
1853  * @param t Tunnel.
1854  */
1855 void
1856 GMP_set_tunnel (struct MeshPeer *peer, struct MeshTunnel3 *t)
1857 {
1858   peer->tunnel = t;
1859 }
1860
1861
1862 /**
1863  * Get the tunnel towards a peer.
1864  *
1865  * @param peer Peer to get from.
1866  *
1867  * @return Tunnel towards peer.
1868  */
1869 struct MeshTunnel3 *
1870 GMP_get_tunnel (const struct MeshPeer *peer)
1871 {
1872   return peer->tunnel;
1873 }
1874
1875
1876 /**
1877  * Set the hello message.
1878  *
1879  * @param peer Peer whose message to set.
1880  * @param hello Hello message.
1881  */
1882 void
1883 GMP_set_hello (struct MeshPeer *peer, const struct GNUNET_HELLO_Message *hello)
1884 {
1885   struct GNUNET_HELLO_Message *old;
1886   size_t size;
1887
1888   LOG (GNUNET_ERROR_TYPE_DEBUG, "set hello for %s\n", GMP_2s (peer));
1889   if (NULL == hello)
1890     return;
1891
1892   old = GMP_get_hello (peer);
1893   if (NULL == old)
1894   {
1895     size = GNUNET_HELLO_size (hello);
1896     LOG (GNUNET_ERROR_TYPE_DEBUG, " new (%u bytes)\n", size);
1897     peer->hello = GNUNET_malloc (size);
1898     memcpy (peer->hello, hello, size);
1899   }
1900   else
1901   {
1902     peer->hello = GNUNET_HELLO_merge (old, hello);
1903     LOG (GNUNET_ERROR_TYPE_DEBUG, " merge into %p (%u bytes)\n",
1904          peer->hello, GNUNET_HELLO_size (hello));
1905     GNUNET_free (old);
1906   }
1907 }
1908
1909
1910 /**
1911  * Get the hello message.
1912  *
1913  * @param peer Peer whose message to get.
1914  *
1915  * @return Hello message.
1916  */
1917 struct GNUNET_HELLO_Message *
1918 GMP_get_hello (struct MeshPeer *peer)
1919 {
1920   struct GNUNET_TIME_Absolute expiration;
1921   struct GNUNET_TIME_Relative remaining;
1922
1923   if (NULL == peer->hello)
1924     return NULL;
1925
1926   expiration = GNUNET_HELLO_get_last_expiration (peer->hello);
1927   remaining = GNUNET_TIME_absolute_get_remaining (expiration);
1928   if (0 == remaining.rel_value_us)
1929   {
1930     LOG (GNUNET_ERROR_TYPE_DEBUG, " get - hello expired on %s\n",
1931          GNUNET_STRINGS_absolute_time_to_string (expiration));
1932     GNUNET_free (peer->hello);
1933     peer->hello = NULL;
1934   }
1935   return peer->hello;
1936 }
1937
1938
1939 /**
1940  * Try to connect to a peer on TRANSPORT level.
1941  *
1942  * @param peer Peer to whom to connect.
1943  */
1944 void
1945 GMP_try_connect (struct MeshPeer *peer)
1946 {
1947   struct GNUNET_HELLO_Message *hello;
1948   struct GNUNET_MessageHeader *mh;
1949
1950   hello = GMP_get_hello (peer);
1951   if (NULL == hello)
1952     return;
1953
1954   mh = GNUNET_HELLO_get_header (hello);
1955   GNUNET_TRANSPORT_offer_hello (transport_handle, mh, try_connect, peer);
1956 }
1957
1958
1959 /**
1960  * Count the number of known paths toward the peer.
1961  *
1962  * @param peer Peer to get path info.
1963  *
1964  * @return Number of known paths.
1965  */
1966 unsigned int
1967 GMP_count_paths (const struct MeshPeer *peer)
1968 {
1969   struct MeshPeerPath *iter;
1970   unsigned int i;
1971
1972   for (iter = peer->path_head, i = 0; NULL != iter; iter = iter->next)
1973     i++;
1974
1975   return i;
1976 }
1977
1978
1979 /**
1980  * Iterate all known peers.
1981  *
1982  * @param iter Iterator.
1983  * @param cls Closure for @c iter.
1984  */
1985 void
1986 GMP_iterate_all (GNUNET_CONTAINER_PeerMapIterator iter, void *cls)
1987 {
1988   GNUNET_CONTAINER_multipeermap_iterate (peers, iter, cls);
1989 }
1990
1991
1992 /**
1993  * Get the static string for a peer ID.
1994  *
1995  * @param peer Peer.
1996  *
1997  * @return Static string for it's ID.
1998  */
1999 const char *
2000 GMP_2s (const struct MeshPeer *peer)
2001 {
2002   if (NULL == peer)
2003     return "(NULL)";
2004   return GNUNET_i2s (GNUNET_PEER_resolve2 (peer->id));
2005 }