- make connection always log with ---, reserve === for upper levels
[oweals/gnunet.git] / src / cadet / gnunet-service-cadet_tunnel.c
1 /*
2      This file is part of GNUnet.
3      (C) 2013 Christian Grothoff (and other contributing authors)
4
5      GNUnet is free software; you can redistribute it and/or modify
6      it under the terms of the GNU General Public License as published
7      by the Free Software Foundation; either version 3, or (at your
8      option) any later version.
9
10      GNUnet is distributed in the hope that it will be useful, but
11      WITHOUT ANY WARRANTY; without even the implied warranty of
12      MERCHANTABILITY or FITNESS FOR A PARTICULAR PURPOSE.  See the GNU
13      General Public License for more details.
14
15      You should have received a copy of the GNU General Public License
16      along with GNUnet; see the file COPYING.  If not, write to the
17      Free Software Foundation, Inc., 59 Temple Place - Suite 330,
18      Boston, MA 02111-1307, USA.
19 */
20
21 #include "platform.h"
22 #include "gnunet_util_lib.h"
23
24 #include "gnunet_signatures.h"
25 #include "gnunet_statistics_service.h"
26
27 #include "cadet_protocol.h"
28 #include "cadet_path.h"
29
30 #include "gnunet-service-cadet_tunnel.h"
31 #include "gnunet-service-cadet_connection.h"
32 #include "gnunet-service-cadet_channel.h"
33 #include "gnunet-service-cadet_peer.h"
34
35 #define LOG(level, ...) GNUNET_log_from(level,"cadet-tun",__VA_ARGS__)
36 #define LOG2(level, ...) GNUNET_log_from_nocheck(level,"cadet-tun",__VA_ARGS__)
37
38 #define REKEY_WAIT GNUNET_TIME_relative_multiply(GNUNET_TIME_UNIT_SECONDS, 5)
39
40 #if !defined(GNUNET_CULL_LOGGING)
41 #define DUMP_KEYS_TO_STDERR GNUNET_YES
42 #else
43 #define DUMP_KEYS_TO_STDERR GNUNET_NO
44 #endif
45
46 /******************************************************************************/
47 /********************************   STRUCTS  **********************************/
48 /******************************************************************************/
49
50 struct CadetTChannel
51 {
52   struct CadetTChannel *next;
53   struct CadetTChannel *prev;
54   struct CadetChannel *ch;
55 };
56
57
58 /**
59  * Connection list and metadata.
60  */
61 struct CadetTConnection
62 {
63   /**
64    * Next in DLL.
65    */
66   struct CadetTConnection *next;
67
68   /**
69    * Prev in DLL.
70    */
71   struct CadetTConnection *prev;
72
73   /**
74    * Connection handle.
75    */
76   struct CadetConnection *c;
77
78   /**
79    * Creation time, to keep oldest connection alive.
80    */
81   struct GNUNET_TIME_Absolute created;
82
83   /**
84    * Connection throughput, to keep fastest connection alive.
85    */
86   uint32_t throughput;
87 };
88
89 /**
90  * Structure used during a Key eXchange.
91  */
92 struct CadetTunnelKXCtx
93 {
94   /**
95    * Encryption ("our") old "confirmed" key, for encrypting traffic sent by us
96    * end before the key exchange is finished or times out.
97    */
98   struct GNUNET_CRYPTO_SymmetricSessionKey e_key_old;
99
100   /**
101    * Decryption ("their") old "confirmed" key, for decrypting traffic sent by
102    * the other end before the key exchange started.
103    */
104   struct GNUNET_CRYPTO_SymmetricSessionKey d_key_old;
105
106   /**
107    * Challenge to send in a ping and expect in the pong.
108    */
109   uint32_t challenge;
110
111   /**
112    * When the rekey started. One minute after this the new key will be used.
113    */
114   struct GNUNET_TIME_Absolute rekey_start_time;
115
116   /**
117    * Task for delayed destruction of the Key eXchange context, to allow delayed
118    * messages with the old key to be decrypted successfully.
119    */
120   GNUNET_SCHEDULER_TaskIdentifier finish_task;
121 };
122
123 /**
124  * Struct containing all information regarding a tunnel to a peer.
125  */
126 struct CadetTunnel
127 {
128     /**
129      * Endpoint of the tunnel.
130      */
131   struct CadetPeer *peer;
132
133     /**
134      * State of the tunnel connectivity.
135      */
136   enum CadetTunnelCState cstate;
137
138   /**
139    * State of the tunnel encryption.
140    */
141   enum CadetTunnelEState estate;
142
143   /**
144    * Key eXchange context.
145    */
146   struct CadetTunnelKXCtx *kx_ctx;
147
148   /**
149    * Peer's ephemeral key, to recreate @c e_key and @c d_key when own ephemeral
150    * key changes.
151    */
152   struct GNUNET_CRYPTO_EcdhePublicKey peers_ephemeral_key;
153
154   /**
155    * Encryption ("our") key. It is only "confirmed" if kx_ctx is NULL.
156    */
157   struct GNUNET_CRYPTO_SymmetricSessionKey e_key;
158
159   /**
160    * Decryption ("their") key. It is only "confirmed" if kx_ctx is NULL.
161    */
162   struct GNUNET_CRYPTO_SymmetricSessionKey d_key;
163
164   /**
165    * Task to start the rekey process.
166    */
167   GNUNET_SCHEDULER_TaskIdentifier rekey_task;
168
169   /**
170    * Paths that are actively used to reach the destination peer.
171    */
172   struct CadetTConnection *connection_head;
173   struct CadetTConnection *connection_tail;
174
175   /**
176    * Next connection number.
177    */
178   uint32_t next_cid;
179
180   /**
181    * Channels inside this tunnel.
182    */
183   struct CadetTChannel *channel_head;
184   struct CadetTChannel *channel_tail;
185
186   /**
187    * Channel ID for the next created channel.
188    */
189   CADET_ChannelNumber next_chid;
190
191   /**
192    * Destroy flag: if true, destroy on last message.
193    */
194   GNUNET_SCHEDULER_TaskIdentifier destroy_task;
195
196   /**
197    * Queued messages, to transmit once tunnel gets connected.
198    */
199   struct CadetTunnelDelayed *tq_head;
200   struct CadetTunnelDelayed *tq_tail;
201
202   /**
203    * Task to trim connections if too many are present.
204    */
205   GNUNET_SCHEDULER_TaskIdentifier trim_connections_task;
206 };
207
208
209 /**
210  * Struct used to save messages in a non-ready tunnel to send once connected.
211  */
212 struct CadetTunnelDelayed
213 {
214   /**
215    * DLL
216    */
217   struct CadetTunnelDelayed *next;
218   struct CadetTunnelDelayed *prev;
219
220   /**
221    * Tunnel.
222    */
223   struct CadetTunnel *t;
224
225   /**
226    * Tunnel queue given to the channel to cancel request. Update on send_queued.
227    */
228   struct CadetTunnelQueue *tq;
229
230   /**
231    * Message to send.
232    */
233   /* struct GNUNET_MessageHeader *msg; */
234 };
235
236
237 /**
238  * Handle for messages queued but not yet sent.
239  */
240 struct CadetTunnelQueue
241 {
242   /**
243    * Connection queue handle, to cancel if necessary.
244    */
245   struct CadetConnectionQueue *cq;
246
247   /**
248    * Handle in case message hasn't been given to a connection yet.
249    */
250   struct CadetTunnelDelayed *tqd;
251
252   /**
253    * Continuation to call once sent.
254    */
255   GCT_sent cont;
256
257   /**
258    * Closure for @c cont.
259    */
260   void *cont_cls;
261 };
262
263
264 /******************************************************************************/
265 /*******************************   GLOBALS  ***********************************/
266 /******************************************************************************/
267
268 /**
269  * Global handle to the statistics service.
270  */
271 extern struct GNUNET_STATISTICS_Handle *stats;
272
273 /**
274  * Local peer own ID (memory efficient handle).
275  */
276 extern GNUNET_PEER_Id myid;
277
278 /**
279  * Local peer own ID (full value).
280  */
281 extern struct GNUNET_PeerIdentity my_full_id;
282
283
284 /**
285  * Don't try to recover tunnels if shutting down.
286  */
287 extern int shutting_down;
288
289
290 /**
291  * Set of all tunnels, in order to trigger a new exchange on rekey.
292  * Indexed by peer's ID.
293  */
294 static struct GNUNET_CONTAINER_MultiPeerMap *tunnels;
295
296 /**
297  * Default TTL for payload packets.
298  */
299 static unsigned long long default_ttl;
300
301 /**
302  * Own private key.
303  */
304 const static struct GNUNET_CRYPTO_EddsaPrivateKey *my_private_key;
305
306 /**
307  * Own ephemeral private key.
308  */
309 static struct GNUNET_CRYPTO_EcdhePrivateKey *my_ephemeral_key;
310
311 /**
312  * Cached message used to perform a key exchange.
313  */
314 static struct GNUNET_CADET_KX_Ephemeral kx_msg;
315
316 /**
317  * Task to generate a new ephemeral key.
318  */
319 static GNUNET_SCHEDULER_TaskIdentifier rekey_task;
320
321 /**
322  * Rekey period.
323  */
324 static struct GNUNET_TIME_Relative rekey_period;
325
326 /******************************************************************************/
327 /********************************   STATIC  ***********************************/
328 /******************************************************************************/
329
330 /**
331  * Get string description for tunnel connectivity state.
332  *
333  * @param cs Tunnel state.
334  *
335  * @return String representation.
336  */
337 static const char *
338 cstate2s (enum CadetTunnelCState cs)
339 {
340   static char buf[32];
341
342   switch (cs)
343   {
344     case CADET_TUNNEL_NEW:
345       return "CADET_TUNNEL_NEW";
346     case CADET_TUNNEL_SEARCHING:
347       return "CADET_TUNNEL_SEARCHING";
348     case CADET_TUNNEL_WAITING:
349       return "CADET_TUNNEL_WAITING";
350     case CADET_TUNNEL_READY:
351       return "CADET_TUNNEL_READY";
352     case CADET_TUNNEL_SHUTDOWN:
353       return "CADET_TUNNEL_SHUTDOWN";
354     default:
355       SPRINTF (buf, "%u (UNKNOWN STATE)", cs);
356       return buf;
357   }
358   return "";
359 }
360
361
362 /**
363  * Get string description for tunnel encryption state.
364  *
365  * @param es Tunnel state.
366  *
367  * @return String representation.
368  */
369 static const char *
370 estate2s (enum CadetTunnelEState es)
371 {
372   static char buf[32];
373
374   switch (es)
375   {
376     case CADET_TUNNEL_KEY_UNINITIALIZED:
377       return "CADET_TUNNEL_KEY_UNINITIALIZED";
378     case CADET_TUNNEL_KEY_SENT:
379       return "CADET_TUNNEL_KEY_SENT";
380     case CADET_TUNNEL_KEY_PING:
381       return "CADET_TUNNEL_KEY_PING";
382     case CADET_TUNNEL_KEY_OK:
383       return "CADET_TUNNEL_KEY_OK";
384     case CADET_TUNNEL_KEY_REKEY:
385       return "CADET_TUNNEL_KEY_REKEY";
386     default:
387       SPRINTF (buf, "%u (UNKNOWN STATE)", es);
388       return buf;
389   }
390   return "";
391 }
392
393
394 /**
395  * @brief Check if tunnel is ready to send traffic.
396  *
397  * Tunnel must be connected and with encryption correctly set up.
398  *
399  * @param t Tunnel to check.
400  *
401  * @return #GNUNET_YES if ready, #GNUNET_NO otherwise
402  */
403 static int
404 is_ready (struct CadetTunnel *t)
405 {
406   int ready;
407
408   GCT_debug (t, GNUNET_ERROR_TYPE_DEBUG);
409   ready = CADET_TUNNEL_READY == t->cstate
410           && (CADET_TUNNEL_KEY_OK == t->estate
411               || CADET_TUNNEL_KEY_REKEY == t->estate);
412   ready = ready || GCT_is_loopback (t);
413   return ready;
414 }
415
416
417 /**
418  * Check if a key is invalid (NULL pointer or all 0)
419  *
420  * @param key Key to check.
421  *
422  * @return #GNUNET_YES if key is null, #GNUNET_NO if exists and is not 0.
423  */
424 static int
425 is_key_null (struct GNUNET_CRYPTO_SymmetricSessionKey *key)
426 {
427   struct GNUNET_CRYPTO_SymmetricSessionKey null_key;
428
429   if (NULL == key)
430     return GNUNET_YES;
431
432   memset (&null_key, 0, sizeof (null_key));
433   if (0 == memcmp (key, &null_key, sizeof (null_key)))
434     return GNUNET_YES;
435   return GNUNET_NO;
436 }
437
438
439 /**
440  * Ephemeral key message purpose size.
441  *
442  * @return Size of the part of the ephemeral key message that must be signed.
443  */
444 size_t
445 ephemeral_purpose_size (void)
446 {
447   return sizeof (struct GNUNET_CRYPTO_EccSignaturePurpose) +
448          sizeof (struct GNUNET_TIME_AbsoluteNBO) +
449          sizeof (struct GNUNET_TIME_AbsoluteNBO) +
450          sizeof (struct GNUNET_CRYPTO_EcdhePublicKey) +
451          sizeof (struct GNUNET_PeerIdentity);
452 }
453
454
455 /**
456  * Size of the encrypted part of a ping message.
457  *
458  * @return Size of the encrypted part of a ping message.
459  */
460 size_t
461 ping_encryption_size (void)
462 {
463   return sizeof (uint32_t);
464 }
465
466
467 /**
468  * Get the channel's buffer. ONLY FOR NON-LOOPBACK CHANNELS!!
469  *
470  * @param tch Tunnel's channel handle.
471  *
472  * @return Amount of messages the channel can still buffer towards the client.
473  */
474 static unsigned int
475 get_channel_buffer (const struct CadetTChannel *tch)
476 {
477   int fwd;
478
479   /* If channel is outgoing, is origin in the FWD direction and fwd is YES */
480   fwd = GCCH_is_origin (tch->ch, GNUNET_YES);
481
482   return GCCH_get_buffer (tch->ch, fwd);
483 }
484
485
486 /**
487  * Get the channel's allowance status.
488  *
489  * @param tch Tunnel's channel handle.
490  *
491  * @return #GNUNET_YES if we allowed the client to send data to us.
492  */
493 static int
494 get_channel_allowed (const struct CadetTChannel *tch)
495 {
496   int fwd;
497
498   /* If channel is outgoing, is origin in the FWD direction and fwd is YES */
499   fwd = GCCH_is_origin (tch->ch, GNUNET_YES);
500
501   return GCCH_get_allowed (tch->ch, fwd);
502 }
503
504
505 /**
506  * Get the connection's buffer.
507  *
508  * @param tc Tunnel's connection handle.
509  *
510  * @return Amount of messages the connection can still buffer.
511  */
512 static unsigned int
513 get_connection_buffer (const struct CadetTConnection *tc)
514 {
515   int fwd;
516
517   /* If connection is outgoing, is origin in the FWD direction and fwd is YES */
518   fwd = GCC_is_origin (tc->c, GNUNET_YES);
519
520   return GCC_get_buffer (tc->c, fwd);
521 }
522
523
524 /**
525  * Get the connection's allowance.
526  *
527  * @param tc Tunnel's connection handle.
528  *
529  * @return Amount of messages we have allowed the next peer to send us.
530  */
531 static unsigned int
532 get_connection_allowed (const struct CadetTConnection *tc)
533 {
534   int fwd;
535
536   /* If connection is outgoing, is origin in the FWD direction and fwd is YES */
537   fwd = GCC_is_origin (tc->c, GNUNET_YES);
538
539   return GCC_get_allowed (tc->c, fwd);
540 }
541
542
543 /**
544  * Check that a ephemeral key message s well formed and correctly signed.
545  *
546  * @param t Tunnel on which the message came.
547  * @param msg The ephemeral key message.
548  *
549  * @return GNUNET_OK if message is fine, GNUNET_SYSERR otherwise.
550  */
551 int
552 check_ephemeral (struct CadetTunnel *t,
553                  const struct GNUNET_CADET_KX_Ephemeral *msg)
554 {
555   /* Check message size */
556   if (ntohs (msg->header.size) != sizeof (struct GNUNET_CADET_KX_Ephemeral))
557     return GNUNET_SYSERR;
558
559   /* Check signature size */
560   if (ntohl (msg->purpose.size) != ephemeral_purpose_size ())
561     return GNUNET_SYSERR;
562
563   /* Check origin */
564   if (0 != memcmp (&msg->origin_identity,
565                    GCP_get_id (t->peer),
566                    sizeof (struct GNUNET_PeerIdentity)))
567     return GNUNET_SYSERR;
568
569   /* Check signature */
570   if (GNUNET_OK !=
571       GNUNET_CRYPTO_eddsa_verify (GNUNET_SIGNATURE_PURPOSE_CADET_KX,
572                                   &msg->purpose,
573                                   &msg->signature,
574                                   &msg->origin_identity.public_key))
575     return GNUNET_SYSERR;
576
577   return GNUNET_OK;
578 }
579
580
581 /**
582  * Select the best key to use for encryption (send), based on KX status.
583  *
584  * Normally, return the current key. If there is a KX in progress and the old
585  * key is fresh enough, return the old key.
586  *
587  * @param t Tunnel to choose the key from.
588  *
589  * @return The optimal key to encrypt/hmac outgoing traffic.
590  */
591 static const struct GNUNET_CRYPTO_SymmetricSessionKey *
592 select_key (const struct CadetTunnel *t)
593 {
594   const struct GNUNET_CRYPTO_SymmetricSessionKey *key;
595
596   if (NULL != t->kx_ctx
597       && GNUNET_SCHEDULER_NO_TASK == t->kx_ctx->finish_task)
598   {
599     struct GNUNET_TIME_Relative age;
600
601     age = GNUNET_TIME_absolute_get_duration (t->kx_ctx->rekey_start_time);
602     LOG (GNUNET_ERROR_TYPE_DEBUG,
603          "  key exchange in progress, started %s ago\n",
604          GNUNET_STRINGS_relative_time_to_string (age, GNUNET_YES));
605     // FIXME make duration of old keys configurable
606     if (age.rel_value_us < GNUNET_TIME_UNIT_MINUTES.rel_value_us)
607     {
608       LOG (GNUNET_ERROR_TYPE_DEBUG, "  using old key\n");
609       key = &t->kx_ctx->e_key_old;
610     }
611     else
612     {
613       LOG (GNUNET_ERROR_TYPE_DEBUG, "  using new key (old key too old)\n");
614       key = &t->e_key;
615     }
616   }
617   else
618   {
619     LOG (GNUNET_ERROR_TYPE_DEBUG, "  no KX: using current key\n");
620     key = &t->e_key;
621   }
622   return key;
623 }
624
625
626 /**
627  * Calculate HMAC.
628  *
629  * @param plaintext Content to HMAC.
630  * @param size Size of @c plaintext.
631  * @param iv Initialization vector for the message.
632  * @param key Key to use.
633  * @param hmac[out] Destination to store the HMAC.
634  */
635 static void
636 t_hmac (const void *plaintext, size_t size,
637         uint32_t iv, const struct GNUNET_CRYPTO_SymmetricSessionKey *key,
638         struct GNUNET_CADET_Hash *hmac)
639 {
640   static const char ctx[] = "cadet authentication key";
641   struct GNUNET_CRYPTO_AuthKey auth_key;
642   struct GNUNET_HashCode hash;
643
644 #if DUMP_KEYS_TO_STDERR
645   LOG (GNUNET_ERROR_TYPE_INFO, "  HMAC with key %s\n",
646        GNUNET_h2s ((struct GNUNET_HashCode *) key));
647 #endif
648   GNUNET_CRYPTO_hmac_derive_key (&auth_key, key,
649                                  &iv, sizeof (iv),
650                                  key, sizeof (*key),
651                                  ctx, sizeof (ctx),
652                                  NULL);
653   /* Two step: CADET_Hash is only 256 bits, HashCode is 512. */
654   GNUNET_CRYPTO_hmac (&auth_key, plaintext, size, &hash);
655   memcpy (hmac, &hash, sizeof (*hmac));
656 }
657
658
659 /**
660  * Encrypt daforce_newest_keyta with the tunnel key.
661  *
662  * @param t Tunnel whose key to use.
663  * @param dst Destination for the encrypted data.
664  * @param src Source of the plaintext. Can overlap with @c dst.
665  * @param size Size of the plaintext.
666  * @param iv Initialization Vector to use.
667  * @param force_newest_key Force the use of the newest key, otherwise
668  *                         CADET will use the old key when allowed.
669  *                         This can happen in the case when a KX is going on
670  *                         and the old one hasn't expired.
671  */
672 static int
673 t_encrypt (struct CadetTunnel *t, void *dst, const void *src,
674            size_t size, uint32_t iv, int force_newest_key)
675 {
676   struct GNUNET_CRYPTO_SymmetricInitializationVector siv;
677   const struct GNUNET_CRYPTO_SymmetricSessionKey *key;
678   size_t out_size;
679
680   LOG (GNUNET_ERROR_TYPE_DEBUG, "  t_encrypt start\n");
681
682   key = GNUNET_YES == force_newest_key ? &t->e_key : select_key (t);
683   #if DUMP_KEYS_TO_STDERR
684   LOG (GNUNET_ERROR_TYPE_INFO, "  ENC with key %s\n",
685        GNUNET_h2s ((struct GNUNET_HashCode *) key));
686   #endif
687   GNUNET_CRYPTO_symmetric_derive_iv (&siv, key, &iv, sizeof (iv), NULL);
688   LOG (GNUNET_ERROR_TYPE_DEBUG, "  t_encrypt IV derived\n");
689   out_size = GNUNET_CRYPTO_symmetric_encrypt (src, size, key, &siv, dst);
690   LOG (GNUNET_ERROR_TYPE_DEBUG, "  t_encrypt end\n");
691
692   return out_size;
693 }
694
695
696 /**
697  * Decrypt and verify data with the appropriate tunnel key.
698  *
699  * @param key Key to use.
700  * @param dst Destination for the plaintext.
701  * @param src Source of the encrypted data. Can overlap with @c dst.
702  * @param size Size of the encrypted data.
703  * @param iv Initialization Vector to use.
704  *
705  * @return Size of the decrypted data, -1 if an error was encountered.
706  */
707 static int
708 decrypt (const struct GNUNET_CRYPTO_SymmetricSessionKey *key,
709          void *dst, const void *src, size_t size, uint32_t iv)
710 {
711   struct GNUNET_CRYPTO_SymmetricInitializationVector siv;
712   size_t out_size;
713
714   LOG (GNUNET_ERROR_TYPE_DEBUG, "  decrypt start\n");
715   LOG (GNUNET_ERROR_TYPE_DEBUG, "  decrypt iv\n");
716   GNUNET_CRYPTO_symmetric_derive_iv (&siv, key, &iv, sizeof (iv), NULL);
717   LOG (GNUNET_ERROR_TYPE_DEBUG, "  decrypt iv done\n");
718   out_size = GNUNET_CRYPTO_symmetric_decrypt (src, size, key, &siv, dst);
719   LOG (GNUNET_ERROR_TYPE_DEBUG, "  decrypt end\n");
720
721   return out_size;
722 }
723
724
725 /**
726  * Decrypt and verify data with the most recent tunnel key.
727  *
728  * @param t Tunnel whose key to use.
729  * @param dst Destination for the plaintext.
730  * @param src Source of the encrypted data. Can overlap with @c dst.
731  * @param size Size of the encrypted data.
732  * @param iv Initialization Vector to use.
733  *
734  * @return Size of the decrypted data, -1 if an error was encountered.
735  */
736 static int
737 t_decrypt (struct CadetTunnel *t, void *dst, const void *src,
738            size_t size, uint32_t iv)
739 {
740   size_t out_size;
741
742 #if DUMP_KEYS_TO_STDERR
743   LOG (GNUNET_ERROR_TYPE_DEBUG, "  t_decrypt with %s\n",
744        GNUNET_h2s ((struct GNUNET_HashCode *) &t->d_key));
745 #endif
746   if (CADET_TUNNEL_KEY_UNINITIALIZED == t->estate)
747   {
748     GNUNET_STATISTICS_update (stats, "# non decryptable data", 1, GNUNET_NO);
749     LOG (GNUNET_ERROR_TYPE_WARNING,
750          "got data on %s without a valid key\n",
751          GCT_2s (t));
752     GCT_debug (t, GNUNET_ERROR_TYPE_WARNING);
753     return -1;
754   }
755
756   out_size = decrypt (&t->d_key, dst, src, size, iv);
757
758   return out_size;
759 }
760
761
762 /**
763  * Decrypt and verify data with the appropriate tunnel key and verify that the
764  * data has not been altered since it was sent by the remote peer.
765  *
766  * @param t Tunnel whose key to use.
767  * @param dst Destination for the plaintext.
768  * @param src Source of the encrypted data. Can overlap with @c dst.
769  * @param size Size of the encrypted data.
770  * @param iv Initialization Vector to use.
771  * @param msg_hmac HMAC of the message, cannot be NULL.
772  *
773  * @return Size of the decrypted data, -1 if an error was encountered.
774  */
775 static int
776 t_decrypt_and_validate (struct CadetTunnel *t,
777                         void *dst, const void *src,
778                         size_t size, uint32_t iv,
779                         const struct GNUNET_CADET_Hash *msg_hmac)
780 {
781   struct GNUNET_CRYPTO_SymmetricSessionKey *key;
782   struct GNUNET_CADET_Hash hmac;
783   int decrypted_size;
784
785   /* Try primary (newest) key */
786   key = &t->d_key;
787   decrypted_size = decrypt (key, dst, src, size, iv);
788   t_hmac (src, size, iv, key, &hmac);
789   if (0 == memcmp (msg_hmac, &hmac, sizeof (hmac)))
790     return decrypted_size;
791
792   /* If no key exchange is going on, we just failed */
793   if (NULL == t->kx_ctx)
794   {
795     GNUNET_log (GNUNET_ERROR_TYPE_WARNING,
796                 "Failed checksum validation on tunnel %s with no KX\n",
797                 GCT_2s (t));
798     GNUNET_STATISTICS_update (stats, "# wrong HMAC", 1, GNUNET_NO);
799     return -1;
800   }
801
802   /* Try secondary (from previous KX period) key */
803   key = &t->kx_ctx->d_key_old;
804   decrypted_size = decrypt (key, dst, src, size, iv);
805   t_hmac (src, size, iv, key, &hmac);
806   if (0 == memcmp (msg_hmac, &hmac, sizeof (hmac)))
807     return decrypted_size;
808
809   GNUNET_log (GNUNET_ERROR_TYPE_WARNING,
810               "Failed checksum validation on tunnel %s with KX\n",
811               GCT_2s (t));
812   GNUNET_STATISTICS_update (stats, "# wrong HMAC", 1, GNUNET_NO);
813   return -1;
814 }
815
816
817 /**
818  * Create key material by doing ECDH on the local and remote ephemeral keys.
819  *
820  * @param key_material Where to store the key material.
821  * @param ephemeral_key Peer's public ephemeral key.
822  */
823 void
824 derive_key_material (struct GNUNET_HashCode *key_material,
825                      const struct GNUNET_CRYPTO_EcdhePublicKey *ephemeral_key)
826 {
827   if (GNUNET_OK !=
828       GNUNET_CRYPTO_ecc_ecdh (my_ephemeral_key,
829                               ephemeral_key,
830                               key_material))
831   {
832     GNUNET_break (0);
833   }
834 }
835
836
837 /**
838  * Create a symmetic key from the identities of both ends and the key material
839  * from ECDH.
840  *
841  * @param key Destination for the generated key.
842  * @param sender ID of the peer that will encrypt with @c key.
843  * @param receiver ID of the peer that will decrypt with @c key.
844  * @param key_material Hash created with ECDH with the ephemeral keys.
845  */
846 void
847 derive_symmertic (struct GNUNET_CRYPTO_SymmetricSessionKey *key,
848                   const struct GNUNET_PeerIdentity *sender,
849                   const struct GNUNET_PeerIdentity *receiver,
850                   const struct GNUNET_HashCode *key_material)
851 {
852   const char salt[] = "CADET kx salt";
853
854   GNUNET_CRYPTO_kdf (key, sizeof (struct GNUNET_CRYPTO_SymmetricSessionKey),
855                      salt, sizeof (salt),
856                      key_material, sizeof (struct GNUNET_HashCode),
857                      sender, sizeof (struct GNUNET_PeerIdentity),
858                      receiver, sizeof (struct GNUNET_PeerIdentity),
859                      NULL);
860 }
861
862
863 /**
864  * Create a new Key eXchange context for the tunnel.
865  *
866  * If the old keys were verified, keep them for old traffic. Create a new KX
867  * timestamp and a new nonce.
868  *
869  * @param t Tunnel for which to create the KX ctx.
870  */
871 static void
872 create_kx_ctx (struct CadetTunnel *t)
873 {
874   LOG (GNUNET_ERROR_TYPE_INFO, "  new kx ctx for %s\n", GCT_2s (t));
875
876   if (NULL != t->kx_ctx)
877   {
878     if (GNUNET_SCHEDULER_NO_TASK != t->kx_ctx->finish_task)
879     {
880       LOG (GNUNET_ERROR_TYPE_INFO, "  resetting exisiting finish task\n");
881       GNUNET_SCHEDULER_cancel (t->kx_ctx->finish_task);
882       t->kx_ctx->finish_task = GNUNET_SCHEDULER_NO_TASK;
883     }
884   }
885   else
886   {
887     t->kx_ctx = GNUNET_new (struct CadetTunnelKXCtx);
888     t->kx_ctx->challenge = GNUNET_CRYPTO_random_u32 (GNUNET_CRYPTO_QUALITY_NONCE,
889                                                      UINT32_MAX);
890   }
891
892   if (CADET_TUNNEL_KEY_OK == t->estate)
893   {
894     t->kx_ctx->d_key_old = t->d_key;
895     t->kx_ctx->e_key_old = t->e_key;
896   }
897   t->kx_ctx->rekey_start_time = GNUNET_TIME_absolute_get ();
898 }
899
900
901 /**
902  * @brief Finish the Key eXchange and destroy the old keys.
903  *
904  * @param cls Closure (Tunnel for which to finish the KX).
905  * @param tc Task context.
906  */
907 static void
908 finish_kx (void *cls, const struct GNUNET_SCHEDULER_TaskContext *tc)
909 {
910   struct CadetTunnel *t = cls;
911
912   LOG (GNUNET_ERROR_TYPE_INFO, "finish KX for %s\n", GCT_2s (t));
913
914   if (0 != (tc->reason & GNUNET_SCHEDULER_REASON_SHUTDOWN))
915   {
916     LOG (GNUNET_ERROR_TYPE_INFO, "  shutdown\n");
917     return;
918   }
919
920   GNUNET_free (t->kx_ctx);
921   t->kx_ctx = NULL;
922 }
923
924
925 /**
926  * Destroy a Key eXchange context for the tunnel. This function only schedules
927  * the destruction, the freeing of the memory (and clearing of old key material)
928  * happens after a delay!
929  *
930  * @param t Tunnel whose KX ctx to destroy.
931  */
932 static void
933 destroy_kx_ctx (struct CadetTunnel *t)
934 {
935   struct GNUNET_TIME_Relative delay;
936
937   if (NULL == t->kx_ctx || GNUNET_SCHEDULER_NO_TASK != t->kx_ctx->finish_task)
938     return;
939
940   if (is_key_null (&t->kx_ctx->e_key_old))
941   {
942     t->kx_ctx->finish_task = GNUNET_SCHEDULER_add_now (finish_kx, t);
943     return;
944   }
945
946   delay = GNUNET_TIME_relative_divide (rekey_period, 4);
947   delay = GNUNET_TIME_relative_min (delay, GNUNET_TIME_UNIT_MINUTES);
948
949   t->kx_ctx->finish_task = GNUNET_SCHEDULER_add_delayed (delay, finish_kx, t);
950 }
951
952
953 /**
954  * Derive the tunnel's keys using our own and the peer's ephemeral keys.
955  *
956  * @param t Tunnel for which to create the keys.
957  */
958 static void
959 create_keys (struct CadetTunnel *t)
960 {
961   struct GNUNET_HashCode km;
962
963   derive_key_material (&km, &t->peers_ephemeral_key);
964   derive_symmertic (&t->e_key, &my_full_id, GCP_get_id (t->peer), &km);
965   derive_symmertic (&t->d_key, GCP_get_id (t->peer), &my_full_id, &km);
966 #if DUMP_KEYS_TO_STDERR
967   LOG (GNUNET_ERROR_TYPE_INFO, "ME: %s\n",
968        GNUNET_h2s ((struct GNUNET_HashCode *) &kx_msg.ephemeral_key));
969   LOG (GNUNET_ERROR_TYPE_INFO, "PE: %s\n",
970        GNUNET_h2s ((struct GNUNET_HashCode *) &t->peers_ephemeral_key));
971   LOG (GNUNET_ERROR_TYPE_INFO, "KM: %s\n", GNUNET_h2s (&km));
972   LOG (GNUNET_ERROR_TYPE_INFO, "EK: %s\n",
973        GNUNET_h2s ((struct GNUNET_HashCode *) &t->e_key));
974   LOG (GNUNET_ERROR_TYPE_INFO, "DK: %s\n",
975        GNUNET_h2s ((struct GNUNET_HashCode *) &t->d_key));
976 #endif
977 }
978
979
980 /**
981  * Pick a connection on which send the next data message.
982  *
983  * @param t Tunnel on which to send the message.
984  *
985  * @return The connection on which to send the next message.
986  */
987 static struct CadetConnection *
988 tunnel_get_connection (struct CadetTunnel *t)
989 {
990   struct CadetTConnection *iter;
991   struct CadetConnection *best;
992   unsigned int qn;
993   unsigned int lowest_q;
994
995   LOG (GNUNET_ERROR_TYPE_DEBUG, "tunnel_get_connection %s\n", GCT_2s (t));
996   best = NULL;
997   lowest_q = UINT_MAX;
998   for (iter = t->connection_head; NULL != iter; iter = iter->next)
999   {
1000     LOG (GNUNET_ERROR_TYPE_DEBUG, "  connection %s: %u\n",
1001          GCC_2s (iter->c), GCC_get_state (iter->c));
1002     if (CADET_CONNECTION_READY == GCC_get_state (iter->c))
1003     {
1004       qn = GCC_get_qn (iter->c, GCC_is_origin (iter->c, GNUNET_YES));
1005       LOG (GNUNET_ERROR_TYPE_DEBUG, "    q_n %u, \n", qn);
1006       if (qn < lowest_q)
1007       {
1008         best = iter->c;
1009         lowest_q = qn;
1010       }
1011     }
1012   }
1013   LOG (GNUNET_ERROR_TYPE_DEBUG, " selected: connection %s\n", GCC_2s (best));
1014   return best;
1015 }
1016
1017
1018 /**
1019  * Callback called when a queued message is sent.
1020  *
1021  * Calculates the average time and connection packet tracking.
1022  *
1023  * @param cls Closure (TunnelQueue handle).
1024  * @param c Connection this message was on.
1025  * @param q Connection queue handle (unused).
1026  * @param type Type of message sent.
1027  * @param fwd Was this a FWD going message?
1028  * @param size Size of the message.
1029  */
1030 static void
1031 tun_message_sent (void *cls,
1032               struct CadetConnection *c,
1033               struct CadetConnectionQueue *q,
1034               uint16_t type, int fwd, size_t size)
1035 {
1036   struct CadetTunnelQueue *qt = cls;
1037   struct CadetTunnel *t;
1038
1039   LOG (GNUNET_ERROR_TYPE_DEBUG, "tun_message_sent\n");
1040
1041   GNUNET_assert (NULL != qt->cont);
1042   t = NULL == c ? NULL : GCC_get_tunnel (c);
1043   qt->cont (qt->cont_cls, t, qt, type, size);
1044   GNUNET_free (qt);
1045 }
1046
1047
1048 static unsigned int
1049 count_queued_data (const struct CadetTunnel *t)
1050 {
1051   struct CadetTunnelDelayed *iter;
1052   unsigned int count;
1053
1054   for (count = 0, iter = t->tq_head; iter != NULL; iter = iter->next)
1055     count++;
1056
1057   return count;
1058 }
1059
1060 /**
1061  * Delete a queued message: either was sent or the channel was destroyed
1062  * before the tunnel's key exchange had a chance to finish.
1063  *
1064  * @param tqd Delayed queue handle.
1065  */
1066 static void
1067 unqueue_data (struct CadetTunnelDelayed *tqd)
1068 {
1069   GNUNET_CONTAINER_DLL_remove (tqd->t->tq_head, tqd->t->tq_tail, tqd);
1070   GNUNET_free (tqd);
1071 }
1072
1073
1074 /**
1075  * Cache a message to be sent once tunnel is online.
1076  *
1077  * @param t Tunnel to hold the message.
1078  * @param msg Message itself (copy will be made).
1079  */
1080 static struct CadetTunnelDelayed *
1081 queue_data (struct CadetTunnel *t, const struct GNUNET_MessageHeader *msg)
1082 {
1083   struct CadetTunnelDelayed *tqd;
1084   uint16_t size = ntohs (msg->size);
1085
1086   LOG (GNUNET_ERROR_TYPE_DEBUG, "queue data on Tunnel %s\n", GCT_2s (t));
1087
1088   if (GNUNET_YES == is_ready (t))
1089   {
1090     GNUNET_break (0);
1091     return NULL;
1092   }
1093
1094   tqd = GNUNET_malloc (sizeof (struct CadetTunnelDelayed) + size);
1095
1096   tqd->t = t;
1097   memcpy (&tqd[1], msg, size);
1098   GNUNET_CONTAINER_DLL_insert_tail (t->tq_head, t->tq_tail, tqd);
1099   return tqd;
1100 }
1101
1102
1103 /**
1104  * Sends an already built message on a tunnel, encrypting it and
1105  * choosing the best connection.
1106  *
1107  * @param message Message to send. Function modifies it.
1108  * @param t Tunnel on which this message is transmitted.
1109  * @param c Connection to use (autoselect if NULL).
1110  * @param force Force the tunnel to take the message (buffer overfill).
1111  * @param cont Continuation to call once message is really sent.
1112  * @param cont_cls Closure for @c cont.
1113  * @param existing_q In case this a transmission of previously queued data,
1114  *                   this should be TunnelQueue given to the client.
1115  *                   Otherwise, NULL.
1116  *
1117  * @return Handle to cancel message.
1118  *         NULL if @c cont is NULL or an error happens and message is dropped.
1119  */
1120 static struct CadetTunnelQueue *
1121 send_prebuilt_message (const struct GNUNET_MessageHeader *message,
1122                        struct CadetTunnel *t, struct CadetConnection *c,
1123                        int force, GCT_sent cont, void *cont_cls,
1124                        struct CadetTunnelQueue *existing_q)
1125 {
1126   struct CadetTunnelQueue *tq;
1127   struct GNUNET_CADET_Encrypted *msg;
1128   size_t size = ntohs (message->size);
1129   char cbuf[sizeof (struct GNUNET_CADET_Encrypted) + size];
1130   uint32_t mid;
1131   uint32_t iv;
1132   uint16_t type;
1133   int fwd;
1134
1135   LOG (GNUNET_ERROR_TYPE_DEBUG, "GMT Send on Tunnel %s\n", GCT_2s (t));
1136
1137   if (GNUNET_NO == is_ready (t))
1138   {
1139     struct CadetTunnelDelayed *tqd;
1140     /* A non null existing_q indicates sending of queued data.
1141      * Should only happen after tunnel becomes ready.
1142      */
1143     GNUNET_assert (NULL == existing_q);
1144     tqd = queue_data (t, message);
1145     if (NULL == cont)
1146       return NULL;
1147     tq = GNUNET_new (struct CadetTunnelQueue);
1148     tq->tqd = tqd;
1149     tqd->tq = tq;
1150     tq->cont = cont;
1151     tq->cont_cls = cont_cls;
1152     return tq;
1153   }
1154
1155   GNUNET_assert (GNUNET_NO == GCT_is_loopback (t));
1156
1157   iv = GNUNET_CRYPTO_random_u32 (GNUNET_CRYPTO_QUALITY_NONCE, UINT32_MAX);
1158   msg = (struct GNUNET_CADET_Encrypted *) cbuf;
1159   msg->header.type = htons (GNUNET_MESSAGE_TYPE_CADET_ENCRYPTED);
1160   msg->iv = iv;
1161   GNUNET_assert (t_encrypt (t, &msg[1], message, size, iv, GNUNET_NO) == size);
1162   t_hmac (&msg[1], size, iv, select_key (t), &msg->hmac);
1163   msg->header.size = htons (sizeof (struct GNUNET_CADET_Encrypted) + size);
1164
1165   if (NULL == c)
1166     c = tunnel_get_connection (t);
1167   if (NULL == c)
1168   {
1169     /* Why is tunnel 'ready'? Should have been queued! */
1170     if (GNUNET_SCHEDULER_NO_TASK != t->destroy_task)
1171     {
1172       GNUNET_break (0);
1173       GCT_debug (t, GNUNET_ERROR_TYPE_WARNING);
1174     }
1175     return NULL; /* Drop... */
1176   }
1177
1178   mid = 0;
1179   type = ntohs (message->type);
1180   switch (type)
1181   {
1182     case GNUNET_MESSAGE_TYPE_CADET_DATA:
1183     case GNUNET_MESSAGE_TYPE_CADET_DATA_ACK:
1184       if (GNUNET_MESSAGE_TYPE_CADET_DATA == type)
1185         mid = ntohl (((struct GNUNET_CADET_Data *) message)->mid);
1186       else
1187         mid = ntohl (((struct GNUNET_CADET_DataACK *) message)->mid);
1188       /* Fall thru */
1189     case GNUNET_MESSAGE_TYPE_CADET_KEEPALIVE:
1190     case GNUNET_MESSAGE_TYPE_CADET_CHANNEL_CREATE:
1191     case GNUNET_MESSAGE_TYPE_CADET_CHANNEL_DESTROY:
1192     case GNUNET_MESSAGE_TYPE_CADET_CHANNEL_ACK:
1193     case GNUNET_MESSAGE_TYPE_CADET_CHANNEL_NACK:
1194       msg->cid = *GCC_get_id (c);
1195       msg->ttl = htonl (default_ttl);
1196       break;
1197     default:
1198       GNUNET_break (0);
1199       LOG (GNUNET_ERROR_TYPE_ERROR, "type %s not valid\n", GC_m2s (type));
1200   }
1201   LOG (GNUNET_ERROR_TYPE_DEBUG, "type %s\n", GC_m2s (type));
1202
1203   fwd = GCC_is_origin (c, GNUNET_YES);
1204
1205   if (NULL == cont)
1206   {
1207     GNUNET_break (NULL == GCC_send_prebuilt_message (&msg->header, type, mid, c,
1208                                                      fwd, force, NULL, NULL));
1209     return NULL;
1210   }
1211   if (NULL == existing_q)
1212   {
1213     tq = GNUNET_new (struct CadetTunnelQueue); /* FIXME valgrind: leak*/
1214   }
1215   else
1216   {
1217     tq = existing_q;
1218     tq->tqd = NULL;
1219   }
1220   tq->cq = GCC_send_prebuilt_message (&msg->header, type, mid, c, fwd, force,
1221                                       &tun_message_sent, tq);
1222   GNUNET_assert (NULL != tq->cq);
1223   tq->cont = cont;
1224   tq->cont_cls = cont_cls;
1225
1226   return tq;
1227 }
1228
1229
1230 /**
1231  * Send all cached messages that we can, tunnel is online.
1232  *
1233  * @param t Tunnel that holds the messages. Cannot be loopback.
1234  */
1235 static void
1236 send_queued_data (struct CadetTunnel *t)
1237 {
1238   struct CadetTunnelDelayed *tqd;
1239   struct CadetTunnelDelayed *next;
1240   unsigned int room;
1241
1242   LOG (GNUNET_ERROR_TYPE_INFO, "Send queued data, tunnel %s\n", GCT_2s (t));
1243
1244   if (GCT_is_loopback (t))
1245   {
1246     GNUNET_break (0);
1247     return;
1248   }
1249
1250   if (GNUNET_NO == is_ready (t))
1251   {
1252     LOG (GNUNET_ERROR_TYPE_DEBUG, "  not ready yet: %s/%s\n",
1253          estate2s (t->estate), cstate2s (t->cstate));
1254     return;
1255   }
1256
1257   room = GCT_get_connections_buffer (t);
1258   LOG (GNUNET_ERROR_TYPE_DEBUG, "  buffer space: %u\n", room);
1259   LOG (GNUNET_ERROR_TYPE_DEBUG, "  tq head: %p\n", t->tq_head);
1260   for (tqd = t->tq_head; NULL != tqd && room > 0; tqd = next)
1261   {
1262     LOG (GNUNET_ERROR_TYPE_DEBUG, " sending queued data\n");
1263     next = tqd->next;
1264     room--;
1265     send_prebuilt_message ((struct GNUNET_MessageHeader *) &tqd[1],
1266                            tqd->t, NULL, GNUNET_YES,
1267                            NULL != tqd->tq ? tqd->tq->cont : NULL,
1268                            NULL != tqd->tq ? tqd->tq->cont_cls : NULL,
1269                            tqd->tq);
1270     unqueue_data (tqd);
1271   }
1272   LOG (GNUNET_ERROR_TYPE_DEBUG, "GCT_send_queued_data end\n", GCP_2s (t->peer));
1273 }
1274
1275
1276 /**
1277  * Sends key exchange message on a tunnel, choosing the best connection.
1278  * Should not be called on loopback tunnels.
1279  *
1280  * @param t Tunnel on which this message is transmitted.
1281  * @param message Message to send. Function modifies it.
1282  */
1283 static void
1284 send_kx (struct CadetTunnel *t,
1285          const struct GNUNET_MessageHeader *message)
1286 {
1287   struct CadetConnection *c;
1288   struct GNUNET_CADET_KX *msg;
1289   size_t size = ntohs (message->size);
1290   char cbuf[sizeof (struct GNUNET_CADET_KX) + size];
1291   uint16_t type;
1292   int fwd;
1293
1294   LOG (GNUNET_ERROR_TYPE_DEBUG, "GMT KX on Tunnel %s\n", GCT_2s (t));
1295
1296   /* Avoid loopback. */
1297   if (GCT_is_loopback (t))
1298   {
1299     LOG (GNUNET_ERROR_TYPE_DEBUG, "  loopback!\n");
1300     GNUNET_break (0);
1301     return;
1302   }
1303   type = ntohs (message->type);
1304
1305   /* Even if tunnel is being destroyed, send anyway.
1306    * Could be a response to a rekey initiated by remote peer,
1307    * who is trying to create a new channel!
1308    */
1309
1310   /* Must have a connection, or be looking for one. */
1311   if (NULL == t->connection_head)
1312   {
1313     if (CADET_TUNNEL_SEARCHING != t->cstate)
1314     {
1315       LOG (GNUNET_ERROR_TYPE_ERROR, "\n\n\n");
1316       GNUNET_break (0);
1317       LOG (GNUNET_ERROR_TYPE_ERROR, "no connection, sending %s\n", GC_m2s (type));
1318       GCT_debug (t, GNUNET_ERROR_TYPE_ERROR);
1319       GCP_debug (t->peer, GNUNET_ERROR_TYPE_ERROR);
1320       LOG (GNUNET_ERROR_TYPE_ERROR, "\n\n\n");
1321     }
1322     return;
1323   }
1324
1325   msg = (struct GNUNET_CADET_KX *) cbuf;
1326   msg->header.type = htons (GNUNET_MESSAGE_TYPE_CADET_KX);
1327   msg->header.size = htons (sizeof (struct GNUNET_CADET_KX) + size);
1328   c = tunnel_get_connection (t);
1329   if (NULL == c)
1330   {
1331     if (GNUNET_SCHEDULER_NO_TASK == t->destroy_task
1332         && CADET_TUNNEL_READY == t->cstate)
1333     {
1334       GNUNET_break (0);
1335       GCT_debug (t, GNUNET_ERROR_TYPE_ERROR);
1336     }
1337     return;
1338   }
1339   switch (type)
1340   {
1341     case GNUNET_MESSAGE_TYPE_CADET_KX_EPHEMERAL:
1342     case GNUNET_MESSAGE_TYPE_CADET_KX_PONG:
1343       memcpy (&msg[1], message, size);
1344       break;
1345
1346     default:
1347       LOG (GNUNET_ERROR_TYPE_DEBUG, "unkown type %s\n",
1348            GC_m2s (type));
1349       GNUNET_break (0);
1350   }
1351
1352   fwd = GCC_is_origin (t->connection_head->c, GNUNET_YES);
1353   /* TODO save handle and cancel in case of a unneeded retransmission */
1354   GNUNET_assert (NULL == GCC_send_prebuilt_message (&msg->header, type, 0, c,
1355                                                     fwd, GNUNET_YES,
1356                                                     NULL, NULL));
1357 }
1358
1359
1360 /**
1361  * Send the ephemeral key on a tunnel.
1362  *
1363  * @param t Tunnel on which to send the key.
1364  */
1365 static void
1366 send_ephemeral (struct CadetTunnel *t)
1367 {
1368   LOG (GNUNET_ERROR_TYPE_INFO, "===> EPHM for %s\n", GCT_2s (t));
1369
1370   kx_msg.sender_status = htonl (t->estate);
1371   kx_msg.iv = GNUNET_CRYPTO_random_u32 (GNUNET_CRYPTO_QUALITY_NONCE, UINT32_MAX);
1372   kx_msg.nonce = t->kx_ctx->challenge;
1373   LOG (GNUNET_ERROR_TYPE_DEBUG, "  send nonce c %u\n", kx_msg.nonce);
1374   t_encrypt (t, &kx_msg.nonce, &kx_msg.nonce,
1375              ping_encryption_size(), kx_msg.iv, GNUNET_YES);
1376   LOG (GNUNET_ERROR_TYPE_DEBUG, "  send nonce e %u\n", kx_msg.nonce);
1377   send_kx (t, &kx_msg.header);
1378 }
1379
1380
1381 /**
1382  * Send a pong message on a tunnel.
1383  *d_
1384  * @param t Tunnel on which to send the pong.
1385  * @param challenge Value sent in the ping that we have to send back.
1386  */
1387 static void
1388 send_pong (struct CadetTunnel *t, uint32_t challenge)
1389 {
1390   struct GNUNET_CADET_KX_Pong msg;
1391
1392   LOG (GNUNET_ERROR_TYPE_INFO, "===> PONG for %s\n", GCT_2s (t));
1393   msg.header.size = htons (sizeof (msg));
1394   msg.header.type = htons (GNUNET_MESSAGE_TYPE_CADET_KX_PONG);
1395   msg.iv = GNUNET_CRYPTO_random_u32 (GNUNET_CRYPTO_QUALITY_NONCE, UINT32_MAX);
1396   msg.nonce = challenge;
1397   LOG (GNUNET_ERROR_TYPE_DEBUG, "  sending %u\n", msg.nonce);
1398   t_encrypt (t, &msg.nonce, &msg.nonce,
1399              sizeof (msg.nonce), msg.iv, GNUNET_YES);
1400   LOG (GNUNET_ERROR_TYPE_DEBUG, "  e sending %u\n", msg.nonce);
1401
1402   send_kx (t, &msg.header);
1403 }
1404
1405
1406 /**
1407  * Initiate a rekey with the remote peer.
1408  *
1409  * @param cls Closure (tunnel).
1410  * @param tc TaskContext.
1411  */
1412 static void
1413 rekey_tunnel (void *cls, const struct GNUNET_SCHEDULER_TaskContext *tc)
1414 {
1415   struct CadetTunnel *t = cls;
1416
1417   t->rekey_task = GNUNET_SCHEDULER_NO_TASK;
1418
1419   LOG (GNUNET_ERROR_TYPE_INFO, "Re-key Tunnel %s\n", GCT_2s (t));
1420   if (NULL != tc && 0 != (GNUNET_SCHEDULER_REASON_SHUTDOWN & tc->reason))
1421     return;
1422
1423   create_kx_ctx (t);
1424
1425   if (NULL == t->kx_ctx)
1426   {
1427     create_keys (t);
1428   }
1429   else
1430   {
1431     struct GNUNET_TIME_Relative duration;
1432
1433     duration = GNUNET_TIME_absolute_get_duration (t->kx_ctx->rekey_start_time);
1434     LOG (GNUNET_ERROR_TYPE_DEBUG, " kx started %s ago\n",
1435          GNUNET_STRINGS_relative_time_to_string (duration, GNUNET_YES));
1436
1437     // FIXME make duration of old keys configurable
1438     if (duration.rel_value_us >= GNUNET_TIME_UNIT_MINUTES.rel_value_us)
1439     {
1440       LOG (GNUNET_ERROR_TYPE_DEBUG, " deleting old keys\n");
1441       memset (&t->kx_ctx->d_key_old, 0, sizeof (t->kx_ctx->d_key_old));
1442       memset (&t->kx_ctx->e_key_old, 0, sizeof (t->kx_ctx->e_key_old));
1443     }
1444   }
1445
1446   send_ephemeral (t);
1447
1448   switch (t->estate)
1449   {
1450     case CADET_TUNNEL_KEY_UNINITIALIZED:
1451       GCT_change_estate (t, CADET_TUNNEL_KEY_SENT);
1452       break;
1453
1454     case CADET_TUNNEL_KEY_SENT:
1455       break;
1456
1457     case CADET_TUNNEL_KEY_OK:
1458       GCT_change_estate (t, CADET_TUNNEL_KEY_REKEY);
1459       break;
1460
1461     case CADET_TUNNEL_KEY_PING:
1462     case CADET_TUNNEL_KEY_REKEY:
1463       break;
1464
1465     default:
1466       LOG (GNUNET_ERROR_TYPE_DEBUG, "Unexpected state %u\n", t->estate);
1467   }
1468
1469   // FIXME exponential backoff
1470   struct GNUNET_TIME_Relative delay;
1471
1472   delay = GNUNET_TIME_relative_divide (rekey_period, 16);
1473   delay = GNUNET_TIME_relative_min (delay, REKEY_WAIT);
1474   LOG (GNUNET_ERROR_TYPE_DEBUG, "  next call in %s\n",
1475        GNUNET_STRINGS_relative_time_to_string (delay, GNUNET_YES));
1476   t->rekey_task = GNUNET_SCHEDULER_add_delayed (delay, &rekey_tunnel, t);
1477 }
1478
1479
1480 /**
1481  * Our ephemeral key has changed, create new session key on all tunnels.
1482  *
1483  * Each tunnel will start the Key Exchange with a random delay between
1484  * 0 and number_of_tunnels*100 milliseconds, so there are 10 key exchanges
1485  * per second, on average.
1486  *
1487  * @param cls Closure (size of the hashmap).
1488  * @param key Current public key.
1489  * @param value Value in the hash map (tunnel).
1490  *
1491  * @return #GNUNET_YES, so we should continue to iterate,
1492  */
1493 static int
1494 rekey_iterator (void *cls,
1495                 const struct GNUNET_PeerIdentity *key,
1496                 void *value)
1497 {
1498   struct CadetTunnel *t = value;
1499   struct GNUNET_TIME_Relative delay;
1500   long n = (long) cls;
1501   uint32_t r;
1502
1503   if (GNUNET_SCHEDULER_NO_TASK != t->rekey_task)
1504     return GNUNET_YES;
1505
1506   if (GNUNET_YES == GCT_is_loopback (t))
1507     return GNUNET_YES;
1508
1509   r = GNUNET_CRYPTO_random_u32 (GNUNET_CRYPTO_QUALITY_WEAK, (uint32_t) n * 100);
1510   delay = GNUNET_TIME_relative_multiply (GNUNET_TIME_UNIT_MILLISECONDS, r);
1511   t->rekey_task = GNUNET_SCHEDULER_add_delayed (delay, &rekey_tunnel, t);
1512   if (NULL != t->kx_ctx)
1513     t->kx_ctx->challenge =
1514         GNUNET_CRYPTO_random_u32 (GNUNET_CRYPTO_QUALITY_NONCE, INT32_MAX);
1515
1516   return GNUNET_YES;
1517 }
1518
1519
1520 /**
1521  * Create a new ephemeral key and key message, schedule next rekeying.
1522  *
1523  * @param cls Closure (unused).
1524  * @param tc TaskContext.
1525  */
1526 static void
1527 rekey (void *cls, const struct GNUNET_SCHEDULER_TaskContext *tc)
1528 {
1529   struct GNUNET_TIME_Absolute time;
1530   long n;
1531
1532   rekey_task = GNUNET_SCHEDULER_NO_TASK;
1533
1534   if (0 != (GNUNET_SCHEDULER_REASON_SHUTDOWN & tc->reason))
1535     return;
1536
1537   GNUNET_free_non_null (my_ephemeral_key);
1538   my_ephemeral_key = GNUNET_CRYPTO_ecdhe_key_create ();
1539
1540   time = GNUNET_TIME_absolute_get ();
1541   kx_msg.creation_time = GNUNET_TIME_absolute_hton (time);
1542   time = GNUNET_TIME_absolute_add (time, rekey_period);
1543   time = GNUNET_TIME_absolute_add (time, GNUNET_TIME_UNIT_MINUTES);
1544   kx_msg.expiration_time = GNUNET_TIME_absolute_hton (time);
1545   GNUNET_CRYPTO_ecdhe_key_get_public (my_ephemeral_key, &kx_msg.ephemeral_key);
1546   LOG (GNUNET_ERROR_TYPE_INFO, "GLOBAL RE-KEY, NEW EPHM: %s\n",
1547        GNUNET_h2s ((struct GNUNET_HashCode *) &kx_msg.ephemeral_key));
1548
1549   GNUNET_assert (GNUNET_OK ==
1550                  GNUNET_CRYPTO_eddsa_sign (my_private_key,
1551                                            &kx_msg.purpose,
1552                                            &kx_msg.signature));
1553
1554   n = (long) GNUNET_CONTAINER_multipeermap_size (tunnels);
1555   GNUNET_CONTAINER_multipeermap_iterate (tunnels, &rekey_iterator, (void *) n);
1556
1557   rekey_task = GNUNET_SCHEDULER_add_delayed (rekey_period, &rekey, NULL);
1558 }
1559
1560
1561 /**
1562  * Called only on shutdown, destroy every tunnel.
1563  *
1564  * @param cls Closure (unused).
1565  * @param key Current public key.
1566  * @param value Value in the hash map (tunnel).
1567  *
1568  * @return #GNUNET_YES, so we should continue to iterate,
1569  */
1570 static int
1571 destroy_iterator (void *cls,
1572                 const struct GNUNET_PeerIdentity *key,
1573                 void *value)
1574 {
1575   struct CadetTunnel *t = value;
1576
1577   LOG (GNUNET_ERROR_TYPE_DEBUG, "GCT_shutdown destroying tunnel at %p\n", t);
1578   GCT_destroy (t);
1579   return GNUNET_YES;
1580 }
1581
1582
1583 /**
1584  * Notify remote peer that we don't know a channel he is talking about,
1585  * probably CHANNEL_DESTROY was missed.
1586  *
1587  * @param t Tunnel on which to notify.
1588  * @param gid ID of the channel.
1589  */
1590 static void
1591 send_channel_destroy (struct CadetTunnel *t, unsigned int gid)
1592 {
1593   struct GNUNET_CADET_ChannelManage msg;
1594
1595   msg.header.type = htons (GNUNET_MESSAGE_TYPE_CADET_CHANNEL_DESTROY);
1596   msg.header.size = htons (sizeof (msg));
1597   msg.chid = htonl (gid);
1598
1599   LOG (GNUNET_ERROR_TYPE_DEBUG,
1600        "WARNING destroying unknown channel %u on tunnel %s\n",
1601        gid, GCT_2s (t));
1602   send_prebuilt_message (&msg.header, t, NULL, GNUNET_YES, NULL, NULL, NULL);
1603 }
1604
1605
1606 /**
1607  * Demultiplex data per channel and call appropriate channel handler.
1608  *
1609  * @param t Tunnel on which the data came.
1610  * @param msg Data message.
1611  * @param fwd Is this message fwd? This only is meaningful in loopback channels.
1612  *            #GNUNET_YES if message is FWD on the respective channel (loopback)
1613  *            #GNUNET_NO if message is BCK on the respective channel (loopback)
1614  *            #GNUNET_SYSERR if message on a one-ended channel (remote)
1615  */
1616 static void
1617 handle_data (struct CadetTunnel *t,
1618              const struct GNUNET_CADET_Data *msg,
1619              int fwd)
1620 {
1621   struct CadetChannel *ch;
1622   size_t size;
1623
1624   /* Check size */
1625   size = ntohs (msg->header.size);
1626   if (size <
1627       sizeof (struct GNUNET_CADET_Data) +
1628       sizeof (struct GNUNET_MessageHeader))
1629   {
1630     GNUNET_break (0);
1631     return;
1632   }
1633   LOG (GNUNET_ERROR_TYPE_DEBUG, " payload of type %s\n",
1634               GC_m2s (ntohs (msg[1].header.type)));
1635
1636   /* Check channel */
1637   ch = GCT_get_channel (t, ntohl (msg->chid));
1638   if (NULL == ch)
1639   {
1640     GNUNET_STATISTICS_update (stats, "# data on unknown channel",
1641                               1, GNUNET_NO);
1642     LOG (GNUNET_ERROR_TYPE_DEBUG, "WARNING channel 0x%X unknown\n",
1643          ntohl (msg->chid));
1644     send_channel_destroy (t, ntohl (msg->chid));
1645     return;
1646   }
1647
1648   GCCH_handle_data (ch, msg, fwd);
1649 }
1650
1651
1652 /**
1653  * Demultiplex data ACKs per channel and update appropriate channel buffer info.
1654  *
1655  * @param t Tunnel on which the DATA ACK came.
1656  * @param msg DATA ACK message.
1657  * @param fwd Is this message fwd? This only is meaningful in loopback channels.
1658  *            #GNUNET_YES if message is FWD on the respective channel (loopback)
1659  *            #GNUNET_NO if message is BCK on the respective channel (loopback)
1660  *            #GNUNET_SYSERR if message on a one-ended channel (remote)
1661  */
1662 static void
1663 handle_data_ack (struct CadetTunnel *t,
1664                  const struct GNUNET_CADET_DataACK *msg,
1665                  int fwd)
1666 {
1667   struct CadetChannel *ch;
1668   size_t size;
1669
1670   /* Check size */
1671   size = ntohs (msg->header.size);
1672   if (size != sizeof (struct GNUNET_CADET_DataACK))
1673   {
1674     GNUNET_break (0);
1675     return;
1676   }
1677
1678   /* Check channel */
1679   ch = GCT_get_channel (t, ntohl (msg->chid));
1680   if (NULL == ch)
1681   {
1682     GNUNET_STATISTICS_update (stats, "# data ack on unknown channel",
1683                               1, GNUNET_NO);
1684     LOG (GNUNET_ERROR_TYPE_DEBUG, "WARNING channel %u unknown\n",
1685          ntohl (msg->chid));
1686     return;
1687   }
1688
1689   GCCH_handle_data_ack (ch, msg, fwd);
1690 }
1691
1692
1693 /**
1694  * Handle channel create.
1695  *
1696  * @param t Tunnel on which the data came.
1697  * @param msg Data message.
1698  */
1699 static void
1700 handle_ch_create (struct CadetTunnel *t,
1701                   const struct GNUNET_CADET_ChannelCreate *msg)
1702 {
1703   struct CadetChannel *ch;
1704   size_t size;
1705
1706   /* Check size */
1707   size = ntohs (msg->header.size);
1708   if (size != sizeof (struct GNUNET_CADET_ChannelCreate))
1709   {
1710     GNUNET_break (0);
1711     return;
1712   }
1713
1714   /* Check channel */
1715   ch = GCT_get_channel (t, ntohl (msg->chid));
1716   if (NULL != ch && ! GCT_is_loopback (t))
1717   {
1718     /* Probably a retransmission, safe to ignore */
1719     LOG (GNUNET_ERROR_TYPE_DEBUG, "   already exists...\n");
1720   }
1721   ch = GCCH_handle_create (t, msg);
1722   if (NULL != ch)
1723     GCT_add_channel (t, ch);
1724 }
1725
1726
1727
1728 /**
1729  * Handle channel NACK: check correctness and call channel handler for NACKs.
1730  *
1731  * @param t Tunnel on which the NACK came.
1732  * @param msg NACK message.
1733  */
1734 static void
1735 handle_ch_nack (struct CadetTunnel *t,
1736                 const struct GNUNET_CADET_ChannelManage *msg)
1737 {
1738   struct CadetChannel *ch;
1739   size_t size;
1740
1741   /* Check size */
1742   size = ntohs (msg->header.size);
1743   if (size != sizeof (struct GNUNET_CADET_ChannelManage))
1744   {
1745     GNUNET_break (0);
1746     return;
1747   }
1748
1749   /* Check channel */
1750   ch = GCT_get_channel (t, ntohl (msg->chid));
1751   if (NULL == ch)
1752   {
1753     GNUNET_STATISTICS_update (stats, "# channel NACK on unknown channel",
1754                               1, GNUNET_NO);
1755     LOG (GNUNET_ERROR_TYPE_DEBUG, "WARNING channel %u unknown\n",
1756          ntohl (msg->chid));
1757     return;
1758   }
1759
1760   GCCH_handle_nack (ch);
1761 }
1762
1763
1764 /**
1765  * Handle a CHANNEL ACK (SYNACK/ACK).
1766  *
1767  * @param t Tunnel on which the CHANNEL ACK came.
1768  * @param msg CHANNEL ACK message.
1769  * @param fwd Is this message fwd? This only is meaningful in loopback channels.
1770  *            #GNUNET_YES if message is FWD on the respective channel (loopback)
1771  *            #GNUNET_NO if message is BCK on the respective channel (loopback)
1772  *            #GNUNET_SYSERR if message on a one-ended channel (remote)
1773  */
1774 static void
1775 handle_ch_ack (struct CadetTunnel *t,
1776                const struct GNUNET_CADET_ChannelManage *msg,
1777                int fwd)
1778 {
1779   struct CadetChannel *ch;
1780   size_t size;
1781
1782   /* Check size */
1783   size = ntohs (msg->header.size);
1784   if (size != sizeof (struct GNUNET_CADET_ChannelManage))
1785   {
1786     GNUNET_break (0);
1787     return;
1788   }
1789
1790   /* Check channel */
1791   ch = GCT_get_channel (t, ntohl (msg->chid));
1792   if (NULL == ch)
1793   {
1794     GNUNET_STATISTICS_update (stats, "# channel ack on unknown channel",
1795                               1, GNUNET_NO);
1796     LOG (GNUNET_ERROR_TYPE_DEBUG, "WARNING channel %u unknown\n",
1797          ntohl (msg->chid));
1798     return;
1799   }
1800
1801   GCCH_handle_ack (ch, msg, fwd);
1802 }
1803
1804
1805 /**
1806  * Handle a channel destruction message.
1807  *
1808  * @param t Tunnel on which the message came.
1809  * @param msg Channel destroy message.
1810  * @param fwd Is this message fwd? This only is meaningful in loopback channels.
1811  *            #GNUNET_YES if message is FWD on the respective channel (loopback)
1812  *            #GNUNET_NO if message is BCK on the respective channel (loopback)
1813  *            #GNUNET_SYSERR if message on a one-ended channel (remote)
1814  */
1815 static void
1816 handle_ch_destroy (struct CadetTunnel *t,
1817                    const struct GNUNET_CADET_ChannelManage *msg,
1818                    int fwd)
1819 {
1820   struct CadetChannel *ch;
1821   size_t size;
1822
1823   /* Check size */
1824   size = ntohs (msg->header.size);
1825   if (size != sizeof (struct GNUNET_CADET_ChannelManage))
1826   {
1827     GNUNET_break (0);
1828     return;
1829   }
1830
1831   /* Check channel */
1832   ch = GCT_get_channel (t, ntohl (msg->chid));
1833   if (NULL == ch)
1834   {
1835     /* Probably a retransmission, safe to ignore */
1836     return;
1837   }
1838
1839   GCCH_handle_destroy (ch, msg, fwd);
1840 }
1841
1842
1843 /**
1844  * The peer's ephemeral key has changed: update the symmetrical keys.
1845  *
1846  * @param t Tunnel this message came on.
1847  * @param msg Key eXchange message.
1848  */
1849 static void
1850 handle_ephemeral (struct CadetTunnel *t,
1851                   const struct GNUNET_CADET_KX_Ephemeral *msg)
1852 {
1853   LOG (GNUNET_ERROR_TYPE_INFO, "<=== EPHM for %s\n", GCT_2s (t));
1854
1855   if (GNUNET_OK != check_ephemeral (t, msg))
1856   {
1857     GNUNET_break_op (0);
1858     return;
1859   }
1860
1861   /**
1862    * If the key is different from what we know, derive the new E/D keys.
1863    * Else destroy the rekey ctx (duplicate EPHM after successful KX).
1864    */
1865   if (0 != memcmp (&t->peers_ephemeral_key, &msg->ephemeral_key,
1866                    sizeof (msg->ephemeral_key)))
1867   {
1868     #if DUMP_KEYS_TO_STDERR
1869     LOG (GNUNET_ERROR_TYPE_INFO, "OLD: %s\n",
1870          GNUNET_h2s ((struct GNUNET_HashCode *) &t->peers_ephemeral_key));
1871     LOG (GNUNET_ERROR_TYPE_INFO, "NEW: %s\n",
1872          GNUNET_h2s ((struct GNUNET_HashCode *) &msg->ephemeral_key));
1873     #endif
1874     t->peers_ephemeral_key = msg->ephemeral_key;
1875     create_kx_ctx (t);
1876     create_keys (t);
1877     if (CADET_TUNNEL_KEY_OK == t->estate)
1878     {
1879       GCT_change_estate (t, CADET_TUNNEL_KEY_REKEY);
1880     }
1881     if (GNUNET_SCHEDULER_NO_TASK != t->rekey_task)
1882       GNUNET_SCHEDULER_cancel (t->rekey_task);
1883     t->rekey_task = GNUNET_SCHEDULER_add_now (rekey_tunnel, t);
1884   }
1885   if (CADET_TUNNEL_KEY_SENT == t->estate)
1886   {
1887     LOG (GNUNET_ERROR_TYPE_DEBUG, "  our key was sent, sending challenge\n");
1888     send_ephemeral (t);
1889     GCT_change_estate (t, CADET_TUNNEL_KEY_PING);
1890   }
1891
1892   if (CADET_TUNNEL_KEY_UNINITIALIZED != ntohl(msg->sender_status))
1893   {
1894     uint32_t nonce;
1895
1896     LOG (GNUNET_ERROR_TYPE_DEBUG, "  recv nonce e %u\n", msg->nonce);
1897     t_decrypt (t, &nonce, &msg->nonce, ping_encryption_size (), msg->iv);
1898     LOG (GNUNET_ERROR_TYPE_DEBUG, "  recv nonce c %u\n", nonce);
1899     send_pong (t, nonce);
1900   }
1901 }
1902
1903
1904 /**
1905  * Peer has answer to our challenge.
1906  * If answer is successful, consider the key exchange finished and clean
1907  * up all related state.
1908  *
1909  * @param t Tunnel this message came on.
1910  * @param msg Key eXchange Pong message.
1911  */
1912 static void
1913 handle_pong (struct CadetTunnel *t,
1914              const struct GNUNET_CADET_KX_Pong *msg)
1915 {
1916   uint32_t challenge;
1917
1918   LOG (GNUNET_ERROR_TYPE_INFO, "<=== PONG for %s\n", GCT_2s (t));
1919   if (GNUNET_SCHEDULER_NO_TASK == t->rekey_task)
1920   {
1921     GNUNET_STATISTICS_update (stats, "# duplicate PONG messages", 1, GNUNET_NO);
1922     return;
1923   }
1924   t_decrypt (t, &challenge, &msg->nonce, sizeof (uint32_t), msg->iv);
1925
1926   if (challenge != t->kx_ctx->challenge)
1927   {
1928     LOG (GNUNET_ERROR_TYPE_WARNING, "Wrong PONG challenge on %s\n", GCT_2s (t));
1929     LOG (GNUNET_ERROR_TYPE_DEBUG, "PONG: %u (e: %u). Expected: %u.\n",
1930          challenge, msg->nonce, t->kx_ctx->challenge);
1931     send_ephemeral (t);
1932     return;
1933   }
1934   GNUNET_SCHEDULER_cancel (t->rekey_task);
1935   t->rekey_task = GNUNET_SCHEDULER_NO_TASK;
1936
1937   /* Don't free the old keys right away, but after a delay.
1938    * Rationale: the KX could have happened over a very fast connection,
1939    * with payload traffic still signed with the old key stuck in a slower
1940    * connection.
1941    * Don't keep the keys longer than 1/4 the rekey period, and no longer than
1942    * one minute.
1943    */
1944   destroy_kx_ctx (t);
1945   GCT_change_estate (t, CADET_TUNNEL_KEY_OK);
1946 }
1947
1948
1949 /**
1950  * Demultiplex by message type and call appropriate handler for a message
1951  * towards a channel of a local tunnel.
1952  *
1953  * @param t Tunnel this message came on.
1954  * @param msgh Message header.
1955  * @param fwd Is this message fwd? This only is meaningful in loopback channels.
1956  *            #GNUNET_YES if message is FWD on the respective channel (loopback)
1957  *            #GNUNET_NO if message is BCK on the respective channel (loopback)
1958  *            #GNUNET_SYSERR if message on a one-ended channel (remote)
1959  */
1960 static void
1961 handle_decrypted (struct CadetTunnel *t,
1962                   const struct GNUNET_MessageHeader *msgh,
1963                   int fwd)
1964 {
1965   uint16_t type;
1966
1967   type = ntohs (msgh->type);
1968   LOG (GNUNET_ERROR_TYPE_INFO, "<=== %s on %s\n", GC_m2s (type), GCT_2s (t));
1969
1970   switch (type)
1971   {
1972     case GNUNET_MESSAGE_TYPE_CADET_KEEPALIVE:
1973       /* Do nothing, connection aleady got updated. */
1974       GNUNET_STATISTICS_update (stats, "# keepalives received", 1, GNUNET_NO);
1975       break;
1976
1977     case GNUNET_MESSAGE_TYPE_CADET_DATA:
1978       /* Don't send hop ACK, wait for client to ACK */
1979       handle_data (t, (struct GNUNET_CADET_Data *) msgh, fwd);
1980       break;
1981
1982     case GNUNET_MESSAGE_TYPE_CADET_DATA_ACK:
1983       handle_data_ack (t, (struct GNUNET_CADET_DataACK *) msgh, fwd);
1984       break;
1985
1986     case GNUNET_MESSAGE_TYPE_CADET_CHANNEL_CREATE:
1987       handle_ch_create (t,
1988                         (struct GNUNET_CADET_ChannelCreate *) msgh);
1989       break;
1990
1991     case GNUNET_MESSAGE_TYPE_CADET_CHANNEL_NACK:
1992       handle_ch_nack (t,
1993                       (struct GNUNET_CADET_ChannelManage *) msgh);
1994       break;
1995
1996     case GNUNET_MESSAGE_TYPE_CADET_CHANNEL_ACK:
1997       handle_ch_ack (t,
1998                      (struct GNUNET_CADET_ChannelManage *) msgh,
1999                      fwd);
2000       break;
2001
2002     case GNUNET_MESSAGE_TYPE_CADET_CHANNEL_DESTROY:
2003       handle_ch_destroy (t,
2004                          (struct GNUNET_CADET_ChannelManage *) msgh,
2005                          fwd);
2006       break;
2007
2008     default:
2009       GNUNET_break_op (0);
2010       LOG (GNUNET_ERROR_TYPE_WARNING,
2011            "end-to-end message not known (%u)\n",
2012            ntohs (msgh->type));
2013       GCT_debug (t, GNUNET_ERROR_TYPE_WARNING);
2014   }
2015 }
2016
2017 /******************************************************************************/
2018 /********************************    API    ***********************************/
2019 /******************************************************************************/
2020
2021 /**
2022  * Decrypt and demultiplex by message type. Call appropriate handler
2023  * for every message.
2024  *
2025  * @param t Tunnel this message came on.
2026  * @param msg Encrypted message.
2027  */
2028 void
2029 GCT_handle_encrypted (struct CadetTunnel *t,
2030                       const struct GNUNET_CADET_Encrypted *msg)
2031 {
2032   size_t size = ntohs (msg->header.size);
2033   size_t payload_size = size - sizeof (struct GNUNET_CADET_Encrypted);
2034   int decrypted_size;
2035   char cbuf [payload_size];
2036   struct GNUNET_MessageHeader *msgh;
2037   unsigned int off;
2038
2039   decrypted_size = t_decrypt_and_validate (t, cbuf, &msg[1], payload_size,
2040                                            msg->iv, &msg->hmac);
2041
2042   if (-1 == decrypted_size)
2043   {
2044     GNUNET_break_op (0);
2045     return;
2046   }
2047
2048   off = 0;
2049   while (off < decrypted_size)
2050   {
2051     uint16_t msize;
2052
2053     msgh = (struct GNUNET_MessageHeader *) &cbuf[off];
2054     msize = ntohs (msgh->size);
2055     if (msize < sizeof (struct GNUNET_MessageHeader))
2056     {
2057       GNUNET_break_op (0);
2058       return;
2059     }
2060     handle_decrypted (t, msgh, GNUNET_SYSERR);
2061     off += msize;
2062   }
2063 }
2064
2065
2066 /**
2067  * Demultiplex an encapsulated KX message by message type.
2068  *
2069  * @param t Tunnel on which the message came.
2070  * @param message Payload of KX message.
2071  */
2072 void
2073 GCT_handle_kx (struct CadetTunnel *t,
2074                const struct GNUNET_MessageHeader *message)
2075 {
2076   uint16_t type;
2077
2078   type = ntohs (message->type);
2079   LOG (GNUNET_ERROR_TYPE_DEBUG, "kx message received\n", type);
2080   switch (type)
2081   {
2082     case GNUNET_MESSAGE_TYPE_CADET_KX_EPHEMERAL:
2083       handle_ephemeral (t, (struct GNUNET_CADET_KX_Ephemeral *) message);
2084       break;
2085
2086     case GNUNET_MESSAGE_TYPE_CADET_KX_PONG:
2087       handle_pong (t, (struct GNUNET_CADET_KX_Pong *) message);
2088       break;
2089
2090     default:
2091       GNUNET_break_op (0);
2092       LOG (GNUNET_ERROR_TYPE_DEBUG, "kx message not known (%u)\n", type);
2093   }
2094 }
2095
2096
2097 /**
2098  * Initialize the tunnel subsystem.
2099  *
2100  * @param c Configuration handle.
2101  * @param key ECC private key, to derive all other keys and do crypto.
2102  */
2103 void
2104 GCT_init (const struct GNUNET_CONFIGURATION_Handle *c,
2105           const struct GNUNET_CRYPTO_EddsaPrivateKey *key)
2106 {
2107   int expected_overhead;
2108
2109   LOG (GNUNET_ERROR_TYPE_DEBUG, "init\n");
2110
2111   expected_overhead =
2112     sizeof (struct GNUNET_CADET_Encrypted) + sizeof (struct GNUNET_CADET_Data);
2113   GNUNET_assert (GNUNET_CONSTANTS_CADET_P2P_OVERHEAD == expected_overhead);
2114
2115   if (GNUNET_OK !=
2116       GNUNET_CONFIGURATION_get_value_number (c, "CADET", "DEFAULT_TTL",
2117                                              &default_ttl))
2118   {
2119     GNUNET_log_config_invalid (GNUNET_ERROR_TYPE_WARNING,
2120                                "CADET", "DEFAULT_TTL", "USING DEFAULT");
2121     default_ttl = 64;
2122   }
2123   if (GNUNET_OK !=
2124       GNUNET_CONFIGURATION_get_value_time (c, "CADET", "REKEY_PERIOD",
2125                                            &rekey_period))
2126   {
2127     rekey_period = GNUNET_TIME_UNIT_DAYS;
2128   }
2129
2130   my_private_key = key;
2131   kx_msg.header.size = htons (sizeof (kx_msg));
2132   kx_msg.header.type = htons (GNUNET_MESSAGE_TYPE_CADET_KX_EPHEMERAL);
2133   kx_msg.purpose.purpose = htonl (GNUNET_SIGNATURE_PURPOSE_CADET_KX);
2134   kx_msg.purpose.size = htonl (ephemeral_purpose_size ());
2135   kx_msg.origin_identity = my_full_id;
2136   rekey_task = GNUNET_SCHEDULER_add_now (&rekey, NULL);
2137
2138   tunnels = GNUNET_CONTAINER_multipeermap_create (128, GNUNET_YES);
2139 }
2140
2141
2142 /**
2143  * Shut down the tunnel subsystem.
2144  */
2145 void
2146 GCT_shutdown (void)
2147 {
2148   if (GNUNET_SCHEDULER_NO_TASK != rekey_task)
2149   {
2150     GNUNET_SCHEDULER_cancel (rekey_task);
2151     rekey_task = GNUNET_SCHEDULER_NO_TASK;
2152   }
2153   GNUNET_CONTAINER_multipeermap_iterate (tunnels, &destroy_iterator, NULL);
2154   GNUNET_CONTAINER_multipeermap_destroy (tunnels);
2155 }
2156
2157
2158 /**
2159  * Create a tunnel.
2160  *
2161  * @param destination Peer this tunnel is towards.
2162  */
2163 struct CadetTunnel *
2164 GCT_new (struct CadetPeer *destination)
2165 {
2166   struct CadetTunnel *t;
2167
2168   t = GNUNET_new (struct CadetTunnel);
2169   t->next_chid = 0;
2170   t->peer = destination;
2171
2172   if (GNUNET_OK !=
2173       GNUNET_CONTAINER_multipeermap_put (tunnels, GCP_get_id (destination), t,
2174                                          GNUNET_CONTAINER_MULTIHASHMAPOPTION_UNIQUE_FAST))
2175   {
2176     GNUNET_break (0);
2177     GNUNET_free (t);
2178     return NULL;
2179   }
2180   return t;
2181 }
2182
2183
2184 /**
2185  * Change the tunnel's connection state.
2186  *
2187  * @param t Tunnel whose connection state to change.
2188  * @param cstate New connection state.
2189  */
2190 void
2191 GCT_change_cstate (struct CadetTunnel* t, enum CadetTunnelCState cstate)
2192 {
2193   if (NULL == t)
2194     return;
2195   LOG (GNUNET_ERROR_TYPE_DEBUG, "Tunnel %s cstate %s => %s\n",
2196        GCP_2s (t->peer), cstate2s (t->cstate), cstate2s (cstate));
2197   if (myid != GCP_get_short_id (t->peer) &&
2198       CADET_TUNNEL_READY != t->cstate &&
2199       CADET_TUNNEL_READY == cstate)
2200   {
2201     t->cstate = cstate;
2202     if (CADET_TUNNEL_KEY_OK == t->estate)
2203     {
2204       LOG (GNUNET_ERROR_TYPE_DEBUG, "  cstate triggered send queued data\n");
2205       send_queued_data (t);
2206     }
2207     else if (CADET_TUNNEL_KEY_UNINITIALIZED == t->estate)
2208     {
2209       LOG (GNUNET_ERROR_TYPE_DEBUG, "  cstate triggered rekey\n");
2210       if (GNUNET_SCHEDULER_NO_TASK != t->rekey_task)
2211         GNUNET_SCHEDULER_cancel (t->rekey_task);
2212       rekey_tunnel (t, NULL);
2213     }
2214   }
2215   t->cstate = cstate;
2216
2217   if (CADET_TUNNEL_READY == cstate
2218       && CONNECTIONS_PER_TUNNEL <= GCT_count_connections (t))
2219   {
2220     LOG (GNUNET_ERROR_TYPE_DEBUG, "  cstate triggered stop dht\n");
2221     GCP_stop_search (t->peer);
2222   }
2223 }
2224
2225
2226 /**
2227  * Change the tunnel encryption state.
2228  *
2229  * @param t Tunnel whose encryption state to change, or NULL.
2230  * @param state New encryption state.
2231  */
2232 void
2233 GCT_change_estate (struct CadetTunnel* t, enum CadetTunnelEState state)
2234 {
2235   enum CadetTunnelEState old;
2236
2237   if (NULL == t)
2238     return;
2239
2240   old = t->estate;
2241   t->estate = state;
2242   LOG (GNUNET_ERROR_TYPE_DEBUG, "Tunnel %s estate was %s\n",
2243        GCP_2s (t->peer), estate2s (old));
2244   LOG (GNUNET_ERROR_TYPE_DEBUG, "Tunnel %s estate is now %s\n",
2245        GCP_2s (t->peer), estate2s (t->estate));
2246
2247   /* Send queued data if enc state changes to OK */
2248   if (myid != GCP_get_short_id (t->peer) &&
2249       CADET_TUNNEL_KEY_OK != old && CADET_TUNNEL_KEY_OK == t->estate)
2250   {
2251     send_queued_data (t);
2252   }
2253 }
2254
2255
2256 /**
2257  * @brief Check if tunnel has too many connections, and remove one if necessary.
2258  *
2259  * Currently this means the newest connection, unless it is a direct one.
2260  * Implemented as a task to avoid freeing a connection that is in the middle
2261  * of being created/processed.
2262  *
2263  * @param cls Closure (Tunnel to check).
2264  * @param tc Task context.
2265  */
2266 static void
2267 trim_connections (void *cls, const struct GNUNET_SCHEDULER_TaskContext *tc)
2268 {
2269   struct CadetTunnel *t = cls;
2270
2271   t->trim_connections_task = GNUNET_SCHEDULER_NO_TASK;
2272
2273   if (0 != (tc->reason & GNUNET_SCHEDULER_REASON_SHUTDOWN))
2274     return;
2275
2276   if (GCT_count_connections (t) > 2 * CONNECTIONS_PER_TUNNEL)
2277   {
2278     struct CadetTConnection *iter;
2279     struct CadetTConnection *c;
2280
2281     for (c = iter = t->connection_head; NULL != iter; iter = iter->next)
2282     {
2283       if ((iter->created.abs_value_us > c->created.abs_value_us)
2284           && GNUNET_NO == GCC_is_direct (iter->c))
2285       {
2286         c = iter;
2287       }
2288     }
2289     if (NULL != c)
2290     {
2291       LOG (GNUNET_ERROR_TYPE_DEBUG, "Too many connections on tunnel %s\n",
2292            GCT_2s (t));
2293       LOG (GNUNET_ERROR_TYPE_DEBUG, "Destroying connection %s\n",
2294            GCC_2s (c->c));
2295       GCC_destroy (c->c);
2296     }
2297     else
2298     {
2299       GNUNET_break (0);
2300     }
2301   }
2302 }
2303
2304
2305 /**
2306  * Add a connection to a tunnel.
2307  *
2308  * @param t Tunnel.
2309  * @param c Connection.
2310  */
2311 void
2312 GCT_add_connection (struct CadetTunnel *t, struct CadetConnection *c)
2313 {
2314   struct CadetTConnection *aux;
2315
2316   GNUNET_assert (NULL != c);
2317
2318   LOG (GNUNET_ERROR_TYPE_DEBUG, "add connection %s\n", GCC_2s (c));
2319   LOG (GNUNET_ERROR_TYPE_DEBUG, " to tunnel %s\n", GCT_2s (t));
2320   for (aux = t->connection_head; aux != NULL; aux = aux->next)
2321     if (aux->c == c)
2322       return;
2323
2324   aux = GNUNET_new (struct CadetTConnection);
2325   aux->c = c;
2326   aux->created = GNUNET_TIME_absolute_get ();
2327
2328   GNUNET_CONTAINER_DLL_insert (t->connection_head, t->connection_tail, aux);
2329
2330   if (CADET_TUNNEL_SEARCHING == t->cstate)
2331     GCT_change_estate (t, CADET_TUNNEL_WAITING);
2332
2333   if (GNUNET_SCHEDULER_NO_TASK != t->trim_connections_task)
2334     t->trim_connections_task = GNUNET_SCHEDULER_add_now (&trim_connections, t);
2335 }
2336
2337
2338 /**
2339  * Remove a connection from a tunnel.
2340  *
2341  * @param t Tunnel.
2342  * @param c Connection.
2343  */
2344 void
2345 GCT_remove_connection (struct CadetTunnel *t,
2346                        struct CadetConnection *c)
2347 {
2348   struct CadetTConnection *aux;
2349   struct CadetTConnection *next;
2350   unsigned int conns;
2351
2352   LOG (GNUNET_ERROR_TYPE_DEBUG, "Removing connection %s from tunnel %s\n",
2353        GCC_2s (c), GCT_2s (t));
2354   for (aux = t->connection_head; aux != NULL; aux = next)
2355   {
2356     next = aux->next;
2357     if (aux->c == c)
2358     {
2359       GNUNET_CONTAINER_DLL_remove (t->connection_head, t->connection_tail, aux);
2360       GNUNET_free (aux);
2361     }
2362   }
2363
2364   conns = GCT_count_connections (t);
2365   if (0 == conns
2366       && GNUNET_SCHEDULER_NO_TASK == t->destroy_task
2367       && CADET_TUNNEL_SHUTDOWN != t->cstate
2368       && GNUNET_NO == shutting_down)
2369   {
2370     if (0 == GCT_count_any_connections (t))
2371       GCT_change_cstate (t, CADET_TUNNEL_SEARCHING);
2372     else
2373       GCT_change_cstate (t, CADET_TUNNEL_WAITING);
2374   }
2375
2376   /* Start new connections if needed */
2377   if (CONNECTIONS_PER_TUNNEL > conns
2378       && GNUNET_SCHEDULER_NO_TASK == t->destroy_task
2379       && CADET_TUNNEL_SHUTDOWN != t->cstate
2380       && GNUNET_NO == shutting_down)
2381   {
2382     LOG (GNUNET_ERROR_TYPE_DEBUG, "  too few connections, getting new ones\n");
2383     GCP_connect (t->peer); /* Will change cstate to WAITING when possible */
2384     return;
2385   }
2386
2387   /* If not marked as ready, no change is needed */
2388   if (CADET_TUNNEL_READY != t->cstate)
2389     return;
2390
2391   /* Check if any connection is ready to maintain cstate */
2392   for (aux = t->connection_head; aux != NULL; aux = aux->next)
2393     if (CADET_CONNECTION_READY == GCC_get_state (aux->c))
2394       return;
2395 }
2396
2397
2398 /**
2399  * Add a channel to a tunnel.
2400  *
2401  * @param t Tunnel.
2402  * @param ch Channel.
2403  */
2404 void
2405 GCT_add_channel (struct CadetTunnel *t, struct CadetChannel *ch)
2406 {
2407   struct CadetTChannel *aux;
2408
2409   GNUNET_assert (NULL != ch);
2410
2411   LOG (GNUNET_ERROR_TYPE_DEBUG, "Adding channel %p to tunnel %p\n", ch, t);
2412
2413   for (aux = t->channel_head; aux != NULL; aux = aux->next)
2414   {
2415     LOG (GNUNET_ERROR_TYPE_DEBUG, "  already there %p\n", aux->ch);
2416     if (aux->ch == ch)
2417       return;
2418   }
2419
2420   aux = GNUNET_new (struct CadetTChannel);
2421   aux->ch = ch;
2422   LOG (GNUNET_ERROR_TYPE_DEBUG, " adding %p to %p\n", aux, t->channel_head);
2423   GNUNET_CONTAINER_DLL_insert_tail (t->channel_head, t->channel_tail, aux);
2424
2425   if (GNUNET_SCHEDULER_NO_TASK != t->destroy_task)
2426   {
2427     GNUNET_SCHEDULER_cancel (t->destroy_task);
2428     t->destroy_task = GNUNET_SCHEDULER_NO_TASK;
2429     LOG (GNUNET_ERROR_TYPE_DEBUG, " undo destroy!\n");
2430   }
2431 }
2432
2433
2434 /**
2435  * Remove a channel from a tunnel.
2436  *
2437  * @param t Tunnel.
2438  * @param ch Channel.
2439  */
2440 void
2441 GCT_remove_channel (struct CadetTunnel *t, struct CadetChannel *ch)
2442 {
2443   struct CadetTChannel *aux;
2444
2445   LOG (GNUNET_ERROR_TYPE_DEBUG, "Removing channel %p from tunnel %p\n", ch, t);
2446   for (aux = t->channel_head; aux != NULL; aux = aux->next)
2447   {
2448     if (aux->ch == ch)
2449     {
2450       LOG (GNUNET_ERROR_TYPE_DEBUG, " found! %s\n", GCCH_2s (ch));
2451       GNUNET_CONTAINER_DLL_remove (t->channel_head, t->channel_tail, aux);
2452       GNUNET_free (aux);
2453       return;
2454     }
2455   }
2456 }
2457
2458
2459 /**
2460  * Search for a channel by global ID.
2461  *
2462  * @param t Tunnel containing the channel.
2463  * @param chid Public channel number.
2464  *
2465  * @return channel handler, NULL if doesn't exist
2466  */
2467 struct CadetChannel *
2468 GCT_get_channel (struct CadetTunnel *t, CADET_ChannelNumber chid)
2469 {
2470   struct CadetTChannel *iter;
2471
2472   if (NULL == t)
2473     return NULL;
2474
2475   for (iter = t->channel_head; NULL != iter; iter = iter->next)
2476   {
2477     if (GCCH_get_id (iter->ch) == chid)
2478       break;
2479   }
2480
2481   return NULL == iter ? NULL : iter->ch;
2482 }
2483
2484
2485 /**
2486  * @brief Destroy a tunnel and free all resources.
2487  *
2488  * Should only be called a while after the tunnel has been marked as destroyed,
2489  * in case there is a new channel added to the same peer shortly after marking
2490  * the tunnel. This way we avoid a new public key handshake.
2491  *
2492  * @param cls Closure (tunnel to destroy).
2493  * @param tc Task context.
2494  */
2495 static void
2496 delayed_destroy (void *cls, const struct GNUNET_SCHEDULER_TaskContext *tc)
2497 {
2498   struct CadetTunnel *t = cls;
2499   struct CadetTConnection *iter;
2500
2501   LOG (GNUNET_ERROR_TYPE_DEBUG, "delayed destroying tunnel %p\n", t);
2502   if (0 != (GNUNET_SCHEDULER_REASON_SHUTDOWN & tc->reason))
2503   {
2504     LOG (GNUNET_ERROR_TYPE_WARNING,
2505          "Not destroying tunnel, due to shutdown. "
2506          "Tunnel at %p should have been freed by GCT_shutdown\n", t);
2507     return;
2508   }
2509   t->destroy_task = GNUNET_SCHEDULER_NO_TASK;
2510   t->cstate = CADET_TUNNEL_SHUTDOWN;
2511
2512   for (iter = t->connection_head; NULL != iter; iter = iter->next)
2513   {
2514     GCC_send_destroy (iter->c);
2515   }
2516   GCT_destroy (t);
2517 }
2518
2519
2520 /**
2521  * Tunnel is empty: destroy it.
2522  *
2523  * Notifies all connections about the destruction.
2524  *
2525  * @param t Tunnel to destroy.
2526  */
2527 void
2528 GCT_destroy_empty (struct CadetTunnel *t)
2529 {
2530   if (GNUNET_YES == shutting_down)
2531     return; /* Will be destroyed immediately anyway */
2532
2533   if (GNUNET_SCHEDULER_NO_TASK != t->destroy_task)
2534   {
2535     LOG (GNUNET_ERROR_TYPE_WARNING,
2536          "Tunnel %s is already scheduled for destruction. Tunnel debug dump:\n",
2537          GCT_2s (t));
2538     GCT_debug (t, GNUNET_ERROR_TYPE_WARNING);
2539     GNUNET_break (0);
2540     /* should never happen, tunnel can only become empty once, and the
2541      * task identifier should be NO_TASK (cleaned when the tunnel was created
2542      * or became un-empty)
2543      */
2544     return;
2545   }
2546
2547   LOG (GNUNET_ERROR_TYPE_DEBUG, "Tunnel %s empty: destroying scheduled\n",
2548        GCT_2s (t));
2549
2550   // FIXME make delay a config option
2551   t->destroy_task = GNUNET_SCHEDULER_add_delayed (GNUNET_TIME_UNIT_MINUTES,
2552                                                   &delayed_destroy, t);
2553   LOG (GNUNET_ERROR_TYPE_DEBUG, "Scheduled destroy of %p as %llX\n",
2554        t, t->destroy_task);
2555 }
2556
2557
2558 /**
2559  * Destroy tunnel if empty (no more channels).
2560  *
2561  * @param t Tunnel to destroy if empty.
2562  */
2563 void
2564 GCT_destroy_if_empty (struct CadetTunnel *t)
2565 {
2566   LOG (GNUNET_ERROR_TYPE_DEBUG, "Tunnel %s destroy if empty\n", GCT_2s (t));
2567   if (1 < GCT_count_channels (t))
2568     return;
2569
2570   GCT_destroy_empty (t);
2571 }
2572
2573
2574 /**
2575  * Destroy the tunnel.
2576  *
2577  * This function does not generate any warning traffic to clients or peers.
2578  *
2579  * Tasks:
2580  * Cancel messages belonging to this tunnel queued to neighbors.
2581  * Free any allocated resources linked to the tunnel.
2582  *
2583  * @param t The tunnel to destroy.
2584  */
2585 void
2586 GCT_destroy (struct CadetTunnel *t)
2587 {
2588   struct CadetTConnection *iter_c;
2589   struct CadetTConnection *next_c;
2590   struct CadetTChannel *iter_ch;
2591   struct CadetTChannel *next_ch;
2592
2593   if (NULL == t)
2594     return;
2595
2596   LOG (GNUNET_ERROR_TYPE_DEBUG, "destroying tunnel %s\n", GCP_2s (t->peer));
2597
2598   GNUNET_break (GNUNET_YES ==
2599                 GNUNET_CONTAINER_multipeermap_remove (tunnels,
2600                                                       GCP_get_id (t->peer), t));
2601
2602   for (iter_c = t->connection_head; NULL != iter_c; iter_c = next_c)
2603   {
2604     next_c = iter_c->next;
2605     GCC_destroy (iter_c->c);
2606   }
2607   for (iter_ch = t->channel_head; NULL != iter_ch; iter_ch = next_ch)
2608   {
2609     next_ch = iter_ch->next;
2610     GCCH_destroy (iter_ch->ch);
2611     /* Should only happen on shutdown, but it's ok. */
2612   }
2613
2614   if (GNUNET_SCHEDULER_NO_TASK != t->destroy_task)
2615   {
2616     LOG (GNUNET_ERROR_TYPE_DEBUG, "cancelling dest: %llX\n", t->destroy_task);
2617     GNUNET_SCHEDULER_cancel (t->destroy_task);
2618     t->destroy_task = GNUNET_SCHEDULER_NO_TASK;
2619   }
2620
2621   if (GNUNET_SCHEDULER_NO_TASK != t->trim_connections_task)
2622   {
2623     LOG (GNUNET_ERROR_TYPE_DEBUG, "cancelling trim: %llX\n",
2624          t->trim_connections_task);
2625     GNUNET_SCHEDULER_cancel (t->trim_connections_task);
2626     t->trim_connections_task = GNUNET_SCHEDULER_NO_TASK;
2627   }
2628
2629   GNUNET_STATISTICS_update (stats, "# tunnels", -1, GNUNET_NO);
2630   GCP_set_tunnel (t->peer, NULL);
2631
2632   if (GNUNET_SCHEDULER_NO_TASK != t->rekey_task)
2633   {
2634     GNUNET_SCHEDULER_cancel (t->rekey_task);
2635     t->rekey_task = GNUNET_SCHEDULER_NO_TASK;
2636   }
2637   if (NULL != t->kx_ctx)
2638   {
2639     if (GNUNET_SCHEDULER_NO_TASK != t->kx_ctx->finish_task)
2640       GNUNET_SCHEDULER_cancel (t->kx_ctx->finish_task);
2641     GNUNET_free (t->kx_ctx);
2642   }
2643   GNUNET_free (t);
2644 }
2645
2646
2647 /**
2648  * @brief Use the given path for the tunnel.
2649  * Update the next and prev hops (and RCs).
2650  * (Re)start the path refresh in case the tunnel is locally owned.
2651  *
2652  * @param t Tunnel to update.
2653  * @param p Path to use.
2654  *
2655  * @return Connection created.
2656  */
2657 struct CadetConnection *
2658 GCT_use_path (struct CadetTunnel *t, struct CadetPeerPath *p)
2659 {
2660   struct CadetConnection *c;
2661   struct GNUNET_CADET_Hash cid;
2662   unsigned int own_pos;
2663
2664   if (NULL == t || NULL == p)
2665   {
2666     GNUNET_break (0);
2667     return NULL;
2668   }
2669
2670   if (CADET_TUNNEL_SHUTDOWN == t->cstate)
2671   {
2672     GNUNET_break (0);
2673     return NULL;
2674   }
2675
2676   for (own_pos = 0; own_pos < p->length; own_pos++)
2677   {
2678     if (p->peers[own_pos] == myid)
2679       break;
2680   }
2681   if (own_pos >= p->length)
2682   {
2683     GNUNET_break_op (0);
2684     return NULL;
2685   }
2686
2687   GNUNET_CRYPTO_random_block (GNUNET_CRYPTO_QUALITY_NONCE, &cid, sizeof (cid));
2688   c = GCC_new (&cid, t, p, own_pos);
2689   if (NULL == c)
2690   {
2691     /* Path was flawed */
2692     return NULL;
2693   }
2694   GCT_add_connection (t, c);
2695   return c;
2696 }
2697
2698
2699 /**
2700  * Count all created connections of a tunnel. Not necessarily ready connections!
2701  *
2702  * @param t Tunnel on which to count.
2703  *
2704  * @return Number of connections created, either being established or ready.
2705  */
2706 unsigned int
2707 GCT_count_any_connections (struct CadetTunnel *t)
2708 {
2709   struct CadetTConnection *iter;
2710   unsigned int count;
2711
2712   if (NULL == t)
2713     return 0;
2714
2715   for (count = 0, iter = t->connection_head; NULL != iter; iter = iter->next)
2716     count++;
2717
2718   return count;
2719 }
2720
2721
2722 /**
2723  * Count established (ready) connections of a tunnel.
2724  *
2725  * @param t Tunnel on which to count.
2726  *
2727  * @return Number of connections.
2728  */
2729 unsigned int
2730 GCT_count_connections (struct CadetTunnel *t)
2731 {
2732   struct CadetTConnection *iter;
2733   unsigned int count;
2734
2735   if (NULL == t)
2736     return 0;
2737
2738   for (count = 0, iter = t->connection_head; NULL != iter; iter = iter->next)
2739     if (CADET_CONNECTION_READY == GCC_get_state (iter->c))
2740       count++;
2741
2742   return count;
2743 }
2744
2745
2746 /**
2747  * Count channels of a tunnel.
2748  *
2749  * @param t Tunnel on which to count.
2750  *
2751  * @return Number of channels.
2752  */
2753 unsigned int
2754 GCT_count_channels (struct CadetTunnel *t)
2755 {
2756   struct CadetTChannel *iter;
2757   unsigned int count;
2758
2759   for (count = 0, iter = t->channel_head;
2760        NULL != iter;
2761        iter = iter->next, count++) /* skip */;
2762
2763   return count;
2764 }
2765
2766
2767 /**
2768  * Get the connectivity state of a tunnel.
2769  *
2770  * @param t Tunnel.
2771  *
2772  * @return Tunnel's connectivity state.
2773  */
2774 enum CadetTunnelCState
2775 GCT_get_cstate (struct CadetTunnel *t)
2776 {
2777   if (NULL == t)
2778   {
2779     GNUNET_assert (0);
2780     return (enum CadetTunnelCState) -1;
2781   }
2782   return t->cstate;
2783 }
2784
2785
2786 /**
2787  * Get the encryption state of a tunnel.
2788  *
2789  * @param t Tunnel.
2790  *
2791  * @return Tunnel's encryption state.
2792  */
2793 enum CadetTunnelEState
2794 GCT_get_estate (struct CadetTunnel *t)
2795 {
2796   if (NULL == t)
2797   {
2798     GNUNET_break (0);
2799     return (enum CadetTunnelEState) -1;
2800   }
2801   return t->estate;
2802 }
2803
2804 /**
2805  * Get the maximum buffer space for a tunnel towards a local client.
2806  *
2807  * @param t Tunnel.
2808  *
2809  * @return Biggest buffer space offered by any channel in the tunnel.
2810  */
2811 unsigned int
2812 GCT_get_channels_buffer (struct CadetTunnel *t)
2813 {
2814   struct CadetTChannel *iter;
2815   unsigned int buffer;
2816   unsigned int ch_buf;
2817
2818   if (NULL == t->channel_head)
2819   {
2820     /* Probably getting buffer for a channel create/handshake. */
2821     return 64;
2822   }
2823
2824   buffer = 0;
2825   for (iter = t->channel_head; NULL != iter; iter = iter->next)
2826   {
2827     ch_buf = get_channel_buffer (iter);
2828     if (ch_buf > buffer)
2829       buffer = ch_buf;
2830   }
2831   return buffer;
2832 }
2833
2834
2835 /**
2836  * Get the total buffer space for a tunnel for P2P traffic.
2837  *
2838  * @param t Tunnel.
2839  *
2840  * @return Buffer space offered by all connections in the tunnel.
2841  */
2842 unsigned int
2843 GCT_get_connections_buffer (struct CadetTunnel *t)
2844 {
2845   struct CadetTConnection *iter;
2846   unsigned int buffer;
2847
2848   if (GNUNET_NO == is_ready (t))
2849   {
2850     if (count_queued_data (t) > 3)
2851       return 0;
2852     else
2853       return 1;
2854   }
2855
2856   buffer = 0;
2857   for (iter = t->connection_head; NULL != iter; iter = iter->next)
2858   {
2859     if (GCC_get_state (iter->c) != CADET_CONNECTION_READY)
2860     {
2861       continue;
2862     }
2863     buffer += get_connection_buffer (iter);
2864   }
2865
2866   return buffer;
2867 }
2868
2869
2870 /**
2871  * Get the tunnel's destination.
2872  *
2873  * @param t Tunnel.
2874  *
2875  * @return ID of the destination peer.
2876  */
2877 const struct GNUNET_PeerIdentity *
2878 GCT_get_destination (struct CadetTunnel *t)
2879 {
2880   return GCP_get_id (t->peer);
2881 }
2882
2883
2884 /**
2885  * Get the tunnel's next free global channel ID.
2886  *
2887  * @param t Tunnel.
2888  *
2889  * @return GID of a channel free to use.
2890  */
2891 CADET_ChannelNumber
2892 GCT_get_next_chid (struct CadetTunnel *t)
2893 {
2894   CADET_ChannelNumber chid;
2895   CADET_ChannelNumber mask;
2896   int result;
2897
2898   /* Set bit 30 depending on the ID relationship. Bit 31 is always 0 for GID.
2899    * If our ID is bigger or loopback tunnel, start at 0, bit 30 = 0
2900    * If peer's ID is bigger, start at 0x4... bit 30 = 1
2901    */
2902   result = GNUNET_CRYPTO_cmp_peer_identity (&my_full_id, GCP_get_id (t->peer));
2903   if (0 > result)
2904     mask = 0x40000000;
2905   else
2906     mask = 0x0;
2907   t->next_chid |= mask;
2908
2909   while (NULL != GCT_get_channel (t, t->next_chid))
2910   {
2911     LOG (GNUNET_ERROR_TYPE_DEBUG, "Channel %u exists...\n", t->next_chid);
2912     t->next_chid = (t->next_chid + 1) & ~GNUNET_CADET_LOCAL_CHANNEL_ID_CLI;
2913     t->next_chid |= mask;
2914   }
2915   chid = t->next_chid;
2916   t->next_chid = (t->next_chid + 1) & ~GNUNET_CADET_LOCAL_CHANNEL_ID_CLI;
2917   t->next_chid |= mask;
2918
2919   return chid;
2920 }
2921
2922
2923 /**
2924  * Send ACK on one or more channels due to buffer in connections.
2925  *
2926  * @param t Channel which has some free buffer space.
2927  */
2928 void
2929 GCT_unchoke_channels (struct CadetTunnel *t)
2930 {
2931   struct CadetTChannel *iter;
2932   unsigned int buffer;
2933   unsigned int channels = GCT_count_channels (t);
2934   unsigned int choked_n;
2935   struct CadetChannel *choked[channels];
2936
2937   LOG (GNUNET_ERROR_TYPE_DEBUG, "GCT_unchoke_channels on %s\n", GCT_2s (t));
2938   LOG (GNUNET_ERROR_TYPE_DEBUG, " head: %p\n", t->channel_head);
2939   if (NULL != t->channel_head)
2940     LOG (GNUNET_ERROR_TYPE_DEBUG, " head ch: %p\n", t->channel_head->ch);
2941
2942   /* Get buffer space */
2943   buffer = GCT_get_connections_buffer (t);
2944   if (0 == buffer)
2945   {
2946     return;
2947   }
2948
2949   /* Count and remember choked channels */
2950   choked_n = 0;
2951   for (iter = t->channel_head; NULL != iter; iter = iter->next)
2952   {
2953     if (GNUNET_NO == get_channel_allowed (iter))
2954     {
2955       choked[choked_n++] = iter->ch;
2956     }
2957   }
2958
2959   /* Unchoke random channels */
2960   while (0 < buffer && 0 < choked_n)
2961   {
2962     unsigned int r = GNUNET_CRYPTO_random_u32 (GNUNET_CRYPTO_QUALITY_WEAK,
2963                                                choked_n);
2964     GCCH_allow_client (choked[r], GCCH_is_origin (choked[r], GNUNET_YES));
2965     choked_n--;
2966     buffer--;
2967     choked[r] = choked[choked_n];
2968   }
2969 }
2970
2971
2972 /**
2973  * Send ACK on one or more connections due to buffer space to the client.
2974  *
2975  * Iterates all connections of the tunnel and sends ACKs appropriately.
2976  *
2977  * @param t Tunnel.
2978  */
2979 void
2980 GCT_send_connection_acks (struct CadetTunnel *t)
2981 {
2982   struct CadetTConnection *iter;
2983   uint32_t allowed;
2984   uint32_t to_allow;
2985   uint32_t allow_per_connection;
2986   unsigned int cs;
2987   unsigned int buffer;
2988
2989   LOG (GNUNET_ERROR_TYPE_DEBUG, "Tunnel send connection ACKs on %s\n",
2990        GCT_2s (t));
2991
2992   if (NULL == t)
2993   {
2994     GNUNET_break (0);
2995     return;
2996   }
2997
2998   buffer = GCT_get_channels_buffer (t);
2999   LOG (GNUNET_ERROR_TYPE_DEBUG, "  buffer %u\n", buffer);
3000
3001   /* Count connections, how many messages are already allowed */
3002   cs = GCT_count_connections (t);
3003   for (allowed = 0, iter = t->connection_head; NULL != iter; iter = iter->next)
3004   {
3005     allowed += get_connection_allowed (iter);
3006   }
3007   LOG (GNUNET_ERROR_TYPE_DEBUG, "  allowed %u\n", allowed);
3008
3009   /* Make sure there is no overflow */
3010   if (allowed > buffer)
3011   {
3012     return;
3013   }
3014
3015   /* Authorize connections to send more data */
3016   to_allow = buffer; /* FIXME (- allowed;) */
3017
3018   for (iter = t->connection_head;
3019        NULL != iter && to_allow > 0;
3020        iter = iter->next)
3021   {
3022     if (CADET_CONNECTION_READY != GCC_get_state (iter->c)
3023         || get_connection_allowed (iter) > 64 / 3)
3024     {
3025       continue;
3026     }
3027     allow_per_connection = to_allow/cs;
3028     to_allow -= allow_per_connection;
3029     cs--;
3030     GCC_allow (iter->c, allow_per_connection,
3031                GCC_is_origin (iter->c, GNUNET_NO));
3032   }
3033
3034   if (0 != to_allow)
3035   {
3036     GNUNET_break (0);
3037     GCT_debug (t, GNUNET_ERROR_TYPE_WARNING);
3038     LOG (GNUNET_ERROR_TYPE_WARNING, "  reminding to_allow: %u\n", to_allow);
3039   }
3040 }
3041
3042
3043 /**
3044  * Cancel a previously sent message while it's in the queue.
3045  *
3046  * ONLY can be called before the continuation given to the send function
3047  * is called. Once the continuation is called, the message is no longer in the
3048  * queue.
3049  *
3050  * @param q Handle to the queue.
3051  */
3052 void
3053 GCT_cancel (struct CadetTunnelQueue *q)
3054 {
3055   if (NULL != q->cq)
3056   {
3057     GCC_cancel (q->cq);
3058     /* tun_message_sent() will be called and free q */
3059   }
3060   else if (NULL != q->tqd)
3061   {
3062     unqueue_data (q->tqd);
3063     q->tqd = NULL;
3064     if (NULL != q->cont)
3065       q->cont (q->cont_cls, NULL, q, 0, 0);
3066     GNUNET_free (q);
3067   }
3068   else
3069   {
3070     GNUNET_break (0);
3071   }
3072 }
3073
3074
3075 /**
3076  * Sends an already built message on a tunnel, encrypting it and
3077  * choosing the best connection if not provided.
3078  *
3079  * @param message Message to send. Function modifies it.
3080  * @param t Tunnel on which this message is transmitted.
3081  * @param c Connection to use (autoselect if NULL).
3082  * @param force Force the tunnel to take the message (buffer overfill).
3083  * @param cont Continuation to call once message is really sent.
3084  * @param cont_cls Closure for @c cont.
3085  *
3086  * @return Handle to cancel message. NULL if @c cont is NULL.
3087  */
3088 struct CadetTunnelQueue *
3089 GCT_send_prebuilt_message (const struct GNUNET_MessageHeader *message,
3090                            struct CadetTunnel *t, struct CadetConnection *c,
3091                            int force, GCT_sent cont, void *cont_cls)
3092 {
3093   return send_prebuilt_message (message, t, c, force, cont, cont_cls, NULL);
3094 }
3095
3096 /**
3097  * Sends an already built and encrypted message on a tunnel, choosing the best
3098  * connection. Useful for re-queueing messages queued on a destroyed connection.
3099  *
3100  * @param message Message to send. Function modifies it.
3101  * @param t Tunnel on which this message is transmitted.
3102  */
3103 void
3104 GCT_resend_message (const struct GNUNET_MessageHeader *message,
3105                     struct CadetTunnel *t)
3106 {
3107   struct CadetConnection *c;
3108   int fwd;
3109
3110   c = tunnel_get_connection (t);
3111   if (NULL == c)
3112   {
3113     /* TODO queue in tunnel, marked as encrypted */
3114     LOG (GNUNET_ERROR_TYPE_DEBUG, "No connection available, dropping.\n");
3115     return;
3116   }
3117   fwd = GCC_is_origin (c, GNUNET_YES);
3118   GNUNET_break (NULL == GCC_send_prebuilt_message (message, 0, 0, c, fwd,
3119                                                    GNUNET_YES, NULL, NULL));
3120 }
3121
3122
3123 /**
3124  * Is the tunnel directed towards the local peer?
3125  *
3126  * @param t Tunnel.
3127  *
3128  * @return #GNUNET_YES if it is loopback.
3129  */
3130 int
3131 GCT_is_loopback (const struct CadetTunnel *t)
3132 {
3133   return (myid == GCP_get_short_id (t->peer));
3134 }
3135
3136
3137 /**
3138  * Is the tunnel this path already?
3139  *
3140  * @param t Tunnel.
3141  * @param p Path.
3142  *
3143  * @return #GNUNET_YES a connection uses this path.
3144  */
3145 int
3146 GCT_is_path_used (const struct CadetTunnel *t, const struct CadetPeerPath *p)
3147 {
3148   struct CadetTConnection *iter;
3149
3150   for (iter = t->connection_head; NULL != iter; iter = iter->next)
3151     if (GCC_get_path (iter->c) == p)
3152       return GNUNET_YES;
3153
3154   return GNUNET_NO;
3155 }
3156
3157
3158 /**
3159  * Get a cost of a path for a tunnel considering existing connections.
3160  *
3161  * @param t Tunnel.
3162  * @param path Candidate path.
3163  *
3164  * @return Cost of the path (path length + number of overlapping nodes)
3165  */
3166 unsigned int
3167 GCT_get_path_cost (const struct CadetTunnel *t,
3168                    const struct CadetPeerPath *path)
3169 {
3170   struct CadetTConnection *iter;
3171   const struct CadetPeerPath *aux;
3172   unsigned int overlap;
3173   unsigned int i;
3174   unsigned int j;
3175
3176   if (NULL == path)
3177     return 0;
3178
3179   overlap = 0;
3180   GNUNET_assert (NULL != t);
3181
3182   for (i = 0; i < path->length; i++)
3183   {
3184     for (iter = t->connection_head; NULL != iter; iter = iter->next)
3185     {
3186       aux = GCC_get_path (iter->c);
3187       if (NULL == aux)
3188         continue;
3189
3190       for (j = 0; j < aux->length; j++)
3191       {
3192         if (path->peers[i] == aux->peers[j])
3193         {
3194           overlap++;
3195           break;
3196         }
3197       }
3198     }
3199   }
3200   return path->length + overlap;
3201 }
3202
3203
3204 /**
3205  * Get the static string for the peer this tunnel is directed.
3206  *
3207  * @param t Tunnel.
3208  *
3209  * @return Static string the destination peer's ID.
3210  */
3211 const char *
3212 GCT_2s (const struct CadetTunnel *t)
3213 {
3214   if (NULL == t)
3215     return "(NULL)";
3216
3217   return GCP_2s (t->peer);
3218 }
3219
3220
3221 /******************************************************************************/
3222 /*****************************    INFO/DEBUG    *******************************/
3223 /******************************************************************************/
3224
3225 /**
3226  * Log all possible info about the tunnel state.
3227  *
3228  * @param t Tunnel to debug.
3229  * @param level Debug level to use.
3230  */
3231 void
3232 GCT_debug (const struct CadetTunnel *t, enum GNUNET_ErrorType level)
3233 {
3234   struct CadetTChannel *iterch;
3235   struct CadetTConnection *iterc;
3236   int do_log;
3237
3238   do_log = GNUNET_get_log_call_status (level & (~GNUNET_ERROR_TYPE_BULK),
3239                                        "cadet-tun",
3240                                        __FILE__, __FUNCTION__, __LINE__);
3241   if (0 == do_log)
3242     return;
3243
3244   LOG2 (level, "TTT DEBUG TUNNEL TOWARDS %s\n", GCT_2s (t));
3245   LOG2 (level, "TTT  cstate %s, estate %s\n",
3246        cstate2s (t->cstate), estate2s (t->estate));
3247   LOG2 (level, "TTT  kx_ctx %p, rekey_task %u, finish task %u\n",
3248         t->kx_ctx, t->rekey_task, t->kx_ctx ? t->kx_ctx->finish_task : 0);
3249 #if DUMP_KEYS_TO_STDERR
3250   LOG2 (level, "TTT  my EPHM\t %s\n",
3251         GNUNET_h2s ((struct GNUNET_HashCode *) &kx_msg.ephemeral_key));
3252   LOG2 (level, "TTT  peers EPHM:\t %s\n",
3253         GNUNET_h2s ((struct GNUNET_HashCode *) &t->peers_ephemeral_key));
3254   LOG2 (level, "TTT  ENC key:\t %s\n",
3255         GNUNET_h2s ((struct GNUNET_HashCode *) &t->e_key));
3256   LOG2 (level, "TTT  DEC key:\t %s\n",
3257         GNUNET_h2s ((struct GNUNET_HashCode *) &t->d_key));
3258   if (t->kx_ctx)
3259   {
3260     LOG2 (level, "TTT  OLD ENC key:\t %s\n",
3261           GNUNET_h2s ((struct GNUNET_HashCode *) &t->kx_ctx->e_key_old));
3262     LOG2 (level, "TTT  OLD DEC key:\t %s\n",
3263           GNUNET_h2s ((struct GNUNET_HashCode *) &t->kx_ctx->d_key_old));
3264   }
3265 #endif
3266   LOG2 (level, "TTT  tq_head %p, tq_tail %p\n", t->tq_head, t->tq_tail);
3267   LOG2 (level, "TTT  destroy %u\n", t->destroy_task);
3268
3269   LOG2 (level, "TTT  channels:\n");
3270   for (iterch = t->channel_head; NULL != iterch; iterch = iterch->next)
3271   {
3272     LOG2 (level, "TTT  - %s\n", GCCH_2s (iterch->ch));
3273   }
3274
3275   LOG2 (level, "TTT  connections:\n");
3276   for (iterc = t->connection_head; NULL != iterc; iterc = iterc->next)
3277   {
3278     GCC_debug (iterc->c, level);
3279   }
3280
3281   LOG2 (level, "TTT DEBUG TUNNEL END\n");
3282 }
3283
3284
3285 /**
3286  * Iterate all tunnels.
3287  *
3288  * @param iter Iterator.
3289  * @param cls Closure for @c iter.
3290  */
3291 void
3292 GCT_iterate_all (GNUNET_CONTAINER_PeerMapIterator iter, void *cls)
3293 {
3294   GNUNET_CONTAINER_multipeermap_iterate (tunnels, iter, cls);
3295 }
3296
3297
3298 /**
3299  * Count all tunnels.
3300  *
3301  * @return Number of tunnels to remote peers kept by this peer.
3302  */
3303 unsigned int
3304 GCT_count_all (void)
3305 {
3306   return GNUNET_CONTAINER_multipeermap_size (tunnels);
3307 }
3308
3309
3310 /**
3311  * Iterate all connections of a tunnel.
3312  *
3313  * @param t Tunnel whose connections to iterate.
3314  * @param iter Iterator.
3315  * @param cls Closure for @c iter.
3316  */
3317 void
3318 GCT_iterate_connections (struct CadetTunnel *t, GCT_conn_iter iter, void *cls)
3319 {
3320   struct CadetTConnection *ct;
3321
3322   for (ct = t->connection_head; NULL != ct; ct = ct->next)
3323     iter (cls, ct->c);
3324 }
3325
3326
3327 /**
3328  * Iterate all channels of a tunnel.
3329  *
3330  * @param t Tunnel whose channels to iterate.
3331  * @param iter Iterator.
3332  * @param cls Closure for @c iter.
3333  */
3334 void
3335 GCT_iterate_channels (struct CadetTunnel *t, GCT_chan_iter iter, void *cls)
3336 {
3337   struct CadetTChannel *cht;
3338
3339   for (cht = t->channel_head; NULL != cht; cht = cht->next)
3340     iter (cls, cht->ch);
3341 }