another channel-add destroy-cancel fix
[oweals/gnunet.git] / src / cadet / gnunet-service-cadet-new_tunnels.c
1 /*
2      This file is part of GNUnet.
3      Copyright (C) 2013, 2017 GNUnet e.V.
4
5      GNUnet is free software; you can redistribute it and/or modify
6      it under the terms of the GNU General Public License as published
7      by the Free Software Foundation; either version 3, or (at your
8      option) any later version.
9
10      GNUnet is distributed in the hope that it will be useful, but
11      WITHOUT ANY WARRANTY; without even the implied warranty of
12      MERCHANTABILITY or FITNESS FOR A PARTICULAR PURPOSE.  See the GNU
13      General Public License for more details.
14
15      You should have received a copy of the GNU General Public License
16      along with GNUnet; see the file COPYING.  If not, write to the
17      Free Software Foundation, Inc., 51 Franklin Street, Fifth Floor,
18      Boston, MA 02110-1301, USA.
19 */
20 /**
21  * @file cadet/gnunet-service-cadet-new_tunnels.c
22  * @brief Information we track per tunnel.
23  * @author Bartlomiej Polot
24  * @author Christian Grothoff
25  *
26  * FIXME:
27  * - proper connection evaluation during connection management:
28  *   + consider quality (or quality spread?) of current connection set
29  *     when deciding how often to do maintenance
30  *   + interact with PEER to drive DHT GET/PUT operations based
31  *     on how much we like our connections
32  */
33 #include "platform.h"
34 #include "gnunet_util_lib.h"
35 #include "gnunet_statistics_service.h"
36 #include "gnunet_signatures.h"
37 #include "gnunet-service-cadet-new.h"
38 #include "cadet_protocol.h"
39 #include "gnunet-service-cadet-new_channel.h"
40 #include "gnunet-service-cadet-new_connection.h"
41 #include "gnunet-service-cadet-new_tunnels.h"
42 #include "gnunet-service-cadet-new_peer.h"
43 #include "gnunet-service-cadet-new_paths.h"
44
45
46 #define LOG(level, ...) GNUNET_log_from(level,"cadet-tun",__VA_ARGS__)
47
48 /**
49  * How often do we try to decrypt payload with unverified key
50  * material?  Used to limit CPU increase upon receiving bogus
51  * KX.
52  */
53 #define MAX_UNVERIFIED_ATTEMPTS 16
54
55 /**
56  * How long do we wait until tearing down an idle tunnel?
57  */
58 #define IDLE_DESTROY_DELAY GNUNET_TIME_relative_multiply(GNUNET_TIME_UNIT_SECONDS, 90)
59
60 /**
61  * How long do we wait initially before retransmitting the KX?
62  * TODO: replace by 2 RTT if/once we have connection-level RTT data!
63  */
64 #define INITIAL_KX_RETRY_DELAY GNUNET_TIME_relative_multiply(GNUNET_TIME_UNIT_MILLISECONDS, 250)
65
66 /**
67  * Maximum number of skipped keys we keep in memory per tunnel.
68  */
69 #define MAX_SKIPPED_KEYS 64
70
71 /**
72  * Maximum number of keys (and thus ratchet steps) we are willing to
73  * skip before we decide this is either a bogus packet or a DoS-attempt.
74  */
75 #define MAX_KEY_GAP 256
76
77
78 /**
79  * Struct to old keys for skipped messages while advancing the Axolotl ratchet.
80  */
81 struct CadetTunnelSkippedKey
82 {
83   /**
84    * DLL next.
85    */
86   struct CadetTunnelSkippedKey *next;
87
88   /**
89    * DLL prev.
90    */
91   struct CadetTunnelSkippedKey *prev;
92
93   /**
94    * When was this key stored (for timeout).
95    */
96   struct GNUNET_TIME_Absolute timestamp;
97
98   /**
99    * Header key.
100    */
101   struct GNUNET_CRYPTO_SymmetricSessionKey HK;
102
103   /**
104    * Message key.
105    */
106   struct GNUNET_CRYPTO_SymmetricSessionKey MK;
107
108   /**
109    * Key number for a given HK.
110    */
111   unsigned int Kn;
112 };
113
114
115 /**
116  * Axolotl data, according to https://github.com/trevp/axolotl/wiki .
117  */
118 struct CadetTunnelAxolotl
119 {
120   /**
121    * A (double linked) list of stored message keys and associated header keys
122    * for "skipped" messages, i.e. messages that have not been
123    * received despite the reception of more recent messages, (head).
124    */
125   struct CadetTunnelSkippedKey *skipped_head;
126
127   /**
128    * Skipped messages' keys DLL, tail.
129    */
130   struct CadetTunnelSkippedKey *skipped_tail;
131
132   /**
133    * 32-byte root key which gets updated by DH ratchet.
134    */
135   struct GNUNET_CRYPTO_SymmetricSessionKey RK;
136
137   /**
138    * 32-byte header key (currently used for sending).
139    */
140   struct GNUNET_CRYPTO_SymmetricSessionKey HKs;
141
142   /**
143    * 32-byte header key (currently used for receiving)
144    */
145   struct GNUNET_CRYPTO_SymmetricSessionKey HKr;
146
147   /**
148    * 32-byte next header key (for sending), used once the
149    * ratchet advances.  We are sure that the sender has this
150    * key as well only after @e ratchet_allowed is #GNUNET_YES.
151    */
152   struct GNUNET_CRYPTO_SymmetricSessionKey NHKs;
153
154   /**
155    * 32-byte next header key (for receiving).  To be tried
156    * when decrypting with @e HKr fails and thus the sender
157    * may have advanced the ratchet.
158    */
159   struct GNUNET_CRYPTO_SymmetricSessionKey NHKr;
160
161   /**
162    * 32-byte chain keys (used for forward-secrecy) for
163    * sending messages. Updated for every message.
164    */
165   struct GNUNET_CRYPTO_SymmetricSessionKey CKs;
166
167   /**
168    * 32-byte chain keys (used for forward-secrecy) for
169    * receiving messages. Updated for every message. If
170    * messages are skipped, the respective derived MKs
171    * (and the current @HKr) are kept in the @e skipped_head DLL.
172    */
173   struct GNUNET_CRYPTO_SymmetricSessionKey CKr;
174
175   /**
176    * ECDH for key exchange (A0 / B0).  Note that for the
177    * 'unverified_ax', this member is an alias with the main
178    * 't->ax.kx_0' value, so do not free it!
179    */
180   struct GNUNET_CRYPTO_EcdhePrivateKey *kx_0;
181
182   /**
183    * ECDH Ratchet key (our private key in the current DH).  Note that
184    * for the 'unverified_ax', this member is an alias with the main
185    * 't->ax.kx_0' value, so do not free it!
186    */
187   struct GNUNET_CRYPTO_EcdhePrivateKey *DHRs;
188
189   /**
190    * ECDH Ratchet key (other peer's public key in the current DH).
191    */
192   struct GNUNET_CRYPTO_EcdhePublicKey DHRr;
193
194   /**
195    * Time when the current ratchet expires and a new one is triggered
196    * (if @e ratchet_allowed is #GNUNET_YES).
197    */
198   struct GNUNET_TIME_Absolute ratchet_expiration;
199
200   /**
201    * Number of elements in @a skipped_head <-> @a skipped_tail.
202    */
203   unsigned int skipped;
204
205   /**
206    * Message number (reset to 0 with each new ratchet, next message to send).
207    */
208   uint32_t Ns;
209
210   /**
211    * Message number (reset to 0 with each new ratchet, next message to recv).
212    */
213   uint32_t Nr;
214
215   /**
216    * Previous message numbers (# of msgs sent under prev ratchet)
217    */
218   uint32_t PNs;
219
220   /**
221    * True (#GNUNET_YES) if we have to send a new ratchet key in next msg.
222    */
223   int ratchet_flag;
224
225   /**
226    * True (#GNUNET_YES) if we have received a message from the
227    * other peer that uses the keys from our last ratchet step.
228    * This implies that we are again allowed to advance the ratchet,
229    * otherwise we have to wait until the other peer sees our current
230    * ephemeral key and advances first.
231    *
232    * #GNUNET_NO if we have advanced the ratched but lack any evidence
233    * that the other peer has noticed this.
234    */
235   int ratchet_allowed;
236
237   /**
238    * Number of messages recieved since our last ratchet advance.
239    *
240    * If this counter = 0, we cannot send a new ratchet key in the next
241    * message.
242    *
243    * If this counter > 0, we could (but don't have to) send a new key.
244    *
245    * Once the @e ratchet_counter is larger than
246    * #ratchet_messages (or @e ratchet_expiration time has past), and
247    * @e ratchet_allowed is #GNUNET_YES, we advance the ratchet.
248    */
249   unsigned int ratchet_counter;
250
251 };
252
253
254 /**
255  * Struct used to save messages in a non-ready tunnel to send once connected.
256  */
257 struct CadetTunnelQueueEntry
258 {
259   /**
260    * We are entries in a DLL
261    */
262   struct CadetTunnelQueueEntry *next;
263
264   /**
265    * We are entries in a DLL
266    */
267   struct CadetTunnelQueueEntry *prev;
268
269   /**
270    * Tunnel these messages belong in.
271    */
272   struct CadetTunnel *t;
273
274   /**
275    * Continuation to call once sent (on the channel layer).
276    */
277   GCT_SendContinuation cont;
278
279   /**
280    * Closure for @c cont.
281    */
282   void *cont_cls;
283
284   /**
285    * Envelope of message to send follows.
286    */
287   struct GNUNET_MQ_Envelope *env;
288
289   /**
290    * Where to put the connection identifier into the payload
291    * of the message in @e env once we have it?
292    */
293   struct GNUNET_CADET_ConnectionTunnelIdentifier *cid;
294 };
295
296
297 /**
298  * Struct containing all information regarding a tunnel to a peer.
299  */
300 struct CadetTunnel
301 {
302   /**
303    * Destination of the tunnel.
304    */
305   struct CadetPeer *destination;
306
307   /**
308    * Peer's ephemeral key, to recreate @c e_key and @c d_key when own
309    * ephemeral key changes.
310    */
311   struct GNUNET_CRYPTO_EcdhePublicKey peers_ephemeral_key;
312
313   /**
314    * Encryption ("our") key. It is only "confirmed" if kx_ctx is NULL.
315    */
316   struct GNUNET_CRYPTO_SymmetricSessionKey e_key;
317
318   /**
319    * Decryption ("their") key. It is only "confirmed" if kx_ctx is NULL.
320    */
321   struct GNUNET_CRYPTO_SymmetricSessionKey d_key;
322
323   /**
324    * Axolotl info.
325    */
326   struct CadetTunnelAxolotl ax;
327
328   /**
329    * Unverified Axolotl info, used only if we got a fresh KX (not a
330    * KX_AUTH) while our end of the tunnel was still up.  In this case,
331    * we keep the fresh KX around but do not put it into action until
332    * we got encrypted payload that assures us of the authenticity of
333    * the KX.
334    */
335   struct CadetTunnelAxolotl *unverified_ax;
336
337   /**
338    * Task scheduled if there are no more channels using the tunnel.
339    */
340   struct GNUNET_SCHEDULER_Task *destroy_task;
341
342   /**
343    * Task to trim connections if too many are present.
344    */
345   struct GNUNET_SCHEDULER_Task *maintain_connections_task;
346
347   /**
348    * Task to send messages from queue (if possible).
349    */
350   struct GNUNET_SCHEDULER_Task *send_task;
351
352   /**
353    * Task to trigger KX.
354    */
355   struct GNUNET_SCHEDULER_Task *kx_task;
356
357   /**
358    * Tokenizer for decrypted messages.
359    */
360   struct GNUNET_MessageStreamTokenizer *mst;
361
362   /**
363    * Dispatcher for decrypted messages only (do NOT use for sending!).
364    */
365   struct GNUNET_MQ_Handle *mq;
366
367   /**
368    * DLL of ready connections that are actively used to reach the destination peer.
369    */
370   struct CadetTConnection *connection_ready_head;
371
372   /**
373    * DLL of ready connections that are actively used to reach the destination peer.
374    */
375   struct CadetTConnection *connection_ready_tail;
376
377   /**
378    * DLL of connections that we maintain that might be used to reach the destination peer.
379    */
380   struct CadetTConnection *connection_busy_head;
381
382   /**
383    * DLL of connections that we maintain that might be used to reach the destination peer.
384    */
385   struct CadetTConnection *connection_busy_tail;
386
387   /**
388    * Channels inside this tunnel. Maps
389    * `struct GNUNET_CADET_ChannelTunnelNumber` to a `struct CadetChannel`.
390    */
391   struct GNUNET_CONTAINER_MultiHashMap32 *channels;
392
393   /**
394    * Channel ID for the next created channel in this tunnel.
395    */
396   struct GNUNET_CADET_ChannelTunnelNumber next_ctn;
397
398   /**
399    * Queued messages, to transmit once tunnel gets connected.
400    */
401   struct CadetTunnelQueueEntry *tq_head;
402
403   /**
404    * Queued messages, to transmit once tunnel gets connected.
405    */
406   struct CadetTunnelQueueEntry *tq_tail;
407
408   /**
409    * Identification of the connection from which we are currently processing
410    * a message. Only valid (non-NULL) during #handle_decrypted() and the
411    * handle-*()-functions called from our @e mq during that function.
412    */
413   struct CadetTConnection *current_ct;
414
415   /**
416    * How long do we wait until we retry the KX?
417    */
418   struct GNUNET_TIME_Relative kx_retry_delay;
419
420   /**
421    * When do we try the next KX?
422    */
423   struct GNUNET_TIME_Absolute next_kx_attempt;
424
425   /**
426    * Number of connections in the @e connection_ready_head DLL.
427    */
428   unsigned int num_ready_connections;
429
430   /**
431    * Number of connections in the @e connection_busy_head DLL.
432    */
433   unsigned int num_busy_connections;
434
435   /**
436    * How often have we tried and failed to decrypt a message using
437    * the unverified KX material from @e unverified_ax?  Used to
438    * stop trying after #MAX_UNVERIFIED_ATTEMPTS.
439    */
440   unsigned int unverified_attempts;
441
442   /**
443    * Number of entries in the @e tq_head DLL.
444    */
445   unsigned int tq_len;
446
447   /**
448    * State of the tunnel encryption.
449    */
450   enum CadetTunnelEState estate;
451
452   /**
453    * Force triggering KX_AUTH independent of @e estate.
454    */
455   int kx_auth_requested;
456
457 };
458
459
460 /**
461  * Connection @a ct is now unready, clear it's ready flag
462  * and move it from the ready DLL to the busy DLL.
463  *
464  * @param ct connection to move to unready status
465  */
466 static void
467 mark_connection_unready (struct CadetTConnection *ct)
468 {
469   struct CadetTunnel *t = ct->t;
470
471   GNUNET_assert (GNUNET_YES == ct->is_ready);
472   GNUNET_CONTAINER_DLL_remove (t->connection_ready_head,
473                                t->connection_ready_tail,
474                                ct);
475   GNUNET_assert (0 < t->num_ready_connections);
476   t->num_ready_connections--;
477   ct->is_ready = GNUNET_NO;
478   GNUNET_CONTAINER_DLL_insert (t->connection_busy_head,
479                                t->connection_busy_tail,
480                                ct);
481   t->num_busy_connections++;
482 }
483
484
485 /**
486  * Get the static string for the peer this tunnel is directed.
487  *
488  * @param t Tunnel.
489  *
490  * @return Static string the destination peer's ID.
491  */
492 const char *
493 GCT_2s (const struct CadetTunnel *t)
494 {
495   static char buf[64];
496
497   if (NULL == t)
498     return "Tunnel(NULL)";
499   GNUNET_snprintf (buf,
500                    sizeof (buf),
501                    "Tunnel %s",
502                    GNUNET_i2s (GCP_get_id (t->destination)));
503   return buf;
504 }
505
506
507 /**
508  * Get string description for tunnel encryption state.
509  *
510  * @param es Tunnel state.
511  *
512  * @return String representation.
513  */
514 static const char *
515 estate2s (enum CadetTunnelEState es)
516 {
517   static char buf[32];
518
519   switch (es)
520   {
521   case CADET_TUNNEL_KEY_UNINITIALIZED:
522     return "CADET_TUNNEL_KEY_UNINITIALIZED";
523   case CADET_TUNNEL_KEY_AX_RECV:
524     return "CADET_TUNNEL_KEY_AX_RECV";
525   case CADET_TUNNEL_KEY_AX_SENT:
526     return "CADET_TUNNEL_KEY_AX_SENT";
527   case CADET_TUNNEL_KEY_AX_SENT_AND_RECV:
528     return "CADET_TUNNEL_KEY_AX_SENT_AND_RECV";
529   case CADET_TUNNEL_KEY_AX_AUTH_SENT:
530     return "CADET_TUNNEL_KEY_AX_AUTH_SENT";
531   case CADET_TUNNEL_KEY_OK:
532     return "CADET_TUNNEL_KEY_OK";
533   default:
534     GNUNET_snprintf (buf,
535                      sizeof (buf),
536                      "%u (UNKNOWN STATE)",
537                      es);
538     return buf;
539   }
540 }
541
542
543 /**
544  * Return the peer to which this tunnel goes.
545  *
546  * @param t a tunnel
547  * @return the destination of the tunnel
548  */
549 struct CadetPeer *
550 GCT_get_destination (struct CadetTunnel *t)
551 {
552   return t->destination;
553 }
554
555
556 /**
557  * Count channels of a tunnel.
558  *
559  * @param t Tunnel on which to count.
560  *
561  * @return Number of channels.
562  */
563 unsigned int
564 GCT_count_channels (struct CadetTunnel *t)
565 {
566   return GNUNET_CONTAINER_multihashmap32_size (t->channels);
567 }
568
569
570 /**
571  * Lookup a channel by its @a ctn.
572  *
573  * @param t tunnel to look in
574  * @param ctn number of channel to find
575  * @return NULL if channel does not exist
576  */
577 struct CadetChannel *
578 lookup_channel (struct CadetTunnel *t,
579                 struct GNUNET_CADET_ChannelTunnelNumber ctn)
580 {
581   return GNUNET_CONTAINER_multihashmap32_get (t->channels,
582                                               ntohl (ctn.cn));
583 }
584
585
586 /**
587  * Count all created connections of a tunnel. Not necessarily ready connections!
588  *
589  * @param t Tunnel on which to count.
590  *
591  * @return Number of connections created, either being established or ready.
592  */
593 unsigned int
594 GCT_count_any_connections (const struct CadetTunnel *t)
595 {
596   return t->num_ready_connections + t->num_busy_connections;
597 }
598
599
600 /**
601  * Find first connection that is ready in the list of
602  * our connections.  Picks ready connections round-robin.
603  *
604  * @param t tunnel to search
605  * @return NULL if we have no connection that is ready
606  */
607 static struct CadetTConnection *
608 get_ready_connection (struct CadetTunnel *t)
609 {
610   return t->connection_ready_head;
611 }
612
613
614 /**
615  * Get the encryption state of a tunnel.
616  *
617  * @param t Tunnel.
618  *
619  * @return Tunnel's encryption state.
620  */
621 enum CadetTunnelEState
622 GCT_get_estate (struct CadetTunnel *t)
623 {
624   return t->estate;
625 }
626
627
628 /**
629  * Called when either we have a new connection, or a new message in the
630  * queue, or some existing connection has transmission capacity.  Looks
631  * at our message queue and if there is a message, picks a connection
632  * to send it on.
633  *
634  * @param cls the `struct CadetTunnel` to process messages on
635  */
636 static void
637 trigger_transmissions (void *cls);
638
639
640 /* ************************************** start core crypto ***************************** */
641
642
643 /**
644  * Create a new Axolotl ephemeral (ratchet) key.
645  *
646  * @param ax key material to update
647  */
648 static void
649 new_ephemeral (struct CadetTunnelAxolotl *ax)
650 {
651   GNUNET_free_non_null (ax->DHRs);
652   LOG (GNUNET_ERROR_TYPE_DEBUG,
653        "Creating new ephemeral ratchet key (DHRs)\n");
654   ax->DHRs = GNUNET_CRYPTO_ecdhe_key_create ();
655 }
656
657
658 /**
659  * Calculate HMAC.
660  *
661  * @param plaintext Content to HMAC.
662  * @param size Size of @c plaintext.
663  * @param iv Initialization vector for the message.
664  * @param key Key to use.
665  * @param hmac[out] Destination to store the HMAC.
666  */
667 static void
668 t_hmac (const void *plaintext,
669         size_t size,
670         uint32_t iv,
671         const struct GNUNET_CRYPTO_SymmetricSessionKey *key,
672         struct GNUNET_ShortHashCode *hmac)
673 {
674   static const char ctx[] = "cadet authentication key";
675   struct GNUNET_CRYPTO_AuthKey auth_key;
676   struct GNUNET_HashCode hash;
677
678   GNUNET_CRYPTO_hmac_derive_key (&auth_key,
679                                  key,
680                                  &iv, sizeof (iv),
681                                  key, sizeof (*key),
682                                  ctx, sizeof (ctx),
683                                  NULL);
684   /* Two step: GNUNET_ShortHash is only 256 bits,
685      GNUNET_HashCode is 512, so we truncate. */
686   GNUNET_CRYPTO_hmac (&auth_key,
687                       plaintext,
688                       size,
689                       &hash);
690   GNUNET_memcpy (hmac,
691                  &hash,
692                  sizeof (*hmac));
693 }
694
695
696 /**
697  * Perform a HMAC.
698  *
699  * @param key Key to use.
700  * @param[out] hash Resulting HMAC.
701  * @param source Source key material (data to HMAC).
702  * @param len Length of @a source.
703  */
704 static void
705 t_ax_hmac_hash (const struct GNUNET_CRYPTO_SymmetricSessionKey *key,
706                 struct GNUNET_HashCode *hash,
707                 const void *source,
708                 unsigned int len)
709 {
710   static const char ctx[] = "axolotl HMAC-HASH";
711   struct GNUNET_CRYPTO_AuthKey auth_key;
712
713   GNUNET_CRYPTO_hmac_derive_key (&auth_key,
714                                  key,
715                                  ctx, sizeof (ctx),
716                                  NULL);
717   GNUNET_CRYPTO_hmac (&auth_key,
718                       source,
719                       len,
720                       hash);
721 }
722
723
724 /**
725  * Derive a symmetric encryption key from an HMAC-HASH.
726  *
727  * @param key Key to use for the HMAC.
728  * @param[out] out Key to generate.
729  * @param source Source key material (data to HMAC).
730  * @param len Length of @a source.
731  */
732 static void
733 t_hmac_derive_key (const struct GNUNET_CRYPTO_SymmetricSessionKey *key,
734                    struct GNUNET_CRYPTO_SymmetricSessionKey *out,
735                    const void *source,
736                    unsigned int len)
737 {
738   static const char ctx[] = "axolotl derive key";
739   struct GNUNET_HashCode h;
740
741   t_ax_hmac_hash (key,
742                   &h,
743                   source,
744                   len);
745   GNUNET_CRYPTO_kdf (out, sizeof (*out),
746                      ctx, sizeof (ctx),
747                      &h, sizeof (h),
748                      NULL);
749 }
750
751
752 /**
753  * Encrypt data with the axolotl tunnel key.
754  *
755  * @param ax key material to use.
756  * @param dst Destination with @a size bytes for the encrypted data.
757  * @param src Source of the plaintext. Can overlap with @c dst, must contain @a size bytes
758  * @param size Size of the buffers at @a src and @a dst
759  */
760 static void
761 t_ax_encrypt (struct CadetTunnelAxolotl *ax,
762               void *dst,
763               const void *src,
764               size_t size)
765 {
766   struct GNUNET_CRYPTO_SymmetricSessionKey MK;
767   struct GNUNET_CRYPTO_SymmetricInitializationVector iv;
768   size_t out_size;
769
770   ax->ratchet_counter++;
771   if ( (GNUNET_YES == ax->ratchet_allowed) &&
772        ( (ratchet_messages <= ax->ratchet_counter) ||
773          (0 == GNUNET_TIME_absolute_get_remaining (ax->ratchet_expiration).rel_value_us)) )
774   {
775     ax->ratchet_flag = GNUNET_YES;
776   }
777   if (GNUNET_YES == ax->ratchet_flag)
778   {
779     /* Advance ratchet */
780     struct GNUNET_CRYPTO_SymmetricSessionKey keys[3];
781     struct GNUNET_HashCode dh;
782     struct GNUNET_HashCode hmac;
783     static const char ctx[] = "axolotl ratchet";
784
785     new_ephemeral (ax);
786     ax->HKs = ax->NHKs;
787
788     /* RK, NHKs, CKs = KDF( HMAC-HASH(RK, DH(DHRs, DHRr)) ) */
789     GNUNET_CRYPTO_ecc_ecdh (ax->DHRs,
790                             &ax->DHRr,
791                             &dh);
792     t_ax_hmac_hash (&ax->RK,
793                     &hmac,
794                     &dh,
795                     sizeof (dh));
796     GNUNET_CRYPTO_kdf (keys, sizeof (keys),
797                        ctx, sizeof (ctx),
798                        &hmac, sizeof (hmac),
799                        NULL);
800     ax->RK = keys[0];
801     ax->NHKs = keys[1];
802     ax->CKs = keys[2];
803
804     ax->PNs = ax->Ns;
805     ax->Ns = 0;
806     ax->ratchet_flag = GNUNET_NO;
807     ax->ratchet_allowed = GNUNET_NO;
808     ax->ratchet_counter = 0;
809     ax->ratchet_expiration
810       = GNUNET_TIME_absolute_add (GNUNET_TIME_absolute_get(),
811                                   ratchet_time);
812   }
813
814   t_hmac_derive_key (&ax->CKs,
815                      &MK,
816                      "0",
817                      1);
818   GNUNET_CRYPTO_symmetric_derive_iv (&iv,
819                                      &MK,
820                                      NULL, 0,
821                                      NULL);
822
823   out_size = GNUNET_CRYPTO_symmetric_encrypt (src,
824                                               size,
825                                               &MK,
826                                               &iv,
827                                               dst);
828   GNUNET_assert (size == out_size);
829   t_hmac_derive_key (&ax->CKs,
830                      &ax->CKs,
831                      "1",
832                      1);
833 }
834
835
836 /**
837  * Decrypt data with the axolotl tunnel key.
838  *
839  * @param ax key material to use.
840  * @param dst Destination for the decrypted data, must contain @a size bytes.
841  * @param src Source of the ciphertext. Can overlap with @c dst, must contain @a size bytes.
842  * @param size Size of the @a src and @a dst buffers
843  */
844 static void
845 t_ax_decrypt (struct CadetTunnelAxolotl *ax,
846               void *dst,
847               const void *src,
848               size_t size)
849 {
850   struct GNUNET_CRYPTO_SymmetricSessionKey MK;
851   struct GNUNET_CRYPTO_SymmetricInitializationVector iv;
852   size_t out_size;
853
854   t_hmac_derive_key (&ax->CKr,
855                      &MK,
856                      "0",
857                      1);
858   GNUNET_CRYPTO_symmetric_derive_iv (&iv,
859                                      &MK,
860                                      NULL, 0,
861                                      NULL);
862   GNUNET_assert (size >= sizeof (struct GNUNET_MessageHeader));
863   out_size = GNUNET_CRYPTO_symmetric_decrypt (src,
864                                               size,
865                                               &MK,
866                                               &iv,
867                                               dst);
868   GNUNET_assert (out_size == size);
869   t_hmac_derive_key (&ax->CKr,
870                      &ax->CKr,
871                      "1",
872                      1);
873 }
874
875
876 /**
877  * Encrypt header with the axolotl header key.
878  *
879  * @param ax key material to use.
880  * @param[in|out] msg Message whose header to encrypt.
881  */
882 static void
883 t_h_encrypt (struct CadetTunnelAxolotl *ax,
884              struct GNUNET_CADET_TunnelEncryptedMessage *msg)
885 {
886   struct GNUNET_CRYPTO_SymmetricInitializationVector iv;
887   size_t out_size;
888
889   GNUNET_CRYPTO_symmetric_derive_iv (&iv,
890                                      &ax->HKs,
891                                      NULL, 0,
892                                      NULL);
893   out_size = GNUNET_CRYPTO_symmetric_encrypt (&msg->ax_header,
894                                               sizeof (struct GNUNET_CADET_AxHeader),
895                                               &ax->HKs,
896                                               &iv,
897                                               &msg->ax_header);
898   GNUNET_assert (sizeof (struct GNUNET_CADET_AxHeader) == out_size);
899 }
900
901
902 /**
903  * Decrypt header with the current axolotl header key.
904  *
905  * @param ax key material to use.
906  * @param src Message whose header to decrypt.
907  * @param dst Where to decrypt header to.
908  */
909 static void
910 t_h_decrypt (struct CadetTunnelAxolotl *ax,
911              const struct GNUNET_CADET_TunnelEncryptedMessage *src,
912              struct GNUNET_CADET_TunnelEncryptedMessage *dst)
913 {
914   struct GNUNET_CRYPTO_SymmetricInitializationVector iv;
915   size_t out_size;
916
917   GNUNET_CRYPTO_symmetric_derive_iv (&iv,
918                                      &ax->HKr,
919                                      NULL, 0,
920                                      NULL);
921   out_size = GNUNET_CRYPTO_symmetric_decrypt (&src->ax_header.Ns,
922                                               sizeof (struct GNUNET_CADET_AxHeader),
923                                               &ax->HKr,
924                                               &iv,
925                                               &dst->ax_header.Ns);
926   GNUNET_assert (sizeof (struct GNUNET_CADET_AxHeader) == out_size);
927 }
928
929
930 /**
931  * Delete a key from the list of skipped keys.
932  *
933  * @param ax key material to delete @a key from.
934  * @param key Key to delete.
935  */
936 static void
937 delete_skipped_key (struct CadetTunnelAxolotl *ax,
938                     struct CadetTunnelSkippedKey *key)
939 {
940   GNUNET_CONTAINER_DLL_remove (ax->skipped_head,
941                                ax->skipped_tail,
942                                key);
943   GNUNET_free (key);
944   ax->skipped--;
945 }
946
947
948 /**
949  * Decrypt and verify data with the appropriate tunnel key and verify that the
950  * data has not been altered since it was sent by the remote peer.
951  *
952  * @param ax key material to use.
953  * @param dst Destination for the plaintext.
954  * @param src Source of the message. Can overlap with @c dst.
955  * @param size Size of the message.
956  * @return Size of the decrypted data, -1 if an error was encountered.
957  */
958 static ssize_t
959 try_old_ax_keys (struct CadetTunnelAxolotl *ax,
960                  void *dst,
961                  const struct GNUNET_CADET_TunnelEncryptedMessage *src,
962                  size_t size)
963 {
964   struct CadetTunnelSkippedKey *key;
965   struct GNUNET_ShortHashCode *hmac;
966   struct GNUNET_CRYPTO_SymmetricInitializationVector iv;
967   struct GNUNET_CADET_TunnelEncryptedMessage plaintext_header;
968   struct GNUNET_CRYPTO_SymmetricSessionKey *valid_HK;
969   size_t esize;
970   size_t res;
971   size_t len;
972   unsigned int N;
973
974   LOG (GNUNET_ERROR_TYPE_DEBUG,
975        "Trying skipped keys\n");
976   hmac = &plaintext_header.hmac;
977   esize = size - sizeof (struct GNUNET_CADET_TunnelEncryptedMessage);
978
979   /* Find a correct Header Key */
980   valid_HK = NULL;
981   for (key = ax->skipped_head; NULL != key; key = key->next)
982   {
983     t_hmac (&src->ax_header,
984             sizeof (struct GNUNET_CADET_AxHeader) + esize,
985             0,
986             &key->HK,
987             hmac);
988     if (0 == memcmp (hmac,
989                      &src->hmac,
990                      sizeof (*hmac)))
991     {
992       valid_HK = &key->HK;
993       break;
994     }
995   }
996   if (NULL == key)
997     return -1;
998
999   /* Should've been checked in -cadet_connection.c handle_cadet_encrypted. */
1000   GNUNET_assert (size > sizeof (struct GNUNET_CADET_TunnelEncryptedMessage));
1001   len = size - sizeof (struct GNUNET_CADET_TunnelEncryptedMessage);
1002   GNUNET_assert (len >= sizeof (struct GNUNET_MessageHeader));
1003
1004   /* Decrypt header */
1005   GNUNET_CRYPTO_symmetric_derive_iv (&iv,
1006                                      &key->HK,
1007                                      NULL, 0,
1008                                      NULL);
1009   res = GNUNET_CRYPTO_symmetric_decrypt (&src->ax_header.Ns,
1010                                          sizeof (struct GNUNET_CADET_AxHeader),
1011                                          &key->HK,
1012                                          &iv,
1013                                          &plaintext_header.ax_header.Ns);
1014   GNUNET_assert (sizeof (struct GNUNET_CADET_AxHeader) == res);
1015
1016   /* Find the correct message key */
1017   N = ntohl (plaintext_header.ax_header.Ns);
1018   while ( (NULL != key) &&
1019           (N != key->Kn) )
1020     key = key->next;
1021   if ( (NULL == key) ||
1022        (0 != memcmp (&key->HK,
1023                      valid_HK,
1024                      sizeof (*valid_HK))) )
1025     return -1;
1026
1027   /* Decrypt payload */
1028   GNUNET_CRYPTO_symmetric_derive_iv (&iv,
1029                                      &key->MK,
1030                                      NULL,
1031                                      0,
1032                                      NULL);
1033   res = GNUNET_CRYPTO_symmetric_decrypt (&src[1],
1034                                          len,
1035                                          &key->MK,
1036                                          &iv,
1037                                          dst);
1038   delete_skipped_key (ax,
1039                       key);
1040   return res;
1041 }
1042
1043
1044 /**
1045  * Delete a key from the list of skipped keys.
1046  *
1047  * @param ax key material to delete from.
1048  * @param HKr Header Key to use.
1049  */
1050 static void
1051 store_skipped_key (struct CadetTunnelAxolotl *ax,
1052                    const struct GNUNET_CRYPTO_SymmetricSessionKey *HKr)
1053 {
1054   struct CadetTunnelSkippedKey *key;
1055
1056   key = GNUNET_new (struct CadetTunnelSkippedKey);
1057   key->timestamp = GNUNET_TIME_absolute_get ();
1058   key->Kn = ax->Nr;
1059   key->HK = ax->HKr;
1060   t_hmac_derive_key (&ax->CKr,
1061                      &key->MK,
1062                      "0",
1063                      1);
1064   t_hmac_derive_key (&ax->CKr,
1065                      &ax->CKr,
1066                      "1",
1067                      1);
1068   GNUNET_CONTAINER_DLL_insert (ax->skipped_head,
1069                                ax->skipped_tail,
1070                                key);
1071   ax->skipped++;
1072   ax->Nr++;
1073 }
1074
1075
1076 /**
1077  * Stage skipped AX keys and calculate the message key.
1078  * Stores each HK and MK for skipped messages.
1079  *
1080  * @param ax key material to use
1081  * @param HKr Header key.
1082  * @param Np Received meesage number.
1083  * @return #GNUNET_OK if keys were stored.
1084  *         #GNUNET_SYSERR if an error ocurred (@a Np not expected).
1085  */
1086 static int
1087 store_ax_keys (struct CadetTunnelAxolotl *ax,
1088                const struct GNUNET_CRYPTO_SymmetricSessionKey *HKr,
1089                uint32_t Np)
1090 {
1091   int gap;
1092
1093   gap = Np - ax->Nr;
1094   LOG (GNUNET_ERROR_TYPE_DEBUG,
1095        "Storing skipped keys [%u, %u)\n",
1096        ax->Nr,
1097        Np);
1098   if (MAX_KEY_GAP < gap)
1099   {
1100     /* Avoid DoS (forcing peer to do more than #MAX_KEY_GAP HMAC operations) */
1101     /* TODO: start new key exchange on return */
1102     GNUNET_break_op (0);
1103     LOG (GNUNET_ERROR_TYPE_WARNING,
1104          "Got message %u, expected %u+\n",
1105          Np,
1106          ax->Nr);
1107     return GNUNET_SYSERR;
1108   }
1109   if (0 > gap)
1110   {
1111     /* Delayed message: don't store keys, flag to try old keys. */
1112     return GNUNET_SYSERR;
1113   }
1114
1115   while (ax->Nr < Np)
1116     store_skipped_key (ax,
1117                        HKr);
1118
1119   while (ax->skipped > MAX_SKIPPED_KEYS)
1120     delete_skipped_key (ax,
1121                         ax->skipped_tail);
1122   return GNUNET_OK;
1123 }
1124
1125
1126 /**
1127  * Decrypt and verify data with the appropriate tunnel key and verify that the
1128  * data has not been altered since it was sent by the remote peer.
1129  *
1130  * @param ax key material to use
1131  * @param dst Destination for the plaintext.
1132  * @param src Source of the message. Can overlap with @c dst.
1133  * @param size Size of the message.
1134  * @return Size of the decrypted data, -1 if an error was encountered.
1135  */
1136 static ssize_t
1137 t_ax_decrypt_and_validate (struct CadetTunnelAxolotl *ax,
1138                            void *dst,
1139                            const struct GNUNET_CADET_TunnelEncryptedMessage *src,
1140                            size_t size)
1141 {
1142   struct GNUNET_ShortHashCode msg_hmac;
1143   struct GNUNET_HashCode hmac;
1144   struct GNUNET_CADET_TunnelEncryptedMessage plaintext_header;
1145   uint32_t Np;
1146   uint32_t PNp;
1147   size_t esize; /* Size of encryped payload */
1148
1149   esize = size - sizeof (struct GNUNET_CADET_TunnelEncryptedMessage);
1150
1151   /* Try current HK */
1152   t_hmac (&src->ax_header,
1153           sizeof (struct GNUNET_CADET_AxHeader) + esize,
1154           0, &ax->HKr,
1155           &msg_hmac);
1156   if (0 != memcmp (&msg_hmac,
1157                    &src->hmac,
1158                    sizeof (msg_hmac)))
1159   {
1160     static const char ctx[] = "axolotl ratchet";
1161     struct GNUNET_CRYPTO_SymmetricSessionKey keys[3]; /* RKp, NHKp, CKp */
1162     struct GNUNET_CRYPTO_SymmetricSessionKey HK;
1163     struct GNUNET_HashCode dh;
1164     struct GNUNET_CRYPTO_EcdhePublicKey *DHRp;
1165
1166     /* Try Next HK */
1167     t_hmac (&src->ax_header,
1168             sizeof (struct GNUNET_CADET_AxHeader) + esize,
1169             0,
1170             &ax->NHKr,
1171             &msg_hmac);
1172     if (0 != memcmp (&msg_hmac,
1173                      &src->hmac,
1174                      sizeof (msg_hmac)))
1175     {
1176       /* Try the skipped keys, if that fails, we're out of luck. */
1177       return try_old_ax_keys (ax,
1178                               dst,
1179                               src,
1180                               size);
1181     }
1182     HK = ax->HKr;
1183     ax->HKr = ax->NHKr;
1184     t_h_decrypt (ax,
1185                  src,
1186                  &plaintext_header);
1187     Np = ntohl (plaintext_header.ax_header.Ns);
1188     PNp = ntohl (plaintext_header.ax_header.PNs);
1189     DHRp = &plaintext_header.ax_header.DHRs;
1190     store_ax_keys (ax,
1191                    &HK,
1192                    PNp);
1193
1194     /* RKp, NHKp, CKp = KDF (HMAC-HASH (RK, DH (DHRp, DHRs))) */
1195     GNUNET_CRYPTO_ecc_ecdh (ax->DHRs,
1196                             DHRp,
1197                             &dh);
1198     t_ax_hmac_hash (&ax->RK,
1199                     &hmac,
1200                     &dh, sizeof (dh));
1201     GNUNET_CRYPTO_kdf (keys, sizeof (keys),
1202                        ctx, sizeof (ctx),
1203                        &hmac, sizeof (hmac),
1204                        NULL);
1205
1206     /* Commit "purported" keys */
1207     ax->RK = keys[0];
1208     ax->NHKr = keys[1];
1209     ax->CKr = keys[2];
1210     ax->DHRr = *DHRp;
1211     ax->Nr = 0;
1212     ax->ratchet_allowed = GNUNET_YES;
1213   }
1214   else
1215   {
1216     t_h_decrypt (ax,
1217                  src,
1218                  &plaintext_header);
1219     Np = ntohl (plaintext_header.ax_header.Ns);
1220     PNp = ntohl (plaintext_header.ax_header.PNs);
1221   }
1222   if ( (Np != ax->Nr) &&
1223        (GNUNET_OK != store_ax_keys (ax,
1224                                     &ax->HKr,
1225                                     Np)) )
1226   {
1227     /* Try the skipped keys, if that fails, we're out of luck. */
1228     return try_old_ax_keys (ax,
1229                             dst,
1230                             src,
1231                             size);
1232   }
1233
1234   t_ax_decrypt (ax,
1235                 dst,
1236                 &src[1],
1237                 esize);
1238   ax->Nr = Np + 1;
1239   return esize;
1240 }
1241
1242
1243 /**
1244  * Our tunnel became ready for the first time, notify channels
1245  * that have been waiting.
1246  *
1247  * @param cls our tunnel, not used
1248  * @param key unique ID of the channel, not used
1249  * @param value the `struct CadetChannel` to notify
1250  * @return #GNUNET_OK (continue to iterate)
1251  */
1252 static int
1253 notify_tunnel_up_cb (void *cls,
1254                      uint32_t key,
1255                      void *value)
1256 {
1257   struct CadetChannel *ch = value;
1258
1259   GCCH_tunnel_up (ch);
1260   return GNUNET_OK;
1261 }
1262
1263
1264 /**
1265  * Change the tunnel encryption state.
1266  * If the encryption state changes to OK, stop the rekey task.
1267  *
1268  * @param t Tunnel whose encryption state to change, or NULL.
1269  * @param state New encryption state.
1270  */
1271 void
1272 GCT_change_estate (struct CadetTunnel *t,
1273                    enum CadetTunnelEState state)
1274 {
1275   enum CadetTunnelEState old = t->estate;
1276
1277   t->estate = state;
1278   LOG (GNUNET_ERROR_TYPE_DEBUG,
1279        "%s estate changed from %s to %s\n",
1280        GCT_2s (t),
1281        estate2s (old),
1282        estate2s (state));
1283
1284   if ( (CADET_TUNNEL_KEY_OK != old) &&
1285        (CADET_TUNNEL_KEY_OK == t->estate) )
1286   {
1287     if (NULL != t->kx_task)
1288     {
1289       GNUNET_SCHEDULER_cancel (t->kx_task);
1290       t->kx_task = NULL;
1291     }
1292     /* notify all channels that have been waiting */
1293     GNUNET_CONTAINER_multihashmap32_iterate (t->channels,
1294                                              &notify_tunnel_up_cb,
1295                                              t);
1296     if (NULL != t->send_task)
1297       GNUNET_SCHEDULER_cancel (t->send_task);
1298     t->send_task = GNUNET_SCHEDULER_add_now (&trigger_transmissions,
1299                                              t);
1300   }
1301 }
1302
1303
1304 /**
1305  * Send a KX message.
1306  *
1307  * @param t tunnel on which to send the KX_AUTH
1308  * @param ct Tunnel and connection on which to send the KX_AUTH, NULL if
1309  *           we are to find one that is ready.
1310  * @param ax axolotl key context to use
1311  */
1312 static void
1313 send_kx (struct CadetTunnel *t,
1314          struct CadetTConnection *ct,
1315          struct CadetTunnelAxolotl *ax)
1316 {
1317   struct CadetConnection *cc;
1318   struct GNUNET_MQ_Envelope *env;
1319   struct GNUNET_CADET_TunnelKeyExchangeMessage *msg;
1320   enum GNUNET_CADET_KX_Flags flags;
1321
1322   if (NULL == ct)
1323     ct = get_ready_connection (t);
1324   if (NULL == ct)
1325   {
1326     LOG (GNUNET_ERROR_TYPE_DEBUG,
1327          "Wanted to send %s in state %s, but no connection is ready, deferring\n",
1328          GCT_2s (t),
1329          estate2s (t->estate));
1330     t->next_kx_attempt = GNUNET_TIME_absolute_get ();
1331     return;
1332   }
1333   cc = ct->cc;
1334   LOG (GNUNET_ERROR_TYPE_DEBUG,
1335        "Sending KX on %s via %s using %s in state %s\n",
1336        GCT_2s (t),
1337        GCC_2s (cc),
1338        estate2s (t->estate));
1339   env = GNUNET_MQ_msg (msg,
1340                        GNUNET_MESSAGE_TYPE_CADET_TUNNEL_KX);
1341   flags = GNUNET_CADET_KX_FLAG_FORCE_REPLY; /* always for KX */
1342   msg->flags = htonl (flags);
1343   msg->cid = *GCC_get_id (cc);
1344   GNUNET_CRYPTO_ecdhe_key_get_public (ax->kx_0,
1345                                       &msg->ephemeral_key);
1346   GNUNET_CRYPTO_ecdhe_key_get_public (ax->DHRs,
1347                                       &msg->ratchet_key);
1348   mark_connection_unready (ct);
1349   t->kx_retry_delay = GNUNET_TIME_STD_BACKOFF (t->kx_retry_delay);
1350   t->next_kx_attempt = GNUNET_TIME_relative_to_absolute (t->kx_retry_delay);
1351   if (CADET_TUNNEL_KEY_UNINITIALIZED == t->estate)
1352     GCT_change_estate (t,
1353                        CADET_TUNNEL_KEY_AX_SENT);
1354   else if (CADET_TUNNEL_KEY_AX_RECV == t->estate)
1355     GCT_change_estate (t,
1356                        CADET_TUNNEL_KEY_AX_SENT_AND_RECV);
1357   GCC_transmit (cc,
1358                 env);
1359 }
1360
1361
1362 /**
1363  * Send a KX_AUTH message.
1364  *
1365  * @param t tunnel on which to send the KX_AUTH
1366  * @param ct Tunnel and connection on which to send the KX_AUTH, NULL if
1367  *           we are to find one that is ready.
1368  * @param ax axolotl key context to use
1369  * @param force_reply Force the other peer to reply with a KX_AUTH message
1370  *         (set if we would like to transmit right now, but cannot)
1371  */
1372 static void
1373 send_kx_auth (struct CadetTunnel *t,
1374               struct CadetTConnection *ct,
1375               struct CadetTunnelAxolotl *ax,
1376               int force_reply)
1377 {
1378   struct CadetConnection *cc;
1379   struct GNUNET_MQ_Envelope *env;
1380   struct GNUNET_CADET_TunnelKeyExchangeAuthMessage *msg;
1381   enum GNUNET_CADET_KX_Flags flags;
1382
1383   if ( (NULL == ct) ||
1384        (GNUNET_NO == ct->is_ready) )
1385     ct = get_ready_connection (t);
1386   if (NULL == ct)
1387   {
1388     LOG (GNUNET_ERROR_TYPE_DEBUG,
1389          "Wanted to send KX_AUTH on %s, but no connection is ready, deferring\n",
1390          GCT_2s (t));
1391     t->next_kx_attempt = GNUNET_TIME_absolute_get ();
1392     t->kx_auth_requested = GNUNET_YES; /* queue KX_AUTH independent of estate */
1393     return;
1394   }
1395   t->kx_auth_requested = GNUNET_NO; /* clear flag */
1396   cc = ct->cc;
1397   LOG (GNUNET_ERROR_TYPE_DEBUG,
1398        "Sending KX_AUTH on %s using %s\n",
1399        GCT_2s (t),
1400        GCC_2s (ct->cc));
1401
1402   env = GNUNET_MQ_msg (msg,
1403                        GNUNET_MESSAGE_TYPE_CADET_TUNNEL_KX_AUTH);
1404   flags = GNUNET_CADET_KX_FLAG_NONE;
1405   if (GNUNET_YES == force_reply)
1406     flags |= GNUNET_CADET_KX_FLAG_FORCE_REPLY;
1407   msg->kx.flags = htonl (flags);
1408   msg->kx.cid = *GCC_get_id (cc);
1409   GNUNET_CRYPTO_ecdhe_key_get_public (ax->kx_0,
1410                                       &msg->kx.ephemeral_key);
1411   GNUNET_CRYPTO_ecdhe_key_get_public (ax->DHRs,
1412                                       &msg->kx.ratchet_key);
1413   /* Compute authenticator (this is the main difference to #send_kx()) */
1414   GNUNET_CRYPTO_hash (&ax->RK,
1415                       sizeof (ax->RK),
1416                       &msg->auth);
1417
1418   /* Compute when to be triggered again; actual job will
1419      be scheduled via #connection_ready_cb() */
1420   t->kx_retry_delay
1421     = GNUNET_TIME_STD_BACKOFF (t->kx_retry_delay);
1422   t->next_kx_attempt
1423     = GNUNET_TIME_relative_to_absolute (t->kx_retry_delay);
1424
1425   /* Send via cc, mark it as unready */
1426   mark_connection_unready (ct);
1427
1428   /* Update state machine, unless we are already OK */
1429   if (CADET_TUNNEL_KEY_OK != t->estate)
1430     GCT_change_estate (t,
1431                        CADET_TUNNEL_KEY_AX_AUTH_SENT);
1432
1433   GCC_transmit (cc,
1434                 env);
1435 }
1436
1437
1438 /**
1439  * Cleanup state used by @a ax.
1440  *
1441  * @param ax state to free, but not memory of @a ax itself
1442  */
1443 static void
1444 cleanup_ax (struct CadetTunnelAxolotl *ax)
1445 {
1446   while (NULL != ax->skipped_head)
1447     delete_skipped_key (ax,
1448                         ax->skipped_head);
1449   GNUNET_assert (0 == ax->skipped);
1450   GNUNET_free_non_null (ax->kx_0);
1451   GNUNET_free_non_null (ax->DHRs);
1452 }
1453
1454
1455 /**
1456  * Update our Axolotl key state based on the KX data we received.
1457  * Computes the new chain keys, and root keys, etc, and also checks
1458  * wether this is a replay of the current chain.
1459  *
1460  * @param[in|out] axolotl chain key state to recompute
1461  * @param pid peer identity of the other peer
1462  * @param ephemeral_key ephemeral public key of the other peer
1463  * @param ratchet_key senders next ephemeral public key
1464  * @return #GNUNET_OK on success, #GNUNET_NO if the resulting
1465  *       root key is already in @a ax and thus the KX is useless;
1466  *       #GNUNET_SYSERR on hard errors (i.e. @a pid is #my_full_id)
1467  */
1468 static int
1469 update_ax_by_kx (struct CadetTunnelAxolotl *ax,
1470                  const struct GNUNET_PeerIdentity *pid,
1471                  const struct GNUNET_CRYPTO_EcdhePublicKey *ephemeral_key,
1472                  const struct GNUNET_CRYPTO_EcdhePublicKey *ratchet_key)
1473 {
1474   struct GNUNET_HashCode key_material[3];
1475   struct GNUNET_CRYPTO_SymmetricSessionKey keys[5];
1476   const char salt[] = "CADET Axolotl salt";
1477   int am_I_alice;
1478
1479   if (0 > GNUNET_CRYPTO_cmp_peer_identity (&my_full_id,
1480                                            pid))
1481     am_I_alice = GNUNET_YES;
1482   else if (0 < GNUNET_CRYPTO_cmp_peer_identity (&my_full_id,
1483                                                 pid))
1484     am_I_alice = GNUNET_NO;
1485   else
1486   {
1487     GNUNET_break_op (0);
1488     return GNUNET_SYSERR;
1489   }
1490
1491   if (0 == memcmp (&ax->DHRr,
1492                    ratchet_key,
1493                    sizeof (*ratchet_key)))
1494   {
1495     LOG (GNUNET_ERROR_TYPE_DEBUG,
1496          "Ratchet key already known. Ignoring KX.\n");
1497     return GNUNET_NO;
1498   }
1499
1500   ax->DHRr = *ratchet_key;
1501
1502   /* ECDH A B0 */
1503   if (GNUNET_YES == am_I_alice)
1504   {
1505     GNUNET_CRYPTO_eddsa_ecdh (my_private_key,      /* A */
1506                               ephemeral_key, /* B0 */
1507                               &key_material[0]);
1508   }
1509   else
1510   {
1511     GNUNET_CRYPTO_ecdh_eddsa (ax->kx_0,            /* B0 */
1512                               &pid->public_key,    /* A */
1513                               &key_material[0]);
1514   }
1515
1516   /* ECDH A0 B */
1517   if (GNUNET_YES == am_I_alice)
1518   {
1519     GNUNET_CRYPTO_ecdh_eddsa (ax->kx_0,            /* A0 */
1520                               &pid->public_key,    /* B */
1521                               &key_material[1]);
1522   }
1523   else
1524   {
1525     GNUNET_CRYPTO_eddsa_ecdh (my_private_key,      /* A */
1526                               ephemeral_key, /* B0 */
1527                               &key_material[1]);
1528
1529
1530   }
1531
1532   /* ECDH A0 B0 */
1533   /* (This is the triple-DH, we could probably safely skip this,
1534      as A0/B0 are already in the key material.) */
1535   GNUNET_CRYPTO_ecc_ecdh (ax->kx_0,             /* A0 or B0 */
1536                           ephemeral_key,  /* B0 or A0 */
1537                           &key_material[2]);
1538
1539   /* KDF */
1540   GNUNET_CRYPTO_kdf (keys, sizeof (keys),
1541                      salt, sizeof (salt),
1542                      &key_material, sizeof (key_material),
1543                      NULL);
1544
1545   if (0 == memcmp (&ax->RK,
1546                    &keys[0],
1547                    sizeof (ax->RK)))
1548   {
1549     LOG (GNUNET_ERROR_TYPE_DEBUG,
1550          "Root key of handshake already known. Ignoring KX.\n");
1551     return GNUNET_NO;
1552   }
1553
1554   ax->RK = keys[0];
1555   if (GNUNET_YES == am_I_alice)
1556   {
1557     ax->HKr = keys[1];
1558     ax->NHKs = keys[2];
1559     ax->NHKr = keys[3];
1560     ax->CKr = keys[4];
1561     ax->ratchet_flag = GNUNET_YES;
1562   }
1563   else
1564   {
1565     ax->HKs = keys[1];
1566     ax->NHKr = keys[2];
1567     ax->NHKs = keys[3];
1568     ax->CKs = keys[4];
1569     ax->ratchet_flag = GNUNET_NO;
1570     ax->ratchet_expiration
1571       = GNUNET_TIME_absolute_add (GNUNET_TIME_absolute_get(),
1572                                   ratchet_time);
1573   }
1574   return GNUNET_OK;
1575 }
1576
1577
1578 /**
1579  * Try to redo the KX or KX_AUTH handshake, if we can.
1580  *
1581  * @param cls the `struct CadetTunnel` to do KX for.
1582  */
1583 static void
1584 retry_kx (void *cls)
1585 {
1586   struct CadetTunnel *t = cls;
1587   struct CadetTunnelAxolotl *ax;
1588
1589   t->kx_task = NULL;
1590   LOG (GNUNET_ERROR_TYPE_DEBUG,
1591        "Trying to make KX progress on %s in state %s\n",
1592        GCT_2s (t),
1593        estate2s (t->estate));
1594   switch (t->estate)
1595   {
1596   case CADET_TUNNEL_KEY_UNINITIALIZED: /* first attempt */
1597   case CADET_TUNNEL_KEY_AX_SENT:       /* trying again */
1598     send_kx (t,
1599              NULL,
1600              &t->ax);
1601     break;
1602   case CADET_TUNNEL_KEY_AX_RECV:
1603   case CADET_TUNNEL_KEY_AX_SENT_AND_RECV:
1604     /* We are responding, so only require reply
1605        if WE have a channel waiting. */
1606     if (NULL != t->unverified_ax)
1607     {
1608       /* Send AX_AUTH so we might get this one verified */
1609       ax = t->unverified_ax;
1610     }
1611     else
1612     {
1613       /* How can this be? */
1614       GNUNET_break (0);
1615       ax = &t->ax;
1616     }
1617     send_kx_auth (t,
1618                   NULL,
1619                   ax,
1620                   (0 == GCT_count_channels (t))
1621                   ? GNUNET_NO
1622                   : GNUNET_YES);
1623     break;
1624   case CADET_TUNNEL_KEY_AX_AUTH_SENT:
1625     /* We are responding, so only require reply
1626        if WE have a channel waiting. */
1627     if (NULL != t->unverified_ax)
1628     {
1629       /* Send AX_AUTH so we might get this one verified */
1630       ax = t->unverified_ax;
1631     }
1632     else
1633     {
1634       /* How can this be? */
1635       GNUNET_break (0);
1636       ax = &t->ax;
1637     }
1638     send_kx_auth (t,
1639                   NULL,
1640                   ax,
1641                   (0 == GCT_count_channels (t))
1642                   ? GNUNET_NO
1643                   : GNUNET_YES);
1644     break;
1645   case CADET_TUNNEL_KEY_OK:
1646     /* Must have been the *other* peer asking us to
1647        respond with a KX_AUTH. */
1648     if (NULL != t->unverified_ax)
1649     {
1650       /* Sending AX_AUTH in response to AX so we might get this one verified */
1651       ax = t->unverified_ax;
1652     }
1653     else
1654     {
1655       /* Sending AX_AUTH in response to AX_AUTH */
1656       ax = &t->ax;
1657     }
1658     send_kx_auth (t,
1659                   NULL,
1660                   ax,
1661                   GNUNET_NO);
1662     break;
1663   }
1664 }
1665
1666
1667 /**
1668  * Handle KX message that lacks authentication (and which will thus
1669  * only be considered authenticated after we respond with our own
1670  * KX_AUTH and finally successfully decrypt payload).
1671  *
1672  * @param ct connection/tunnel combo that received encrypted message
1673  * @param msg the key exchange message
1674  */
1675 void
1676 GCT_handle_kx (struct CadetTConnection *ct,
1677                const struct GNUNET_CADET_TunnelKeyExchangeMessage *msg)
1678 {
1679   struct CadetTunnel *t = ct->t;
1680   struct CadetTunnelAxolotl *ax;
1681   int ret;
1682
1683   if (0 ==
1684       memcmp (&t->ax.DHRr,
1685               &msg->ratchet_key,
1686               sizeof (msg->ratchet_key)))
1687   {
1688     LOG (GNUNET_ERROR_TYPE_DEBUG,
1689          "Got duplicate KX. Firing back KX_AUTH.\n");
1690     send_kx_auth (t,
1691                   ct,
1692                   &t->ax,
1693                   GNUNET_NO);
1694     return;
1695   }
1696
1697   /* We only keep ONE unverified KX around, so if there is an existing one,
1698      clean it up. */
1699   if (NULL != t->unverified_ax)
1700   {
1701     if (0 ==
1702         memcmp (&t->unverified_ax->DHRr,
1703                 &msg->ratchet_key,
1704                 sizeof (msg->ratchet_key)))
1705     {
1706       LOG (GNUNET_ERROR_TYPE_DEBUG,
1707            "Got duplicate unverified KX on %s. Fire back KX_AUTH again.\n",
1708            GCT_2s (t));
1709       send_kx_auth (t,
1710                     ct,
1711                     t->unverified_ax,
1712                     GNUNET_NO);
1713       return;
1714     }
1715     LOG (GNUNET_ERROR_TYPE_DEBUG,
1716          "Dropping old unverified KX state. Got a fresh KX for %s.\n",
1717          GCT_2s (t));
1718     memset (t->unverified_ax,
1719             0,
1720             sizeof (struct CadetTunnelAxolotl));
1721     t->unverified_ax->DHRs = t->ax.DHRs;
1722     t->unverified_ax->kx_0 = t->ax.kx_0;
1723   }
1724   else
1725   {
1726     LOG (GNUNET_ERROR_TYPE_DEBUG,
1727          "Creating fresh unverified KX for %s.\n",
1728          GCT_2s (t));
1729     t->unverified_ax = GNUNET_new (struct CadetTunnelAxolotl);
1730     t->unverified_ax->DHRs = t->ax.DHRs;
1731     t->unverified_ax->kx_0 = t->ax.kx_0;
1732   }
1733   /* Set as the 'current' RK/DHRr the one we are currently using,
1734      so that the duplicate-detection logic of
1735      #update_ax_by_kx can work. */
1736   t->unverified_ax->RK = t->ax.RK;
1737   t->unverified_ax->DHRr = t->ax.DHRr;
1738   t->unverified_attempts = 0;
1739   ax = t->unverified_ax;
1740
1741   /* Update 'ax' by the new key material */
1742   ret = update_ax_by_kx (ax,
1743                          GCP_get_id (t->destination),
1744                          &msg->ephemeral_key,
1745                          &msg->ratchet_key);
1746   GNUNET_break (GNUNET_SYSERR != ret);
1747   if (GNUNET_OK != ret)
1748     return; /* duplicate KX, nothing to do */
1749
1750   /* move ahead in our state machine */
1751   if (CADET_TUNNEL_KEY_UNINITIALIZED == t->estate)
1752     GCT_change_estate (t,
1753                        CADET_TUNNEL_KEY_AX_RECV);
1754   else if (CADET_TUNNEL_KEY_AX_SENT == t->estate)
1755     GCT_change_estate (t,
1756                        CADET_TUNNEL_KEY_AX_SENT_AND_RECV);
1757
1758   /* KX is still not done, try again our end. */
1759   if (CADET_TUNNEL_KEY_OK != t->estate)
1760   {
1761     if (NULL != t->kx_task)
1762       GNUNET_SCHEDULER_cancel (t->kx_task);
1763     t->kx_task
1764       = GNUNET_SCHEDULER_add_now (&retry_kx,
1765                                   t);
1766   }
1767 }
1768
1769
1770 /**
1771  * Handle KX_AUTH message.
1772  *
1773  * @param ct connection/tunnel combo that received encrypted message
1774  * @param msg the key exchange message
1775  */
1776 void
1777 GCT_handle_kx_auth (struct CadetTConnection *ct,
1778                     const struct GNUNET_CADET_TunnelKeyExchangeAuthMessage *msg)
1779 {
1780   struct CadetTunnel *t = ct->t;
1781   struct CadetTunnelAxolotl ax_tmp;
1782   struct GNUNET_HashCode kx_auth;
1783   int ret;
1784
1785   if ( (CADET_TUNNEL_KEY_UNINITIALIZED == t->estate) ||
1786        (CADET_TUNNEL_KEY_AX_RECV == t->estate) )
1787   {
1788     /* Confusing, we got a KX_AUTH before we even send our own
1789        KX. This should not happen. We'll send our own KX ASAP anyway,
1790        so let's ignore this here. */
1791     GNUNET_break_op (0);
1792     return;
1793   }
1794   LOG (GNUNET_ERROR_TYPE_DEBUG,
1795        "Handling KX_AUTH message for %s\n",
1796        GCT_2s (t));
1797
1798   /* We do everything in ax_tmp until we've checked the authentication
1799      so we don't clobber anything we care about by accident. */
1800   ax_tmp = t->ax;
1801
1802   /* Update 'ax' by the new key material */
1803   ret = update_ax_by_kx (&ax_tmp,
1804                          GCP_get_id (t->destination),
1805                          &msg->kx.ephemeral_key,
1806                          &msg->kx.ratchet_key);
1807   GNUNET_break (GNUNET_OK == ret);
1808   GNUNET_CRYPTO_hash (&ax_tmp.RK,
1809                       sizeof (ax_tmp.RK),
1810                       &kx_auth);
1811   if (0 != memcmp (&kx_auth,
1812                    &msg->auth,
1813                    sizeof (kx_auth)))
1814   {
1815     /* This KX_AUTH is not using the latest KX/KX_AUTH data
1816        we transmitted to the sender, refuse it, try KX again. */
1817     GNUNET_break_op (0);
1818     send_kx (t,
1819              NULL,
1820              &t->ax);
1821     return;
1822   }
1823   /* Yep, we're good. */
1824   t->ax = ax_tmp;
1825   if (NULL != t->unverified_ax)
1826   {
1827     /* We got some "stale" KX before, drop that. */
1828     t->unverified_ax->DHRs = NULL; /* aliased with ax.DHRs */
1829     t->unverified_ax->kx_0 = NULL; /* aliased with ax.DHRs */
1830     cleanup_ax (t->unverified_ax);
1831     GNUNET_free (t->unverified_ax);
1832     t->unverified_ax = NULL;
1833   }
1834
1835   /* move ahead in our state machine */
1836   switch (t->estate)
1837   {
1838   case CADET_TUNNEL_KEY_UNINITIALIZED:
1839   case CADET_TUNNEL_KEY_AX_RECV:
1840     /* Checked above, this is impossible. */
1841     GNUNET_assert (0);
1842     break;
1843   case CADET_TUNNEL_KEY_AX_SENT:      /* This is the normal case */
1844   case CADET_TUNNEL_KEY_AX_SENT_AND_RECV: /* both peers started KX */
1845   case CADET_TUNNEL_KEY_AX_AUTH_SENT: /* both peers now did KX_AUTH */
1846     GCT_change_estate (t,
1847                        CADET_TUNNEL_KEY_OK);
1848     break;
1849   case CADET_TUNNEL_KEY_OK:
1850     /* Did not expect another KX_AUTH, but so what, still acceptable.
1851        Nothing to do here. */
1852     break;
1853   }
1854 }
1855
1856
1857
1858 /* ************************************** end core crypto ***************************** */
1859
1860
1861 /**
1862  * Compute the next free channel tunnel number for this tunnel.
1863  *
1864  * @param t the tunnel
1865  * @return unused number that can uniquely identify a channel in the tunnel
1866  */
1867 static struct GNUNET_CADET_ChannelTunnelNumber
1868 get_next_free_ctn (struct CadetTunnel *t)
1869 {
1870 #define HIGH_BIT 0x8000000
1871   struct GNUNET_CADET_ChannelTunnelNumber ret;
1872   uint32_t ctn;
1873   int cmp;
1874   uint32_t highbit;
1875
1876   cmp = GNUNET_CRYPTO_cmp_peer_identity (&my_full_id,
1877                                          GCP_get_id (GCT_get_destination (t)));
1878   if (0 < cmp)
1879     highbit = HIGH_BIT;
1880   else if (0 > cmp)
1881     highbit = 0;
1882   else
1883     GNUNET_assert (0); // loopback must never go here!
1884   ctn = ntohl (t->next_ctn.cn);
1885   while (NULL !=
1886          GNUNET_CONTAINER_multihashmap32_get (t->channels,
1887                                               ctn))
1888   {
1889     ctn = ((ctn + 1) & (~ HIGH_BIT)) | highbit;
1890   }
1891   t->next_ctn.cn = htonl (((ctn + 1) & (~ HIGH_BIT)) | highbit);
1892   ret.cn = ntohl (ctn);
1893   return ret;
1894 }
1895
1896
1897 /**
1898  * Add a channel to a tunnel, and notify channel that we are ready
1899  * for transmission if we are already up.  Otherwise that notification
1900  * will be done later in #notify_tunnel_up_cb().
1901  *
1902  * @param t Tunnel.
1903  * @param ch Channel
1904  * @return unique number identifying @a ch within @a t
1905  */
1906 struct GNUNET_CADET_ChannelTunnelNumber
1907 GCT_add_channel (struct CadetTunnel *t,
1908                  struct CadetChannel *ch)
1909 {
1910   struct GNUNET_CADET_ChannelTunnelNumber ctn;
1911
1912   ctn = get_next_free_ctn (t);
1913   if (NULL != t->destroy_task)
1914   {
1915     GNUNET_SCHEDULER_cancel (t->destroy_task);
1916     t->destroy_task = NULL;
1917   }
1918   GNUNET_assert (GNUNET_YES ==
1919                  GNUNET_CONTAINER_multihashmap32_put (t->channels,
1920                                                       ntohl (ctn.cn),
1921                                                       ch,
1922                                                       GNUNET_CONTAINER_MULTIHASHMAPOPTION_UNIQUE_ONLY));
1923   LOG (GNUNET_ERROR_TYPE_DEBUG,
1924        "Adding %s to %s\n",
1925        GCCH_2s (ch),
1926        GCT_2s (t));
1927   switch (t->estate)
1928   {
1929   case CADET_TUNNEL_KEY_UNINITIALIZED:
1930     /* waiting for connection to start KX */
1931     break;
1932   case CADET_TUNNEL_KEY_AX_RECV:
1933   case CADET_TUNNEL_KEY_AX_SENT:
1934   case CADET_TUNNEL_KEY_AX_SENT_AND_RECV:
1935     /* we're currently waiting for KX to complete */
1936     break;
1937   case CADET_TUNNEL_KEY_AX_AUTH_SENT:
1938     /* waiting for OTHER peer to send us data,
1939        we might need to prompt more aggressively! */
1940     if (NULL == t->kx_task)
1941       t->kx_task
1942         = GNUNET_SCHEDULER_add_at (t->next_kx_attempt,
1943                                    &retry_kx,
1944                                    t);
1945     break;
1946   case CADET_TUNNEL_KEY_OK:
1947     /* We are ready. Tell the new channel that we are up. */
1948     GCCH_tunnel_up (ch);
1949     break;
1950   }
1951   return ctn;
1952 }
1953
1954
1955 /**
1956  * We lost a connection, remove it from our list and clean up
1957  * the connection object itself.
1958  *
1959  * @param ct binding of connection to tunnel of the connection that was lost.
1960  */
1961 void
1962 GCT_connection_lost (struct CadetTConnection *ct)
1963 {
1964   struct CadetTunnel *t = ct->t;
1965
1966   if (GNUNET_YES == ct->is_ready)
1967     GNUNET_CONTAINER_DLL_remove (t->connection_ready_head,
1968                                  t->connection_ready_tail,
1969                                  ct);
1970   else
1971     GNUNET_CONTAINER_DLL_remove (t->connection_busy_head,
1972                                  t->connection_busy_tail,
1973                                  ct);
1974   GNUNET_free (ct);
1975 }
1976
1977
1978 /**
1979  * Clean up connection @a ct of a tunnel.
1980  *
1981  * @param cls the `struct CadetTunnel`
1982  * @param ct connection to clean up
1983  */
1984 static void
1985 destroy_t_connection (void *cls,
1986                       struct CadetTConnection *ct)
1987 {
1988   struct CadetTunnel *t = cls;
1989   struct CadetConnection *cc = ct->cc;
1990
1991   GNUNET_assert (ct->t == t);
1992   GCT_connection_lost (ct);
1993   GCC_destroy_without_tunnel (cc);
1994 }
1995
1996
1997 /**
1998  * This tunnel is no longer used, destroy it.
1999  *
2000  * @param cls the idle tunnel
2001  */
2002 static void
2003 destroy_tunnel (void *cls)
2004 {
2005   struct CadetTunnel *t = cls;
2006   struct CadetTunnelQueueEntry *tq;
2007
2008   t->destroy_task = NULL;
2009   LOG (GNUNET_ERROR_TYPE_DEBUG,
2010        "Destroying idle %s\n",
2011        GCT_2s (t));
2012   GNUNET_assert (0 == GCT_count_channels (t));
2013   GCT_iterate_connections (t,
2014                            &destroy_t_connection,
2015                            t);
2016   GNUNET_assert (NULL == t->connection_ready_head);
2017   GNUNET_assert (NULL == t->connection_busy_head);
2018   while (NULL != (tq = t->tq_head))
2019   {
2020     if (NULL != tq->cont)
2021       tq->cont (tq->cont_cls,
2022                 NULL);
2023     GCT_send_cancel (tq);
2024   }
2025   GCP_drop_tunnel (t->destination,
2026                    t);
2027   GNUNET_CONTAINER_multihashmap32_destroy (t->channels);
2028   if (NULL != t->maintain_connections_task)
2029   {
2030     GNUNET_SCHEDULER_cancel (t->maintain_connections_task);
2031     t->maintain_connections_task = NULL;
2032   }
2033   if (NULL != t->send_task)
2034   {
2035     GNUNET_SCHEDULER_cancel (t->send_task);
2036     t->send_task = NULL;
2037   }
2038   if (NULL != t->kx_task)
2039   {
2040     GNUNET_SCHEDULER_cancel (t->kx_task);
2041     t->kx_task = NULL;
2042   }
2043   GNUNET_MST_destroy (t->mst);
2044   GNUNET_MQ_destroy (t->mq);
2045   if (NULL != t->unverified_ax)
2046   {
2047     t->unverified_ax->DHRs = NULL; /* aliased with ax.DHRs */
2048     t->unverified_ax->kx_0 = NULL; /* aliased with ax.DHRs */
2049     cleanup_ax (t->unverified_ax);
2050     GNUNET_free (t->unverified_ax);
2051   }
2052   cleanup_ax (&t->ax);
2053   GNUNET_assert (NULL == t->destroy_task);
2054   GNUNET_free (t);
2055 }
2056
2057
2058 /**
2059  * Remove a channel from a tunnel.
2060  *
2061  * @param t Tunnel.
2062  * @param ch Channel
2063  * @param ctn unique number identifying @a ch within @a t
2064  */
2065 void
2066 GCT_remove_channel (struct CadetTunnel *t,
2067                     struct CadetChannel *ch,
2068                     struct GNUNET_CADET_ChannelTunnelNumber ctn)
2069 {
2070   LOG (GNUNET_ERROR_TYPE_DEBUG,
2071        "Removing %s from %s\n",
2072        GCCH_2s (ch),
2073        GCT_2s (t));
2074   GNUNET_assert (GNUNET_YES ==
2075                  GNUNET_CONTAINER_multihashmap32_remove (t->channels,
2076                                                          ntohl (ctn.cn),
2077                                                          ch));
2078   if ( (0 ==
2079         GCT_count_channels (t)) &&
2080        (NULL == t->destroy_task) )
2081   {
2082     t->destroy_task
2083       = GNUNET_SCHEDULER_add_delayed (IDLE_DESTROY_DELAY,
2084                                       &destroy_tunnel,
2085                                       t);
2086   }
2087 }
2088
2089
2090 /**
2091  * Destroy remaining channels during shutdown.
2092  *
2093  * @param cls the `struct CadetTunnel` of the channel
2094  * @param key key of the channel
2095  * @param value the `struct CadetChannel`
2096  * @return #GNUNET_OK (continue to iterate)
2097  */
2098 static int
2099 destroy_remaining_channels (void *cls,
2100                             uint32_t key,
2101                             void *value)
2102 {
2103   struct CadetChannel *ch = value;
2104
2105   GCCH_handle_remote_destroy (ch,
2106                               NULL);
2107   return GNUNET_OK;
2108 }
2109
2110
2111 /**
2112  * Destroys the tunnel @a t now, without delay. Used during shutdown.
2113  *
2114  * @param t tunnel to destroy
2115  */
2116 void
2117 GCT_destroy_tunnel_now (struct CadetTunnel *t)
2118 {
2119   GNUNET_assert (GNUNET_YES == shutting_down);
2120   GNUNET_CONTAINER_multihashmap32_iterate (t->channels,
2121                                            &destroy_remaining_channels,
2122                                            t);
2123   GNUNET_assert (0 ==
2124                  GCT_count_channels (t));
2125   if (NULL != t->destroy_task)
2126   {
2127     GNUNET_SCHEDULER_cancel (t->destroy_task);
2128     t->destroy_task = NULL;
2129   }
2130   destroy_tunnel (t);
2131 }
2132
2133
2134 /**
2135  * Send normal payload from queue in @a t via connection @a ct.
2136  * Does nothing if our payload queue is empty.
2137  *
2138  * @param t tunnel to send data from
2139  * @param ct connection to use for transmission (is ready)
2140  */
2141 static void
2142 try_send_normal_payload (struct CadetTunnel *t,
2143                          struct CadetTConnection *ct)
2144 {
2145   struct CadetTunnelQueueEntry *tq;
2146
2147   GNUNET_assert (GNUNET_YES == ct->is_ready);
2148   tq = t->tq_head;
2149   if (NULL == tq)
2150   {
2151     /* no messages pending right now */
2152     LOG (GNUNET_ERROR_TYPE_DEBUG,
2153          "Not sending payload of %s on ready %s (nothing pending)\n",
2154          GCT_2s (t),
2155          GCC_2s (ct->cc));
2156     return;
2157   }
2158   /* ready to send message 'tq' on tunnel 'ct' */
2159   GNUNET_assert (t == tq->t);
2160   GNUNET_CONTAINER_DLL_remove (t->tq_head,
2161                                t->tq_tail,
2162                                tq);
2163   if (NULL != tq->cid)
2164     *tq->cid = *GCC_get_id (ct->cc);
2165   mark_connection_unready (ct);
2166   LOG (GNUNET_ERROR_TYPE_DEBUG,
2167        "Sending payload of %s on %s\n",
2168        GCT_2s (t),
2169        GCC_2s (ct->cc));
2170   GCC_transmit (ct->cc,
2171                 tq->env);
2172   if (NULL != tq->cont)
2173     tq->cont (tq->cont_cls,
2174               GCC_get_id (ct->cc));
2175   GNUNET_free (tq);
2176 }
2177
2178
2179 /**
2180  * A connection is @a is_ready for transmission.  Looks at our message
2181  * queue and if there is a message, sends it out via the connection.
2182  *
2183  * @param cls the `struct CadetTConnection` that is @a is_ready
2184  * @param is_ready #GNUNET_YES if connection are now ready,
2185  *                 #GNUNET_NO if connection are no longer ready
2186  */
2187 static void
2188 connection_ready_cb (void *cls,
2189                      int is_ready)
2190 {
2191   struct CadetTConnection *ct = cls;
2192   struct CadetTunnel *t = ct->t;
2193
2194   if (GNUNET_NO == is_ready)
2195   {
2196     LOG (GNUNET_ERROR_TYPE_DEBUG,
2197          "%s no longer ready for %s\n",
2198          GCC_2s (ct->cc),
2199          GCT_2s (t));
2200     mark_connection_unready (ct);
2201     return;
2202   }
2203   GNUNET_assert (GNUNET_NO == ct->is_ready);
2204   GNUNET_CONTAINER_DLL_remove (t->connection_busy_head,
2205                                t->connection_busy_tail,
2206                                ct);
2207   GNUNET_assert (0 < t->num_busy_connections);
2208   t->num_busy_connections--;
2209   ct->is_ready = GNUNET_YES;
2210   GNUNET_CONTAINER_DLL_insert_tail (t->connection_ready_head,
2211                                     t->connection_ready_tail,
2212                                     ct);
2213   t->num_ready_connections++;
2214
2215   LOG (GNUNET_ERROR_TYPE_DEBUG,
2216        "%s now ready for %s in state %s\n",
2217        GCC_2s (ct->cc),
2218        GCT_2s (t),
2219        estate2s (t->estate));
2220   switch (t->estate)
2221   {
2222   case CADET_TUNNEL_KEY_UNINITIALIZED:
2223     /* Do not begin KX if WE have no channels waiting! */
2224     if (0 == GCT_count_channels (t))
2225       return;
2226     /* We are uninitialized, just transmit immediately,
2227        without undue delay. */
2228     if (NULL != t->kx_task)
2229     {
2230       GNUNET_SCHEDULER_cancel (t->kx_task);
2231       t->kx_task = NULL;
2232     }
2233     send_kx (t,
2234              ct,
2235              &t->ax);
2236     break;
2237   case CADET_TUNNEL_KEY_AX_RECV:
2238   case CADET_TUNNEL_KEY_AX_SENT:
2239   case CADET_TUNNEL_KEY_AX_SENT_AND_RECV:
2240   case CADET_TUNNEL_KEY_AX_AUTH_SENT:
2241     /* we're currently waiting for KX to complete, schedule job */
2242     if (NULL == t->kx_task)
2243       t->kx_task
2244         = GNUNET_SCHEDULER_add_at (t->next_kx_attempt,
2245                                    &retry_kx,
2246                                    t);
2247     break;
2248   case CADET_TUNNEL_KEY_OK:
2249     if (GNUNET_YES == t->kx_auth_requested)
2250     {
2251       if (NULL != t->kx_task)
2252       {
2253         GNUNET_SCHEDULER_cancel (t->kx_task);
2254         t->kx_task = NULL;
2255       }
2256       send_kx_auth (t,
2257                     ct,
2258                     &t->ax,
2259                     GNUNET_NO);
2260       return;
2261     }
2262     try_send_normal_payload (t,
2263                              ct);
2264     break;
2265   }
2266 }
2267
2268
2269 /**
2270  * Called when either we have a new connection, or a new message in the
2271  * queue, or some existing connection has transmission capacity.  Looks
2272  * at our message queue and if there is a message, picks a connection
2273  * to send it on.
2274  *
2275  * @param cls the `struct CadetTunnel` to process messages on
2276  */
2277 static void
2278 trigger_transmissions (void *cls)
2279 {
2280   struct CadetTunnel *t = cls;
2281   struct CadetTConnection *ct;
2282
2283   t->send_task = NULL;
2284   if (NULL == t->tq_head)
2285     return; /* no messages pending right now */
2286   ct = get_ready_connection (t);
2287   if (NULL == ct)
2288     return; /* no connections ready */
2289   try_send_normal_payload (t,
2290                            ct);
2291 }
2292
2293
2294 /**
2295  * Closure for #evaluate_connection. Used to assemble summary information
2296  * about the existing connections so we can evaluate a new path.
2297  */
2298 struct EvaluationSummary
2299 {
2300
2301   /**
2302    * Minimum length of any of our connections, `UINT_MAX` if we have none.
2303    */
2304   unsigned int min_length;
2305
2306   /**
2307    * Maximum length of any of our connections, 0 if we have none.
2308    */
2309   unsigned int max_length;
2310
2311   /**
2312    * Minimum desirability of any of our connections, UINT64_MAX if we have none.
2313    */
2314   GNUNET_CONTAINER_HeapCostType min_desire;
2315
2316   /**
2317    * Maximum desirability of any of our connections, 0 if we have none.
2318    */
2319   GNUNET_CONTAINER_HeapCostType max_desire;
2320
2321   /**
2322    * Path we are comparing against for #evaluate_connection, can be NULL.
2323    */
2324   struct CadetPeerPath *path;
2325
2326   /**
2327    * Connection deemed the "worst" so far encountered by #evaluate_connection,
2328    * NULL if we did not yet encounter any connections.
2329    */
2330   struct CadetTConnection *worst;
2331
2332   /**
2333    * Numeric score of @e worst, only set if @e worst is non-NULL.
2334    */
2335   double worst_score;
2336
2337   /**
2338    * Set to #GNUNET_YES if we have a connection over @e path already.
2339    */
2340   int duplicate;
2341
2342 };
2343
2344
2345 /**
2346  * Evaluate a connection, updating our summary information in @a cls about
2347  * what kinds of connections we have.
2348  *
2349  * @param cls the `struct EvaluationSummary *` to update
2350  * @param ct a connection to include in the summary
2351  */
2352 static void
2353 evaluate_connection (void *cls,
2354                      struct CadetTConnection *ct)
2355 {
2356   struct EvaluationSummary *es = cls;
2357   struct CadetConnection *cc = ct->cc;
2358   struct CadetPeerPath *ps = GCC_get_path (cc);
2359   const struct CadetConnectionMetrics *metrics;
2360   GNUNET_CONTAINER_HeapCostType ct_desirability;
2361   struct GNUNET_TIME_Relative uptime;
2362   struct GNUNET_TIME_Relative last_use;
2363   uint32_t ct_length;
2364   double score;
2365   double success_rate;
2366
2367   if (ps == es->path)
2368   {
2369     LOG (GNUNET_ERROR_TYPE_DEBUG,
2370          "Ignoring duplicate path %s.\n",
2371          GCPP_2s (es->path));
2372     es->duplicate = GNUNET_YES;
2373     return;
2374   }
2375   ct_desirability = GCPP_get_desirability (ps);
2376   ct_length = GCPP_get_length (ps);
2377   metrics = GCC_get_metrics (cc);
2378   uptime = GNUNET_TIME_absolute_get_duration (metrics->age);
2379   last_use = GNUNET_TIME_absolute_get_duration (metrics->last_use);
2380   /* We add 1.0 here to avoid division by zero. */
2381   success_rate = (metrics->num_acked_transmissions + 1.0) / (metrics->num_successes + 1.0);
2382   score
2383     = ct_desirability
2384     + 100.0 / (1.0 + ct_length) /* longer paths = better */
2385     + sqrt (uptime.rel_value_us / 60000000LL) /* larger uptime = better */
2386     - last_use.rel_value_us / 1000L;          /* longer idle = worse */
2387   score *= success_rate;        /* weigh overall by success rate */
2388
2389   if ( (NULL == es->worst) ||
2390        (score < es->worst_score) )
2391   {
2392     es->worst = ct;
2393     es->worst_score = score;
2394   }
2395   es->min_length = GNUNET_MIN (es->min_length,
2396                                ct_length);
2397   es->max_length = GNUNET_MAX (es->max_length,
2398                                ct_length);
2399   es->min_desire = GNUNET_MIN (es->min_desire,
2400                                ct_desirability);
2401   es->max_desire = GNUNET_MAX (es->max_desire,
2402                                ct_desirability);
2403 }
2404
2405
2406 /**
2407  * Consider using the path @a p for the tunnel @a t.
2408  * The tunnel destination is at offset @a off in path @a p.
2409  *
2410  * @param cls our tunnel
2411  * @param path a path to our destination
2412  * @param off offset of the destination on path @a path
2413  * @return #GNUNET_YES (should keep iterating)
2414  */
2415 static int
2416 consider_path_cb (void *cls,
2417                   struct CadetPeerPath *path,
2418                   unsigned int off)
2419 {
2420   struct CadetTunnel *t = cls;
2421   struct EvaluationSummary es;
2422   struct CadetTConnection *ct;
2423
2424   GNUNET_assert (off < GCPP_get_length (path));
2425   es.min_length = UINT_MAX;
2426   es.max_length = 0;
2427   es.max_desire = 0;
2428   es.min_desire = UINT64_MAX;
2429   es.path = path;
2430   es.duplicate = GNUNET_NO;
2431
2432   /* Compute evaluation summary over existing connections. */
2433   GCT_iterate_connections (t,
2434                            &evaluate_connection,
2435                            &es);
2436   if (GNUNET_YES == es.duplicate)
2437     return GNUNET_YES;
2438
2439   /* FIXME: not sure we should really just count
2440      'num_connections' here, as they may all have
2441      consistently failed to connect. */
2442
2443   /* We iterate by increasing path length; if we have enough paths and
2444      this one is more than twice as long than what we are currently
2445      using, then ignore all of these super-long ones! */
2446   if ( (GCT_count_any_connections (t) > DESIRED_CONNECTIONS_PER_TUNNEL) &&
2447        (es.min_length * 2 < off) &&
2448        (es.max_length < off) )
2449   {
2450     LOG (GNUNET_ERROR_TYPE_DEBUG,
2451          "Ignoring paths of length %u, they are way too long.\n",
2452          es.min_length * 2);
2453     return GNUNET_NO;
2454   }
2455   /* If we have enough paths and this one looks no better, ignore it. */
2456   if ( (GCT_count_any_connections (t) >= DESIRED_CONNECTIONS_PER_TUNNEL) &&
2457        (es.min_length < GCPP_get_length (path)) &&
2458        (es.min_desire > GCPP_get_desirability (path)) &&
2459        (es.max_length < off) )
2460   {
2461     LOG (GNUNET_ERROR_TYPE_DEBUG,
2462          "Ignoring path (%u/%llu) to %s, got something better already.\n",
2463          GCPP_get_length (path),
2464          (unsigned long long) GCPP_get_desirability (path),
2465          GCP_2s (t->destination));
2466     return GNUNET_YES;
2467   }
2468
2469   /* Path is interesting (better by some metric, or we don't have
2470      enough paths yet). */
2471   ct = GNUNET_new (struct CadetTConnection);
2472   ct->created = GNUNET_TIME_absolute_get ();
2473   ct->t = t;
2474   ct->cc = GCC_create (t->destination,
2475                        path,
2476                        off,
2477                        GNUNET_CADET_OPTION_DEFAULT, /* FIXME: set based on what channels want/need! */
2478                        ct,
2479                        &connection_ready_cb,
2480                        ct);
2481
2482   /* FIXME: schedule job to kill connection (and path?)  if it takes
2483      too long to get ready! (And track performance data on how long
2484      other connections took with the tunnel!)
2485      => Note: to be done within 'connection'-logic! */
2486   GNUNET_CONTAINER_DLL_insert (t->connection_busy_head,
2487                                t->connection_busy_tail,
2488                                ct);
2489   t->num_busy_connections++;
2490   LOG (GNUNET_ERROR_TYPE_DEBUG,
2491        "Found interesting path %s for %s, created %s\n",
2492        GCPP_2s (path),
2493        GCT_2s (t),
2494        GCC_2s (ct->cc));
2495   return GNUNET_YES;
2496 }
2497
2498
2499 /**
2500  * Function called to maintain the connections underlying our tunnel.
2501  * Tries to maintain (incl. tear down) connections for the tunnel, and
2502  * if there is a significant change, may trigger transmissions.
2503  *
2504  * Basically, needs to check if there are connections that perform
2505  * badly, and if so eventually kill them and trigger a replacement.
2506  * The strategy is to open one more connection than
2507  * #DESIRED_CONNECTIONS_PER_TUNNEL, and then periodically kick out the
2508  * least-performing one, and then inquire for new ones.
2509  *
2510  * @param cls the `struct CadetTunnel`
2511  */
2512 static void
2513 maintain_connections_cb (void *cls)
2514 {
2515   struct CadetTunnel *t = cls;
2516   struct GNUNET_TIME_Relative delay;
2517   struct EvaluationSummary es;
2518
2519   t->maintain_connections_task = NULL;
2520   LOG (GNUNET_ERROR_TYPE_DEBUG,
2521        "Performing connection maintenance for %s.\n",
2522        GCT_2s (t));
2523
2524   es.min_length = UINT_MAX;
2525   es.max_length = 0;
2526   es.max_desire = 0;
2527   es.min_desire = UINT64_MAX;
2528   es.path = NULL;
2529   es.worst = NULL;
2530   es.duplicate = GNUNET_NO;
2531   GCT_iterate_connections (t,
2532                            &evaluate_connection,
2533                            &es);
2534   if ( (NULL != es.worst) &&
2535        (GCT_count_any_connections (t) > DESIRED_CONNECTIONS_PER_TUNNEL) )
2536   {
2537     /* Clear out worst-performing connection 'es.worst'. */
2538     destroy_t_connection (t,
2539                           es.worst);
2540   }
2541
2542   /* Consider additional paths */
2543   (void) GCP_iterate_paths (t->destination,
2544                             &consider_path_cb,
2545                             t);
2546
2547   /* FIXME: calculate when to try again based on how well we are doing;
2548      in particular, if we have to few connections, we might be able
2549      to do without this (as PATHS should tell us whenever a new path
2550      is available instantly; however, need to make sure this job is
2551      restarted after that happens).
2552      Furthermore, if the paths we do know are in a reasonably narrow
2553      quality band and are plentyful, we might also consider us stabilized
2554      and then reduce the frequency accordingly.  */
2555   delay = GNUNET_TIME_UNIT_MINUTES;
2556   t->maintain_connections_task
2557     = GNUNET_SCHEDULER_add_delayed (delay,
2558                                     &maintain_connections_cb,
2559                                     t);
2560 }
2561
2562
2563 /**
2564  * Consider using the path @a p for the tunnel @a t.
2565  * The tunnel destination is at offset @a off in path @a p.
2566  *
2567  * @param cls our tunnel
2568  * @param path a path to our destination
2569  * @param off offset of the destination on path @a path
2570  */
2571 void
2572 GCT_consider_path (struct CadetTunnel *t,
2573                    struct CadetPeerPath *p,
2574                    unsigned int off)
2575 {
2576   (void) consider_path_cb (t,
2577                            p,
2578                            off);
2579 }
2580
2581
2582 /**
2583  * We got a keepalive. Track in statistics.
2584  *
2585  * @param cls the `struct CadetTunnel` for which we decrypted the message
2586  * @param msg  the message we received on the tunnel
2587  */
2588 static void
2589 handle_plaintext_keepalive (void *cls,
2590                             const struct GNUNET_MessageHeader *msg)
2591 {
2592   struct CadetTunnel *t = cls;
2593
2594   LOG (GNUNET_ERROR_TYPE_DEBUG,
2595        "Received KEEPALIVE on %s\n",
2596        GCT_2s (t));
2597   GNUNET_STATISTICS_update (stats,
2598                             "# keepalives received",
2599                             1,
2600                             GNUNET_NO);
2601 }
2602
2603
2604 /**
2605  * Check that @a msg is well-formed.
2606  *
2607  * @param cls the `struct CadetTunnel` for which we decrypted the message
2608  * @param msg  the message we received on the tunnel
2609  * @return #GNUNET_OK (any variable-size payload goes)
2610  */
2611 static int
2612 check_plaintext_data (void *cls,
2613                       const struct GNUNET_CADET_ChannelAppDataMessage *msg)
2614 {
2615   return GNUNET_OK;
2616 }
2617
2618
2619 /**
2620  * We received payload data for a channel.  Locate the channel
2621  * and process the data, or return an error if the channel is unknown.
2622  *
2623  * @param cls the `struct CadetTunnel` for which we decrypted the message
2624  * @param msg the message we received on the tunnel
2625  */
2626 static void
2627 handle_plaintext_data (void *cls,
2628                        const struct GNUNET_CADET_ChannelAppDataMessage *msg)
2629 {
2630   struct CadetTunnel *t = cls;
2631   struct CadetChannel *ch;
2632
2633   ch = lookup_channel (t,
2634                        msg->ctn);
2635   if (NULL == ch)
2636   {
2637     /* We don't know about such a channel, might have been destroyed on our
2638        end in the meantime, or never existed. Send back a DESTROY. */
2639     LOG (GNUNET_ERROR_TYPE_DEBUG,
2640          "Receicved %u bytes of application data for unknown channel %u, sending DESTROY\n",
2641          (unsigned int) (ntohs (msg->header.size) - sizeof (*msg)),
2642          ntohl (msg->ctn.cn));
2643     GCT_send_channel_destroy (t,
2644                               msg->ctn);
2645     return;
2646   }
2647   GCCH_handle_channel_plaintext_data (ch,
2648                                       GCC_get_id (t->current_ct->cc),
2649                                       msg);
2650 }
2651
2652
2653 /**
2654  * We received an acknowledgement for data we sent on a channel.
2655  * Locate the channel and process it, or return an error if the
2656  * channel is unknown.
2657  *
2658  * @param cls the `struct CadetTunnel` for which we decrypted the message
2659  * @param ack the message we received on the tunnel
2660  */
2661 static void
2662 handle_plaintext_data_ack (void *cls,
2663                            const struct GNUNET_CADET_ChannelDataAckMessage *ack)
2664 {
2665   struct CadetTunnel *t = cls;
2666   struct CadetChannel *ch;
2667
2668   ch = lookup_channel (t,
2669                        ack->ctn);
2670   if (NULL == ch)
2671   {
2672     /* We don't know about such a channel, might have been destroyed on our
2673        end in the meantime, or never existed. Send back a DESTROY. */
2674     LOG (GNUNET_ERROR_TYPE_DEBUG,
2675          "Receicved DATA_ACK for unknown channel %u, sending DESTROY\n",
2676          ntohl (ack->ctn.cn));
2677     GCT_send_channel_destroy (t,
2678                               ack->ctn);
2679     return;
2680   }
2681   GCCH_handle_channel_plaintext_data_ack (ch,
2682                                           GCC_get_id (t->current_ct->cc),
2683                                           ack);
2684 }
2685
2686
2687 /**
2688  * We have received a request to open a channel to a port from
2689  * another peer.  Creates the incoming channel.
2690  *
2691  * @param cls the `struct CadetTunnel` for which we decrypted the message
2692  * @param copen the message we received on the tunnel
2693  */
2694 static void
2695 handle_plaintext_channel_open (void *cls,
2696                                const struct GNUNET_CADET_ChannelOpenMessage *copen)
2697 {
2698   struct CadetTunnel *t = cls;
2699   struct CadetChannel *ch;
2700
2701   ch = GNUNET_CONTAINER_multihashmap32_get (t->channels,
2702                                             ntohl (copen->ctn.cn));
2703   if (NULL != ch)
2704   {
2705     LOG (GNUNET_ERROR_TYPE_DEBUG,
2706          "Receicved duplicate channel OPEN on port %s from %s (%s), resending ACK\n",
2707          GNUNET_h2s (&copen->port),
2708          GCT_2s (t),
2709          GCCH_2s (ch));
2710     GCCH_handle_duplicate_open (ch,
2711                                 GCC_get_id (t->current_ct->cc));
2712     return;
2713   }
2714   LOG (GNUNET_ERROR_TYPE_DEBUG,
2715        "Receicved channel OPEN on port %s from %s\n",
2716        GNUNET_h2s (&copen->port),
2717        GCT_2s (t));
2718   ch = GCCH_channel_incoming_new (t,
2719                                   copen->ctn,
2720                                   &copen->port,
2721                                   ntohl (copen->opt));
2722   if (NULL != t->destroy_task)
2723   {
2724     GNUNET_SCHEDULER_cancel (t->destroy_task);
2725     t->destroy_task = NULL;
2726   }
2727   GNUNET_assert (GNUNET_OK ==
2728                  GNUNET_CONTAINER_multihashmap32_put (t->channels,
2729                                                       ntohl (copen->ctn.cn),
2730                                                       ch,
2731                                                       GNUNET_CONTAINER_MULTIHASHMAPOPTION_UNIQUE_ONLY));
2732 }
2733
2734
2735 /**
2736  * Send a DESTROY message via the tunnel.
2737  *
2738  * @param t the tunnel to transmit over
2739  * @param ctn ID of the channel to destroy
2740  */
2741 void
2742 GCT_send_channel_destroy (struct CadetTunnel *t,
2743                           struct GNUNET_CADET_ChannelTunnelNumber ctn)
2744 {
2745   struct GNUNET_CADET_ChannelManageMessage msg;
2746
2747   LOG (GNUNET_ERROR_TYPE_DEBUG,
2748        "Sending DESTORY message for channel ID %u\n",
2749        ntohl (ctn.cn));
2750   msg.header.size = htons (sizeof (msg));
2751   msg.header.type = htons (GNUNET_MESSAGE_TYPE_CADET_CHANNEL_DESTROY);
2752   msg.reserved = htonl (0);
2753   msg.ctn = ctn;
2754   GCT_send (t,
2755             &msg.header,
2756             NULL,
2757             NULL);
2758 }
2759
2760
2761 /**
2762  * We have received confirmation from the target peer that the
2763  * given channel could be established (the port is open).
2764  * Tell the client.
2765  *
2766  * @param cls the `struct CadetTunnel` for which we decrypted the message
2767  * @param cm the message we received on the tunnel
2768  */
2769 static void
2770 handle_plaintext_channel_open_ack (void *cls,
2771                                    const struct GNUNET_CADET_ChannelManageMessage *cm)
2772 {
2773   struct CadetTunnel *t = cls;
2774   struct CadetChannel *ch;
2775
2776   ch = lookup_channel (t,
2777                        cm->ctn);
2778   if (NULL == ch)
2779   {
2780     /* We don't know about such a channel, might have been destroyed on our
2781        end in the meantime, or never existed. Send back a DESTROY. */
2782     LOG (GNUNET_ERROR_TYPE_DEBUG,
2783          "Received channel OPEN_ACK for unknown channel %u, sending DESTROY\n",
2784          ntohl (cm->ctn.cn));
2785     GCT_send_channel_destroy (t,
2786                               cm->ctn);
2787     return;
2788   }
2789   LOG (GNUNET_ERROR_TYPE_DEBUG,
2790        "Received channel OPEN_ACK on channel %s from %s\n",
2791        GCCH_2s (ch),
2792        GCT_2s (t));
2793   GCCH_handle_channel_open_ack (ch,
2794                                 GCC_get_id (t->current_ct->cc));
2795 }
2796
2797
2798 /**
2799  * We received a message saying that a channel should be destroyed.
2800  * Pass it on to the correct channel.
2801  *
2802  * @param cls the `struct CadetTunnel` for which we decrypted the message
2803  * @param cm the message we received on the tunnel
2804  */
2805 static void
2806 handle_plaintext_channel_destroy (void *cls,
2807                                   const struct GNUNET_CADET_ChannelManageMessage *cm)
2808 {
2809   struct CadetTunnel *t = cls;
2810   struct CadetChannel *ch;
2811
2812   ch = lookup_channel (t,
2813                        cm->ctn);
2814   if (NULL == ch)
2815   {
2816     /* We don't know about such a channel, might have been destroyed on our
2817        end in the meantime, or never existed. */
2818     LOG (GNUNET_ERROR_TYPE_DEBUG,
2819          "Received channel DESTORY for unknown channel %u. Ignoring.\n",
2820          ntohl (cm->ctn.cn));
2821     return;
2822   }
2823   LOG (GNUNET_ERROR_TYPE_DEBUG,
2824        "Receicved channel DESTROY on %s from %s\n",
2825        GCCH_2s (ch),
2826        GCT_2s (t));
2827   GCCH_handle_remote_destroy (ch,
2828                               GCC_get_id (t->current_ct->cc));
2829 }
2830
2831
2832 /**
2833  * Handles a message we decrypted, by injecting it into
2834  * our message queue (which will do the dispatching).
2835  *
2836  * @param cls the `struct CadetTunnel` that got the message
2837  * @param msg the message
2838  * @return #GNUNET_OK (continue to process)
2839  */
2840 static int
2841 handle_decrypted (void *cls,
2842                   const struct GNUNET_MessageHeader *msg)
2843 {
2844   struct CadetTunnel *t = cls;
2845
2846   GNUNET_assert (NULL != t->current_ct);
2847   GNUNET_MQ_inject_message (t->mq,
2848                             msg);
2849   return GNUNET_OK;
2850 }
2851
2852
2853 /**
2854  * Function called if we had an error processing
2855  * an incoming decrypted message.
2856  *
2857  * @param cls the `struct CadetTunnel`
2858  * @param error error code
2859  */
2860 static void
2861 decrypted_error_cb (void *cls,
2862                     enum GNUNET_MQ_Error error)
2863 {
2864   GNUNET_break_op (0);
2865 }
2866
2867
2868 /**
2869  * Create a tunnel to @a destionation.  Must only be called
2870  * from within #GCP_get_tunnel().
2871  *
2872  * @param destination where to create the tunnel to
2873  * @return new tunnel to @a destination
2874  */
2875 struct CadetTunnel *
2876 GCT_create_tunnel (struct CadetPeer *destination)
2877 {
2878   struct CadetTunnel *t = GNUNET_new (struct CadetTunnel);
2879   struct GNUNET_MQ_MessageHandler handlers[] = {
2880     GNUNET_MQ_hd_fixed_size (plaintext_keepalive,
2881                              GNUNET_MESSAGE_TYPE_CADET_CHANNEL_KEEPALIVE,
2882                              struct GNUNET_MessageHeader,
2883                              t),
2884     GNUNET_MQ_hd_var_size (plaintext_data,
2885                            GNUNET_MESSAGE_TYPE_CADET_CHANNEL_APP_DATA,
2886                            struct GNUNET_CADET_ChannelAppDataMessage,
2887                            t),
2888     GNUNET_MQ_hd_fixed_size (plaintext_data_ack,
2889                              GNUNET_MESSAGE_TYPE_CADET_CHANNEL_APP_DATA_ACK,
2890                              struct GNUNET_CADET_ChannelDataAckMessage,
2891                              t),
2892     GNUNET_MQ_hd_fixed_size (plaintext_channel_open,
2893                              GNUNET_MESSAGE_TYPE_CADET_CHANNEL_OPEN,
2894                              struct GNUNET_CADET_ChannelOpenMessage,
2895                              t),
2896     GNUNET_MQ_hd_fixed_size (plaintext_channel_open_ack,
2897                              GNUNET_MESSAGE_TYPE_CADET_CHANNEL_OPEN_ACK,
2898                              struct GNUNET_CADET_ChannelManageMessage,
2899                              t),
2900     GNUNET_MQ_hd_fixed_size (plaintext_channel_destroy,
2901                              GNUNET_MESSAGE_TYPE_CADET_CHANNEL_DESTROY,
2902                              struct GNUNET_CADET_ChannelManageMessage,
2903                              t),
2904     GNUNET_MQ_handler_end ()
2905   };
2906
2907   t->kx_retry_delay = INITIAL_KX_RETRY_DELAY;
2908   new_ephemeral (&t->ax);
2909   t->ax.kx_0 = GNUNET_CRYPTO_ecdhe_key_create ();
2910   t->destination = destination;
2911   t->channels = GNUNET_CONTAINER_multihashmap32_create (8);
2912   t->maintain_connections_task
2913     = GNUNET_SCHEDULER_add_now (&maintain_connections_cb,
2914                                 t);
2915   t->mq = GNUNET_MQ_queue_for_callbacks (NULL,
2916                                          NULL,
2917                                          NULL,
2918                                          NULL,
2919                                          handlers,
2920                                          &decrypted_error_cb,
2921                                          t);
2922   t->mst = GNUNET_MST_create (&handle_decrypted,
2923                               t);
2924   return t;
2925 }
2926
2927
2928 /**
2929  * Add a @a connection to the @a tunnel.
2930  *
2931  * @param t a tunnel
2932  * @param cid connection identifer to use for the connection
2933  * @param options options for the connection
2934  * @param path path to use for the connection
2935  * @return #GNUNET_OK on success,
2936  *         #GNUNET_SYSERR on failure (duplicate connection)
2937  */
2938 int
2939 GCT_add_inbound_connection (struct CadetTunnel *t,
2940                             const struct GNUNET_CADET_ConnectionTunnelIdentifier *cid,
2941                             enum GNUNET_CADET_ChannelOption options,
2942                             struct CadetPeerPath *path)
2943 {
2944   struct CadetTConnection *ct;
2945
2946   ct = GNUNET_new (struct CadetTConnection);
2947   ct->created = GNUNET_TIME_absolute_get ();
2948   ct->t = t;
2949   ct->cc = GCC_create_inbound (t->destination,
2950                                path,
2951                                options,
2952                                ct,
2953                                cid,
2954                                &connection_ready_cb,
2955                                ct);
2956   if (NULL == ct->cc)
2957   {
2958     LOG (GNUNET_ERROR_TYPE_DEBUG,
2959          "%s refused inbound %s (duplicate)\n",
2960          GCT_2s (t),
2961          GCC_2s (ct->cc));
2962     GNUNET_free (ct);
2963     return GNUNET_SYSERR;
2964   }
2965   /* FIXME: schedule job to kill connection (and path?)  if it takes
2966      too long to get ready! (And track performance data on how long
2967      other connections took with the tunnel!)
2968      => Note: to be done within 'connection'-logic! */
2969   GNUNET_CONTAINER_DLL_insert (t->connection_busy_head,
2970                                t->connection_busy_tail,
2971                                ct);
2972   t->num_busy_connections++;
2973   LOG (GNUNET_ERROR_TYPE_DEBUG,
2974        "%s has new %s\n",
2975        GCT_2s (t),
2976        GCC_2s (ct->cc));
2977   return GNUNET_OK;
2978 }
2979
2980
2981 /**
2982  * Handle encrypted message.
2983  *
2984  * @param ct connection/tunnel combo that received encrypted message
2985  * @param msg the encrypted message to decrypt
2986  */
2987 void
2988 GCT_handle_encrypted (struct CadetTConnection *ct,
2989                       const struct GNUNET_CADET_TunnelEncryptedMessage *msg)
2990 {
2991   struct CadetTunnel *t = ct->t;
2992   uint16_t size = ntohs (msg->header.size);
2993   char cbuf [size] GNUNET_ALIGN;
2994   ssize_t decrypted_size;
2995
2996   LOG (GNUNET_ERROR_TYPE_DEBUG,
2997        "%s received %u bytes of encrypted data in state %d\n",
2998        GCT_2s (t),
2999        (unsigned int) size,
3000        t->estate);
3001
3002   switch (t->estate)
3003   {
3004   case CADET_TUNNEL_KEY_UNINITIALIZED:
3005   case CADET_TUNNEL_KEY_AX_RECV:
3006     /* We did not even SEND our KX, how can the other peer
3007        send us encrypted data? */
3008     GNUNET_break_op (0);
3009     return;
3010   case CADET_TUNNEL_KEY_AX_SENT_AND_RECV:
3011     /* We send KX, and other peer send KX to us at the same time.
3012        Neither KX is AUTH'ed, so let's try KX_AUTH this time. */
3013     GNUNET_STATISTICS_update (stats,
3014                               "# received encrypted without KX_AUTH",
3015                               1,
3016                               GNUNET_NO);
3017     if (NULL != t->kx_task)
3018     {
3019       GNUNET_SCHEDULER_cancel (t->kx_task);
3020       t->kx_task = NULL;
3021     }
3022     send_kx_auth (t,
3023                   ct,
3024                   &t->ax,
3025                   GNUNET_YES);
3026     return;
3027   case CADET_TUNNEL_KEY_AX_SENT:
3028     /* We did not get the KX of the other peer, but that
3029        might have been lost.  Send our KX again immediately. */
3030     GNUNET_STATISTICS_update (stats,
3031                               "# received encrypted without KX",
3032                               1,
3033                               GNUNET_NO);
3034     if (NULL != t->kx_task)
3035     {
3036       GNUNET_SCHEDULER_cancel (t->kx_task);
3037       t->kx_task = NULL;
3038     }
3039     send_kx (t,
3040              ct,
3041              &t->ax);
3042     return;
3043   case CADET_TUNNEL_KEY_AX_AUTH_SENT:
3044     /* Great, first payload, we might graduate to OK! */
3045   case CADET_TUNNEL_KEY_OK:
3046     /* We are up and running, all good. */
3047     break;
3048   }
3049
3050   GNUNET_STATISTICS_update (stats,
3051                             "# received encrypted",
3052                             1,
3053                             GNUNET_NO);
3054   decrypted_size = -1;
3055   if (CADET_TUNNEL_KEY_OK == t->estate)
3056   {
3057     /* We have well-established key material available,
3058        try that. (This is the common case.) */
3059     decrypted_size = t_ax_decrypt_and_validate (&t->ax,
3060                                                 cbuf,
3061                                                 msg,
3062                                                 size);
3063   }
3064
3065   if ( (-1 == decrypted_size) &&
3066        (NULL != t->unverified_ax) )
3067   {
3068     /* We have un-authenticated KX material available. We should try
3069        this as a back-up option, in case the sender crashed and
3070        switched keys. */
3071     decrypted_size = t_ax_decrypt_and_validate (t->unverified_ax,
3072                                                 cbuf,
3073                                                 msg,
3074                                                 size);
3075     if (-1 != decrypted_size)
3076     {
3077       /* It worked! Treat this as authentication of the AX data! */
3078       t->ax.DHRs = NULL; /* aliased with ax.DHRs */
3079       t->ax.kx_0 = NULL; /* aliased with ax.DHRs */
3080       cleanup_ax (&t->ax);
3081       t->ax = *t->unverified_ax;
3082       GNUNET_free (t->unverified_ax);
3083       t->unverified_ax = NULL;
3084     }
3085     if (CADET_TUNNEL_KEY_AX_AUTH_SENT == t->estate)
3086     {
3087       /* First time it worked, move tunnel into production! */
3088       GCT_change_estate (t,
3089                          CADET_TUNNEL_KEY_OK);
3090       if (NULL != t->send_task)
3091         GNUNET_SCHEDULER_cancel (t->send_task);
3092       t->send_task = GNUNET_SCHEDULER_add_now (&trigger_transmissions,
3093                                                t);
3094     }
3095   }
3096   if (NULL != t->unverified_ax)
3097   {
3098     /* We had unverified KX material that was useless; so increment
3099        counter and eventually move to ignore it.  Note that we even do
3100        this increment if we successfully decrypted with the old KX
3101        material and thus didn't even both with the new one.  This is
3102        the ideal case, as a malicious injection of bogus KX data
3103        basically only causes us to increment a counter a few times. */
3104     t->unverified_attempts++;
3105     LOG (GNUNET_ERROR_TYPE_DEBUG,
3106          "Failed to decrypt message with unverified KX data %u times\n",
3107          t->unverified_attempts);
3108     if (t->unverified_attempts > MAX_UNVERIFIED_ATTEMPTS)
3109     {
3110       t->unverified_ax->DHRs = NULL; /* aliased with ax.DHRs */
3111       t->unverified_ax->kx_0 = NULL; /* aliased with ax.DHRs */
3112       cleanup_ax (t->unverified_ax);
3113       GNUNET_free (t->unverified_ax);
3114       t->unverified_ax = NULL;
3115     }
3116   }
3117
3118   if (-1 == decrypted_size)
3119   {
3120     /* Decryption failed for good, complain. */
3121     GNUNET_break_op (0);
3122     LOG (GNUNET_ERROR_TYPE_WARNING,
3123          "%s failed to decrypt and validate encrypted data\n",
3124          GCT_2s (t));
3125     GNUNET_STATISTICS_update (stats,
3126                               "# unable to decrypt",
3127                               1,
3128                               GNUNET_NO);
3129     return;
3130   }
3131
3132   /* The MST will ultimately call #handle_decrypted() on each message. */
3133   t->current_ct = ct;
3134   GNUNET_break_op (GNUNET_OK ==
3135                    GNUNET_MST_from_buffer (t->mst,
3136                                            cbuf,
3137                                            decrypted_size,
3138                                            GNUNET_YES,
3139                                            GNUNET_NO));
3140   t->current_ct = NULL;
3141 }
3142
3143
3144 /**
3145  * Sends an already built message on a tunnel, encrypting it and
3146  * choosing the best connection if not provided.
3147  *
3148  * @param message Message to send. Function modifies it.
3149  * @param t Tunnel on which this message is transmitted.
3150  * @param cont Continuation to call once message is really sent.
3151  * @param cont_cls Closure for @c cont.
3152  * @return Handle to cancel message
3153  */
3154 struct CadetTunnelQueueEntry *
3155 GCT_send (struct CadetTunnel *t,
3156           const struct GNUNET_MessageHeader *message,
3157           GCT_SendContinuation cont,
3158           void *cont_cls)
3159 {
3160   struct CadetTunnelQueueEntry *tq;
3161   uint16_t payload_size;
3162   struct GNUNET_MQ_Envelope *env;
3163   struct GNUNET_CADET_TunnelEncryptedMessage *ax_msg;
3164
3165   if (CADET_TUNNEL_KEY_OK != t->estate)
3166   {
3167     GNUNET_break (0);
3168     return NULL;
3169   }
3170   payload_size = ntohs (message->size);
3171   LOG (GNUNET_ERROR_TYPE_DEBUG,
3172        "Encrypting %u bytes for %s\n",
3173        (unsigned int) payload_size,
3174        GCT_2s (t));
3175   env = GNUNET_MQ_msg_extra (ax_msg,
3176                              payload_size,
3177                              GNUNET_MESSAGE_TYPE_CADET_TUNNEL_ENCRYPTED);
3178   t_ax_encrypt (&t->ax,
3179                 &ax_msg[1],
3180                 message,
3181                 payload_size);
3182   ax_msg->ax_header.Ns = htonl (t->ax.Ns++);
3183   ax_msg->ax_header.PNs = htonl (t->ax.PNs);
3184   /* FIXME: we should do this once, not once per message;
3185      this is a point multiplication, and DHRs does not
3186      change all the time. */
3187   GNUNET_CRYPTO_ecdhe_key_get_public (t->ax.DHRs,
3188                                       &ax_msg->ax_header.DHRs);
3189   t_h_encrypt (&t->ax,
3190                ax_msg);
3191   t_hmac (&ax_msg->ax_header,
3192           sizeof (struct GNUNET_CADET_AxHeader) + payload_size,
3193           0,
3194           &t->ax.HKs,
3195           &ax_msg->hmac);
3196
3197   tq = GNUNET_malloc (sizeof (*tq));
3198   tq->t = t;
3199   tq->env = env;
3200   tq->cid = &ax_msg->cid; /* will initialize 'ax_msg->cid' once we know the connection */
3201   tq->cont = cont;
3202   tq->cont_cls = cont_cls;
3203   GNUNET_CONTAINER_DLL_insert_tail (t->tq_head,
3204                                     t->tq_tail,
3205                                     tq);
3206   if (NULL != t->send_task)
3207     GNUNET_SCHEDULER_cancel (t->send_task);
3208   t->send_task
3209     = GNUNET_SCHEDULER_add_now (&trigger_transmissions,
3210                                 t);
3211   return tq;
3212 }
3213
3214
3215 /**
3216  * Cancel a previously sent message while it's in the queue.
3217  *
3218  * ONLY can be called before the continuation given to the send
3219  * function is called. Once the continuation is called, the message is
3220  * no longer in the queue!
3221  *
3222  * @param tq Handle to the queue entry to cancel.
3223  */
3224 void
3225 GCT_send_cancel (struct CadetTunnelQueueEntry *tq)
3226 {
3227   struct CadetTunnel *t = tq->t;
3228
3229   GNUNET_CONTAINER_DLL_remove (t->tq_head,
3230                                t->tq_tail,
3231                                tq);
3232   GNUNET_MQ_discard (tq->env);
3233   GNUNET_free (tq);
3234 }
3235
3236
3237 /**
3238  * Iterate over all connections of a tunnel.
3239  *
3240  * @param t Tunnel whose connections to iterate.
3241  * @param iter Iterator.
3242  * @param iter_cls Closure for @c iter.
3243  */
3244 void
3245 GCT_iterate_connections (struct CadetTunnel *t,
3246                          GCT_ConnectionIterator iter,
3247                          void *iter_cls)
3248 {
3249   struct CadetTConnection *n;
3250   for (struct CadetTConnection *ct = t->connection_ready_head;
3251        NULL != ct;
3252        ct = n)
3253   {
3254     n = ct->next;
3255     iter (iter_cls,
3256           ct);
3257   }
3258   for (struct CadetTConnection *ct = t->connection_busy_head;
3259        NULL != ct;
3260        ct = n)
3261   {
3262     n = ct->next;
3263     iter (iter_cls,
3264           ct);
3265   }
3266 }
3267
3268
3269 /**
3270  * Closure for #iterate_channels_cb.
3271  */
3272 struct ChanIterCls
3273 {
3274   /**
3275    * Function to call.
3276    */
3277   GCT_ChannelIterator iter;
3278
3279   /**
3280    * Closure for @e iter.
3281    */
3282   void *iter_cls;
3283 };
3284
3285
3286 /**
3287  * Helper function for #GCT_iterate_channels.
3288  *
3289  * @param cls the `struct ChanIterCls`
3290  * @param key unused
3291  * @param value a `struct CadetChannel`
3292  * @return #GNUNET_OK
3293  */
3294 static int
3295 iterate_channels_cb (void *cls,
3296                      uint32_t key,
3297                      void *value)
3298 {
3299   struct ChanIterCls *ctx = cls;
3300   struct CadetChannel *ch = value;
3301
3302   ctx->iter (ctx->iter_cls,
3303              ch);
3304   return GNUNET_OK;
3305 }
3306
3307
3308 /**
3309  * Iterate over all channels of a tunnel.
3310  *
3311  * @param t Tunnel whose channels to iterate.
3312  * @param iter Iterator.
3313  * @param iter_cls Closure for @c iter.
3314  */
3315 void
3316 GCT_iterate_channels (struct CadetTunnel *t,
3317                       GCT_ChannelIterator iter,
3318                       void *iter_cls)
3319 {
3320   struct ChanIterCls ctx;
3321
3322   ctx.iter = iter;
3323   ctx.iter_cls = iter_cls;
3324   GNUNET_CONTAINER_multihashmap32_iterate (t->channels,
3325                                            &iterate_channels_cb,
3326                                            &ctx);
3327
3328 }
3329
3330
3331 /**
3332  * Call #GCCH_debug() on a channel.
3333  *
3334  * @param cls points to the log level to use
3335  * @param key unused
3336  * @param value the `struct CadetChannel` to dump
3337  * @return #GNUNET_OK (continue iteration)
3338  */
3339 static int
3340 debug_channel (void *cls,
3341                uint32_t key,
3342                void *value)
3343 {
3344   const enum GNUNET_ErrorType *level = cls;
3345   struct CadetChannel *ch = value;
3346
3347   GCCH_debug (ch, *level);
3348   return GNUNET_OK;
3349 }
3350
3351
3352 #define LOG2(level, ...) GNUNET_log_from_nocheck(level,"cadet-tun",__VA_ARGS__)
3353
3354
3355 /**
3356  * Log all possible info about the tunnel state.
3357  *
3358  * @param t Tunnel to debug.
3359  * @param level Debug level to use.
3360  */
3361 void
3362 GCT_debug (const struct CadetTunnel *t,
3363            enum GNUNET_ErrorType level)
3364 {
3365   struct CadetTConnection *iter_c;
3366   int do_log;
3367
3368   do_log = GNUNET_get_log_call_status (level & (~GNUNET_ERROR_TYPE_BULK),
3369                                        "cadet-tun",
3370                                        __FILE__, __FUNCTION__, __LINE__);
3371   if (0 == do_log)
3372     return;
3373
3374   LOG2 (level,
3375         "TTT TUNNEL TOWARDS %s in estate %s tq_len: %u #cons: %u\n",
3376         GCT_2s (t),
3377         estate2s (t->estate),
3378         t->tq_len,
3379         GCT_count_any_connections (t));
3380   LOG2 (level,
3381         "TTT channels:\n");
3382   GNUNET_CONTAINER_multihashmap32_iterate (t->channels,
3383                                            &debug_channel,
3384                                            &level);
3385   LOG2 (level,
3386         "TTT connections:\n");
3387   for (iter_c = t->connection_ready_head; NULL != iter_c; iter_c = iter_c->next)
3388     GCC_debug (iter_c->cc,
3389                level);
3390   for (iter_c = t->connection_busy_head; NULL != iter_c; iter_c = iter_c->next)
3391     GCC_debug (iter_c->cc,
3392                level);
3393
3394   LOG2 (level,
3395         "TTT TUNNEL END\n");
3396 }
3397
3398
3399 /* end of gnunet-service-cadet-new_tunnels.c */