- revamp almost all cadet tests, keep track of messages, sizes, acks
[oweals/gnunet.git] / src / cadet / test_cadet.c
1 /*
2      This file is part of GNUnet.
3      (C) 2011 Christian Grothoff (and other contributing authors)
4
5      GNUnet is free software; you can redistribute it and/or modify
6      it under the terms of the GNU General Public License as published
7      by the Free Software Foundation; either version 3, or (at your
8      option) any later version.
9
10      GNUnet is distributed in the hope that it will be useful, but
11      WITHOUT ANY WARRANTY; without even the implied warranty of
12      MERCHANTABILITY or FITNESS FOR A PARTICULAR PURPOSE.  See the GNU
13      General Public License for more details.
14
15      You should have received a copy of the GNU General Public License
16      along with GNUnet; see the file COPYING.  If not, write to the
17      Free Software Foundation, Inc., 59 Temple Place - Suite 330,
18      Boston, MA 02111-1307, USA.
19 */
20 /**
21  * @file cadet/test_cadet.c
22  *
23  * @brief Test for the cadet service: retransmission of traffic.
24  */
25 #include <stdio.h>
26 #include "platform.h"
27 #include "cadet_test_lib.h"
28 #include "gnunet_cadet_service.h"
29 #include "gnunet_statistics_service.h"
30 #include <gauger.h>
31
32
33 /**
34  * How namy messages to send
35  */
36 #define TOTAL_PACKETS 100
37
38 /**
39  * How long until we give up on connecting the peers?
40  */
41 #define TIMEOUT GNUNET_TIME_relative_multiply (GNUNET_TIME_UNIT_SECONDS, 120)
42
43 /**
44  * Time to wait for stuff that should be rather fast
45  */
46 #define SHORT_TIME GNUNET_TIME_relative_multiply (GNUNET_TIME_UNIT_SECONDS, 60)
47
48 /**
49  * DIFFERENT TESTS TO RUN
50  */
51 #define SETUP 0
52 #define FORWARD 1
53 #define KEEPALIVE 2
54 #define SPEED 3
55 #define SPEED_ACK 4
56 #define SPEED_REL 8
57 #define P2P_SIGNAL 10
58
59 /**
60  * Which test are we running?
61  */
62 static int test;
63
64 /**
65  * String with test name
66  */
67 char *test_name;
68
69 /**
70  * Flag to send traffic leaf->root in speed tests to test BCK_ACK logic.
71  */
72 static int test_backwards = GNUNET_NO;
73
74 /**
75  * How many events have happened
76  */
77 static int ok;
78
79 /**
80  * Number of events expected to conclude the test successfully.
81  */
82 int ok_goal;
83
84 /**
85  * Size of each test packet
86  */
87 size_t size_payload = sizeof (struct GNUNET_MessageHeader) + sizeof (uint32_t);
88
89 /**
90  * Operation to get peer ids.
91  */
92 struct GNUNET_TESTBED_Operation *t_op[2];
93
94 /**
95  * Peer ids.
96  */
97 struct GNUNET_PeerIdentity *p_id[2];
98
99 /**
100  * Peer ids counter.
101  */
102 unsigned int p_ids;
103
104 /**
105  * Is the setup initialized?
106  */
107 static int initialized;
108
109 /**
110  * Number of payload packes sent.
111  */
112 static int data_sent;
113
114 /**
115  * Number of payload packets received.
116  */
117 static int data_received;
118
119 /**
120  * Number of payload packed acknowledgements sent.
121  */
122 static int ack_sent;
123
124 /**
125  * Number of payload packed explicitly (app level) acknowledged.
126  */
127 static int ack_received;
128
129 /**
130  * Total number of peers asked to run.
131  */
132 static unsigned long long peers_requested;
133
134 /**
135  * Number of currently running peers (should be same as @c peers_requested).
136  */
137 static unsigned long long peers_running;
138
139 /**
140  * Test context (to shut down).
141  */
142 struct GNUNET_CADET_TEST_Context *test_ctx;
143
144 /**
145  * Task called to disconnect peers.
146  */
147 static GNUNET_SCHEDULER_TaskIdentifier disconnect_task;
148
149 /**
150  * Task To perform tests
151  */
152 static GNUNET_SCHEDULER_TaskIdentifier test_task;
153
154 /**
155  * Task called to shutdown test.
156  */
157 static GNUNET_SCHEDULER_TaskIdentifier shutdown_handle;
158
159 /**
160  * Cadet handle for the root peer
161  */
162 static struct GNUNET_CADET_Handle *h1;
163
164 /**
165  * Cadet handle for the first leaf peer
166  */
167 static struct GNUNET_CADET_Handle *h2;
168
169 /**
170  * Channel handle for the root peer
171  */
172 static struct GNUNET_CADET_Channel *ch;
173
174 /**
175  * Channel handle for the dest peer
176  */
177 static struct GNUNET_CADET_Channel *incoming_ch;
178
179 /**
180  * Time we started the data transmission (after channel has been established
181  * and initilized).
182  */
183 static struct GNUNET_TIME_Absolute start_time;
184
185 /**
186  * Peers handle.
187  */
188 static struct GNUNET_TESTBED_Peer **testbed_peers;
189
190 /**
191  * Statistics operation handle.
192  */
193 static struct GNUNET_TESTBED_Operation *stats_op;
194
195 /**
196  * Keepalives sent.
197  */
198 static unsigned int ka_sent;
199
200 /**
201  * Keepalives received.
202  */
203 static unsigned int ka_received;
204
205
206 /**
207  * Get the client number considered as the "target" or "receiver", depending on
208  * the test type and size.
209  *
210  * @return Peer # of the target client, either 0 (for backward tests) or
211  *         the last peer in the line (for other tests).
212  */
213 static unsigned int
214 get_expected_target ()
215 {
216   if (SPEED == test && GNUNET_YES == test_backwards)
217     return 0;
218   else
219     return peers_requested - 1;
220 }
221
222 /**
223  * Show the results of the test (banwidth acheived) and log them to GAUGER
224  */
225 static void
226 show_end_data (void)
227 {
228   static struct GNUNET_TIME_Absolute end_time;
229   static struct GNUNET_TIME_Relative total_time;
230
231   end_time = GNUNET_TIME_absolute_get();
232   total_time = GNUNET_TIME_absolute_get_difference(start_time, end_time);
233   FPRINTF (stderr, "\nResults of test \"%s\"\n", test_name);
234   FPRINTF (stderr, "Test time %s\n",
235            GNUNET_STRINGS_relative_time_to_string (total_time,
236                                                    GNUNET_YES));
237   FPRINTF (stderr, "Test bandwidth: %f kb/s\n",
238            4 * TOTAL_PACKETS * 1.0 / (total_time.rel_value_us / 1000)); // 4bytes * ms
239   FPRINTF (stderr, "Test throughput: %f packets/s\n\n",
240            TOTAL_PACKETS * 1000.0 / (total_time.rel_value_us / 1000)); // packets * ms
241   GAUGER ("CADET", test_name,
242           TOTAL_PACKETS * 1000.0 / (total_time.rel_value_us / 1000),
243           "packets/s");
244 }
245
246
247 /**
248  * Shut down peergroup, clean up.
249  *
250  * @param cls Closure (unused).
251  * @param tc Task Context.
252  */
253 static void
254 shutdown_task (void *cls, const struct GNUNET_SCHEDULER_TaskContext *tc)
255 {
256   GNUNET_log (GNUNET_ERROR_TYPE_DEBUG, "Ending test.\n");
257   shutdown_handle = GNUNET_SCHEDULER_NO_TASK;
258 }
259
260
261 /**
262  * Disconnect from cadet services af all peers, call shutdown.
263  *
264  * @param cls Closure (unused).
265  * @param tc Task Context.
266  */
267 static void
268 disconnect_cadet_peers (void *cls, const struct GNUNET_SCHEDULER_TaskContext *tc)
269 {
270   long line = (long) cls;
271   unsigned int i;
272
273   if ((GNUNET_SCHEDULER_REASON_SHUTDOWN & tc->reason) != 0)
274     GNUNET_log (GNUNET_ERROR_TYPE_DEBUG,
275                 "disconnecting cadet peers due to SHUTDOWN! called from %ld\n",
276                 line);
277   else
278     GNUNET_log (GNUNET_ERROR_TYPE_DEBUG,
279                 "disconnecting cadet service of peers, called from line %ld\n",
280                 line);
281   disconnect_task = GNUNET_SCHEDULER_NO_TASK;
282   for (i = 0; i < 2; i++)
283   {
284     GNUNET_TESTBED_operation_done (t_op[i]);
285   }
286   if (NULL != ch)
287   {
288     GNUNET_CADET_channel_destroy (ch);
289     ch = NULL;
290   }
291   if (NULL != incoming_ch)
292   {
293     GNUNET_CADET_channel_destroy (incoming_ch);
294     incoming_ch = NULL;
295   }
296   GNUNET_CADET_TEST_cleanup (test_ctx);
297   if (GNUNET_SCHEDULER_NO_TASK != shutdown_handle)
298   {
299     GNUNET_SCHEDULER_cancel (shutdown_handle);
300   }
301   shutdown_handle = GNUNET_SCHEDULER_add_now (&shutdown_task, NULL);
302 }
303
304
305 /**
306  * Abort test: schedule disconnect and shutdown immediately
307  *
308  * @param line Line in the code the abort is requested from (__LINE__).
309  */
310 static void
311 abort_test (long line)
312 {
313   if (disconnect_task != GNUNET_SCHEDULER_NO_TASK)
314   {
315     GNUNET_SCHEDULER_cancel (disconnect_task);
316     disconnect_task = GNUNET_SCHEDULER_add_now (&disconnect_cadet_peers,
317                                                 (void *) line);
318   }
319 }
320
321 /**
322  * Transmit ready callback.
323  *
324  * @param cls Closure (message type).
325  * @param size Size of the tranmist buffer.
326  * @param buf Pointer to the beginning of the buffer.
327  *
328  * @return Number of bytes written to buf.
329  */
330 static size_t
331 tmt_rdy (void *cls, size_t size, void *buf);
332
333
334 /**
335  * Task to schedule a new data transmission.
336  *
337  * @param cls Closure (peer #).
338  * @param tc Task Context.
339  */
340 static void
341 data_task (void *cls, const struct GNUNET_SCHEDULER_TaskContext *tc)
342 {
343   struct GNUNET_CADET_TransmitHandle *th;
344   struct GNUNET_CADET_Channel *channel;
345   long src;
346
347   if ((GNUNET_SCHEDULER_REASON_SHUTDOWN & tc->reason) != 0)
348     return;
349
350   GNUNET_log (GNUNET_ERROR_TYPE_DEBUG, "Data task\n");
351   if (GNUNET_YES == test_backwards)
352   {
353     channel = incoming_ch;
354     src = peers_requested - 1;
355   }
356   else
357   {
358     channel = ch;
359     src = 0;
360   }
361   th = GNUNET_CADET_notify_transmit_ready (channel, GNUNET_NO,
362                                            GNUNET_TIME_UNIT_FOREVER_REL,
363                                            size_payload + data_sent,
364                                            &tmt_rdy, (void *) src);
365   if (NULL == th)
366   {
367     unsigned long i = (unsigned long) cls;
368
369     GNUNET_log (GNUNET_ERROR_TYPE_WARNING, "Retransmission\n");
370     if (0 == i)
371     {
372       GNUNET_log (GNUNET_ERROR_TYPE_WARNING, "  in 1 ms\n");
373       GNUNET_SCHEDULER_add_delayed (GNUNET_TIME_UNIT_MILLISECONDS,
374                                     &data_task, (void *) 1L);
375     }
376     else
377     {
378       i++;
379       GNUNET_log (GNUNET_ERROR_TYPE_WARNING, "in %u ms\n", i);
380       GNUNET_SCHEDULER_add_delayed (GNUNET_TIME_relative_multiply(
381                                       GNUNET_TIME_UNIT_MILLISECONDS,
382                                       i),
383                                     &data_task, (void *) i);
384     }
385   }
386 }
387
388
389 /**
390  * Transmit ready callback
391  *
392  * @param cls Closure (peer # which is sending the data).
393  * @param size Size of the buffer we have.
394  * @param buf Buffer to copy data to.
395  */
396 size_t
397 tmt_rdy (void *cls, size_t size, void *buf)
398 {
399   struct GNUNET_MessageHeader *msg = buf;
400   size_t msg_size;
401   uint32_t *data;
402   long id = (long) cls;
403   unsigned int counter;
404
405   GNUNET_log (GNUNET_ERROR_TYPE_DEBUG, "tmt_rdy on %ld, filling buffer\n", id);
406   counter = get_expected_target () == id ? ack_sent : data_sent;
407   msg_size = size_payload + counter;
408   if (size < msg_size || NULL == buf)
409   {
410     GNUNET_log (GNUNET_ERROR_TYPE_DEBUG,
411                 "size %u, buf %p, data_sent %u, ack_received %u\n",
412                 size, buf, data_sent, ack_received);
413     GNUNET_log (GNUNET_ERROR_TYPE_DEBUG, "ok %u, ok goal %u\n", ok, ok_goal);
414     GNUNET_break (ok >= ok_goal - 2);
415
416     return 0;
417   }
418   msg->size = htons (size);
419   msg->type = htons (1);
420   data = (uint32_t *) &msg[1];
421   *data = htonl (counter);
422   if (GNUNET_NO == initialized)
423   {
424     GNUNET_log (GNUNET_ERROR_TYPE_DEBUG, "sending initializer\n");
425   }
426   else if (SPEED == test || SPEED_ACK == test)
427   {
428     if (get_expected_target() == id)
429       ack_sent++;
430     else
431       data_sent++;
432     counter++;
433     GNUNET_log (GNUNET_ERROR_TYPE_INFO, " Sent message %d size %u\n",
434                 counter, msg_size);
435     if (data_sent < TOTAL_PACKETS && SPEED == test)
436     {
437       GNUNET_log (GNUNET_ERROR_TYPE_DEBUG, " Scheduling message %d\n",
438                   counter + 1);
439       GNUNET_SCHEDULER_add_now (&data_task, NULL);
440     }
441   }
442
443   return msg_size;
444 }
445
446
447 /**
448  * Function is called whenever a message is received.
449  *
450  * @param cls closure (set from GNUNET_CADET_connect)
451  * @param channel connection to the other end
452  * @param channel_ctx place to store local state associated with the channel
453  * @param message the actual message
454  * @return GNUNET_OK to keep the connection open,
455  *         GNUNET_SYSERR to close it (signal serious error)
456  */
457 int
458 data_callback (void *cls, struct GNUNET_CADET_Channel *channel,
459                void **channel_ctx,
460                const struct GNUNET_MessageHeader *message)
461 {
462   long client = (long) cls;
463   long expected_target_client;
464   uint32_t *data;
465   uint32_t payload;
466   unsigned int counter;
467
468   ok++;
469   counter = get_expected_target () == client ? data_received : ack_received;
470
471   GNUNET_CADET_receive_done (channel);
472
473   if ((ok % 20) == 0)
474   {
475     if (GNUNET_SCHEDULER_NO_TASK != disconnect_task)
476     {
477       GNUNET_log (GNUNET_ERROR_TYPE_INFO, " reschedule timeout\n");
478       GNUNET_SCHEDULER_cancel (disconnect_task);
479       disconnect_task = GNUNET_SCHEDULER_add_delayed (SHORT_TIME,
480                                                       &disconnect_cadet_peers,
481                                                       (void *) __LINE__);
482     }
483   }
484
485   switch (client)
486   {
487   case 0L:
488     GNUNET_log (GNUNET_ERROR_TYPE_INFO, "Root client got a message!\n");
489     break;
490   case 1L:
491   case 4L:
492     GNUNET_assert (client == peers_requested - 1);
493     GNUNET_log (GNUNET_ERROR_TYPE_INFO, "Leaf client %li got a message.\n",
494                 client);
495     break;
496   default:
497     GNUNET_log (GNUNET_ERROR_TYPE_ERROR, "Client %li not valid.\n", client);
498     GNUNET_abort ();
499   }
500   GNUNET_log (GNUNET_ERROR_TYPE_INFO, " ok: (%d/%d)\n", ok, ok_goal);
501   data = (uint32_t *) &message[1];
502   payload = ntohl (*data);
503   GNUNET_log (GNUNET_ERROR_TYPE_INFO, " payload: %u, data_received: %u\n",
504               payload, counter);
505   GNUNET_break (payload == counter);
506   expected_target_client = get_expected_target ();
507
508   if (GNUNET_NO == initialized)
509   {
510     initialized = GNUNET_YES;
511     start_time = GNUNET_TIME_absolute_get ();
512     if (SPEED == test)
513     {
514       GNUNET_assert (peers_requested - 1 == client);
515       GNUNET_SCHEDULER_add_now (&data_task, NULL);
516       return GNUNET_OK;
517     }
518   }
519
520   counter++;
521   if (client == expected_target_client) /* Normally 4 */
522   {
523     data_received++;
524     GNUNET_log (GNUNET_ERROR_TYPE_INFO, " received data %u\n", data_received);
525     if (SPEED != test || (ok_goal - 2) == ok)
526     {
527       /* Send ACK */
528       GNUNET_CADET_notify_transmit_ready (channel, GNUNET_NO,
529                                           GNUNET_TIME_UNIT_FOREVER_REL,
530                                           size_payload + ack_sent, &tmt_rdy,
531                                           (void *) client);
532       return GNUNET_OK;
533     }
534     else
535     {
536       if (data_received < TOTAL_PACKETS)
537         return GNUNET_OK;
538     }
539   }
540   else /* Normally 0 */
541   {
542     if (SPEED_ACK == test || SPEED == test)
543     {
544       ack_received++;
545       GNUNET_log (GNUNET_ERROR_TYPE_INFO, " received ack %u\n", ack_received);
546       GNUNET_CADET_notify_transmit_ready (channel, GNUNET_NO,
547                                           GNUNET_TIME_UNIT_FOREVER_REL,
548                                           size_payload + data_sent, &tmt_rdy,
549                                           (void *) client);
550       if (ack_received < TOTAL_PACKETS && SPEED != test)
551         return GNUNET_OK;
552       if (ok == 2 && SPEED == test)
553         return GNUNET_OK;
554       show_end_data();
555     }
556     if (test == P2P_SIGNAL)
557     {
558       GNUNET_CADET_channel_destroy (incoming_ch);
559       incoming_ch = NULL;
560     }
561     else
562     {
563       GNUNET_CADET_channel_destroy (ch);
564       ch = NULL;
565     }
566   }
567
568   if (GNUNET_SCHEDULER_NO_TASK != disconnect_task)
569   {
570     GNUNET_SCHEDULER_cancel (disconnect_task);
571     disconnect_task = GNUNET_SCHEDULER_add_delayed (SHORT_TIME,
572                                                     &disconnect_cadet_peers,
573                                                     (void *) __LINE__);
574   }
575
576   return GNUNET_OK;
577 }
578
579
580 /**
581  * Stats callback. Finish the stats testbed operation and when all stats have
582  * been iterated, shutdown the test.
583  *
584  * @param cls closure
585  * @param op the operation that has been finished
586  * @param emsg error message in case the operation has failed; will be NULL if
587  *          operation has executed successfully.
588  */
589 static void
590 stats_cont (void *cls, struct GNUNET_TESTBED_Operation *op, const char *emsg)
591 {
592   GNUNET_log (GNUNET_ERROR_TYPE_DEBUG, "stats_cont for peer %u\n", cls);
593   GNUNET_log (GNUNET_ERROR_TYPE_INFO, " KA sent: %u, KA received: %u\n",
594               ka_sent, ka_received);
595   if (ka_sent < 2 || ka_sent > ka_received + 1)
596     ok--;
597   GNUNET_TESTBED_operation_done (stats_op);
598
599   if (GNUNET_SCHEDULER_NO_TASK != disconnect_task)
600     GNUNET_SCHEDULER_cancel (disconnect_task);
601   disconnect_task = GNUNET_SCHEDULER_add_now (&disconnect_cadet_peers,
602                                               (void *) __LINE__);
603
604 }
605
606
607 /**
608  * Process statistic values.
609  *
610  * @param cls closure
611  * @param peer the peer the statistic belong to
612  * @param subsystem name of subsystem that created the statistic
613  * @param name the name of the datum
614  * @param value the current value
615  * @param is_persistent GNUNET_YES if the value is persistent, GNUNET_NO if not
616  * @return GNUNET_OK to continue, GNUNET_SYSERR to abort iteration
617  */
618 static int
619 stats_iterator (void *cls, const struct GNUNET_TESTBED_Peer *peer,
620                 const char *subsystem, const char *name,
621                 uint64_t value, int is_persistent)
622 {
623   static const char *s_sent = "# keepalives sent";
624   static const char *s_recv = "# keepalives received";
625   uint32_t i;
626
627   i = GNUNET_TESTBED_get_index (peer);
628   GNUNET_log (GNUNET_ERROR_TYPE_DEBUG, "  %u - %s [%s]: %llu\n",
629               i, subsystem, name, value);
630   if (0 == strncmp (s_sent, name, strlen (s_sent)) && 0 == i)
631     ka_sent = value;
632
633   if (0 == strncmp(s_recv, name, strlen (s_recv)) && peers_requested - 1 == i)
634     ka_received = value;
635
636   return GNUNET_OK;
637 }
638
639
640 /**
641  * Task check that keepalives were sent and received.
642  *
643  * @param cls Closure (NULL).
644  * @param tc Task Context.
645  */
646 static void
647 check_keepalives (void *cls, const struct GNUNET_SCHEDULER_TaskContext *tc)
648 {
649   if ((GNUNET_SCHEDULER_REASON_SHUTDOWN & tc->reason) != 0)
650     return;
651
652   disconnect_task = GNUNET_SCHEDULER_NO_TASK;
653   GNUNET_log (GNUNET_ERROR_TYPE_INFO, "check keepalives\n");
654   GNUNET_CADET_channel_destroy (ch);
655   stats_op = GNUNET_TESTBED_get_statistics (peers_running, testbed_peers,
656                                             "cadet", NULL,
657                                             stats_iterator, stats_cont, NULL);
658 }
659
660
661 /**
662  * Handlers, for diverse services
663  */
664 static struct GNUNET_CADET_MessageHandler handlers[] = {
665   {&data_callback, 1, sizeof (struct GNUNET_MessageHeader)},
666   {NULL, 0, 0}
667 };
668
669
670 /**
671  * Method called whenever another peer has added us to a channel
672  * the other peer initiated.
673  *
674  * @param cls Closure.
675  * @param channel New handle to the channel.
676  * @param initiator Peer that started the channel.
677  * @param port Port this channel is connected to.
678  * @param options channel option flags
679  * @return Initial channel context for the channel
680  *         (can be NULL -- that's not an error).
681  */
682 static void *
683 incoming_channel (void *cls, struct GNUNET_CADET_Channel *channel,
684                  const struct GNUNET_PeerIdentity *initiator,
685                  uint32_t port, enum GNUNET_CADET_ChannelOption options)
686 {
687   GNUNET_log (GNUNET_ERROR_TYPE_INFO,
688               "Incoming channel from %s to peer %d\n",
689               GNUNET_i2s (initiator), (long) cls);
690   ok++;
691   GNUNET_log (GNUNET_ERROR_TYPE_INFO, " ok: %d\n", ok);
692   if ((long) cls == peers_requested - 1)
693     incoming_ch = channel;
694   else
695   {
696     GNUNET_log (GNUNET_ERROR_TYPE_WARNING,
697                 "Incoming channel for unknown client %lu\n", (long) cls);
698     GNUNET_break(0);
699   }
700   if (GNUNET_SCHEDULER_NO_TASK != disconnect_task)
701   {
702     GNUNET_SCHEDULER_cancel (disconnect_task);
703     if (KEEPALIVE == test)
704     {
705       struct GNUNET_TIME_Relative delay;
706       delay = GNUNET_TIME_relative_multiply (GNUNET_TIME_UNIT_SECONDS , 5);
707       disconnect_task =
708         GNUNET_SCHEDULER_add_delayed (delay, &check_keepalives, NULL);
709     }
710     else
711       disconnect_task = GNUNET_SCHEDULER_add_delayed (SHORT_TIME,
712                                                       &disconnect_cadet_peers,
713                                                       (void *) __LINE__);
714   }
715
716   return NULL;
717 }
718
719 /**
720  * Function called whenever an inbound channel is destroyed.  Should clean up
721  * any associated state.
722  *
723  * @param cls closure (set from GNUNET_CADET_connect)
724  * @param channel connection to the other end (henceforth invalid)
725  * @param channel_ctx place where local state associated
726  *                   with the channel is stored
727  */
728 static void
729 channel_cleaner (void *cls, const struct GNUNET_CADET_Channel *channel,
730                  void *channel_ctx)
731 {
732   long i = (long) cls;
733
734   GNUNET_log (GNUNET_ERROR_TYPE_INFO,
735               "Incoming channel disconnected at peer %ld\n", i);
736   if (peers_running - 1 == i)
737   {
738     ok++;
739     GNUNET_break (channel == incoming_ch);
740     incoming_ch = NULL;
741   }
742   else if (0L == i)
743   {
744     if (P2P_SIGNAL == test)
745     {
746       ok ++;
747     }
748     GNUNET_break (channel == ch);
749     ch = NULL;
750   }
751   else
752     GNUNET_log (GNUNET_ERROR_TYPE_WARNING,
753                 "Unknown peer! %d\n", i);
754   GNUNET_log (GNUNET_ERROR_TYPE_INFO, " ok: %d\n", ok);
755
756   if (GNUNET_SCHEDULER_NO_TASK != disconnect_task)
757   {
758     GNUNET_SCHEDULER_cancel (disconnect_task);
759     disconnect_task = GNUNET_SCHEDULER_add_now (&disconnect_cadet_peers,
760                                                 (void *) __LINE__);
761   }
762
763   return;
764 }
765
766
767 /**
768  * START THE TESTCASE ITSELF, AS WE ARE CONNECTED TO THE CADET SERVICES.
769  *
770  * Testcase continues when the root receives confirmation of connected peers,
771  * on callback funtion ch.
772  *
773  * @param cls Closure (unsued).
774  * @param tc Task Context.
775  */
776 static void
777 do_test (void *cls, const struct GNUNET_SCHEDULER_TaskContext *tc)
778 {
779   enum GNUNET_CADET_ChannelOption flags;
780
781   if ((GNUNET_SCHEDULER_REASON_SHUTDOWN & tc->reason) != 0)
782     return;
783
784   GNUNET_log (GNUNET_ERROR_TYPE_DEBUG, "test_task\n");
785
786   if (GNUNET_SCHEDULER_NO_TASK != disconnect_task)
787   {
788     GNUNET_SCHEDULER_cancel (disconnect_task);
789   }
790
791   flags = GNUNET_CADET_OPTION_DEFAULT;
792   if (SPEED_REL == test)
793   {
794     test = SPEED;
795     flags |= GNUNET_CADET_OPTION_RELIABLE;
796   }
797   ch = GNUNET_CADET_channel_create (h1, NULL, p_id[1], 1, flags);
798
799   disconnect_task = GNUNET_SCHEDULER_add_delayed (SHORT_TIME,
800                                                   &disconnect_cadet_peers,
801                                                   (void *) __LINE__);
802   if (KEEPALIVE == test)
803     return; /* Don't send any data. */
804
805   GNUNET_log (GNUNET_ERROR_TYPE_DEBUG, "Sending data initializer...\n");
806   data_received = 0;
807   data_sent = 0;
808   ack_received = 0;
809   ack_sent = 0;
810   GNUNET_CADET_notify_transmit_ready (ch, GNUNET_NO,
811                                       GNUNET_TIME_UNIT_FOREVER_REL,
812                                       size_payload, &tmt_rdy, (void *) 0L);
813 }
814
815 /**
816  * Callback to be called when the requested peer information is available
817  *
818  * @param cls the closure from GNUNET_TESTBED_peer_get_information()
819  * @param op the operation this callback corresponds to
820  * @param pinfo the result; will be NULL if the operation has failed
821  * @param emsg error message if the operation has failed;
822  *             NULL if the operation is successfull
823  */
824 static void
825 pi_cb (void *cls,
826        struct GNUNET_TESTBED_Operation *op,
827        const struct GNUNET_TESTBED_PeerInformation *pinfo,
828        const char *emsg)
829 {
830   long i = (long) cls;
831
832   GNUNET_log (GNUNET_ERROR_TYPE_DEBUG, "id callback for %ld\n", i);
833
834   if (NULL == pinfo || NULL != emsg)
835   {
836     GNUNET_log (GNUNET_ERROR_TYPE_ERROR, "pi_cb: %s\n", emsg);
837     abort_test (__LINE__);
838     return;
839   }
840   p_id[i] = pinfo->result.id;
841   GNUNET_log (GNUNET_ERROR_TYPE_DEBUG, "  id: %s\n", GNUNET_i2s (p_id[i]));
842   p_ids++;
843   if (p_ids < 2)
844     return;
845   GNUNET_log (GNUNET_ERROR_TYPE_DEBUG, "Got all IDs, starting test\n");
846   test_task = GNUNET_SCHEDULER_add_delayed (GNUNET_TIME_UNIT_SECONDS,
847                                             &do_test, NULL);
848 }
849
850 /**
851  * test main: start test when all peers are connected
852  *
853  * @param cls Closure.
854  * @param ctx Argument to give to GNUNET_CADET_TEST_cleanup on test end.
855  * @param num_peers Number of peers that are running.
856  * @param peers Array of peers.
857  * @param cadetes Handle to each of the CADETs of the peers.
858  */
859 static void
860 tmain (void *cls,
861        struct GNUNET_CADET_TEST_Context *ctx,
862        unsigned int num_peers,
863        struct GNUNET_TESTBED_Peer **peers,
864        struct GNUNET_CADET_Handle **cadets)
865 {
866   GNUNET_log (GNUNET_ERROR_TYPE_DEBUG, "test main\n");
867   ok = 0;
868   test_ctx = ctx;
869   peers_running = num_peers;
870   GNUNET_assert (peers_running == peers_requested);
871   testbed_peers = peers;
872   h1 = cadets[0];
873   h2 = cadets[num_peers - 1];
874   disconnect_task = GNUNET_SCHEDULER_add_delayed (SHORT_TIME,
875                                                   &disconnect_cadet_peers,
876                                                   (void *) __LINE__);
877   shutdown_handle = GNUNET_SCHEDULER_add_delayed (GNUNET_TIME_UNIT_FOREVER_REL,
878                                                   &shutdown_task, NULL);
879   t_op[0] = GNUNET_TESTBED_peer_get_information (peers[0],
880                                                  GNUNET_TESTBED_PIT_IDENTITY,
881                                                  &pi_cb, (void *) 0L);
882   t_op[1] = GNUNET_TESTBED_peer_get_information (peers[num_peers - 1],
883                                                  GNUNET_TESTBED_PIT_IDENTITY,
884                                                  &pi_cb, (void *) 1L);
885   GNUNET_log (GNUNET_ERROR_TYPE_DEBUG, "requested peer ids\n");
886 }
887
888
889 /**
890  * Main: start test
891  */
892 int
893 main (int argc, char *argv[])
894 {
895   initialized = GNUNET_NO;
896   static uint32_t ports[2];
897   const char *config_file;
898
899   GNUNET_log_setup ("test", "DEBUG", NULL);
900   config_file = "test_cadet.conf";
901
902   GNUNET_log (GNUNET_ERROR_TYPE_DEBUG, "Start\n");
903
904   /* Find out requested size */
905   if (strstr (argv[0], "_2_") != NULL)
906   {
907     GNUNET_log (GNUNET_ERROR_TYPE_DEBUG, "DIRECT CONNECTIONs\n");
908     peers_requested = 2;
909   }
910   else if (strstr (argv[0], "_5_") != NULL)
911   {
912     GNUNET_log (GNUNET_ERROR_TYPE_DEBUG, "5 PEER LINE\n");
913     peers_requested = 5;
914   }
915   else
916   {
917     GNUNET_log (GNUNET_ERROR_TYPE_ERROR, "SIZE UNKNOWN, USING 2\n");
918     peers_requested = 2;
919   }
920
921   /* Find out requested test */
922   if (strstr (argv[0], "_forward") != NULL)
923   {
924     GNUNET_log (GNUNET_ERROR_TYPE_DEBUG, "FORWARD\n");
925     test = FORWARD;
926     test_name = "unicast";
927     ok_goal = 4;
928   }
929   else if (strstr (argv[0], "_signal") != NULL)
930   {
931     GNUNET_log (GNUNET_ERROR_TYPE_DEBUG, "SIGNAL\n");
932     test = P2P_SIGNAL;
933     test_name = "signal";
934     ok_goal = 4;
935   }
936   else if (strstr (argv[0], "_speed_ack") != NULL)
937   {
938     /* Test is supposed to generate the following callbacks:
939      * 1 incoming channel (@dest)
940      * TOTAL_PACKETS received data packet (@dest)
941      * TOTAL_PACKETS received data packet (@orig)
942      * 1 received channel destroy (@dest)
943      */
944     ok_goal = TOTAL_PACKETS * 2 + 2;
945     GNUNET_log (GNUNET_ERROR_TYPE_DEBUG, "SPEED_ACK\n");
946     test = SPEED_ACK;
947     test_name = "speed ack";
948   }
949   else if (strstr (argv[0], "_speed") != NULL)
950   {
951     /* Test is supposed to generate the following callbacks:
952      * 1 incoming channel (@dest)
953      * 1 initial packet (@dest)
954      * TOTAL_PACKETS received data packet (@dest)
955      * 1 received data packet (@orig)
956      * 1 received channel destroy (@dest)
957      */
958     ok_goal = TOTAL_PACKETS + 4;
959     GNUNET_log (GNUNET_ERROR_TYPE_DEBUG, "SPEED\n");
960     if (strstr (argv[0], "_reliable") != NULL)
961     {
962       test = SPEED_REL;
963       test_name = "speed reliable";
964       config_file = "test_cadet_drop.conf";
965     }
966     else
967     {
968       test = SPEED;
969       test_name = "speed";
970     }
971   }
972   else if (strstr (argv[0], "_keepalive") != NULL)
973   {
974     test = KEEPALIVE;
975     /* Test is supposed to generate the following callbacks:
976      * 1 incoming channel (@dest)
977      * [wait]
978      * 1 received channel destroy (@dest)
979      */
980     ok_goal = 2;
981   }
982   else
983   {
984     GNUNET_log (GNUNET_ERROR_TYPE_DEBUG, "UNKNOWN\n");
985     test = SETUP;
986     ok_goal = 0;
987   }
988
989   if (strstr (argv[0], "backwards") != NULL)
990   {
991     GNUNET_log (GNUNET_ERROR_TYPE_DEBUG, "BACKWARDS (LEAF TO ROOT)\n");
992     test_backwards = GNUNET_YES;
993     GNUNET_asprintf (&test_name, "backwards %s", test_name);
994   }
995
996   p_ids = 0;
997   ports[0] = 1;
998   ports[1] = 0;
999   GNUNET_CADET_TEST_run ("test_cadet_small",
1000                         config_file,
1001                         peers_requested,
1002                         &tmain,
1003                         NULL, /* tmain cls */
1004                         &incoming_channel,
1005                         &channel_cleaner,
1006                         handlers,
1007                         ports);
1008
1009   if (ok_goal > ok)
1010   {
1011     GNUNET_log (GNUNET_ERROR_TYPE_ERROR,
1012                 "FAILED! (%d/%d)\n", ok, ok_goal);
1013     return 1;
1014   }
1015   GNUNET_log (GNUNET_ERROR_TYPE_DEBUG, "success\n");
1016   return 0;
1017 }
1018
1019 /* end of test_cadet.c */
1020