small API change: do no longer pass rarely needed GNUNET_SCHEDULER_TaskContext to...
[oweals/gnunet.git] / src / testbed / testbed_api_testbed.c
1 /*
2   This file is part of GNUnet
3   Copyright (C) 2008--2013 GNUnet e.V.
4
5   GNUnet is free software; you can redistribute it and/or modify
6   it under the terms of the GNU General Public License as published
7   by the Free Software Foundation; either version 3, or (at your
8   option) any later version.
9
10   GNUnet is distributed in the hope that it will be useful, but
11   WITHOUT ANY WARRANTY; without even the implied warranty of
12   MERCHANTABILITY or FITNESS FOR A PARTICULAR PURPOSE.  See the GNU
13   General Public License for more details.
14
15   You should have received a copy of the GNU General Public License
16   along with GNUnet; see the file COPYING.  If not, write to the
17   Free Software Foundation, Inc., 51 Franklin Street, Fifth Floor,
18   Boston, MA 02110-1301, USA.
19 */
20
21 /**
22  * @file testbed/testbed_api_testbed.c
23  * @brief high-level testbed management
24  * @author Christian Grothoff
25  * @author Sree Harsha Totakura
26  */
27
28 #include "platform.h"
29 #include "gnunet_util_lib.h"
30 #include "gnunet_testbed_service.h"
31 #include "testbed_api.h"
32 #include "testbed_api_peers.h"
33 #include "testbed_api_hosts.h"
34 #include "testbed_api_topology.h"
35
36 /**
37  * Generic loggins shorthand
38  */
39 #define LOG(kind,...)                                           \
40   GNUNET_log_from (kind, "testbed-api-testbed", __VA_ARGS__)
41
42 /**
43  * Debug logging shortcut
44  */
45 #define DEBUG(...)                              \
46   LOG (GNUNET_ERROR_TYPE_DEBUG, __VA_ARGS__)
47
48 /**
49  * The default setup timeout in seconds
50  */
51 #define DEFAULT_SETUP_TIMEOUT 300
52
53
54 /**
55  * Configuration section for testbed
56  */
57 #define TESTBED_CONFIG_SECTION "testbed"
58
59 /**
60  * Option string for the maximum number of edges a peer is permitted to have
61  * while generating scale free topology
62  */
63 #define SCALE_FREE_CAP "SCALE_FREE_TOPOLOGY_CAP"
64
65 /**
66  * Option string for the number of edges to be established when adding a new
67  * node to the scale free network
68  */
69 #define SCALE_FREE_M "SCALE_FREE_TOPOLOGY_M"
70
71 /**
72  * Context information for the operation we start
73  */
74 struct RunContextOperation
75 {
76   /**
77    * The testbed operation handle
78    */
79   struct GNUNET_TESTBED_Operation *op;
80
81   /**
82    * Context information for GNUNET_TESTBED_run()
83    */
84   struct GNUNET_TESTBED_RunHandle *rc;
85
86   /**
87    * Closure
88    */
89   void *cls;
90
91 };
92
93
94 /**
95  * States of RunContext
96  */
97 enum State
98 {
99   /**
100    * Initial state
101    */
102   RC_INIT = 0,
103
104   /**
105    * Controllers on given hosts started and linked
106    */
107   RC_LINKED,
108
109   /**
110    * Peers are created
111    */
112   RC_PEERS_CREATED,
113
114   /**
115    * The testbed run is ready and the master callback can be called now. At this
116    * time the peers are all started and if a topology is provided in the
117    * configuration the topology would have been attempted
118    */
119   RC_READY,
120
121   /* /\** */
122   /*  * Peers are stopped */
123   /*  *\/ */
124   /* RC_PEERS_STOPPED, */
125
126   /* /\** */
127   /*  * Peers are destroyed */
128   /*  *\/ */
129   /* RC_PEERS_DESTROYED */
130
131   /**
132    * All peers shutdown (stopped and destroyed)
133    */
134   RC_PEERS_SHUTDOWN
135 };
136
137
138 /**
139  * Context for host compability checks
140  */
141 struct CompatibilityCheckContext
142 {
143   /**
144    * The run context
145    */
146   struct GNUNET_TESTBED_RunHandle *rc;
147
148   /**
149    * Handle for the compability check
150    */
151   struct GNUNET_TESTBED_HostHabitableCheckHandle *h;
152
153   /**
154    * Index of the host in the run context's hosts array
155    */
156   unsigned int index;
157 };
158
159
160 /**
161  * Testbed Run Handle
162  */
163 struct GNUNET_TESTBED_RunHandle
164 {
165   /**
166    * The controller handle
167    */
168   struct GNUNET_TESTBED_Controller *c;
169
170   /**
171    * The configuration of the controller. This is based on the cfg given to the
172    * function GNUNET_TESTBED_run(). We also use this config as a template while
173    * for peers
174    */
175   struct GNUNET_CONFIGURATION_Handle *cfg;
176
177   /**
178    * Handle to the host on which the controller runs
179    */
180   struct GNUNET_TESTBED_Host *h;
181
182   /**
183    * The handle to the controller process
184    */
185   struct GNUNET_TESTBED_ControllerProc *cproc;
186
187   /**
188    * The callback to use as controller callback
189    */
190   GNUNET_TESTBED_ControllerCallback cc;
191
192   /**
193    * The pointer to the controller callback
194    */
195   void *cc_cls;
196
197   /**
198    * The trusted IP string
199    */
200   char *trusted_ip;
201
202   /**
203    * TestMaster callback to call when testbed initialization is done
204    */
205   GNUNET_TESTBED_TestMaster test_master;
206
207   /**
208    * The closure for the TestMaster callback
209    */
210   void *test_master_cls;
211
212   /**
213    * A hashmap for operations started by us
214    */
215   struct GNUNET_CONTAINER_MultiHashMap32 *rcop_map;
216
217   /**
218    * An array of hosts loaded from the hostkeys file
219    */
220   struct GNUNET_TESTBED_Host **hosts;
221
222   /**
223    * Array of compatibility check contexts
224    */
225   struct CompatibilityCheckContext *hclist;
226
227   /**
228    * Array of peers which we create
229    */
230   struct GNUNET_TESTBED_Peer **peers;
231
232   /**
233    * The topology generation operation. Will be null if no topology is set in
234    * the configuration
235    */
236   struct GNUNET_TESTBED_Operation *topology_operation;
237
238   /**
239    * The file containing topology data. Only used if the topology is set to 'FROM_FILE'
240    */
241   char *topo_file;
242
243   /**
244    * Host registration handle
245    */
246   struct GNUNET_TESTBED_HostRegistrationHandle *reg_handle;
247
248   /**
249    * Profiling start time
250    */
251   struct GNUNET_TIME_Absolute pstart_time;
252
253   /**
254    * Host registration task
255    */
256   struct GNUNET_SCHEDULER_Task * register_hosts_task;
257
258   /**
259    * Task to be run of a timeout
260    */
261   struct GNUNET_SCHEDULER_Task * timeout_task;
262
263   /**
264    * Task run upon shutdown interrupts
265    */
266   struct GNUNET_SCHEDULER_Task * interrupt_task;
267
268   /**
269    * The event mask for the controller
270    */
271   uint64_t event_mask;
272
273   /**
274    * State of this context
275    */
276   enum State state;
277
278   /**
279    * The topology which has to be achieved with the peers started in this context
280    */
281   enum GNUNET_TESTBED_TopologyOption topology;
282
283   /**
284    * Have we already shutdown
285    */
286   int shutdown;
287
288   /**
289    * Number of hosts in the given host file
290    */
291   unsigned int num_hosts;
292
293   /**
294    * Number of registered hosts. Also used as a counter while checking
295    * habitabillity of hosts
296    */
297   unsigned int reg_hosts;
298
299   /**
300    * Current peer count for an operation; Set this to 0 and increment for each
301    * successful operation on a peer
302    */
303   unsigned int peer_count;
304
305   /**
306    * number of peers to start
307    */
308   unsigned int num_peers;
309
310   /**
311    * Expected overlay connects. Should be zero if no topology is relavant
312    */
313   unsigned int num_oc;
314
315   /**
316    * Number of random links to established
317    */
318   unsigned int random_links;
319
320   /**
321    * the number of overlay link connection attempts that succeeded
322    */
323   unsigned int links_succeeded;
324
325   /**
326    * the number of overlay link connection attempts that failed
327    */
328   unsigned int links_failed;
329
330 };
331
332
333 /**
334  * Return a 32-bit key from a pointer
335  *
336  * @param rcop the pointer
337  * @return 32-bit key
338  */
339 static uint32_t
340 rcop_key (void *rcop)
341 {
342   return * ((uint32_t *) &rcop);
343 }
344
345
346 /**
347  * Context information used for finding a pointer in the rcop_map
348  */
349 struct SearchContext
350 {
351   /**
352    * The operation pointer to look for
353    */
354   struct GNUNET_TESTBED_Operation *query;
355
356   /**
357    * The Run context operation which has the operation being queried
358    */
359   struct RunContextOperation *result;
360 };
361
362
363 /**
364  * Iterator for searching over the elements matching a given query
365  *
366  * @param cls the SearchContext
367  * @param key the 32-bit key
368  * @param value the RunContextOperation element
369  * @return GNUNET_YES to continue iteration; GNUNET_NO to cancel it
370  */
371 static int
372 search_iterator (void *cls, uint32_t key, void *value)
373 {
374   struct RunContextOperation *rcop = value;
375   struct SearchContext *sc = cls;
376
377   GNUNET_assert (NULL != rcop);
378   if (sc->query == rcop->op)
379   {
380     GNUNET_assert (NULL == sc->result);
381     sc->result = rcop;
382     return GNUNET_NO;
383   }
384   return GNUNET_YES;
385 }
386
387
388 /**
389  * Initiate a search for the given operation in the rcop_map
390  *
391  * @param rc the RunContext whose rcop_map will be searched for the given
392  *          operation
393  * @param op the given operation to search for
394  * @return the matching RunContextOperation if found; NULL if not
395  */
396 static struct RunContextOperation *
397 search_rcop (struct GNUNET_TESTBED_RunHandle *rc, struct GNUNET_TESTBED_Operation *op)
398 {
399   struct SearchContext sc;
400
401   sc.query = op;
402   sc.result = NULL;
403   if (GNUNET_SYSERR ==
404       GNUNET_CONTAINER_multihashmap32_get_multiple (rc->rcop_map,
405                                                     rcop_key (op),
406                                                     &search_iterator,
407                                                     &sc))
408   {
409     GNUNET_assert (NULL != sc.result);
410     return sc.result;
411   }
412   return NULL;
413 }
414
415
416 /**
417  * Insert an RunContextOperation into the rcop_map of the given RunContext
418  *
419  * @param rc the RunContext into whose map is to be used for insertion
420  * @param rcop the RunContextOperation to insert
421  */
422 static void
423 insert_rcop (struct GNUNET_TESTBED_RunHandle *rc, struct RunContextOperation *rcop)
424 {
425   GNUNET_assert (GNUNET_OK ==
426                  GNUNET_CONTAINER_multihashmap32_put (rc->rcop_map,
427                                                       rcop_key (rcop->op), rcop,
428                                                       GNUNET_CONTAINER_MULTIHASHMAPOPTION_MULTIPLE));
429 }
430
431
432 /**
433  * Remove a RunContextOperation from the rcop_map of the given RunContext
434  *
435  * @param rc the RunContext from whose map the given RunContextOperaton has to
436  *          be removed
437  * @param rcop the RunContextOperation
438  */
439 static void
440 remove_rcop (struct GNUNET_TESTBED_RunHandle *rc, struct RunContextOperation *rcop)
441 {
442   GNUNET_assert (GNUNET_YES ==
443                  GNUNET_CONTAINER_multihashmap32_remove (rc->rcop_map,
444                                                          rcop_key (rcop->op),
445                                                          rcop));
446 }
447
448 /**
449  * Assuming all peers have been destroyed cleanup run handle
450  *
451  * @param rc the run context
452  */
453 static void
454 cleanup (struct GNUNET_TESTBED_RunHandle *rc)
455 {
456   unsigned int hid;
457
458   GNUNET_assert (NULL == rc->register_hosts_task);
459   GNUNET_assert (NULL == rc->reg_handle);
460   GNUNET_assert (NULL == rc->peers);
461   GNUNET_assert (NULL == rc->hclist);
462   GNUNET_assert (RC_PEERS_SHUTDOWN == rc->state);
463   GNUNET_assert (0 == GNUNET_CONTAINER_multihashmap32_size (rc->rcop_map));
464   GNUNET_CONTAINER_multihashmap32_destroy (rc->rcop_map);
465   if (NULL != rc->c)
466     GNUNET_TESTBED_controller_disconnect (rc->c);
467   if (NULL != rc->cproc)
468     GNUNET_TESTBED_controller_stop (rc->cproc);
469   if (NULL != rc->h)
470     GNUNET_TESTBED_host_destroy (rc->h);
471   for (hid = 0; hid < rc->num_hosts; hid++)
472     GNUNET_TESTBED_host_destroy (rc->hosts[hid]);
473   GNUNET_free_non_null (rc->hosts);
474   if (NULL != rc->cfg)
475     GNUNET_CONFIGURATION_destroy (rc->cfg);
476   GNUNET_free_non_null (rc->topo_file);
477   GNUNET_free_non_null (rc->trusted_ip);
478   GNUNET_free (rc);
479 }
480
481
482 /**
483  * Iterator for cleaning up elements from rcop_map
484  *
485  * @param cls the RunContext
486  * @param key the 32-bit key
487  * @param value the RunContextOperation element
488  * @return always GNUNET_YES
489  */
490 static int
491 rcop_cleanup_iterator (void *cls, uint32_t key, void *value)
492 {
493   struct GNUNET_TESTBED_RunHandle *rc = cls;
494   struct RunContextOperation *rcop = value;
495
496   GNUNET_assert (rc == rcop->rc);
497   remove_rcop (rc, rcop);
498   GNUNET_TESTBED_operation_done (rcop->op);
499   GNUNET_free (rcop);
500   return GNUNET_YES;
501 }
502
503
504 /**
505  * Cancels operations and tasks which are assigned to the given run context
506  *
507  * @param rc the RunContext
508  */
509 static void
510 rc_cleanup_operations (struct GNUNET_TESTBED_RunHandle *rc)
511 {
512   struct CompatibilityCheckContext *hc;
513   unsigned int nhost;
514
515   if (NULL != rc->hclist)
516   {
517     for (nhost = 0; nhost < rc->num_hosts; nhost++)
518     {
519       hc = &rc->hclist[nhost];
520       if (NULL != hc->h)
521         GNUNET_TESTBED_is_host_habitable_cancel (hc->h);
522     }
523     GNUNET_free (rc->hclist);
524     rc->hclist = NULL;
525   }
526   /* Stop register hosts task if it is running */
527   if (NULL != rc->register_hosts_task)
528   {
529     GNUNET_SCHEDULER_cancel (rc->register_hosts_task);
530     rc->register_hosts_task = NULL;
531   }
532   if (NULL != rc->timeout_task)
533   {
534     GNUNET_SCHEDULER_cancel (rc->timeout_task);
535     rc->timeout_task = NULL;
536   }
537   if (NULL != rc->reg_handle)
538   {
539     GNUNET_TESTBED_cancel_registration (rc->reg_handle);
540     rc->reg_handle = NULL;
541   }
542   if (NULL != rc->topology_operation)
543   {
544     GNUNET_TESTBED_operation_done (rc->topology_operation);
545     rc->topology_operation = NULL;
546   }
547   /* cancel any exiting operations */
548   GNUNET_assert (GNUNET_SYSERR !=
549                  GNUNET_CONTAINER_multihashmap32_iterate (rc->rcop_map,
550                                                           &rcop_cleanup_iterator,
551                                                           rc));
552 }
553
554
555 /**
556  * Cancels the scheduled interrupt task
557  *
558  * @param rc the run context
559  */
560 static void
561 cancel_interrupt_task (struct GNUNET_TESTBED_RunHandle *rc)
562 {
563   GNUNET_SCHEDULER_cancel (rc->interrupt_task);
564   rc->interrupt_task = NULL;
565 }
566
567
568 /**
569  * This callback will be called when all the operations are completed
570  * (done/cancelled)
571  *
572  * @param cls run context
573  */
574 static void
575 wait_op_completion (void *cls)
576 {
577   struct GNUNET_TESTBED_RunHandle *rc = cls;
578   struct RunContextOperation *rcop;
579
580   if ( (NULL == rc->cproc)
581        || (NULL == rc->c)
582        || (GNUNET_YES == rc->shutdown) )
583   {
584     if (NULL != rc->peers)
585     {
586       GNUNET_free (rc->peers);
587       rc->peers = NULL;
588     }
589     goto cleanup_;
590   }
591   if (NULL == rc->peers)
592     goto cleanup_;
593   rc->shutdown = GNUNET_YES;
594   rcop = GNUNET_new (struct RunContextOperation);
595   rcop->rc = rc;
596   rcop->op = GNUNET_TESTBED_shutdown_peers (rc->c, rcop, NULL, NULL);
597   GNUNET_assert (NULL != rcop->op);
598   DEBUG ("Shutting down peers\n");
599   rc->pstart_time = GNUNET_TIME_absolute_get ();
600   insert_rcop (rc, rcop);
601   return;
602
603  cleanup_:
604   rc->state = RC_PEERS_SHUTDOWN;
605   cancel_interrupt_task (rc);
606   cleanup (rc);
607 }
608
609
610 /**
611  * Task run upon interrupts (SIGINT, SIGTERM) and upon scheduler shutdown.
612  *
613  * @param cls the RunContext which has to be acted upon
614  */
615 static void
616 interrupt (void *cls)
617 {
618   struct GNUNET_TESTBED_RunHandle *rc = cls;
619   struct GNUNET_TESTBED_Controller *c = rc->c;
620   unsigned int size;
621
622   /* reschedule */
623   rc->interrupt_task = GNUNET_SCHEDULER_add_delayed
624       (GNUNET_TIME_UNIT_FOREVER_REL, &interrupt, rc);
625   rc_cleanup_operations (rc);
626   if ( (GNUNET_NO == rc->shutdown) &&
627        (NULL != c) &&
628        (NULL != c->opc_map) &&
629        (0 != (size = GNUNET_CONTAINER_multihashmap32_size (c->opc_map))))
630   {
631     LOG (GNUNET_ERROR_TYPE_WARNING,
632          "Shutdown postponed as there are %u operations currently active\n",
633          size);
634     c->opcq_empty_cb = &wait_op_completion;
635     c->opcq_empty_cls = rc;
636     return;
637   }
638   wait_op_completion (rc);
639 }
640
641
642 /**
643  * Function to return the string representation of the duration between current
644  * time and `pstart_time' in `RunContext'
645  *
646  * @param rc the RunContext
647  * @return the representation string; this is NOT reentrant
648  */
649 static const char *
650 prof_time (struct GNUNET_TESTBED_RunHandle *rc)
651 {
652   struct GNUNET_TIME_Relative ptime;
653
654   ptime = GNUNET_TIME_absolute_get_duration (rc->pstart_time);
655   return GNUNET_STRINGS_relative_time_to_string (ptime, GNUNET_YES);
656 }
657
658
659 /**
660  * Task for starting peers
661  *
662  * @param cls the RunHandle
663  */
664 static void
665 start_peers_task (void *cls)
666 {
667   struct GNUNET_TESTBED_RunHandle *rc = cls;
668   struct RunContextOperation *rcop;
669   unsigned int peer;
670
671   DEBUG ("Starting Peers\n");
672   rc->pstart_time = GNUNET_TIME_absolute_get ();
673   for (peer = 0; peer < rc->num_peers; peer++)
674   {
675     rcop = GNUNET_new (struct RunContextOperation);
676     rcop->rc = rc;
677     rcop->op  = GNUNET_TESTBED_peer_start (NULL, rc->peers[peer], NULL, NULL);
678     GNUNET_assert (NULL != rcop->op);
679     rcop->cls = rc->peers[peer];
680     insert_rcop (rc, rcop);
681   }
682   rc->peer_count = 0;
683 }
684
685
686 /**
687  * Functions of this signature are called when a peer has been successfully
688  * created
689  *
690  * @param cls the closure from GNUNET_TESTBED_peer_create()
691  * @param peer the handle for the created peer; NULL on any error during
692  *          creation
693  * @param emsg NULL if peer is not NULL; else MAY contain the error description
694  */
695 static void
696 peer_create_cb (void *cls, struct GNUNET_TESTBED_Peer *peer, const char *emsg)
697 {
698   struct RunContextOperation *rcop = cls;
699   struct GNUNET_TESTBED_RunHandle *rc;
700
701   GNUNET_assert (NULL != rcop);
702   GNUNET_assert (NULL != (rc = rcop->rc));
703   remove_rcop (rc, rcop);
704   GNUNET_TESTBED_operation_done (rcop->op);
705   GNUNET_free (rcop);
706   if (NULL == peer)
707   {
708     if (NULL != emsg)
709       LOG (GNUNET_ERROR_TYPE_ERROR, "Error while creating a peer: %s\n",
710            emsg);
711     GNUNET_SCHEDULER_shutdown ();
712     return;
713   }
714   rc->peers[rc->peer_count] = peer;
715   rc->peer_count++;
716   if (rc->peer_count < rc->num_peers)
717     return;
718   DEBUG ("%u peers created in %s\n", rc->num_peers, prof_time (rc));
719   rc->state = RC_PEERS_CREATED;
720   GNUNET_SCHEDULER_add_now (&start_peers_task, rc);
721 }
722
723
724 /**
725  * call test master callback
726  *
727  * @param rc the RunContext
728  */
729 static void
730 call_master (struct GNUNET_TESTBED_RunHandle *rc)
731 {
732   GNUNET_SCHEDULER_cancel (rc->timeout_task);
733   rc->timeout_task = NULL;
734   if (NULL != rc->test_master)
735     rc->test_master (rc->test_master_cls, rc, rc->num_peers, rc->peers,
736                      rc->links_succeeded, rc->links_failed);
737 }
738
739
740 /**
741  * Callbacks of this type are called when topology configuration is completed
742  *
743  * @param cls the operation closure given to
744  *          GNUNET_TESTBED_overlay_configure_topology_va() and
745  *          GNUNET_TESTBED_overlay_configure() calls
746  * @param nsuccess the number of successful overlay connects
747  * @param nfailures the number of overlay connects which failed
748  */
749 static void
750 topology_completion_callback (void *cls, unsigned int nsuccess,
751                               unsigned int nfailures)
752 {
753   struct GNUNET_TESTBED_RunHandle *rc = cls;
754
755   DEBUG ("Overlay topology generated in %s\n", prof_time (rc));
756   GNUNET_TESTBED_operation_done (rc->topology_operation);
757   rc->topology_operation = NULL;
758   rc->links_succeeded = nsuccess;
759   rc->links_failed = nfailures;
760   rc->state = RC_READY;
761   call_master (rc);
762 }
763
764
765 /**
766  * Function to create peers
767  *
768  * @param rc the RunContext
769  */
770 static void
771 create_peers (struct GNUNET_TESTBED_RunHandle *rc)
772 {
773   struct RunContextOperation *rcop;
774   unsigned int peer;
775
776   DEBUG ("Creating peers\n");
777   rc->pstart_time = GNUNET_TIME_absolute_get ();
778   rc->peers =
779       GNUNET_malloc (sizeof (struct GNUNET_TESTBED_Peer *) * rc->num_peers);
780   GNUNET_assert (NULL != rc->c);
781   rc->peer_count = 0;
782   for (peer = 0; peer < rc->num_peers; peer++)
783   {
784     rcop = GNUNET_new (struct RunContextOperation);
785     rcop->rc = rc;
786     rcop->op =
787         GNUNET_TESTBED_peer_create (rc->c,
788                                     (0 ==
789                                      rc->num_hosts) ? rc->h : rc->hosts[peer %
790                                                                         rc->num_hosts],
791                                     rc->cfg, &peer_create_cb, rcop);
792     GNUNET_assert (NULL != rcop->op);
793     insert_rcop (rc, rcop);
794   }
795 }
796
797
798 /**
799  * Signature of the event handler function called by the
800  * respective event controller.
801  *
802  * @param cls closure
803  * @param event information about the event
804  */
805 static void
806 event_cb (void *cls, const struct GNUNET_TESTBED_EventInformation *event)
807 {
808   struct GNUNET_TESTBED_RunHandle *rc = cls;
809   struct RunContextOperation *rcop;
810
811   if (RC_INIT == rc->state)
812   {
813     switch (event->type)
814     {
815     case GNUNET_TESTBED_ET_OPERATION_FINISHED:
816       rcop = event->op_cls;
817       if (NULL != event->details.operation_finished.emsg)
818       {
819         LOG (GNUNET_ERROR_TYPE_ERROR, _("Linking controllers failed. Exiting"));
820         GNUNET_SCHEDULER_shutdown ();
821       }
822       else
823         rc->reg_hosts++;
824       GNUNET_assert (event->op == rcop->op);
825       remove_rcop (rc, rcop);
826       GNUNET_TESTBED_operation_done (rcop->op);
827       GNUNET_free (rcop);
828       if (rc->reg_hosts == rc->num_hosts)
829       {
830         rc->state = RC_LINKED;
831         create_peers (rc);
832       }
833       return;
834     default:
835       GNUNET_break (0);
836       GNUNET_SCHEDULER_shutdown ();
837       return;
838     }
839   }
840   if (GNUNET_TESTBED_ET_OPERATION_FINISHED != event->type)
841     goto call_cc;
842   if (NULL == (rcop = search_rcop (rc, event->op)))
843     goto call_cc;
844   remove_rcop (rc, rcop);
845   GNUNET_TESTBED_operation_done (rcop->op);
846   GNUNET_free (rcop);
847   if ( (GNUNET_NO == rc->shutdown)
848        && (NULL != event->details.operation_finished.emsg) )
849   {
850     LOG (GNUNET_ERROR_TYPE_ERROR, "A operation has failed with error: %s\n",
851          event->details.operation_finished.emsg);
852     GNUNET_SCHEDULER_shutdown ();
853     return;
854   }
855   GNUNET_assert (GNUNET_YES == rc->shutdown);
856   switch (rc->state)
857   {
858   case RC_LINKED:
859   case RC_PEERS_CREATED:
860   case RC_READY:
861     rc->state = RC_PEERS_SHUTDOWN;
862     GNUNET_free_non_null (rc->peers);
863     rc->peers = NULL;
864     DEBUG ("Peers shut down in %s\n", prof_time (rc));
865     GNUNET_SCHEDULER_shutdown ();
866     break;
867   default:
868     GNUNET_assert (0);
869   }
870   return;
871
872 call_cc:
873   if ((0 != (rc->event_mask & (1LL << event->type))) && (NULL != rc->cc))
874     rc->cc (rc->cc_cls, event);
875   if (GNUNET_TESTBED_ET_PEER_START != event->type)
876     return;
877   if (NULL == (rcop = search_rcop (rc, event->op))) /* Not our operation */
878     return;
879   remove_rcop (rc, rcop);
880   GNUNET_TESTBED_operation_done (rcop->op);
881   GNUNET_free (rcop);
882   rc->peer_count++;
883   if (rc->peer_count < rc->num_peers)
884     return;
885   DEBUG ("%u peers started in %s\n", rc->num_peers, prof_time (rc));
886   if (GNUNET_TESTBED_TOPOLOGY_NONE != rc->topology)
887   {
888     switch (rc->topology)
889     {
890     case GNUNET_TESTBED_TOPOLOGY_NONE:
891       GNUNET_assert (0);
892     case GNUNET_TESTBED_TOPOLOGY_ERDOS_RENYI:
893     case GNUNET_TESTBED_TOPOLOGY_SMALL_WORLD_RING:
894     case GNUNET_TESTBED_TOPOLOGY_SMALL_WORLD:
895       rc->topology_operation =
896           GNUNET_TESTBED_overlay_configure_topology (NULL, rc->num_peers,
897                                                      rc->peers, &rc->num_oc,
898                                                      &topology_completion_callback,
899                                                      rc,
900                                                      rc->topology,
901                                                      rc->random_links,
902                                                      GNUNET_TESTBED_TOPOLOGY_OPTION_END);
903       break;
904     case GNUNET_TESTBED_TOPOLOGY_FROM_FILE:
905       GNUNET_assert (NULL != rc->topo_file);
906       rc->topology_operation =
907           GNUNET_TESTBED_overlay_configure_topology (NULL, rc->num_peers,
908                                                      rc->peers, &rc->num_oc,
909                                                      &topology_completion_callback,
910                                                      rc,
911                                                      rc->topology,
912                                                      rc->topo_file,
913                                                      GNUNET_TESTBED_TOPOLOGY_OPTION_END);
914       break;
915     case GNUNET_TESTBED_TOPOLOGY_SCALE_FREE:
916       {
917         unsigned long long number;
918         unsigned int cap;
919         GNUNET_assert (GNUNET_OK ==
920                        GNUNET_CONFIGURATION_get_value_number (rc->cfg, TESTBED_CONFIG_SECTION,
921                                                               SCALE_FREE_CAP,
922                                                               &number));
923         cap = (unsigned int) number;
924         GNUNET_assert (GNUNET_OK ==
925                        GNUNET_CONFIGURATION_get_value_number (rc->cfg, TESTBED_CONFIG_SECTION,
926                                                               SCALE_FREE_M,
927                                                               &number));
928         rc->topology_operation =
929             GNUNET_TESTBED_overlay_configure_topology (NULL, rc->num_peers,
930                                                        rc->peers, &rc->num_oc,
931                                                        &topology_completion_callback,
932                                                        rc,
933                                                        rc->topology,
934                                                        cap,    /* uint16_t */
935                                                        (unsigned int) number, /* uint8_t */
936                                                        GNUNET_TESTBED_TOPOLOGY_OPTION_END);
937       }
938       break;
939     default:
940       rc->topology_operation =
941           GNUNET_TESTBED_overlay_configure_topology (NULL, rc->num_peers,
942                                                      rc->peers, &rc->num_oc,
943                                                      &topology_completion_callback,
944                                                      rc,
945                                                      rc->topology,
946                                                      GNUNET_TESTBED_TOPOLOGY_OPTION_END);
947     }
948     if (NULL == rc->topology_operation)
949       LOG (GNUNET_ERROR_TYPE_WARNING,
950            "Not generating a topology. Check number of peers\n");
951     else
952     {
953       DEBUG ("Creating overlay topology\n");
954       rc->pstart_time = GNUNET_TIME_absolute_get ();
955       return;
956     }
957   }
958   rc->state = RC_READY;
959   call_master (rc);
960 }
961
962
963 /**
964  * Task to register all hosts available in the global host list
965  *
966  * @param cls the RunContext
967  */
968 static void
969 register_hosts (void *cls);
970
971
972 /**
973  * Callback which will be called to after a host registration succeeded or failed
974  *
975  * @param cls the closure
976  * @param emsg the error message; NULL if host registration is successful
977  */
978 static void
979 host_registration_completion (void *cls, const char *emsg)
980 {
981   struct GNUNET_TESTBED_RunHandle *rc = cls;
982
983   rc->reg_handle = NULL;
984   if (NULL != emsg)
985   {
986     LOG (GNUNET_ERROR_TYPE_WARNING,
987          _("Host registration failed for a host. Error: %s\n"), emsg);
988     GNUNET_SCHEDULER_shutdown ();
989     return;
990   }
991   rc->register_hosts_task = GNUNET_SCHEDULER_add_now (&register_hosts, rc);
992 }
993
994
995 /**
996  * Task to register all hosts available in the global host list
997  *
998  * @param cls RunContext
999  */
1000 static void
1001 register_hosts (void *cls)
1002 {
1003   struct GNUNET_TESTBED_RunHandle *rc = cls;
1004   struct RunContextOperation *rcop;
1005   unsigned int slave;
1006
1007   rc->register_hosts_task = NULL;
1008   if (rc->reg_hosts == rc->num_hosts)
1009   {
1010     DEBUG ("All hosts successfully registered\n");
1011     /* Start slaves */
1012     for (slave = 0; slave < rc->num_hosts; slave++)
1013     {
1014       rcop = GNUNET_new (struct RunContextOperation);
1015       rcop->rc = rc;
1016       rcop->op =
1017           GNUNET_TESTBED_controller_link (rcop, rc->c, rc->hosts[slave],
1018                                           rc->h, GNUNET_YES);
1019       GNUNET_assert (NULL != rcop->op);
1020       insert_rcop (rc, rcop);
1021     }
1022     rc->reg_hosts = 0;
1023     return;
1024   }
1025   rc->reg_handle =
1026       GNUNET_TESTBED_register_host (rc->c, rc->hosts[rc->reg_hosts],
1027                                     host_registration_completion, rc);
1028   rc->reg_hosts++;
1029 }
1030
1031
1032 /**
1033  * Callback to signal successfull startup of the controller process
1034  *
1035  * @param cls the closure from GNUNET_TESTBED_controller_start()
1036  * @param cfg the configuration with which the controller has been started;
1037  *          NULL if status is not GNUNET_OK
1038  * @param status GNUNET_OK if the startup is successfull; GNUNET_SYSERR if not,
1039  *          GNUNET_TESTBED_controller_stop() shouldn't be called in this case
1040  */
1041 static void
1042 controller_status_cb (void *cls, const struct GNUNET_CONFIGURATION_Handle *cfg,
1043                       int status)
1044 {
1045   struct GNUNET_TESTBED_RunHandle *rc = cls;
1046   uint64_t event_mask;
1047
1048   if (status != GNUNET_OK)
1049   {
1050     rc->cproc = NULL;
1051     GNUNET_log (GNUNET_ERROR_TYPE_ERROR,
1052                 _("Controller crash detected. Shutting down.\n"));
1053     GNUNET_SCHEDULER_shutdown ();
1054     return;
1055   }
1056   GNUNET_CONFIGURATION_destroy (rc->cfg);
1057   rc->cfg = GNUNET_CONFIGURATION_dup (cfg);
1058   event_mask = rc->event_mask;
1059   event_mask |= (1LL << GNUNET_TESTBED_ET_OPERATION_FINISHED);
1060   event_mask |= (1LL << GNUNET_TESTBED_ET_PEER_START);
1061   if (rc->topology < GNUNET_TESTBED_TOPOLOGY_NONE)
1062     event_mask |= GNUNET_TESTBED_ET_CONNECT;
1063   rc->c =
1064       GNUNET_TESTBED_controller_connect (rc->h, event_mask, &event_cb, rc);
1065   if (0 < rc->num_hosts)
1066   {
1067     rc->reg_hosts = 0;
1068     rc->register_hosts_task = GNUNET_SCHEDULER_add_now (&register_hosts, rc);
1069     return;
1070   }
1071   rc->state = RC_LINKED;
1072   create_peers (rc);
1073 }
1074
1075
1076 /**
1077  * Callback function invoked for each interface found.
1078  *
1079  * @param cls closure
1080  * @param name name of the interface (can be NULL for unknown)
1081  * @param isDefault is this presumably the default interface
1082  * @param addr address of this interface (can be NULL for unknown or unassigned)
1083  * @param broadcast_addr the broadcast address (can be NULL for unknown or unassigned)
1084  * @param netmask the network mask (can be NULL for unknown or unassigned))
1085  * @param addrlen length of the address
1086  * @return GNUNET_OK to continue iteration, GNUNET_SYSERR to abort
1087  */
1088 static int
1089 netint_proc (void *cls, const char *name, int isDefault,
1090              const struct sockaddr *addr, const struct sockaddr *broadcast_addr,
1091              const struct sockaddr *netmask, socklen_t addrlen)
1092 {
1093   struct GNUNET_TESTBED_RunHandle *rc = cls;
1094   char hostip[NI_MAXHOST];
1095   char *buf;
1096
1097   if (sizeof (struct sockaddr_in) != addrlen)
1098     return GNUNET_OK;           /* Only consider IPv4 for now */
1099   if (0 !=
1100       getnameinfo (addr, addrlen, hostip, NI_MAXHOST, NULL, 0, NI_NUMERICHOST))
1101     GNUNET_log_strerror (GNUNET_ERROR_TYPE_WARNING, "getnameinfo");
1102   if (NULL == rc->trusted_ip)
1103   {
1104     rc->trusted_ip = GNUNET_strdup (hostip);
1105     return GNUNET_YES;
1106   }
1107   (void) GNUNET_asprintf (&buf, "%s; %s", rc->trusted_ip, hostip);
1108   GNUNET_free (rc->trusted_ip);
1109   rc->trusted_ip = buf;
1110   return GNUNET_YES;
1111 }
1112
1113
1114 /**
1115  * Callbacks of this type are called by GNUNET_TESTBED_is_host_habitable to
1116  * inform whether the given host is habitable or not. The Handle returned by
1117  * GNUNET_TESTBED_is_host_habitable() is invalid after this callback is called
1118  *
1119  * @param cls NULL
1120  * @param host the host whose status is being reported; will be NULL if the host
1121  *          given to GNUNET_TESTBED_is_host_habitable() is NULL
1122  * @param status GNUNET_YES if it is habitable; GNUNET_NO if not
1123  */
1124 static void
1125 host_habitable_cb (void *cls, const struct GNUNET_TESTBED_Host *host,
1126                    int status)
1127 {
1128   struct CompatibilityCheckContext *hc = cls;
1129   struct GNUNET_TESTBED_RunHandle *rc;
1130   struct GNUNET_TESTBED_Host **old_hosts;
1131   unsigned int nhost;
1132
1133   GNUNET_assert (NULL != (rc = hc->rc));
1134   nhost = hc->index;
1135   GNUNET_assert (nhost <= rc->num_hosts);
1136   GNUNET_assert (host == rc->hosts[nhost]);
1137   hc->h = NULL;
1138   if (GNUNET_NO == status)
1139   {
1140     if ((NULL != host) && (NULL != GNUNET_TESTBED_host_get_hostname (host)))
1141       LOG (GNUNET_ERROR_TYPE_ERROR, _("Host %s cannot start testbed\n"),
1142            GNUNET_TESTBED_host_get_hostname (host));
1143     else
1144       LOG (GNUNET_ERROR_TYPE_ERROR,
1145            _("Testbed cannot be started on localhost\n"));
1146     GNUNET_SCHEDULER_shutdown ();
1147     return;
1148   }
1149   rc->reg_hosts++;
1150   if (rc->reg_hosts < rc->num_hosts)
1151     return;
1152   GNUNET_free (rc->hclist);
1153   rc->hclist = NULL;
1154   rc->h = rc->hosts[0];
1155   rc->num_hosts--;
1156   if (0 < rc->num_hosts)
1157   {
1158     old_hosts = rc->hosts;
1159     rc->hosts =
1160         GNUNET_malloc (sizeof (struct GNUNET_TESTBED_Host *) * rc->num_hosts);
1161     memcpy (rc->hosts, &old_hosts[1],
1162             (sizeof (struct GNUNET_TESTBED_Host *) * rc->num_hosts));
1163     GNUNET_free (old_hosts);
1164   }
1165   else
1166   {
1167     GNUNET_free (rc->hosts);
1168     rc->hosts = NULL;
1169   }
1170   GNUNET_TESTBED_host_resolve_ (rc->h);
1171   for (nhost = 0; nhost < rc->num_hosts; nhost++)
1172     GNUNET_TESTBED_host_resolve_ (rc->hosts[nhost]);
1173   GNUNET_OS_network_interfaces_list (netint_proc, rc);
1174   if (NULL == rc->trusted_ip)
1175     rc->trusted_ip = GNUNET_strdup ("127.0.0.1");
1176   rc->cproc =
1177       GNUNET_TESTBED_controller_start (rc->trusted_ip, rc->h,
1178                                        &controller_status_cb, rc);
1179   GNUNET_free (rc->trusted_ip);
1180   rc->trusted_ip = NULL;
1181   if (NULL == rc->cproc)
1182   {
1183     LOG (GNUNET_ERROR_TYPE_ERROR, _("Cannot start the master controller"));
1184     GNUNET_SCHEDULER_shutdown ();
1185   }
1186 }
1187
1188
1189 /**
1190  * Task run upon timeout while setting up the testbed
1191  *
1192  * @param cls the RunContext
1193  */
1194 static void
1195 timeout_task (void *cls)
1196 {
1197   struct GNUNET_TESTBED_RunHandle *rc = cls;
1198
1199   rc->timeout_task = NULL;
1200   LOG (GNUNET_ERROR_TYPE_ERROR,
1201        _("Shutting down testbed due to timeout while setup.\n"));
1202    GNUNET_SCHEDULER_shutdown ();
1203    if (NULL != rc->test_master)
1204      rc->test_master (rc->test_master_cls, rc, 0, NULL, 0, 0);
1205    rc->test_master = NULL;
1206 }
1207
1208
1209 /**
1210  * Convenience method for running a testbed with
1211  * a single call.  Underlay and overlay topology
1212  * are configured using the "UNDERLAY" and "OVERLAY"
1213  * options in the "[testbed]" section of the configuration\
1214  * (with possible options given in "UNDERLAY_XXX" and/or
1215  * "OVERLAY_XXX").
1216  *
1217  * The testbed is to be terminated using a call to
1218  * "GNUNET_SCHEDULER_shutdown".
1219  *
1220  * @param host_filename name of the file with the 'hosts', NULL
1221  *        to run everything on 'localhost'
1222  * @param cfg configuration to use (for testbed, controller and peers)
1223  * @param num_peers number of peers to start; FIXME: maybe put that ALSO into cfg?
1224  * @param event_mask bit mask with set of events to call 'cc' for;
1225  *                   or-ed values of "1LL" shifted by the
1226  *                   respective 'enum GNUNET_TESTBED_EventType'
1227  *                   (i.e.  "(1LL << GNUNET_TESTBED_ET_CONNECT) || ...")
1228  * @param cc controller callback to invoke on events; This callback is called
1229  *          for all peer start events even if GNUNET_TESTBED_ET_PEER_START isn't
1230  *          set in the event_mask as this is the only way get access to the
1231  *          handle of each peer
1232  * @param cc_cls closure for cc
1233  * @param test_master this callback will be called once the test is ready
1234  * @param test_master_cls closure for 'test_master'.
1235  */
1236 void
1237 GNUNET_TESTBED_run (const char *host_filename,
1238                     const struct GNUNET_CONFIGURATION_Handle *cfg,
1239                     unsigned int num_peers, uint64_t event_mask,
1240                     GNUNET_TESTBED_ControllerCallback cc, void *cc_cls,
1241                     GNUNET_TESTBED_TestMaster test_master,
1242                     void *test_master_cls)
1243 {
1244   struct GNUNET_TESTBED_RunHandle *rc;
1245   char *topology;
1246   struct CompatibilityCheckContext *hc;
1247   struct GNUNET_TIME_Relative timeout;
1248   unsigned long long number;
1249   unsigned int hid;
1250   unsigned int nhost;
1251
1252   GNUNET_assert (num_peers > 0);
1253   rc = GNUNET_new (struct GNUNET_TESTBED_RunHandle);
1254   rc->cfg = GNUNET_CONFIGURATION_dup (cfg);
1255 #if ENABLE_SUPERMUC
1256   rc->num_hosts = GNUNET_TESTBED_hosts_load_from_loadleveler (rc->cfg,
1257                                                               &rc->hosts);
1258   if (0 == rc->num_hosts)
1259   {
1260     LOG (GNUNET_ERROR_TYPE_WARNING,
1261            _("No hosts loaded from LoadLeveler. Need at least one host\n"));
1262     goto error_cleanup;
1263   }
1264 #else
1265   if (NULL != host_filename)
1266   {
1267     rc->num_hosts =
1268         GNUNET_TESTBED_hosts_load_from_file (host_filename, rc->cfg,
1269                                              &rc->hosts);
1270     if (0 == rc->num_hosts)
1271     {
1272       LOG (GNUNET_ERROR_TYPE_WARNING,
1273            _("No hosts loaded. Need at least one host\n"));
1274       goto error_cleanup;
1275     }
1276   }
1277   else
1278     rc->h = GNUNET_TESTBED_host_create (NULL, NULL, rc->cfg, 0);
1279 #endif
1280   rc->num_peers = num_peers;
1281   rc->event_mask = event_mask;
1282   rc->cc = cc;
1283   rc->cc_cls = cc_cls;
1284   rc->test_master = test_master;
1285   rc->test_master_cls = test_master_cls;
1286   rc->state = RC_INIT;
1287   rc->topology = GNUNET_TESTBED_TOPOLOGY_NONE;
1288   if (GNUNET_OK ==
1289       GNUNET_CONFIGURATION_get_value_string (rc->cfg, TESTBED_CONFIG_SECTION,
1290                                              "OVERLAY_TOPOLOGY", &topology))
1291   {
1292     if (GNUNET_NO == GNUNET_TESTBED_topology_get_ (&rc->topology, topology))
1293     {
1294       GNUNET_log_config_invalid (GNUNET_ERROR_TYPE_ERROR, TESTBED_CONFIG_SECTION,
1295                                  "OVERLAY_TOPLOGY",
1296                                  _
1297                                  ("Specified topology must be supported by testbed"));
1298     }
1299     GNUNET_free (topology);
1300   }
1301   switch (rc->topology)
1302   {
1303   case GNUNET_TESTBED_TOPOLOGY_ERDOS_RENYI:
1304   case GNUNET_TESTBED_TOPOLOGY_SMALL_WORLD_RING:
1305   case GNUNET_TESTBED_TOPOLOGY_SMALL_WORLD:
1306     if (GNUNET_OK !=
1307         GNUNET_CONFIGURATION_get_value_number (rc->cfg, TESTBED_CONFIG_SECTION,
1308                                                "OVERLAY_RANDOM_LINKS",
1309                                                &number))
1310     {
1311       /* OVERLAY option RANDOM & SMALL_WORLD_RING requires OVERLAY_RANDOM_LINKS
1312        * option to be set to the number of random links to be established  */
1313       GNUNET_log_config_missing (GNUNET_ERROR_TYPE_ERROR, TESTBED_CONFIG_SECTION,
1314                                  "OVERLAY_RANDOM_LINKS");
1315       goto error_cleanup;
1316     }
1317     if (number > UINT32_MAX)
1318     {
1319       GNUNET_break (0);         /* Too big number */
1320       goto error_cleanup;
1321     }
1322     rc->random_links = (unsigned int) number;
1323     break;
1324   case GNUNET_TESTBED_TOPOLOGY_FROM_FILE:
1325     if (GNUNET_OK !=
1326         GNUNET_CONFIGURATION_get_value_filename (rc->cfg, TESTBED_CONFIG_SECTION,
1327                                                "OVERLAY_TOPOLOGY_FILE",
1328                                                &rc->topo_file))
1329     {
1330       GNUNET_log_config_missing (GNUNET_ERROR_TYPE_ERROR, TESTBED_CONFIG_SECTION,
1331                                  "OVERLAY_TOPOLOGY_FILE");
1332       goto error_cleanup;
1333     }
1334     goto warn_ignore;
1335   case GNUNET_TESTBED_TOPOLOGY_SCALE_FREE:
1336     if (GNUNET_OK !=
1337         GNUNET_CONFIGURATION_get_value_number (rc->cfg, TESTBED_CONFIG_SECTION,
1338                                                SCALE_FREE_CAP, &number))
1339     {
1340       GNUNET_log_config_missing (GNUNET_ERROR_TYPE_ERROR, TESTBED_CONFIG_SECTION,
1341                                  SCALE_FREE_CAP);
1342       goto error_cleanup;
1343     }
1344     if (UINT16_MAX < number)
1345     {
1346       LOG (GNUNET_ERROR_TYPE_ERROR,
1347            _("Maximum number of edges a peer can have in a scale free topology"
1348              " cannot be more than %u.  Given `%s = %llu'"), UINT16_MAX,
1349            SCALE_FREE_CAP, number);
1350       goto error_cleanup;
1351     }
1352     if (GNUNET_OK !=
1353         GNUNET_CONFIGURATION_get_value_number (rc->cfg, TESTBED_CONFIG_SECTION,
1354                                                SCALE_FREE_M, &number))
1355     {
1356       GNUNET_log_config_missing (GNUNET_ERROR_TYPE_ERROR, TESTBED_CONFIG_SECTION,
1357                                  SCALE_FREE_M);
1358       goto error_cleanup;
1359     }
1360     if (UINT8_MAX < number)
1361     {
1362       LOG (GNUNET_ERROR_TYPE_ERROR,
1363            _("The number of edges that can established when adding a new node"
1364              " to scale free topology cannot be more than %u.  Given `%s = %llu'"),
1365            UINT8_MAX, SCALE_FREE_M, number);
1366       goto error_cleanup;
1367     }
1368     goto warn_ignore;
1369   default:
1370   warn_ignore:
1371     /* Warn if OVERLAY_RANDOM_LINKS is present that it will be ignored */
1372     if (GNUNET_YES ==
1373         GNUNET_CONFIGURATION_have_value (rc->cfg, TESTBED_CONFIG_SECTION,
1374                                          "OVERLAY_RANDOM_LINKS"))
1375       LOG (GNUNET_ERROR_TYPE_WARNING,
1376            "Ignoring value of `OVERLAY_RANDOM_LINKS' in given configuration\n");
1377     break;
1378   }
1379   if (0 != rc->num_hosts)
1380   {
1381     rc->hclist = GNUNET_malloc (sizeof (struct CompatibilityCheckContext)
1382                                 * rc->num_hosts);
1383     for (nhost = 0; nhost < rc->num_hosts; nhost++)
1384     {
1385       hc = &rc->hclist[nhost];
1386       hc->index = nhost;
1387       hc->rc = rc;
1388       hc->h = GNUNET_TESTBED_is_host_habitable (rc->hosts[nhost], rc->cfg,
1389                                                 &host_habitable_cb, hc);
1390       if (NULL == hc->h)
1391       {
1392         GNUNET_break (0);
1393         for (nhost = 0; nhost < rc->num_hosts; nhost++)
1394         {
1395           hc = &rc->hclist[nhost];
1396           if (NULL != hc->h)
1397             GNUNET_TESTBED_is_host_habitable_cancel (hc->h);
1398         }
1399         GNUNET_free (rc->hclist);
1400         rc->hclist = NULL;
1401         goto error_cleanup;
1402       }
1403     }
1404   }
1405   else
1406     rc->cproc =
1407         GNUNET_TESTBED_controller_start ("127.0.0.1", rc->h,
1408                                          &controller_status_cb, rc);
1409   if (GNUNET_OK != GNUNET_CONFIGURATION_get_value_time (cfg, TESTBED_CONFIG_SECTION,
1410                                                         "SETUP_TIMEOUT",
1411                                                         &timeout))
1412   {
1413     timeout = GNUNET_TIME_relative_multiply (GNUNET_TIME_UNIT_SECONDS,
1414                                              DEFAULT_SETUP_TIMEOUT);
1415   }
1416   rc->rcop_map = GNUNET_CONTAINER_multihashmap32_create (256);
1417   rc->timeout_task =
1418       GNUNET_SCHEDULER_add_delayed (timeout, &timeout_task, rc);
1419   rc->interrupt_task =
1420       GNUNET_SCHEDULER_add_delayed (GNUNET_TIME_UNIT_FOREVER_REL, &interrupt,
1421                                     rc);
1422   return;
1423
1424 error_cleanup:
1425   if (NULL != rc->h)
1426     GNUNET_TESTBED_host_destroy (rc->h);
1427   if (NULL != rc->hosts)
1428   {
1429     for (hid = 0; hid < rc->num_hosts; hid++)
1430       if (NULL != rc->hosts[hid])
1431         GNUNET_TESTBED_host_destroy (rc->hosts[hid]);
1432     GNUNET_free (rc->hosts);
1433   }
1434   if (NULL != rc->cfg)
1435     GNUNET_CONFIGURATION_destroy (rc->cfg);
1436   GNUNET_free (rc);
1437 }
1438
1439
1440 /**
1441  * Obtain handle to the master controller from a testbed run.  The handle
1442  * returned should not be disconnected.
1443  *
1444  * @param h the testbed run handle
1445  * @return handle to the master controller
1446  */
1447 struct GNUNET_TESTBED_Controller *
1448 GNUNET_TESTBED_run_get_controller_handle (struct GNUNET_TESTBED_RunHandle *h)
1449 {
1450   return h->c;
1451 }
1452
1453
1454 /* end of testbed_api_testbed.c */