- relaxed to accommodate overlay linking timeouts
[oweals/gnunet.git] / src / testbed / gnunet-helper-testbed.c
1 /*
2       This file is part of GNUnet
3       (C) 2012 Christian Grothoff (and other contributing authors)
4
5       GNUnet is free software; you can redistribute it and/or modify
6       it under the terms of the GNU General Public License as published
7       by the Free Software Foundation; either version 3, or (at your
8       option) any later version.
9
10       GNUnet is distributed in the hope that it will be useful, but
11       WITHOUT ANY WARRANTY; without even the implied warranty of
12       MERCHANTABILITY or FITNESS FOR A PARTICULAR PURPOSE.  See the GNU
13       General Public License for more details.
14
15       You should have received a copy of the GNU General Public License
16       along with GNUnet; see the file COPYING.  If not, write to the
17       Free Software Foundation, Inc., 59 Temple Place - Suite 330,
18       Boston, MA 02111-1307, USA.
19  */
20
21 /**
22  * @file testbed/gnunet-helper-testbed.c
23  * @brief Helper binary that is started from a remote controller to start
24  *          gnunet-service-testbed. This binary also receives configuration
25  *          from the remove controller which is put in a temporary location
26  *          with ports and paths fixed so that gnunet-service-testbed runs
27  *          without any hurdles. This binary also kills the testbed service
28  *          should the connection from the remote controller is dropped
29  * @author Sree Harsha Totakura <sreeharsha@totakura.in>
30  */
31
32
33 #include "platform.h"
34 #include "gnunet_util_lib.h"
35 #include "gnunet_testing_lib-new.h"
36 #include "gnunet_testbed_service.h"
37 #include "testbed_helper.h"
38 #include "testbed_api.h"
39 #include <zlib.h>
40
41 /**
42  * Generic logging shortcut
43  */
44 #define LOG(kind, ...)                                   \
45   GNUNET_log (kind, __VA_ARGS__)
46
47 /**
48  * Debug logging shorthand
49  */
50 #define LOG_DEBUG(...)                          \
51   LOG (GNUNET_ERROR_TYPE_DEBUG, __VA_ARGS__)
52
53
54 /**
55  * Context for a single write on a chunk of memory
56  */
57 struct WriteContext
58 {
59   /**
60    * The data to write
61    */
62   void *data;
63
64   /**
65    * The length of the data
66    */
67   size_t length;
68
69   /**
70    * The current position from where the write operation should begin
71    */
72   size_t pos;
73 };
74
75
76 /**
77  * Handle to the testing system
78  */
79 static struct GNUNET_TESTING_System *test_system;
80
81 /**
82  * Our message stream tokenizer
83  */
84 struct GNUNET_SERVER_MessageStreamTokenizer *tokenizer;
85
86 /**
87  * Disk handle from stdin
88  */
89 static struct GNUNET_DISK_FileHandle *stdin_fd;
90
91 /**
92  * Disk handle for stdout
93  */
94 static struct GNUNET_DISK_FileHandle *stdout_fd;
95
96 /**
97  * The process handle to the testbed service
98  */
99 static struct GNUNET_OS_Process *testbed;
100
101 /**
102  * Task identifier for the read task
103  */
104 static GNUNET_SCHEDULER_TaskIdentifier read_task_id;
105
106 /**
107  * Task identifier for the write task
108  */
109 static GNUNET_SCHEDULER_TaskIdentifier write_task_id;
110
111 /**
112  * Are we done reading messages from stdin?
113  */
114 static int done_reading;
115
116 /**
117  * Result to return in case we fail
118  */
119 static int status;
120
121
122 /**
123  * Are we shutting down
124  */
125 static int in_shutdown;
126
127
128 /**
129  * Task to shutting down nicely
130  *
131  * @param cls NULL
132  * @param tc the task context
133  */
134 static void
135 shutdown_task (void *cls, const struct GNUNET_SCHEDULER_TaskContext *tc)
136 {
137   LOG_DEBUG ("Shutting down\n");
138   in_shutdown = GNUNET_YES;
139   if (GNUNET_SCHEDULER_NO_TASK != read_task_id)
140   {
141     GNUNET_SCHEDULER_cancel (read_task_id);
142     read_task_id = GNUNET_SCHEDULER_NO_TASK;
143   }
144   if (GNUNET_SCHEDULER_NO_TASK != write_task_id)
145   {
146     GNUNET_SCHEDULER_cancel (write_task_id);
147     write_task_id = GNUNET_SCHEDULER_NO_TASK;
148   }
149   if (NULL != stdin_fd)
150     (void) GNUNET_DISK_file_close (stdin_fd);
151   if (NULL != stdout_fd)
152     (void) GNUNET_DISK_file_close (stdout_fd);
153   GNUNET_SERVER_mst_destroy (tokenizer);
154   tokenizer = NULL;
155   if (NULL != testbed)
156   {
157     LOG_DEBUG ("Killing testbed\n");
158     GNUNET_break (0 == GNUNET_OS_process_kill (testbed, SIGTERM));
159     GNUNET_assert (GNUNET_OK == GNUNET_OS_process_wait (testbed));
160     GNUNET_OS_process_destroy (testbed);
161     testbed = NULL;
162   }
163   if (NULL != test_system)
164   {
165     GNUNET_TESTING_system_destroy (test_system, GNUNET_YES);
166     test_system = NULL;
167   }
168 }
169
170
171 /**
172  * Task to write to the standard out
173  *
174  * @param cls the WriteContext
175  * @param tc the TaskContext
176  */
177 static void
178 write_task (void *cls, const struct GNUNET_SCHEDULER_TaskContext *tc)
179 {
180   struct WriteContext *wc = cls;
181   ssize_t bytes_wrote;
182
183   GNUNET_assert (NULL != wc);
184   write_task_id = GNUNET_SCHEDULER_NO_TASK;
185   if (0 != (GNUNET_SCHEDULER_REASON_SHUTDOWN & tc->reason))
186   {
187     GNUNET_free (wc->data);
188     GNUNET_free (wc);
189     return;
190   }
191   bytes_wrote =
192       GNUNET_DISK_file_write (stdout_fd, wc->data + wc->pos,
193                               wc->length - wc->pos);
194   GNUNET_assert (GNUNET_SYSERR != bytes_wrote);
195   wc->pos += bytes_wrote;
196   if (wc->pos == wc->length)
197   {
198     GNUNET_free (wc->data);
199     GNUNET_free (wc);
200     return;
201   }
202   write_task_id =
203       GNUNET_SCHEDULER_add_write_file (GNUNET_TIME_UNIT_FOREVER_REL, stdout_fd,
204                                        &write_task, wc);
205 }
206
207
208 /**
209  * Functions with this signature are called whenever a
210  * complete message is received by the tokenizer.
211  *
212  * Do not call GNUNET_SERVER_mst_destroy in callback
213  *
214  * @param cls closure
215  * @param client identification of the client
216  * @param message the actual message
217  *
218  * @return GNUNET_OK on success, GNUNET_SYSERR to stop further processing
219  */
220 static int
221 tokenizer_cb (void *cls, void *client,
222               const struct GNUNET_MessageHeader *message)
223 {
224   const struct GNUNET_TESTBED_HelperInit *msg;
225   struct GNUNET_TESTBED_HelperReply *reply;
226   struct GNUNET_CONFIGURATION_Handle *cfg;
227   struct WriteContext *wc;
228   char *controller;
229   char *hostname;
230   char *config;
231   char *xconfig;
232   size_t config_size;
233   uLongf ul_config_size;
234   size_t xconfig_size;
235   uint16_t cname_size;
236   uint16_t hostname_size;
237   uint16_t msize;
238   
239   msize = ntohs (message->size);
240   if ((sizeof (struct GNUNET_TESTBED_HelperInit) >= msize) ||
241       (GNUNET_MESSAGE_TYPE_TESTBED_HELPER_INIT != ntohs (message->type)))
242   {
243     LOG (GNUNET_ERROR_TYPE_WARNING, "Received unexpected message -- exiting\n");
244     goto error;
245   }
246   msg = (const struct GNUNET_TESTBED_HelperInit *) message;
247   cname_size = ntohs (msg->cname_size);
248   controller = (char *) &msg[1];
249   if ('\0' != controller[cname_size])
250   {
251     LOG (GNUNET_ERROR_TYPE_WARNING,
252          "Controller name cannot be empty -- exiting\n");
253     goto error;
254   }
255   hostname_size = ntohs (msg->hostname_size);
256   if ((sizeof (struct GNUNET_TESTBED_HelperInit) + cname_size + 1 +
257        hostname_size) >= msize)
258   {
259     GNUNET_break (0);
260     LOG (GNUNET_ERROR_TYPE_WARNING, "Received unexpected message -- exiting\n");
261     goto error;
262   }  
263   ul_config_size = (uLongf) ntohs (msg->config_size);
264   config = GNUNET_malloc (ul_config_size);
265   xconfig_size =
266       ntohs (message->size) - (cname_size + 1 +
267                                sizeof (struct GNUNET_TESTBED_HelperInit));
268   if (Z_OK !=
269       uncompress ((Bytef *) config, &ul_config_size,
270                   (const Bytef *) (controller + cname_size + 1 + hostname_size),
271                   (uLongf) xconfig_size))
272   {
273     LOG (GNUNET_ERROR_TYPE_WARNING,
274          "Error while uncompressing config -- exiting\n");
275     GNUNET_free (config);
276     goto error;
277   }
278   cfg = GNUNET_CONFIGURATION_create ();
279   if (GNUNET_OK !=
280       GNUNET_CONFIGURATION_deserialize (cfg, config, ul_config_size, GNUNET_NO))
281   {
282     LOG (GNUNET_ERROR_TYPE_WARNING,
283          "Unable to deserialize config -- exiting\n");
284     GNUNET_free (config);
285     goto error;
286   }
287   GNUNET_free (config);
288   hostname = NULL;
289   if (0 != hostname_size)
290   {
291     hostname = GNUNET_malloc (hostname_size + 1);
292     (void) strncpy (hostname, ((char *) &msg[1]) + cname_size + 1, hostname_size);
293     hostname[hostname_size] = '\0';
294   }
295   test_system = GNUNET_TESTING_system_create ("testbed-helper", controller,
296                                               hostname);
297   GNUNET_free_non_null (hostname);
298   hostname = NULL;
299   GNUNET_assert (NULL != test_system);
300   GNUNET_assert (GNUNET_OK ==
301                  GNUNET_TESTING_configuration_create (test_system, cfg));
302   GNUNET_assert (GNUNET_OK ==
303                  GNUNET_CONFIGURATION_get_value_string (cfg, "PATHS",
304                                                         "DEFAULTCONFIG",
305                                                         &config));
306   if (GNUNET_OK != GNUNET_CONFIGURATION_write (cfg, config))
307   {
308     LOG (GNUNET_ERROR_TYPE_WARNING,
309          "Unable to write config file: %s -- exiting\n", config);
310     GNUNET_CONFIGURATION_destroy (cfg);
311     GNUNET_free (config);
312     goto error;
313   }
314   LOG_DEBUG ("Staring testbed with config: %s\n", config);
315   testbed =
316       GNUNET_OS_start_process (GNUNET_YES,
317                                GNUNET_OS_INHERIT_STD_ERR /*verbose? */ , NULL,
318                                NULL, "gnunet-service-testbed",
319                                "gnunet-service-testbed", "-c", config, NULL);
320   GNUNET_free (config);
321   if (NULL == testbed)
322   {
323     LOG (GNUNET_ERROR_TYPE_WARNING,
324          "Error staring gnunet-service-testbed -- exiting\n");
325     GNUNET_CONFIGURATION_destroy (cfg);
326     goto error;
327   }
328   done_reading = GNUNET_YES;
329   config = GNUNET_CONFIGURATION_serialize (cfg, &config_size);
330   GNUNET_CONFIGURATION_destroy (cfg);
331   cfg = NULL;
332   xconfig_size =
333       GNUNET_TESTBED_compress_config_ (config, config_size, &xconfig);
334   GNUNET_free (config);
335   wc = GNUNET_malloc (sizeof (struct WriteContext));
336   wc->length = xconfig_size + sizeof (struct GNUNET_TESTBED_HelperReply);
337   reply = GNUNET_realloc (xconfig, wc->length);
338   memmove (&reply[1], reply, xconfig_size);
339   reply->header.type = htons (GNUNET_MESSAGE_TYPE_TESTBED_HELPER_REPLY);
340   reply->header.size = htons ((uint16_t) wc->length);
341   reply->config_size = htons ((uint16_t) config_size);
342   wc->data = reply;
343   write_task_id =
344       GNUNET_SCHEDULER_add_write_file (GNUNET_TIME_UNIT_FOREVER_REL, stdout_fd,
345                                        &write_task, wc);
346   return GNUNET_OK;
347
348 error:
349   status = GNUNET_SYSERR;
350   GNUNET_SCHEDULER_shutdown ();
351   return GNUNET_SYSERR;
352 }
353
354
355 /**
356  * Task to read from stdin
357  *
358  * @param cls NULL
359  * @param tc the task context
360  */
361 static void
362 read_task (void *cls, const struct GNUNET_SCHEDULER_TaskContext *tc)
363 {
364   char buf[GNUNET_SERVER_MAX_MESSAGE_SIZE];
365   ssize_t sread;
366
367   read_task_id = GNUNET_SCHEDULER_NO_TASK;
368   if (0 != (GNUNET_SCHEDULER_REASON_SHUTDOWN & tc->reason))
369     return;
370   sread = GNUNET_DISK_file_read (stdin_fd, buf, sizeof (buf));
371   if ((GNUNET_SYSERR == sread) || (0 == sread))
372   {
373     GNUNET_SCHEDULER_shutdown ();
374     return;
375   }
376   if (GNUNET_YES == done_reading)
377   {
378     /* didn't expect any more data! */
379     GNUNET_SCHEDULER_shutdown ();
380     return;
381   }
382   LOG_DEBUG ("Read %u bytes\n", sread);
383   if (GNUNET_OK !=
384       GNUNET_SERVER_mst_receive (tokenizer, NULL, buf, sread, GNUNET_NO,
385                                  GNUNET_NO))
386   {
387     GNUNET_break (0);
388     GNUNET_SCHEDULER_shutdown ();
389     return;
390   }
391   read_task_id =                /* No timeout while reading */
392       GNUNET_SCHEDULER_add_read_file (GNUNET_TIME_UNIT_FOREVER_REL, stdin_fd,
393                                       &read_task, NULL);
394 }
395
396
397 /**
398  * Main function that will be run.
399  *
400  * @param cls closure
401  * @param args remaining command-line arguments
402  * @param cfgfile name of the configuration file used (for saving, can be NULL!)
403  * @param cfg configuration
404  */
405 static void
406 run (void *cls, char *const *args, const char *cfgfile,
407      const struct GNUNET_CONFIGURATION_Handle *cfg)
408 {
409   LOG_DEBUG ("Starting testbed helper...\n");
410   tokenizer = GNUNET_SERVER_mst_create (&tokenizer_cb, NULL);
411   stdin_fd = GNUNET_DISK_get_handle_from_native (stdin);
412   stdout_fd = GNUNET_DISK_get_handle_from_native (stdout);
413   read_task_id =
414       GNUNET_SCHEDULER_add_read_file (GNUNET_TIME_UNIT_FOREVER_REL, stdin_fd,
415                                       &read_task, NULL);
416   GNUNET_SCHEDULER_add_delayed (GNUNET_TIME_UNIT_FOREVER_REL, &shutdown_task,
417                                 NULL);
418 }
419
420
421 /**
422  * Signal handler called for SIGCHLD.
423  */
424 static void
425 sighandler_child_death ()
426 {
427   if ((NULL != testbed) && (GNUNET_NO == in_shutdown))
428   {
429     LOG_DEBUG ("Child died\n");
430     GNUNET_assert (GNUNET_OK == GNUNET_OS_process_wait (testbed));
431     GNUNET_OS_process_destroy (testbed);
432     testbed = NULL;
433     GNUNET_SCHEDULER_shutdown ();       /* We are done too! */
434   }
435 }
436
437
438 /**
439  * Main function
440  *
441  * @param argc the number of command line arguments
442  * @param argv command line arg array
443  * @return return code
444  */
445 int
446 main (int argc, char **argv)
447 {
448   struct GNUNET_SIGNAL_Context *shc_chld;
449
450   struct GNUNET_GETOPT_CommandLineOption options[] = {
451     GNUNET_GETOPT_OPTION_END
452   };
453   int ret;
454
455   status = GNUNET_OK;
456   in_shutdown = GNUNET_NO;
457   shc_chld =
458       GNUNET_SIGNAL_handler_install (GNUNET_SIGCHLD, &sighandler_child_death);
459   ret =
460       GNUNET_PROGRAM_run (argc, argv, "gnunet-helper-testbed",
461                           "Helper for starting gnunet-service-testbed", options,
462                           &run, NULL);
463   GNUNET_SIGNAL_handler_uninstall (shc_chld);
464   shc_chld = NULL;
465   if (GNUNET_OK != ret)
466     return 1;
467   return (GNUNET_OK == status) ? 0 : 1;
468 }
469
470 /* end of gnunet-helper-testbed.c */