fix bootstrap
[oweals/gnunet.git] / src / util / service.c
1 /*
2      This file is part of GNUnet.
3      Copyright (C) 2016 GNUnet e.V.
4
5      GNUnet is free software: you can redistribute it and/or modify it
6      under the terms of the GNU Affero General Public License as published
7      by the Free Software Foundation, either version 3 of the License,
8      or (at your option) any later version.
9
10      GNUnet is distributed in the hope that it will be useful, but
11      WITHOUT ANY WARRANTY; without even the implied warranty of
12      MERCHANTABILITY or FITNESS FOR A PARTICULAR PURPOSE.  See the GNU
13      Affero General Public License for more details.
14
15      You should have received a copy of the GNU Affero General Public License
16      along with this program.  If not, see <http://www.gnu.org/licenses/>.
17
18      SPDX-License-Identifier: AGPL3.0-or-later
19 */
20
21 /**
22  * @file util/service_new.c
23  * @brief functions related to starting services (redesign)
24  * @author Christian Grothoff
25  * @author Florian Dold
26  */
27 #include "platform.h"
28 #include "gnunet_util_lib.h"
29 #include "gnunet_protocols.h"
30 #include "gnunet_constants.h"
31 #include "gnunet_resolver_service.h"
32 #include "speedup.h"
33
34 #if HAVE_MALLINFO
35 #include <malloc.h>
36 #include "gauger.h"
37 #endif
38
39
40 #define LOG(kind,...) GNUNET_log_from (kind, "util-service", __VA_ARGS__)
41
42 #define LOG_STRERROR(kind,syscall) GNUNET_log_from_strerror (kind, "util-service", syscall)
43
44 #define LOG_STRERROR_FILE(kind,syscall,filename) GNUNET_log_from_strerror_file (kind, "util-service", syscall, filename)
45
46
47 /**
48  * Information the service tracks per listen operation.
49  */
50 struct ServiceListenContext
51 {
52
53   /**
54    * Kept in a DLL.
55    */
56   struct ServiceListenContext *next;
57
58   /**
59    * Kept in a DLL.
60    */
61   struct ServiceListenContext *prev;
62
63   /**
64    * Service this listen context belongs to.
65    */
66   struct GNUNET_SERVICE_Handle *sh;
67
68   /**
69    * Socket we are listening on.
70    */
71   struct GNUNET_NETWORK_Handle *listen_socket;
72
73   /**
74    * Task scheduled to do the listening.
75    */
76   struct GNUNET_SCHEDULER_Task *listen_task;
77
78 };
79
80
81 /**
82  * Reasons why we might be suspended.
83  */
84 enum SuspendReason
85 {
86  /**
87   * We are running normally.
88   */
89  SUSPEND_STATE_NONE = 0,
90
91  /**
92   * Application requested it.
93   */
94  SUSPEND_STATE_APP = 1,
95
96  /**
97   * OS ran out of file descriptors.
98   */
99  SUSPEND_STATE_EMFILE = 2,
100
101  /**
102   * Both reasons, APP and EMFILE apply.
103   */
104  SUSPEND_STATE_APP_AND_EMFILE = 3,
105
106  /**
107   * Suspension because service was permanently shutdown.
108   */
109  SUSPEND_STATE_SHUTDOWN = 4
110 };
111
112
113 /**
114  * Handle to a service.
115  */
116 struct GNUNET_SERVICE_Handle
117 {
118   /**
119    * Our configuration.
120    */
121   const struct GNUNET_CONFIGURATION_Handle *cfg;
122
123   /**
124    * Name of our service.
125    */
126   const char *service_name;
127
128   /**
129    * Main service-specific task to run.
130    */
131   GNUNET_SERVICE_InitCallback service_init_cb;
132
133   /**
134    * Function to call when clients connect.
135    */
136   GNUNET_SERVICE_ConnectHandler connect_cb;
137
138   /**
139    * Function to call when clients disconnect / are disconnected.
140    */
141   GNUNET_SERVICE_DisconnectHandler disconnect_cb;
142
143   /**
144    * Closure for @e service_init_cb, @e connect_cb, @e disconnect_cb.
145    */
146   void *cb_cls;
147
148   /**
149    * DLL of listen sockets used to accept new connections.
150    */
151   struct ServiceListenContext *slc_head;
152
153   /**
154    * DLL of listen sockets used to accept new connections.
155    */
156   struct ServiceListenContext *slc_tail;
157
158   /**
159    * Our clients, kept in a DLL.
160    */
161   struct GNUNET_SERVICE_Client *clients_head;
162
163   /**
164    * Our clients, kept in a DLL.
165    */
166   struct GNUNET_SERVICE_Client *clients_tail;
167
168   /**
169    * Message handlers to use for all clients.
170    */
171   struct GNUNET_MQ_MessageHandler *handlers;
172
173   /**
174    * Closure for @e task.
175    */
176   void *task_cls;
177
178   /**
179    * IPv4 addresses that are not allowed to connect.
180    */
181   struct GNUNET_STRINGS_IPv4NetworkPolicy *v4_denied;
182
183   /**
184    * IPv6 addresses that are not allowed to connect.
185    */
186   struct GNUNET_STRINGS_IPv6NetworkPolicy *v6_denied;
187
188   /**
189    * IPv4 addresses that are allowed to connect (if not
190    * set, all are allowed).
191    */
192   struct GNUNET_STRINGS_IPv4NetworkPolicy *v4_allowed;
193
194   /**
195    * IPv6 addresses that are allowed to connect (if not
196    * set, all are allowed).
197    */
198   struct GNUNET_STRINGS_IPv6NetworkPolicy *v6_allowed;
199
200   /**
201    * Do we require a matching UID for UNIX domain socket connections?
202    * #GNUNET_NO means that the UID does not have to match (however,
203    * @e match_gid may still impose other access control checks).
204    */
205   int match_uid;
206
207   /**
208    * Do we require a matching GID for UNIX domain socket connections?
209    * Ignored if @e match_uid is #GNUNET_YES.  Note that this is about
210    * checking that the client's UID is in our group OR that the
211    * client's GID is our GID.  If both "match_gid" and @e match_uid are
212    * #GNUNET_NO, all users on the local system have access.
213    */
214   int match_gid;
215
216   /**
217    * Are we suspended, and if so, why?
218    */
219   enum SuspendReason suspend_state;
220
221   /**
222    * Our options.
223    */
224   enum GNUNET_SERVICE_Options options;
225
226   /**
227    * If we are daemonizing, this FD is set to the
228    * pipe to the parent.  Send '.' if we started
229    * ok, '!' if not.  -1 if we are not daemonizing.
230    */
231   int ready_confirm_fd;
232
233   /**
234    * Overall success/failure of the service start.
235    */
236   int ret;
237
238   /**
239    * If #GNUNET_YES, consider unknown message types an error where the
240    * client is disconnected.
241    */
242   int require_found;
243 };
244
245
246 /**
247  * Handle to a client that is connected to a service.
248  */
249 struct GNUNET_SERVICE_Client
250 {
251
252   /**
253    * Kept in a DLL.
254    */
255   struct GNUNET_SERVICE_Client *next;
256
257   /**
258    * Kept in a DLL.
259    */
260   struct GNUNET_SERVICE_Client *prev;
261
262   /**
263    * Service that this client belongs to.
264    */
265   struct GNUNET_SERVICE_Handle *sh;
266
267   /**
268    * Socket of this client.
269    */
270   struct GNUNET_NETWORK_Handle *sock;
271
272   /**
273    * Message queue for the client.
274    */
275   struct GNUNET_MQ_Handle *mq;
276
277   /**
278    * Tokenizer we use for processing incoming data.
279    */
280   struct GNUNET_MessageStreamTokenizer *mst;
281
282   /**
283    * Task that warns about missing calls to
284    * #GNUNET_SERVICE_client_continue().
285    */
286   struct GNUNET_SCHEDULER_Task *warn_task;
287
288   /**
289    * Task run to finish dropping the client after the stack has
290    * properly unwound.
291    */
292   struct GNUNET_SCHEDULER_Task *drop_task;
293
294   /**
295    * Task that receives data from the client to
296    * pass it to the handlers.
297    */
298   struct GNUNET_SCHEDULER_Task *recv_task;
299
300   /**
301    * Task that transmit data to the client.
302    */
303   struct GNUNET_SCHEDULER_Task *send_task;
304
305   /**
306    * Pointer to the message to be transmitted by @e send_task.
307    */
308   const struct GNUNET_MessageHeader *msg;
309
310   /**
311    * User context value, value returned from
312    * the connect callback.
313    */
314   void *user_context;
315
316   /**
317    * Time when we last gave a message from this client
318    * to the application.
319    */
320   struct GNUNET_TIME_Absolute warn_start;
321
322   /**
323    * Current position in @e msg at which we are transmitting.
324    */
325   size_t msg_pos;
326
327   /**
328    * Persist the file handle for this client no matter what happens,
329    * force the OS to close once the process actually dies.  Should only
330    * be used in special cases!
331    */
332   int persist;
333
334   /**
335    * Is this client a 'monitor' client that should not be counted
336    * when deciding on destroying the server during soft shutdown?
337    * (see also #GNUNET_SERVICE_start)
338    */
339   int is_monitor;
340
341   /**
342    * Are we waiting for the application to call #GNUNET_SERVICE_client_continue()?
343    */
344   int needs_continue;
345
346   /**
347    * Type of last message processed (for warn_no_receive_done).
348    */
349   uint16_t warn_type;
350 };
351
352
353 /**
354  * Check if any of the clients we have left are unrelated to
355  * monitoring.
356  *
357  * @param sh service to check clients for
358  * @return #GNUNET_YES if we have non-monitoring clients left
359  */
360 static int
361 have_non_monitor_clients (struct GNUNET_SERVICE_Handle *sh)
362 {
363   for (struct GNUNET_SERVICE_Client *client = sh->clients_head;
364        NULL != client;
365        client = client->next)
366   {
367     if (client->is_monitor)
368       continue;
369     return GNUNET_YES;
370   }
371   return GNUNET_NO;
372 }
373
374
375 /**
376  * Suspend accepting connections from the listen socket temporarily.
377  * Resume activity using #do_resume.
378  *
379  * @param sh service to stop accepting connections.
380  * @param sr reason for suspending accepting connections
381  */
382 static void
383 do_suspend (struct GNUNET_SERVICE_Handle *sh,
384             enum SuspendReason sr)
385 {
386   struct ServiceListenContext *slc;
387
388   GNUNET_assert (0 == (sh->suspend_state & sr));
389   sh->suspend_state |= sr;
390   for (slc = sh->slc_head; NULL != slc; slc = slc->next)
391   {
392     if (NULL != slc->listen_task)
393     {
394       GNUNET_SCHEDULER_cancel (slc->listen_task);
395       slc->listen_task = NULL;
396     }
397   }
398 }
399
400
401 /**
402  * Shutdown task triggered when a service should be terminated.
403  * This considers active clients and the service options to see
404  * how this specific service is to be terminated, and depending
405  * on this proceeds with the shutdown logic.
406  *
407  * @param cls our `struct GNUNET_SERVICE_Handle`
408  */
409 static void
410 service_shutdown (void *cls)
411 {
412   struct GNUNET_SERVICE_Handle *sh = cls;
413
414   switch (sh->options)
415   {
416   case GNUNET_SERVICE_OPTION_NONE:
417     GNUNET_SERVICE_shutdown (sh);
418     break;
419   case GNUNET_SERVICE_OPTION_MANUAL_SHUTDOWN:
420     /* This task should never be run if we are using
421        the manual shutdown. */
422     GNUNET_assert (0);
423     break;
424   case GNUNET_SERVICE_OPTION_SOFT_SHUTDOWN:
425     if (0 == (sh->suspend_state & SUSPEND_STATE_SHUTDOWN))
426       do_suspend (sh,
427                   SUSPEND_STATE_SHUTDOWN);
428     if (GNUNET_NO == have_non_monitor_clients (sh))
429       GNUNET_SERVICE_shutdown (sh);
430     break;
431   }
432 }
433
434
435 /**
436  * Check if the given IP address is in the list of IP addresses.
437  *
438  * @param list a list of networks
439  * @param add the IP to check (in network byte order)
440  * @return #GNUNET_NO if the IP is not in the list, #GNUNET_YES if it it is
441  */
442 static int
443 check_ipv4_listed (const struct GNUNET_STRINGS_IPv4NetworkPolicy *list,
444                    const struct in_addr *add)
445 {
446   unsigned int i;
447
448   if (NULL == list)
449     return GNUNET_NO;
450   i = 0;
451   while ( (0 != list[i].network.s_addr) ||
452           (0 != list[i].netmask.s_addr) )
453   {
454     if ((add->s_addr & list[i].netmask.s_addr) ==
455         (list[i].network.s_addr & list[i].netmask.s_addr))
456       return GNUNET_YES;
457     i++;
458   }
459   return GNUNET_NO;
460 }
461
462
463 /**
464  * Check if the given IP address is in the list of IP addresses.
465  *
466  * @param list a list of networks
467  * @param ip the IP to check (in network byte order)
468  * @return #GNUNET_NO if the IP is not in the list, #GNUNET_YES if it it is
469  */
470 static int
471 check_ipv6_listed (const struct GNUNET_STRINGS_IPv6NetworkPolicy *list,
472                    const struct in6_addr *ip)
473 {
474   unsigned int i;
475   unsigned int j;
476   struct in6_addr zero;
477
478   if (NULL == list)
479     return GNUNET_NO;
480   memset (&zero,
481           0,
482           sizeof (struct in6_addr));
483   i = 0;
484 NEXT:
485   while (0 != memcmp (&zero,
486                       &list[i].network,
487                       sizeof (struct in6_addr)))
488   {
489     for (j = 0; j < sizeof (struct in6_addr) / sizeof (int); j++)
490       if (((((int *) ip)[j] & ((int *) &list[i].netmask)[j])) !=
491           (((int *) &list[i].network)[j] & ((int *) &list[i].netmask)[j]))
492       {
493         i++;
494         goto NEXT;
495       }
496     return GNUNET_YES;
497   }
498   return GNUNET_NO;
499 }
500
501
502 /**
503  * Task run when we are ready to transmit data to the
504  * client.
505  *
506  * @param cls the `struct GNUNET_SERVICE_Client *` to send to
507  */
508 static void
509 do_send (void *cls)
510 {
511   struct GNUNET_SERVICE_Client *client = cls;
512   ssize_t ret;
513   size_t left;
514   const char *buf;
515
516   LOG (GNUNET_ERROR_TYPE_DEBUG,
517        "service: sending message with type %u\n",
518        ntohs(client->msg->type));
519
520
521   client->send_task = NULL;
522   buf = (const char *) client->msg;
523   left = ntohs (client->msg->size) - client->msg_pos;
524   ret = GNUNET_NETWORK_socket_send (client->sock,
525                                     &buf[client->msg_pos],
526                                     left);
527   GNUNET_assert (ret <= (ssize_t) left);
528   if (0 == ret)
529   {
530     LOG (GNUNET_ERROR_TYPE_DEBUG,
531          "no data send");
532     GNUNET_MQ_inject_error (client->mq,
533                             GNUNET_MQ_ERROR_WRITE);
534     return;
535   }
536   if (-1 == ret)
537   {
538     if ( (EAGAIN == errno) ||
539          (EINTR == errno) )
540     {
541       /* ignore */
542       ret = 0;
543     }
544     else
545     {
546       if (EPIPE != errno)
547         GNUNET_log_strerror (GNUNET_ERROR_TYPE_WARNING,
548                              "send");
549       LOG (GNUNET_ERROR_TYPE_DEBUG,
550            "socket send returned with error code %i",
551            errno);
552       GNUNET_MQ_inject_error (client->mq,
553                               GNUNET_MQ_ERROR_WRITE);
554       return;
555     }
556   }
557   if (0 == client->msg_pos)
558   {
559     GNUNET_MQ_impl_send_in_flight (client->mq);
560   }
561   client->msg_pos += ret;
562   if (left > (size_t) ret)
563   {
564     GNUNET_assert (NULL == client->drop_task);
565     client->send_task
566       = GNUNET_SCHEDULER_add_write_net (GNUNET_TIME_UNIT_FOREVER_REL,
567                                         client->sock,
568                                         &do_send,
569                                         client);
570     return;
571   }
572   GNUNET_MQ_impl_send_continue (client->mq);
573 }
574
575
576 /**
577  * Signature of functions implementing the sending functionality of a
578  * message queue.
579  *
580  * @param mq the message queue
581  * @param msg the message to send
582  * @param impl_state our `struct GNUNET_SERVICE_Client *`
583  */
584 static void
585 service_mq_send (struct GNUNET_MQ_Handle *mq,
586                  const struct GNUNET_MessageHeader *msg,
587                  void *impl_state)
588 {
589   struct GNUNET_SERVICE_Client *client = impl_state;
590
591   (void) mq;
592   if (NULL != client->drop_task)
593     return; /* we're going down right now, do not try to send */
594   GNUNET_assert (NULL == client->send_task);
595   LOG (GNUNET_ERROR_TYPE_DEBUG,
596        "Sending message of type %u and size %u to client\n",
597        ntohs (msg->type),
598        ntohs (msg->size));
599   client->msg = msg;
600   client->msg_pos = 0;
601   client->send_task
602     = GNUNET_SCHEDULER_add_write_net (GNUNET_TIME_UNIT_FOREVER_REL,
603                                       client->sock,
604                                       &do_send,
605                                       client);
606 }
607
608
609 /**
610  * Implementation function that cancels the currently sent message.
611  *
612  * @param mq message queue
613  * @param impl_state state specific to the implementation
614  */
615 static void
616 service_mq_cancel (struct GNUNET_MQ_Handle *mq,
617                    void *impl_state)
618 {
619   struct GNUNET_SERVICE_Client *client = impl_state;
620
621   (void) mq;
622   GNUNET_assert (0 == client->msg_pos);
623   client->msg = NULL;
624   GNUNET_SCHEDULER_cancel (client->send_task);
625   client->send_task = NULL;
626 }
627
628
629 /**
630  * Generic error handler, called with the appropriate
631  * error code and the same closure specified at the creation of
632  * the message queue.
633  * Not every message queue implementation supports an error handler.
634  *
635  * @param cls closure with our `struct GNUNET_SERVICE_Client`
636  * @param error error code
637  */
638 static void
639 service_mq_error_handler (void *cls,
640                           enum GNUNET_MQ_Error error)
641 {
642   struct GNUNET_SERVICE_Client *client = cls;
643   struct GNUNET_SERVICE_Handle *sh = client->sh;
644
645   if ( (GNUNET_MQ_ERROR_NO_MATCH == error) &&
646        (GNUNET_NO == sh->require_found) )
647   {
648     GNUNET_log (GNUNET_ERROR_TYPE_DEBUG,
649                 "No handler for message of type %u found\n",
650                 (unsigned int) client->warn_type);
651     GNUNET_SERVICE_client_continue (client);
652     return; /* ignore error */
653   }
654   GNUNET_SERVICE_client_drop (client);
655 }
656
657
658 /**
659  * Task run to warn about missing calls to #GNUNET_SERVICE_client_continue().
660  *
661  * @param cls our `struct GNUNET_SERVICE_Client *` to process more requests from
662  */
663 static void
664 warn_no_client_continue (void *cls)
665 {
666   struct GNUNET_SERVICE_Client *client = cls;
667
668   GNUNET_break (0 != client->warn_type); /* type should never be 0 here, as we don't use 0 */
669   client->warn_task
670     = GNUNET_SCHEDULER_add_delayed (GNUNET_TIME_UNIT_MINUTES,
671                                     &warn_no_client_continue,
672                                     client);
673   LOG (GNUNET_ERROR_TYPE_WARNING,
674        _("Processing code for message of type %u did not call `GNUNET_SERVICE_client_continue' after %s\n"),
675        (unsigned int) client->warn_type,
676        GNUNET_STRINGS_relative_time_to_string (GNUNET_TIME_absolute_get_duration (client->warn_start),
677                                                GNUNET_YES));
678 }
679
680
681 /**
682  * Functions with this signature are called whenever a
683  * complete message is received by the tokenizer for a client.
684  *
685  * Do not call #GNUNET_MST_destroy() from within
686  * the scope of this callback.
687  *
688  * @param cls closure with the `struct GNUNET_SERVICE_Client *`
689  * @param message the actual message
690  * @return #GNUNET_OK on success, #GNUNET_SYSERR if the client was dropped
691  */
692 static int
693 service_client_mst_cb (void *cls,
694                        const struct GNUNET_MessageHeader *message)
695 {
696   struct GNUNET_SERVICE_Client *client = cls;
697
698   LOG (GNUNET_ERROR_TYPE_DEBUG,
699        "Received message of type %u and size %u from client\n",
700        ntohs (message->type),
701        ntohs (message->size));
702   GNUNET_assert (GNUNET_NO == client->needs_continue);
703   client->needs_continue = GNUNET_YES;
704   client->warn_type = ntohs (message->type);
705   client->warn_start = GNUNET_TIME_absolute_get ();
706   GNUNET_assert (NULL == client->warn_task);
707   client->warn_task
708     = GNUNET_SCHEDULER_add_delayed (GNUNET_TIME_UNIT_MINUTES,
709                                     &warn_no_client_continue,
710                                     client);
711   GNUNET_MQ_inject_message (client->mq,
712                             message);
713   if (NULL != client->drop_task)
714     return GNUNET_SYSERR;
715   return GNUNET_OK;
716 }
717
718
719 /**
720  * A client sent us data. Receive and process it.  If we are done,
721  * reschedule this task.
722  *
723  * @param cls the `struct GNUNET_SERVICE_Client` that sent us data.
724  */
725 static void
726 service_client_recv (void *cls)
727 {
728   struct GNUNET_SERVICE_Client *client = cls;
729   int ret;
730
731   client->recv_task = NULL;
732   ret = GNUNET_MST_read (client->mst,
733                          client->sock,
734                          GNUNET_NO,
735                          GNUNET_YES);
736   if (GNUNET_SYSERR == ret)
737   {
738     /* client closed connection (or IO error) */
739     if (NULL == client->drop_task)
740     {
741       GNUNET_assert (GNUNET_NO == client->needs_continue);
742       GNUNET_SERVICE_client_drop (client);
743     }
744     return;
745   }
746   if (GNUNET_NO == ret)
747     return; /* more messages in buffer, wait for application
748                to be done processing */
749   GNUNET_assert (GNUNET_OK == ret);
750   if (GNUNET_YES == client->needs_continue)
751     return;
752   if (NULL != client->recv_task)
753     return;
754   /* MST needs more data, re-schedule read job */
755   client->recv_task
756     = GNUNET_SCHEDULER_add_read_net (GNUNET_TIME_UNIT_FOREVER_REL,
757                                      client->sock,
758                                      &service_client_recv,
759                                      client);
760 }
761
762
763 /**
764  * We have successfully accepted a connection from a client.  Now
765  * setup the client (with the scheduler) and tell the application.
766  *
767  * @param sh service that accepted the client
768  * @param sock socket associated with the client
769  */
770 static void
771 start_client (struct GNUNET_SERVICE_Handle *sh,
772               struct GNUNET_NETWORK_Handle *csock)
773 {
774   struct GNUNET_SERVICE_Client *client;
775
776   client = GNUNET_new (struct GNUNET_SERVICE_Client);
777   GNUNET_CONTAINER_DLL_insert (sh->clients_head,
778                                sh->clients_tail,
779                                client);
780   client->sh = sh;
781   client->sock = csock;
782   client->mq = GNUNET_MQ_queue_for_callbacks (&service_mq_send,
783                                               NULL,
784                                               &service_mq_cancel,
785                                               client,
786                                               sh->handlers,
787                                               &service_mq_error_handler,
788                                               client);
789   client->mst = GNUNET_MST_create (&service_client_mst_cb,
790                                    client);
791   if (NULL != sh->connect_cb)
792     client->user_context = sh->connect_cb (sh->cb_cls,
793                                            client,
794                                            client->mq);
795   GNUNET_MQ_set_handlers_closure (client->mq,
796                                   client->user_context);
797   client->recv_task
798     = GNUNET_SCHEDULER_add_read_net (GNUNET_TIME_UNIT_FOREVER_REL,
799                                      client->sock,
800                                      &service_client_recv,
801                                      client);
802 }
803
804
805 /**
806  * We have a client. Accept the incoming socket(s) (and reschedule
807  * the listen task).
808  *
809  * @param cls the `struct ServiceListenContext` of the ready listen socket
810  */
811 static void
812 accept_client (void *cls)
813 {
814   struct ServiceListenContext *slc = cls;
815   struct GNUNET_SERVICE_Handle *sh = slc->sh;
816
817   slc->listen_task = NULL;
818   while (1)
819   {
820     struct GNUNET_NETWORK_Handle *sock;
821     const struct sockaddr_in *v4;
822     const struct sockaddr_in6 *v6;
823     struct sockaddr_storage sa;
824     socklen_t addrlen;
825     int ok;
826
827     addrlen = sizeof (sa);
828     sock = GNUNET_NETWORK_socket_accept (slc->listen_socket,
829                                          (struct sockaddr *) &sa,
830                                          &addrlen);
831     if (NULL == sock)
832     {
833       if (EMFILE == errno)
834         do_suspend (sh,
835                     SUSPEND_STATE_EMFILE);
836       else if (EAGAIN != errno)
837         GNUNET_log_strerror (GNUNET_ERROR_TYPE_WARNING,
838                              "accept");
839       break;
840     }
841     switch (sa.ss_family)
842     {
843     case AF_INET:
844       GNUNET_assert (addrlen == sizeof (struct sockaddr_in));
845       v4 = (const struct sockaddr_in *) &sa;
846       ok = ( ( (NULL == sh->v4_allowed) ||
847                (check_ipv4_listed (sh->v4_allowed,
848                                    &v4->sin_addr))) &&
849              ( (NULL == sh->v4_denied) ||
850                (! check_ipv4_listed (sh->v4_denied,
851                                      &v4->sin_addr)) ) );
852       break;
853     case AF_INET6:
854       GNUNET_assert (addrlen == sizeof (struct sockaddr_in6));
855       v6 = (const struct sockaddr_in6 *) &sa;
856       ok = ( ( (NULL == sh->v6_allowed) ||
857                (check_ipv6_listed (sh->v6_allowed,
858                                    &v6->sin6_addr))) &&
859              ( (NULL == sh->v6_denied) ||
860                (! check_ipv6_listed (sh->v6_denied,
861                                      &v6->sin6_addr)) ) );
862       break;
863 #ifndef WINDOWS
864     case AF_UNIX:
865       ok = GNUNET_OK;            /* controlled using file-system ACL now */
866       break;
867 #endif
868     default:
869       LOG (GNUNET_ERROR_TYPE_WARNING,
870            _("Unknown address family %d\n"),
871            sa.ss_family);
872       return;
873     }
874     if (! ok)
875     {
876       LOG (GNUNET_ERROR_TYPE_DEBUG,
877            "Service rejected incoming connection from %s due to policy.\n",
878            GNUNET_a2s ((const struct sockaddr *) &sa,
879                        addrlen));
880       GNUNET_break (GNUNET_OK ==
881                     GNUNET_NETWORK_socket_close (sock));
882       continue;
883     }
884     LOG (GNUNET_ERROR_TYPE_DEBUG,
885          "Service accepted incoming connection from %s.\n",
886          GNUNET_a2s ((const struct sockaddr *) &sa,
887                      addrlen));
888     start_client (slc->sh,
889                   sock);
890   }
891   if (0 != sh->suspend_state)
892     return;
893   slc->listen_task
894     = GNUNET_SCHEDULER_add_read_net (GNUNET_TIME_UNIT_FOREVER_REL,
895                                      slc->listen_socket,
896                                      &accept_client,
897                                      slc);
898 }
899
900
901 /**
902  * Resume accepting connections from the listen socket.
903  *
904  * @param sh service to resume accepting connections.
905  * @param sr reason that is no longer causing the suspension,
906  *           or #SUSPEND_STATE_NONE on first startup
907  */
908 static void
909 do_resume (struct GNUNET_SERVICE_Handle *sh,
910            enum SuspendReason sr)
911 {
912   struct ServiceListenContext *slc;
913
914   GNUNET_assert ( (SUSPEND_STATE_NONE == sr) ||
915                   (0 != (sh->suspend_state & sr)) );
916   sh->suspend_state -= sr;
917   if (SUSPEND_STATE_NONE != sh->suspend_state)
918     return;
919   for (slc = sh->slc_head; NULL != slc; slc = slc->next)
920   {
921     GNUNET_assert (NULL == slc->listen_task);
922     slc->listen_task
923       = GNUNET_SCHEDULER_add_read_net (GNUNET_TIME_UNIT_FOREVER_REL,
924                                        slc->listen_socket,
925                                        &accept_client,
926                                        slc);
927   }
928 }
929
930
931 /**
932  * First task run by any service.  Initializes our shutdown task,
933  * starts the listening operation on our listen sockets and launches
934  * the custom logic of the application service.
935  *
936  * @param cls our `struct GNUNET_SERVICE_Handle`
937  */
938 static void
939 service_main (void *cls)
940 {
941   struct GNUNET_SERVICE_Handle *sh = cls;
942
943   if (GNUNET_SERVICE_OPTION_MANUAL_SHUTDOWN != sh->options)
944     GNUNET_SCHEDULER_add_shutdown (&service_shutdown,
945                                    sh);
946   do_resume (sh,
947              SUSPEND_STATE_NONE);
948
949   if (-1 != sh->ready_confirm_fd)
950   {
951     GNUNET_break (1 == WRITE (sh->ready_confirm_fd, ".", 1));
952     GNUNET_break (0 == CLOSE (sh->ready_confirm_fd));
953     sh->ready_confirm_fd = -1;
954   }
955
956   if (NULL != sh->service_init_cb)
957     sh->service_init_cb (sh->cb_cls,
958                          sh->cfg,
959                          sh);
960 }
961
962
963 /**
964  * Parse an IPv4 access control list.
965  *
966  * @param ret location where to write the ACL (set)
967  * @param sh service context to use to get the configuration
968  * @param option name of the ACL option to parse
969  * @return #GNUNET_SYSERR on parse error, #GNUNET_OK on success (including
970  *         no ACL configured)
971  */
972 static int
973 process_acl4 (struct GNUNET_STRINGS_IPv4NetworkPolicy **ret,
974               struct GNUNET_SERVICE_Handle *sh,
975               const char *option)
976 {
977   char *opt;
978
979   if (! GNUNET_CONFIGURATION_have_value (sh->cfg,
980                                          sh->service_name,
981                                          option))
982   {
983     *ret = NULL;
984     return GNUNET_OK;
985   }
986   GNUNET_break (GNUNET_OK ==
987                 GNUNET_CONFIGURATION_get_value_string (sh->cfg,
988                                                        sh->service_name,
989                                                        option,
990                                                        &opt));
991   if (NULL == (*ret = GNUNET_STRINGS_parse_ipv4_policy (opt)))
992   {
993     LOG (GNUNET_ERROR_TYPE_WARNING,
994          _("Could not parse IPv4 network specification `%s' for `%s:%s'\n"),
995          opt,
996          sh->service_name,
997          option);
998     GNUNET_free (opt);
999     return GNUNET_SYSERR;
1000   }
1001   GNUNET_free (opt);
1002   return GNUNET_OK;
1003 }
1004
1005
1006 /**
1007  * Parse an IPv6 access control list.
1008  *
1009  * @param ret location where to write the ACL (set)
1010  * @param sh service context to use to get the configuration
1011  * @param option name of the ACL option to parse
1012  * @return #GNUNET_SYSERR on parse error, #GNUNET_OK on success (including
1013  *         no ACL configured)
1014  */
1015 static int
1016 process_acl6 (struct GNUNET_STRINGS_IPv6NetworkPolicy **ret,
1017               struct GNUNET_SERVICE_Handle *sh,
1018               const char *option)
1019 {
1020   char *opt;
1021
1022   if (! GNUNET_CONFIGURATION_have_value (sh->cfg,
1023                                          sh->service_name,
1024                                          option))
1025   {
1026     *ret = NULL;
1027     return GNUNET_OK;
1028   }
1029   GNUNET_break (GNUNET_OK ==
1030                 GNUNET_CONFIGURATION_get_value_string (sh->cfg,
1031                                                        sh->service_name,
1032                                                        option,
1033                                                        &opt));
1034   if (NULL == (*ret = GNUNET_STRINGS_parse_ipv6_policy (opt)))
1035   {
1036     LOG (GNUNET_ERROR_TYPE_WARNING,
1037          _("Could not parse IPv6 network specification `%s' for `%s:%s'\n"),
1038          opt,
1039          sh->service_name,
1040          option);
1041     GNUNET_free (opt);
1042     return GNUNET_SYSERR;
1043   }
1044   GNUNET_free (opt);
1045   return GNUNET_OK;
1046 }
1047
1048
1049 /**
1050  * Add the given UNIX domain path as an address to the
1051  * list (as the first entry).
1052  *
1053  * @param saddrs array to update
1054  * @param saddrlens where to store the address length
1055  * @param unixpath path to add
1056  * @param abstract #GNUNET_YES to add an abstract UNIX domain socket.  This
1057  *          parameter is ignore on systems other than LINUX
1058  */
1059 static void
1060 add_unixpath (struct sockaddr **saddrs,
1061               socklen_t *saddrlens,
1062               const char *unixpath,
1063               int abstract)
1064 {
1065 #ifdef AF_UNIX
1066   struct sockaddr_un *un;
1067
1068   un = GNUNET_new (struct sockaddr_un);
1069   un->sun_family = AF_UNIX;
1070   strncpy (un->sun_path,
1071            unixpath,
1072            sizeof (un->sun_path) - 1);
1073 #ifdef LINUX
1074   if (GNUNET_YES == abstract)
1075     un->sun_path[0] = '\0';
1076 #endif
1077 #if HAVE_SOCKADDR_UN_SUN_LEN
1078   un->sun_len = (u_char) sizeof (struct sockaddr_un);
1079 #endif
1080   *saddrs = (struct sockaddr *) un;
1081   *saddrlens = sizeof (struct sockaddr_un);
1082 #else
1083   /* this function should never be called
1084    * unless AF_UNIX is defined! */
1085   GNUNET_assert (0);
1086 #endif
1087 }
1088
1089
1090 /**
1091  * Get the list of addresses that a server for the given service
1092  * should bind to.
1093  *
1094  * @param service_name name of the service
1095  * @param cfg configuration (which specifies the addresses)
1096  * @param addrs set (call by reference) to an array of pointers to the
1097  *              addresses the server should bind to and listen on; the
1098  *              array will be NULL-terminated (on success)
1099  * @param addr_lens set (call by reference) to an array of the lengths
1100  *              of the respective `struct sockaddr` struct in the @a addrs
1101  *              array (on success)
1102  * @return number of addresses found on success,
1103  *              #GNUNET_SYSERR if the configuration
1104  *              did not specify reasonable finding information or
1105  *              if it specified a hostname that could not be resolved;
1106  *              #GNUNET_NO if the number of addresses configured is
1107  *              zero (in this case, `*addrs` and `*addr_lens` will be
1108  *              set to NULL).
1109  */
1110 static int
1111 get_server_addresses (const char *service_name,
1112                       const struct GNUNET_CONFIGURATION_Handle *cfg,
1113                       struct sockaddr ***addrs,
1114                       socklen_t **addr_lens)
1115 {
1116   int disablev6;
1117   struct GNUNET_NETWORK_Handle *desc;
1118   unsigned long long port;
1119   char *unixpath;
1120   struct addrinfo hints;
1121   struct addrinfo *res;
1122   struct addrinfo *pos;
1123   struct addrinfo *next;
1124   unsigned int i;
1125   int resi;
1126   int ret;
1127   int abstract;
1128   struct sockaddr **saddrs;
1129   socklen_t *saddrlens;
1130   char *hostname;
1131
1132   *addrs = NULL;
1133   *addr_lens = NULL;
1134   desc = NULL;
1135   disablev6 = GNUNET_NO;
1136   if ( (GNUNET_NO ==
1137         GNUNET_NETWORK_test_pf (PF_INET6)) ||
1138        (GNUNET_YES ==
1139         GNUNET_CONFIGURATION_get_value_yesno (cfg,
1140                                               service_name,
1141                                               "DISABLEV6") ) )
1142     disablev6 = GNUNET_YES;
1143
1144   port = 0;
1145   if (GNUNET_CONFIGURATION_have_value (cfg,
1146                                        service_name,
1147                                        "PORT"))
1148   {
1149     if (GNUNET_OK !=
1150         GNUNET_CONFIGURATION_get_value_number (cfg,
1151                                                service_name,
1152                                                "PORT",
1153                                                &port))
1154     {
1155       LOG (GNUNET_ERROR_TYPE_ERROR,
1156            _("Require valid port number for service `%s' in configuration!\n"),
1157            service_name);
1158     }
1159     if (port > 65535)
1160     {
1161       LOG (GNUNET_ERROR_TYPE_ERROR,
1162            _("Require valid port number for service `%s' in configuration!\n"),
1163            service_name);
1164       return GNUNET_SYSERR;
1165     }
1166   }
1167
1168   if (GNUNET_CONFIGURATION_have_value (cfg,
1169                                        service_name,
1170                                        "BINDTO"))
1171   {
1172     GNUNET_break (GNUNET_OK ==
1173                   GNUNET_CONFIGURATION_get_value_string (cfg,
1174                                                          service_name,
1175                                                          "BINDTO",
1176                                                          &hostname));
1177   }
1178   else
1179     hostname = NULL;
1180
1181   unixpath = NULL;
1182   abstract = GNUNET_NO;
1183 #ifdef AF_UNIX
1184   if ((GNUNET_YES ==
1185        GNUNET_CONFIGURATION_have_value (cfg,
1186                                         service_name,
1187                                         "UNIXPATH")) &&
1188       (GNUNET_OK ==
1189        GNUNET_CONFIGURATION_get_value_filename (cfg,
1190                                                 service_name,
1191                                                 "UNIXPATH",
1192                                                 &unixpath)) &&
1193       (0 < strlen (unixpath)))
1194   {
1195     /* probe UNIX support */
1196     struct sockaddr_un s_un;
1197
1198     if (strlen (unixpath) >= sizeof (s_un.sun_path))
1199     {
1200       LOG (GNUNET_ERROR_TYPE_WARNING,
1201            _("UNIXPATH `%s' too long, maximum length is %llu\n"),
1202            unixpath,
1203            (unsigned long long) sizeof (s_un.sun_path));
1204       unixpath = GNUNET_NETWORK_shorten_unixpath (unixpath);
1205       LOG (GNUNET_ERROR_TYPE_INFO,
1206            _("Using `%s' instead\n"),
1207            unixpath);
1208     }
1209 #ifdef LINUX
1210     abstract = GNUNET_CONFIGURATION_get_value_yesno (cfg,
1211                                                      "TESTING",
1212                                                      "USE_ABSTRACT_SOCKETS");
1213     if (GNUNET_SYSERR == abstract)
1214       abstract = GNUNET_NO;
1215 #endif
1216     if ( (GNUNET_YES != abstract) &&
1217          (GNUNET_OK !=
1218           GNUNET_DISK_directory_create_for_file (unixpath)) )
1219       GNUNET_log_strerror_file (GNUNET_ERROR_TYPE_ERROR,
1220                                 "mkdir",
1221                                 unixpath);
1222   }
1223   if (NULL != unixpath)
1224   {
1225     desc = GNUNET_NETWORK_socket_create (AF_UNIX,
1226                                          SOCK_STREAM,
1227                                          0);
1228     if (NULL == desc)
1229     {
1230       if ((ENOBUFS == errno) ||
1231           (ENOMEM == errno) ||
1232           (ENFILE == errno) ||
1233           (EACCES == errno))
1234       {
1235         LOG_STRERROR (GNUNET_ERROR_TYPE_ERROR,
1236                       "socket");
1237         GNUNET_free_non_null (hostname);
1238         GNUNET_free (unixpath);
1239         return GNUNET_SYSERR;
1240       }
1241       LOG (GNUNET_ERROR_TYPE_INFO,
1242            _("Disabling UNIX domain socket support for service `%s', failed to create UNIX domain socket: %s\n"),
1243            service_name,
1244            STRERROR (errno));
1245       GNUNET_free (unixpath);
1246       unixpath = NULL;
1247     }
1248     else
1249     {
1250       GNUNET_break (GNUNET_OK ==
1251                     GNUNET_NETWORK_socket_close (desc));
1252       desc = NULL;
1253     }
1254   }
1255 #endif
1256
1257   if ((0 == port) && (NULL == unixpath))
1258   {
1259     LOG (GNUNET_ERROR_TYPE_ERROR,
1260          _("Have neither PORT nor UNIXPATH for service `%s', but one is required\n"),
1261          service_name);
1262     GNUNET_free_non_null (hostname);
1263     return GNUNET_SYSERR;
1264   }
1265   if (0 == port)
1266   {
1267     saddrs = GNUNET_new_array (2,
1268                                struct sockaddr *);
1269     saddrlens = GNUNET_new_array (2,
1270                                   socklen_t);
1271     add_unixpath (saddrs,
1272                   saddrlens,
1273                   unixpath,
1274                   abstract);
1275     GNUNET_free_non_null (unixpath);
1276     GNUNET_free_non_null (hostname);
1277     *addrs = saddrs;
1278     *addr_lens = saddrlens;
1279     return 1;
1280   }
1281
1282   if (NULL != hostname)
1283   {
1284     LOG (GNUNET_ERROR_TYPE_DEBUG,
1285          "Resolving `%s' since that is where `%s' will bind to.\n",
1286          hostname,
1287          service_name);
1288     memset (&hints,
1289             0,
1290             sizeof (struct addrinfo));
1291     if (disablev6)
1292       hints.ai_family = AF_INET;
1293     hints.ai_protocol = IPPROTO_TCP;
1294     if ((0 != (ret = getaddrinfo (hostname,
1295                                   NULL,
1296                                   &hints,
1297                                   &res))) ||
1298         (NULL == res))
1299     {
1300       LOG (GNUNET_ERROR_TYPE_ERROR,
1301            _("Failed to resolve `%s': %s\n"),
1302            hostname,
1303            gai_strerror (ret));
1304       GNUNET_free (hostname);
1305       GNUNET_free_non_null (unixpath);
1306       return GNUNET_SYSERR;
1307     }
1308     next = res;
1309     i = 0;
1310     while (NULL != (pos = next))
1311     {
1312       next = pos->ai_next;
1313       if ( (disablev6) &&
1314            (pos->ai_family == AF_INET6) )
1315         continue;
1316       i++;
1317     }
1318     if (0 == i)
1319     {
1320       LOG (GNUNET_ERROR_TYPE_ERROR,
1321            _("Failed to find %saddress for `%s'.\n"),
1322            disablev6 ? "IPv4 " : "",
1323            hostname);
1324       freeaddrinfo (res);
1325       GNUNET_free (hostname);
1326       GNUNET_free_non_null (unixpath);
1327       return GNUNET_SYSERR;
1328     }
1329     resi = i;
1330     if (NULL != unixpath)
1331       resi++;
1332     saddrs = GNUNET_new_array (resi + 1,
1333                                struct sockaddr *);
1334     saddrlens = GNUNET_new_array (resi + 1,
1335                                   socklen_t);
1336     i = 0;
1337     if (NULL != unixpath)
1338     {
1339       add_unixpath (saddrs,
1340                     saddrlens,
1341                     unixpath,
1342                     abstract);
1343       i++;
1344     }
1345     next = res;
1346     while (NULL != (pos = next))
1347     {
1348       next = pos->ai_next;
1349       if ( (disablev6) &&
1350            (AF_INET6 == pos->ai_family) )
1351         continue;
1352       if ( (IPPROTO_TCP != pos->ai_protocol) &&
1353            (0 != pos->ai_protocol) )
1354         continue;               /* not TCP */
1355       if ( (SOCK_STREAM != pos->ai_socktype) &&
1356            (0 != pos->ai_socktype) )
1357         continue;               /* huh? */
1358       LOG (GNUNET_ERROR_TYPE_DEBUG,
1359            "Service `%s' will bind to `%s'\n",
1360            service_name,
1361            GNUNET_a2s (pos->ai_addr,
1362                        pos->ai_addrlen));
1363       if (AF_INET == pos->ai_family)
1364       {
1365         GNUNET_assert (sizeof (struct sockaddr_in) == pos->ai_addrlen);
1366         saddrlens[i] = pos->ai_addrlen;
1367         saddrs[i] = GNUNET_malloc (saddrlens[i]);
1368         GNUNET_memcpy (saddrs[i],
1369                        pos->ai_addr,
1370                        saddrlens[i]);
1371         ((struct sockaddr_in *) saddrs[i])->sin_port = htons (port);
1372       }
1373       else
1374       {
1375         GNUNET_assert (AF_INET6 == pos->ai_family);
1376         GNUNET_assert (sizeof (struct sockaddr_in6) == pos->ai_addrlen);
1377         saddrlens[i] = pos->ai_addrlen;
1378         saddrs[i] = GNUNET_malloc (saddrlens[i]);
1379         GNUNET_memcpy (saddrs[i],
1380                        pos->ai_addr,
1381                        saddrlens[i]);
1382         ((struct sockaddr_in6 *) saddrs[i])->sin6_port = htons (port);
1383       }
1384       i++;
1385     }
1386     GNUNET_free (hostname);
1387     freeaddrinfo (res);
1388     resi = i;
1389   }
1390   else
1391   {
1392     /* will bind against everything, just set port */
1393     if (disablev6)
1394     {
1395       /* V4-only */
1396       resi = 1;
1397       if (NULL != unixpath)
1398         resi++;
1399       i = 0;
1400       saddrs = GNUNET_new_array (resi + 1,
1401                                  struct sockaddr *);
1402       saddrlens = GNUNET_new_array (resi + 1,
1403                                     socklen_t);
1404       if (NULL != unixpath)
1405       {
1406         add_unixpath (saddrs,
1407                       saddrlens,
1408                       unixpath,
1409                       abstract);
1410         i++;
1411       }
1412       saddrlens[i] = sizeof (struct sockaddr_in);
1413       saddrs[i] = GNUNET_malloc (saddrlens[i]);
1414 #if HAVE_SOCKADDR_IN_SIN_LEN
1415       ((struct sockaddr_in *) saddrs[i])->sin_len = saddrlens[i];
1416 #endif
1417       ((struct sockaddr_in *) saddrs[i])->sin_family = AF_INET;
1418       ((struct sockaddr_in *) saddrs[i])->sin_port = htons (port);
1419     }
1420     else
1421     {
1422       /* dual stack */
1423       resi = 2;
1424       if (NULL != unixpath)
1425         resi++;
1426       saddrs = GNUNET_new_array (resi + 1,
1427                                  struct sockaddr *);
1428       saddrlens = GNUNET_new_array (resi + 1,
1429                                     socklen_t);
1430       i = 0;
1431       if (NULL != unixpath)
1432       {
1433         add_unixpath (saddrs,
1434                       saddrlens,
1435                       unixpath,
1436                       abstract);
1437         i++;
1438       }
1439       saddrlens[i] = sizeof (struct sockaddr_in6);
1440       saddrs[i] = GNUNET_malloc (saddrlens[i]);
1441 #if HAVE_SOCKADDR_IN_SIN_LEN
1442       ((struct sockaddr_in6 *) saddrs[i])->sin6_len = saddrlens[0];
1443 #endif
1444       ((struct sockaddr_in6 *) saddrs[i])->sin6_family = AF_INET6;
1445       ((struct sockaddr_in6 *) saddrs[i])->sin6_port = htons (port);
1446       i++;
1447       saddrlens[i] = sizeof (struct sockaddr_in);
1448       saddrs[i] = GNUNET_malloc (saddrlens[i]);
1449 #if HAVE_SOCKADDR_IN_SIN_LEN
1450       ((struct sockaddr_in *) saddrs[i])->sin_len = saddrlens[1];
1451 #endif
1452       ((struct sockaddr_in *) saddrs[i])->sin_family = AF_INET;
1453       ((struct sockaddr_in *) saddrs[i])->sin_port = htons (port);
1454     }
1455   }
1456   GNUNET_free_non_null (unixpath);
1457   *addrs = saddrs;
1458   *addr_lens = saddrlens;
1459   return resi;
1460 }
1461
1462
1463 #ifdef MINGW
1464 /**
1465  * Read listen sockets from the parent process (ARM).
1466  *
1467  * @param sh service context to initialize
1468  * @return NULL-terminated array of sockets on success,
1469  *         NULL if not ok (must bind yourself)
1470  */
1471 static struct GNUNET_NETWORK_Handle **
1472 receive_sockets_from_parent (struct GNUNET_SERVICE_Handle *sh)
1473 {
1474   static struct GNUNET_NETWORK_Handle **lsocks;
1475   const char *env_buf;
1476   int fail;
1477   uint64_t count;
1478   uint64_t i;
1479   HANDLE lsocks_pipe;
1480
1481   env_buf = getenv ("GNUNET_OS_READ_LSOCKS");
1482   if ( (NULL == env_buf) ||
1483        (strlen (env_buf) <= 0) )
1484     return NULL;
1485   /* Using W32 API directly here, because this pipe will
1486    * never be used outside of this function, and it's just too much of a bother
1487    * to create a GNUnet API that boxes a HANDLE (the way it is done with socks)
1488    */
1489   lsocks_pipe = (HANDLE) strtoul (env_buf,
1490                                   NULL,
1491                                   10);
1492   if ( (0 == lsocks_pipe) ||
1493        (INVALID_HANDLE_VALUE == lsocks_pipe))
1494     return NULL;
1495   fail = 1;
1496   do
1497   {
1498     int ret;
1499     int fail2;
1500     DWORD rd;
1501
1502     ret = ReadFile (lsocks_pipe,
1503                     &count,
1504                     sizeof (count),
1505                     &rd,
1506                     NULL);
1507     if ( (0 == ret) ||
1508          (sizeof (count) != rd) ||
1509          (0 == count) )
1510       break;
1511     lsocks = GNUNET_new_array (count + 1,
1512                                struct GNUNET_NETWORK_Handle *);
1513
1514     fail2 = 1;
1515     for (i = 0; i < count; i++)
1516     {
1517       WSAPROTOCOL_INFOA pi;
1518       uint64_t size;
1519       SOCKET s;
1520
1521       ret = ReadFile (lsocks_pipe,
1522                       &size,
1523                       sizeof (size),
1524                       &rd,
1525                       NULL);
1526       if ( (0 == ret) ||
1527            (sizeof (size) != rd) ||
1528            (sizeof (pi) != size) )
1529         break;
1530       ret = ReadFile (lsocks_pipe,
1531                       &pi,
1532                       sizeof (pi),
1533                       &rd,
1534                       NULL);
1535       if ( (0 == ret) ||
1536            (sizeof (pi) != rd))
1537         break;
1538       s = WSASocketA (pi.iAddressFamily,
1539                       pi.iSocketType,
1540                       pi.iProtocol,
1541                       &pi,
1542                       0,
1543                       WSA_FLAG_OVERLAPPED);
1544       lsocks[i] = GNUNET_NETWORK_socket_box_native (s);
1545       if (NULL == lsocks[i])
1546         break;
1547       else if (i == count - 1)
1548         fail2 = 0;
1549     }
1550     if (fail2)
1551       break;
1552     lsocks[count] = NULL;
1553     fail = 0;
1554   }
1555   while (fail);
1556   CloseHandle (lsocks_pipe);
1557
1558   if (fail)
1559   {
1560     LOG (GNUNET_ERROR_TYPE_ERROR,
1561          _("Could not access a pre-bound socket, will try to bind myself\n"));
1562     for (i = 0; (i < count) && (NULL != lsocks[i]); i++)
1563       GNUNET_break (GNUNET_OK ==
1564                     GNUNET_NETWORK_socket_close (lsocks[i]));
1565     GNUNET_free (lsocks);
1566     return NULL;
1567   }
1568   return lsocks;
1569 }
1570 #endif
1571
1572
1573 /**
1574  * Create and initialize a listen socket for the server.
1575  *
1576  * @param server_addr address to listen on
1577  * @param socklen length of @a server_addr
1578  * @return NULL on error, otherwise the listen socket
1579  */
1580 static struct GNUNET_NETWORK_Handle *
1581 open_listen_socket (const struct sockaddr *server_addr,
1582                     socklen_t socklen)
1583 {
1584   struct GNUNET_NETWORK_Handle *sock;
1585   uint16_t port;
1586   int eno;
1587
1588   switch (server_addr->sa_family)
1589   {
1590   case AF_INET:
1591     port = ntohs (((const struct sockaddr_in *) server_addr)->sin_port);
1592     break;
1593   case AF_INET6:
1594     port = ntohs (((const struct sockaddr_in6 *) server_addr)->sin6_port);
1595     break;
1596   case AF_UNIX:
1597     port = 0;
1598     break;
1599   default:
1600     GNUNET_break (0);
1601     port = 0;
1602     break;
1603   }
1604   sock = GNUNET_NETWORK_socket_create (server_addr->sa_family,
1605                                        SOCK_STREAM,
1606                                        0);
1607   if (NULL == sock)
1608   {
1609     LOG_STRERROR (GNUNET_ERROR_TYPE_ERROR,
1610                   "socket");
1611     errno = 0;
1612     return NULL;
1613   }
1614   /* bind the socket */
1615   if (GNUNET_OK != GNUNET_NETWORK_socket_bind (sock,
1616                                                server_addr,
1617                                                socklen))
1618   {
1619     eno = errno;
1620     if (EADDRINUSE != errno)
1621     {
1622       /* we don't log 'EADDRINUSE' here since an IPv4 bind may
1623        * fail if we already took the port on IPv6; if both IPv4 and
1624        * IPv6 binds fail, then our caller will log using the
1625        * errno preserved in 'eno' */
1626       LOG_STRERROR (GNUNET_ERROR_TYPE_ERROR,
1627                     "bind");
1628       if (0 != port)
1629         LOG (GNUNET_ERROR_TYPE_ERROR,
1630              _("`%s' failed for port %d (%s).\n"),
1631              "bind",
1632              port,
1633              (AF_INET == server_addr->sa_family) ? "IPv4" : "IPv6");
1634       eno = 0;
1635     }
1636     else
1637     {
1638       if (0 != port)
1639         LOG (GNUNET_ERROR_TYPE_WARNING,
1640              _("`%s' failed for port %d (%s): address already in use\n"),
1641              "bind", port,
1642              (AF_INET == server_addr->sa_family) ? "IPv4" : "IPv6");
1643       else if (AF_UNIX == server_addr->sa_family)
1644       {
1645         LOG (GNUNET_ERROR_TYPE_WARNING,
1646              _("`%s' failed for `%s': address already in use\n"),
1647              "bind",
1648              GNUNET_a2s (server_addr, socklen));
1649       }
1650     }
1651     GNUNET_break (GNUNET_OK ==
1652                   GNUNET_NETWORK_socket_close (sock));
1653     errno = eno;
1654     return NULL;
1655   }
1656   if (GNUNET_OK != GNUNET_NETWORK_socket_listen (sock,
1657                                                  5))
1658   {
1659     LOG_STRERROR (GNUNET_ERROR_TYPE_ERROR,
1660                   "listen");
1661     GNUNET_break (GNUNET_OK ==
1662                   GNUNET_NETWORK_socket_close (sock));
1663     errno = 0;
1664     return NULL;
1665   }
1666   if (0 != port)
1667     LOG (GNUNET_ERROR_TYPE_DEBUG,
1668          "Server starts to listen on port %u.\n",
1669          port);
1670   return sock;
1671 }
1672
1673
1674 /**
1675  * Setup service handle
1676  *
1677  * Configuration may specify:
1678  * - PORT (where to bind to for TCP)
1679  * - UNIXPATH (where to bind to for UNIX domain sockets)
1680  * - DISABLEV6 (disable support for IPv6, otherwise we use dual-stack)
1681  * - BINDTO (hostname or IP address to bind to, otherwise we take everything)
1682  * - ACCEPT_FROM  (only allow connections from specified IPv4 subnets)
1683  * - ACCEPT_FROM6 (only allow connections from specified IPv6 subnets)
1684  * - REJECT_FROM  (disallow allow connections from specified IPv4 subnets)
1685  * - REJECT_FROM6 (disallow allow connections from specified IPv6 subnets)
1686  *
1687  * @param sh service context to initialize
1688  * @return #GNUNET_OK if configuration succeeded
1689  */
1690 static int
1691 setup_service (struct GNUNET_SERVICE_Handle *sh)
1692 {
1693   int tolerant;
1694   struct GNUNET_NETWORK_Handle **lsocks;
1695 #ifndef MINGW
1696   const char *nfds;
1697   unsigned int cnt;
1698   int flags;
1699   char dummy[2];
1700 #endif
1701
1702   if (GNUNET_CONFIGURATION_have_value
1703       (sh->cfg,
1704        sh->service_name,
1705        "TOLERANT"))
1706   {
1707     if (GNUNET_SYSERR ==
1708         (tolerant =
1709          GNUNET_CONFIGURATION_get_value_yesno (sh->cfg,
1710                                                sh->service_name,
1711                                                "TOLERANT")))
1712     {
1713       LOG (GNUNET_ERROR_TYPE_ERROR,
1714            _("Specified value for `%s' of service `%s' is invalid\n"),
1715            "TOLERANT",
1716            sh->service_name);
1717       return GNUNET_SYSERR;
1718     }
1719   }
1720   else
1721     tolerant = GNUNET_NO;
1722
1723   lsocks = NULL;
1724 #ifndef MINGW
1725   errno = 0;
1726   if ( (NULL != (nfds = getenv ("LISTEN_FDS"))) &&
1727        (1 == SSCANF (nfds,
1728                      "%u%1s",
1729                      &cnt,
1730                      dummy)) &&
1731        (cnt > 0) &&
1732        (cnt < FD_SETSIZE) &&
1733        (cnt + 4 < FD_SETSIZE) )
1734   {
1735     lsocks = GNUNET_new_array (cnt + 1,
1736                                struct GNUNET_NETWORK_Handle *);
1737     while (0 < cnt--)
1738     {
1739       flags = fcntl (3 + cnt,
1740                      F_GETFD);
1741       if ( (flags < 0) ||
1742            (0 != (flags & FD_CLOEXEC)) ||
1743            (NULL ==
1744             (lsocks[cnt] = GNUNET_NETWORK_socket_box_native (3 + cnt))))
1745       {
1746         LOG (GNUNET_ERROR_TYPE_ERROR,
1747              _("Could not access pre-bound socket %u, will try to bind myself\n"),
1748              (unsigned int) 3 + cnt);
1749         cnt++;
1750         while (NULL != lsocks[cnt])
1751           GNUNET_break (GNUNET_OK ==
1752                         GNUNET_NETWORK_socket_close (lsocks[cnt++]));
1753         GNUNET_free (lsocks);
1754         lsocks = NULL;
1755         break;
1756       }
1757     }
1758     unsetenv ("LISTEN_FDS");
1759   }
1760 #else
1761   if (NULL != getenv ("GNUNET_OS_READ_LSOCKS"))
1762   {
1763     lsocks = receive_sockets_from_parent (sh);
1764     putenv ("GNUNET_OS_READ_LSOCKS=");
1765   }
1766 #endif
1767
1768   if (NULL != lsocks)
1769   {
1770     /* listen only on inherited sockets if we have any */
1771     struct GNUNET_NETWORK_Handle **ls;
1772
1773     for (ls = lsocks; NULL != *ls; ls++)
1774     {
1775       struct ServiceListenContext *slc;
1776
1777       slc = GNUNET_new (struct ServiceListenContext);
1778       slc->sh = sh;
1779       slc->listen_socket = *ls;
1780       GNUNET_CONTAINER_DLL_insert (sh->slc_head,
1781                                    sh->slc_tail,
1782                                    slc);
1783     }
1784     GNUNET_free (lsocks);
1785   }
1786   else
1787   {
1788     struct sockaddr **addrs;
1789     socklen_t *addrlens;
1790     int num;
1791
1792     num = get_server_addresses (sh->service_name,
1793                                 sh->cfg,
1794                                 &addrs,
1795                                 &addrlens);
1796     if (GNUNET_SYSERR == num)
1797       return GNUNET_SYSERR;
1798
1799     for (int i = 0; i < num; i++)
1800     {
1801       struct ServiceListenContext *slc;
1802
1803       slc = GNUNET_new (struct ServiceListenContext);
1804       slc->sh = sh;
1805       slc->listen_socket = open_listen_socket (addrs[i],
1806                                                addrlens[i]);
1807       GNUNET_free (addrs[i]);
1808       if (NULL == slc->listen_socket)
1809       {
1810         GNUNET_log_strerror (GNUNET_ERROR_TYPE_ERROR,
1811                              "bind");
1812         GNUNET_free (slc);
1813         continue;
1814       }
1815       GNUNET_CONTAINER_DLL_insert (sh->slc_head,
1816                                    sh->slc_tail,
1817                                    slc);
1818     }
1819     GNUNET_free_non_null (addrlens);
1820     GNUNET_free_non_null (addrs);
1821     if ( (0 != num) &&
1822          (NULL == sh->slc_head) )
1823     {
1824       /* All attempts to bind failed, hard failure */
1825       GNUNET_log (GNUNET_ERROR_TYPE_ERROR,
1826                   _("Could not bind to any of the ports I was supposed to, refusing to run!\n"));
1827       return GNUNET_SYSERR;
1828     }
1829   }
1830
1831   sh->require_found = tolerant ? GNUNET_NO : GNUNET_YES;
1832   sh->match_uid
1833     = GNUNET_CONFIGURATION_get_value_yesno (sh->cfg,
1834                                             sh->service_name,
1835                                             "UNIX_MATCH_UID");
1836   sh->match_gid
1837     = GNUNET_CONFIGURATION_get_value_yesno (sh->cfg,
1838                                             sh->service_name,
1839                                             "UNIX_MATCH_GID");
1840   process_acl4 (&sh->v4_denied,
1841                 sh,
1842                 "REJECT_FROM");
1843   process_acl4 (&sh->v4_allowed,
1844                 sh,
1845                 "ACCEPT_FROM");
1846   process_acl6 (&sh->v6_denied,
1847                 sh,
1848                 "REJECT_FROM6");
1849   process_acl6 (&sh->v6_allowed,
1850                 sh,
1851                 "ACCEPT_FROM6");
1852   return GNUNET_OK;
1853 }
1854
1855
1856 /**
1857  * Get the name of the user that'll be used
1858  * to provide the service.
1859  *
1860  * @param sh service context
1861  * @return value of the 'USERNAME' option
1862  */
1863 static char *
1864 get_user_name (struct GNUNET_SERVICE_Handle *sh)
1865 {
1866   char *un;
1867
1868   if (GNUNET_OK !=
1869       GNUNET_CONFIGURATION_get_value_filename (sh->cfg,
1870                                                sh->service_name,
1871                                                "USERNAME",
1872                                                &un))
1873     return NULL;
1874   return un;
1875 }
1876
1877
1878 /**
1879  * Set user ID.
1880  *
1881  * @param sh service context
1882  * @return #GNUNET_OK on success, #GNUNET_SYSERR on error
1883  */
1884 static int
1885 set_user_id (struct GNUNET_SERVICE_Handle *sh)
1886 {
1887   char *user;
1888
1889   if (NULL == (user = get_user_name (sh)))
1890     return GNUNET_OK;           /* keep */
1891 #ifndef MINGW
1892   struct passwd *pws;
1893
1894   errno = 0;
1895   pws = getpwnam (user);
1896   if (NULL == pws)
1897   {
1898     LOG (GNUNET_ERROR_TYPE_ERROR,
1899          _("Cannot obtain information about user `%s': %s\n"),
1900          user,
1901          errno == 0 ? _("No such user") : STRERROR (errno));
1902     GNUNET_free (user);
1903     return GNUNET_SYSERR;
1904   }
1905   if ( (0 != setgid (pws->pw_gid)) ||
1906        (0 != setegid (pws->pw_gid)) ||
1907 #if HAVE_INITGROUPS
1908        (0 != initgroups (user,
1909                          pws->pw_gid)) ||
1910 #endif
1911        (0 != setuid (pws->pw_uid)) ||
1912        (0 != seteuid (pws->pw_uid)))
1913   {
1914     if ((0 != setregid (pws->pw_gid,
1915                         pws->pw_gid)) ||
1916         (0 != setreuid (pws->pw_uid,
1917                         pws->pw_uid)))
1918     {
1919       LOG (GNUNET_ERROR_TYPE_ERROR,
1920            _("Cannot change user/group to `%s': %s\n"),
1921            user,
1922            STRERROR (errno));
1923       GNUNET_free (user);
1924       return GNUNET_SYSERR;
1925     }
1926   }
1927 #endif
1928   GNUNET_free (user);
1929   return GNUNET_OK;
1930 }
1931
1932
1933 /**
1934  * Get the name of the file where we will
1935  * write the PID of the service.
1936  *
1937  * @param sh service context
1938  * @return name of the file for the process ID
1939  */
1940 static char *
1941 get_pid_file_name (struct GNUNET_SERVICE_Handle *sh)
1942 {
1943   char *pif;
1944
1945   if (GNUNET_OK !=
1946       GNUNET_CONFIGURATION_get_value_filename (sh->cfg,
1947                                                sh->service_name,
1948                                                "PIDFILE",
1949                                                &pif))
1950     return NULL;
1951   return pif;
1952 }
1953
1954
1955 /**
1956  * Delete the PID file that was created by our parent.
1957  *
1958  * @param sh service context
1959  */
1960 static void
1961 pid_file_delete (struct GNUNET_SERVICE_Handle *sh)
1962 {
1963   char *pif = get_pid_file_name (sh);
1964
1965   if (NULL == pif)
1966     return;                     /* no PID file */
1967   if (0 != UNLINK (pif))
1968     LOG_STRERROR_FILE (GNUNET_ERROR_TYPE_WARNING,
1969                        "unlink",
1970                        pif);
1971   GNUNET_free (pif);
1972 }
1973
1974
1975 /**
1976  * Detach from terminal.
1977  *
1978  * @param sh service context
1979  * @return #GNUNET_OK on success, #GNUNET_SYSERR on error
1980  */
1981 static int
1982 detach_terminal (struct GNUNET_SERVICE_Handle *sh)
1983 {
1984 #ifndef MINGW
1985   pid_t pid;
1986   int nullfd;
1987   int filedes[2];
1988
1989   if (0 != PIPE (filedes))
1990   {
1991     LOG_STRERROR (GNUNET_ERROR_TYPE_ERROR,
1992                   "pipe");
1993     return GNUNET_SYSERR;
1994   }
1995   pid = fork ();
1996   if (pid < 0)
1997   {
1998     LOG_STRERROR (GNUNET_ERROR_TYPE_ERROR,
1999                   "fork");
2000     return GNUNET_SYSERR;
2001   }
2002   if (0 != pid)
2003   {
2004     /* Parent */
2005     char c;
2006
2007     GNUNET_break (0 == CLOSE (filedes[1]));
2008     c = 'X';
2009     if (1 != READ (filedes[0],
2010                    &c,
2011                    sizeof (char)))
2012       LOG_STRERROR (GNUNET_ERROR_TYPE_WARNING,
2013                     "read");
2014     fflush (stdout);
2015     switch (c)
2016     {
2017     case '.':
2018       exit (0);
2019     case 'I':
2020       LOG (GNUNET_ERROR_TYPE_INFO,
2021            _("Service process failed to initialize\n"));
2022       break;
2023     case 'S':
2024       LOG (GNUNET_ERROR_TYPE_INFO,
2025            _("Service process could not initialize server function\n"));
2026       break;
2027     case 'X':
2028       LOG (GNUNET_ERROR_TYPE_INFO,
2029            _("Service process failed to report status\n"));
2030       break;
2031     }
2032     exit (1);                   /* child reported error */
2033   }
2034   GNUNET_break (0 == CLOSE (0));
2035   GNUNET_break (0 == CLOSE (1));
2036   GNUNET_break (0 == CLOSE (filedes[0]));
2037   nullfd = OPEN ("/dev/null",
2038                  O_RDWR | O_APPEND);
2039   if (nullfd < 0)
2040     return GNUNET_SYSERR;
2041   /* set stdin/stdout to /dev/null */
2042   if ( (dup2 (nullfd, 0) < 0) ||
2043        (dup2 (nullfd, 1) < 0) )
2044   {
2045     LOG_STRERROR (GNUNET_ERROR_TYPE_ERROR,
2046                   "dup2");
2047     (void) CLOSE (nullfd);
2048     return GNUNET_SYSERR;
2049   }
2050   (void) CLOSE (nullfd);
2051   /* Detach from controlling terminal */
2052   pid = setsid ();
2053   if (-1 == pid)
2054     LOG_STRERROR (GNUNET_ERROR_TYPE_ERROR,
2055                   "setsid");
2056   sh->ready_confirm_fd = filedes[1];
2057 #else
2058   /* FIXME: we probably need to do something else
2059    * elsewhere in order to fork the process itself... */
2060   FreeConsole ();
2061 #endif
2062   return GNUNET_OK;
2063 }
2064
2065
2066 /**
2067  * Tear down the service, closing the listen sockets and
2068  * freeing the ACLs.
2069  *
2070  * @param sh handle to the service to tear down.
2071  */
2072 static void
2073 teardown_service (struct GNUNET_SERVICE_Handle *sh)
2074 {
2075   struct ServiceListenContext *slc;
2076
2077   GNUNET_free_non_null (sh->v4_denied);
2078   GNUNET_free_non_null (sh->v6_denied);
2079   GNUNET_free_non_null (sh->v4_allowed);
2080   GNUNET_free_non_null (sh->v6_allowed);
2081   while (NULL != (slc = sh->slc_head))
2082   {
2083     GNUNET_CONTAINER_DLL_remove (sh->slc_head,
2084                                  sh->slc_tail,
2085                                  slc);
2086     if (NULL != slc->listen_task)
2087       GNUNET_SCHEDULER_cancel (slc->listen_task);
2088     GNUNET_break (GNUNET_OK ==
2089                   GNUNET_NETWORK_socket_close (slc->listen_socket));
2090     GNUNET_free (slc);
2091   }
2092 }
2093
2094
2095 /**
2096  * Function to return link to AGPL source upon request.
2097  *
2098  * @param cls closure with the identification of the client
2099  * @param msg AGPL request
2100  */
2101 static void
2102 return_agpl (void *cls,
2103              const struct GNUNET_MessageHeader *msg)
2104 {
2105   struct GNUNET_SERVICE_Client *client = cls;
2106   struct GNUNET_MQ_Handle *mq;
2107   struct GNUNET_MQ_Envelope *env;
2108   struct GNUNET_MessageHeader *res;
2109   size_t slen;
2110
2111   (void) msg;
2112   slen = strlen (GNUNET_AGPL_URL) + 1;
2113   env = GNUNET_MQ_msg_extra (res,
2114                              GNUNET_MESSAGE_TYPE_RESPONSE_AGPL,
2115                              slen);
2116   memcpy (&res[1],
2117           GNUNET_AGPL_URL,
2118           slen);
2119   mq = GNUNET_SERVICE_client_get_mq (client);
2120   GNUNET_MQ_send (mq,
2121                   env);
2122   GNUNET_SERVICE_client_continue (client);
2123 }
2124
2125
2126 /**
2127  * Low-level function to start a service if the scheduler
2128  * is already running.  Should only be used directly in
2129  * special cases.
2130  *
2131  * The function will launch the service with the name @a service_name
2132  * using the @a service_options to configure its shutdown
2133  * behavior. When clients connect or disconnect, the respective
2134  * @a connect_cb or @a disconnect_cb functions will be called. For
2135  * messages received from the clients, the respective @a handlers will
2136  * be invoked; for the closure of the handlers we use the return value
2137  * from the @a connect_cb invocation of the respective client.
2138  *
2139  * Each handler MUST call #GNUNET_SERVICE_client_continue() after each
2140  * message to receive further messages from this client.  If
2141  * #GNUNET_SERVICE_client_continue() is not called within a short
2142  * time, a warning will be logged. If delays are expected, services
2143  * should call #GNUNET_SERVICE_client_disable_continue_warning() to
2144  * disable the warning.
2145  *
2146  * Clients sending invalid messages (based on @a handlers) will be
2147  * dropped. Additionally, clients can be dropped at any time using
2148  * #GNUNET_SERVICE_client_drop().
2149  *
2150  * The service must be stopped using #GNUNET_SERVICE_stop().
2151  *
2152  * @param service_name name of the service to run
2153  * @param cfg configuration to use
2154  * @param connect_cb function to call whenever a client connects
2155  * @param disconnect_cb function to call whenever a client disconnects
2156  * @param cls closure argument for @a connect_cb and @a disconnect_cb
2157  * @param handlers NULL-terminated array of message handlers for the service,
2158  *                 the closure will be set to the value returned by
2159  *                 the @a connect_cb for the respective connection
2160  * @return NULL on error
2161  */
2162 struct GNUNET_SERVICE_Handle *
2163 GNUNET_SERVICE_start (const char *service_name,
2164                       const struct GNUNET_CONFIGURATION_Handle *cfg,
2165                       GNUNET_SERVICE_ConnectHandler connect_cb,
2166                       GNUNET_SERVICE_DisconnectHandler disconnect_cb,
2167                       void *cls,
2168                       const struct GNUNET_MQ_MessageHandler *handlers)
2169 {
2170   struct GNUNET_SERVICE_Handle *sh;
2171
2172   sh = GNUNET_new (struct GNUNET_SERVICE_Handle);
2173   sh->service_name = service_name;
2174   sh->cfg = cfg;
2175   sh->connect_cb = connect_cb;
2176   sh->disconnect_cb = disconnect_cb;
2177   sh->cb_cls = cls;
2178   sh->handlers = GNUNET_MQ_copy_handlers2 (handlers,
2179                                            &return_agpl,
2180                                            NULL);
2181   if (GNUNET_OK != setup_service (sh))
2182   {
2183     GNUNET_free_non_null (sh->handlers);
2184     GNUNET_free (sh);
2185     return NULL;
2186   }
2187   do_resume (sh,
2188              SUSPEND_STATE_NONE);
2189   return sh;
2190 }
2191
2192
2193 /**
2194  * Stops a service that was started with #GNUNET_SERVICE_start().
2195  *
2196  * @param srv service to stop
2197  */
2198 void
2199 GNUNET_SERVICE_stop (struct GNUNET_SERVICE_Handle *srv)
2200 {
2201   struct GNUNET_SERVICE_Client *client;
2202
2203   GNUNET_SERVICE_suspend (srv);
2204   while (NULL != (client = srv->clients_head))
2205     GNUNET_SERVICE_client_drop (client);
2206   teardown_service (srv);
2207   GNUNET_free_non_null (srv->handlers);
2208   GNUNET_free (srv);
2209 }
2210
2211
2212 /**
2213  * Creates the "main" function for a GNUnet service.  You
2214  * should almost always use the #GNUNET_SERVICE_MAIN macro
2215  * instead of calling this function directly (except
2216  * for ARM, which should call this function directly).
2217  *
2218  * The function will launch the service with the name @a service_name
2219  * using the @a service_options to configure its shutdown
2220  * behavior. Once the service is ready, the @a init_cb will be called
2221  * for service-specific initialization.  @a init_cb will be given the
2222  * service handler which can be used to control the service's
2223  * availability.  When clients connect or disconnect, the respective
2224  * @a connect_cb or @a disconnect_cb functions will be called. For
2225  * messages received from the clients, the respective @a handlers will
2226  * be invoked; for the closure of the handlers we use the return value
2227  * from the @a connect_cb invocation of the respective client.
2228  *
2229  * Each handler MUST call #GNUNET_SERVICE_client_continue() after each
2230  * message to receive further messages from this client.  If
2231  * #GNUNET_SERVICE_client_continue() is not called within a short
2232  * time, a warning will be logged. If delays are expected, services
2233  * should call #GNUNET_SERVICE_client_disable_continue_warning() to
2234  * disable the warning.
2235  *
2236  * Clients sending invalid messages (based on @a handlers) will be
2237  * dropped. Additionally, clients can be dropped at any time using
2238  * #GNUNET_SERVICE_client_drop().
2239  *
2240  * @param argc number of command-line arguments in @a argv
2241  * @param argv array of command-line arguments
2242  * @param service_name name of the service to run
2243  * @param options options controlling shutdown of the service
2244  * @param service_init_cb function to call once the service is ready
2245  * @param connect_cb function to call whenever a client connects
2246  * @param disconnect_cb function to call whenever a client disconnects
2247  * @param cls closure argument for @a service_init_cb, @a connect_cb and @a disconnect_cb
2248  * @param handlers NULL-terminated array of message handlers for the service,
2249  *                 the closure will be set to the value returned by
2250  *                 the @a connect_cb for the respective connection
2251  * @return 0 on success, non-zero on error
2252  */
2253 int
2254 GNUNET_SERVICE_run_ (int argc,
2255                      char *const *argv,
2256                      const char *service_name,
2257                      enum GNUNET_SERVICE_Options options,
2258                      GNUNET_SERVICE_InitCallback service_init_cb,
2259                      GNUNET_SERVICE_ConnectHandler connect_cb,
2260                      GNUNET_SERVICE_DisconnectHandler disconnect_cb,
2261                      void *cls,
2262                      const struct GNUNET_MQ_MessageHandler *handlers)
2263 {
2264   struct GNUNET_SERVICE_Handle sh;
2265   char *cfg_filename;
2266   char *opt_cfg_filename;
2267   char *loglev;
2268   const char *xdg;
2269   char *logfile;
2270   int do_daemonize;
2271   unsigned long long skew_offset;
2272   unsigned long long skew_variance;
2273   long long clock_offset;
2274   struct GNUNET_CONFIGURATION_Handle *cfg;
2275   int ret;
2276   int err;
2277
2278   struct GNUNET_GETOPT_CommandLineOption service_options[] = {
2279     GNUNET_GETOPT_option_cfgfile (&opt_cfg_filename),
2280     GNUNET_GETOPT_option_flag ('d',
2281                                "daemonize",
2282                                gettext_noop ("do daemonize (detach from terminal)"),
2283                                &do_daemonize),
2284     GNUNET_GETOPT_option_help (NULL),
2285     GNUNET_GETOPT_option_loglevel (&loglev),
2286     GNUNET_GETOPT_option_logfile (&logfile),
2287     GNUNET_GETOPT_option_version (PACKAGE_VERSION " " VCS_VERSION),
2288     GNUNET_GETOPT_OPTION_END
2289   };
2290
2291   err = 1;
2292   memset (&sh,
2293           0,
2294           sizeof (sh));
2295   xdg = getenv ("XDG_CONFIG_HOME");
2296   if (NULL != xdg)
2297     GNUNET_asprintf (&cfg_filename,
2298                      "%s%s%s",
2299                      xdg,
2300                      DIR_SEPARATOR_STR,
2301                      GNUNET_OS_project_data_get ()->config_file);
2302   else
2303     cfg_filename = GNUNET_strdup (GNUNET_OS_project_data_get ()->user_config_file);
2304   sh.ready_confirm_fd = -1;
2305   sh.options = options;
2306   sh.cfg = cfg = GNUNET_CONFIGURATION_create ();
2307   sh.service_init_cb = service_init_cb;
2308   sh.connect_cb = connect_cb;
2309   sh.disconnect_cb = disconnect_cb;
2310   sh.cb_cls = cls;
2311   sh.handlers = GNUNET_MQ_copy_handlers (handlers);
2312   sh.service_name = service_name;
2313
2314   /* setup subsystems */
2315   loglev = NULL;
2316   logfile = NULL;
2317   opt_cfg_filename = NULL;
2318   do_daemonize = 0;
2319   ret = GNUNET_GETOPT_run (service_name,
2320                            service_options,
2321                            argc,
2322                            argv);
2323   if (GNUNET_SYSERR == ret)
2324     goto shutdown;
2325   if (GNUNET_NO == ret)
2326   {
2327     err = 0;
2328     goto shutdown;
2329   }
2330   if (GNUNET_OK != GNUNET_log_setup (service_name,
2331                                      loglev,
2332                                      logfile))
2333   {
2334     GNUNET_break (0);
2335     goto shutdown;
2336   }
2337   if (NULL != opt_cfg_filename)
2338   {
2339     if ( (GNUNET_YES !=
2340           GNUNET_DISK_file_test (opt_cfg_filename)) ||
2341          (GNUNET_SYSERR ==
2342           GNUNET_CONFIGURATION_load (cfg,
2343                                      opt_cfg_filename)) )
2344     {
2345       GNUNET_log (GNUNET_ERROR_TYPE_ERROR,
2346                   _("Malformed configuration file `%s', exit ...\n"),
2347                   opt_cfg_filename);
2348       goto shutdown;
2349     }
2350   }
2351   else
2352   {
2353     if (GNUNET_YES ==
2354         GNUNET_DISK_file_test (cfg_filename))
2355     {
2356       if (GNUNET_SYSERR ==
2357           GNUNET_CONFIGURATION_load (cfg,
2358                                      cfg_filename))
2359       {
2360         GNUNET_log (GNUNET_ERROR_TYPE_ERROR,
2361                     _("Malformed configuration file `%s', exit ...\n"),
2362                     cfg_filename);
2363         goto shutdown;
2364       }
2365     }
2366     else
2367     {
2368       if (GNUNET_SYSERR ==
2369           GNUNET_CONFIGURATION_load (cfg,
2370                                      NULL))
2371       {
2372         GNUNET_log (GNUNET_ERROR_TYPE_ERROR,
2373                     _("Malformed configuration, exit ...\n"));
2374         goto shutdown;
2375       }
2376     }
2377   }
2378   if (GNUNET_OK != setup_service (&sh))
2379     goto shutdown;
2380   if ( (1 == do_daemonize) &&
2381        (GNUNET_OK != detach_terminal (&sh)) )
2382   {
2383     GNUNET_break (0);
2384     goto shutdown;
2385   }
2386   if (GNUNET_OK != set_user_id (&sh))
2387     goto shutdown;
2388   LOG (GNUNET_ERROR_TYPE_DEBUG,
2389        "Service `%s' runs with configuration from `%s'\n",
2390        service_name,
2391        (NULL != opt_cfg_filename) ? opt_cfg_filename : cfg_filename);
2392   if ((GNUNET_OK ==
2393        GNUNET_CONFIGURATION_get_value_number (sh.cfg,
2394                                               "TESTING",
2395                                               "SKEW_OFFSET",
2396                                               &skew_offset)) &&
2397       (GNUNET_OK ==
2398        GNUNET_CONFIGURATION_get_value_number (sh.cfg,
2399                                               "TESTING",
2400                                               "SKEW_VARIANCE",
2401                                               &skew_variance)))
2402   {
2403     clock_offset = skew_offset - skew_variance;
2404     GNUNET_TIME_set_offset (clock_offset);
2405     LOG (GNUNET_ERROR_TYPE_DEBUG,
2406          "Skewing clock by %dll ms\n",
2407          clock_offset);
2408   }
2409   GNUNET_RESOLVER_connect (sh.cfg);
2410
2411   /* actually run service */
2412   err = 0;
2413   GNUNET_SCHEDULER_run (&service_main,
2414                         &sh);
2415   /* shutdown */
2416   if (1 == do_daemonize)
2417     pid_file_delete (&sh);
2418
2419 shutdown:
2420   if (-1 != sh.ready_confirm_fd)
2421   {
2422     if (1 != WRITE (sh.ready_confirm_fd,
2423                     err ? "I" : "S",
2424                     1))
2425       LOG_STRERROR (GNUNET_ERROR_TYPE_WARNING,
2426                     "write");
2427     GNUNET_break (0 == CLOSE (sh.ready_confirm_fd));
2428   }
2429 #if HAVE_MALLINFO
2430   {
2431     char *counter;
2432
2433     if ( (GNUNET_YES ==
2434           GNUNET_CONFIGURATION_have_value (sh.cfg,
2435                                            service_name,
2436                                            "GAUGER_HEAP")) &&
2437          (GNUNET_OK ==
2438           GNUNET_CONFIGURATION_get_value_string (sh.cfg,
2439                                                  service_name,
2440                                                  "GAUGER_HEAP",
2441                                                  &counter)) )
2442     {
2443       struct mallinfo mi;
2444
2445       mi = mallinfo ();
2446       GAUGER (service_name,
2447               counter,
2448               mi.usmblks,
2449               "blocks");
2450       GNUNET_free (counter);
2451     }
2452   }
2453 #endif
2454   teardown_service (&sh);
2455   GNUNET_free_non_null (sh.handlers);
2456   GNUNET_SPEEDUP_stop_ ();
2457   GNUNET_CONFIGURATION_destroy (cfg);
2458   GNUNET_free_non_null (logfile);
2459   GNUNET_free_non_null (loglev);
2460   GNUNET_free (cfg_filename);
2461   GNUNET_free_non_null (opt_cfg_filename);
2462
2463   return err ? GNUNET_SYSERR : sh.ret;
2464 }
2465
2466
2467 /**
2468  * Suspend accepting connections from the listen socket temporarily.
2469  * Resume activity using #GNUNET_SERVICE_resume.
2470  *
2471  * @param sh service to stop accepting connections.
2472  */
2473 void
2474 GNUNET_SERVICE_suspend (struct GNUNET_SERVICE_Handle *sh)
2475 {
2476   do_suspend (sh,
2477               SUSPEND_STATE_APP);
2478 }
2479
2480
2481 /**
2482  * Resume accepting connections from the listen socket.
2483  *
2484  * @param sh service to resume accepting connections.
2485  */
2486 void
2487 GNUNET_SERVICE_resume (struct GNUNET_SERVICE_Handle *sh)
2488 {
2489   do_resume (sh,
2490              SUSPEND_STATE_APP);
2491 }
2492
2493
2494 /**
2495  * Task run to resume receiving data from the client after
2496  * the client called #GNUNET_SERVICE_client_continue().
2497  *
2498  * @param cls our `struct GNUNET_SERVICE_Client`
2499  */
2500 static void
2501 resume_client_receive (void *cls)
2502 {
2503   struct GNUNET_SERVICE_Client *c = cls;
2504   int ret;
2505
2506   c->recv_task = NULL;
2507   /* first, check if there is still something in the buffer */
2508   ret = GNUNET_MST_next (c->mst,
2509                          GNUNET_YES);
2510   if (GNUNET_SYSERR == ret)
2511   {
2512     if (NULL == c->drop_task)
2513       GNUNET_SERVICE_client_drop (c);
2514     return;
2515   }
2516   if (GNUNET_NO == ret)
2517     return; /* done processing, wait for more later */
2518   GNUNET_assert (GNUNET_OK == ret);
2519   if (GNUNET_YES == c->needs_continue)
2520     return; /* #GNUNET_MST_next() did give a message to the client */
2521   /* need to receive more data from the network first */
2522   if (NULL != c->recv_task)
2523     return;
2524   c->recv_task
2525     = GNUNET_SCHEDULER_add_read_net (GNUNET_TIME_UNIT_FOREVER_REL,
2526                                      c->sock,
2527                                      &service_client_recv,
2528                                      c);
2529 }
2530
2531
2532 /**
2533  * Continue receiving further messages from the given client.
2534  * Must be called after each message received.
2535  *
2536  * @param c the client to continue receiving from
2537  */
2538 void
2539 GNUNET_SERVICE_client_continue (struct GNUNET_SERVICE_Client *c)
2540 {
2541   GNUNET_assert (NULL == c->drop_task);
2542   GNUNET_assert (GNUNET_YES == c->needs_continue);
2543   GNUNET_assert (NULL == c->recv_task);
2544   c->needs_continue = GNUNET_NO;
2545   if (NULL != c->warn_task)
2546   {
2547     GNUNET_SCHEDULER_cancel (c->warn_task);
2548     c->warn_task = NULL;
2549   }
2550   c->recv_task
2551     = GNUNET_SCHEDULER_add_now (&resume_client_receive,
2552                                 c);
2553 }
2554
2555
2556 /**
2557  * Disable the warning the server issues if a message is not
2558  * acknowledged in a timely fashion.  Use this call if a client is
2559  * intentionally delayed for a while.  Only applies to the current
2560  * message.
2561  *
2562  * @param c client for which to disable the warning
2563  */
2564 void
2565 GNUNET_SERVICE_client_disable_continue_warning (struct GNUNET_SERVICE_Client *c)
2566 {
2567   GNUNET_break (NULL != c->warn_task);
2568   if (NULL != c->warn_task)
2569   {
2570     GNUNET_SCHEDULER_cancel (c->warn_task);
2571     c->warn_task = NULL;
2572   }
2573 }
2574
2575
2576 /**
2577  * Asynchronously finish dropping the client.
2578  *
2579  * @param cls the `struct GNUNET_SERVICE_Client`.
2580  */
2581 static void
2582 finish_client_drop (void *cls)
2583 {
2584   struct GNUNET_SERVICE_Client *c = cls;
2585   struct GNUNET_SERVICE_Handle *sh = c->sh;
2586
2587   c->drop_task = NULL;
2588   GNUNET_assert (NULL == c->send_task);
2589   GNUNET_assert (NULL == c->recv_task);
2590   GNUNET_assert (NULL == c->warn_task);
2591   GNUNET_MST_destroy (c->mst);
2592   GNUNET_MQ_destroy (c->mq);
2593   if (GNUNET_NO == c->persist)
2594   {
2595     GNUNET_break (GNUNET_OK ==
2596                   GNUNET_NETWORK_socket_close (c->sock));
2597     if ( (0 != (SUSPEND_STATE_EMFILE & sh->suspend_state)) &&
2598          (0 == (SUSPEND_STATE_SHUTDOWN & sh->suspend_state)) )
2599       do_resume (sh,
2600                  SUSPEND_STATE_EMFILE);
2601   }
2602   else
2603   {
2604     GNUNET_NETWORK_socket_free_memory_only_ (c->sock);
2605   }
2606   GNUNET_free (c);
2607   if ( (0 != (SUSPEND_STATE_SHUTDOWN & sh->suspend_state)) &&
2608        (GNUNET_NO == have_non_monitor_clients (sh)) )
2609     GNUNET_SERVICE_shutdown (sh);
2610 }
2611
2612
2613 /**
2614  * Ask the server to disconnect from the given client.  This is the
2615  * same as returning #GNUNET_SYSERR within the check procedure when
2616  * handling a message, wexcept that it allows dropping of a client even
2617  * when not handling a message from that client.  The `disconnect_cb`
2618  * will be called on @a c even if the application closes the connection
2619  * using this function.
2620  *
2621  * @param c client to disconnect now
2622  */
2623 void
2624 GNUNET_SERVICE_client_drop (struct GNUNET_SERVICE_Client *c)
2625 {
2626   struct GNUNET_SERVICE_Handle *sh = c->sh;
2627
2628   GNUNET_log (GNUNET_ERROR_TYPE_DEBUG,
2629               "Client dropped: %p (MQ: %p)\n",
2630               c,
2631               c->mq);
2632 #if EXECINFO
2633   {
2634     void *backtrace_array[MAX_TRACE_DEPTH];
2635     int num_backtrace_strings = backtrace (backtrace_array, MAX_TRACE_DEPTH);
2636     char **backtrace_strings =
2637       backtrace_symbols (backtrace_array,
2638                          t->num_backtrace_strings);
2639     for (unsigned int i = 0; i < num_backtrace_strings; i++)
2640       LOG (GNUNET_ERROR_TYPE_DEBUG,
2641            "client drop trace %u: %s\n",
2642            i,
2643            backtrace_strings[i]);
2644   }
2645 #endif
2646   if (NULL != c->drop_task)
2647   {
2648     /* asked to drop twice! */
2649     GNUNET_assert (0);
2650     return;
2651   }
2652   GNUNET_CONTAINER_DLL_remove (sh->clients_head,
2653                                sh->clients_tail,
2654                                c);
2655   if (NULL != sh->disconnect_cb)
2656     sh->disconnect_cb (sh->cb_cls,
2657                        c,
2658                        c->user_context);
2659   if (NULL != c->warn_task)
2660   {
2661     GNUNET_SCHEDULER_cancel (c->warn_task);
2662     c->warn_task = NULL;
2663   }
2664   if (NULL != c->recv_task)
2665   {
2666     GNUNET_SCHEDULER_cancel (c->recv_task);
2667     c->recv_task = NULL;
2668   }
2669   if (NULL != c->send_task)
2670   {
2671     GNUNET_SCHEDULER_cancel (c->send_task);
2672     c->send_task = NULL;
2673   }
2674   c->drop_task = GNUNET_SCHEDULER_add_now (&finish_client_drop,
2675                                            c);
2676 }
2677
2678
2679 /**
2680  * Explicitly stops the service.
2681  *
2682  * @param sh server to shutdown
2683  */
2684 void
2685 GNUNET_SERVICE_shutdown (struct GNUNET_SERVICE_Handle *sh)
2686 {
2687   struct GNUNET_SERVICE_Client *client;
2688
2689   if (0 == (sh->suspend_state & SUSPEND_STATE_SHUTDOWN))
2690     do_suspend (sh,
2691                 SUSPEND_STATE_SHUTDOWN);
2692   while (NULL != (client = sh->clients_head))
2693     GNUNET_SERVICE_client_drop (client);
2694 }
2695
2696
2697 /**
2698  * Set the 'monitor' flag on this client.  Clients which have been
2699  * marked as 'monitors' won't prevent the server from shutting down
2700  * once #GNUNET_SERVICE_stop_listening() has been invoked.  The idea is
2701  * that for "normal" clients we likely want to allow them to process
2702  * their requests; however, monitor-clients are likely to 'never'
2703  * disconnect during shutdown and thus will not be considered when
2704  * determining if the server should continue to exist after
2705  * shutdown has been triggered.
2706  *
2707  * @param c client to mark as a monitor
2708  */
2709 void
2710 GNUNET_SERVICE_client_mark_monitor (struct GNUNET_SERVICE_Client *c)
2711 {
2712   c->is_monitor = GNUNET_YES;
2713   if ( (0 != (SUSPEND_STATE_SHUTDOWN & c->sh->suspend_state) &&
2714         (GNUNET_NO == have_non_monitor_clients (c->sh)) ) )
2715     GNUNET_SERVICE_shutdown (c->sh);
2716 }
2717
2718
2719 /**
2720  * Set the persist option on this client.  Indicates that the
2721  * underlying socket or fd should never really be closed.  Used for
2722  * indicating process death.
2723  *
2724  * @param c client to persist the socket (never to be closed)
2725  */
2726 void
2727 GNUNET_SERVICE_client_persist (struct GNUNET_SERVICE_Client *c)
2728 {
2729   c->persist = GNUNET_YES;
2730 }
2731
2732
2733 /**
2734  * Obtain the message queue of @a c.  Convenience function.
2735  *
2736  * @param c the client to continue receiving from
2737  * @return the message queue of @a c
2738  */
2739 struct GNUNET_MQ_Handle *
2740 GNUNET_SERVICE_client_get_mq (struct GNUNET_SERVICE_Client *c)
2741 {
2742   return c->mq;
2743 }
2744
2745
2746 /* end of service_new.c */