ATS service calls solver with feedback
[oweals/gnunet.git] / src / ats / gnunet-service-ats-solver_proportional.c
1 /*
2      This file is part of GNUnet.
3      (C) 2011 Christian Grothoff (and other contributing authors)
4
5      GNUnet is free software; you can redistribute it and/or modify
6      it under the terms of the GNU General Public License as published
7      by the Free Software Foundation; either version 3, or (at your
8      option) any later version.
9
10      GNUnet is distributed in the hope that it will be useful, but
11      WITHOUT ANY WARRANTY; without even the implied warranty of
12      MERCHANTABILITY or FITNESS FOR A PARTICULAR PURPOSE.  See the GNU
13      General Public License for more details.
14
15      You should have received a copy of the GNU General Public License
16      along with GNUnet; see the file COPYING.  If not, write to the
17      Free Software Foundation, Inc., 59 Temple Place - Suite 330,
18      Boston, MA 02111-1307, USA.
19 */
20
21 /**
22  * @file ats/gnunet-service-ats-solver_proportional.c
23  * @brief ATS proportional solver
24  * @author Matthias Wachs
25  * @author Christian Grothoff
26  */
27 #include "platform.h"
28 #include "gnunet_util_lib.h"
29 #include "gnunet-service-ats_addresses.h"
30 #include "gnunet_statistics_service.h"
31
32 #define LOG(kind,...) GNUNET_log_from (kind, "ats-proportional",__VA_ARGS__)
33
34 /**
35  *
36  * NOTE: Do not change this documentation. This documentation is based
37  * on gnunet.org:/vcs/fsnsg/ats-paper.git/tech-doku/ats-tech-guide.tex
38  * use build_txt.sh to generate plaintext output
39  *
40  * ATS addresses : simplistic solver
41  *
42  *    The simplistic solver ("simplistic") distributes the available
43  *    bandwidth fair over all the addresses influenced by the
44  *    preference values. For each available network type an in- and
45  *    outbound quota is configured and the bandwidth available in
46  *    these networks is distributed over the addresses.  The solver
47  *    first assigns every addresses the minimum amount of bandwidth
48  *    GNUNET_CONSTANTS_DEFAULT_BW_IN_OUT and then distributes the
49  *    remaining bandwidth available according to the preference
50  *    values. For each peer only a single address gets bandwidth
51  *    assigned and only one address marked as active.  The most
52  *    important functionality for the solver is implemented in: *
53  *    find_address_it is an hashmap iterator returning the prefered
54  *    address for an peer * update_quota_per_network distributes
55  *    available bandwidth for a network over active addresses
56  *
57  *    Changes to addresses automatically have an impact on the the
58  *    bandwidth assigned to other addresses in the same network since
59  *    the solver distributes the remaining bandwidth over the
60  *    addresses in the network.  When changes to the addresses occur,
61  *    the solver first performs the changes, like adding or deleting
62  *    addresses, and then updates bandwidth assignment for the
63  *    affected network. Bandwidth assignment is only recalculated on
64  *    demand when an address is requested by a client for a peer or
65  *    when the addresses available have changed or an address changed
66  *    the network it is located in. When the bandwidth assignment has
67  *    changed the callback is called with the new bandwidth
68  *    assignments. The bandwidth distribution for a network is
69  *    recalculated due to: * address suggestion requests * address
70  *    deletions * address switching networks during address update *
71  *    preference changes
72  *
73  *     3.1 Data structures used
74  *
75  *    For each ATS network (e.g. WAN, LAN, loopback) a struct Network
76  *    is used to specify network related information as total adresses
77  *    and active addresses in this network and the configured in- and
78  *    outbound quota. Each network also contains a list of addresses
79  *    added to the solver located in this network. The simplistic
80  *    solver uses the addresses' solver_information field to store the
81  *    simplistic network it belongs to for each address.
82  *
83  *     3.2 Initializing
84  *
85  *    When the simplistic solver is initialized the solver creates a
86  *    new solver handle and initializes the network structures with
87  *    the quotas passed from addresses and returns the handle solver.
88  *
89  *     3.3 Adding an address
90  *
91  *    When a new address is added to the solver using s_add, a lookup
92  *    for the network for this address is done and the address is
93  *    enqueued in in the linked list of the network.
94  *
95  *     3.4 Updating an address
96  *
97  *    The main purpose of address updates is to update the ATS
98  *    information for addresse selection. Important for the simplistic
99  *    solver is when an address switches network it is located
100  *    in. This is common because addresses added by transport's
101  *    validation mechanism are commonly located in
102  *    GNUNET_ATS_NET_UNSPECIFIED. Addresses in validation are located
103  *    in this network type and only if a connection is successful on
104  *    return of payload data transport switches to the real network
105  *    the address is located in.  When an address changes networks it
106  *    is first of all removed from the old network using the solver
107  *    API function GAS_simplistic_address_delete and the network in
108  *    the address struct is updated. A lookup for the respective new
109  *    simplistic network is done and stored in the addresse's
110  *    solver_information field. Next the address is re-added to the
111  *    solver using the solver API function
112  *    GAS_simplistic_address_add. If the address was marked as in
113  *    active, the solver checks if bandwidth is available in the
114  *    network and if yes sets the address to active and updates the
115  *    bandwidth distribution in this network. If no bandwidth is
116  *    available it sets the bandwidth for this address to 0 and tries
117  *    to suggest an alternative address. If an alternative address was
118  *    found, addresses' callback is called for this address.
119  *
120  *     3.5 Deleting an address
121  *
122  *    When an address is removed from the solver, it removes the
123  *    respective address from the network and if the address was
124  *    marked as active, it updates the bandwidth distribution for this
125  *    network.
126  *
127  *     3.6 Requesting addresses
128  *
129  *    When an address is requested for a peer the solver performs a
130  *    lookup for the peer entry in addresses address hashmap and
131  *    selects the best address.  The selection of the most suitable
132  *    address is done in the find_address_it hashmap iterator
133  *    described in detail in section 3.7. If no address is returned,
134  *    no address can be suggested at the moment. If the address
135  *    returned is marked as active, the solver can return this
136  *    address. If the address is not marked as active, the solver
137  *    checks if another address belongign to this peer is marked as
138  *    active and marks the address as inactive, updates the bandwidth
139  *    for this address to 0, call the bandwidth changed callback for
140  *    this address due to the change and updates quota assignment for
141  *    the addresse's network. the now in-active address is belonging
142  *    to. The solver marks the new address as active and updates the
143  *    bandwidth assignment for this network.
144  *
145  *     3.7 Choosing addresses
146  *
147  *    Choosing the best possible address for suggestion is done by
148  *    iterating over all addresses of a peer stored in addresses'
149  *    hashmap and using the hashmap iterator find_address_it to select
150  *    the best available address.  Several checks are done when an
151  *    address is selected. First if this address is currently blocked
152  *    by addresses from being suggested. An address is blocked for the
153  *    duration of ATS_BLOCKING_DELTA when it is suggested to
154  *    transport. Next it is checked if at least
155  *    GNUNET_CONSTANTS_DEFAULT_BW_IN_OUT bytes bandwidth is available
156  *    in the addresse's network, because suggesting an address without
157  *    bandwidth does not make sense. This also ensures that all active
158  *    addresses in this network get at least the minimum amount of
159  *    bandwidth assigned. In the next step the solver ensures that for
160  *    tcp connections inbound connections are prefered over outbound
161  *    connections. In the next stet the solver ensures that
162  *    connections are prefered in the following order: * connections
163  *    are already established and have bandwidth assigned *
164  *    connections with a shorter distance * connectes have a shorter
165  *    latency
166  *
167  *     3.8 Changing preferences
168  *
169  *     3.9 Shutdown
170  *
171  *    During shutdown all network entries and aging processes are
172  *    destroyed and freed.
173  *
174  *
175  * OLD DOCUMENTATION
176  *
177  * This solver assigns in and outbound bandwidth equally for all
178  * addresses in specific network type (WAN, LAN) based on configured
179  * in and outbound quota for this network.
180  *
181  * The solver is notified by addresses about changes to the addresses
182  * and recalculates the bandwith assigned if required. The solver
183  * notifies addresses by calling the GAS_bandwidth_changed_cb
184  * callback.
185  *
186  * - Initialization
187  *
188  *
189  *
190  *
191  * For each peer only a single is selected and marked as "active" in the address
192  * struct.
193  *
194  * E.g.:
195  *
196  * You have the networks WAN and LAN and quotas
197  * WAN_TOTAL_IN, WAN_TOTAL_OUT
198  * LAN_TOTAL_IN, LAN_TOTAL_OUT
199  *
200  * If you have x addresses in the network segment LAN, the quotas are
201  * QUOTA_PER_ADDRESS = LAN_TOTAL_OUT / x
202  *
203  * Quotas are automatically recalculated and reported back when addresses are
204  * - requested
205  *
206  */
207
208 #define PREF_AGING_INTERVAL GNUNET_TIME_relative_multiply (GNUNET_TIME_UNIT_SECONDS, 10)
209 #define PREF_AGING_FACTOR 0.95
210
211 #define DEFAULT_REL_PREFERENCE 1.0
212 #define DEFAULT_ABS_PREFERENCE 0.0
213 #define MIN_UPDATE_INTERVAL GNUNET_TIME_relative_multiply (GNUNET_TIME_UNIT_SECONDS, 10)
214
215
216 /**
217  * A handle for the proportional solver
218  */
219 struct GAS_PROPORTIONAL_Handle
220 {
221   /**
222    * Statistics handle
223    */
224   struct GNUNET_STATISTICS_Handle *stats;
225
226   /**
227    * Hashmap containing all valid addresses
228    */
229   const struct GNUNET_CONTAINER_MultiHashMap *addresses;
230
231   /**
232    * Bandwidth changed callback
233    */
234   GAS_bandwidth_changed_cb bw_changed;
235
236   /**
237    * Bandwidth changed callback cls
238    */
239   void *bw_changed_cls;
240
241   /**
242    * ATS function to get preferences
243    */
244   GAS_get_preferences get_preferences;
245
246   /**
247    * Closure for ATS function to get preferences
248    */
249   void *get_preferences_cls;
250
251   /**
252    * ATS function to get properties
253    */
254   GAS_get_properties get_properties;
255
256   /**
257    * Closure for ATS function to get properties
258    */
259   void *get_properties_cls;
260
261   /**
262    * Bulk lock
263    */
264   int bulk_lock;
265
266   /**
267    * Number of changes while solver was locked
268    */
269   int bulk_requests;
270
271
272   /**
273    * Total number of addresses for solver
274    */
275   unsigned int total_addresses;
276
277   /**
278    * Number of active addresses for solver
279    */
280   unsigned int active_addresses;
281
282   /**
283    * Networks array
284    */
285   struct Network *network_entries;
286
287   /**
288    * Number of networks
289    */
290   unsigned int networks;
291
292 };
293
294
295 /**
296  * Representation of a network
297  */
298 struct Network
299 {
300   /**
301    * ATS network type
302    */
303   unsigned int type;
304
305   /**
306    * Network description
307    */
308   char *desc;
309
310   /**
311    * Total inbound quota
312    *
313    */
314   unsigned long long total_quota_in;
315
316   /**
317    * Total outbound quota
318    *
319    */
320   unsigned long long total_quota_out;
321
322   /**
323    * Number of active addresses for this network
324    */
325   unsigned int active_addresses;
326
327   /**
328    * Number of total addresses for this network
329    */
330   unsigned int total_addresses;
331
332   /**
333    * String for statistics total addresses
334    */
335   char *stat_total;
336
337   /**
338    * String for statistics active addresses
339    */
340   char *stat_active;
341
342   struct AddressWrapper *head;
343   struct AddressWrapper *tail;
344 };
345
346
347 /**
348  * Wrapper for addresses to store them in network's linked list
349  */
350 struct AddressWrapper
351 {
352   /**
353    * Next in DLL
354    */
355   struct AddressWrapper *next;
356
357   /**
358    * Previous in DLL
359    */
360   struct AddressWrapper *prev;
361
362   /**
363    * The address
364    */
365   struct ATS_Address *addr;
366 };
367
368
369
370 /**
371  *  Important solver functions
372  *  ---------------------------
373  */
374
375 /**
376  * Test if bandwidth is available in this network to add an additional address
377  *
378  * @param net the network type to update
379  * @return GNUNET_YES or GNUNET_NO
380  */
381 static int
382 is_bandwidth_available_in_network (struct Network *net)
383 {
384         GNUNET_assert (NULL != net);
385   unsigned int na = net->active_addresses + 1;
386   uint32_t min_bw = ntohl (GNUNET_CONSTANTS_DEFAULT_BW_IN_OUT.value__);
387   if (((net->total_quota_in / na) > min_bw) &&
388       ((net->total_quota_out / na) > min_bw))
389   {
390     LOG (GNUNET_ERROR_TYPE_DEBUG,
391          "Enough bandwidth available for %u active addresses in network `%s'\n",
392          na,
393          net->desc);
394
395     return GNUNET_YES;
396   }
397     LOG (GNUNET_ERROR_TYPE_DEBUG,
398          "Not enough bandwidth available for %u active addresses in network `%s'\n",
399          na,
400          net->desc);
401   return GNUNET_NO;
402 }
403
404
405 /**
406  * Update bandwidth assigned to peers in this network
407  *
408  * @param s the solver handle
409  * @param net the network type to update
410  * @param address_except address excluded from notification, since we suggest
411  * this address
412  */
413 static void
414 distribute_bandwidth_in_network (struct GAS_PROPORTIONAL_Handle *s,
415                           struct Network *net,
416                           struct ATS_Address *address_except)
417 {
418   unsigned long long remaining_quota_in = 0;
419   unsigned long long quota_out_used = 0;
420
421   unsigned long long remaining_quota_out = 0;
422   unsigned long long quota_in_used = 0;
423   uint32_t min_bw = ntohl (GNUNET_CONSTANTS_DEFAULT_BW_IN_OUT.value__);
424   double peer_prefs;
425   double total_prefs; /* Important: has to be double not float due to precision */
426   double cur_pref; /* Important: has to be double not float due to precision */
427   const double *t = NULL; /* Important: has to be double not float due to precision */
428   int c;
429
430   unsigned long long assigned_quota_in = 0;
431   unsigned long long assigned_quota_out = 0;
432   struct AddressWrapper *cur;
433
434         if (GNUNET_YES == s->bulk_lock)
435         {
436                 s->bulk_requests++;
437                 return;
438         }
439
440   LOG (GNUNET_ERROR_TYPE_DEBUG,
441               "Recalculate quota for network type `%s' for %u addresses (in/out): %llu/%llu \n",
442               net->desc, net->active_addresses, net->total_quota_in, net->total_quota_in);
443
444   if (net->active_addresses == 0)
445     return; /* no addresses to update */
446
447   /* Idea
448    * Assign every peer in network minimum Bandwidth
449    * Distribute bandwidth left according to preference
450    */
451
452   if ((net->active_addresses * min_bw) > net->total_quota_in)
453   {
454     GNUNET_break (0);
455     return;
456   }
457   if ((net->active_addresses * min_bw) > net->total_quota_out)
458   {
459     GNUNET_break (0);
460     return;
461   }
462
463   remaining_quota_in = net->total_quota_in - (net->active_addresses * min_bw);
464   remaining_quota_out = net->total_quota_out - (net->active_addresses * min_bw);
465   LOG (GNUNET_ERROR_TYPE_DEBUG, "Remaining bandwidth : (in/out): %llu/%llu \n",
466               remaining_quota_in, remaining_quota_out);
467   total_prefs = 0.0;
468   for (cur = net->head; NULL != cur; cur = cur->next)
469   {
470       if (GNUNET_YES == cur->addr->active)
471       {
472         GNUNET_assert (NULL != (t = s->get_preferences (s->get_preferences_cls, &cur->addr->peer)));
473
474                                 peer_prefs = 0.0;
475                                 for (c = 0; c < GNUNET_ATS_PreferenceCount; c++)
476                                 {
477                                         if (c != GNUNET_ATS_PREFERENCE_END)
478                                         {
479                                                 //fprintf (stderr, "VALUE[%u] %s %.3f \n", c, GNUNET_i2s (&cur->addr->peer), t[c]);
480                                                 peer_prefs += t[c];
481                                         }
482                                 }
483                                 total_prefs += (peer_prefs / (GNUNET_ATS_PreferenceCount -1));
484       }
485   }
486   for (cur = net->head; NULL != cur; cur = cur->next)
487   {
488      if (GNUNET_YES == cur->addr->active)
489      {
490        cur_pref = 0.0;
491        GNUNET_assert (NULL != (t = s->get_preferences (s->get_preferences_cls, &cur->addr->peer)));
492
493                          for (c = 0; c < GNUNET_ATS_PreferenceCount; c++)
494                          {
495                                  if (c != GNUNET_ATS_PREFERENCE_END)
496                                          cur_pref += t[c];
497                          }
498                          cur_pref /= 2;
499
500        assigned_quota_in = min_bw + ((cur_pref / total_prefs) * remaining_quota_in);
501        assigned_quota_out = min_bw + ((cur_pref / total_prefs) * remaining_quota_out);
502
503        LOG (GNUNET_ERROR_TYPE_DEBUG,
504                    "New quota for peer `%s' with preference (cur/total) %.3f/%.3f (in/out): %llu / %llu\n",
505                    GNUNET_i2s (&cur->addr->peer),
506                    cur_pref, total_prefs,
507                    assigned_quota_in, assigned_quota_out);
508      }
509      else
510      {
511        assigned_quota_in = 0;
512        assigned_quota_out = 0;
513      }
514
515      quota_in_used += assigned_quota_in;
516      quota_out_used += assigned_quota_out;
517      /* Prevent overflow due to rounding errors */
518      if (assigned_quota_in > UINT32_MAX)
519        assigned_quota_in = UINT32_MAX;
520      if (assigned_quota_out > UINT32_MAX)
521        assigned_quota_out = UINT32_MAX;
522
523      /* Compare to current bandwidth assigned */
524      if ((assigned_quota_in != ntohl(cur->addr->assigned_bw_in.value__)) ||
525          (assigned_quota_out != ntohl(cur->addr->assigned_bw_out.value__)))
526      {
527        cur->addr->assigned_bw_in.value__ = htonl (assigned_quota_in);
528        cur->addr->assigned_bw_out.value__ = htonl (assigned_quota_out);
529        /* Notify on change */
530        if ((GNUNET_YES == cur->addr->active) && (cur->addr != address_except))
531          s->bw_changed (s->bw_changed_cls, cur->addr);
532      }
533
534   }
535   LOG (GNUNET_ERROR_TYPE_DEBUG,
536                           "Total bandwidth assigned is (in/out): %llu /%llu\n",
537                           quota_in_used,
538                           quota_out_used);
539   if (quota_out_used > net->total_quota_out + 1) /* +1 is required due to rounding errors */
540   {
541       LOG (GNUNET_ERROR_TYPE_ERROR,
542                             "Total outbound bandwidth assigned is larger than allowed (used/allowed) for %u active addresses: %llu / %llu\n",
543                             net->active_addresses,
544                             quota_out_used,
545                             net->total_quota_out);
546   }
547   if (quota_in_used > net->total_quota_in + 1) /* +1 is required due to rounding errors */
548   {
549       LOG (GNUNET_ERROR_TYPE_ERROR,
550                             "Total inbound bandwidth assigned is larger than allowed (used/allowed) for %u active addresses: %llu / %llu\n",
551                             net->active_addresses,
552                             quota_in_used,
553                             net->total_quota_in);
554   }
555 }
556
557
558 struct FindBestAddressCtx
559 {
560         struct GAS_PROPORTIONAL_Handle *s;
561         struct ATS_Address *best;
562 };
563
564
565 static int
566 find_property_index (uint32_t type)
567 {
568         int existing_types[] = GNUNET_ATS_QualityProperties;
569         int c;
570         for (c = 0; c < GNUNET_ATS_QualityPropertiesCount; c++)
571                 if (existing_types[c] == type)
572                         return c;
573         return GNUNET_SYSERR;
574 }
575
576 /**
577  * Find a "good" address to use for a peer by iterating over the addresses for this peer.
578  * If we already have an existing address, we stick to it.
579  * Otherwise, we pick by lowest distance and then by lowest latency.
580  *
581  * @param cls the 'struct ATS_Address**' where we store the result
582  * @param key unused
583  * @param value another 'struct ATS_Address*' to consider using
584  * @return GNUNET_OK (continue to iterate)
585  */
586 static int
587 find_best_address_it (void *cls, const struct GNUNET_HashCode * key, void *value)
588 {
589         struct FindBestAddressCtx *fba_ctx = (struct FindBestAddressCtx *) cls;
590   struct ATS_Address *current = (struct ATS_Address *) value;
591   struct GNUNET_TIME_Absolute now;
592   struct Network *net = (struct Network *) current->solver_information;
593   const double *norm_prop_cur;
594   const double *norm_prop_prev;
595   int index;
596
597   now = GNUNET_TIME_absolute_get();
598
599   if (current->blocked_until.abs_value_us == GNUNET_TIME_absolute_max (now, current->blocked_until).abs_value_us)
600   {
601     /* This address is blocked for suggestion */
602     LOG (GNUNET_ERROR_TYPE_DEBUG,
603          "Address %p blocked for suggestion for %s \n",
604          current,
605          GNUNET_STRINGS_relative_time_to_string (GNUNET_TIME_absolute_get_difference (now, current->blocked_until),
606                                                  GNUNET_YES));
607     return GNUNET_OK;
608   }
609   if (GNUNET_NO == is_bandwidth_available_in_network (net))
610     return GNUNET_OK; /* There's no bandwidth available in this network */
611   if (NULL != fba_ctx->best)
612   {
613         GNUNET_assert (NULL != fba_ctx->best->plugin);
614         GNUNET_assert (NULL != current->plugin);
615     if (0 == strcmp (fba_ctx->best->plugin, current->plugin))
616     {
617       if ((0 != fba_ctx->best->addr_len) &&
618           (0 == current->addr_len))
619       {
620         /* saved address was an outbound address, but we have an inbound address */
621         fba_ctx->best = current;
622         return GNUNET_OK;
623       }
624       if (0 == fba_ctx->best->addr_len)
625       {
626         /* saved address was an inbound address, so do not overwrite */
627         return GNUNET_OK;
628       }
629     }
630   }
631   if (NULL == fba_ctx->best)
632   {
633         fba_ctx->best = current;
634     return GNUNET_OK;
635   }
636   if ((ntohl (fba_ctx->best->assigned_bw_in.value__) == 0) &&
637       (ntohl (current->assigned_bw_in.value__) > 0))
638   {
639     /* stick to existing connection */
640         fba_ctx->best = current;
641     return GNUNET_OK;
642   }
643
644   norm_prop_cur = fba_ctx->s->get_properties (fba_ctx->s->get_properties_cls,
645                 (const struct ATS_Address *) current);
646   norm_prop_prev = fba_ctx->s->get_properties (fba_ctx->s->get_properties_cls,
647                 (const struct ATS_Address *) fba_ctx->best);
648 /*
649   GNUNET_log (GNUNET_ERROR_TYPE_DEBUG, "%s previous %.2f current %.2f\n",
650                 "DISTANCE", norm_prop_cur[1], norm_prop_cur[1]);
651 */
652   index = find_property_index (GNUNET_ATS_QUALITY_NET_DISTANCE);
653   if (GNUNET_SYSERR == index)
654   {
655         GNUNET_break (0);
656         return GNUNET_OK;
657   }
658   if (norm_prop_cur[index] < norm_prop_prev[index])
659   {
660     /* user shorter distance */
661     fba_ctx->best = current;
662     return GNUNET_OK;
663   }
664 /*
665   GNUNET_log (GNUNET_ERROR_TYPE_ERROR, "%s previous %.2f current %.2f\n",
666                 "DELAY", norm_prop_cur[1], norm_prop_cur[1]);
667  */
668   index = find_property_index (GNUNET_ATS_QUALITY_NET_DELAY);
669   if (GNUNET_SYSERR == index)
670   {
671         GNUNET_break (0);
672         return GNUNET_OK;
673   }
674   if (norm_prop_cur[index] < norm_prop_prev[index])
675   {
676     /* user shorter delay */
677         fba_ctx->best = current;
678     return GNUNET_OK;
679   }
680
681   /* don't care */
682   return GNUNET_OK;
683 }
684
685 /**
686  *  Helper functions
687  *  ---------------------------
688  */
689
690 /**
691  * Update bandwidth assignment for all networks
692  *
693  * @param s the solver handle
694  */
695 static void
696 distribute_bandwidth_in_all_networks (struct GAS_PROPORTIONAL_Handle *s)
697 {
698         int i;
699
700         for (i = 0; i < s->networks; i++)
701                 distribute_bandwidth_in_network (s, &s->network_entries[i], NULL);
702
703 }
704
705
706 /**
707  * Lookup network struct by type
708  *
709  * @param s the solver handle
710  * @param type the network type
711  * @return the network struct
712  */
713 static struct Network *
714 get_network (struct GAS_PROPORTIONAL_Handle *s, uint32_t type)
715 {
716   int c;
717   for (c = 0 ; c < s->networks; c++)
718   {
719       if (s->network_entries[c].type == type)
720         return &s->network_entries[c];
721
722   }
723   return NULL;
724 }
725
726
727 /**
728  * Hashmap Iterator to find current active address for peer
729  *
730  * @param cls last active address
731  * @param key peer's key
732  * @param value address to check
733  * @return GNUNET_NO on double active address else GNUNET_YES;
734  */
735 static int
736 get_active_address_it (void *cls, const struct GNUNET_HashCode * key, void *value)
737 {
738         struct ATS_Address **dest = cls;
739   struct ATS_Address *aa = (struct ATS_Address *) value;
740
741   if (GNUNET_YES == aa->active)
742   {
743
744       if (NULL != (*dest))
745       {
746           /* should never happen */
747           LOG (GNUNET_ERROR_TYPE_ERROR, "Multiple active addresses for peer `%s'\n", GNUNET_i2s (&aa->peer));
748           GNUNET_break (0);
749           return GNUNET_NO;
750       }
751       (*dest) = aa;
752   }
753   return GNUNET_OK;
754 }
755
756
757 /**
758  * Find current active address for peer
759  *
760  * @param solver the solver handle
761  * @param addresses the address set
762  * @param peer the peer
763  * @return active address or NULL
764  */
765 static struct ATS_Address *
766 get_active_address (void *solver,
767                      struct GNUNET_CONTAINER_MultiHashMap * addresses,
768                      const struct GNUNET_PeerIdentity *peer)
769 {
770   struct ATS_Address * dest = NULL;
771
772   GNUNET_CONTAINER_multihashmap_get_multiple(addresses,
773        &peer->hashPubKey,
774        &get_active_address_it, &dest);
775   return dest;
776 }
777
778
779
780 static void
781 addresse_increment (struct GAS_PROPORTIONAL_Handle *s,
782                                 struct Network *net,
783                                 int total,
784                                 int active)
785 {
786   if (GNUNET_YES == total)
787   {
788       s->total_addresses ++;
789       net->total_addresses ++;
790       GNUNET_STATISTICS_update (s->stats, "# ATS addresses total", 1, GNUNET_NO);
791       GNUNET_STATISTICS_update (s->stats, net->stat_total, 1, GNUNET_NO);
792   }
793   if (GNUNET_YES == active)
794   {
795     net->active_addresses ++;
796     s->active_addresses ++;
797     GNUNET_STATISTICS_update (s->stats, "# ATS active addresses total", 1, GNUNET_NO);
798     GNUNET_STATISTICS_update (s->stats, net->stat_active, 1, GNUNET_NO);
799   }
800
801 }
802
803
804 static int
805 addresse_decrement (struct GAS_PROPORTIONAL_Handle *s,
806                     struct Network *net,
807                     int total,
808                     int active)
809 {
810   int res = GNUNET_OK;
811   if (GNUNET_YES == total)
812   {
813     if (s->total_addresses < 1)
814     {
815       GNUNET_break (0);
816       res = GNUNET_SYSERR;
817     }
818     else
819     {
820       s->total_addresses --;
821       GNUNET_STATISTICS_update (s->stats, "# ATS addresses total", -1, GNUNET_NO);
822     }
823     if (net->total_addresses < 1)
824     {
825       GNUNET_break (0);
826       res = GNUNET_SYSERR;
827     }
828     else
829     {
830       net->total_addresses --;
831       GNUNET_STATISTICS_update (s->stats, net->stat_total, -1, GNUNET_NO);
832     }
833   }
834
835   if (GNUNET_YES == active)
836   {
837     if (net->active_addresses < 1)
838     {
839       GNUNET_break (0);
840       res = GNUNET_SYSERR;
841     }
842     else
843     {
844       net->active_addresses --;
845       GNUNET_STATISTICS_update (s->stats, net->stat_active, -1, GNUNET_NO);
846     }
847     if (s->active_addresses < 1)
848     {
849       GNUNET_break (0);
850       res = GNUNET_SYSERR;
851     }
852     else
853     {
854       s->active_addresses --;
855       GNUNET_STATISTICS_update (s->stats, "# ATS addresses total", -1, GNUNET_NO);
856     }
857   }
858   return res;
859 }
860
861
862 /**
863  *  Solver API functions
864  *  ---------------------------
865  */
866
867 /**
868  * Changes the preferences for a peer in the problem
869  *
870  * @param solver the solver handle
871  * @param peer the peer to change the preference for
872  * @param kind the kind to change the preference
873  * @param pref_rel the normalized preference value for this kind over all clients
874  */
875 void
876 GAS_proportional_address_change_preference (void *solver,
877                                                                                         const struct GNUNET_PeerIdentity *peer,
878                                                                                         enum GNUNET_ATS_PreferenceKind kind,
879                                                                                         double pref_rel)
880 {
881   struct GAS_PROPORTIONAL_Handle *s = solver;
882   GNUNET_assert (NULL != solver);
883   GNUNET_assert (NULL != peer);
884
885         distribute_bandwidth_in_all_networks (s);
886 }
887
888
889 /**
890  * Get application feedback for a peer
891  *
892  * @param solver the solver handle
893  * @param application the application
894  * @param peer the peer to change the preference for
895  * @param kind the kind to change the preference
896  * @param score the score
897  */
898 void
899 GAS_proportional_address_preference_feedback (void *solver,
900                                                                                         void *application,
901                                                                                         const struct GNUNET_PeerIdentity *peer,
902                                                                                         enum GNUNET_ATS_PreferenceKind kind,
903                                                                                         double score)
904 {
905   struct GAS_PROPORTIONAL_Handle *s = solver;
906   GNUNET_assert (NULL != solver);
907   GNUNET_assert (NULL != peer);
908
909   GNUNET_assert (NULL != s);
910   GNUNET_break (0);
911 }
912
913
914 /**
915  * Get the preferred address for a specific peer
916  *
917  * @param solver the solver handle
918  * @param peer the identity of the peer
919  */
920 const struct ATS_Address *
921 GAS_proportional_get_preferred_address (void *solver,
922                                const struct GNUNET_PeerIdentity *peer)
923 {
924   struct GAS_PROPORTIONAL_Handle *s = solver;
925   struct Network *net_prev;
926   struct Network *net_cur;
927   struct ATS_Address *prev;
928   struct FindBestAddressCtx fba_ctx;
929
930   GNUNET_assert (s != NULL);
931   GNUNET_assert (peer != NULL);
932
933   /* Get address with: stick to current address, lower distance, lower latency */
934   fba_ctx.s = s;
935   fba_ctx.best = NULL;
936
937   GNUNET_CONTAINER_multihashmap_get_multiple (s->addresses, &peer->hashPubKey,
938                                               &find_best_address_it, &fba_ctx);
939   if (NULL == fba_ctx.best)
940   {
941     LOG (GNUNET_ERROR_TYPE_DEBUG, "Cannot suggest address for peer `%s'\n", GNUNET_i2s (peer));
942     return NULL;
943   }
944
945   LOG (GNUNET_ERROR_TYPE_DEBUG, "Suggesting %s address %p for peer `%s'\n",
946       (GNUNET_NO == fba_ctx.best->active) ? "inactive" : "active",
947                 fba_ctx.best, GNUNET_i2s (peer));
948   net_cur = (struct Network *) fba_ctx.best->solver_information;
949   if (NULL == fba_ctx.best)
950   {
951     LOG (GNUNET_ERROR_TYPE_ERROR, "Trying to suggesting unknown address peer `%s'\n",
952         GNUNET_i2s (peer));
953     GNUNET_break (0);
954     return NULL;
955   }
956   if (GNUNET_YES == fba_ctx.best->active)
957   {
958       /* This address was selected previously, so no need to update quotas */
959       return fba_ctx.best;
960   }
961
962   /* This address was not active, so we have to:
963    *
964    * - mark previous active address as not active
965    * - update quota for previous address network
966    * - update quota for this address network
967    */
968
969   prev = get_active_address (s, (struct GNUNET_CONTAINER_MultiHashMap *) s->addresses, peer);
970   if (NULL != prev)
971   {
972       net_prev = (struct Network *) prev->solver_information;
973       prev->active = GNUNET_NO; /* No active any longer */
974       prev->assigned_bw_in = GNUNET_BANDWIDTH_value_init (0); /* no bw assigned */
975       prev->assigned_bw_out = GNUNET_BANDWIDTH_value_init (0); /* no bw assigned */
976       s->bw_changed (s->bw_changed_cls, prev); /* notify about bw change, REQUIRED? */
977       if (GNUNET_SYSERR == addresse_decrement (s, net_prev, GNUNET_NO, GNUNET_YES))
978         GNUNET_break (0);
979         distribute_bandwidth_in_network (s, net_prev, NULL);
980   }
981
982   if (GNUNET_NO == (is_bandwidth_available_in_network (fba_ctx.best->solver_information)))
983   {
984     GNUNET_break (0); /* This should never happen*/
985     return NULL;
986   }
987
988   fba_ctx.best->active = GNUNET_YES;
989   addresse_increment(s, net_cur, GNUNET_NO, GNUNET_YES);
990   distribute_bandwidth_in_network (s, net_cur, fba_ctx.best);
991   return fba_ctx.best;
992 }
993
994
995 /**
996  * Stop notifying about address and bandwidth changes for this peer
997  *
998  * @param solver the solver handle
999  * @param peer the peer
1000  */
1001 void
1002 GAS_proportional_stop_get_preferred_address (void *solver,
1003                                      const struct GNUNET_PeerIdentity *peer)
1004 {
1005         return;
1006 }
1007
1008
1009 /**
1010  * Remove an address from the solver
1011  *
1012  * @param solver the solver handle
1013  * @param address the address to remove
1014  * @param session_only delete only session not whole address
1015  */
1016 void
1017 GAS_proportional_address_delete (void *solver,
1018                                                                                                                  struct ATS_Address *address,
1019                                                                                                                  int session_only)
1020 {
1021   struct GAS_PROPORTIONAL_Handle *s = solver;
1022   struct Network *net;
1023   struct AddressWrapper *aw;
1024
1025   /* Remove an adress completely, we have to:
1026    * - Remove from specific network
1027    * - Decrease number of total addresses
1028    * - If active:
1029    *   - decrease number of active addreses
1030    *   - update quotas
1031    */
1032
1033   net = (struct Network *) address->solver_information;
1034
1035   if (GNUNET_NO == session_only)
1036   {
1037     LOG (GNUNET_ERROR_TYPE_DEBUG, "Deleting %s address %p for peer `%s' from network `%s' (total: %u/ active: %u)\n",
1038         (GNUNET_NO == address->active) ? "inactive" : "active",
1039         address, GNUNET_i2s (&address->peer),
1040         net->desc, net->total_addresses, net->active_addresses);
1041
1042     /* Remove address */
1043     addresse_decrement (s, net, GNUNET_YES, GNUNET_NO);
1044     for (aw = net->head; NULL != aw; aw = aw->next)
1045     {
1046         if (aw->addr == address)
1047           break;
1048     }
1049     if (NULL == aw )
1050     {
1051         GNUNET_break (0);
1052         return;
1053     }
1054     GNUNET_CONTAINER_DLL_remove (net->head, net->tail, aw);
1055     GNUNET_free (aw);
1056   }
1057   else
1058   {
1059       /* Remove session only: remove if active and update */
1060       LOG (GNUNET_ERROR_TYPE_DEBUG, "Deleting %s session %p for peer `%s' from network `%s' (total: %u/ active: %u)\n",
1061           (GNUNET_NO == address->active) ? "inactive" : "active",
1062           address, GNUNET_i2s (&address->peer),
1063           net->desc, net->total_addresses, net->active_addresses);
1064   }
1065
1066   if (GNUNET_YES == address->active)
1067   {
1068       /* Address was active, remove from network and update quotas*/
1069       address->active = GNUNET_NO;
1070       if (GNUNET_SYSERR == addresse_decrement (s, net, GNUNET_NO, GNUNET_YES))
1071         GNUNET_break (0);
1072       distribute_bandwidth_in_network (s, net, NULL);
1073   }
1074   LOG (GNUNET_ERROR_TYPE_DEBUG, "After deleting address now total %u and active %u addresses in network `%s'\n",
1075       net->total_addresses,
1076       net->active_addresses,
1077       net->desc);
1078
1079 }
1080
1081
1082 /**
1083  * Start a bulk operation
1084  *
1085  * @param solver the solver
1086  */
1087 void
1088 GAS_proportional_bulk_start (void *solver)
1089 {
1090   LOG (GNUNET_ERROR_TYPE_DEBUG, "Locking solver for bulk operation ...\n");
1091   struct GAS_PROPORTIONAL_Handle *s = (struct GAS_PROPORTIONAL_Handle *) solver;
1092
1093   GNUNET_assert (NULL != solver);
1094   s->bulk_lock ++;
1095 }
1096
1097 /**
1098  * Bulk operation done
1099  */
1100 void
1101 GAS_proportional_bulk_stop (void *solver)
1102 {
1103         LOG (GNUNET_ERROR_TYPE_DEBUG, "Unlocking solver from bulk operation ...\n");
1104
1105   struct GAS_PROPORTIONAL_Handle *s = (struct GAS_PROPORTIONAL_Handle *) solver;
1106   GNUNET_assert (NULL != solver);
1107
1108   if (s->bulk_lock < 1)
1109   {
1110         GNUNET_break (0);
1111         return;
1112   }
1113   s->bulk_lock --;
1114   if ((0 == s->bulk_lock) && (0 < s->bulk_requests))
1115   {
1116         LOG (GNUNET_ERROR_TYPE_DEBUG, "No lock pending, recalculating\n");
1117         distribute_bandwidth_in_all_networks (s);
1118         s->bulk_requests = 0;
1119   }
1120 }
1121
1122
1123 /**
1124  * Add a new single address to a network
1125  *
1126  * @param solver the solver Handle
1127  * @param address the address to add
1128  * @param network network type of this address
1129  */
1130 void
1131 GAS_proportional_address_add (void *solver,
1132                                                                                                                         struct ATS_Address *address,
1133                                                                                                                         uint32_t network);
1134
1135
1136 /**
1137  * Transport properties for this address have changed
1138  *
1139  * @param solver solver handle
1140  * @param address the address
1141  * @param type the ATSI type in HBO
1142  * @param abs_value the absolute value of the property
1143  * @param rel_value the normalized value
1144  */
1145 void
1146 GAS_proportional_address_property_changed (void *solver,
1147                                                                                                                         struct ATS_Address *address,
1148                                                                                                                         uint32_t type,
1149                                                                                                                         uint32_t abs_value,
1150                                                                                                                         double rel_value)
1151 {
1152         struct GAS_PROPORTIONAL_Handle *s;
1153         struct Network *n;
1154
1155         GNUNET_assert (NULL != solver);
1156         GNUNET_assert (NULL != address);
1157
1158         s = (struct GAS_PROPORTIONAL_Handle *) solver;
1159         n = (struct Network *) address->solver_information;
1160
1161         if (NULL == n)
1162         {
1163                 GNUNET_break (0);
1164                 return;
1165         }
1166
1167   LOG (GNUNET_ERROR_TYPE_DEBUG,
1168               "Property `%s' for peer `%s' address %p changed to %.2f \n",
1169               GNUNET_ATS_print_property_type (type),
1170               GNUNET_i2s (&address->peer),
1171               address, rel_value);
1172   switch (type)
1173   {
1174         case GNUNET_ATS_UTILIZATION_UP:
1175         case GNUNET_ATS_UTILIZATION_DOWN:
1176         case GNUNET_ATS_QUALITY_NET_DELAY:
1177         case GNUNET_ATS_QUALITY_NET_DISTANCE:
1178         case GNUNET_ATS_COST_WAN:
1179         case GNUNET_ATS_COST_LAN:
1180         case GNUNET_ATS_COST_WLAN:
1181     distribute_bandwidth_in_network (s, n, GNUNET_NO);
1182         break;
1183   }
1184 }
1185
1186
1187 /**
1188  * Transport session for this address has changed
1189  *
1190  * NOTE: values in addresses are already updated
1191  *
1192  * @param solver solver handle
1193  * @param address the address
1194  * @param cur_session the current session
1195  * @param new_session the new session
1196  */
1197 void
1198 GAS_proportional_address_session_changed (void *solver,
1199                                                                                                                         struct ATS_Address *address,
1200                                                                                                                         uint32_t cur_session,
1201                                                                                                                         uint32_t new_session)
1202 {
1203   if (cur_session!= new_session)
1204   {
1205       LOG (GNUNET_ERROR_TYPE_DEBUG,
1206                   "Session changed from %u to %u\n", cur_session, new_session);
1207   }
1208 }
1209
1210
1211 /**
1212  * Usage for this address has changed
1213  *
1214  * NOTE: values in addresses are already updated
1215  *
1216  * @param solver solver handle
1217  * @param address the address
1218  * @param in_use usage state
1219  */
1220 void
1221 GAS_proportional_address_inuse_changed (void *solver,
1222                                                                                                                         struct ATS_Address *address,
1223                                                                                                                         int in_use)
1224 {
1225         LOG (GNUNET_ERROR_TYPE_DEBUG,
1226                                                         "Usage changed to %s\n",
1227                                                         (GNUNET_YES == in_use) ? "USED" : "UNUSED");
1228 }
1229
1230
1231 /**
1232  * Network scope for this address has changed
1233  *
1234  * NOTE: values in addresses are already updated
1235  *
1236  * @param solver solver handle
1237  * @param address the address
1238  * @param current_network the current network
1239  * @param new_network the new network
1240  */
1241 void
1242 GAS_proportional_address_change_network (void *solver,
1243                                                                                                                                            struct ATS_Address *address,
1244                                                                                                                                            uint32_t current_network,
1245                                                                                                                                            uint32_t new_network)
1246 {
1247   struct ATS_Address *new;
1248   struct GAS_PROPORTIONAL_Handle *s = (struct GAS_PROPORTIONAL_Handle *) solver;
1249   int save_active = GNUNET_NO;
1250   struct Network *new_net = NULL;
1251
1252   if (current_network == new_network)
1253   {
1254         GNUNET_break (0);
1255         return;
1256   }
1257
1258         /* Network changed */
1259         LOG (GNUNET_ERROR_TYPE_DEBUG, "Network type changed, moving %s address from `%s' to `%s'\n",
1260                         (GNUNET_YES == address->active) ? "active" : "inactive",
1261                          GNUNET_ATS_print_network_type (current_network),
1262                          GNUNET_ATS_print_network_type (new_network));
1263
1264   save_active = address->active;
1265         /* remove from old network */
1266         GAS_proportional_address_delete (solver, address, GNUNET_NO);
1267
1268         /* set new network type */
1269         new_net = get_network (solver, new_network);
1270         if (NULL == new_net)
1271         {
1272                 /* Address changed to invalid network... */
1273                 LOG (GNUNET_ERROR_TYPE_ERROR, _("Cannot find network of type `%u' %s\n"),
1274                                 new_network, GNUNET_ATS_print_network_type (new_network));
1275                 address->assigned_bw_in = GNUNET_BANDWIDTH_value_init (0);
1276                 address->assigned_bw_out = GNUNET_BANDWIDTH_value_init (0);
1277                 s->bw_changed  (s->bw_changed_cls, address);
1278                 return;
1279         }
1280         address->solver_information = new_net;
1281
1282         /* Add to new network and update*/
1283         GAS_proportional_address_add (solver, address, new_network);
1284         if (GNUNET_YES == save_active)
1285         {
1286                 /* check if bandwidth available in new network */
1287                 if (GNUNET_YES == (is_bandwidth_available_in_network (new_net)))
1288                 {
1289                                 /* Suggest updated address */
1290                                 address->active = GNUNET_YES;
1291                                 addresse_increment (s, new_net, GNUNET_NO, GNUNET_YES);
1292                                 distribute_bandwidth_in_network (solver, new_net, NULL);
1293                 }
1294                 else
1295                 {
1296                         LOG (GNUNET_ERROR_TYPE_DEBUG, "Not enough bandwidth in new network, suggesting alternative address ..\n");
1297
1298                         /* Set old address to zero bw */
1299                         address->assigned_bw_in = GNUNET_BANDWIDTH_value_init (0);
1300                         address->assigned_bw_out = GNUNET_BANDWIDTH_value_init (0);
1301                         s->bw_changed  (s->bw_changed_cls, address);
1302
1303                         /* Find new address to suggest since no bandwidth in network*/
1304                         new = (struct ATS_Address *) GAS_proportional_get_preferred_address (s, &address->peer);
1305                         if (NULL != new)
1306                         {
1307                                         /* Have an alternative address to suggest */
1308                                         s->bw_changed  (s->bw_changed_cls, new);
1309                         }
1310                 }
1311   }
1312 }
1313
1314 /**
1315  * Add a new single address to a network
1316  *
1317  * @param solver the solver Handle
1318  * @param address the address to add
1319  * @param network network type of this address
1320  */
1321 void
1322 GAS_proportional_address_add (void *solver,
1323                                                                                                                         struct ATS_Address *address,
1324                                                                                                                         uint32_t network)
1325 {
1326   struct GAS_PROPORTIONAL_Handle *s = solver;
1327   struct Network *net = NULL;
1328   struct AddressWrapper *aw = NULL;
1329   GNUNET_assert (NULL != s);
1330
1331   net = get_network (s, network);
1332   if (NULL == net)
1333   {
1334     GNUNET_break (0);
1335     return;
1336   }
1337
1338   aw = GNUNET_malloc (sizeof (struct AddressWrapper));
1339   aw->addr = address;
1340   GNUNET_CONTAINER_DLL_insert (net->head, net->tail, aw);
1341   addresse_increment (s, net, GNUNET_YES, GNUNET_NO);
1342   aw->addr->solver_information = net;
1343
1344   LOG (GNUNET_ERROR_TYPE_DEBUG, "After adding address now total %u and active %u addresses in network `%s'\n",
1345       net->total_addresses,
1346       net->active_addresses,
1347       net->desc);
1348 }
1349
1350
1351 /**
1352  * Init the proportional problem solver
1353  *
1354  * Quotas:
1355  * network[i] contains the network type as type GNUNET_ATS_NetworkType[i]
1356  * out_quota[i] contains outbound quota for network type i
1357  * in_quota[i] contains inbound quota for network type i
1358  *
1359  * Example
1360  * network = {GNUNET_ATS_NET_UNSPECIFIED, GNUNET_ATS_NET_LOOPBACK, GNUNET_ATS_NET_LAN, GNUNET_ATS_NET_WAN, GNUNET_ATS_NET_WLAN}
1361  * network[2]   == GNUNET_ATS_NET_LAN
1362  * out_quota[2] == 65353
1363  * in_quota[2]  == 65353
1364  *
1365  * @param cfg configuration handle
1366  * @param stats the GNUNET_STATISTICS handle
1367  * @param addresses hashmap containing all addresses
1368  * @param network array of GNUNET_ATS_NetworkType with length dest_length
1369  * @param out_quota array of outbound quotas
1370  * @param in_quota array of outbound quota
1371  * @param dest_length array length for quota arrays
1372  * @param bw_changed_cb callback for changed bandwidth amounts
1373  * @param bw_changed_cb_cls cls for callback
1374  * @param get_preference callback to get relative preferences for a peer
1375  * @param get_preference_cls cls for callback to get relative preferences
1376  * @param get_properties for callback to get relative properties
1377  * @param get_properties_cls cls for callback to get relative properties
1378  * @return handle for the solver on success, NULL on fail
1379  */
1380 void *
1381 GAS_proportional_init (const struct GNUNET_CONFIGURATION_Handle *cfg,
1382                        const struct GNUNET_STATISTICS_Handle *stats,
1383                        const struct GNUNET_CONTAINER_MultiHashMap *addresses,
1384                        int *network,
1385                        unsigned long long *out_quota,
1386                        unsigned long long *in_quota,
1387                        int dest_length,
1388                        GAS_bandwidth_changed_cb bw_changed_cb,
1389                        void *bw_changed_cb_cls,
1390                        GAS_get_preferences get_preference,
1391                        void *get_preference_cls,
1392                        GAS_get_properties get_properties,
1393                        void *get_properties_cls)
1394 {
1395   int c;
1396   struct GAS_PROPORTIONAL_Handle *s = GNUNET_malloc (sizeof (struct GAS_PROPORTIONAL_Handle));
1397   struct Network * cur;
1398   char * net_str[GNUNET_ATS_NetworkTypeCount] = GNUNET_ATS_NetworkTypeString;
1399
1400   GNUNET_assert (NULL != cfg);
1401   GNUNET_assert (NULL != stats);
1402   GNUNET_assert (NULL != network);
1403   GNUNET_assert (NULL != bw_changed_cb);
1404   GNUNET_assert (NULL != get_preference);
1405   GNUNET_assert (NULL != get_properties);
1406
1407   s->stats = (struct GNUNET_STATISTICS_Handle *) stats;
1408   s->bw_changed = bw_changed_cb;
1409   s->bw_changed_cls = bw_changed_cb_cls;
1410   s->get_preferences = get_preference;
1411   s->get_preferences_cls = get_preference_cls;
1412   s->get_properties = get_properties;
1413   s->get_properties_cls = get_properties_cls;
1414   s->networks = dest_length;
1415   s->network_entries = GNUNET_malloc (dest_length * sizeof (struct Network));
1416   s->active_addresses = 0;
1417   s->total_addresses = 0;
1418   s->bulk_lock = GNUNET_NO;
1419   s->addresses = addresses;
1420
1421   for (c = 0; c < dest_length; c++)
1422   {
1423       cur = &s->network_entries[c];
1424       cur->total_addresses = 0;
1425       cur->active_addresses = 0;
1426       cur->type = network[c];
1427       cur->total_quota_in = in_quota[c];
1428       cur->total_quota_out = out_quota[c];
1429       cur->desc = net_str[c];
1430       GNUNET_asprintf (&cur->stat_total, "# ATS addresses %s total", cur->desc);
1431       GNUNET_asprintf (&cur->stat_active, "# ATS active addresses %s total", cur->desc);
1432   }
1433   return s;
1434 }
1435
1436
1437 /**
1438  * Shutdown the proportional problem solver
1439  *
1440  * @param solver the respective handle to shutdown
1441  */
1442 void
1443 GAS_proportional_done (void *solver)
1444 {
1445   struct GAS_PROPORTIONAL_Handle *s = solver;
1446   struct AddressWrapper *cur;
1447   struct AddressWrapper *next;
1448   int c;
1449   GNUNET_assert (s != NULL);
1450
1451   for (c = 0; c < s->networks; c++)
1452   {
1453       if (s->network_entries[c].total_addresses > 0)
1454       {
1455         LOG (GNUNET_ERROR_TYPE_ERROR,
1456                     "Had %u addresses for network `%s' not deleted during shutdown\n",
1457                     s->network_entries[c].total_addresses,
1458                     s->network_entries[c].desc);
1459         GNUNET_break (0);
1460       }
1461
1462       if (s->network_entries[c].active_addresses > 0)
1463       {
1464         LOG (GNUNET_ERROR_TYPE_ERROR,
1465                     "Had %u active addresses for network `%s' not deleted during shutdown\n",
1466                     s->network_entries[c].active_addresses,
1467                     s->network_entries[c].desc);
1468         GNUNET_break (0);
1469       }
1470
1471       next = s->network_entries[c].head;
1472       while (NULL != (cur = next))
1473       {
1474           next = cur->next;
1475           GNUNET_CONTAINER_DLL_remove (s->network_entries[c].head,
1476                                        s->network_entries[c].tail,
1477                                        cur);
1478           GNUNET_free (cur);
1479       }
1480       GNUNET_free (s->network_entries[c].stat_total);
1481       GNUNET_free (s->network_entries[c].stat_active);
1482   }
1483   if (s->total_addresses > 0)
1484   {
1485     LOG (GNUNET_ERROR_TYPE_ERROR,
1486                 "Had %u addresses not deleted during shutdown\n",
1487                 s->total_addresses);
1488     GNUNET_break (0);
1489   }
1490   if (s->active_addresses > 0)
1491   {
1492     LOG (GNUNET_ERROR_TYPE_ERROR,
1493                 "Had %u active addresses not deleted during shutdown\n",
1494                 s->active_addresses);
1495     GNUNET_break (0);
1496   }
1497   GNUNET_free (s->network_entries);
1498   GNUNET_free (s);
1499 }
1500
1501
1502 /* end of gnunet-service-ats-solver_proportional.c */