src/ats/gnunet-service-ats_addresses_mlp.c

   1 /*
   2      This file is part of GNUnet.
   3      (C) 2011 Christian Grothoff (and other contributing authors)
   4
   5      GNUnet is free software; you can redistribute it and/or modify
   6      it under the terms of the GNU General Public License as published
   7      by the Free Software Foundation; either version 3, or (at your
   8      option) any later version.
   9
  10      GNUnet is distributed in the hope that it will be useful, but
  11      WITHOUT ANY WARRANTY; without even the implied warranty of
  12      MERCHANTABILITY or FITNESS FOR A PARTICULAR PURPOSE.  See the GNU
  13      General Public License for more details.
  14
  15      You should have received a copy of the GNU General Public License
  16      along with GNUnet; see the file COPYING.  If not, write to the
  17      Free Software Foundation, Inc., 59 Temple Place - Suite 330,
  18      Boston, MA 02111-1307, USA.
  19 */
  20
  21 /**
  22  * @file ats/gnunet-service-ats_addresses_mlp.c
  23  * @brief ats mlp problem solver
  24  * @author Matthias Wachs
  25  * @author Christian Grothoff
  26  */
  27 #include "platform.h"
  28 #include "gnunet_util_lib.h"
  29 #include "gnunet-service-ats_addresses.h"
  30 #include "gnunet-service-ats_addresses_mlp.h"
  31 #include "gnunet_statistics_service.h"
  32 #include "glpk.h"
  33
  34 #define WRITE_MLP GNUNET_NO
  35 #define DEBUG_ATS GNUNET_NO
  36 #define VERBOSE_GLPK GNUNET_NO
  37
  38 #define ENABLE_C8 GNUNET_YES
  39 #define ENABLE_C9 GNUNET_YES
  40 /**
  41  * Translate glpk solver error codes to text
  42  * @param retcode return code
  43  * @return string with result
  44  */
  45 const char *
  46 mlp_solve_to_string (int retcode)
  47 {
  48   switch (retcode) {
  49     case 0:
  50       return "ok";
  51       break;
  52     case GLP_EBADB:
  53       return "invalid basis";
  54       break;
  55     case GLP_ESING:
  56       return "singular matrix";
  57       break;
  58     case GLP_ECOND:
  59       return "ill-conditioned matrix";
  60       break;
  61     case GLP_EBOUND:
  62       return "invalid bounds";
  63       break;
  64     case GLP_EFAIL:
  65       return "solver failed";
  66       break;
  67     case GLP_EOBJLL:
  68       return "objective lower limit reached";
  69       break;
  70     case GLP_EOBJUL:
  71       return "objective upper limit reached";
  72       break;
  73     case GLP_EITLIM:
  74       return "iteration limit exceeded";
  75       break;
  76     case GLP_ETMLIM:
  77       return "time limit exceeded";
  78       break;
  79     case GLP_ENOPFS:
  80       return "no primal feasible solution";
  81       break;
  82     case GLP_EROOT:
  83       return "root LP optimum not provided";
  84       break;
  85     case GLP_ESTOP:
  86       return "search terminated by application";
  87       break;
  88     case GLP_EMIPGAP:
  89       return "relative mip gap tolerance reached";
  90       break;
  91     case GLP_ENOFEAS:
  92       return "no dual feasible solution";
  93       break;
  94     case GLP_ENOCVG:
  95       return "no convergence";
  96       break;
  97     case GLP_EINSTAB:
  98       return "numerical instability";
  99       break;
 100     case GLP_EDATA:
 101       return "invalid data";
 102       break;
 103     case GLP_ERANGE:
 104       return "result out of range";
 105       break;
 106     default:
 107       GNUNET_break (0);
 108       return "unknown error";
 109       break;
 110   }
 111   GNUNET_break (0);
 112   return "unknown error";
 113 }
 114
 115
 116 /**
 117  * Translate glpk status error codes to text
 118  * @param retcode return code
 119  * @return string with result
 120  */
 121 const char *
 122 mlp_status_to_string (int retcode)
 123 {
 124   switch (retcode) {
 125     case GLP_UNDEF:
 126       return "solution is undefined";
 127       break;
 128     case GLP_FEAS:
 129       return "solution is feasible";
 130       break;
 131     case GLP_INFEAS:
 132       return "solution is infeasible";
 133       break;
 134     case GLP_NOFEAS:
 135       return "no feasible solution exists";
 136       break;
 137     case GLP_OPT:
 138       return "solution is optimal";
 139       break;
 140     case GLP_UNBND:
 141       return "solution is unbounded";
 142       break;
 143     default:
 144       GNUNET_break (0);
 145       return "unknown error";
 146       break;
 147   }
 148   GNUNET_break (0);
 149   return "unknown error";
 150 }
 151
 152 /**
 153  * Translate ATS properties to text
 154  * Just intended for debugging
 155  *
 156  * @param ats_index the ATS index
 157  * @return string with result
 158  */
 159 const char *
 160 mlp_ats_to_string (int ats_index)
 161 {
 162   switch (ats_index) {
 163     case GNUNET_ATS_ARRAY_TERMINATOR:
 164       return "GNUNET_ATS_ARRAY_TERMINATOR";
 165       break;
 166     case GNUNET_ATS_UTILIZATION_UP:
 167       return "GNUNET_ATS_UTILIZATION_UP";
 168       break;
 169     case GNUNET_ATS_UTILIZATION_DOWN:
 170       return "GNUNET_ATS_UTILIZATION_DOWN";
 171       break;
 172     case GNUNET_ATS_COST_LAN:
 173       return "GNUNET_ATS_COST_LAN";
 174       break;
 175     case GNUNET_ATS_COST_WAN:
 176       return "GNUNET_ATS_COST_LAN";
 177       break;
 178     case GNUNET_ATS_COST_WLAN:
 179       return "GNUNET_ATS_COST_WLAN";
 180       break;
 181     case GNUNET_ATS_NETWORK_TYPE:
 182       return "GNUNET_ATS_NETWORK_TYPE";
 183       break;
 184     case GNUNET_ATS_QUALITY_NET_DELAY:
 185       return "GNUNET_ATS_QUALITY_NET_DELAY";
 186       break;
 187     case GNUNET_ATS_QUALITY_NET_DISTANCE:
 188       return "GNUNET_ATS_QUALITY_NET_DISTANCE";
 189       break;
 190     default:
 191       return "unknown";
 192       break;
 193   }
 194   GNUNET_break (0);
 195   return "unknown error";
 196 }
 197
 198 /**
 199  * Find a peer in the DLL
 200  *
 201  * @param mlp the mlp handle
 202  * @param peer the peer to find
 203  * @return the peer struct
 204  */
 205 static struct ATS_Peer *
 206 mlp_find_peer (struct GAS_MLP_Handle *mlp, const struct GNUNET_PeerIdentity *peer)
 207 {
 208   struct ATS_Peer *res = mlp->peer_head;
 209   while (res != NULL)
 210   {
 211     if (0 == memcmp (peer, &res->id, sizeof (struct GNUNET_PeerIdentity)))
 212       break;
 213     res = res->next;
 214   }
 215   return res;
 216 }
 217
 218 /**
 219  * Intercept GLPK terminal output
 220  * @param info the mlp handle
 221  * @param s the string to print
 222  * @return 0: glpk prints output on terminal, 0 != surpress output
 223  */
 224 static int
 225 mlp_term_hook (void *info, const char *s)
 226 {
 227   /* Not needed atm struct MLP_information *mlp = info; */
 228   GNUNET_log (GNUNET_ERROR_TYPE_DEBUG, "%s", s);
 229   return 1;
 230 }
 231
 232 /**
 233  * Delete the MLP problem and free the constrain matrix
 234  *
 235  * @param mlp the MLP handle
 236  */
 237 static void
 238 mlp_delete_problem (struct GAS_MLP_Handle *mlp)
 239 {
 240   if (mlp != NULL)
 241   {
 242     if (mlp->prob != NULL)
 243       glp_delete_prob(mlp->prob);
 244
 245     /* delete row index */
 246     if (mlp->ia != NULL)
 247     {
 248       GNUNET_free (mlp->ia);
 249       mlp->ia = NULL;
 250     }
 251
 252     /* delete column index */
 253     if (mlp->ja != NULL)
 254     {
 255       GNUNET_free (mlp->ja);
 256       mlp->ja = NULL;
 257     }
 258
 259     /* delete coefficients */
 260     if (mlp->ar != NULL)
 261     {
 262       GNUNET_free (mlp->ar);
 263       mlp->ar = NULL;
 264     }
 265     mlp->ci = 0;
 266     mlp->prob = NULL;
 267   }
 268 }
 269
 270 /**
 271  * Add constraints that are iterating over "forall addresses"
 272  * and collects all existing peers for "forall peers" constraints
 273  *
 274  * @param cls GAS_MLP_Handle
 275  * @param key Hashcode
 276  * @param value ATS_Address
 277  *
 278  * @return GNUNET_OK to continue
 279  */
 280 static int
 281 create_constraint_it (void *cls, const GNUNET_HashCode * key, void *value)
 282 {
 283   struct GAS_MLP_Handle *mlp = cls;
 284   struct ATS_Address *address = value;
 285   struct MLP_information *mlpi;
 286   unsigned int row_index;
 287   char *name;
 288
 289   GNUNET_assert (address->mlp_information != NULL);
 290   mlpi = (struct MLP_information *) address->mlp_information;
 291
 292   /* c 1) bandwidth capping
 293    * b_t  + (-M) * n_t <= 0
 294    */
 295   row_index = glp_add_rows (mlp->prob, 1);
 296   mlpi->r_c1 = row_index;
 297   /* set row name */
 298   GNUNET_asprintf(&name, "c1_%s_%s", GNUNET_i2s(&address->peer), address->plugin);
 299   glp_set_row_name (mlp->prob, row_index, name);
 300   GNUNET_free (name);
 301   /* set row bounds: <= 0 */
 302   glp_set_row_bnds (mlp->prob, row_index, GLP_UP, 0.0, 0.0);
 303   mlp->ia[mlp->ci] = row_index;
 304   mlp->ja[mlp->ci] = mlpi->c_b;
 305   mlp->ar[mlp->ci] = 1;
 306   mlp->ci++;
 307
 308   mlp->ia[mlp->ci] = row_index;
 309   mlp->ja[mlp->ci] = mlpi->c_n;
 310   mlp->ar[mlp->ci] = -mlp->BIG_M;
 311   mlp->ci++;
 312
 313   /* c 3) minimum bandwidth
 314    * b_t + (-n_t * b_min) >= 0
 315    */
 316
 317   row_index = glp_add_rows (mlp->prob, 1);
 318   /* set row name */
 319   GNUNET_asprintf(&name, "c3_%s_%s", GNUNET_i2s(&address->peer), address->plugin);
 320   glp_set_row_name (mlp->prob, row_index, name);
 321   GNUNET_free (name);
 322   mlpi->r_c3 = row_index;
 323   /* set row bounds: >= 0 */
 324   glp_set_row_bnds (mlp->prob, row_index, GLP_LO, 0.0, 0.0);
 325
 326   mlp->ia[mlp->ci] = row_index;
 327   mlp->ja[mlp->ci] = mlpi->c_b;
 328   mlp->ar[mlp->ci] = 1;
 329   mlp->ci++;
 330
 331   mlp->ia[mlp->ci] = row_index;
 332   mlp->ja[mlp->ci] = mlpi->c_n;
 333   mlp->ar[mlp->ci] = - (double) mlp->b_min;
 334   mlp->ci++;
 335
 336   /* c 4) minimum connections
 337    * (1)*n_1 + ... + (1)*n_m >= n_min
 338    */
 339   mlp->ia[mlp->ci] = mlp->r_c4;
 340   mlp->ja[mlp->ci] = mlpi->c_n;
 341   mlp->ar[mlp->ci] = 1;
 342   mlp->ci++;
 343
 344   /* c 6) maximize diversity
 345    * (1)*n_1 + ... + (1)*n_m - d == 0
 346    */
 347   mlp->ia[mlp->ci] = mlp->r_c6;
 348   mlp->ja[mlp->ci] = mlpi->c_n;
 349   mlp->ar[mlp->ci] = 1;
 350   mlp->ci++;
 351
 352   /* c 10) obey network specific quotas
 353    * (1)*b_1 + ... + (1)*b_m <= quota_n
 354    */
 355
 356   int cur_row = 0;
 357   int c;
 358   for (c = 0; c < GNUNET_ATS_NetworkTypeCount; c++)
 359     {
 360     if (mlp->quota_index[c] == address->atsp_network_type)
 361     {
 362       cur_row = mlp->r_quota[c];
 363       break;
 364     }
 365   }
 366
 367   if (cur_row != 0)
 368   {
 369     mlp->ia[mlp->ci] = cur_row;
 370     mlp->ja[mlp->ci] = mlpi->c_b;
 371     mlp->ar[mlp->ci] = 1;
 372     mlp->ci++;
 373   }
 374   else
 375   {
 376     GNUNET_break (0);
 377   }
 378
 379   return GNUNET_OK;
 380 }
 381
 382 /**
 383  * Find the required ATS information for an address
 384  *
 385  * @param addr the address
 386  * @param ats_index the desired ATS index
 387  *
 388  * @return the index on success, otherwise GNUNET_SYSERR
 389  */
 390
 391 static int
 392 mlp_lookup_ats (struct ATS_Address *addr, int ats_index)
 393 {
 394   struct GNUNET_ATS_Information * ats = addr->ats;
 395   int c = 0;
 396   int found = GNUNET_NO;
 397   for (c = 0; c < addr->ats_count; c++)
 398   {
 399     if (ats[c].type == ats_index)
 400     {
 401       found = GNUNET_YES;
 402       break;
 403     }
 404   }
 405   if (found == GNUNET_YES)
 406     return c;
 407   else
 408     return GNUNET_SYSERR;
 409 }
 410
 411 /**
 412  * Adds the problem constraints for all addresses
 413  * Required for problem recreation after address deletion
 414  *
 415  * @param mlp the mlp handle
 416  * @param addresses all addresses
 417  */
 418
 419 static void
 420 mlp_add_constraints_all_addresses (struct GAS_MLP_Handle *mlp, struct GNUNET_CONTAINER_MultiHashMap * addresses)
 421 {
 422   unsigned int n_addresses;
 423   int c;
 424   char *name;
 425
 426   /* Problem matrix*/
 427   n_addresses = GNUNET_CONTAINER_multihashmap_size(addresses);
 428
 429   /* Required indices in the constrain matrix
 430    *
 431    * feasibility constraints:
 432    *
 433    * c 1) bandwidth capping
 434    * #rows: |n_addresses|
 435    * #indices: 2 * |n_addresses|
 436    *
 437    * c 2) one active address per peer
 438    * #rows: |peers|
 439    * #indices: |n_addresses|
 440    *
 441    * c 3) minium bandwidth assigned
 442    * #rows: |n_addresses|
 443    * #indices: 2 * |n_addresses|
 444    *
 445    * c 4) minimum number of active connections
 446    * #rows: 1
 447    * #indices: |n_addresses|
 448    *
 449    * c 5) maximum ressource consumption
 450    * #rows: |ressources|
 451    * #indices: |n_addresses|
 452    *
 453    * c 10) obey network specific quota
 454    * #rows: |network types
 455    * #indices: |n_addresses|
 456    *
 457    * Sum for feasibility constraints:
 458    * #rows: 3 * |n_addresses| +  |ressources| + |peers| + 1
 459    * #indices: 7 * |n_addresses|
 460    *
 461    * optimality constraints:
 462    *
 463    * c 6) diversity
 464    * #rows: 1
 465    * #indices: |n_addresses| + 1
 466    *
 467    * c 7) quality
 468    * #rows: |quality properties|
 469    * #indices: |n_addresses| + |quality properties|
 470    *
 471    * c 8) utilization
 472    * #rows: 1
 473    * #indices: |n_addresses| + 1
 474    *
 475    * c 9) relativity
 476    * #rows: |peers|
 477    * #indices: |n_addresses| + |peers|
 478    * */
 479
 480   /* last +1 caused by glpk index starting with one: [1..pi]*/
 481   int pi = ((7 * n_addresses) + (5 * n_addresses +  mlp->m_q + mlp->c_p + 2) + 1);
 482   mlp->cm_size = pi;
 483   mlp->ci = 1;
 484
 485   /* row index */
 486   int *ia = GNUNET_malloc (pi * sizeof (int));
 487   mlp->ia = ia;
 488
 489   /* column index */
 490   int *ja = GNUNET_malloc (pi * sizeof (int));
 491   mlp->ja = ja;
 492
 493   /* coefficient */
 494   double *ar= GNUNET_malloc (pi * sizeof (double));
 495   mlp->ar = ar;
 496
 497   /* Adding constraint rows
 498    * This constraints are kind of "for all addresses"
 499    * Feasibility constraints:
 500    *
 501    * c 1) bandwidth capping
 502    * c 3) minimum bandwidth
 503    * c 4) minimum number of connections
 504    * c 6) maximize diversity
 505    * c 10) obey network specific quota
 506    */
 507
 508   int min = mlp->n_min;
 509   if (mlp->n_min > mlp->c_p)
 510     min = mlp->c_p;
 511
 512   mlp->r_c4 = glp_add_rows (mlp->prob, 1);
 513   glp_set_row_name (mlp->prob, mlp->r_c4, "c4");
 514   glp_set_row_bnds (mlp->prob, mlp->r_c4, GLP_LO, min, min);
 515
 516   /* Add row for c6) */
 517
 518   mlp->r_c6 = glp_add_rows (mlp->prob, 1);
 519   /* Set type type to fix */
 520   glp_set_row_bnds (mlp->prob, mlp->r_c6, GLP_FX, 0.0, 0.0);
 521   /* Setting -D */
 522   ia[mlp->ci] = mlp->r_c6 ;
 523   ja[mlp->ci] = mlp->c_d;
 524   ar[mlp->ci] = -1;
 525   mlp->ci++;
 526
 527   /* Add rows for c 10) */
 528   for (c = 0; c < GNUNET_ATS_NetworkTypeCount; c++)
 529   {
 530     mlp->r_quota[c] = glp_add_rows (mlp->prob, 1);
 531     char * text;
 532     GNUNET_asprintf(&text, "quota_ats_%i", mlp->quota_index[c]);
 533     glp_set_row_name (mlp->prob, mlp->r_quota[c], text);
 534     GNUNET_free (text);
 535     /* Set bounds to 0 <= x <= quota_out */
 536     glp_set_row_bnds (mlp->prob, mlp->r_quota[c], GLP_UP, 0.0, mlp->quota_out[c]);
 537   }
 538
 539   GNUNET_CONTAINER_multihashmap_iterate (addresses, create_constraint_it, mlp);
 540
 541   /* Adding constraint rows
 542    * This constraints are kind of "for all peers"
 543    * Feasibility constraints:
 544    *
 545    * c 2) 1 address per peer
 546    * sum (n_p1_1 + ... + n_p1_n) = 1
 547    *
 548    * c 8) utilization
 549    * sum (f_p * b_p1_1 + ... + f_p * b_p1_n) - u = 0
 550    *
 551    * c 9) relativity
 552    * V p : sum (bt_1 + ... +bt_n) - f_p * r = 0
 553    * */
 554
 555   /* Adding rows for c 8) */
 556   mlp->r_c8 = glp_add_rows (mlp->prob, mlp->c_p);
 557   glp_set_row_name (mlp->prob, mlp->r_c8, "c8");
 558   /* Set row bound == 0 */
 559   glp_set_row_bnds (mlp->prob, mlp->r_c8, GLP_FX, 0.0, 0.0);
 560   /* -u */
 561
 562   ia[mlp->ci] = mlp->r_c8;
 563   ja[mlp->ci] = mlp->c_u;
 564   ar[mlp->ci] = -1;
 565   mlp->ci++;
 566
 567   struct ATS_Peer * peer = mlp->peer_head;
 568   while (peer != NULL)
 569   {
 570     struct ATS_Address *addr = peer->head;
 571     struct MLP_information *mlpi = NULL;
 572
 573     /* Adding rows for c 2) */
 574     peer->r_c2 = glp_add_rows (mlp->prob, 1);
 575     GNUNET_asprintf(&name, "c2_%s", GNUNET_i2s(&peer->id));
 576     glp_set_row_name (mlp->prob, peer->r_c2, name);
 577     GNUNET_free (name);
 578     /* Set row bound == 1 */
 579     glp_set_row_bnds (mlp->prob, peer->r_c2, GLP_FX, 1.0, 1.0);
 580
 581     /* Adding rows for c 9) */
 582 #if ENABLE_C9
 583     peer->r_c9 = glp_add_rows (mlp->prob, 1);
 584     GNUNET_asprintf(&name, "c9_%s", GNUNET_i2s(&peer->id));
 585     glp_set_row_name (mlp->prob, peer->r_c9, name);
 586     GNUNET_free (name);
 587     /* Set row bound == 0 */
 588     glp_set_row_bnds (mlp->prob, peer->r_c9, GLP_LO, 0.0, 0.0);
 589
 590     /* Set -r */
 591     ia[mlp->ci] = peer->r_c9;
 592     ja[mlp->ci] = mlp->c_r;
 593     ar[mlp->ci] = -1;
 594     mlp->ci++;
 595 #endif
 596
 597     while (addr != NULL)
 598     {
 599       mlpi = (struct MLP_information *) addr->mlp_information;
 600
 601       /* coefficient for c 2) */
 602
 603       ia[mlp->ci] = peer->r_c2;
 604       ja[mlp->ci] = mlpi->c_n;
 605       ar[mlp->ci] = 1;
 606       mlp->ci++;
 607
 608       /* coefficient for c 8) */
 609       ia[mlp->ci] = mlp->r_c8;
 610       ja[mlp->ci] = mlpi->c_b;
 611       ar[mlp->ci] = peer->f;
 612       mlp->ci++;
 613
 614 #if ENABLE_C9
 615       /* coefficient for c 9) */
 616       ia[mlp->ci] = peer->r_c9;
 617       ja[mlp->ci] = mlpi->c_b;
 618       ar[mlp->ci] = 1;
 619       mlp->ci++;
 620 #endif
 621
 622       addr = addr->next;
 623     }
 624     peer = peer->next;
 625   }
 626
 627   /* c 7) For all quality metrics */
 628
 629
 630   for (c = 0; c < mlp->m_q; c++)
 631   {
 632     struct ATS_Peer *tp;
 633     struct ATS_Address *ta;
 634     struct MLP_information * mlpi;
 635     double value = 1.0;
 636
 637     /* Adding rows for c 7) */
 638     mlp->r_q[c] = glp_add_rows (mlp->prob, 1);
 639     GNUNET_asprintf(&name, "c7_q%i_%s", c, mlp_ats_to_string(mlp->q[c]));
 640     glp_set_row_name (mlp->prob, mlp->r_q[c], name);
 641     GNUNET_free (name);
 642     /* Set row bound == 0 */
 643     glp_set_row_bnds (mlp->prob, mlp->r_q[c], GLP_LO, 0.0, 0.0);
 644
 645     ia[mlp->ci] = mlp->r_q[c];
 646     ja[mlp->ci] = mlp->c_q[c];
 647     ar[mlp->ci] = -1;
 648     mlp->ci++;
 649
 650     for (tp = mlp->peer_head; tp != NULL; tp = tp->next)
 651       for (ta = tp->head; ta != NULL; ta = ta->next)
 652         {
 653           mlpi = ta->mlp_information;
 654           value = mlpi->q_averaged[c];
 655
 656           mlpi->r_q[c] = mlp->r_q[c];
 657
 658           ia[mlp->ci] = mlp->r_q[c];
 659           ja[mlp->ci] = mlpi->c_b;
 660           ar[mlp->ci] = tp->f * value;
 661           mlp->ci++;
 662         }
 663   }
 664 }
 665
 666
 667 /**
 668  * Add columns for all addresses
 669  *
 670  * @param cls GAS_MLP_Handle
 671  * @param key Hashcode
 672  * @param value ATS_Address
 673  *
 674  * @return GNUNET_OK to continue
 675  */
 676 static int
 677 create_columns_it (void *cls, const GNUNET_HashCode * key, void *value)
 678 {
 679   struct GAS_MLP_Handle *mlp = cls;
 680   struct ATS_Address *address = value;
 681   struct MLP_information *mlpi;
 682   unsigned int col;
 683   char *name;
 684
 685   GNUNET_assert (address->mlp_information != NULL);
 686   mlpi = address->mlp_information;
 687
 688   /* Add bandwidth column */
 689   col = glp_add_cols (mlp->prob, 2);
 690   mlpi->c_b = col;
 691   mlpi->c_n = col + 1;
 692
 693
 694   GNUNET_asprintf (&name, "b_%s_%s", GNUNET_i2s (&address->peer), address->plugin);
 695   glp_set_col_name (mlp->prob, mlpi->c_b , name);
 696   GNUNET_free (name);
 697   /* Lower bound == 0 */
 698   glp_set_col_bnds (mlp->prob, mlpi->c_b , GLP_LO, 0.0, 0.0);
 699   /* Continuous value*/
 700   glp_set_col_kind (mlp->prob, mlpi->c_b , GLP_CV);
 701   /* Objective function coefficient == 0 */
 702   glp_set_obj_coef (mlp->prob, mlpi->c_b , 0);
 703
 704
 705   /* Add usage column */
 706   GNUNET_asprintf (&name, "n_%s_%s", GNUNET_i2s (&address->peer), address->plugin);
 707   glp_set_col_name (mlp->prob, mlpi->c_n, name);
 708   GNUNET_free (name);
 709   /* Limit value : 0 <= value <= 1 */
 710   glp_set_col_bnds (mlp->prob, mlpi->c_n, GLP_DB, 0.0, 1.0);
 711   /* Integer value*/
 712   glp_set_col_kind (mlp->prob, mlpi->c_n, GLP_IV);
 713   /* Objective function coefficient == 0 */
 714   glp_set_obj_coef (mlp->prob, mlpi->c_n, 0);
 715
 716   return GNUNET_OK;
 717 }
 718
 719
 720
 721 /**
 722  * Create the MLP problem
 723  *
 724  * @param mlp the MLP handle
 725  * @param addresses the hashmap containing all adresses
 726  * @return GNUNET_OK or GNUNET_SYSERR
 727  */
 728 static int
 729 mlp_create_problem (struct GAS_MLP_Handle *mlp, struct GNUNET_CONTAINER_MultiHashMap * addresses)
 730 {
 731   int res = GNUNET_OK;
 732   int col;
 733   int c;
 734   char *name;
 735
 736   GNUNET_assert (mlp->prob == NULL);
 737
 738   /* create the glpk problem */
 739   mlp->prob = glp_create_prob ();
 740
 741   /* Set a problem name */
 742   glp_set_prob_name (mlp->prob, "gnunet ats bandwidth distribution");
 743
 744   /* Set optimization direction to maximize */
 745   glp_set_obj_dir (mlp->prob, GLP_MAX);
 746
 747   /* Adding invariant columns */
 748
 749   /* Diversity d column  */
 750
 751   col = glp_add_cols (mlp->prob, 1);
 752   mlp->c_d = col;
 753   /* Column name */
 754   glp_set_col_name (mlp->prob, col, "d");
 755   /* Column objective function coefficient */
 756   glp_set_obj_coef (mlp->prob, col, mlp->co_D);
 757   /* Column lower bound = 0.0 */
 758   glp_set_col_bnds (mlp->prob, col, GLP_LO, 0.0, 0.0);
 759
 760   /* Utilization u column  */
 761
 762   col = glp_add_cols (mlp->prob, 1);
 763   mlp->c_u = col;
 764   /* Column name */
 765   glp_set_col_name (mlp->prob, col, "u");
 766   /* Column objective function coefficient */
 767   glp_set_obj_coef (mlp->prob, col, mlp->co_U);
 768   /* Column lower bound = 0.0 */
 769   glp_set_col_bnds (mlp->prob, col, GLP_LO, 0.0, 0.0);
 770
 771 #if ENABLE_C9
 772   /* Relativity r column  */
 773   col = glp_add_cols (mlp->prob, 1);
 774   mlp->c_r = col;
 775   /* Column name */
 776   glp_set_col_name (mlp->prob, col, "r");
 777   /* Column objective function coefficient */
 778   glp_set_obj_coef (mlp->prob, col, mlp->co_R);
 779   /* Column lower bound = 0.0 */
 780   glp_set_col_bnds (mlp->prob, col, GLP_LO, 0.0, 0.0);
 781 #endif
 782
 783   /* Quality metric columns */
 784   col = glp_add_cols(mlp->prob, mlp->m_q);
 785   for (c = 0; c < mlp->m_q; c++)
 786   {
 787     mlp->c_q[c] = col + c;
 788     GNUNET_asprintf (&name, "q_%u", mlp->q[c]);
 789     glp_set_col_name (mlp->prob, col + c, name);
 790     /* Column lower bound = 0.0 */
 791     glp_set_col_bnds (mlp->prob, col + c, GLP_LO, 0.0, 0.0);
 792     GNUNET_free (name);
 793     /* Coefficient == Qm */
 794     glp_set_obj_coef (mlp->prob, col + c, mlp->co_Q[c]);
 795   }
 796
 797   /* Add columns for addresses */
 798   GNUNET_CONTAINER_multihashmap_iterate (addresses, create_columns_it, mlp);
 799
 800   /* Add constraints */
 801   mlp_add_constraints_all_addresses (mlp, addresses);
 802
 803   /* Load the matrix */
 804   glp_load_matrix(mlp->prob, (mlp->ci-1), mlp->ia, mlp->ja, mlp->ar);
 805
 806   return res;
 807 }
 808
 809
 810 /**
 811  * Solves the LP problem
 812  *
 813  * @param mlp the MLP Handle
 814  * @param s_ctx context to return results
 815  * @return GNUNET_OK if could be solved, GNUNET_SYSERR on failure
 816  */
 817 static int
 818 mlp_solve_lp_problem (struct GAS_MLP_Handle *mlp, struct GAS_MLP_SolutionContext *s_ctx)
 819 {
 820   int res;
 821   struct GNUNET_TIME_Relative duration;
 822   struct GNUNET_TIME_Absolute end;
 823   struct GNUNET_TIME_Absolute start = GNUNET_TIME_absolute_get();
 824
 825   /* LP presolver?
 826    * Presolver is required if the problem was modified and an existing
 827    * valid basis is now invalid */
 828   if (mlp->presolver_required == GNUNET_YES)
 829     mlp->control_param_lp.presolve = GLP_ON;
 830   else
 831     mlp->control_param_lp.presolve = GLP_OFF;
 832
 833   /* Solve LP problem to have initial valid solution */
 834 lp_solv:
 835   res = glp_simplex(mlp->prob, &mlp->control_param_lp);
 836   if (res == 0)
 837   {
 838     /* The LP problem instance has been successfully solved. */
 839   }
 840   else if (res == GLP_EITLIM)
 841   {
 842     /* simplex iteration limit has been exceeded. */
 843     // TODO Increase iteration limit?
 844   }
 845   else if (res == GLP_ETMLIM)
 846   {
 847     /* Time limit has been exceeded.  */
 848     // TODO Increase time limit?
 849   }
 850   else
 851   {
 852     /* Problem was ill-defined, retry with presolver */
 853     if (mlp->presolver_required == GNUNET_NO)
 854     {
 855       mlp->presolver_required = GNUNET_YES;
 856       goto lp_solv;
 857     }
 858     else
 859     {
 860       /* Problem was ill-defined, no way to handle that */
 861       GNUNET_log_from (GNUNET_ERROR_TYPE_DEBUG,
 862           "ats-mlp",
 863           "Solving LP problem failed: %i %s\n", res, mlp_solve_to_string(res));
 864       return GNUNET_SYSERR;
 865     }
 866   }
 867
 868   end = GNUNET_TIME_absolute_get ();
 869   duration = GNUNET_TIME_absolute_get_difference (start, end);
 870   mlp->lp_solved++;
 871   mlp->lp_total_duration =+ duration.rel_value;
 872   s_ctx->lp_duration = duration;
 873
 874   GNUNET_STATISTICS_update (mlp->stats,"# LP problem solved", 1, GNUNET_NO);
 875   GNUNET_STATISTICS_set (mlp->stats,"# LP execution time (ms)", duration.rel_value, GNUNET_NO);
 876   GNUNET_STATISTICS_set (mlp->stats,"# LP execution time average (ms)",
 877                          mlp->lp_total_duration / mlp->lp_solved,  GNUNET_NO);
 878
 879   /* Analyze problem status  */
 880   res = glp_get_status (mlp->prob);
 881   switch (res) {
 882     /* solution is optimal */
 883     case GLP_OPT:
 884     /* solution is feasible */
 885     case GLP_FEAS:
 886       break;
 887
 888     /* Problem was ill-defined, no way to handle that */
 889     default:
 890       GNUNET_log_from (GNUNET_ERROR_TYPE_DEBUG,
 891           "ats-mlp",
 892           "Solving LP problem failed, no solution: %s\n", mlp_status_to_string(res));
 893       return GNUNET_SYSERR;
 894       break;
 895   }
 896
 897   /* solved sucessfully, no presolver required next time */
 898   mlp->presolver_required = GNUNET_NO;
 899
 900   return GNUNET_OK;
 901 }
 902
 903
 904 /**
 905  * Solves the MLP problem
 906  *
 907  * @param mlp the MLP Handle
 908  * @param s_ctx context to return results
 909  * @return GNUNET_OK if could be solved, GNUNET_SYSERR on failure
 910  */
 911 int
 912 mlp_solve_mlp_problem (struct GAS_MLP_Handle *mlp, struct GAS_MLP_SolutionContext *s_ctx)
 913 {
 914   int res;
 915   struct GNUNET_TIME_Relative duration;
 916   struct GNUNET_TIME_Absolute end;
 917   struct GNUNET_TIME_Absolute start = GNUNET_TIME_absolute_get();
 918
 919   /* solve MLP problem */
 920   res = glp_intopt(mlp->prob, &mlp->control_param_mlp);
 921
 922   if (res == 0)
 923   {
 924     /* The MLP problem instance has been successfully solved. */
 925   }
 926   else if (res == GLP_EITLIM)
 927   {
 928     /* simplex iteration limit has been exceeded. */
 929     // TODO Increase iteration limit?
 930   }
 931   else if (res == GLP_ETMLIM)
 932   {
 933     /* Time limit has been exceeded.  */
 934     // TODO Increase time limit?
 935   }
 936   else
 937   {
 938     /* Problem was ill-defined, no way to handle that */
 939     GNUNET_log_from (GNUNET_ERROR_TYPE_DEBUG,
 940         "ats-mlp",
 941         "Solving MLP problem failed:  %s\n", mlp_solve_to_string(res));
 942     return GNUNET_SYSERR;
 943   }
 944
 945   end = GNUNET_TIME_absolute_get ();
 946   duration = GNUNET_TIME_absolute_get_difference (start, end);
 947   mlp->mlp_solved++;
 948   mlp->mlp_total_duration =+ duration.rel_value;
 949   s_ctx->mlp_duration = duration;
 950
 951   GNUNET_STATISTICS_update (mlp->stats,"# MLP problem solved", 1, GNUNET_NO);
 952   GNUNET_STATISTICS_set (mlp->stats,"# MLP execution time (ms)", duration.rel_value, GNUNET_NO);
 953   GNUNET_STATISTICS_set (mlp->stats,"# MLP execution time average (ms)",
 954                          mlp->mlp_total_duration / mlp->mlp_solved,  GNUNET_NO);
 955
 956   /* Analyze problem status  */
 957   res = glp_mip_status(mlp->prob);
 958   switch (res) {
 959     /* solution is optimal */
 960     case GLP_OPT:
 961     /* solution is feasible */
 962     case GLP_FEAS:
 963       break;
 964
 965     /* Problem was ill-defined, no way to handle that */
 966     default:
 967       GNUNET_log_from (GNUNET_ERROR_TYPE_DEBUG,
 968           "ats-mlp",
 969           "Solving MLP problem failed, %s\n\n", mlp_status_to_string(res));
 970       return GNUNET_SYSERR;
 971       break;
 972   }
 973
 974   return GNUNET_OK;
 975 }
 976
 977 int GAS_mlp_solve_problem (struct GAS_MLP_Handle *mlp, struct GAS_MLP_SolutionContext *ctx);
 978
 979
 980 static void
 981 mlp_scheduler (void *cls, const struct GNUNET_SCHEDULER_TaskContext *tc)
 982 {
 983   struct GAS_MLP_Handle *mlp = cls;
 984   struct GAS_MLP_SolutionContext ctx;
 985
 986   mlp->mlp_task = GNUNET_SCHEDULER_NO_TASK;
 987
 988   if (0 != (tc->reason & GNUNET_SCHEDULER_REASON_SHUTDOWN))
 989     return;
 990
 991   GNUNET_log (GNUNET_ERROR_TYPE_DEBUG, "Scheduled problem solving\n");
 992
 993   if (mlp->addr_in_problem != 0)
 994     GAS_mlp_solve_problem(mlp, &ctx);
 995 }
 996
 997
 998 /**
 999  * Solves the MLP problem
1000  *
1001  * @param mlp the MLP Handle
1002  * @param ctx solution context
1003  * @return GNUNET_OK if could be solved, GNUNET_SYSERR on failure
1004  */
1005 int
1006 GAS_mlp_solve_problem (struct GAS_MLP_Handle *mlp, struct GAS_MLP_SolutionContext *ctx)
1007 {
1008   int res;
1009   /* Check if solving is already running */
1010   if (GNUNET_YES == mlp->semaphore)
1011   {
1012     if (mlp->mlp_task != GNUNET_SCHEDULER_NO_TASK)
1013     {
1014       GNUNET_SCHEDULER_cancel(mlp->mlp_task);
1015       mlp->mlp_task = GNUNET_SCHEDULER_NO_TASK;
1016     }
1017     mlp->mlp_task = GNUNET_SCHEDULER_add_delayed (mlp->exec_interval, &mlp_scheduler, mlp);
1018     return GNUNET_SYSERR;
1019   }
1020   mlp->semaphore = GNUNET_YES;
1021
1022   mlp->last_execution = GNUNET_TIME_absolute_get ();
1023
1024   ctx->lp_result = GNUNET_SYSERR;
1025   ctx->mlp_result = GNUNET_SYSERR;
1026   ctx->lp_duration = GNUNET_TIME_relative_get_forever();
1027   ctx->mlp_duration = GNUNET_TIME_relative_get_forever();
1028
1029   GNUNET_log (GNUNET_ERROR_TYPE_DEBUG, "Solve LP problem\n");
1030 #if WRITE_MLP
1031   char * name;
1032   static int i;
1033   i++;
1034   GNUNET_asprintf(&name, "problem_%i", i);
1035   glp_write_lp (mlp->prob, 0, name);
1036   GNUNET_free (name);
1037 # endif
1038
1039   res = mlp_solve_lp_problem (mlp, ctx);
1040   ctx->lp_result = res;
1041   if (res != GNUNET_OK)
1042   {
1043     GNUNET_log (GNUNET_ERROR_TYPE_ERROR, "LP Problem solving failed\n");
1044     mlp->semaphore = GNUNET_NO;
1045     return GNUNET_SYSERR;
1046   }
1047
1048 #if WRITE_MLP
1049   GNUNET_asprintf(&name, "problem_%i_lp_solution", i);
1050   glp_print_sol (mlp->prob,  name);
1051   GNUNET_free (name);
1052 # endif
1053
1054
1055   GNUNET_log (GNUNET_ERROR_TYPE_DEBUG, "Solve MLP problem\n");
1056   res = mlp_solve_mlp_problem (mlp, ctx);
1057   ctx->mlp_result = res;
1058   if (res != GNUNET_OK)
1059   {
1060     GNUNET_log (GNUNET_ERROR_TYPE_ERROR, "MLP Problem solving failed\n");
1061     mlp->semaphore = GNUNET_NO;
1062     return GNUNET_SYSERR;
1063   }
1064 #if WRITE_MLP
1065   GNUNET_asprintf(&name, "problem_%i_mlp_solution", i);
1066   glp_print_mip (mlp->prob, name);
1067   GNUNET_free (name);
1068 # endif
1069
1070   GNUNET_log (GNUNET_ERROR_TYPE_DEBUG, "Problem solved %s (LP duration %llu / MLP duration %llu)\n",
1071       (GNUNET_OK == res) ? "successfully" : "failed", ctx->lp_duration.rel_value, ctx->mlp_duration.rel_value);
1072   /* Process result */
1073   struct ATS_Peer *p = NULL;
1074   struct ATS_Address *a = NULL;
1075   struct MLP_information *mlpi = NULL;
1076
1077   for (p = mlp->peer_head; p != NULL; p = p->next)
1078   {
1079     GNUNET_log (GNUNET_ERROR_TYPE_DEBUG, "Peer `%s'\n", GNUNET_i2s (&p->id));
1080     for (a = p->head; a != NULL; a = a->next)
1081     {
1082       double b = 0.0;
1083       double n = 0.0;
1084
1085       mlpi = a->mlp_information;
1086
1087       b = glp_mip_col_val(mlp->prob, mlpi->c_b);
1088       mlpi->b = b;
1089
1090       n = glp_mip_col_val(mlp->prob, mlpi->c_n);
1091       if (n == 1.0)
1092         mlpi->n = GNUNET_YES;
1093       else
1094         mlpi->n = GNUNET_NO;
1095
1096       GNUNET_log (GNUNET_ERROR_TYPE_DEBUG, "\tAddress %s %f\n",
1097           (n == 1.0) ? "[x]" : "[ ]", b);
1098     }
1099   }
1100
1101   if (mlp->mlp_task != GNUNET_SCHEDULER_NO_TASK)
1102   {
1103     GNUNET_SCHEDULER_cancel(mlp->mlp_task);
1104     mlp->mlp_task = GNUNET_SCHEDULER_NO_TASK;
1105   }
1106   mlp->mlp_task = GNUNET_SCHEDULER_add_delayed (mlp->exec_interval, &mlp_scheduler, mlp);
1107   mlp->semaphore = GNUNET_NO;
1108   return res;
1109 }
1110
1111 /**
1112  * Init the MLP problem solving component
1113  *
1114  * @param cfg the GNUNET_CONFIGURATION_Handle handle
1115  * @param stats the GNUNET_STATISTICS handle
1116  * @param max_duration maximum numbers of iterations for the LP/MLP Solver
1117  * @param max_iterations maximum time limit for the LP/MLP Solver
1118  * @return struct GAS_MLP_Handle * on success, NULL on fail
1119  */
1120 struct GAS_MLP_Handle *
1121 GAS_mlp_init (const struct GNUNET_CONFIGURATION_Handle *cfg,
1122               const struct GNUNET_STATISTICS_Handle *stats,
1123               struct GNUNET_TIME_Relative max_duration,
1124               unsigned int max_iterations)
1125 {
1126   struct GAS_MLP_Handle * mlp = GNUNET_malloc (sizeof (struct GAS_MLP_Handle));
1127
1128   double D;
1129   double R;
1130   double U;
1131   long long unsigned int tmp;
1132   unsigned int b_min;
1133   unsigned int n_min;
1134   struct GNUNET_TIME_Relative i_exec;
1135   int c;
1136   char * quota_out_str;
1137   char * quota_in_str;
1138
1139   /* Init GLPK environment */
1140   int res = glp_init_env();
1141   switch (res) {
1142     case 0:
1143       GNUNET_log (GNUNET_ERROR_TYPE_DEBUG, "GLPK: `%s'\n",
1144           "initialization successful");
1145       break;
1146     case 1:
1147       GNUNET_log (GNUNET_ERROR_TYPE_DEBUG, "GLPK: `%s'\n",
1148           "environment is already initialized");
1149       break;
1150     case 2:
1151       GNUNET_log (GNUNET_ERROR_TYPE_ERROR, "Could not init GLPK: `%s'\n",
1152           "initialization failed (insufficient memory)");
1153       GNUNET_free(mlp);
1154       return NULL;
1155       break;
1156     case 3:
1157       GNUNET_log (GNUNET_ERROR_TYPE_ERROR, "Could not init GLPK: `%s'\n",
1158           "initialization failed (unsupported programming model)");
1159       GNUNET_free(mlp);
1160       return NULL;
1161       break;
1162     default:
1163       break;
1164   }
1165
1166   /* Create initial MLP problem */
1167   mlp->prob = glp_create_prob();
1168   GNUNET_assert (mlp->prob != NULL);
1169
1170   mlp->BIG_M = (double) BIG_M_VALUE;
1171
1172   /* Get diversity coefficient from configuration */
1173   if (GNUNET_OK == GNUNET_CONFIGURATION_get_value_size (cfg, "ats",
1174                                                       "COEFFICIENT_D",
1175                                                       &tmp))
1176     D = (double) tmp / 100;
1177   else
1178     D = 1.0;
1179
1180   /* Get proportionality coefficient from configuration */
1181   if (GNUNET_OK == GNUNET_CONFIGURATION_get_value_size (cfg, "ats",
1182                                                       "COEFFICIENT_R",
1183                                                       &tmp))
1184     R = (double) tmp / 100;
1185   else
1186     R = 1.0;
1187
1188   /* Get utilization coefficient from configuration */
1189   if (GNUNET_OK == GNUNET_CONFIGURATION_get_value_size (cfg, "ats",
1190                                                       "COEFFICIENT_U",
1191                                                       &tmp))
1192     U = (double) tmp / 100;
1193   else
1194     U = 1.0;
1195
1196   /* Get quality metric coefficients from configuration */
1197   int i_delay = -1;
1198   int i_distance = -1;
1199   int q[GNUNET_ATS_QualityPropertiesCount] = GNUNET_ATS_QualityProperties;
1200   for (c = 0; c < GNUNET_ATS_QualityPropertiesCount; c++)
1201   {
1202     /* initialize quality coefficients with default value 1.0 */
1203     mlp->co_Q[c] = 1.0;
1204
1205     mlp->q[c] = q[c];
1206     if (q[c] == GNUNET_ATS_QUALITY_NET_DELAY)
1207       i_delay = c;
1208     if (q[c] == GNUNET_ATS_QUALITY_NET_DISTANCE)
1209       i_distance = c;
1210   }
1211
1212   if ((i_delay != -1) && (GNUNET_OK == GNUNET_CONFIGURATION_get_value_size (cfg, "ats",
1213                                                       "COEFFICIENT_QUALITY_DELAY",
1214                                                       &tmp)))
1215
1216     mlp->co_Q[i_delay] = (double) tmp / 100;
1217   else
1218     mlp->co_Q[i_delay] = 1.0;
1219
1220   if ((i_distance != -1) && (GNUNET_OK == GNUNET_CONFIGURATION_get_value_size (cfg, "ats",
1221                                                       "COEFFICIENT_QUALITY_DISTANCE",
1222                                                       &tmp)))
1223     mlp->co_Q[i_distance] = (double) tmp / 100;
1224   else
1225     mlp->co_Q[i_distance] = 1.0;
1226
1227   /* Get minimum bandwidth per used address from configuration */
1228   if (GNUNET_OK == GNUNET_CONFIGURATION_get_value_size (cfg, "ats",
1229                                                       "MIN_BANDWIDTH",
1230                                                       &tmp))
1231     b_min = tmp;
1232   else
1233   {
1234     b_min = ntohl (GNUNET_CONSTANTS_DEFAULT_BW_IN_OUT.value__);
1235   }
1236
1237   /* Get minimum number of connections from configuration */
1238   if (GNUNET_OK == GNUNET_CONFIGURATION_get_value_size (cfg, "ats",
1239                                                       "MIN_CONNECTIONS",
1240                                                       &tmp))
1241     n_min = tmp;
1242   else
1243     n_min = 4;
1244
1245   /* Init network quotas */
1246   int quotas[GNUNET_ATS_NetworkTypeCount] = GNUNET_ATS_NetworkType;
1247   for (c = 0; c < GNUNET_ATS_NetworkTypeCount; c++)
1248   {
1249     mlp->quota_index[c] = quotas[c];
1250     static char * entry_in = NULL;
1251     static char * entry_out = NULL;
1252     unsigned long long quota_in = 0;
1253     unsigned long long quota_out = 0;
1254
1255     switch (quotas[c]) {
1256       case GNUNET_ATS_NET_UNSPECIFIED:
1257         entry_out = "UNSPECIFIED_QUOTA_OUT";
1258         entry_in = "UNSPECIFIED_QUOTA_IN";
1259         break;
1260       case GNUNET_ATS_NET_LOOPBACK:
1261         entry_out = "LOOPBACK_QUOTA_OUT";
1262         entry_in = "LOOPBACK_QUOTA_IN";
1263         break;
1264       case GNUNET_ATS_NET_LAN:
1265         entry_out = "LAN_QUOTA_OUT";
1266         entry_in = "LAN_QUOTA_IN";
1267         break;
1268       case GNUNET_ATS_NET_WAN:
1269         entry_out = "WAN_QUOTA_OUT";
1270         entry_in = "WAN_QUOTA_IN";
1271         break;
1272       case GNUNET_ATS_NET_WLAN:
1273         entry_out = "WLAN_QUOTA_OUT";
1274         entry_in = "WLAN_QUOTA_IN";
1275         break;
1276       default:
1277         break;
1278     }
1279
1280     if ((entry_in == NULL) || (entry_out == NULL))
1281       continue;
1282
1283     if (GNUNET_OK == GNUNET_CONFIGURATION_get_value_string(cfg, "ats", entry_out, &quota_out_str))
1284     {
1285       if (0 == strcmp(quota_out_str, BIG_M_STRING) ||
1286           (GNUNET_SYSERR == GNUNET_STRINGS_fancy_size_to_bytes (quota_out_str, &quota_out)))
1287         quota_out = mlp->BIG_M;
1288
1289       GNUNET_free (quota_out_str);
1290       quota_out_str = NULL;
1291     }
1292     else if (GNUNET_ATS_NET_UNSPECIFIED == quotas[c])
1293     {
1294       quota_out = mlp->BIG_M;
1295     }
1296     else
1297     {
1298       quota_out = mlp->BIG_M;
1299     }
1300
1301     if (GNUNET_OK == GNUNET_CONFIGURATION_get_value_string(cfg, "ats", entry_in, &quota_in_str))
1302     {
1303       if (0 == strcmp(quota_in_str, BIG_M_STRING) ||
1304           (GNUNET_SYSERR == GNUNET_STRINGS_fancy_size_to_bytes (quota_in_str, &quota_in)))
1305         quota_in = mlp->BIG_M;
1306
1307       GNUNET_free (quota_in_str);
1308       quota_in_str = NULL;
1309     }
1310     else if (GNUNET_ATS_NET_UNSPECIFIED == quotas[c])
1311     {
1312       quota_in = mlp->BIG_M;
1313     }
1314     else
1315     {
1316       quota_in = mlp->BIG_M;
1317     }
1318
1319     /* Check if defined quota could make problem unsolvable */
1320     if (((n_min * b_min) > quota_out) && (GNUNET_ATS_NET_UNSPECIFIED != quotas[c]))
1321     {
1322       GNUNET_log (GNUNET_ERROR_TYPE_ERROR, "Inconsistent quota configuration value `%s': " \
1323           "outbound quota (%u Bps) too small for combination of minimum connections and minimum bandwidth per peer (%u * %u Bps = %u)\n", entry_out, quota_out, n_min, b_min, n_min * b_min);
1324
1325       GAS_mlp_done(mlp);
1326       mlp = NULL;
1327       return NULL;
1328     }
1329
1330     GNUNET_log (GNUNET_ERROR_TYPE_DEBUG, "Found `%s' quota %llu and `%s' quota %llu\n",
1331                 entry_out, quota_out, entry_in, quota_in);
1332     GNUNET_STATISTICS_update ((struct GNUNET_STATISTICS_Handle *) stats, entry_out, quota_out, GNUNET_NO);
1333     GNUNET_STATISTICS_update ((struct GNUNET_STATISTICS_Handle *) stats, entry_in, quota_in, GNUNET_NO);
1334     mlp->quota_out[c] = quota_out;
1335     mlp->quota_in[c] = quota_in;
1336   }
1337
1338   /* Get minimum number of connections from configuration */
1339   if (GNUNET_OK == GNUNET_CONFIGURATION_get_value_time (cfg, "ats",
1340                                                         "ATS_EXEC_INTERVAL",
1341                                                         &i_exec))
1342     mlp->exec_interval = i_exec;
1343   else
1344     mlp->exec_interval = GNUNET_TIME_relative_multiply(GNUNET_TIME_UNIT_SECONDS, 30);
1345
1346   mlp->stats = (struct GNUNET_STATISTICS_Handle *) stats;
1347   mlp->max_iterations = max_iterations;
1348   mlp->max_exec_duration = max_duration;
1349   mlp->auto_solve = GNUNET_YES;
1350
1351   /* Redirect GLPK output to GNUnet logging */
1352   glp_error_hook((void *) mlp, &mlp_term_hook);
1353
1354   /* Init LP solving parameters */
1355   glp_init_smcp(&mlp->control_param_lp);
1356
1357   mlp->control_param_lp.msg_lev = GLP_MSG_OFF;
1358 #if VERBOSE_GLPK
1359   mlp->control_param_lp.msg_lev = GLP_MSG_ALL;
1360 #endif
1361
1362   mlp->control_param_lp.it_lim = max_iterations;
1363   mlp->control_param_lp.tm_lim = max_duration.rel_value;
1364
1365   /* Init MLP solving parameters */
1366   glp_init_iocp(&mlp->control_param_mlp);
1367
1368   mlp->control_param_mlp.msg_lev = GLP_MSG_OFF;
1369 #if VERBOSE_GLPK
1370   mlp->control_param_mlp.msg_lev = GLP_MSG_ALL;
1371 #endif
1372   mlp->control_param_mlp.tm_lim = max_duration.rel_value;
1373
1374   mlp->last_execution = GNUNET_TIME_absolute_get_forever();
1375
1376   mlp->co_D = D;
1377   mlp->co_R = R;
1378   mlp->co_U = U;
1379   mlp->b_min = b_min;
1380   mlp->n_min = n_min;
1381   mlp->m_q = GNUNET_ATS_QualityPropertiesCount;
1382   mlp->semaphore = GNUNET_NO;
1383   return mlp;
1384 }
1385
1386 static void
1387 update_quality (struct GAS_MLP_Handle *mlp, struct ATS_Address * address)
1388 {
1389   GNUNET_log (GNUNET_ERROR_TYPE_DEBUG, "Updating quality metrics for peer `%s'\n",
1390       GNUNET_i2s (&address->peer));
1391
1392   GNUNET_assert (NULL != address);
1393   GNUNET_assert (NULL != address->mlp_information);
1394   GNUNET_assert (NULL != address->ats);
1395
1396   struct MLP_information *mlpi = address->mlp_information;
1397   struct GNUNET_ATS_Information *ats = address->ats;
1398   GNUNET_assert (mlpi != NULL);
1399
1400   int c;
1401   for (c = 0; c < GNUNET_ATS_QualityPropertiesCount; c++)
1402   {
1403     int index = mlp_lookup_ats(address, mlp->q[c]);
1404
1405     if (index == GNUNET_SYSERR)
1406       continue;
1407
1408     GNUNET_log (GNUNET_ERROR_TYPE_DEBUG, "Updating address for peer `%s' value `%s': %f\n",
1409         GNUNET_i2s (&address->peer),
1410         mlp_ats_to_string(mlp->q[c]),
1411         (double) ats[index].value);
1412
1413     int i = mlpi->q_avg_i[c];
1414     double * qp = mlpi->q[c];
1415     qp[i] = (double) ats[index].value;
1416
1417     int t;
1418     for (t = 0; t < MLP_AVERAGING_QUEUE_LENGTH; t++)
1419     {
1420       GNUNET_log (GNUNET_ERROR_TYPE_DEBUG, "Peer `%s': `%s' queue[%u]: %f\n",
1421         GNUNET_i2s (&address->peer),
1422         mlp_ats_to_string(mlp->q[c]),
1423         t,
1424         qp[t]);
1425     }
1426
1427     if (mlpi->q_avg_i[c] + 1 < (MLP_AVERAGING_QUEUE_LENGTH))
1428       mlpi->q_avg_i[c] ++;
1429     else
1430       mlpi->q_avg_i[c] = 0;
1431
1432
1433     int c2;
1434     int c3;
1435     double avg = 0.0;
1436     switch (mlp->q[c])
1437     {
1438       case GNUNET_ATS_QUALITY_NET_DELAY:
1439         c3 = 0;
1440         for (c2 = 0; c2 < MLP_AVERAGING_QUEUE_LENGTH; c2++)
1441         {
1442           if (mlpi->q[c][c2] != -1)
1443           {
1444             double * t2 = mlpi->q[c] ;
1445             avg += t2[c2];
1446             c3 ++;
1447           }
1448         }
1449         if ((c3 > 0) && (avg > 0))
1450           /* avg = 1 / ((q[0] + ... + q[l]) /c3) => c3 / avg*/
1451           mlpi->q_averaged[c] = (double) c3 / avg;
1452         else
1453           mlpi->q_averaged[c] = 0.0;
1454
1455         GNUNET_log (GNUNET_ERROR_TYPE_DEBUG, "Peer `%s': `%s' average sum: %f, average: %f, weight: %f\n",
1456           GNUNET_i2s (&address->peer),
1457           mlp_ats_to_string(mlp->q[c]),
1458           avg,
1459           avg / (double) c3,
1460           mlpi->q_averaged[c]);
1461
1462         break;
1463       case GNUNET_ATS_QUALITY_NET_DISTANCE:
1464         c3 = 0;
1465         for (c2 = 0; c2 < MLP_AVERAGING_QUEUE_LENGTH; c2++)
1466         {
1467           if (mlpi->q[c][c2] != -1)
1468           {
1469             double * t2 = mlpi->q[c] ;
1470             avg += t2[c2];
1471             c3 ++;
1472           }
1473         }
1474         if ((c3 > 0) && (avg > 0))
1475           /* avg = 1 / ((q[0] + ... + q[l]) /c3) => c3 / avg*/
1476           mlpi->q_averaged[c] = (double) c3 / avg;
1477         else
1478           mlpi->q_averaged[c] = 0.0;
1479
1480         GNUNET_log (GNUNET_ERROR_TYPE_DEBUG, "Peer `%s': `%s' average sum: %f, average: %f, weight: %f\n",
1481           GNUNET_i2s (&address->peer),
1482           mlp_ats_to_string(mlp->q[c]),
1483           avg,
1484           avg / (double) c3,
1485           mlpi->q_averaged[c]);
1486
1487         break;
1488       default:
1489         break;
1490     }
1491
1492     if ((mlpi->c_b != 0) && (mlpi->r_q[c] != 0))
1493     {
1494
1495       /* Get current number of columns */
1496       int found = GNUNET_NO;
1497       int cols = glp_get_num_cols(mlp->prob);
1498       int *ind = GNUNET_malloc (cols * sizeof (int) + 1);
1499       double *val = GNUNET_malloc (cols * sizeof (double) + 1);
1500
1501       /* Get the matrix row of quality */
1502       int length = glp_get_mat_row(mlp->prob, mlp->r_q[c], ind, val);
1503       GNUNET_log (GNUNET_ERROR_TYPE_DEBUG, "cols %i, length %i c_b %i\n", cols, length, mlpi->c_b);
1504       int c4;
1505       /* Get the index if matrix row of quality */
1506       for (c4 = 1; c4 <= length; c4++ )
1507       {
1508         if (mlpi->c_b == ind[c4])
1509         {
1510           /* Update the value */
1511           GNUNET_log (GNUNET_ERROR_TYPE_DEBUG, "Updating quality `%s' column `%s' row `%s' : %f -> %f\n",
1512               mlp_ats_to_string(mlp->q[c]),
1513               glp_get_col_name (mlp->prob, ind[c4]),
1514               glp_get_row_name (mlp->prob, mlp->r_q[c]),
1515               val[c4],
1516               mlpi->q_averaged[c]);
1517           val[c4] = mlpi->q_averaged[c];
1518           found = GNUNET_YES;
1519           break;
1520         }
1521       }
1522
1523       if (found == GNUNET_NO)
1524         {
1525
1526           ind[length+1] = mlpi->c_b;
1527           val[length+1] = mlpi->q_averaged[c];
1528           GNUNET_log (GNUNET_ERROR_TYPE_DEBUG, "%i ind[%i] val[%i]:  %i %f\n", length+1,  length+1, length+1, mlpi->c_b, mlpi->q_averaged[c]);
1529           glp_set_mat_row (mlp->prob, mlpi->r_q[c], length+1, ind, val);
1530         }
1531       else
1532         {
1533         /* Get the index if matrix row of quality */
1534         glp_set_mat_row (mlp->prob, mlpi->r_q[c], length, ind, val);
1535         }
1536
1537       GNUNET_free (ind);
1538       GNUNET_free (val);
1539     }
1540   }
1541 }
1542
1543 /**
1544  * Updates a single address in the MLP problem
1545  *
1546  * If the address did not exist before in the problem:
1547  * The MLP problem has to be recreated and the problem has to be resolved
1548  *
1549  * Otherwise the addresses' values can be updated and the existing base can
1550  * be reused
1551  *
1552  * @param mlp the MLP Handle
1553  * @param addresses the address hashmap
1554  *        the address has to be already removed from the hashmap
1555  * @param address the address to update
1556  */
1557 void
1558 GAS_mlp_address_update (struct GAS_MLP_Handle *mlp, struct GNUNET_CONTAINER_MultiHashMap * addresses, struct ATS_Address *address)
1559 {
1560   int new;
1561   struct MLP_information *mlpi;
1562   struct GAS_MLP_SolutionContext ctx;
1563
1564   GNUNET_STATISTICS_update (mlp->stats, "# MLP address updates", 1, GNUNET_NO);
1565
1566   /* We add a new address */
1567   if (address->mlp_information == NULL)
1568     new = GNUNET_YES;
1569   else
1570     new = GNUNET_NO;
1571
1572   /* Do the update */
1573   if (new == GNUNET_YES)
1574   {
1575     mlpi = GNUNET_malloc (sizeof (struct MLP_information));
1576
1577     int c;
1578     for (c = 0; c < GNUNET_ATS_QualityPropertiesCount; c++)
1579     {
1580       int c2;
1581       mlpi->r_q[c] = 0;
1582       for (c2 = 0; c2 < MLP_AVERAGING_QUEUE_LENGTH; c2++)
1583         mlpi->q[c][c2] = -1.0; /* -1.0: invalid value */
1584       mlpi->q_avg_i[c] = 0;
1585       mlpi->q_averaged[c] = 0.0;
1586     }
1587
1588     address->mlp_information = mlpi;
1589     mlp->addr_in_problem ++;
1590     GNUNET_STATISTICS_update (mlp->stats, "# addresses in MLP", 1, GNUNET_NO);
1591
1592     /* Check for and add peer */
1593     struct ATS_Peer *peer = mlp_find_peer (mlp, &address->peer);
1594     if (peer == NULL)
1595     {
1596
1597       GNUNET_log (GNUNET_ERROR_TYPE_DEBUG, "Adding new peer `%s'\n",
1598           GNUNET_i2s (&address->peer));
1599
1600       peer = GNUNET_malloc (sizeof (struct ATS_Peer));
1601       peer->head = NULL;
1602       peer->tail = NULL;
1603
1604       int c;
1605       for (c = 0; c < GNUNET_ATS_QualityPropertiesCount; c++)
1606       {
1607         peer->f_q[c] = 1.0;
1608       }
1609       peer->f = 1.0;
1610
1611       memcpy (&peer->id, &address->peer, sizeof (struct GNUNET_PeerIdentity));
1612       GNUNET_assert(address->prev == NULL);
1613       GNUNET_assert(address->next == NULL);
1614       GNUNET_CONTAINER_DLL_insert (peer->head, peer->tail, address);
1615       GNUNET_CONTAINER_DLL_insert (mlp->peer_head, mlp->peer_tail, peer);
1616       mlp->c_p ++;
1617       GNUNET_STATISTICS_update (mlp->stats, "# peers in MLP", 1, GNUNET_NO);
1618     }
1619     else
1620     {
1621
1622       GNUNET_log (GNUNET_ERROR_TYPE_DEBUG, "Adding address to peer `%s'\n",
1623           GNUNET_i2s (&address->peer));
1624
1625       GNUNET_CONTAINER_DLL_insert (peer->head, peer->tail, address);
1626     }
1627     update_quality (mlp, address);
1628   }
1629   else
1630   {
1631     GNUNET_log (GNUNET_ERROR_TYPE_DEBUG, "Updating existing address to peer `%s'\n",
1632         GNUNET_i2s (&address->peer));
1633
1634     update_quality (mlp, address);
1635   }
1636
1637   /* Recalculate */
1638   if (new == GNUNET_YES)
1639   {
1640     GNUNET_log (GNUNET_ERROR_TYPE_DEBUG, "Recreating problem: new address\n");
1641
1642     mlp_delete_problem (mlp);
1643     mlp_create_problem (mlp, addresses);
1644     mlp->presolver_required = GNUNET_YES;
1645   }
1646   if (mlp->auto_solve == GNUNET_YES)
1647     GAS_mlp_solve_problem (mlp, &ctx);
1648 }
1649
1650 /**
1651  * Deletes a single address in the MLP problem
1652  *
1653  * The MLP problem has to be recreated and the problem has to be resolved
1654  *
1655  * @param mlp the MLP Handle
1656  * @param addresses the address hashmap
1657  *        the address has to be already removed from the hashmap
1658  * @param address the address to delete
1659  */
1660 void
1661 GAS_mlp_address_delete (struct GAS_MLP_Handle *mlp, struct GNUNET_CONTAINER_MultiHashMap * addresses, struct ATS_Address *address)
1662 {
1663   GNUNET_STATISTICS_update (mlp->stats,"# LP address deletions", 1, GNUNET_NO);
1664   struct GAS_MLP_SolutionContext ctx;
1665
1666   /* Free resources */
1667   if (address->mlp_information != NULL)
1668   {
1669     GNUNET_free (address->mlp_information);
1670     address->mlp_information = NULL;
1671
1672     mlp->addr_in_problem --;
1673     GNUNET_STATISTICS_update (mlp->stats, "# addresses in MLP", -1, GNUNET_NO);
1674   }
1675
1676   /* Remove from peer list */
1677   struct ATS_Peer *head = mlp_find_peer (mlp, &address->peer);
1678   GNUNET_assert (head != NULL);
1679
1680   GNUNET_log (GNUNET_ERROR_TYPE_DEBUG, "Deleting address for `%s'\n", GNUNET_i2s (&address->peer));
1681
1682   GNUNET_CONTAINER_DLL_remove (head->head, head->tail, address);
1683   if ((head->head == NULL) && (head->tail == NULL))
1684   {
1685     /* No address for peer left, remove peer */
1686
1687     GNUNET_log (GNUNET_ERROR_TYPE_DEBUG, "Deleting peer `%s'\n", GNUNET_i2s (&address->peer));
1688
1689     GNUNET_CONTAINER_DLL_remove (mlp->peer_head, mlp->peer_tail, head);
1690     GNUNET_free (head);
1691     mlp->c_p --;
1692     GNUNET_STATISTICS_update (mlp->stats, "# peers in MLP", -1, GNUNET_NO);
1693   }
1694
1695   /* Update problem */
1696   GNUNET_log (GNUNET_ERROR_TYPE_DEBUG, "Recreating problem: new address\n");
1697
1698   mlp_delete_problem (mlp);
1699   if ((GNUNET_CONTAINER_multihashmap_size (addresses) > 0) && (mlp->c_p > 0))
1700   {
1701     mlp_create_problem (mlp, addresses);
1702
1703     /* Recalculate */
1704     mlp->presolver_required = GNUNET_YES;
1705     if (mlp->auto_solve == GNUNET_YES)
1706       GAS_mlp_solve_problem (mlp, &ctx);
1707   }
1708 }
1709
1710 static int
1711 mlp_get_preferred_address_it (void *cls, const GNUNET_HashCode * key, void *value)
1712 {
1713
1714   struct ATS_PreferedAddress *aa = (struct ATS_PreferedAddress *) cls;
1715   struct ATS_Address *addr = value;
1716   struct MLP_information *mlpi = addr->mlp_information;
1717   if (mlpi == NULL)
1718     return GNUNET_YES;
1719   if (mlpi->n == GNUNET_YES)
1720   {
1721     aa->address = addr;
1722     if (mlpi->b > (double) UINT32_MAX)
1723       aa->bandwidth_out = UINT32_MAX;
1724     else
1725       aa->bandwidth_out = (uint32_t) mlpi->b;
1726     aa->bandwidth_in = 0;
1727     return GNUNET_NO;
1728   }
1729   return GNUNET_YES;
1730 }
1731
1732
1733 /**
1734  * Get the preferred address for a specific peer
1735  *
1736  * @param mlp the MLP Handle
1737  * @param addresses address hashmap
1738  * @param peer the peer
1739  * @return suggested address
1740  */
1741 struct ATS_PreferedAddress *
1742 GAS_mlp_get_preferred_address (struct GAS_MLP_Handle *mlp,
1743                                struct GNUNET_CONTAINER_MultiHashMap * addresses,
1744                                const struct GNUNET_PeerIdentity *peer)
1745 {
1746   struct ATS_PreferedAddress * aa = GNUNET_malloc (sizeof (struct ATS_PreferedAddress));
1747   aa->address = NULL;
1748   aa->bandwidth_in = 0;
1749   aa->bandwidth_out = 0;
1750   GNUNET_log (GNUNET_ERROR_TYPE_DEBUG, "Getting preferred address for `%s'\n", GNUNET_i2s (peer));
1751   GNUNET_CONTAINER_multihashmap_get_multiple (addresses, &peer->hashPubKey, mlp_get_preferred_address_it, aa);
1752   return aa;
1753 }
1754
1755
1756 /**
1757  * Changes the preferences for a peer in the MLP problem
1758  *
1759  * @param mlp the MLP Handle
1760  * @param peer the peer
1761  * @param kind the kind to change the preference
1762  * @param score the score
1763  */
1764 void
1765 GAS_mlp_address_change_preference (struct GAS_MLP_Handle *mlp,
1766                                    const struct GNUNET_PeerIdentity *peer,
1767                                    enum GNUNET_ATS_PreferenceKind kind,
1768                                    float score)
1769 {
1770   GNUNET_STATISTICS_update (mlp->stats,"# LP address preference changes", 1, GNUNET_NO);
1771
1772   struct ATS_Peer *p = mlp_find_peer (mlp, peer);
1773   p = p;
1774   /* Here we have to do the matching */
1775 }
1776
1777 /**
1778  * Shutdown the MLP problem solving component
1779  * @param mlp the MLP handle
1780  */
1781 void
1782 GAS_mlp_done (struct GAS_MLP_Handle *mlp)
1783 {
1784   struct ATS_Peer * peer;
1785   struct ATS_Address *addr;
1786
1787   GNUNET_assert (mlp != NULL);
1788
1789   if (mlp->mlp_task != GNUNET_SCHEDULER_NO_TASK)
1790   {
1791     GNUNET_SCHEDULER_cancel(mlp->mlp_task);
1792     mlp->mlp_task = GNUNET_SCHEDULER_NO_TASK;
1793   }
1794
1795   /* clean up peer list */
1796   peer = mlp->peer_head;
1797   while (peer != NULL)
1798   {
1799     GNUNET_log (GNUNET_ERROR_TYPE_DEBUG, "Cleaning up peer `%s'\n", GNUNET_i2s (&peer->id));
1800     GNUNET_CONTAINER_DLL_remove(mlp->peer_head, mlp->peer_tail, peer);
1801     for (addr = peer->head; NULL != addr; addr = peer->head)
1802     {
1803       GNUNET_CONTAINER_DLL_remove(peer->head, peer->tail, addr);
1804       GNUNET_free (addr->mlp_information);
1805       addr->mlp_information = NULL;
1806     }
1807     GNUNET_free (peer);
1808     peer = mlp->peer_head;
1809   }
1810   mlp_delete_problem (mlp);
1811
1812   /* Clean up GLPK environment */
1813   glp_free_env();
1814
1815   GNUNET_free (mlp);
1816 }
1817
1818
1819 /* end of gnunet-service-ats_addresses_mlp.c */