libopkg/opkg.c

   1 /* opkg.c - the opkg  package management system
   2
   3    Thomas Wood <thomas@openedhand.com>
   4
   5    Copyright (C) 2008 OpenMoko Inc
   6
   7    This program is free software; you can redistribute it and/or
   8    modify it under the terms of the GNU General Public License as
   9    published by the Free Software Foundation; either version 2, or (at
  10    your option) any later version.
  11
  12    This program is distributed in the hope that it will be useful, but
  13    WITHOUT ANY WARRANTY; without even the implied warranty of
  14    MERCHANTABILITY or FITNESS FOR A PARTICULAR PURPOSE.  See the GNU
  15    General Public License for more details.
  16  */
  17
  18 #include <config.h>
  19 #include <fnmatch.h>
  20
  21 #include "opkg.h"
  22 #include "opkg_conf.h"
  23 #include "args.h"
  24
  25 #include "opkg_install.h"
  26 #include "opkg_configure.h"
  27 #include "opkg_download.h"
  28 #include "opkg_remove.h"
  29 #include "opkg_upgrade.h"
  30 #include "opkg_error.h"
  31
  32 #include "sprintf_alloc.h"
  33 #include "file_util.h"
  34
  35 #include <libbb/libbb.h>
  36
  37 struct _opkg_t
  38 {
  39   args_t *args;
  40   opkg_conf_t *conf;
  41   opkg_option_t *options;
  42 };
  43
  44 #define opkg_assert(expr) if (!(expr)) { \
  45     printf ("opkg: file %s: line %d (%s): Assertation '%s' failed",\
  46             __FILE__, __LINE__, __PRETTY_FUNCTION__, # expr); abort (); }
  47
  48 #define progress(d, p) d.percentage = p; if (progress_callback) progress_callback (opkg, &d, user_data);
  49 #define SSTRCMP(x,y) (x && y) ? strcmp (x, y) : 0
  50
  51 /** Private Functions ***/
  52
  53 static opkg_package_t*
  54 old_pkg_to_new (pkg_t *old)
  55 {
  56   opkg_package_t *new;
  57
  58   new = opkg_package_new ();
  59
  60 #define sstrdup(x) (x) ? strdup (x) : NULL;
  61
  62   new->name = sstrdup (old->name);
  63   new->version = pkg_version_str_alloc (old);
  64   new->architecture = sstrdup (old->architecture);
  65   if (old->src)
  66     new->repository = sstrdup (old->src->name);
  67   new->description = sstrdup (old->description);
  68   new->tags = sstrdup (old->tags);
  69   new->url = sstrdup (old->url);
  70
  71   new->size = (old->size) ? atoi (old->size) : 0;
  72   new->installed = (old->state_status == SS_INSTALLED);
  73
  74   return new;
  75 }
  76
  77 static int
  78 opkg_configure_packages(opkg_conf_t *conf, char *pkg_name)
  79 {
  80   pkg_vec_t *all;
  81   int i;
  82   pkg_t *pkg;
  83   int r, err = 0;
  84
  85   all = pkg_vec_alloc ();
  86   pkg_hash_fetch_available (&conf->pkg_hash, all);
  87
  88   for (i = 0; i < all->len; i++)
  89   {
  90     pkg = all->pkgs[i];
  91
  92     if (pkg_name && fnmatch (pkg_name, pkg->name, 0))
  93       continue;
  94
  95     if (pkg->state_status == SS_UNPACKED)
  96     {
  97       r = opkg_configure (conf, pkg);
  98       if (r == 0)
  99       {
 100         pkg->state_status = SS_INSTALLED;
 101         pkg->parent->state_status = SS_INSTALLED;
 102         pkg->state_flag &= ~SF_PREFER;
 103       }
 104       else
 105       {
 106         if (!err)
 107           err = r;
 108       }
 109     }
 110   }
 111
 112   pkg_vec_free (all);
 113   return err;
 114 }
 115
 116 struct _curl_cb_data
 117 {
 118   opkg_progress_callback_t cb;
 119   opkg_progress_data_t *progress_data;
 120   opkg_t *opkg;
 121   void *user_data;
 122   int start_range;
 123   int finish_range;
 124 };
 125
 126 int
 127 curl_progress_cb (struct _curl_cb_data *cb_data,
 128                   double t,   /* dltotal */
 129                   double d,   /* dlnow */
 130                   double ultotal,
 131                   double ulnow)
 132 {
 133   int p = (t) ? d * 100 / t : 0;
 134   static int prev = -1;
 135   int progress = 0;
 136
 137   /* prevent the same value being sent twice (can occur due to rounding) */
 138   if (p == prev)
 139     return 0;
 140   prev = p;
 141
 142   if (t < 1)
 143     return 0;
 144
 145   progress = cb_data->start_range + (d / t * ((cb_data->finish_range - cb_data->start_range)));
 146   cb_data->progress_data->percentage = progress;
 147
 148   (cb_data->cb)(cb_data->opkg,
 149                 cb_data->progress_data,
 150                 cb_data->user_data);
 151
 152   return 0;
 153 }
 154
 155
 156 /*** Public API ***/
 157
 158 opkg_package_t *
 159 opkg_package_new ()
 160 {
 161
 162   opkg_package_t *p;
 163
 164   p = malloc (sizeof (opkg_package_t));
 165   memset (p, 0, sizeof (opkg_package_t));
 166
 167   return p;
 168 }
 169
 170 void
 171 opkg_package_free (opkg_package_t *p)
 172 {
 173   free (p->name);
 174   free (p->version);
 175   free (p->architecture);
 176   free (p->description);
 177   free (p->tags);
 178   free (p->url);
 179   free (p->repository);
 180
 181   free (p);
 182 }
 183
 184 opkg_t *
 185 opkg_new ()
 186 {
 187   opkg_t *opkg;
 188   int err;
 189
 190   opkg = malloc (sizeof (opkg_t));
 191
 192   opkg->args = malloc (sizeof (args_t));
 193   err = args_init (opkg->args);
 194   if (err)
 195   {
 196     free (opkg->args);
 197     free (opkg);
 198     return NULL;
 199   }
 200
 201   opkg->conf = malloc (sizeof (opkg_conf_t));
 202   err = opkg_conf_init (opkg->conf, opkg->args);
 203   if (err)
 204   {
 205     free (opkg->conf);
 206     free (opkg->args);
 207     free (opkg);
 208     return NULL;
 209   }
 210
 211   opkg_init_options_array (opkg->conf, &opkg->options);
 212   return opkg;
 213 }
 214
 215 void
 216 opkg_free (opkg_t *opkg)
 217 {
 218   opkg_assert (opkg != NULL);
 219
 220   opkg_conf_deinit (opkg->conf);
 221   args_deinit (opkg->args);
 222   free (opkg->options);
 223   free (opkg->args);
 224   free (opkg->conf);
 225   free (opkg);
 226 }
 227
 228 int
 229 opkg_re_read_config_files (opkg_t *opkg)
 230 {
 231   args_t *a;
 232   opkg_conf_t *c;
 233
 234   opkg_assert (opkg != NULL);
 235
 236   a = opkg->args;
 237   c = opkg->conf;
 238
 239   /* Unfortunatly, the easiest way to re-read the config files right now is to
 240    * throw away opkg->conf and start again */
 241
 242   /* copy the settings we need to keep */
 243   a->autoremove = c->autoremove;
 244   a->force_depends = c->force_depends;
 245   a->force_defaults = c->force_defaults;
 246   a->force_overwrite = c->force_overwrite;
 247   a->force_downgrade = c->force_downgrade;
 248   a->force_reinstall = c->force_reinstall;
 249   a->force_removal_of_dependent_packages = c->force_removal_of_dependent_packages;
 250   a->force_removal_of_essential_packages = c->force_removal_of_essential_packages;
 251   a->nodeps = c->nodeps;
 252   a->noaction = c->noaction;
 253   a->query_all = c->query_all;
 254   a->verbosity = c->verbosity;
 255
 256   if (c->offline_root)
 257   {
 258     if (a->offline_root) free (a->offline_root);
 259     a->offline_root = strdup (c->offline_root);
 260   }
 261
 262   if (c->offline_root_pre_script_cmd)
 263   {
 264     if (a->offline_root_pre_script_cmd) free (a->offline_root_pre_script_cmd);
 265     a->offline_root_pre_script_cmd = strdup (c->offline_root_pre_script_cmd);
 266   }
 267
 268   if (c->offline_root_post_script_cmd)
 269   {
 270     if (a->offline_root_post_script_cmd) free (a->offline_root_post_script_cmd);
 271     a->offline_root_post_script_cmd = strdup (c->offline_root_post_script_cmd);
 272   }
 273
 274   /* throw away old opkg_conf and start again */
 275   opkg_conf_deinit (opkg->conf);
 276   opkg_conf_init (opkg->conf, opkg->args);
 277
 278   free (opkg->options);
 279   opkg_init_options_array (opkg->conf, &opkg->options);
 280
 281   return 0;
 282 }
 283
 284 void
 285 opkg_get_option (opkg_t *opkg, char *option, void **value)
 286 {
 287   int i = 0;
 288   opkg_option_t *options;
 289
 290   opkg_assert (opkg != NULL);
 291   opkg_assert (option != NULL);
 292   opkg_assert (value != NULL);
 293
 294   options = opkg->options;
 295
 296   /* look up the option
 297    * TODO: this would be much better as a hash table
 298    */
 299   while (options[i].name)
 300   {
 301     if (strcmp (options[i].name, option) != 0)
 302     {
 303       i++;
 304       continue;
 305     }
 306   }
 307
 308   /* get the option */
 309   switch (options[i].type)
 310   {
 311   case OPKG_OPT_TYPE_BOOL:
 312     *((int *) value) = *((int *) options[i].value);
 313     return;
 314
 315   case OPKG_OPT_TYPE_INT:
 316     *((int *) value) = *((int *) options[i].value);
 317     return;
 318
 319   case OPKG_OPT_TYPE_STRING:
 320     *((char **)value) = strdup (options[i].value);
 321     return;
 322   }
 323
 324 }
 325
 326 void
 327 opkg_set_option (opkg_t *opkg, char *option, void *value)
 328 {
 329   int i = 0, found = 0;
 330   opkg_option_t *options;
 331
 332   opkg_assert (opkg != NULL);
 333   opkg_assert (option != NULL);
 334   opkg_assert (value != NULL);
 335
 336   options = opkg->options;
 337
 338   /* look up the option
 339    * TODO: this would be much better as a hash table
 340    */
 341   while (options[i].name)
 342   {
 343     if (strcmp (options[i].name, option) == 0)
 344     {
 345       found = 1;
 346       break;
 347     }
 348     i++;
 349   }
 350
 351   if (!found)
 352   {
 353     /* XXX: Warning: Option not found */
 354     return;
 355   }
 356
 357   /* set the option */
 358   switch (options[i].type)
 359   {
 360   case OPKG_OPT_TYPE_BOOL:
 361     if (*((int *) value) == 0)
 362       *((int *)options[i].value) = 0;
 363     else
 364       *((int *)options[i].value) = 1;
 365     return;
 366
 367   case OPKG_OPT_TYPE_INT:
 368     *((int *) options[i].value) = *((int *) value);
 369     return;
 370
 371   case OPKG_OPT_TYPE_STRING:
 372     *((char **)options[i].value) = strdup (value);
 373     return;
 374   }
 375
 376 }
 377
 378 int
 379 opkg_install_package (opkg_t *opkg, const char *package_name, opkg_progress_callback_t progress_callback, void *user_data)
 380 {
 381   int err;
 382   char *stripped_filename;
 383   opkg_progress_data_t pdata;
 384   pkg_t *old, *new;
 385   pkg_vec_t *deps, *all;
 386   int i, ndepends;
 387   char **unresolved = NULL;
 388
 389   opkg_assert (opkg != NULL);
 390   opkg_assert (package_name != NULL);
 391
 392   /* ... */
 393   pkg_info_preinstall_check (opkg->conf);
 394
 395
 396   /* check to ensure package is not already installed */
 397   old = pkg_hash_fetch_installed_by_name(&opkg->conf->pkg_hash, package_name);
 398   if (old)
 399   {
 400     /* XXX: Error: Package is already installed. */
 401     return OPKG_PACKAGE_ALREADY_INSTALLED;
 402   }
 403
 404   new = pkg_hash_fetch_best_installation_candidate_by_name(opkg->conf, package_name, NULL);
 405   if (!new)
 406   {
 407     /* XXX: Error: Could not find package to install */
 408     return OPKG_PACKAGE_NOT_FOUND;
 409   }
 410
 411   new->state_flag |= SF_USER;
 412
 413   pdata.action = OPKG_INSTALL;
 414   pdata.package = old_pkg_to_new (new);
 415
 416   progress (pdata, 0);
 417
 418   /* find dependancies and download them */
 419   deps = pkg_vec_alloc ();
 420   /* this function does not return the original package, so we insert it later */
 421   ndepends = pkg_hash_fetch_unsatisfied_dependencies (opkg->conf, new, deps, &unresolved);
 422   if (unresolved)
 423   {
 424     /* XXX: Error: Could not satisfy dependencies */
 425     pkg_vec_free (deps);
 426     return OPKG_DEPENDENCIES_FAILED;
 427   }
 428
 429   /* insert the package we are installing so that we download it */
 430   pkg_vec_insert (deps, new);
 431
 432   /* download package and dependancies */
 433   for (i = 0; i < deps->len; i++)
 434   {
 435     pkg_t *pkg;
 436     struct _curl_cb_data cb_data;
 437     char *url;
 438
 439     pkg = deps->pkgs[i];
 440     if (pkg->local_filename)
 441       continue;
 442
 443     opkg_package_free (pdata.package);
 444     pdata.package = old_pkg_to_new (pkg);
 445     pdata.action = OPKG_DOWNLOAD;
 446
 447     if (pkg->src == NULL)
 448     {
 449       /* XXX: Error: Package not available from any configured src */
 450       return OPKG_PACKAGE_NOT_AVAILABLE;
 451     }
 452
 453     sprintf_alloc(&url, "%s/%s", pkg->src->value, pkg->filename);
 454
 455     /* Get the filename part, without any directory */
 456     stripped_filename = strrchr(pkg->filename, '/');
 457     if ( ! stripped_filename )
 458         stripped_filename = pkg->filename;
 459
 460     sprintf_alloc(&pkg->local_filename, "%s/%s", opkg->conf->tmp_dir, stripped_filename);
 461
 462     cb_data.cb = progress_callback;
 463     cb_data.progress_data = &pdata;
 464     cb_data.opkg = opkg;
 465     cb_data.user_data = user_data;
 466     /* 75% of "install" progress is for downloading */
 467     cb_data.start_range = 75 * i / deps->len;
 468     cb_data.finish_range = 75 * (i + 1) / deps->len;
 469
 470     err = opkg_download(opkg->conf, url, pkg->local_filename,
 471               (curl_progress_func) curl_progress_cb, &cb_data);
 472     free(url);
 473
 474     if (err)
 475     {
 476       pkg_vec_free (deps);
 477       opkg_package_free (pdata.package);
 478       return OPKG_DOWNLOAD_FAILED;
 479     }
 480
 481   }
 482   pkg_vec_free (deps);
 483
 484   /* clear depenacy checked marks, left by pkg_hash_fetch_unsatisfied_dependencies */
 485   all = pkg_vec_alloc ();
 486   pkg_hash_fetch_available (&opkg->conf->pkg_hash, all);
 487   for (i = 0; i < all->len; i++)
 488   {
 489     all->pkgs[i]->parent->dependencies_checked = 0;
 490   }
 491   pkg_vec_free (all);
 492
 493
 494   /* 75% of "install" progress is for downloading */
 495   opkg_package_free (pdata.package);
 496   pdata.package = old_pkg_to_new (new);
 497   pdata.action = OPKG_INSTALL;
 498   progress (pdata, 75);
 499
 500   /* unpack the package */
 501   err = opkg_install_pkg(opkg->conf, new, 0);
 502
 503   if (err)
 504   {
 505     opkg_package_free (pdata.package);
 506     switch (err)
 507     {
 508       case OPKG_INSTALL_ERR_NOT_TRUSTED: return OPKG_GPG_ERROR;
 509       case OPKG_INSTALL_ERR_DOWNLOAD: return OPKG_DOWNLOAD_FAILED;
 510       case OPKG_INSTALL_ERR_DEPENDENCIES:
 511       case OPKG_INSTALL_ERR_CONFLICTS: return OPKG_DEPENDENCIES_FAILED;
 512       case OPKG_INSTALL_ERR_ALREADY_INSTALLED: return OPKG_PACKAGE_ALREADY_INSTALLED;
 513       case OPKG_INSTALL_ERR_SIGNATURE: return OPKG_GPG_ERROR;
 514       case OPKG_INSTALL_ERR_MD5: return OPKG_MD5_ERROR;
 515       default: return OPKG_UNKNOWN_ERROR;
 516     }
 517   }
 518
 519   progress (pdata, 75);
 520
 521   /* run configure scripts, etc. */
 522   err = opkg_configure_packages (opkg->conf, NULL);
 523   if (err)
 524   {
 525     opkg_package_free (pdata.package);
 526     return OPKG_UNKNOWN_ERROR;
 527   }
 528
 529   /* write out status files and file lists */
 530   opkg_conf_write_status_files (opkg->conf);
 531   pkg_write_changed_filelists (opkg->conf);
 532
 533   progress (pdata, 100);
 534   opkg_package_free (pdata.package);
 535   return 0;
 536 }
 537
 538 int
 539 opkg_remove_package (opkg_t *opkg, const char *package_name, opkg_progress_callback_t progress_callback, void *user_data)
 540 {
 541   int err;
 542   pkg_t *pkg = NULL;
 543   pkg_t *pkg_to_remove;
 544   opkg_progress_data_t pdata;
 545
 546   opkg_assert (opkg != NULL);
 547   opkg_assert (package_name != NULL);
 548
 549   pkg_info_preinstall_check (opkg->conf);
 550
 551   pkg = pkg_hash_fetch_installed_by_name (&opkg->conf->pkg_hash, package_name);
 552
 553   if (pkg == NULL)
 554   {
 555     /* XXX: Error: Package not installed. */
 556     return OPKG_PACKAGE_NOT_INSTALLED;
 557   }
 558
 559   pdata.action = OPKG_REMOVE;
 560   pdata.package = old_pkg_to_new (pkg);
 561   progress (pdata, 0);
 562
 563
 564   if (pkg->state_status == SS_NOT_INSTALLED)
 565   {
 566     /* XXX:  Error: Package seems to be not installed (STATUS = NOT_INSTALLED). */
 567     return OPKG_PACKAGE_NOT_INSTALLED;
 568   }
 569   progress (pdata, 25);
 570
 571   if (opkg->conf->restrict_to_default_dest)
 572   {
 573     pkg_to_remove = pkg_hash_fetch_installed_by_name_dest (&opkg->conf->pkg_hash,
 574                                                            pkg->name,
 575                                                            opkg->conf->default_dest);
 576   }
 577   else
 578   {
 579     pkg_to_remove = pkg_hash_fetch_installed_by_name (&opkg->conf->pkg_hash, pkg->name );
 580   }
 581
 582
 583   progress (pdata, 75);
 584
 585   err = opkg_remove_pkg (opkg->conf, pkg_to_remove, 0);
 586
 587   /* write out status files and file lists */
 588   opkg_conf_write_status_files (opkg->conf);
 589   pkg_write_changed_filelists (opkg->conf);
 590
 591
 592   progress (pdata, 100);
 593   opkg_package_free (pdata.package);
 594   return (err) ? OPKG_UNKNOWN_ERROR : OPKG_NO_ERROR;
 595 }
 596
 597 int
 598 opkg_upgrade_package (opkg_t *opkg, const char *package_name, opkg_progress_callback_t progress_callback, void *user_data)
 599 {
 600   int err;
 601   pkg_t *pkg;
 602   opkg_progress_data_t pdata;
 603
 604
 605
 606   opkg_assert (opkg != NULL);
 607   opkg_assert (package_name != NULL);
 608
 609   pkg_info_preinstall_check (opkg->conf);
 610
 611   if (opkg->conf->restrict_to_default_dest)
 612   {
 613     pkg = pkg_hash_fetch_installed_by_name_dest (&opkg->conf->pkg_hash,
 614                                                  package_name,
 615                                                  opkg->conf->default_dest);
 616     if (pkg == NULL)
 617     {
 618       /* XXX: Error: Package not installed in default_dest */
 619       return OPKG_PACKAGE_NOT_INSTALLED;
 620     }
 621   }
 622   else
 623   {
 624     pkg = pkg_hash_fetch_installed_by_name (&opkg->conf->pkg_hash,
 625                                             package_name);
 626   }
 627
 628   if (!pkg)
 629   {
 630     /* XXX: Error: Package not installed */
 631     return OPKG_PACKAGE_NOT_INSTALLED;
 632   }
 633
 634   pdata.action = OPKG_INSTALL;
 635   pdata.package = old_pkg_to_new (pkg);
 636   progress (pdata, 0);
 637
 638   err = opkg_upgrade_pkg (opkg->conf, pkg);
 639   /* opkg_upgrade_pkg returns the error codes of opkg_install_pkg */
 640   if (err)
 641   {
 642     switch (err)
 643     {
 644       case OPKG_INSTALL_ERR_NOT_TRUSTED: return OPKG_GPG_ERROR;
 645       case OPKG_INSTALL_ERR_DOWNLOAD: return OPKG_DOWNLOAD_FAILED;
 646       case OPKG_INSTALL_ERR_DEPENDENCIES:
 647       case OPKG_INSTALL_ERR_CONFLICTS: return OPKG_DEPENDENCIES_FAILED;
 648       case OPKG_INSTALL_ERR_ALREADY_INSTALLED: return OPKG_PACKAGE_ALREADY_INSTALLED;
 649       case OPKG_INSTALL_ERR_SIGNATURE: return OPKG_GPG_ERROR;
 650       case OPKG_INSTALL_ERR_MD5: return OPKG_MD5_ERROR;
 651       default: return OPKG_UNKNOWN_ERROR;
 652     }
 653   }
 654   progress (pdata, 75);
 655
 656   err = opkg_configure_packages (opkg->conf, NULL);
 657   if (err)
 658     return OPKG_UNKNOWN_ERROR;
 659
 660   /* write out status files and file lists */
 661   opkg_conf_write_status_files (opkg->conf);
 662   pkg_write_changed_filelists (opkg->conf);
 663
 664   progress (pdata, 100);
 665   opkg_package_free (pdata.package);
 666   return 0;
 667 }
 668
 669 int
 670 opkg_upgrade_all (opkg_t *opkg, opkg_progress_callback_t progress_callback, void *user_data)
 671 {
 672   pkg_vec_t *installed;
 673   int err = 0;
 674   int i;
 675   pkg_t *pkg;
 676   opkg_progress_data_t pdata;
 677
 678   pdata.action = OPKG_INSTALL;
 679   pdata.package = NULL;
 680
 681   opkg_assert (opkg != NULL);
 682   progress (pdata, 0);
 683
 684   installed = pkg_vec_alloc ();
 685   pkg_info_preinstall_check (opkg->conf);
 686
 687   pkg_hash_fetch_all_installed (&opkg->conf->pkg_hash, installed);
 688   for (i = 0; i < installed->len; i++)
 689   {
 690     pkg = installed->pkgs[i];
 691
 692     pdata.package = old_pkg_to_new (pkg);
 693     progress (pdata, 99 * i / installed->len);
 694     opkg_package_free (pdata.package);
 695
 696     err += opkg_upgrade_pkg (opkg->conf, pkg);
 697   }
 698   pkg_vec_free (installed);
 699
 700   if (err)
 701     return 1;
 702
 703   err = opkg_configure_packages (opkg->conf, NULL);
 704   if (err)
 705     return 1;
 706
 707   pdata.package = NULL;
 708   progress (pdata, 100);
 709   return 0;
 710 }
 711
 712 int
 713 opkg_update_package_lists (opkg_t *opkg, opkg_progress_callback_t progress_callback, void *user_data)
 714 {
 715   char *tmp;
 716   int err, result = 0;
 717   char *lists_dir;
 718   pkg_src_list_elt_t *iter;
 719   pkg_src_t *src;
 720   int sources_list_count, sources_done;
 721   opkg_progress_data_t pdata;
 722
 723   opkg_assert (opkg != NULL);
 724
 725   pdata.action = OPKG_DOWNLOAD;
 726   pdata.package = NULL;
 727   progress (pdata, 0);
 728
 729   sprintf_alloc (&lists_dir, "%s",
 730                  (opkg->conf->restrict_to_default_dest)
 731                  ? opkg->conf->default_dest->lists_dir
 732                  : opkg->conf->lists_dir);
 733
 734   if (!file_is_dir (lists_dir))
 735   {
 736     if (file_exists (lists_dir))
 737     {
 738       /* XXX: Error: file exists but is not a directory */
 739       free (lists_dir);
 740       return 1;
 741     }
 742
 743     err = file_mkdir_hier (lists_dir, 0755);
 744     if (err)
 745     {
 746       /* XXX: Error: failed to create directory */
 747       free (lists_dir);
 748       return 1;
 749     }
 750   }
 751
 752   tmp = strdup ("/tmp/opkg.XXXXXX");
 753
 754   if (mkdtemp (tmp) == NULL)
 755   {
 756     /* XXX: Error: could not create temporary file name */
 757     free (lists_dir);
 758     free (tmp);
 759     return 1;
 760   }
 761
 762   /* count the number of sources so we can give some progress updates */
 763   sources_list_count = 0;
 764   sources_done = 0;
 765   iter = opkg->conf->pkg_src_list.head;
 766   while (iter)
 767   {
 768     sources_list_count++;
 769     iter = iter->next;
 770   }
 771
 772   for (iter = opkg->conf->pkg_src_list.head; iter; iter = iter->next)
 773   {
 774     char *url, *list_file_name = NULL;
 775
 776     src = iter->data;
 777
 778     if (src->extra_data)  /* debian style? */
 779       sprintf_alloc (&url, "%s/%s/%s", src->value, src->extra_data,
 780                      src->gzip ? "Packages.gz" : "Packages");
 781     else
 782       sprintf_alloc (&url, "%s/%s", src->value, src->gzip ? "Packages.gz" : "Packages");
 783
 784     sprintf_alloc (&list_file_name, "%s/%s", lists_dir, src->name);
 785     if (src->gzip)
 786     {
 787       FILE *in, *out;
 788       struct _curl_cb_data cb_data;
 789       char *tmp_file_name = NULL;
 790
 791       sprintf_alloc (&tmp_file_name, "%s/%s.gz", tmp, src->name);
 792
 793       /* XXX: Note: downloading url */
 794
 795       cb_data.cb = progress_callback;
 796       cb_data.progress_data = &pdata;
 797       cb_data.opkg = opkg;
 798       cb_data.user_data = user_data;
 799       cb_data.start_range = 100 * sources_done / sources_list_count;
 800       cb_data.finish_range = 100 * (sources_done + 1) / sources_list_count;
 801
 802       err = opkg_download (opkg->conf, url, tmp_file_name, (curl_progress_func) curl_progress_cb, &cb_data);
 803
 804       if (err == 0)
 805       {
 806         /* XXX: Note: Inflating downloaded file */
 807         in = fopen (tmp_file_name, "r");
 808         out = fopen (list_file_name, "w");
 809         if (in && out)
 810           unzip (in, out);
 811         else
 812           err = 1;
 813         if (in)
 814           fclose (in);
 815         if (out)
 816           fclose (out);
 817         unlink (tmp_file_name);
 818       }
 819       free (tmp_file_name);
 820     }
 821     else
 822       err = opkg_download (opkg->conf, url, list_file_name, NULL, NULL);
 823
 824     if (err)
 825     {
 826       /* XXX: Error: download error */
 827       result = OPKG_DOWNLOAD_FAILED;
 828     }
 829     free (url);
 830
 831 #ifdef HAVE_GPGME
 832     char *sig_file_name;
 833     /* download detached signitures to verify the package lists */
 834     /* get the url for the sig file */
 835     if (src->extra_data)  /* debian style? */
 836       sprintf_alloc (&url, "%s/%s/%s", src->value, src->extra_data,
 837                      "Packages.sig");
 838     else
 839       sprintf_alloc (&url, "%s/%s", src->value, "Packages.sig");
 840
 841     /* create filename for signature */
 842     sprintf_alloc (&sig_file_name, "%s/%s.sig", lists_dir, src->name);
 843
 844     /* make sure there is no existing signature file */
 845     unlink (sig_file_name);
 846
 847     err = opkg_download (opkg->conf, url, sig_file_name, NULL, NULL);
 848     if (err)
 849     {
 850       /* XXX: Warning: Download failed */
 851     }
 852     else
 853     {
 854       int err;
 855       err = opkg_verify_file (opkg->conf, list_file_name, sig_file_name);
 856       if (err == 0)
 857       {
 858         /* XXX: Notice: Signature check passed */
 859       }
 860       else
 861       {
 862         /* XXX: Warning: Signature check failed */
 863       }
 864     }
 865     free (sig_file_name);
 866     free (list_file_name);
 867     free (url);
 868 #else
 869     /* XXX: Note: Signiture check for %s skipped because GPG support was not
 870      * enabled in this build
 871      */
 872 #endif
 873
 874     sources_done++;
 875     progress (pdata, 100 * sources_done / sources_list_count);
 876   }
 877
 878   rmdir (tmp);
 879   free (tmp);
 880   free (lists_dir);
 881
 882   /* Now re-read the package lists to update package hash tables. */
 883   opkg_re_read_config_files (opkg);
 884
 885   return result;
 886 }
 887
 888
 889 int
 890 opkg_list_packages (opkg_t *opkg, opkg_package_callback_t callback, void *user_data)
 891 {
 892   pkg_vec_t *all;
 893   int i;
 894
 895   opkg_assert (opkg);
 896   opkg_assert (callback);
 897
 898   all = pkg_vec_alloc ();
 899   pkg_hash_fetch_available (&opkg->conf->pkg_hash, all);
 900   for (i = 0; i < all->len; i++)
 901   {
 902     pkg_t *pkg;
 903     opkg_package_t *package;
 904
 905     pkg = all->pkgs[i];
 906
 907     package = old_pkg_to_new (pkg);
 908     callback (opkg, package, user_data);
 909   }
 910
 911   pkg_vec_free (all);
 912
 913   return 0;
 914 }
 915
 916 int
 917 opkg_list_upgradable_packages (opkg_t *opkg, opkg_package_callback_t callback, void *user_data)
 918 {
 919   pkg_vec_t *all;
 920   int i;
 921
 922   opkg_assert (opkg);
 923   opkg_assert (callback);
 924
 925   /* ensure all data is valid */
 926   pkg_info_preinstall_check (opkg->conf);
 927
 928   all = pkg_vec_alloc ();
 929   pkg_hash_fetch_available (&opkg->conf->pkg_hash, all);
 930   for (i = 0; i < all->len; i++)
 931   {
 932     pkg_t *old, *new;
 933     int cmp;
 934     opkg_package_t *package;
 935
 936     old = all->pkgs[i];
 937
 938     if (old->state_status != SS_INSTALLED)
 939       continue;
 940
 941     new = pkg_hash_fetch_best_installation_candidate_by_name(opkg->conf, old->name, NULL);
 942     if (new == NULL) {
 943       /* XXX: Notice: Assuming locally install package is up to date */
 944       continue;
 945     }
 946
 947     cmp = pkg_compare_versions(old, new);
 948
 949     if (cmp < 0)
 950     {
 951       package = old_pkg_to_new (new);
 952       callback (opkg, package, user_data);
 953     }
 954   }
 955
 956   pkg_vec_free (all);
 957
 958   return 0;
 959 }
 960
 961 opkg_package_t*
 962 opkg_find_package (opkg_t *opkg, const char *name, const char *ver, const char *arch, const char *repo)
 963 {
 964   pkg_vec_t *all;
 965   opkg_package_t *package = NULL;
 966   int i;
 967 #define sstrcmp(x,y) (x && y) ? strcmp (x, y) : 0
 968
 969   opkg_assert (opkg);
 970
 971   all = pkg_vec_alloc ();
 972   pkg_hash_fetch_available (&opkg->conf->pkg_hash, all);
 973   for (i = 0; i < all->len; i++)
 974   {
 975     pkg_t *pkg;
 976     char *pkgv;
 977
 978     pkg = all->pkgs[i];
 979
 980     /* check name */
 981     if (sstrcmp (pkg->name, name))
 982       continue;
 983
 984     /* check version */
 985     pkgv = pkg_version_str_alloc (pkg);
 986     if (sstrcmp (pkgv, ver))
 987     {
 988       free (pkgv);
 989       continue;
 990     }
 991     free (pkgv);
 992
 993     /* check architecture */
 994     if (arch)
 995     {
 996       if (sstrcmp (pkg->architecture, arch))
 997         continue;
 998     }
 999
1000     /* check repository */
1001     if (repo)
1002     {
1003       if (sstrcmp (pkg->src->name, repo))
1004           continue;
1005     }
1006
1007     /* match found */
1008     package = old_pkg_to_new (pkg);
1009     break;
1010   }
1011
1012   pkg_vec_free (all);
1013
1014   return package;
1015 }
1016
1017 #include <curl/curl.h>
1018 /**
1019  * @brief Check the accessibility of repositories. It will try to access the repository to check if the respository is accessible throught current network status.
1020  * @param opkg The opkg_t
1021  * @return return how many repositories cannot access. 0 means all okay.
1022  */
1023 int opkg_repository_accessibility_check(opkg_t *opkg)
1024 {
1025   pkg_src_list_elt_t *iter;
1026   str_list_elt_t *iter1;
1027   str_list_t *src;
1028   int repositories=0;
1029   int ret=0;
1030   int err;
1031   char *repo_ptr;
1032   char *stmp;
1033   opkg_assert(opkg != NULL);
1034
1035   src = str_list_alloc();
1036
1037   for (iter = opkg->conf->pkg_src_list.head; iter; iter = iter->next)
1038   {
1039     if (strstr(iter->data->value, "://") &&
1040                     index(strstr(iter->data->value, "://") + 3, '/'))
1041       stmp = strndup(iter->data->value,
1042                       (index(strstr(iter->data->value, "://") + 3, '/') - iter->data->value)*sizeof(char));
1043
1044     else
1045       stmp = strdup(iter->data->value);
1046
1047     for (iter1 = src->head; iter1; iter1 = iter1->next)
1048     {
1049       if (strstr(iter1->data, stmp))
1050         break;
1051     }
1052     if (iter1)
1053       continue;
1054
1055     sprintf_alloc(&repo_ptr, "%s/index.html",stmp);
1056     free(stmp);
1057
1058     str_list_append(src, repo_ptr);
1059     repositories++;
1060   }
1061   while (repositories > 0)
1062   {
1063     iter1 = str_list_pop(src);
1064     repositories--;
1065
1066     err = opkg_download(opkg->conf, iter1->data, "/dev/null", NULL, NULL);
1067     if (!(err == CURLE_OK ||
1068                 err == CURLE_HTTP_RETURNED_ERROR ||
1069                 err == CURLE_FILE_COULDNT_READ_FILE ||
1070                 err == CURLE_REMOTE_FILE_NOT_FOUND ||
1071                 err == CURLE_TFTP_NOTFOUND
1072                 )) {
1073             ret++;
1074     }
1075     str_list_elt_deinit(iter1);
1076     free(iter1);
1077   }
1078   free(src);
1079   return ret;
1080 }