opkg: Consolidate error reporting from opkg_conf_init and ensure return value is
[oweals/opkg-lede.git] / libopkg / opkg.c
1 /* opkg.c - the opkg  package management system
2
3    Thomas Wood <thomas@openedhand.com>
4
5    Copyright (C) 2008 OpenMoko Inc
6
7    This program is free software; you can redistribute it and/or
8    modify it under the terms of the GNU General Public License as
9    published by the Free Software Foundation; either version 2, or (at
10    your option) any later version.
11
12    This program is distributed in the hope that it will be useful, but
13    WITHOUT ANY WARRANTY; without even the implied warranty of
14    MERCHANTABILITY or FITNESS FOR A PARTICULAR PURPOSE.  See the GNU
15    General Public License for more details.
16  */
17
18 #include <config.h>
19 #include <fnmatch.h>
20
21 #include "opkg.h"
22 #include "opkg_conf.h"
23 #include "args.h"
24
25 #include "opkg_install.h"
26 #include "opkg_configure.h"
27 #include "opkg_download.h"
28 #include "opkg_remove.h"
29 #include "opkg_upgrade.h"
30 #include "opkg_error.h"
31
32 #include "sprintf_alloc.h"
33 #include "file_util.h"
34
35 #include <libbb/libbb.h>
36
37 struct _opkg_t
38 {
39   args_t *args;
40   opkg_conf_t *conf;
41   opkg_option_t *options;
42 };
43
44 #define opkg_assert(expr) if (!(expr)) { \
45     printf ("opkg: file %s: line %d (%s): Assertation '%s' failed",\
46             __FILE__, __LINE__, __PRETTY_FUNCTION__, # expr); abort (); }
47
48 #define progress(d, p) d.percentage = p; if (progress_callback) progress_callback (opkg, &d, user_data);
49 #define SSTRCMP(x,y) (x && y) ? strcmp (x, y) : 0
50
51 /** Private Functions ***/
52
53 static opkg_package_t*
54 old_pkg_to_new (pkg_t *old)
55 {
56   opkg_package_t *new;
57
58   new = opkg_package_new ();
59
60 #define sstrdup(x) (x) ? strdup (x) : NULL;
61
62   new->name = sstrdup (old->name);
63   new->version = pkg_version_str_alloc (old);
64   new->architecture = sstrdup (old->architecture);
65   if (old->src)
66     new->repository = sstrdup (old->src->name);
67   new->description = sstrdup (old->description);
68   new->tags = sstrdup (old->tags);
69   new->url = sstrdup (old->url);
70
71   new->size = (old->size) ? atoi (old->size) : 0;
72   new->installed = (old->state_status == SS_INSTALLED);
73
74   return new;
75 }
76
77 static int
78 opkg_configure_packages(opkg_conf_t *conf, char *pkg_name)
79 {
80   pkg_vec_t *all;
81   int i;
82   pkg_t *pkg;
83   int r, err = 0;
84
85   all = pkg_vec_alloc ();
86   pkg_hash_fetch_available (&conf->pkg_hash, all);
87
88   for (i = 0; i < all->len; i++)
89   {
90     pkg = all->pkgs[i];
91
92     if (pkg_name && fnmatch (pkg_name, pkg->name, 0))
93       continue;
94
95     if (pkg->state_status == SS_UNPACKED)
96     {
97       r = opkg_configure (conf, pkg);
98       if (r == 0)
99       {
100         pkg->state_status = SS_INSTALLED;
101         pkg->parent->state_status = SS_INSTALLED;
102         pkg->state_flag &= ~SF_PREFER;
103       }
104       else
105       {
106         if (!err)
107           err = r;
108       }
109     }
110   }
111
112   pkg_vec_free (all);
113   return err;
114 }
115
116 struct _curl_cb_data
117 {
118   opkg_progress_callback_t cb;
119   opkg_progress_data_t *progress_data;
120   opkg_t *opkg;
121   void *user_data;
122   int start_range;
123   int finish_range;
124 };
125
126 int
127 curl_progress_cb (struct _curl_cb_data *cb_data,
128                   double t,   /* dltotal */
129                   double d,   /* dlnow */
130                   double ultotal,
131                   double ulnow)
132 {
133   int p = (t) ? d * 100 / t : 0;
134   static int prev = -1;
135   int progress = 0;
136
137   /* prevent the same value being sent twice (can occur due to rounding) */
138   if (p == prev)
139     return 0;
140   prev = p;
141
142   if (t < 1)
143     return 0;
144
145   progress = cb_data->start_range + (d / t * ((cb_data->finish_range - cb_data->start_range)));
146   cb_data->progress_data->percentage = progress;
147
148   (cb_data->cb)(cb_data->opkg,
149                 cb_data->progress_data,
150                 cb_data->user_data);
151
152   return 0;
153 }
154
155
156 /*** Public API ***/
157
158 opkg_package_t *
159 opkg_package_new ()
160 {
161
162   opkg_package_t *p;
163
164   p = malloc (sizeof (opkg_package_t));
165   memset (p, 0, sizeof (opkg_package_t));
166
167   return p;
168 }
169
170 void
171 opkg_package_free (opkg_package_t *p)
172 {
173   free (p->name);
174   free (p->version);
175   free (p->architecture);
176   free (p->description);
177   free (p->tags);
178   free (p->url);
179   free (p->repository);
180
181   free (p);
182 }
183
184 opkg_t *
185 opkg_new ()
186 {
187   opkg_t *opkg;
188   int err;
189
190   opkg = malloc (sizeof (opkg_t));
191
192   opkg->args = malloc (sizeof (args_t));
193   err = args_init (opkg->args);
194   if (err)
195   {
196     free (opkg->args);
197     free (opkg);
198     return NULL;
199   }
200
201   opkg->conf = malloc (sizeof (opkg_conf_t));
202   err = opkg_conf_init (opkg->conf, opkg->args);
203   if (err)
204   {
205     free (opkg->conf);
206     free (opkg->args);
207     free (opkg);
208     return NULL;
209   }
210
211   opkg_init_options_array (opkg->conf, &opkg->options);
212   return opkg;
213 }
214
215 void
216 opkg_free (opkg_t *opkg)
217 {
218   opkg_assert (opkg != NULL);
219
220   opkg_conf_deinit (opkg->conf);
221   args_deinit (opkg->args);
222   free (opkg->options);
223   free (opkg->args);
224   free (opkg->conf);
225   free (opkg);
226 }
227
228 int
229 opkg_re_read_config_files (opkg_t *opkg)
230 {
231   args_t *a;
232   opkg_conf_t *c;
233
234   opkg_assert (opkg != NULL);
235
236   a = opkg->args;
237   c = opkg->conf;
238
239   /* Unfortunatly, the easiest way to re-read the config files right now is to
240    * throw away opkg->conf and start again */
241
242   /* copy the settings we need to keep */
243   a->autoremove = c->autoremove;
244   a->force_depends = c->force_depends;
245   a->force_defaults = c->force_defaults;
246   a->force_overwrite = c->force_overwrite;
247   a->force_downgrade = c->force_downgrade;
248   a->force_reinstall = c->force_reinstall;
249   a->force_removal_of_dependent_packages = c->force_removal_of_dependent_packages;
250   a->force_removal_of_essential_packages = c->force_removal_of_essential_packages;
251   a->nodeps = c->nodeps;
252   a->noaction = c->noaction;
253   a->query_all = c->query_all;
254   a->verbosity = c->verbosity;
255
256   if (c->offline_root)
257   {
258     if (a->offline_root) free (a->offline_root);
259     a->offline_root = strdup (c->offline_root);
260   }
261
262   if (c->offline_root_pre_script_cmd)
263   {
264     if (a->offline_root_pre_script_cmd) free (a->offline_root_pre_script_cmd);
265     a->offline_root_pre_script_cmd = strdup (c->offline_root_pre_script_cmd);
266   }
267
268   if (c->offline_root_post_script_cmd)
269   {
270     if (a->offline_root_post_script_cmd) free (a->offline_root_post_script_cmd);
271     a->offline_root_post_script_cmd = strdup (c->offline_root_post_script_cmd);
272   }
273
274   /* throw away old opkg_conf and start again */
275   opkg_conf_deinit (opkg->conf);
276   opkg_conf_init (opkg->conf, opkg->args);
277
278   free (opkg->options);
279   opkg_init_options_array (opkg->conf, &opkg->options);
280
281   return 0;
282 }
283
284 void
285 opkg_get_option (opkg_t *opkg, char *option, void **value)
286 {
287   int i = 0;
288   opkg_option_t *options;
289
290   opkg_assert (opkg != NULL);
291   opkg_assert (option != NULL);
292   opkg_assert (value != NULL);
293
294   options = opkg->options;
295
296   /* look up the option
297    * TODO: this would be much better as a hash table
298    */
299   while (options[i].name)
300   {
301     if (strcmp (options[i].name, option) != 0)
302     {
303       i++;
304       continue;
305     }
306   }
307
308   /* get the option */
309   switch (options[i].type)
310   {
311   case OPKG_OPT_TYPE_BOOL:
312     *((int *) value) = *((int *) options[i].value);
313     return;
314
315   case OPKG_OPT_TYPE_INT:
316     *((int *) value) = *((int *) options[i].value);
317     return;
318
319   case OPKG_OPT_TYPE_STRING:
320     *((char **)value) = strdup (options[i].value);
321     return;
322   }
323
324 }
325
326 void
327 opkg_set_option (opkg_t *opkg, char *option, void *value)
328 {
329   int i = 0, found = 0;
330   opkg_option_t *options;
331
332   opkg_assert (opkg != NULL);
333   opkg_assert (option != NULL);
334   opkg_assert (value != NULL);
335
336   options = opkg->options;
337
338   /* look up the option
339    * TODO: this would be much better as a hash table
340    */
341   while (options[i].name)
342   {
343     if (strcmp (options[i].name, option) == 0)
344     {
345       found = 1;
346       break;
347     }
348     i++;
349   }
350
351   if (!found)
352   {
353     /* XXX: Warning: Option not found */
354     return;
355   }
356
357   /* set the option */
358   switch (options[i].type)
359   {
360   case OPKG_OPT_TYPE_BOOL:
361     if (*((int *) value) == 0)
362       *((int *)options[i].value) = 0;
363     else
364       *((int *)options[i].value) = 1;
365     return;
366
367   case OPKG_OPT_TYPE_INT:
368     *((int *) options[i].value) = *((int *) value);
369     return;
370
371   case OPKG_OPT_TYPE_STRING:
372     *((char **)options[i].value) = strdup (value);
373     return;
374   }
375
376 }
377
378 int
379 opkg_install_package (opkg_t *opkg, const char *package_name, opkg_progress_callback_t progress_callback, void *user_data)
380 {
381   int err;
382   char *stripped_filename;
383   opkg_progress_data_t pdata;
384   pkg_t *old, *new;
385   pkg_vec_t *deps, *all;
386   int i, ndepends;
387   char **unresolved = NULL;
388
389   opkg_assert (opkg != NULL);
390   opkg_assert (package_name != NULL);
391
392   /* ... */
393   pkg_info_preinstall_check (opkg->conf);
394
395
396   /* check to ensure package is not already installed */
397   old = pkg_hash_fetch_installed_by_name(&opkg->conf->pkg_hash, package_name);
398   if (old)
399   {
400     /* XXX: Error: Package is already installed. */
401     return OPKG_PACKAGE_ALREADY_INSTALLED;
402   }
403
404   new = pkg_hash_fetch_best_installation_candidate_by_name(opkg->conf, package_name, NULL);
405   if (!new)
406   {
407     /* XXX: Error: Could not find package to install */
408     return OPKG_PACKAGE_NOT_FOUND;
409   }
410
411   new->state_flag |= SF_USER;
412
413   pdata.action = OPKG_INSTALL;
414   pdata.package = old_pkg_to_new (new);
415
416   progress (pdata, 0);
417
418   /* find dependancies and download them */
419   deps = pkg_vec_alloc ();
420   /* this function does not return the original package, so we insert it later */
421   ndepends = pkg_hash_fetch_unsatisfied_dependencies (opkg->conf, new, deps, &unresolved);
422   if (unresolved)
423   {
424     /* XXX: Error: Could not satisfy dependencies */
425     pkg_vec_free (deps);
426     return OPKG_DEPENDENCIES_FAILED;
427   }
428
429   /* insert the package we are installing so that we download it */
430   pkg_vec_insert (deps, new);
431
432   /* download package and dependancies */
433   for (i = 0; i < deps->len; i++)
434   {
435     pkg_t *pkg;
436     struct _curl_cb_data cb_data;
437     char *url;
438
439     pkg = deps->pkgs[i];
440     if (pkg->local_filename)
441       continue;
442
443     opkg_package_free (pdata.package);
444     pdata.package = old_pkg_to_new (pkg);
445     pdata.action = OPKG_DOWNLOAD;
446
447     if (pkg->src == NULL)
448     {
449       /* XXX: Error: Package not available from any configured src */
450       return OPKG_PACKAGE_NOT_AVAILABLE;
451     }
452
453     sprintf_alloc(&url, "%s/%s", pkg->src->value, pkg->filename);
454
455     /* Get the filename part, without any directory */
456     stripped_filename = strrchr(pkg->filename, '/');
457     if ( ! stripped_filename )
458         stripped_filename = pkg->filename;
459
460     sprintf_alloc(&pkg->local_filename, "%s/%s", opkg->conf->tmp_dir, stripped_filename);
461
462     cb_data.cb = progress_callback;
463     cb_data.progress_data = &pdata;
464     cb_data.opkg = opkg;
465     cb_data.user_data = user_data;
466     /* 75% of "install" progress is for downloading */
467     cb_data.start_range = 75 * i / deps->len;
468     cb_data.finish_range = 75 * (i + 1) / deps->len;
469
470     err = opkg_download(opkg->conf, url, pkg->local_filename,
471               (curl_progress_func) curl_progress_cb, &cb_data);
472     free(url);
473
474     if (err)
475     {
476       pkg_vec_free (deps);
477       opkg_package_free (pdata.package);
478       return OPKG_DOWNLOAD_FAILED;
479     }
480
481   }
482   pkg_vec_free (deps);
483
484   /* clear depenacy checked marks, left by pkg_hash_fetch_unsatisfied_dependencies */
485   all = pkg_vec_alloc ();
486   pkg_hash_fetch_available (&opkg->conf->pkg_hash, all);
487   for (i = 0; i < all->len; i++)
488   {
489     all->pkgs[i]->parent->dependencies_checked = 0;
490   }
491   pkg_vec_free (all);
492
493
494   /* 75% of "install" progress is for downloading */
495   opkg_package_free (pdata.package);
496   pdata.package = old_pkg_to_new (new);
497   pdata.action = OPKG_INSTALL;
498   progress (pdata, 75);
499
500   /* unpack the package */
501   err = opkg_install_pkg(opkg->conf, new, 0);
502
503   if (err)
504   {
505     opkg_package_free (pdata.package);
506     switch (err)
507     {
508       case OPKG_INSTALL_ERR_NOT_TRUSTED: return OPKG_GPG_ERROR;
509       case OPKG_INSTALL_ERR_DOWNLOAD: return OPKG_DOWNLOAD_FAILED;
510       case OPKG_INSTALL_ERR_DEPENDENCIES:
511       case OPKG_INSTALL_ERR_CONFLICTS: return OPKG_DEPENDENCIES_FAILED;
512       case OPKG_INSTALL_ERR_ALREADY_INSTALLED: return OPKG_PACKAGE_ALREADY_INSTALLED;
513       case OPKG_INSTALL_ERR_SIGNATURE: return OPKG_GPG_ERROR;
514       case OPKG_INSTALL_ERR_MD5: return OPKG_MD5_ERROR;
515       default: return OPKG_UNKNOWN_ERROR;
516     }
517   }
518
519   progress (pdata, 75);
520
521   /* run configure scripts, etc. */
522   err = opkg_configure_packages (opkg->conf, NULL);
523   if (err)
524   {
525     opkg_package_free (pdata.package);
526     return OPKG_UNKNOWN_ERROR;
527   }
528
529   /* write out status files and file lists */
530   opkg_conf_write_status_files (opkg->conf);
531   pkg_write_changed_filelists (opkg->conf);
532
533   progress (pdata, 100);
534   opkg_package_free (pdata.package);
535   return 0;
536 }
537
538 int
539 opkg_remove_package (opkg_t *opkg, const char *package_name, opkg_progress_callback_t progress_callback, void *user_data)
540 {
541   int err;
542   pkg_t *pkg = NULL;
543   pkg_t *pkg_to_remove;
544   opkg_progress_data_t pdata;
545
546   opkg_assert (opkg != NULL);
547   opkg_assert (package_name != NULL);
548
549   pkg_info_preinstall_check (opkg->conf);
550
551   pkg = pkg_hash_fetch_installed_by_name (&opkg->conf->pkg_hash, package_name);
552
553   if (pkg == NULL)
554   {
555     /* XXX: Error: Package not installed. */
556     return OPKG_PACKAGE_NOT_INSTALLED;
557   }
558
559   pdata.action = OPKG_REMOVE;
560   pdata.package = old_pkg_to_new (pkg);
561   progress (pdata, 0);
562
563
564   if (pkg->state_status == SS_NOT_INSTALLED)
565   {
566     /* XXX:  Error: Package seems to be not installed (STATUS = NOT_INSTALLED). */
567     return OPKG_PACKAGE_NOT_INSTALLED;
568   }
569   progress (pdata, 25);
570
571   if (opkg->conf->restrict_to_default_dest)
572   {
573     pkg_to_remove = pkg_hash_fetch_installed_by_name_dest (&opkg->conf->pkg_hash,
574                                                            pkg->name,
575                                                            opkg->conf->default_dest);
576   }
577   else
578   {
579     pkg_to_remove = pkg_hash_fetch_installed_by_name (&opkg->conf->pkg_hash, pkg->name );
580   }
581
582
583   progress (pdata, 75);
584
585   err = opkg_remove_pkg (opkg->conf, pkg_to_remove, 0);
586
587   /* write out status files and file lists */
588   opkg_conf_write_status_files (opkg->conf);
589   pkg_write_changed_filelists (opkg->conf);
590
591
592   progress (pdata, 100);
593   opkg_package_free (pdata.package);
594   return (err) ? OPKG_UNKNOWN_ERROR : OPKG_NO_ERROR;
595 }
596
597 int
598 opkg_upgrade_package (opkg_t *opkg, const char *package_name, opkg_progress_callback_t progress_callback, void *user_data)
599 {
600   int err;
601   pkg_t *pkg;
602   opkg_progress_data_t pdata;
603
604
605
606   opkg_assert (opkg != NULL);
607   opkg_assert (package_name != NULL);
608
609   pkg_info_preinstall_check (opkg->conf);
610
611   if (opkg->conf->restrict_to_default_dest)
612   {
613     pkg = pkg_hash_fetch_installed_by_name_dest (&opkg->conf->pkg_hash,
614                                                  package_name,
615                                                  opkg->conf->default_dest);
616     if (pkg == NULL)
617     {
618       /* XXX: Error: Package not installed in default_dest */
619       return OPKG_PACKAGE_NOT_INSTALLED;
620     }
621   }
622   else
623   {
624     pkg = pkg_hash_fetch_installed_by_name (&opkg->conf->pkg_hash,
625                                             package_name);
626   }
627
628   if (!pkg)
629   {
630     /* XXX: Error: Package not installed */
631     return OPKG_PACKAGE_NOT_INSTALLED;
632   }
633
634   pdata.action = OPKG_INSTALL;
635   pdata.package = old_pkg_to_new (pkg);
636   progress (pdata, 0);
637
638   err = opkg_upgrade_pkg (opkg->conf, pkg);
639   /* opkg_upgrade_pkg returns the error codes of opkg_install_pkg */
640   if (err)
641   {
642     switch (err)
643     {
644       case OPKG_INSTALL_ERR_NOT_TRUSTED: return OPKG_GPG_ERROR;
645       case OPKG_INSTALL_ERR_DOWNLOAD: return OPKG_DOWNLOAD_FAILED;
646       case OPKG_INSTALL_ERR_DEPENDENCIES:
647       case OPKG_INSTALL_ERR_CONFLICTS: return OPKG_DEPENDENCIES_FAILED;
648       case OPKG_INSTALL_ERR_ALREADY_INSTALLED: return OPKG_PACKAGE_ALREADY_INSTALLED;
649       case OPKG_INSTALL_ERR_SIGNATURE: return OPKG_GPG_ERROR;
650       case OPKG_INSTALL_ERR_MD5: return OPKG_MD5_ERROR;
651       default: return OPKG_UNKNOWN_ERROR;
652     }
653   }
654   progress (pdata, 75);
655
656   err = opkg_configure_packages (opkg->conf, NULL);
657   if (err)
658     return OPKG_UNKNOWN_ERROR;
659   progress (pdata, 100);
660   opkg_package_free (pdata.package);
661   return 0;
662 }
663
664 int
665 opkg_upgrade_all (opkg_t *opkg, opkg_progress_callback_t progress_callback, void *user_data)
666 {
667   pkg_vec_t *installed;
668   int err = 0;
669   int i;
670   pkg_t *pkg;
671   opkg_progress_data_t pdata;
672
673   pdata.action = OPKG_INSTALL;
674   pdata.package = NULL;
675
676   opkg_assert (opkg != NULL);
677   progress (pdata, 0);
678
679   installed = pkg_vec_alloc ();
680   pkg_info_preinstall_check (opkg->conf);
681
682   pkg_hash_fetch_all_installed (&opkg->conf->pkg_hash, installed);
683   for (i = 0; i < installed->len; i++)
684   {
685     pkg = installed->pkgs[i];
686
687     pdata.package = old_pkg_to_new (pkg);
688     progress (pdata, 99 * i / installed->len);
689     opkg_package_free (pdata.package);
690
691     err += opkg_upgrade_pkg (opkg->conf, pkg);
692   }
693   pkg_vec_free (installed);
694
695   if (err)
696     return 1;
697
698   err = opkg_configure_packages (opkg->conf, NULL);
699   if (err)
700     return 1;
701
702   pdata.package = NULL;
703   progress (pdata, 100);
704   return 0;
705 }
706
707 int
708 opkg_update_package_lists (opkg_t *opkg, opkg_progress_callback_t progress_callback, void *user_data)
709 {
710   char *tmp;
711   int err, result = 0;
712   char *lists_dir;
713   pkg_src_list_elt_t *iter;
714   pkg_src_t *src;
715   int sources_list_count, sources_done;
716   opkg_progress_data_t pdata;
717
718   opkg_assert (opkg != NULL);
719
720   pdata.action = OPKG_DOWNLOAD;
721   pdata.package = NULL;
722   progress (pdata, 0);
723
724   sprintf_alloc (&lists_dir, "%s",
725                  (opkg->conf->restrict_to_default_dest)
726                  ? opkg->conf->default_dest->lists_dir
727                  : opkg->conf->lists_dir);
728
729   if (!file_is_dir (lists_dir))
730   {
731     if (file_exists (lists_dir))
732     {
733       /* XXX: Error: file exists but is not a directory */
734       free (lists_dir);
735       return 1;
736     }
737
738     err = file_mkdir_hier (lists_dir, 0755);
739     if (err)
740     {
741       /* XXX: Error: failed to create directory */
742       free (lists_dir);
743       return 1;
744     }
745   }
746
747   tmp = strdup ("/tmp/opkg.XXXXXX");
748
749   if (mkdtemp (tmp) == NULL)
750   {
751     /* XXX: Error: could not create temporary file name */
752     free (lists_dir);
753     free (tmp);
754     return 1;
755   }
756
757   /* count the number of sources so we can give some progress updates */
758   sources_list_count = 0;
759   sources_done = 0;
760   iter = opkg->conf->pkg_src_list.head;
761   while (iter)
762   {
763     sources_list_count++;
764     iter = iter->next;
765   }
766
767   for (iter = opkg->conf->pkg_src_list.head; iter; iter = iter->next)
768   {
769     char *url, *list_file_name = NULL;
770
771     src = iter->data;
772
773     if (src->extra_data)  /* debian style? */
774       sprintf_alloc (&url, "%s/%s/%s", src->value, src->extra_data,
775                      src->gzip ? "Packages.gz" : "Packages");
776     else
777       sprintf_alloc (&url, "%s/%s", src->value, src->gzip ? "Packages.gz" : "Packages");
778
779     sprintf_alloc (&list_file_name, "%s/%s", lists_dir, src->name);
780     if (src->gzip)
781     {
782       FILE *in, *out;
783       struct _curl_cb_data cb_data;
784       char *tmp_file_name = NULL;
785
786       sprintf_alloc (&tmp_file_name, "%s/%s.gz", tmp, src->name);
787
788       /* XXX: Note: downloading url */
789
790       cb_data.cb = progress_callback;
791       cb_data.progress_data = &pdata;
792       cb_data.opkg = opkg;
793       cb_data.user_data = user_data;
794       cb_data.start_range = 100 * sources_done / sources_list_count;
795       cb_data.finish_range = 100 * (sources_done + 1) / sources_list_count;
796
797       err = opkg_download (opkg->conf, url, tmp_file_name, (curl_progress_func) curl_progress_cb, &cb_data);
798
799       if (err == 0)
800       {
801         /* XXX: Note: Inflating downloaded file */
802         in = fopen (tmp_file_name, "r");
803         out = fopen (list_file_name, "w");
804         if (in && out)
805           unzip (in, out);
806         else
807           err = 1;
808         if (in)
809           fclose (in);
810         if (out)
811           fclose (out);
812         unlink (tmp_file_name);
813       }
814       free (tmp_file_name);
815     }
816     else
817       err = opkg_download (opkg->conf, url, list_file_name, NULL, NULL);
818
819     if (err)
820     {
821       /* XXX: Error: download error */
822       result = OPKG_DOWNLOAD_FAILED;
823     }
824     free (url);
825
826 #ifdef HAVE_GPGME
827     char *sig_file_name;
828     /* download detached signitures to verify the package lists */
829     /* get the url for the sig file */
830     if (src->extra_data)  /* debian style? */
831       sprintf_alloc (&url, "%s/%s/%s", src->value, src->extra_data,
832                      "Packages.sig");
833     else
834       sprintf_alloc (&url, "%s/%s", src->value, "Packages.sig");
835
836     /* create filename for signature */
837     sprintf_alloc (&sig_file_name, "%s/%s.sig", lists_dir, src->name);
838
839     /* make sure there is no existing signature file */
840     unlink (sig_file_name);
841
842     err = opkg_download (opkg->conf, url, sig_file_name, NULL, NULL);
843     if (err)
844     {
845       /* XXX: Warning: Download failed */
846     }
847     else
848     {
849       int err;
850       err = opkg_verify_file (opkg->conf, list_file_name, sig_file_name);
851       if (err == 0)
852       {
853         /* XXX: Notice: Signature check passed */
854       }
855       else
856       {
857         /* XXX: Warning: Signature check failed */
858       }
859     }
860     free (sig_file_name);
861     free (list_file_name);
862     free (url);
863 #else
864     /* XXX: Note: Signiture check for %s skipped because GPG support was not
865      * enabled in this build
866      */
867 #endif
868
869     sources_done++;
870     progress (pdata, 100 * sources_done / sources_list_count);
871   }
872
873   rmdir (tmp);
874   free (tmp);
875   free (lists_dir);
876
877   /* Now re-read the package lists to update package hash tables. */
878   opkg_re_read_config_files (opkg);
879
880   return result;
881 }
882
883
884 int
885 opkg_list_packages (opkg_t *opkg, opkg_package_callback_t callback, void *user_data)
886 {
887   pkg_vec_t *all;
888   int i;
889
890   opkg_assert (opkg);
891   opkg_assert (callback);
892
893   all = pkg_vec_alloc ();
894   pkg_hash_fetch_available (&opkg->conf->pkg_hash, all);
895   for (i = 0; i < all->len; i++)
896   {
897     pkg_t *pkg;
898     opkg_package_t *package;
899
900     pkg = all->pkgs[i];
901
902     package = old_pkg_to_new (pkg);
903     callback (opkg, package, user_data);
904   }
905
906   pkg_vec_free (all);
907
908   return 0;
909 }
910
911 int
912 opkg_list_upgradable_packages (opkg_t *opkg, opkg_package_callback_t callback, void *user_data)
913 {
914   pkg_vec_t *all;
915   int i;
916
917   opkg_assert (opkg);
918   opkg_assert (callback);
919
920   /* ensure all data is valid */
921   pkg_info_preinstall_check (opkg->conf);
922
923   all = pkg_vec_alloc ();
924   pkg_hash_fetch_available (&opkg->conf->pkg_hash, all);
925   for (i = 0; i < all->len; i++)
926   {
927     pkg_t *old, *new;
928     int cmp;
929     opkg_package_t *package;
930
931     old = all->pkgs[i];
932     
933     if (old->state_status != SS_INSTALLED)
934       continue;
935
936     new = pkg_hash_fetch_best_installation_candidate_by_name(opkg->conf, old->name, NULL);
937     if (new == NULL) {
938       /* XXX: Notice: Assuming locally install package is up to date */
939       continue;
940     }
941           
942     cmp = pkg_compare_versions(old, new);
943
944     if (cmp < 0)
945     {
946       package = old_pkg_to_new (new);
947       callback (opkg, package, user_data);
948     }
949   }
950
951   pkg_vec_free (all);
952
953   return 0;
954 }
955
956 opkg_package_t*
957 opkg_find_package (opkg_t *opkg, const char *name, const char *ver, const char *arch, const char *repo)
958 {
959   pkg_vec_t *all;
960   opkg_package_t *package = NULL;
961   int i;
962 #define sstrcmp(x,y) (x && y) ? strcmp (x, y) : 0
963
964   opkg_assert (opkg);
965
966   all = pkg_vec_alloc ();
967   pkg_hash_fetch_available (&opkg->conf->pkg_hash, all);
968   for (i = 0; i < all->len; i++)
969   {
970     pkg_t *pkg;
971     char *pkgv;
972
973     pkg = all->pkgs[i];
974
975     /* check name */
976     if (sstrcmp (pkg->name, name))
977       continue;
978     
979     /* check version */
980     pkgv = pkg_version_str_alloc (pkg);
981     if (sstrcmp (pkgv, ver))
982     {
983       free (pkgv);
984       continue;
985     }
986     free (pkgv);
987
988     /* check architecture */
989     if (arch)
990     {
991       if (sstrcmp (pkg->architecture, arch))
992         continue;
993     }
994
995     /* check repository */
996     if (repo)
997     {
998       if (sstrcmp (pkg->src->name, repo))
999           continue;
1000     }
1001
1002     /* match found */
1003     package = old_pkg_to_new (pkg);
1004     break;
1005   }
1006
1007   pkg_vec_free (all);
1008
1009   return package;
1010 }