src/fs/fs_uri.c

   1 /*
   2      This file is part of GNUnet.
   3      (C) 2003--2013 Christian Grothoff (and other contributing authors)
   4
   5      GNUnet is free software; you can redistribute it and/or modify
   6      it under the terms of the GNU General Public License as published
   7      by the Free Software Foundation; either version 3, or (at your
   8      option) any later version.
   9
  10      GNUnet is distributed in the hope that it will be useful, but
  11      WITHOUT ANY WARRANTY; without even the implied warranty of
  12      MERCHANTABILITY or FITNESS FOR A PARTICULAR PURPOSE.  See the GNU
  13      General Public License for more details.
  14
  15      You should have received a copy of the GNU General Public License
  16      along with GNUnet; see the file COPYING.  If not, write to the
  17      Free Software Foundation, Inc., 59 Temple Place - Suite 330,
  18      Boston, MA 02111-1307, USA.
  19 */
  20
  21 /**
  22  * @file fs/fs_uri.c
  23  * @brief Parses and produces uri strings.
  24  * @author Igor Wronsky, Christian Grothoff
  25  *
  26  * GNUnet URIs are of the general form "gnunet://MODULE/IDENTIFIER".
  27  * The specific structure of "IDENTIFIER" depends on the module and
  28  * maybe differenciated into additional subcategories if applicable.
  29  * This module only deals with fs identifiers (MODULE = "fs").
  30  * <p>
  31  *
  32  * This module only parses URIs for the AFS module.  The FS URIs fall
  33  * into four categories, "chk", "sks", "ksk" and "loc".  The first three
  34  * categories were named in analogy (!) to Freenet, but they do NOT
  35  * work in exactly the same way.  They are very similar from the user's
  36  * point of view (unique file identifier, subspace, keyword), but the
  37  * implementation is rather different in pretty much every detail.
  38  * The concrete URI formats are:
  39  *
  40  * <ul><li>
  41  *
  42  * First, there are URIs that identify a file.  They have the format
  43  * "gnunet://fs/chk/HEX1.HEX2.SIZE".  These URIs can be used to
  44  * download the file.  The description, filename, mime-type and other
  45  * meta-data is NOT part of the file-URI since a URI uniquely
  46  * identifies a resource (and the contents of the file would be the
  47  * same even if it had a different description).
  48  *
  49  * </li><li>
  50  *
  51  * The second category identifies entries in a namespace.  The format
  52  * is "gnunet://fs/sks/NAMESPACE/IDENTIFIER" where the namespace
  53  * should be given in HEX.  Applications may allow using a nickname
  54  * for the namespace if the nickname is not ambiguous.  The identifier
  55  * can be either an ASCII sequence or a HEX-encoding.  If the
  56  * identifier is in ASCII but the format is ambiguous and could denote
  57  * a HEX-string a "/" is appended to indicate ASCII encoding.
  58  *
  59  * </li> <li>
  60  *
  61  * The third category identifies ordinary searches.  The format is
  62  * "gnunet://fs/ksk/KEYWORD[+KEYWORD]*".  Using the "+" syntax
  63  * it is possible to encode searches with the boolean "AND" operator.
  64  * "+" is used since it indicates a commutative 'and' operation and
  65  * is unlikely to be used in a keyword by itself.
  66  *
  67  * </li><li>
  68  *
  69  * The last category identifies a datum on a specific machine.  The
  70  * format is "gnunet://fs/loc/HEX1.HEX2.SIZE.PEER.SIG.EXPTIME".  PEER is
  71  * the BinName of the public key of the peer storing the datum.  The
  72  * signature (SIG) certifies that this peer has this content.
  73  * HEX1, HEX2 and SIZE correspond to a 'chk' URI.
  74  *
  75  * </li></ul>
  76  *
  77  * The encoding for hexadecimal values is defined in the hashing.c
  78  * module in the gnunetutil library and discussed there.
  79  * <p>
  80  */
  81 #include "platform.h"
  82 #include "gnunet_fs_service.h"
  83 #include "gnunet_signatures.h"
  84 #include "fs_api.h"
  85 #include <unitypes.h>
  86 #include <unicase.h>
  87 #include <uniconv.h>
  88 #include <unistr.h>
  89 #include <unistdio.h>
  90
  91
  92
  93 /**
  94  * Get a unique key from a URI.  This is for putting URIs
  95  * into HashMaps.  The key may change between FS implementations.
  96  *
  97  * @param uri uri to convert to a unique key
  98  * @param key where to store the unique key
  99  */
 100 void
 101 GNUNET_FS_uri_to_key (const struct GNUNET_FS_Uri *uri,
 102                       struct GNUNET_HashCode *key)
 103 {
 104   switch (uri->type)
 105   {
 106   case GNUNET_FS_URI_CHK:
 107     *key = uri->data.chk.chk.query;
 108     return;
 109   case GNUNET_FS_URI_SKS:
 110     GNUNET_CRYPTO_hash (uri->data.sks.identifier,
 111                         strlen (uri->data.sks.identifier), key);
 112     break;
 113   case GNUNET_FS_URI_KSK:
 114     if (uri->data.ksk.keywordCount > 0)
 115       GNUNET_CRYPTO_hash (uri->data.ksk.keywords[0],
 116                           strlen (uri->data.ksk.keywords[0]), key);
 117     break;
 118   case GNUNET_FS_URI_LOC:
 119     GNUNET_CRYPTO_hash (&uri->data.loc.fi,
 120                         sizeof (struct FileIdentifier) +
 121                         sizeof (struct GNUNET_CRYPTO_EccPublicKey),
 122                         key);
 123     break;
 124   default:
 125     memset (key, 0, sizeof (struct GNUNET_HashCode));
 126     break;
 127   }
 128 }
 129
 130
 131 /**
 132  * Convert keyword URI to a human readable format
 133  * (i.e. the search query that was used in the first place)
 134  *
 135  * @param uri ksk uri to convert to a string
 136  * @return string with the keywords
 137  */
 138 char *
 139 GNUNET_FS_uri_ksk_to_string_fancy (const struct GNUNET_FS_Uri *uri)
 140 {
 141   size_t n;
 142   char *ret;
 143   unsigned int i;
 144   const char *keyword;
 145   char **keywords;
 146   unsigned int keywordCount;
 147
 148   if ((NULL == uri) || (GNUNET_FS_URI_KSK != uri->type))
 149   {
 150     GNUNET_break (0);
 151     return NULL;
 152   }
 153   keywords = uri->data.ksk.keywords;
 154   keywordCount = uri->data.ksk.keywordCount;
 155   n = keywordCount + 1;
 156   for (i = 0; i < keywordCount; i++)
 157   {
 158     keyword = keywords[i];
 159     n += strlen (keyword) - 1;
 160     if (NULL != strstr (&keyword[1], " "))
 161       n += 2;
 162     if (keyword[0] == '+')
 163       n++;
 164   }
 165   ret = GNUNET_malloc (n);
 166   strcpy (ret, "");
 167   for (i = 0; i < keywordCount; i++)
 168   {
 169     keyword = keywords[i];
 170     if (NULL != strstr (&keyword[1], " "))
 171     {
 172       strcat (ret, "\"");
 173       if (keyword[0] == '+')
 174         strcat (ret, keyword);
 175       else
 176         strcat (ret, &keyword[1]);
 177       strcat (ret, "\"");
 178     }
 179     else
 180     {
 181       if (keyword[0] == '+')
 182         strcat (ret, keyword);
 183       else
 184         strcat (ret, &keyword[1]);
 185     }
 186     strcat (ret, " ");
 187   }
 188   return ret;
 189 }
 190
 191
 192 /**
 193  * Given a keyword with %-encoding (and possibly quotes to protect
 194  * spaces), return a copy of the keyword without %-encoding and
 195  * without double-quotes (%22).  Also, add a space at the beginning
 196  * if there is not a '+'.
 197  *
 198  * @param in string with %-encoding
 199  * @param emsg where to store the parser error message (if any)
 200  * @return decodded string with leading space (or preserved plus)
 201  */
 202 static char *
 203 percent_decode_keyword (const char *in, char **emsg)
 204 {
 205   char *out;
 206   char *ret;
 207   unsigned int rpos;
 208   unsigned int wpos;
 209   unsigned int hx;
 210
 211   out = GNUNET_strdup (in);
 212   rpos = 0;
 213   wpos = 0;
 214   while (out[rpos] != '\0')
 215   {
 216     if (out[rpos] == '%')
 217     {
 218       if (1 != SSCANF (&out[rpos + 1], "%2X", &hx))
 219       {
 220         GNUNET_free (out);
 221         *emsg = GNUNET_strdup (_(/* xgettext:no-c-format */
 222                                  "`%' must be followed by HEX number"));
 223         return NULL;
 224       }
 225       rpos += 3;
 226       if (hx == '"')
 227         continue;               /* skip double quote */
 228       out[wpos++] = (char) hx;
 229     }
 230     else
 231     {
 232       out[wpos++] = out[rpos++];
 233     }
 234   }
 235   out[wpos] = '\0';
 236   if (out[0] == '+')
 237   {
 238     ret = GNUNET_strdup (out);
 239   }
 240   else
 241   {
 242     /* need to prefix with space */
 243     ret = GNUNET_malloc (strlen (out) + 2);
 244     strcpy (ret, " ");
 245     strcat (ret, out);
 246   }
 247   GNUNET_free (out);
 248   return ret;
 249 }
 250
 251 #define GNUNET_FS_URI_KSK_PREFIX GNUNET_FS_URI_PREFIX GNUNET_FS_URI_KSK_INFIX
 252
 253 /**
 254  * Parse a KSK URI.
 255  *
 256  * @param s an uri string
 257  * @param emsg where to store the parser error message (if any)
 258  * @return NULL on error, otherwise the KSK URI
 259  */
 260 static struct GNUNET_FS_Uri *
 261 uri_ksk_parse (const char *s, char **emsg)
 262 {
 263   struct GNUNET_FS_Uri *ret;
 264   char **keywords;
 265   unsigned int pos;
 266   int max;
 267   int iret;
 268   int i;
 269   size_t slen;
 270   char *dup;
 271   int saw_quote;
 272
 273   GNUNET_assert (NULL != s);
 274   slen = strlen (s);
 275   pos = strlen (GNUNET_FS_URI_KSK_PREFIX);
 276   if ((slen <= pos) || (0 != strncmp (s, GNUNET_FS_URI_KSK_PREFIX, pos)))
 277     return NULL;                /* not KSK URI */
 278   if ((s[slen - 1] == '+') || (s[pos] == '+'))
 279   {
 280     *emsg =
 281         GNUNET_strdup (_("Malformed KSK URI (must not begin or end with `+')"));
 282     return NULL;
 283   }
 284   max = 1;
 285   saw_quote = 0;
 286   for (i = pos; i < slen; i++)
 287   {
 288     if ((s[i] == '%') && (&s[i] == strstr (&s[i], "%22")))
 289     {
 290       saw_quote = (saw_quote + 1) % 2;
 291       i += 3;
 292       continue;
 293     }
 294     if ((s[i] == '+') && (saw_quote == 0))
 295     {
 296       max++;
 297       if (s[i - 1] == '+')
 298       {
 299         *emsg = GNUNET_strdup (_("`++' not allowed in KSK URI"));
 300         return NULL;
 301       }
 302     }
 303   }
 304   if (saw_quote == 1)
 305   {
 306     *emsg = GNUNET_strdup (_("Quotes not balanced in KSK URI"));
 307     return NULL;
 308   }
 309   iret = max;
 310   dup = GNUNET_strdup (s);
 311   keywords = GNUNET_malloc (max * sizeof (char *));
 312   for (i = slen - 1; i >= pos; i--)
 313   {
 314     if ((s[i] == '%') && (&s[i] == strstr (&s[i], "%22")))
 315     {
 316       saw_quote = (saw_quote + 1) % 2;
 317       i += 3;
 318       continue;
 319     }
 320     if ((dup[i] == '+') && (saw_quote == 0))
 321     {
 322       keywords[--max] = percent_decode_keyword (&dup[i + 1], emsg);
 323       if (NULL == keywords[max])
 324         goto CLEANUP;
 325       dup[i] = '\0';
 326     }
 327   }
 328   keywords[--max] = percent_decode_keyword (&dup[pos], emsg);
 329   if (NULL == keywords[max])
 330     goto CLEANUP;
 331   GNUNET_assert (max == 0);
 332   GNUNET_free (dup);
 333   ret = GNUNET_new (struct GNUNET_FS_Uri);
 334   ret->type = GNUNET_FS_URI_KSK;
 335   ret->data.ksk.keywordCount = iret;
 336   ret->data.ksk.keywords = keywords;
 337   return ret;
 338 CLEANUP:
 339   for (i = 0; i < max; i++)
 340     GNUNET_free_non_null (keywords[i]);
 341   GNUNET_free (keywords);
 342   GNUNET_free (dup);
 343   return NULL;
 344 }
 345
 346
 347 #define GNUNET_FS_URI_SKS_PREFIX GNUNET_FS_URI_PREFIX GNUNET_FS_URI_SKS_INFIX
 348
 349 /**
 350  * Parse an SKS URI.
 351  *
 352  * @param s an uri string
 353  * @param emsg where to store the parser error message (if any)
 354  * @return NULL on error, SKS URI otherwise
 355  */
 356 static struct GNUNET_FS_Uri *
 357 uri_sks_parse (const char *s, char **emsg)
 358 {
 359   struct GNUNET_FS_Uri *ret;
 360   struct GNUNET_CRYPTO_EccPublicKey ns;
 361   size_t pos;
 362   char *end;
 363
 364   GNUNET_assert (s != NULL);
 365   pos = strlen (GNUNET_FS_URI_SKS_PREFIX);
 366   if ((strlen (s) <= pos) || (0 != strncmp (s, GNUNET_FS_URI_SKS_PREFIX, pos)))
 367     return NULL;                /* not an SKS URI */
 368   end = strchr (&s[pos], '/');
 369   if ( (NULL == end) ||
 370        (GNUNET_OK !=
 371         GNUNET_STRINGS_string_to_data (&s[pos],
 372                                        end - &s[pos],
 373                                        &ns,
 374                                        sizeof (ns))) )
 375   {
 376     *emsg = GNUNET_strdup (_("Malformed SKS URI"));
 377     return NULL; /* malformed */
 378   }
 379   end++; /* skip over '/' */
 380   ret = GNUNET_new (struct GNUNET_FS_Uri);
 381   ret->type = GNUNET_FS_URI_SKS;
 382   ret->data.sks.ns = ns;
 383   ret->data.sks.identifier = GNUNET_strdup (end);
 384   return ret;
 385 }
 386
 387 #define GNUNET_FS_URI_CHK_PREFIX GNUNET_FS_URI_PREFIX GNUNET_FS_URI_CHK_INFIX
 388
 389
 390 /**
 391  * Parse a CHK URI.
 392  *
 393  * @param s an uri string
 394  * @param emsg where to store the parser error message (if any)
 395  * @return NULL on error, CHK URI otherwise
 396  */
 397 static struct GNUNET_FS_Uri *
 398 uri_chk_parse (const char *s, char **emsg)
 399 {
 400   struct GNUNET_FS_Uri *ret;
 401   struct FileIdentifier fi;
 402   unsigned int pos;
 403   unsigned long long flen;
 404   size_t slen;
 405   char h1[sizeof (struct GNUNET_CRYPTO_HashAsciiEncoded)];
 406   char h2[sizeof (struct GNUNET_CRYPTO_HashAsciiEncoded)];
 407
 408   if (NULL == s)
 409     return NULL;
 410   GNUNET_assert (s != NULL);
 411   slen = strlen (s);
 412   pos = strlen (GNUNET_FS_URI_CHK_PREFIX);
 413   if ((slen < pos + 2 * sizeof (struct GNUNET_CRYPTO_HashAsciiEncoded) + 1) ||
 414       (0 != strncmp (s, GNUNET_FS_URI_CHK_PREFIX, pos)))
 415     return NULL;                /* not a CHK URI */
 416   if ((s[pos + sizeof (struct GNUNET_CRYPTO_HashAsciiEncoded) - 1] != '.') ||
 417       (s[pos + sizeof (struct GNUNET_CRYPTO_HashAsciiEncoded) * 2 - 1] != '.'))
 418   {
 419     *emsg = GNUNET_strdup (_("Malformed CHK URI"));
 420     return NULL;
 421   }
 422   memcpy (h1, &s[pos], sizeof (struct GNUNET_CRYPTO_HashAsciiEncoded));
 423   h1[sizeof (struct GNUNET_CRYPTO_HashAsciiEncoded) - 1] = '\0';
 424   memcpy (h2, &s[pos + sizeof (struct GNUNET_CRYPTO_HashAsciiEncoded)],
 425           sizeof (struct GNUNET_CRYPTO_HashAsciiEncoded));
 426   h2[sizeof (struct GNUNET_CRYPTO_HashAsciiEncoded) - 1] = '\0';
 427
 428   if ((GNUNET_OK != GNUNET_CRYPTO_hash_from_string (h1, &fi.chk.key)) ||
 429       (GNUNET_OK != GNUNET_CRYPTO_hash_from_string (h2, &fi.chk.query)) ||
 430       (1 !=
 431        SSCANF (&s[pos + sizeof (struct GNUNET_CRYPTO_HashAsciiEncoded) * 2],
 432                "%llu", &flen)))
 433   {
 434     *emsg = GNUNET_strdup (_("Malformed CHK URI"));
 435     return NULL;
 436   }
 437   fi.file_length = GNUNET_htonll (flen);
 438   ret = GNUNET_new (struct GNUNET_FS_Uri);
 439   ret->type = GNUNET_FS_URI_CHK;
 440   ret->data.chk = fi;
 441   return ret;
 442 }
 443
 444
 445 /**
 446  * Convert a character back to the binary value
 447  * that it represents (given base64-encoding).
 448  *
 449  * @param a character to convert
 450  * @return offset in the "tbl" array
 451  */
 452 static unsigned int
 453 c2v (unsigned char a)
 454 {
 455   if ((a >= '0') && (a <= '9'))
 456     return a - '0';
 457   if ((a >= 'A') && (a <= 'Z'))
 458     return (a - 'A' + 10);
 459   if ((a >= 'a') && (a <= 'z'))
 460     return (a - 'a' + 36);
 461   if (a == '_')
 462     return 62;
 463   if (a == '=')
 464     return 63;
 465   return -1;
 466 }
 467
 468
 469 /**
 470  * Convert string back to binary data.
 471  *
 472  * @param input '\\0'-terminated string
 473  * @param data where to write binary data
 474  * @param size how much data should be converted
 475  * @return number of characters processed from input,
 476  *        -1 on error
 477  */
 478 static int
 479 enc2bin (const char *input, void *data, size_t size)
 480 {
 481   size_t len;
 482   size_t pos;
 483   unsigned int bits;
 484   unsigned int hbits;
 485
 486   len = size * 8 / 6;
 487   if (((size * 8) % 6) != 0)
 488     len++;
 489   if (strlen (input) < len)
 490     return -1;                  /* error! */
 491   bits = 0;
 492   hbits = 0;
 493   len = 0;
 494   for (pos = 0; pos < size; pos++)
 495   {
 496     while (hbits < 8)
 497     {
 498       bits |= (c2v (input[len++]) << hbits);
 499       hbits += 6;
 500     }
 501     (((unsigned char *) data)[pos]) = (unsigned char) bits;
 502     bits >>= 8;
 503     hbits -= 8;
 504   }
 505   return len;
 506 }
 507
 508
 509 GNUNET_NETWORK_STRUCT_BEGIN
 510 /**
 511  * Structure that defines how the contents of a location URI must be
 512  * assembled in memory to create or verify the signature of a location
 513  * URI.
 514  */
 515 struct LocUriAssembly
 516 {
 517   /**
 518    * What is being signed (rest of this struct).
 519    */
 520   struct GNUNET_CRYPTO_EccSignaturePurpose purpose;
 521
 522   /**
 523    * Expiration time of the offer.
 524    */
 525   struct GNUNET_TIME_AbsoluteNBO exptime;
 526
 527   /**
 528    * File being offered.
 529    */
 530   struct FileIdentifier fi;
 531
 532   /**
 533    * Peer offering the file.
 534    */
 535   struct GNUNET_CRYPTO_EccPublicKey peer;
 536
 537 };
 538 GNUNET_NETWORK_STRUCT_END
 539
 540
 541 #define GNUNET_FS_URI_LOC_PREFIX GNUNET_FS_URI_PREFIX GNUNET_FS_URI_LOC_INFIX
 542
 543 /**
 544  * Parse a LOC URI.
 545  * Also verifies validity of the location URI.
 546  *
 547  * @param s an uri string
 548  * @param emsg where to store the parser error message (if any)
 549  * @return NULL on error, valid LOC URI otherwise
 550  */
 551 static struct GNUNET_FS_Uri *
 552 uri_loc_parse (const char *s, char **emsg)
 553 {
 554   struct GNUNET_FS_Uri *uri;
 555   char h1[sizeof (struct GNUNET_CRYPTO_HashAsciiEncoded)];
 556   char h2[sizeof (struct GNUNET_CRYPTO_HashAsciiEncoded)];
 557   unsigned int pos;
 558   unsigned int npos;
 559   unsigned long long exptime;
 560   unsigned long long flen;
 561   struct GNUNET_TIME_Absolute et;
 562   struct GNUNET_CRYPTO_EccSignature sig;
 563   struct LocUriAssembly ass;
 564   int ret;
 565   size_t slen;
 566
 567   GNUNET_assert (s != NULL);
 568   slen = strlen (s);
 569   pos = strlen (GNUNET_FS_URI_LOC_PREFIX);
 570   if ((slen < pos + 2 * sizeof (struct GNUNET_CRYPTO_HashAsciiEncoded) + 1) ||
 571       (0 != strncmp (s, GNUNET_FS_URI_LOC_PREFIX, pos)))
 572     return NULL;                /* not an SKS URI */
 573   if ((s[pos + sizeof (struct GNUNET_CRYPTO_HashAsciiEncoded) - 1] != '.') ||
 574       (s[pos + sizeof (struct GNUNET_CRYPTO_HashAsciiEncoded) * 2 - 1] != '.'))
 575   {
 576     *emsg = GNUNET_strdup (_("SKS URI malformed"));
 577     return NULL;
 578   }
 579   memcpy (h1, &s[pos], sizeof (struct GNUNET_CRYPTO_HashAsciiEncoded));
 580   h1[sizeof (struct GNUNET_CRYPTO_HashAsciiEncoded) - 1] = '\0';
 581   memcpy (h2, &s[pos + sizeof (struct GNUNET_CRYPTO_HashAsciiEncoded)],
 582           sizeof (struct GNUNET_CRYPTO_HashAsciiEncoded));
 583   h2[sizeof (struct GNUNET_CRYPTO_HashAsciiEncoded) - 1] = '\0';
 584
 585   if ((GNUNET_OK != GNUNET_CRYPTO_hash_from_string (h1, &ass.fi.chk.key)) ||
 586       (GNUNET_OK != GNUNET_CRYPTO_hash_from_string (h2, &ass.fi.chk.query)) ||
 587       (1 !=
 588        SSCANF (&s[pos + sizeof (struct GNUNET_CRYPTO_HashAsciiEncoded) * 2],
 589                "%llu", &flen)))
 590   {
 591     *emsg = GNUNET_strdup (_("SKS URI malformed"));
 592     return NULL;
 593   }
 594   ass.fi.file_length = GNUNET_htonll (flen);
 595
 596   npos = pos + sizeof (struct GNUNET_CRYPTO_HashAsciiEncoded) * 2;
 597   while ((s[npos] != '\0') && (s[npos] != '.'))
 598     npos++;
 599   if (s[npos] == '\0')
 600   {
 601     *emsg = GNUNET_strdup (_("SKS URI malformed"));
 602     goto ERR;
 603   }
 604   npos++;
 605   ret =
 606       enc2bin (&s[npos], &ass.peer,
 607                sizeof (struct GNUNET_CRYPTO_EccPublicKey));
 608   if (ret == -1)
 609   {
 610     *emsg =
 611         GNUNET_strdup (_("SKS URI malformed (could not decode public key)"));
 612     goto ERR;
 613   }
 614   npos += ret;
 615   if (s[npos++] != '.')
 616   {
 617     *emsg = GNUNET_strdup (_("SKS URI malformed (could not find signature)"));
 618     goto ERR;
 619   }
 620   ret = enc2bin (&s[npos], &sig, sizeof (struct GNUNET_CRYPTO_EccSignature));
 621   if (ret == -1)
 622   {
 623     *emsg = GNUNET_strdup (_("SKS URI malformed (could not decode signature)"));
 624     goto ERR;
 625   }
 626   npos += ret;
 627   if (s[npos++] != '.')
 628   {
 629     *emsg = GNUNET_strdup (_("SKS URI malformed"));
 630     goto ERR;
 631   }
 632   if (1 != SSCANF (&s[npos], "%llu", &exptime))
 633   {
 634     *emsg =
 635         GNUNET_strdup (_
 636                        ("SKS URI malformed (could not parse expiration time)"));
 637     goto ERR;
 638   }
 639   ass.purpose.size = htonl (sizeof (struct LocUriAssembly));
 640   ass.purpose.purpose = htonl (GNUNET_SIGNATURE_PURPOSE_PEER_PLACEMENT);
 641   et.abs_value = exptime;
 642   ass.exptime = GNUNET_TIME_absolute_hton (et);
 643   if (GNUNET_OK !=
 644       GNUNET_CRYPTO_ecc_verify (GNUNET_SIGNATURE_PURPOSE_PEER_PLACEMENT,
 645                                 &ass.purpose, &sig, &ass.peer))
 646   {
 647     *emsg =
 648         GNUNET_strdup (_("SKS URI malformed (signature failed validation)"));
 649     goto ERR;
 650   }
 651   uri = GNUNET_new (struct GNUNET_FS_Uri);
 652   uri->type = GNUNET_FS_URI_LOC;
 653   uri->data.loc.fi = ass.fi;
 654   uri->data.loc.peer = ass.peer;
 655   uri->data.loc.expirationTime = et;
 656   uri->data.loc.contentSignature = sig;
 657
 658   return uri;
 659 ERR:
 660   return NULL;
 661 }
 662
 663
 664 /**
 665  * Convert a UTF-8 String to a URI.
 666  *
 667  * @param uri string to parse
 668  * @param emsg where to store the parser error message (if any)
 669  * @return NULL on error
 670  */
 671 struct GNUNET_FS_Uri *
 672 GNUNET_FS_uri_parse (const char *uri, char **emsg)
 673 {
 674   struct GNUNET_FS_Uri *ret;
 675   char *msg;
 676
 677   if (NULL == emsg)
 678     emsg = &msg;
 679   *emsg = NULL;
 680   if ((NULL != (ret = uri_chk_parse (uri, emsg))) ||
 681       (NULL != (ret = uri_ksk_parse (uri, emsg))) ||
 682       (NULL != (ret = uri_sks_parse (uri, emsg))) ||
 683       (NULL != (ret = uri_loc_parse (uri, emsg))))
 684     return ret;
 685   if (NULL == *emsg)
 686     *emsg = GNUNET_strdup (_("Unrecognized URI type"));
 687   if (emsg == &msg)
 688     GNUNET_free (msg);
 689   return NULL;
 690 }
 691
 692
 693 /**
 694  * Free URI.
 695  *
 696  * @param uri uri to free
 697  */
 698 void
 699 GNUNET_FS_uri_destroy (struct GNUNET_FS_Uri *uri)
 700 {
 701   unsigned int i;
 702
 703   GNUNET_assert (uri != NULL);
 704   switch (uri->type)
 705   {
 706   case GNUNET_FS_URI_KSK:
 707     for (i = 0; i < uri->data.ksk.keywordCount; i++)
 708       GNUNET_free (uri->data.ksk.keywords[i]);
 709     GNUNET_array_grow (uri->data.ksk.keywords, uri->data.ksk.keywordCount, 0);
 710     break;
 711   case GNUNET_FS_URI_SKS:
 712     GNUNET_free (uri->data.sks.identifier);
 713     break;
 714   case GNUNET_FS_URI_LOC:
 715     break;
 716   default:
 717     /* do nothing */
 718     break;
 719   }
 720   GNUNET_free (uri);
 721 }
 722
 723 /**
 724  * How many keywords are ANDed in this keyword URI?
 725  *
 726  * @param uri ksk uri to get the number of keywords from
 727  * @return 0 if this is not a keyword URI
 728  */
 729 unsigned int
 730 GNUNET_FS_uri_ksk_get_keyword_count (const struct GNUNET_FS_Uri *uri)
 731 {
 732   if (uri->type != GNUNET_FS_URI_KSK)
 733     return 0;
 734   return uri->data.ksk.keywordCount;
 735 }
 736
 737
 738 /**
 739  * Iterate over all keywords in this keyword URI.
 740  *
 741  * @param uri ksk uri to get the keywords from
 742  * @param iterator function to call on each keyword
 743  * @param iterator_cls closure for iterator
 744  * @return -1 if this is not a keyword URI, otherwise number of
 745  *   keywords iterated over until iterator aborted
 746  */
 747 int
 748 GNUNET_FS_uri_ksk_get_keywords (const struct GNUNET_FS_Uri *uri,
 749                                 GNUNET_FS_KeywordIterator iterator,
 750                                 void *iterator_cls)
 751 {
 752   unsigned int i;
 753   char *keyword;
 754
 755   if (uri->type != GNUNET_FS_URI_KSK)
 756     return -1;
 757   if (iterator == NULL)
 758     return uri->data.ksk.keywordCount;
 759   for (i = 0; i < uri->data.ksk.keywordCount; i++)
 760   {
 761     keyword = uri->data.ksk.keywords[i];
 762     /* first character of keyword indicates
 763      * if it is mandatory or not */
 764     if (GNUNET_OK != iterator (iterator_cls, &keyword[1], keyword[0] == '+'))
 765       return i;
 766   }
 767   return i;
 768 }
 769
 770
 771 /**
 772  * Add the given keyword to the set of keywords represented by the URI.
 773  * Does nothing if the keyword is already present.
 774  *
 775  * @param uri ksk uri to modify
 776  * @param keyword keyword to add
 777  * @param is_mandatory is this keyword mandatory?
 778  */
 779 void
 780 GNUNET_FS_uri_ksk_add_keyword (struct GNUNET_FS_Uri *uri, const char *keyword,
 781                                int is_mandatory)
 782 {
 783   unsigned int i;
 784   const char *old;
 785   char *n;
 786
 787   GNUNET_assert (uri->type == GNUNET_FS_URI_KSK);
 788   for (i = 0; i < uri->data.ksk.keywordCount; i++)
 789   {
 790     old = uri->data.ksk.keywords[i];
 791     if (0 == strcmp (&old[1], keyword))
 792       return;
 793   }
 794   GNUNET_asprintf (&n, is_mandatory ? "+%s" : " %s", keyword);
 795   GNUNET_array_append (uri->data.ksk.keywords, uri->data.ksk.keywordCount, n);
 796 }
 797
 798
 799 /**
 800  * Remove the given keyword from the set of keywords represented by the URI.
 801  * Does nothing if the keyword is not present.
 802  *
 803  * @param uri ksk uri to modify
 804  * @param keyword keyword to add
 805  */
 806 void
 807 GNUNET_FS_uri_ksk_remove_keyword (struct GNUNET_FS_Uri *uri,
 808                                   const char *keyword)
 809 {
 810   unsigned int i;
 811   char *old;
 812
 813   GNUNET_assert (uri->type == GNUNET_FS_URI_KSK);
 814   for (i = 0; i < uri->data.ksk.keywordCount; i++)
 815   {
 816     old = uri->data.ksk.keywords[i];
 817     if (0 == strcmp (&old[1], keyword))
 818     {
 819       uri->data.ksk.keywords[i] =
 820           uri->data.ksk.keywords[uri->data.ksk.keywordCount - 1];
 821       GNUNET_array_grow (uri->data.ksk.keywords, uri->data.ksk.keywordCount,
 822                          uri->data.ksk.keywordCount - 1);
 823       GNUNET_free (old);
 824       return;
 825     }
 826   }
 827 }
 828
 829
 830 /**
 831  * Obtain the identity of the peer offering the data
 832  *
 833  * @param uri the location URI to inspect
 834  * @param peer where to store the identify of the peer (presumably) offering the content
 835  * @return GNUNET_SYSERR if this is not a location URI, otherwise GNUNET_OK
 836  */
 837 int
 838 GNUNET_FS_uri_loc_get_peer_identity (const struct GNUNET_FS_Uri *uri,
 839                                      struct GNUNET_PeerIdentity *peer)
 840 {
 841   if (uri->type != GNUNET_FS_URI_LOC)
 842     return GNUNET_SYSERR;
 843   GNUNET_CRYPTO_hash (&uri->data.loc.peer,
 844                       sizeof (struct GNUNET_CRYPTO_EccPublicKey),
 845                       &peer->hashPubKey);
 846   return GNUNET_OK;
 847 }
 848
 849
 850 /**
 851  * Obtain the expiration of the LOC URI.
 852  *
 853  * @param uri location URI to get the expiration from
 854  * @return expiration time of the URI
 855  */
 856 struct GNUNET_TIME_Absolute
 857 GNUNET_FS_uri_loc_get_expiration (const struct GNUNET_FS_Uri *uri)
 858 {
 859   GNUNET_assert (uri->type == GNUNET_FS_URI_LOC);
 860   return uri->data.loc.expirationTime;
 861 }
 862
 863
 864
 865 /**
 866  * Obtain the URI of the content itself.
 867  *
 868  * @param uri location URI to get the content URI from
 869  * @return NULL if argument is not a location URI
 870  */
 871 struct GNUNET_FS_Uri *
 872 GNUNET_FS_uri_loc_get_uri (const struct GNUNET_FS_Uri *uri)
 873 {
 874   struct GNUNET_FS_Uri *ret;
 875
 876   if (uri->type != GNUNET_FS_URI_LOC)
 877     return NULL;
 878   ret = GNUNET_new (struct GNUNET_FS_Uri);
 879   ret->type = GNUNET_FS_URI_CHK;
 880   ret->data.chk = uri->data.loc.fi;
 881   return ret;
 882 }
 883
 884
 885 /**
 886  * Construct a location URI (this peer will be used for the location).
 887  *
 888  * @param baseUri content offered by the sender
 889  * @param cfg configuration information (used to find our hostkey)
 890  * @param expiration_time how long will the content be offered?
 891  * @return the location URI, NULL on error
 892  */
 893 struct GNUNET_FS_Uri *
 894 GNUNET_FS_uri_loc_create (const struct GNUNET_FS_Uri *baseUri,
 895                           const struct GNUNET_CONFIGURATION_Handle *cfg,
 896                           struct GNUNET_TIME_Absolute expiration_time)
 897 {
 898   struct GNUNET_FS_Uri *uri;
 899   struct GNUNET_CRYPTO_EccPrivateKey *my_private_key;
 900   struct GNUNET_CRYPTO_EccPublicKey my_public_key;
 901   char *keyfile;
 902   struct LocUriAssembly ass;
 903
 904   if (baseUri->type != GNUNET_FS_URI_CHK)
 905     return NULL;
 906   if (GNUNET_OK !=
 907       GNUNET_CONFIGURATION_get_value_filename (cfg, "PEER", "PRIVATE_KEY",
 908                                                &keyfile))
 909   {
 910     GNUNET_log (GNUNET_ERROR_TYPE_ERROR,
 911                 _("Lacking key configuration settings.\n"));
 912     return NULL;
 913   }
 914   if (NULL == (my_private_key = GNUNET_CRYPTO_ecc_key_create_from_file (keyfile)))
 915   {
 916     GNUNET_log (GNUNET_ERROR_TYPE_ERROR,
 917                 _("Could not access hostkey file `%s'.\n"), keyfile);
 918     GNUNET_free (keyfile);
 919     return NULL;
 920   }
 921   GNUNET_free (keyfile);
 922   GNUNET_CRYPTO_ecc_key_get_public (my_private_key, &my_public_key);
 923   ass.purpose.size = htonl (sizeof (struct LocUriAssembly));
 924   ass.purpose.purpose = htonl (GNUNET_SIGNATURE_PURPOSE_PEER_PLACEMENT);
 925   ass.exptime = GNUNET_TIME_absolute_hton (expiration_time);
 926   ass.fi = baseUri->data.chk;
 927   ass.peer = my_public_key;
 928   uri = GNUNET_new (struct GNUNET_FS_Uri);
 929   uri->type = GNUNET_FS_URI_LOC;
 930   uri->data.loc.fi = baseUri->data.chk;
 931   uri->data.loc.expirationTime = expiration_time;
 932   uri->data.loc.peer = my_public_key;
 933   GNUNET_assert (GNUNET_OK ==
 934                  GNUNET_CRYPTO_ecc_sign (my_private_key, &ass.purpose,
 935                                          &uri->data.loc.contentSignature));
 936   GNUNET_CRYPTO_ecc_key_free (my_private_key);
 937   return uri;
 938 }
 939
 940
 941 /**
 942  * Create an SKS URI from a namespace ID and an identifier.
 943  *
 944  * @param ns namespace ID
 945  * @param id identifier
 946  * @return an FS URI for the given namespace and identifier
 947  */
 948 struct GNUNET_FS_Uri *
 949 GNUNET_FS_uri_sks_create (const struct GNUNET_CRYPTO_EccPublicKey *ns,
 950                           const char *id)
 951 {
 952   struct GNUNET_FS_Uri *ns_uri;
 953
 954   ns_uri = GNUNET_new (struct GNUNET_FS_Uri);
 955   ns_uri->type = GNUNET_FS_URI_SKS;
 956   ns_uri->data.sks.ns = *ns;
 957   ns_uri->data.sks.identifier = GNUNET_strdup (id);
 958   return ns_uri;
 959 }
 960
 961
 962 /**
 963  * Merge the sets of keywords from two KSK URIs.
 964  * (useful for merging the canonicalized keywords with
 965  * the original keywords for sharing).
 966  *
 967  * @param u1 first uri
 968  * @param u2 second uri
 969  * @return merged URI, NULL on error
 970  */
 971 struct GNUNET_FS_Uri *
 972 GNUNET_FS_uri_ksk_merge (const struct GNUNET_FS_Uri *u1,
 973                          const struct GNUNET_FS_Uri *u2)
 974 {
 975   struct GNUNET_FS_Uri *ret;
 976   unsigned int kc;
 977   unsigned int i;
 978   unsigned int j;
 979   int found;
 980   const char *kp;
 981   char **kl;
 982
 983   if ((u1 == NULL) && (u2 == NULL))
 984     return NULL;
 985   if (u1 == NULL)
 986     return GNUNET_FS_uri_dup (u2);
 987   if (u2 == NULL)
 988     return GNUNET_FS_uri_dup (u1);
 989   if ((u1->type != GNUNET_FS_URI_KSK) || (u2->type != GNUNET_FS_URI_KSK))
 990   {
 991     GNUNET_break (0);
 992     return NULL;
 993   }
 994   kc = u1->data.ksk.keywordCount;
 995   kl = GNUNET_malloc ((kc + u2->data.ksk.keywordCount) * sizeof (char *));
 996   for (i = 0; i < u1->data.ksk.keywordCount; i++)
 997     kl[i] = GNUNET_strdup (u1->data.ksk.keywords[i]);
 998   for (i = 0; i < u2->data.ksk.keywordCount; i++)
 999   {
1000     kp = u2->data.ksk.keywords[i];
1001     found = 0;
1002     for (j = 0; j < u1->data.ksk.keywordCount; j++)
1003       if (0 == strcmp (kp + 1, kl[j] + 1))
1004       {
1005         found = 1;
1006         if (kp[0] == '+')
1007           kl[j][0] = '+';
1008         break;
1009       }
1010     if (0 == found)
1011       kl[kc++] = GNUNET_strdup (kp);
1012   }
1013   ret = GNUNET_new (struct GNUNET_FS_Uri);
1014   ret->type = GNUNET_FS_URI_KSK;
1015   ret->data.ksk.keywordCount = kc;
1016   ret->data.ksk.keywords = kl;
1017   return ret;
1018 }
1019
1020
1021 /**
1022  * Duplicate URI.
1023  *
1024  * @param uri the URI to duplicate
1025  * @return copy of the URI
1026  */
1027 struct GNUNET_FS_Uri *
1028 GNUNET_FS_uri_dup (const struct GNUNET_FS_Uri *uri)
1029 {
1030   struct GNUNET_FS_Uri *ret;
1031   unsigned int i;
1032
1033   if (uri == NULL)
1034     return NULL;
1035   ret = GNUNET_new (struct GNUNET_FS_Uri);
1036   memcpy (ret, uri, sizeof (struct GNUNET_FS_Uri));
1037   switch (ret->type)
1038   {
1039   case GNUNET_FS_URI_KSK:
1040     if (ret->data.ksk.keywordCount >=
1041         GNUNET_MAX_MALLOC_CHECKED / sizeof (char *))
1042     {
1043       GNUNET_break (0);
1044       GNUNET_free (ret);
1045       return NULL;
1046     }
1047     if (ret->data.ksk.keywordCount > 0)
1048     {
1049       ret->data.ksk.keywords =
1050           GNUNET_malloc (ret->data.ksk.keywordCount * sizeof (char *));
1051       for (i = 0; i < ret->data.ksk.keywordCount; i++)
1052         ret->data.ksk.keywords[i] = GNUNET_strdup (uri->data.ksk.keywords[i]);
1053     }
1054     else
1055       ret->data.ksk.keywords = NULL;    /* just to be sure */
1056     break;
1057   case GNUNET_FS_URI_SKS:
1058     ret->data.sks.identifier = GNUNET_strdup (uri->data.sks.identifier);
1059     break;
1060   case GNUNET_FS_URI_LOC:
1061     break;
1062   default:
1063     break;
1064   }
1065   return ret;
1066 }
1067
1068
1069 /**
1070  * Create an FS URI from a single user-supplied string of keywords.
1071  * The string is broken up at spaces into individual keywords.
1072  * Keywords that start with "+" are mandatory.  Double-quotes can
1073  * be used to prevent breaking up strings at spaces (and also
1074  * to specify non-mandatory keywords starting with "+").
1075  *
1076  * Keywords must contain a balanced number of double quotes and
1077  * double quotes can not be used in the actual keywords (for
1078  * example, the string '""foo bar""' will be turned into two
1079  * "OR"ed keywords 'foo' and 'bar', not into '"foo bar"'.
1080  *
1081  * @param keywords the keyword string
1082  * @param emsg where to store an error message
1083  * @return an FS URI for the given keywords, NULL
1084  *  if keywords is not legal (i.e. empty).
1085  */
1086 struct GNUNET_FS_Uri *
1087 GNUNET_FS_uri_ksk_create (const char *keywords, char **emsg)
1088 {
1089   char **keywordarr;
1090   unsigned int num_Words;
1091   int inWord;
1092   char *pos;
1093   struct GNUNET_FS_Uri *uri;
1094   char *searchString;
1095   int saw_quote;
1096
1097   if (keywords == NULL)
1098   {
1099     *emsg = GNUNET_strdup (_("No keywords specified!\n"));
1100     GNUNET_break (0);
1101     return NULL;
1102   }
1103   searchString = GNUNET_strdup (keywords);
1104   num_Words = 0;
1105   inWord = 0;
1106   saw_quote = 0;
1107   pos = searchString;
1108   while ('\0' != *pos)
1109   {
1110     if ((saw_quote == 0) && (isspace ((unsigned char) *pos)))
1111     {
1112       inWord = 0;
1113     }
1114     else if (0 == inWord)
1115     {
1116       inWord = 1;
1117       ++num_Words;
1118     }
1119     if ('"' == *pos)
1120       saw_quote = (saw_quote + 1) % 2;
1121     pos++;
1122   }
1123   if (num_Words == 0)
1124   {
1125     GNUNET_free (searchString);
1126     *emsg = GNUNET_strdup (_("No keywords specified!\n"));
1127     return NULL;
1128   }
1129   if (saw_quote != 0)
1130   {
1131     GNUNET_free (searchString);
1132     *emsg = GNUNET_strdup (_("Number of double-quotes not balanced!\n"));
1133     return NULL;
1134   }
1135   keywordarr = GNUNET_malloc (num_Words * sizeof (char *));
1136   num_Words = 0;
1137   inWord = 0;
1138   pos = searchString;
1139   while ('\0' != *pos)
1140   {
1141     if ((saw_quote == 0) && (isspace ((unsigned char) *pos)))
1142     {
1143       inWord = 0;
1144       *pos = '\0';
1145     }
1146     else if (0 == inWord)
1147     {
1148       keywordarr[num_Words] = pos;
1149       inWord = 1;
1150       ++num_Words;
1151     }
1152     if ('"' == *pos)
1153       saw_quote = (saw_quote + 1) % 2;
1154     pos++;
1155   }
1156   uri =
1157       GNUNET_FS_uri_ksk_create_from_args (num_Words,
1158                                           (const char **) keywordarr);
1159   GNUNET_free (keywordarr);
1160   GNUNET_free (searchString);
1161   return uri;
1162 }
1163
1164
1165 /**
1166  * Create an FS URI from a user-supplied command line of keywords.
1167  * Arguments should start with "+" to indicate mandatory
1168  * keywords.
1169  *
1170  * @param argc number of keywords
1171  * @param argv keywords (double quotes are not required for
1172  *             keywords containing spaces; however, double
1173  *             quotes are required for keywords starting with
1174  *             "+"); there is no mechanism for having double
1175  *             quotes in the actual keywords (if the user
1176  *             did specifically specify double quotes, the
1177  *             caller should convert each double quote
1178  *             into two single quotes).
1179  * @return an FS URI for the given keywords, NULL
1180  *  if keywords is not legal (i.e. empty).
1181  */
1182 struct GNUNET_FS_Uri *
1183 GNUNET_FS_uri_ksk_create_from_args (unsigned int argc, const char **argv)
1184 {
1185   unsigned int i;
1186   struct GNUNET_FS_Uri *uri;
1187   const char *keyword;
1188   char *val;
1189   const char *r;
1190   char *w;
1191   char *emsg;
1192
1193   if (argc == 0)
1194     return NULL;
1195   /* allow URI to be given as one and only keyword and
1196    * handle accordingly */
1197   emsg = NULL;
1198   if ((argc == 1) && (strlen (argv[0]) > strlen (GNUNET_FS_URI_PREFIX)) &&
1199       (0 ==
1200        strncmp (argv[0], GNUNET_FS_URI_PREFIX, strlen (GNUNET_FS_URI_PREFIX)))
1201       && (NULL != (uri = GNUNET_FS_uri_parse (argv[0], &emsg))))
1202     return uri;
1203   GNUNET_free_non_null (emsg);
1204   uri = GNUNET_new (struct GNUNET_FS_Uri);
1205   uri->type = GNUNET_FS_URI_KSK;
1206   uri->data.ksk.keywordCount = argc;
1207   uri->data.ksk.keywords = GNUNET_malloc (argc * sizeof (char *));
1208   for (i = 0; i < argc; i++)
1209   {
1210     keyword = argv[i];
1211     if (keyword[0] == '+')
1212       val = GNUNET_strdup (keyword);
1213     else
1214       GNUNET_asprintf (&val, " %s", keyword);
1215     r = val;
1216     w = val;
1217     while ('\0' != *r)
1218     {
1219       if ('"' == *r)
1220         r++;
1221       else
1222         *(w++) = *(r++);
1223     }
1224     *w = '\0';
1225     uri->data.ksk.keywords[i] = val;
1226   }
1227   return uri;
1228 }
1229
1230
1231 /**
1232  * Test if two URIs are equal.
1233  *
1234  * @param u1 one of the URIs
1235  * @param u2 the other URI
1236  * @return GNUNET_YES if the URIs are equal
1237  */
1238 int
1239 GNUNET_FS_uri_test_equal (const struct GNUNET_FS_Uri *u1,
1240                           const struct GNUNET_FS_Uri *u2)
1241 {
1242   int ret;
1243   unsigned int i;
1244   unsigned int j;
1245
1246   GNUNET_assert (u1 != NULL);
1247   GNUNET_assert (u2 != NULL);
1248   if (u1->type != u2->type)
1249     return GNUNET_NO;
1250   switch (u1->type)
1251   {
1252   case GNUNET_FS_URI_CHK:
1253     if (0 ==
1254         memcmp (&u1->data.chk, &u2->data.chk, sizeof (struct FileIdentifier)))
1255       return GNUNET_YES;
1256     return GNUNET_NO;
1257   case GNUNET_FS_URI_SKS:
1258     if ((0 ==
1259          memcmp (&u1->data.sks.ns, &u2->data.sks.ns,
1260                  sizeof (struct GNUNET_CRYPTO_EccPublicKey))) &&
1261         (0 == strcmp (u1->data.sks.identifier, u2->data.sks.identifier)))
1262
1263       return GNUNET_YES;
1264     return GNUNET_NO;
1265   case GNUNET_FS_URI_KSK:
1266     if (u1->data.ksk.keywordCount != u2->data.ksk.keywordCount)
1267       return GNUNET_NO;
1268     for (i = 0; i < u1->data.ksk.keywordCount; i++)
1269     {
1270       ret = GNUNET_NO;
1271       for (j = 0; j < u2->data.ksk.keywordCount; j++)
1272       {
1273         if (0 == strcmp (u1->data.ksk.keywords[i], u2->data.ksk.keywords[j]))
1274         {
1275           ret = GNUNET_YES;
1276           break;
1277         }
1278       }
1279       if (ret == GNUNET_NO)
1280         return GNUNET_NO;
1281     }
1282     return GNUNET_YES;
1283   case GNUNET_FS_URI_LOC:
1284     if (memcmp
1285         (&u1->data.loc, &u2->data.loc,
1286          sizeof (struct FileIdentifier) +
1287          sizeof (struct GNUNET_CRYPTO_EccPublicKey) +
1288          sizeof (struct GNUNET_TIME_Absolute) + sizeof (unsigned short) +
1289          sizeof (unsigned short)) != 0)
1290       return GNUNET_NO;
1291     return GNUNET_YES;
1292   default:
1293     return GNUNET_NO;
1294   }
1295 }
1296
1297
1298 /**
1299  * Is this a namespace URI?
1300  *
1301  * @param uri the uri to check
1302  * @return GNUNET_YES if this is an SKS uri
1303  */
1304 int
1305 GNUNET_FS_uri_test_sks (const struct GNUNET_FS_Uri *uri)
1306 {
1307   return uri->type == GNUNET_FS_URI_SKS;
1308 }
1309
1310
1311 /**
1312  * Get the ID of a namespace from the given
1313  * namespace URI.
1314  *
1315  * @param uri the uri to get the namespace ID from
1316  * @param pseudonym where to store the ID of the namespace
1317  * @return GNUNET_OK on success
1318  */
1319 int
1320 GNUNET_FS_uri_sks_get_namespace (const struct GNUNET_FS_Uri *uri,
1321                                  struct GNUNET_CRYPTO_EccPublicKey *pseudonym)
1322 {
1323   if (!GNUNET_FS_uri_test_sks (uri))
1324   {
1325     GNUNET_break (0);
1326     return GNUNET_SYSERR;
1327   }
1328   *pseudonym = uri->data.sks.ns;
1329   return GNUNET_OK;
1330 }
1331
1332
1333 /**
1334  * Get the content identifier of an SKS URI.
1335  *
1336  * @param uri the sks uri
1337  * @return NULL on error (not a valid SKS URI)
1338  */
1339 char *
1340 GNUNET_FS_uri_sks_get_content_id (const struct GNUNET_FS_Uri *uri)
1341 {
1342   if (!GNUNET_FS_uri_test_sks (uri))
1343   {
1344     GNUNET_break (0);
1345     return NULL;
1346   }
1347   return GNUNET_strdup (uri->data.sks.identifier);
1348 }
1349
1350
1351 /**
1352  * Convert namespace URI to a human readable format
1353  * (using the namespace description, if available).
1354  *
1355  * @param cfg configuration to use
1356  * @param uri SKS uri to convert
1357  * @return NULL on error (not an SKS URI)
1358  */
1359 char *
1360 GNUNET_FS_uri_sks_to_string_fancy (struct GNUNET_CONFIGURATION_Handle *cfg,
1361                                    const struct GNUNET_FS_Uri *uri)
1362 {
1363   char *ret;
1364   char *name;
1365   char *unique_name;
1366
1367   if (uri->type != GNUNET_FS_URI_SKS)
1368     return NULL;
1369   (void) GNUNET_FS_pseudonym_get_info (cfg, &uri->data.sks.ns,
1370                                     NULL, NULL, &name, NULL);
1371   unique_name = GNUNET_FS_pseudonym_name_uniquify (cfg, &uri->data.sks.ns, name, NULL);
1372   GNUNET_free (name);
1373   GNUNET_asprintf (&ret, "%s: %s", unique_name, uri->data.sks.identifier);
1374   GNUNET_free (unique_name);
1375   return ret;
1376 }
1377
1378
1379 /**
1380  * Is this a keyword URI?
1381  *
1382  * @param uri the uri
1383  * @return GNUNET_YES if this is a KSK uri
1384  */
1385 int
1386 GNUNET_FS_uri_test_ksk (const struct GNUNET_FS_Uri *uri)
1387 {
1388 #if EXTRA_CHECKS
1389   unsigned int i;
1390
1391   if (uri->type == GNUNET_FS_URI_KSK)
1392   {
1393     for (i=0;i < uri->data.ksk.keywordCount; i++)
1394       GNUNET_assert (uri->data.ksk.keywords[i] != NULL);
1395   }
1396 #endif
1397   return uri->type == GNUNET_FS_URI_KSK;
1398 }
1399
1400
1401 /**
1402  * Is this a file (or directory) URI?
1403  *
1404  * @param uri the uri to check
1405  * @return GNUNET_YES if this is a CHK uri
1406  */
1407 int
1408 GNUNET_FS_uri_test_chk (const struct GNUNET_FS_Uri *uri)
1409 {
1410   return uri->type == GNUNET_FS_URI_CHK;
1411 }
1412
1413
1414 /**
1415  * What is the size of the file that this URI
1416  * refers to?
1417  *
1418  * @param uri the CHK URI to inspect
1419  * @return size of the file as specified in the CHK URI
1420  */
1421 uint64_t
1422 GNUNET_FS_uri_chk_get_file_size (const struct GNUNET_FS_Uri * uri)
1423 {
1424   switch (uri->type)
1425   {
1426   case GNUNET_FS_URI_CHK:
1427     return GNUNET_ntohll (uri->data.chk.file_length);
1428   case GNUNET_FS_URI_LOC:
1429     return GNUNET_ntohll (uri->data.loc.fi.file_length);
1430   default:
1431     GNUNET_assert (0);
1432   }
1433   return 0;                     /* unreachable */
1434 }
1435
1436
1437 /**
1438  * Is this a location URI?
1439  *
1440  * @param uri the uri to check
1441  * @return GNUNET_YES if this is a LOC uri
1442  */
1443 int
1444 GNUNET_FS_uri_test_loc (const struct GNUNET_FS_Uri *uri)
1445 {
1446   return uri->type == GNUNET_FS_URI_LOC;
1447 }
1448
1449
1450 /**
1451  * Add a keyword as non-mandatory (with ' '-prefix) to the
1452  * given keyword list at offset 'index'.  The array is
1453  * guaranteed to be long enough.
1454  *
1455  * @param s keyword to add
1456  * @param array array to add the keyword to
1457  * @param index offset where to add the keyword
1458  */
1459 static void
1460 insert_non_mandatory_keyword (const char *s, char **array, int index)
1461 {
1462   char *nkword;
1463   GNUNET_asprintf (&nkword, " %s", /* space to mark as 'non mandatory' */ s);
1464   array[index] = nkword;
1465 }
1466
1467
1468 /**
1469  * Test if the given keyword 's' is already present in the
1470  * given array, ignoring the '+'-mandatory prefix in the array.
1471  *
1472  * @param s keyword to test
1473  * @param array keywords to test against, with ' ' or '+' prefix to ignore
1474  * @param array_length length of the array
1475  * @return GNUNET_YES if the keyword exists, GNUNET_NO if not
1476  */
1477 static int
1478 find_duplicate (const char *s, const char **array, int array_length)
1479 {
1480   int j;
1481
1482   for (j = array_length - 1; j >= 0; j--)
1483     if (0 == strcmp (&array[j][1], s))
1484       return GNUNET_YES;
1485   return GNUNET_NO;
1486 }
1487
1488
1489 /**
1490  * FIXME: comment
1491  */
1492 static char *
1493 normalize_metadata (enum EXTRACTOR_MetaFormat format, const char *data,
1494     size_t data_len)
1495 {
1496   uint8_t *free_str = NULL;
1497   uint8_t *str_to_normalize = (uint8_t *) data;
1498   uint8_t *normalized;
1499   size_t r_len;
1500   if (str_to_normalize == NULL)
1501     return NULL;
1502   /* Don't trust libextractor */
1503   if (format == EXTRACTOR_METAFORMAT_UTF8)
1504   {
1505     free_str = (uint8_t *) u8_check ((const uint8_t *) data, data_len);
1506     if (free_str == NULL)
1507       free_str = NULL;
1508     else
1509       format = EXTRACTOR_METAFORMAT_C_STRING;
1510   }
1511   if (format == EXTRACTOR_METAFORMAT_C_STRING)
1512   {
1513     free_str = u8_strconv_from_encoding (data, locale_charset (), iconveh_escape_sequence);
1514     if (free_str == NULL)
1515       return NULL;
1516   }
1517
1518   normalized = u8_tolower (str_to_normalize, strlen ((char *) str_to_normalize), NULL, UNINORM_NFD, NULL, &r_len);
1519   /* free_str is allocated by libunistring internally, use free() */
1520   if (free_str != NULL)
1521     free (free_str);
1522   if (normalized != NULL)
1523   {
1524     /* u8_tolower allocates a non-NULL-terminated string! */
1525     free_str = GNUNET_malloc (r_len + 1);
1526     memcpy (free_str, normalized, r_len);
1527     free_str[r_len] = '\0';
1528     free (normalized);
1529     normalized = free_str;
1530   }
1531   return (char *) normalized;
1532 }
1533
1534 /**
1535  * Counts the number of UTF-8 characters (not bytes) in the string,
1536  * returns that count.
1537  */
1538 static size_t
1539 u8_strcount (const uint8_t *s)
1540 {
1541   size_t count;
1542   ucs4_t c;
1543   GNUNET_assert (s != NULL);
1544   if (s[0] == 0)
1545     return 0;
1546   for (count = 0; s != NULL; count++)
1547     s = u8_next (&c, s);
1548   return count - 1;
1549 }
1550
1551
1552 /**
1553  * Break the filename up by matching [], () and {} pairs to make
1554  * keywords. In case of nesting parentheses only the inner pair counts.
1555  * You can't escape parentheses to scan something like "[blah\{foo]" to
1556  * make a "blah{foo" keyword, this function is only a heuristic!
1557  *
1558  * @param s string to break down.
1559  * @param array array to fill with enclosed tokens. If NULL, then tokens
1560  *        are only counted.
1561  * @param index index at which to start filling the array (entries prior
1562  *        to it are used to check for duplicates). ignored if array == NULL.
1563  * @return number of tokens counted (including duplicates), or number of
1564  *         tokens extracted (excluding duplicates). 0 if there are no
1565  *         matching parens in the string (when counting), or when all tokens
1566  *         were duplicates (when extracting).
1567  */
1568 static int
1569 get_keywords_from_parens (const char *s, char **array, int index)
1570 {
1571   int count = 0;
1572   char *open_paren;
1573   char *close_paren;
1574   char *ss;
1575   char tmp;
1576
1577   if (NULL == s)
1578     return 0;
1579   ss = GNUNET_strdup (s);
1580   open_paren = ss - 1;
1581   while (NULL != (open_paren = strpbrk (open_paren + 1, "[{(")))
1582   {
1583     int match = 0;
1584
1585     close_paren = strpbrk (open_paren + 1, "]})");
1586     if (NULL == close_paren)
1587       continue;
1588     switch (open_paren[0])
1589     {
1590     case '[':
1591       if (']' == close_paren[0])
1592         match = 1;
1593       break;
1594     case '{':
1595       if ('}' == close_paren[0])
1596         match = 1;
1597       break;
1598     case '(':
1599       if (')' == close_paren[0])
1600         match = 1;
1601       break;
1602     default:
1603       break;
1604     }
1605     if (match && (close_paren - open_paren > 1))
1606     {
1607       tmp = close_paren[0];
1608       close_paren[0] = '\0';
1609       /* Keywords must be at least 3 characters long */
1610       if (u8_strcount ((const uint8_t *) &open_paren[1]) <= 2)
1611       {
1612         close_paren[0] = tmp;
1613         continue;
1614       }
1615       if (NULL != array)
1616       {
1617         char *normalized;
1618         if (GNUNET_NO == find_duplicate ((const char *) &open_paren[1],
1619             (const char **) array, index + count))
1620         {
1621           insert_non_mandatory_keyword ((const char *) &open_paren[1], array,
1622                                         index + count);
1623           count++;
1624         }
1625         normalized = normalize_metadata (EXTRACTOR_METAFORMAT_UTF8,
1626             &open_paren[1], close_paren - &open_paren[1]);
1627         if (normalized != NULL)
1628         {
1629           if (GNUNET_NO == find_duplicate ((const char *) normalized,
1630               (const char **) array, index + count))
1631           {
1632             insert_non_mandatory_keyword ((const char *) normalized, array,
1633                                           index + count);
1634             count++;
1635           }
1636           GNUNET_free (normalized);
1637         }
1638       }
1639       else
1640         count++;
1641       close_paren[0] = tmp;
1642     }
1643   }
1644   GNUNET_free (ss);
1645   return count;
1646 }
1647
1648
1649 /**
1650  * Where to break up keywords
1651  */
1652 #define TOKENS "_. /-!?#&+@\"\'\\;:,()[]{}$<>|"
1653
1654 /**
1655  * Break the filename up by TOKENS to make
1656  * keywords.
1657  *
1658  * @param s string to break down.
1659  * @param array array to fill with tokens. If NULL, then tokens are only
1660  *        counted.
1661  * @param index index at which to start filling the array (entries prior
1662  *        to it are used to check for duplicates). ignored if array == NULL.
1663  * @return number of tokens (>1) counted (including duplicates), or number of
1664  *         tokens extracted (excluding duplicates). 0 if there are no
1665  *         separators in the string (when counting), or when all tokens were
1666  *         duplicates (when extracting).
1667  */
1668 static int
1669 get_keywords_from_tokens (const char *s, char **array, int index)
1670 {
1671   char *p;
1672   char *ss;
1673   int seps = 0;
1674
1675   ss = GNUNET_strdup (s);
1676   for (p = strtok (ss, TOKENS); p != NULL; p = strtok (NULL, TOKENS))
1677   {
1678     /* Keywords must be at least 3 characters long */
1679     if (u8_strcount ((const uint8_t *) p) <= 2)
1680       continue;
1681     if (NULL != array)
1682     {
1683       char *normalized;
1684       if (GNUNET_NO == find_duplicate (p, (const char **) array, index + seps))
1685       {
1686         insert_non_mandatory_keyword (p, array,
1687                                       index + seps);
1688         seps++;
1689       }
1690       normalized = normalize_metadata (EXTRACTOR_METAFORMAT_UTF8,
1691           p, strlen (p));
1692       if (normalized != NULL)
1693       {
1694         if (GNUNET_NO == find_duplicate ((const char *) normalized,
1695             (const char **) array, index + seps))
1696         {
1697           insert_non_mandatory_keyword ((const char *) normalized, array,
1698                                   index + seps);
1699           seps++;
1700         }
1701         GNUNET_free (normalized);
1702       }
1703     }
1704     else
1705       seps++;
1706   }
1707   GNUNET_free (ss);
1708   return seps;
1709 }
1710 #undef TOKENS
1711
1712 /**
1713  * Function called on each value in the meta data.
1714  * Adds it to the URI.
1715  *
1716  * @param cls URI to update
1717  * @param plugin_name name of the plugin that produced this value;
1718  *        special values can be used (i.e. '&lt;zlib&gt;' for zlib being
1719  *        used in the main libextractor library and yielding
1720  *        meta data).
1721  * @param type libextractor-type describing the meta data
1722  * @param format basic format information about data
1723  * @param data_mime_type mime-type of data (not of the original file);
1724  *        can be NULL (if mime-type is not known)
1725  * @param data actual meta-data found
1726  * @param data_len number of bytes in data
1727  * @return 0 (always)
1728  */
1729 static int
1730 gather_uri_data (void *cls, const char *plugin_name,
1731                  enum EXTRACTOR_MetaType type, enum EXTRACTOR_MetaFormat format,
1732                  const char *data_mime_type, const char *data, size_t data_len)
1733 {
1734   struct GNUNET_FS_Uri *uri = cls;
1735   char *normalized_data;
1736
1737   if ((format != EXTRACTOR_METAFORMAT_UTF8) &&
1738       (format != EXTRACTOR_METAFORMAT_C_STRING))
1739     return 0;
1740   /* Keywords must be at least 3 characters long
1741    * If given non-utf8 string it will, most likely, find it to be invalid,
1742    * and will return the length of its valid part, skipping the keyword.
1743    * If it does - fix the extractor, not this check!
1744    */
1745   if (u8_strcount ((const uint8_t *) data) <= 2)
1746   {
1747     return 0;
1748   }
1749   normalized_data = normalize_metadata (format, data, data_len);
1750   if (!find_duplicate (data, (const char **) uri->data.ksk.keywords, uri->data.ksk.keywordCount))
1751   {
1752     insert_non_mandatory_keyword (data,
1753                                   uri->data.ksk.keywords, uri->data.ksk.keywordCount);
1754     uri->data.ksk.keywordCount++;
1755   }
1756   if (normalized_data != NULL)
1757   {
1758     if (!find_duplicate (normalized_data, (const char **) uri->data.ksk.keywords, uri->data.ksk.keywordCount))
1759     {
1760       insert_non_mandatory_keyword (normalized_data,
1761                                     uri->data.ksk.keywords, uri->data.ksk.keywordCount);
1762       uri->data.ksk.keywordCount++;
1763     }
1764     GNUNET_free (normalized_data);
1765   }
1766   return 0;
1767 }
1768
1769
1770 /**
1771  * Construct a keyword-URI from meta-data (take all entries
1772  * in the meta-data and construct one large keyword URI
1773  * that lists all keywords that can be found in the meta-data).
1774  *
1775  * @param md metadata to use
1776  * @return NULL on error, otherwise a KSK URI
1777  */
1778 struct GNUNET_FS_Uri *
1779 GNUNET_FS_uri_ksk_create_from_meta_data (const struct GNUNET_CONTAINER_MetaData
1780                                          *md)
1781 {
1782   struct GNUNET_FS_Uri *ret;
1783   char *filename;
1784   char *full_name = NULL;
1785   char *ss;
1786   int ent;
1787   int tok_keywords = 0;
1788   int paren_keywords = 0;
1789
1790   if (md == NULL)
1791     return NULL;
1792   ret = GNUNET_new (struct GNUNET_FS_Uri);
1793   ret->type = GNUNET_FS_URI_KSK;
1794   ent = GNUNET_CONTAINER_meta_data_iterate (md, NULL, NULL);
1795   if (ent > 0)
1796   {
1797     full_name = GNUNET_CONTAINER_meta_data_get_first_by_types (md,
1798         EXTRACTOR_METATYPE_GNUNET_ORIGINAL_FILENAME, -1);
1799     if (NULL != full_name)
1800     {
1801       filename = full_name;
1802       while (NULL != (ss = strstr (filename, DIR_SEPARATOR_STR)))
1803         filename = ss + 1;
1804       tok_keywords = get_keywords_from_tokens (filename, NULL, 0);
1805       paren_keywords = get_keywords_from_parens (filename, NULL, 0);
1806     }
1807     /* x2 because there might be a normalized variant of every keyword */
1808     ret->data.ksk.keywords = GNUNET_malloc (sizeof (char *) * (ent
1809         + tok_keywords + paren_keywords) * 2);
1810     GNUNET_CONTAINER_meta_data_iterate (md, &gather_uri_data, ret);
1811   }
1812   if (tok_keywords > 0)
1813     ret->data.ksk.keywordCount += get_keywords_from_tokens (filename,
1814         ret->data.ksk.keywords,
1815         ret->data.ksk.keywordCount);
1816   if (paren_keywords > 0)
1817     ret->data.ksk.keywordCount += get_keywords_from_parens (filename,
1818         ret->data.ksk.keywords,
1819         ret->data.ksk.keywordCount);
1820   if (ent > 0)
1821     GNUNET_free_non_null (full_name);
1822   return ret;
1823 }
1824
1825
1826 /**
1827  * In URI-encoding, does the given character
1828  * need to be encoded using %-encoding?
1829  */
1830 static int
1831 needs_percent (char c)
1832 {
1833   return (!
1834           ((isalnum ((unsigned char) c)) || (c == '-') || (c == '_') ||
1835            (c == '.') || (c == '~')));
1836 }
1837
1838
1839 /**
1840  * Convert a KSK URI to a string.
1841  *
1842  * @param uri the URI to convert
1843  * @return NULL on error (i.e. keywordCount == 0)
1844  */
1845 static char *
1846 uri_ksk_to_string (const struct GNUNET_FS_Uri *uri)
1847 {
1848   char **keywords;
1849   unsigned int keywordCount;
1850   size_t n;
1851   char *ret;
1852   unsigned int i;
1853   unsigned int j;
1854   unsigned int wpos;
1855   size_t slen;
1856   const char *keyword;
1857
1858   if (uri->type != GNUNET_FS_URI_KSK)
1859     return NULL;
1860   keywords = uri->data.ksk.keywords;
1861   keywordCount = uri->data.ksk.keywordCount;
1862   n = keywordCount + strlen (GNUNET_FS_URI_PREFIX) +
1863       strlen (GNUNET_FS_URI_KSK_INFIX) + 1;
1864   for (i = 0; i < keywordCount; i++)
1865   {
1866     keyword = keywords[i];
1867     slen = strlen (keyword);
1868     n += slen;
1869     for (j = 0; j < slen; j++)
1870     {
1871       if ((j == 0) && (keyword[j] == ' '))
1872       {
1873         n--;
1874         continue;               /* skip leading space */
1875       }
1876       if (needs_percent (keyword[j]))
1877         n += 2;                 /* will use %-encoding */
1878     }
1879   }
1880   ret = GNUNET_malloc (n);
1881   strcpy (ret, GNUNET_FS_URI_PREFIX);
1882   strcat (ret, GNUNET_FS_URI_KSK_INFIX);
1883   wpos = strlen (ret);
1884   for (i = 0; i < keywordCount; i++)
1885   {
1886     keyword = keywords[i];
1887     slen = strlen (keyword);
1888     for (j = 0; j < slen; j++)
1889     {
1890       if ((j == 0) && (keyword[j] == ' '))
1891         continue;               /* skip leading space */
1892       if (needs_percent (keyword[j]))
1893       {
1894         sprintf (&ret[wpos], "%%%02X", (unsigned char) keyword[j]);
1895         wpos += 3;
1896       }
1897       else
1898       {
1899         ret[wpos++] = keyword[j];
1900       }
1901     }
1902     if (i != keywordCount - 1)
1903       ret[wpos++] = '+';
1904   }
1905   return ret;
1906 }
1907
1908
1909 /**
1910  * Convert SKS URI to a string.
1911  *
1912  * @param uri sks uri to convert
1913  * @return NULL on error
1914  */
1915 static char *
1916 uri_sks_to_string (const struct GNUNET_FS_Uri *uri)
1917 {
1918   char *ret;
1919   char buf[1024];
1920
1921   if (GNUNET_FS_URI_SKS != uri->type)
1922     return NULL;
1923   ret = GNUNET_STRINGS_data_to_string (&uri->data.sks.ns,
1924                                        sizeof (struct GNUNET_CRYPTO_EccPublicKey),
1925                                        buf,
1926                                        sizeof (buf));
1927   GNUNET_assert (NULL != ret);
1928   ret[0] = '\0';
1929   GNUNET_asprintf (&ret, "%s%s%s/%s", GNUNET_FS_URI_PREFIX,
1930                    GNUNET_FS_URI_SKS_INFIX, buf,
1931                    uri->data.sks.identifier);
1932   return ret;
1933 }
1934
1935
1936 /**
1937  * Convert a CHK URI to a string.
1938  *
1939  * @param uri chk uri to convert
1940  * @return NULL on error
1941  */
1942 static char *
1943 uri_chk_to_string (const struct GNUNET_FS_Uri *uri)
1944 {
1945   const struct FileIdentifier *fi;
1946   char *ret;
1947   struct GNUNET_CRYPTO_HashAsciiEncoded keyhash;
1948   struct GNUNET_CRYPTO_HashAsciiEncoded queryhash;
1949
1950   if (uri->type != GNUNET_FS_URI_CHK)
1951     return NULL;
1952   fi = &uri->data.chk;
1953   GNUNET_CRYPTO_hash_to_enc (&fi->chk.key, &keyhash);
1954   GNUNET_CRYPTO_hash_to_enc (&fi->chk.query, &queryhash);
1955
1956   GNUNET_asprintf (&ret, "%s%s%s.%s.%llu", GNUNET_FS_URI_PREFIX,
1957                    GNUNET_FS_URI_CHK_INFIX, (const char *) &keyhash,
1958                    (const char *) &queryhash, GNUNET_ntohll (fi->file_length));
1959   return ret;
1960 }
1961
1962 /**
1963  * Convert binary data to a string.
1964  *
1965  * @param data binary data to convert
1966  * @param size number of bytes in data
1967  * @return converted data
1968  */
1969 static char *
1970 bin2enc (const void *data, size_t size)
1971 {
1972   /**
1973    * 64 characters for encoding, 6 bits per character
1974    */
1975   static char *tbl =
1976       "0123456789ABCDEFGHIJKLMNOPQRSTUVWXYZabcdefghijklmnopqrstuvwxyz_=";
1977
1978   size_t len;
1979   size_t pos;
1980   unsigned int bits;
1981   unsigned int hbits;
1982   char *ret;
1983
1984   GNUNET_assert (strlen (tbl) == 64);
1985   len = size * 8 / 6;
1986   if (((size * 8) % 6) != 0)
1987     len++;
1988   ret = GNUNET_malloc (len + 1);
1989   ret[len] = '\0';
1990   len = 0;
1991   bits = 0;
1992   hbits = 0;
1993   for (pos = 0; pos < size; pos++)
1994   {
1995     bits |= ((((const unsigned char *) data)[pos]) << hbits);
1996     hbits += 8;
1997     while (hbits >= 6)
1998     {
1999       ret[len++] = tbl[bits & 63];
2000       bits >>= 6;
2001       hbits -= 6;
2002     }
2003   }
2004   if (hbits > 0)
2005     ret[len] = tbl[bits & 63];
2006   return ret;
2007 }
2008
2009
2010 /**
2011  * Convert a LOC URI to a string.
2012  *
2013  * @param uri loc uri to convert
2014  * @return NULL on error
2015  */
2016 static char *
2017 uri_loc_to_string (const struct GNUNET_FS_Uri *uri)
2018 {
2019   char *ret;
2020   struct GNUNET_CRYPTO_HashAsciiEncoded keyhash;
2021   struct GNUNET_CRYPTO_HashAsciiEncoded queryhash;
2022   char *peerId;
2023   char *peerSig;
2024
2025   GNUNET_CRYPTO_hash_to_enc (&uri->data.loc.fi.chk.key, &keyhash);
2026   GNUNET_CRYPTO_hash_to_enc (&uri->data.loc.fi.chk.query, &queryhash);
2027   peerId =
2028       bin2enc (&uri->data.loc.peer,
2029                sizeof (struct GNUNET_CRYPTO_EccPublicKey));
2030   peerSig =
2031       bin2enc (&uri->data.loc.contentSignature,
2032                sizeof (struct GNUNET_CRYPTO_EccSignature));
2033   GNUNET_asprintf (&ret, "%s%s%s.%s.%llu.%s.%s.%llu", GNUNET_FS_URI_PREFIX,
2034                    GNUNET_FS_URI_LOC_INFIX, (const char *) &keyhash,
2035                    (const char *) &queryhash,
2036                    (unsigned long long) GNUNET_ntohll (uri->data.loc.
2037                                                        fi.file_length), peerId,
2038                    peerSig,
2039                    (unsigned long long) uri->data.loc.expirationTime.abs_value);
2040   GNUNET_free (peerSig);
2041   GNUNET_free (peerId);
2042   return ret;
2043 }
2044
2045
2046 /**
2047  * Convert a URI to a UTF-8 String.
2048  *
2049  * @param uri uri to convert to a string
2050  * @return the UTF-8 string
2051  */
2052 char *
2053 GNUNET_FS_uri_to_string (const struct GNUNET_FS_Uri *uri)
2054 {
2055   if (uri == NULL)
2056   {
2057     GNUNET_break (0);
2058     return NULL;
2059   }
2060   switch (uri->type)
2061   {
2062   case GNUNET_FS_URI_KSK:
2063     return uri_ksk_to_string (uri);
2064   case GNUNET_FS_URI_SKS:
2065     return uri_sks_to_string (uri);
2066   case GNUNET_FS_URI_CHK:
2067     return uri_chk_to_string (uri);
2068   case GNUNET_FS_URI_LOC:
2069     return uri_loc_to_string (uri);
2070   default:
2071     GNUNET_break (0);
2072     return NULL;
2073   }
2074 }
2075
2076 /* end of fs_uri.c */