more FS coding
[oweals/gnunet.git] / src / fs / fs_uri.c
1 /*
2      This file is part of GNUnet.
3      (C) 2003, 2004, 2005, 2006, 2007, 2008, 2009 Christian Grothoff (and other contributing authors)
4
5      GNUnet is free software; you can redistribute it and/or modify
6      it under the terms of the GNU General Public License as published
7      by the Free Software Foundation; either version 2, or (at your
8      option) any later version.
9
10      GNUnet is distributed in the hope that it will be useful, but
11      WITHOUT ANY WARRANTY; without even the implied warranty of
12      MERCHANTABILITY or FITNESS FOR A PARTICULAR PURPOSE.  See the GNU
13      General Public License for more details.
14
15      You should have received a copy of the GNU General Public License
16      along with GNUnet; see the file COPYING.  If not, write to the
17      Free Software Foundation, Inc., 59 Temple Place - Suite 330,
18      Boston, MA 02111-1307, USA.
19 */
20
21 /**
22  * @file fs/fs_uri.c
23  * @brief Parses and produces uri strings.
24  * @author Igor Wronsky, Christian Grothoff
25  *
26  * GNUnet URIs are of the general form "gnunet://MODULE/IDENTIFIER".
27  * The specific structure of "IDENTIFIER" depends on the module and
28  * maybe differenciated into additional subcategories if applicable.
29  * This module only deals with fs identifiers (MODULE = "fs").
30  * <p>
31  *
32  * This module only parses URIs for the AFS module.  The FS URIs fall
33  * into four categories, "chk", "sks", "ksk" and "loc".  The first three
34  * categories were named in analogy (!) to Freenet, but they do NOT
35  * work in exactly the same way.  They are very similar from the user's
36  * point of view (unique file identifier, subspace, keyword), but the
37  * implementation is rather different in pretty much every detail.
38  * The concrete URI formats are:
39  *
40  * <ul><li>
41  *
42  * First, there are URIs that identify a file.  They have the format
43  * "gnunet://fs/chk/HEX1.HEX2.SIZE".  These URIs can be used to
44  * download the file.  The description, filename, mime-type and other
45  * meta-data is NOT part of the file-URI since a URI uniquely
46  * identifies a resource (and the contents of the file would be the
47  * same even if it had a different description).
48  *
49  * </li><li>
50  *
51  * The second category identifies entries in a namespace.  The format
52  * is "gnunet://fs/sks/NAMESPACE/IDENTIFIER" where the namespace
53  * should be given in HEX.  Applications may allow using a nickname
54  * for the namespace if the nickname is not ambiguous.  The identifier
55  * can be either an ASCII sequence or a HEX-encoding.  If the
56  * identifier is in ASCII but the format is ambiguous and could denote
57  * a HEX-string a "/" is appended to indicate ASCII encoding.
58  *
59  * </li> <li>
60  *
61  * The third category identifies ordinary searches.  The format is
62  * "gnunet://fs/ksk/KEYWORD[+KEYWORD]*".  Using the "+" syntax
63  * it is possible to encode searches with the boolean "AND" operator.
64  * "+" is used since it indicates a commutative 'and' operation and
65  * is unlikely to be used in a keyword by itself.
66  *
67  * </li><li>
68  *
69  * The last category identifies a datum on a specific machine.  The
70  * format is "gnunet://fs/loc/HEX1.HEX2.SIZE.PEER.SIG.EXPTIME".  PEER is
71  * the BinName of the public key of the peer storing the datum.  The
72  * signature (SIG) certifies that this peer has this content.
73  * HEX1, HEX2 and SIZE correspond to a 'chk' URI.
74  *
75  * </li></ul>
76  *
77  * The encoding for hexadecimal values is defined in the hashing.c
78  * module in the gnunetutil library and discussed there.
79  * <p>
80  */
81 #include "platform.h"
82 #include "gnunet_fs_service.h"
83 #include "gnunet_signatures.h"
84 #include "fs.h"
85
86
87 /**
88  * Get a unique key from a URI.  This is for putting URIs
89  * into HashMaps.  The key may change between FS implementations.
90  *
91  * @param uri uri to convert to a unique key
92  * @param key wherer to store the unique key
93  */
94 void 
95 GNUNET_FS_uri_to_key (const struct GNUNET_FS_Uri *uri,
96                       GNUNET_HashCode * key)
97 {
98   switch (uri->type)
99     {
100     case chk:
101       *key = uri->data.chk.chk.query;
102       return;
103     case sks:
104       GNUNET_CRYPTO_hash (uri->data.sks.identifier,
105                           strlen (uri->data.sks.identifier), key);
106       break;
107     case ksk:
108       if (uri->data.ksk.keywordCount > 0)
109         GNUNET_CRYPTO_hash (uri->data.ksk.keywords[0],
110                             strlen (uri->data.ksk.keywords[0]), key);
111       break;
112     case loc:
113       GNUNET_CRYPTO_hash (&uri->data.loc.fi,
114                           sizeof (struct FileIdentifier) +
115                           sizeof (struct GNUNET_CRYPTO_RsaPublicKeyBinaryEncoded), key);
116       break;
117     default:
118       memset (key, 0, sizeof (GNUNET_HashCode));
119       break;
120     }
121 }
122
123
124 /**
125  * Convert keyword URI to a human readable format
126  * (i.e. the search query that was used in the first place)
127  *
128  * @param uri ksk uri to convert to a string 
129  * @return string with the keywords
130  */
131 char *
132 GNUNET_FS_uri_ksk_to_string_fancy (const struct GNUNET_FS_Uri *uri)
133 {
134   size_t n;
135   char *ret;
136   unsigned int i;
137   const char *keyword;
138   char **keywords;
139   unsigned int keywordCount;
140
141   if ((uri == NULL) || (uri->type != ksk))
142     {
143       GNUNET_break (0);
144       return NULL;
145     }
146   keywords = uri->data.ksk.keywords;
147   keywordCount = uri->data.ksk.keywordCount;
148   n = keywordCount + 1;
149   for (i = 0; i < keywordCount; i++)
150     {
151       keyword = keywords[i];
152       n += strlen (keyword) - 1;
153       if (NULL != strstr (&keyword[1], " "))
154         n += 2;
155       if (keyword[0] == '+')
156         n++;
157     }
158   ret = GNUNET_malloc (n);
159   strcpy (ret, "");
160   for (i = 0; i < keywordCount; i++)
161     {
162       keyword = keywords[i];
163       if (NULL != strstr (&keyword[1], " "))
164         {
165           strcat (ret, "\"");
166           if (keyword[0] == '+')
167             strcat (ret, keyword);
168           else
169             strcat (ret, &keyword[1]);
170           strcat (ret, "\"");
171         }
172       else
173         {
174           if (keyword[0] == '+')
175             strcat (ret, keyword);
176           else
177             strcat (ret, &keyword[1]);
178         }
179       strcat (ret, " ");
180     }
181   return ret;
182 }
183
184
185 /**
186  * Given a keyword with %-encoding (and possibly quotes to protect
187  * spaces), return a copy of the keyword without %-encoding and
188  * without double-quotes (%22).  Also, add a space at the beginning
189  * if there is not a '+'.
190  * 
191  * @param in string with %-encoding
192  * @param emsg where to store the parser error message (if any)
193  * @return decodded string with leading space (or preserved plus)
194  */
195 static char *
196 percent_decode_keyword (const char *in, char **emsg)
197 {
198   char *out;
199   char *ret;
200   unsigned int rpos;
201   unsigned int wpos;
202   unsigned int hx;
203
204   out = GNUNET_strdup (in);
205   rpos = 0;
206   wpos = 0;
207   while (out[rpos] != '\0')
208     {
209       if (out[rpos] == '%')
210         {
211           if (1 != sscanf (&out[rpos + 1], "%2X", &hx))
212             {
213               GNUNET_free (out);
214               *emsg = GNUNET_strdup (_("`%' must be followed by HEX number"));
215               return NULL;
216             }
217           rpos += 3;
218           if (hx == '"')
219             continue;           /* skip double quote */
220           out[wpos++] = (char) hx;
221         }
222       else
223         {
224           out[wpos++] = out[rpos++];
225         }
226     }
227   out[wpos] = '\0';
228   if (out[0] == '+')
229     {
230       ret = GNUNET_strdup (out);
231     }
232   else
233     {
234       /* need to prefix with space */
235       ret = GNUNET_malloc (strlen (out) + 2);
236       strcpy (ret, " ");
237       strcat (ret, out);
238     }
239   GNUNET_free (out);
240   return ret;
241 }
242
243
244 /**
245  * Parse a KSK URI.
246  *
247  * @param s an uri string
248  * @param emsg where to store the parser error message (if any)
249  * @return NULL on error, otherwise the KSK URI
250  */
251 static struct GNUNET_FS_Uri *
252 uri_ksk_parse (const char *s, char **emsg)
253 {
254   struct GNUNET_FS_Uri *ret;
255   char **keywords;
256   unsigned int pos;
257   int max;
258   int iret;
259   int i;
260   size_t slen;
261   char *dup;
262   int saw_quote;
263
264   GNUNET_assert (s != NULL);
265   slen = strlen (s);
266   pos = strlen (GNUNET_FS_URI_PREFIX GNUNET_FS_URI_KSK_INFIX);
267   if ( (slen <= pos) ||
268        (0 != strncmp (s, GNUNET_FS_URI_PREFIX GNUNET_FS_URI_KSK_INFIX, 
269                       pos) ) )
270     return NULL;       /* not KSK URI */
271   if ( (s[slen - 1] == '+') ||
272        (s[pos] == '+') )
273     {
274       *emsg = GNUNET_strdup (_("Malformed KSK URI (must not begin or end with `+')"));
275       return NULL;
276     }
277   max = 1;
278   saw_quote = 0;
279   for (i = pos; i < slen; i++)
280     {
281       if ((s[i] == '%') && (&s[i] == strstr (&s[i], "%22")))
282         {
283           saw_quote = (saw_quote + 1) % 2;
284           i += 3;
285           continue;
286         }
287       if ((s[i] == '+') && (saw_quote == 0))
288         {
289           max++;
290           if (s[i - 1] == '+')
291             {
292               *emsg = GNUNET_strdup (_("`++' not allowed in KSK URI")); 
293               return NULL;
294             }
295         }
296     }
297   if (saw_quote == 1)
298     {
299       *emsg = GNUNET_strdup (_("Quotes not balanced in KSK URI")); 
300       return NULL;
301     }
302   iret = max;
303   dup = GNUNET_strdup (s);
304   keywords = GNUNET_malloc (max * sizeof (char *));
305   for (i = slen - 1; i >= pos; i--)
306     {
307       if ((s[i] == '%') && (&s[i] == strstr (&s[i], "%22")))
308         {
309           saw_quote = (saw_quote + 1) % 2;
310           i += 3;
311           continue;
312         }
313       if ((dup[i] == '+') && (saw_quote == 0))
314         {
315           keywords[--max] = percent_decode_keyword (&dup[i + 1], emsg);
316           if (NULL == keywords[max])
317             goto CLEANUP;          
318           dup[i] = '\0';
319         }
320     }
321   keywords[--max] = percent_decode_keyword (&dup[pos], emsg);
322   if (NULL == keywords[max])
323     goto CLEANUP;
324   GNUNET_assert (max == 0);
325   GNUNET_free (dup);
326   ret = GNUNET_malloc (sizeof(struct GNUNET_FS_Uri));
327   ret->type = ksk;
328   ret->data.ksk.keywordCount = iret;
329   ret->data.ksk.keywords = keywords;
330   return ret;
331 CLEANUP:
332   for (i = 0; i < max; i++)
333     GNUNET_free_non_null (keywords[i]);
334   GNUNET_free (keywords);
335   GNUNET_free (dup);
336   return NULL;
337 }
338
339
340 /**
341  * Parse an SKS URI.
342  *
343  * @param s an uri string
344  * @param emsg where to store the parser error message (if any)
345  * @return NULL on error, SKS URI otherwise
346  */
347 static struct GNUNET_FS_Uri *
348 uri_sks_parse (const char *s, char **emsg)
349 {
350   struct GNUNET_FS_Uri *ret;
351   GNUNET_HashCode namespace;
352   char *identifier;
353   unsigned int pos;
354   size_t slen;
355   char enc[sizeof(struct GNUNET_CRYPTO_HashAsciiEncoded)];
356
357   GNUNET_assert (s != NULL);
358   slen = strlen (s);
359   pos = strlen (GNUNET_FS_URI_PREFIX GNUNET_FS_URI_SKS_INFIX);
360   if ( (slen <= pos) ||
361        (0 != strncmp (s, GNUNET_FS_URI_PREFIX GNUNET_FS_URI_SKS_INFIX, 
362                       pos) ) )
363     return NULL; /* not an SKS URI */
364   if ( (slen < pos + sizeof (struct GNUNET_CRYPTO_HashAsciiEncoded) + 1) ||
365        (s[pos + sizeof (struct GNUNET_CRYPTO_HashAsciiEncoded) - 1] != '/') )
366     {
367       *emsg = GNUNET_strdup (_("Malformed SKS URI"));
368       return NULL;
369     }
370   memcpy (enc, &s[pos], sizeof(struct GNUNET_CRYPTO_HashAsciiEncoded));
371   enc[sizeof(struct GNUNET_CRYPTO_HashAsciiEncoded)-1] = '\0';
372   if (GNUNET_OK != GNUNET_CRYPTO_hash_from_string (enc, &namespace))
373     {
374       *emsg = GNUNET_strdup (_("Malformed SKS URI"));
375       return NULL;
376     }
377   identifier = GNUNET_strdup (&s[pos + sizeof (struct GNUNET_CRYPTO_HashAsciiEncoded)]);
378   ret = GNUNET_malloc (sizeof(struct GNUNET_FS_Uri));
379   ret->type = sks;
380   ret->data.sks.namespace = namespace;
381   ret->data.sks.identifier = identifier;
382   return ret;
383 }
384
385
386 /**
387  * Parse a CHK URI.
388  *
389  * @param s an uri string
390  * @param emsg where to store the parser error message (if any)
391  * @return NULL on error, CHK URI otherwise
392  */
393 static struct GNUNET_FS_Uri *
394 uri_chk_parse (const char *s, char **emsg)
395 {
396   struct GNUNET_FS_Uri *ret;
397   struct FileIdentifier fi;
398   unsigned int pos;
399   unsigned long long flen;
400   size_t slen;
401   char h1[sizeof(struct GNUNET_CRYPTO_HashAsciiEncoded)];
402   char h2[sizeof(struct GNUNET_CRYPTO_HashAsciiEncoded)];
403
404   GNUNET_assert (s != NULL);
405
406   slen = strlen (s);
407   pos = strlen (GNUNET_FS_URI_PREFIX GNUNET_FS_URI_CHK_INFIX);
408   if ( (slen < pos + 2 * sizeof (struct GNUNET_CRYPTO_HashAsciiEncoded) + 1) ||
409        (0 != strncmp (s, GNUNET_FS_URI_PREFIX GNUNET_FS_URI_CHK_INFIX, 
410                       pos) ) )
411     return NULL; /* not a CHK URI */
412   if ( (s[pos + sizeof (struct GNUNET_CRYPTO_HashAsciiEncoded) - 1] != '.') ||
413        (s[pos + sizeof (struct GNUNET_CRYPTO_HashAsciiEncoded) * 2 - 1] != '.') )
414     {
415       *emsg = GNUNET_strdup (_("Malformed CHK URI"));
416       return NULL;
417     }
418   memcpy (h1,
419           &s[pos], 
420           sizeof(struct GNUNET_CRYPTO_HashAsciiEncoded));
421   h1[sizeof(struct GNUNET_CRYPTO_HashAsciiEncoded)-1] = '\0';
422   memcpy (h2,
423           &s[pos + sizeof(struct GNUNET_CRYPTO_HashAsciiEncoded)],
424           sizeof(struct GNUNET_CRYPTO_HashAsciiEncoded));
425   h2[sizeof(struct GNUNET_CRYPTO_HashAsciiEncoded)-1] = '\0';
426   
427   if ((GNUNET_OK != GNUNET_CRYPTO_hash_from_string (h1,
428                                                &fi.chk.key)) ||
429       (GNUNET_OK != GNUNET_CRYPTO_hash_from_string (h2,
430                                                &fi.chk.query)) ||
431       (1 != SSCANF (&s[pos + sizeof (struct GNUNET_CRYPTO_HashAsciiEncoded) * 2],
432                     "%llu", 
433                     &flen)) )
434     {
435       *emsg = GNUNET_strdup (_("Malformed CHK URI"));
436       return NULL;
437     }
438   fi.file_length = GNUNET_htonll (flen);
439   ret = GNUNET_malloc (sizeof(struct GNUNET_FS_Uri));
440   ret->type = chk;
441   ret->data.chk = fi;
442   return ret;
443 }
444
445
446 /**
447  * Convert a character back to the binary value
448  * that it represents (given base64-encoding).
449  *
450  * @param a character to convert
451  * @return offset in the "tbl" array
452  */
453 static unsigned int
454 c2v (unsigned char a)
455 {
456   if ((a >= '0') && (a <= '9'))
457     return a - '0';
458   if ((a >= 'A') && (a <= 'Z'))
459     return (a - 'A' + 10);
460   if ((a >= 'a') && (a <= 'z'))
461     return (a - 'a' + 36);
462   if (a == '_')
463     return 62;
464   if (a == '=')
465     return 63;
466   return -1;
467 }
468
469
470 /**
471  * Convert string back to binary data.
472  *
473  * @param input '\0'-terminated string
474  * @param data where to write binary data
475  * @param size how much data should be converted
476  * @return number of characters processed from input,
477  *        -1 on error
478  */
479 static int
480 enc2bin (const char *input, void *data, size_t size)
481 {
482   size_t len;
483   size_t pos;
484   unsigned int bits;
485   unsigned int hbits;
486
487   len = size * 8 / 6;
488   if (((size * 8) % 6) != 0)
489     len++;
490   if (strlen (input) < len)
491     return -1;                  /* error! */
492   bits = 0;
493   hbits = 0;
494   len = 0;
495   for (pos = 0; pos < size; pos++)
496     {
497       while (hbits < 8)
498         {
499           bits |= (c2v (input[len++]) << hbits);
500           hbits += 6;
501         }
502       (((unsigned char *) data)[pos]) = (unsigned char) bits;
503       bits >>= 8;
504       hbits -= 8;
505     }
506   return len;
507 }
508
509
510 /**
511  * Structure that defines how the
512  * contents of a location URI must be
513  * assembled in memory to create or
514  * verify the signature of a location
515  * URI.
516  */
517 struct LocUriAssembly 
518 {
519   struct GNUNET_CRYPTO_RsaSignaturePurpose purpose;
520
521   struct GNUNET_TIME_AbsoluteNBO exptime;
522
523   struct FileIdentifier fi;
524   
525   struct GNUNET_CRYPTO_RsaPublicKeyBinaryEncoded peer;
526
527 };
528
529
530 /**
531  * Parse a LOC URI.
532  * Also verifies validity of the location URI.
533  *
534  * @param s an uri string
535  * @param emsg where to store the parser error message (if any)
536  * @return NULL on error, valid LOC URI otherwise
537  */
538 static struct GNUNET_FS_Uri *
539 uri_loc_parse (const char *s, char **emsg)
540 {
541   struct GNUNET_FS_Uri *uri;
542   char h1[sizeof(struct GNUNET_CRYPTO_HashAsciiEncoded)];
543   char h2[sizeof(struct GNUNET_CRYPTO_HashAsciiEncoded)];
544   unsigned int pos;
545   unsigned int npos;
546   unsigned long long exptime;
547   unsigned long long flen;
548   struct GNUNET_TIME_Absolute et;
549   struct GNUNET_CRYPTO_RsaSignature sig;
550   struct LocUriAssembly ass;
551   int ret;
552   size_t slen;
553
554   GNUNET_assert (s != NULL);
555   slen = strlen (s);
556   pos = strlen (GNUNET_FS_URI_PREFIX GNUNET_FS_URI_LOC_INFIX);
557   if ( (slen < pos + 2 * sizeof (struct GNUNET_CRYPTO_HashAsciiEncoded) + 1) ||
558        (0 != strncmp (s, GNUNET_FS_URI_PREFIX GNUNET_FS_URI_LOC_INFIX, 
559                       pos) ) )
560     return NULL; /* not an SKS URI */
561   if ( (s[pos + sizeof (struct GNUNET_CRYPTO_HashAsciiEncoded) - 1] != '.') ||
562        (s[pos + sizeof (struct GNUNET_CRYPTO_HashAsciiEncoded) * 2 - 1] != '.') )
563     {
564       *emsg = GNUNET_strdup (_("SKS URI malformed"));
565       return NULL;
566     }
567   memcpy (h1,
568           &s[pos], 
569           sizeof(struct GNUNET_CRYPTO_HashAsciiEncoded));
570   h1[sizeof(struct GNUNET_CRYPTO_HashAsciiEncoded)-1] = '\0';
571   memcpy (h2,
572           &s[pos + sizeof(struct GNUNET_CRYPTO_HashAsciiEncoded)],
573           sizeof(struct GNUNET_CRYPTO_HashAsciiEncoded));
574   h2[sizeof(struct GNUNET_CRYPTO_HashAsciiEncoded)-1] = '\0';
575   
576   if ((GNUNET_OK != GNUNET_CRYPTO_hash_from_string (h1,
577                                                     &ass.fi.chk.key)) ||
578       (GNUNET_OK != GNUNET_CRYPTO_hash_from_string (h2,
579                                                     &ass.fi.chk.query)) ||
580       (1 != SSCANF (&s[pos + sizeof (struct GNUNET_CRYPTO_HashAsciiEncoded) * 2],
581                     "%llu", 
582                     &flen)) )
583     {
584       *emsg = GNUNET_strdup (_("SKS URI malformed"));
585       return NULL;
586     }
587   ass.fi.file_length = GNUNET_htonll (flen);
588
589   npos = pos + sizeof (struct GNUNET_CRYPTO_HashAsciiEncoded) * 2;
590   while ((s[npos] != '\0') && (s[npos] != '.'))
591     npos++;
592   if (s[npos] == '\0')
593     {
594       *emsg = GNUNET_strdup (_("SKS URI malformed"));
595       goto ERR;
596     }
597   npos++;
598   ret = enc2bin (&s[npos], 
599                  &ass.peer,
600                  sizeof (struct GNUNET_CRYPTO_RsaPublicKeyBinaryEncoded));
601   if (ret == -1)
602     {
603       *emsg = GNUNET_strdup (_("SKS URI malformed (could not decode public key)"));
604       goto ERR;
605     }
606   npos += ret;
607   if (s[npos++] != '.')
608     {
609       *emsg = GNUNET_strdup (_("SKS URI malformed (could not find signature)"));
610       goto ERR;
611     }
612   ret = enc2bin (&s[npos],
613                  &sig,
614                  sizeof (struct GNUNET_CRYPTO_RsaSignature));
615   if (ret == -1)
616     {
617       *emsg = GNUNET_strdup (_("SKS URI malformed (could not decode signature)"));
618       goto ERR;
619     }
620     npos += ret;
621   if (s[npos++] != '.')
622     {
623       *emsg = GNUNET_strdup (_("SKS URI malformed"));
624       goto ERR;
625     }
626   if (1 != SSCANF (&s[npos], "%llu", &exptime))
627     {
628       *emsg = GNUNET_strdup (_("SKS URI malformed (could not parse expiration time)"));
629       goto ERR;
630     }
631   ass.purpose.size = htonl(sizeof(struct LocUriAssembly));
632   ass.purpose.purpose = htonl(GNUNET_SIGNATURE_PURPOSE_PEER_PLACEMENT);
633   et.value = exptime;
634   ass.exptime = GNUNET_TIME_absolute_hton (et);
635   if (GNUNET_OK != 
636       GNUNET_CRYPTO_rsa_verify (GNUNET_SIGNATURE_PURPOSE_PEER_PLACEMENT,
637                                 &ass.purpose,
638                                 &sig,
639                                 &ass.peer))
640     {
641       *emsg = GNUNET_strdup (_("SKS URI malformed (signature failed validation)"));
642       goto ERR;
643     }
644   uri = GNUNET_malloc (sizeof(struct GNUNET_FS_Uri));
645   uri->type = loc;
646   uri->data.loc.fi = ass.fi;
647   uri->data.loc.peer = ass.peer;
648   uri->data.loc.expirationTime = et;
649   uri->data.loc.contentSignature = sig;
650
651   return uri;
652 ERR:
653   return NULL;
654 }
655
656
657 /**
658  * Convert a UTF-8 String to a URI.
659  *
660  * @param uri string to parse
661  * @param emsg where to store the parser error message (if any)
662  * @return NULL on error
663  */
664 struct GNUNET_FS_Uri *
665 GNUNET_FS_uri_parse (const char *uri,
666                      char **emsg)
667 {
668   struct GNUNET_FS_Uri *ret;
669   char *msg;
670
671   if (NULL == emsg)
672     emsg = &msg;
673   *emsg = NULL;
674   if ( (NULL != (ret = uri_chk_parse (uri, emsg))) ||
675        (NULL != (ret = uri_ksk_parse (uri, emsg))) ||
676        (NULL != (ret = uri_sks_parse (uri, emsg))) ||
677        (NULL != (ret = uri_loc_parse (uri, emsg))) )
678     return ret;
679   if (NULL == *emsg)
680     *emsg = GNUNET_strdup (_("Unrecognized URI type"));
681   if (emsg == &msg)
682     GNUNET_free (msg);
683   return NULL;
684 }
685
686
687 /**
688  * Free URI.
689  *
690  * @param uri uri to free
691  */
692 void 
693 GNUNET_FS_uri_destroy (struct GNUNET_FS_Uri *uri)
694 {
695   unsigned int i;
696
697   GNUNET_assert (uri != NULL);
698   switch (uri->type)
699     {
700     case ksk:
701       for (i = 0; i < uri->data.ksk.keywordCount; i++)
702         GNUNET_free (uri->data.ksk.keywords[i]);
703       GNUNET_array_grow (uri->data.ksk.keywords, uri->data.ksk.keywordCount,
704                          0);
705       break;
706     case sks:
707       GNUNET_free (uri->data.sks.identifier);
708       break;
709     case loc:
710       break;
711     default:
712       /* do nothing */
713       break;
714     }
715   GNUNET_free (uri);
716 }
717
718 /**
719  * How many keywords are ANDed in this keyword URI?
720  *
721  * @param uri ksk uri to get the number of keywords from
722  * @return 0 if this is not a keyword URI
723  */
724 unsigned int 
725 GNUNET_FS_uri_ksk_get_keyword_count (const struct GNUNET_FS_Uri *uri)
726 {
727   if (uri->type != ksk)
728     return 0;
729   return uri->data.ksk.keywordCount;
730 }
731
732
733 /**
734  * Iterate over all keywords in this keyword URI.
735  *
736  * @param uri ksk uri to get the keywords from
737  * @param iterator function to call on each keyword
738  * @param iterator_cls closure for iterator
739  * @return -1 if this is not a keyword URI, otherwise number of
740  *   keywords iterated over until iterator aborted
741  */
742 int 
743 GNUNET_FS_uri_ksk_get_keywords (const struct GNUNET_FS_Uri *uri,
744                                 GNUNET_FS_KeywordIterator iterator, 
745                                 void *iterator_cls)
746 {
747   unsigned int i;
748   char *keyword;
749
750   if (uri->type != ksk)
751     return -1;
752   if (iterator == NULL)
753     return uri->data.ksk.keywordCount;
754   for (i = 0; i < uri->data.ksk.keywordCount; i++)
755     {
756       keyword = uri->data.ksk.keywords[i];
757       /* first character of keyword indicates
758          if it is mandatory or not */
759       if (GNUNET_OK != iterator (iterator_cls,
760                                  &keyword[1],
761                                  keyword[0] == '+'))
762         return i;
763     }
764   return i;
765 }
766
767
768 /**
769  * Obtain the identity of the peer offering the data
770  *
771  * @param uri the location URI to inspect
772  * @param peer where to store the identify of the peer (presumably) offering the content
773  * @return GNUNET_SYSERR if this is not a location URI, otherwise GNUNET_OK
774  */
775 int
776 GNUNET_FS_uri_loc_get_peer_identity (const struct GNUNET_FS_Uri *uri,
777                                      struct GNUNET_PeerIdentity * peer)
778 {
779   if (uri->type != loc)
780     return GNUNET_SYSERR;
781   GNUNET_CRYPTO_hash (&uri->data.loc.peer,
782                       sizeof (struct GNUNET_CRYPTO_RsaPublicKeyBinaryEncoded),
783                       &peer->hashPubKey);
784   return GNUNET_OK;
785 }
786
787
788 /**
789  * Obtain the URI of the content itself.
790  *
791  * @param uri location URI to get the content URI from
792  * @return NULL if argument is not a location URI
793  */
794 struct GNUNET_FS_Uri *
795 GNUNET_FS_uri_loc_get_uri (const struct GNUNET_FS_Uri *uri)
796 {
797   struct GNUNET_FS_Uri *ret;
798
799   if (uri->type != loc)
800     return NULL;
801   ret = GNUNET_malloc (sizeof (struct GNUNET_FS_Uri));
802   ret->type = chk;
803   ret->data.chk = uri->data.loc.fi;
804   return ret;
805 }
806
807
808 /**
809  * Construct a location URI (this peer will be used for the location).
810  *
811  * @param baseURI content offered by the sender
812  * @param cfg configuration information (used to find our hostkey)
813  * @param expiration_time how long will the content be offered?
814  * @return the location URI, NULL on error
815  */
816 struct GNUNET_FS_Uri *
817 GNUNET_FS_uri_loc_create (const struct GNUNET_FS_Uri *baseUri,
818                           struct GNUNET_CONFIGURATION_Handle *cfg,
819                           struct GNUNET_TIME_Absolute expiration_time)
820 {
821   struct GNUNET_FS_Uri *uri;
822   struct GNUNET_CRYPTO_RsaPrivateKey *my_private_key;  
823   struct GNUNET_CRYPTO_RsaPublicKeyBinaryEncoded my_public_key;
824   char *keyfile;
825   struct LocUriAssembly ass;
826
827   if (baseUri->type != chk)
828     return NULL;
829   if (GNUNET_OK !=
830       GNUNET_CONFIGURATION_get_value_filename (cfg,
831                                                "GNUNETD",
832                                                "HOSTKEY", &keyfile))
833     {
834       GNUNET_log (GNUNET_ERROR_TYPE_ERROR,
835                   _
836                   ("Lacking key configuration settings.\n"));
837       return NULL;
838     }
839   my_private_key = GNUNET_CRYPTO_rsa_key_create_from_file (keyfile);
840   if (my_private_key == NULL)
841     {
842       GNUNET_log (GNUNET_ERROR_TYPE_ERROR,
843                   _("Could not access hostkey file `%s'.\n"),
844                   keyfile);
845       GNUNET_free (keyfile);
846       return NULL;
847     }
848   GNUNET_free (keyfile);
849   GNUNET_CRYPTO_rsa_key_get_public (my_private_key, &my_public_key);
850   ass.purpose.size = htonl(sizeof(struct LocUriAssembly));
851   ass.purpose.purpose = htonl(GNUNET_SIGNATURE_PURPOSE_PEER_PLACEMENT);
852   ass.exptime = GNUNET_TIME_absolute_hton (expiration_time);
853   ass.fi = baseUri->data.chk;
854   ass.peer = my_public_key;
855   uri = GNUNET_malloc (sizeof (struct GNUNET_FS_Uri));
856   uri->type = loc;
857   uri->data.loc.fi = baseUri->data.chk;
858   uri->data.loc.expirationTime = expiration_time;
859   uri->data.loc.peer = my_public_key;
860   GNUNET_assert (GNUNET_OK ==
861                  GNUNET_CRYPTO_rsa_sign (my_private_key,
862                                          &ass.purpose,
863                                          &uri->data.loc.contentSignature));
864   GNUNET_CRYPTO_rsa_key_free (my_private_key);
865   return uri;
866 }
867
868
869 /**
870  * Canonicalize a keyword.
871  * 
872  * @param in input string (the keyword)
873  * @return canonicalized keyword
874  */
875 static char *
876 canonicalize_keyword (const char *in)
877 {
878   char *ret;
879   char *wpos;
880   const char *rpos;
881
882   ret = GNUNET_strdup (in);
883   wpos = ret;
884   rpos = in;
885   while ('\0' != *rpos)
886     {
887       switch (tolower(*rpos))
888         {
889         case 'a':
890         case 'e':
891         case 'i':
892         case 'o':
893         case 'u':
894         case ' ':
895         case '\t':
896         case '\n':
897         case '\r':
898           /* skip characters listed above */
899           rpos++;
900           break;
901         case 'b':
902         case 'c':
903         case 'd':
904         case 'f':
905         case 'g':
906         case 'h':
907         case 'j':
908         case 'k':
909         case 'l':
910         case 'm':
911         case 'n':
912         case 'p':
913         case 'r':
914         case 's':
915         case 't':
916         case 'v':
917         case 'w':
918         case 'x':
919         case 'y':
920         case 'z':
921           /* convert characters listed above to lower case */
922           *wpos = tolower(*rpos);
923           wpos++;
924         case '!':
925         case '.':
926         case '?':
927         case '-':
928           /* keep characters listed above without changes */
929           *wpos = *rpos;
930           wpos++;
931         default:
932           /* replace characters listed above with '_' */
933           *wpos = '_';
934           wpos++;
935         }
936       rpos++;
937     }
938   return ret;
939 }
940
941
942 /**
943  * Canonicalize keyword URI.  Performs operations such
944  * as decapitalization and removal of certain characters.
945  * (useful for search).
946  *
947  * @param uri the URI to canonicalize 
948  * @return canonicalized version of the URI, NULL on error
949  */
950 struct GNUNET_FS_Uri *
951 GNUNET_FS_uri_ksk_canonicalize (const struct GNUNET_FS_Uri *uri)
952 {
953   struct GNUNET_FS_Uri *ret;
954   unsigned int kc;
955   unsigned int i;
956   char **kl;
957
958   kc = uri->data.ksk.keywordCount;
959   kl = GNUNET_malloc (kc*sizeof(char*));
960   for (i=0;i<kc;i++)
961     kl[i] = canonicalize_keyword (uri->data.ksk.keywords[i]);
962   ret = GNUNET_malloc (sizeof(struct GNUNET_FS_Uri));
963   ret->type = ksk;
964   ret->data.ksk.keywordCount = kc;
965   ret->data.ksk.keywords = kl;
966   return ret;
967 }
968
969
970 /**
971  * Merge the sets of keywords from two KSK URIs.
972  * (useful for merging the canonicalized keywords with
973  * the original keywords for sharing).
974  *
975  * @param u1 first uri
976  * @param u2 second uri
977  * @return merged URI, NULL on error
978  */
979 struct GNUNET_FS_Uri *
980 GNUNET_FS_uri_ksk_merge (const struct GNUNET_FS_Uri *u1,
981                          const struct GNUNET_FS_Uri *u2)
982 {
983   struct GNUNET_FS_Uri *ret;
984   unsigned int kc;
985   unsigned int i;
986   unsigned int j;
987   int found;
988   const char *kp;
989   char **kl;
990
991   if ( (u1->type != ksk) ||
992        (u2->type != ksk) )
993     {
994       GNUNET_break (0);
995       return NULL;
996     } 
997   kc = u1->data.ksk.keywordCount;
998   kl = GNUNET_malloc ((kc+u2->data.ksk.keywordCount)*sizeof(char*));
999   for (i=0;i<u1->data.ksk.keywordCount;i++)
1000     kl[i] = GNUNET_strdup (u1->data.ksk.keywords[i]);
1001   for (i=0;i<u2->data.ksk.keywordCount;i++)
1002     {
1003       kp = u2->data.ksk.keywords[i];
1004       found = 0;
1005       for (j=0;j<u1->data.ksk.keywordCount;j++)
1006         if (0 == strcmp(kp + 1,
1007                         kl[j]+1))
1008           {
1009             found = 1;
1010             if (kp[0] == '+')
1011               kl[j][0] = '+';
1012             break;
1013           }
1014       if (0 == found)
1015         kl[kc++] = GNUNET_strdup (kp - 1);
1016     }
1017   ret = GNUNET_malloc (sizeof(struct GNUNET_FS_Uri));
1018   ret->type = ksk;
1019   ret->data.ksk.keywordCount = kc;
1020   ret->data.ksk.keywords = kl;
1021   return ret;
1022 }
1023
1024
1025 /**
1026  * Duplicate URI.
1027  *
1028  * @param uri the URI to duplicate
1029  * @return copy of the URI
1030  */
1031 struct GNUNET_FS_Uri *
1032 GNUNET_FS_uri_dup (const struct GNUNET_FS_Uri *uri)
1033 {
1034   struct GNUNET_FS_Uri *ret;
1035   unsigned int i;
1036
1037   ret = GNUNET_malloc (sizeof (struct GNUNET_FS_Uri));
1038   memcpy (ret, uri, sizeof (struct GNUNET_FS_Uri));
1039   switch (ret->type)
1040     {
1041     case ksk:
1042       if (ret->data.ksk.keywordCount > 0)
1043         {
1044           ret->data.ksk.keywords
1045             = GNUNET_malloc (ret->data.ksk.keywordCount * sizeof (char *));
1046           for (i = 0; i < ret->data.ksk.keywordCount; i++)
1047             ret->data.ksk.keywords[i] =
1048               GNUNET_strdup (uri->data.ksk.keywords[i]);
1049         }
1050       else
1051         ret->data.ksk.keywords = NULL;  /* just to be sure */
1052       break;
1053     case sks:
1054       ret->data.sks.identifier = GNUNET_strdup (uri->data.sks.identifier);
1055       break;
1056     case loc:
1057       break;
1058     default:
1059       break;
1060     }
1061   return ret;
1062 }
1063
1064
1065 /**
1066  * Create an FS URI from a single user-supplied string of keywords.
1067  * The string is broken up at spaces into individual keywords.
1068  * Keywords that start with "+" are mandatory.  Double-quotes can
1069  * be used to prevent breaking up strings at spaces (and also
1070  * to specify non-mandatory keywords starting with "+").
1071  *
1072  * Keywords must contain a balanced number of double quotes and
1073  * double quotes can not be used in the actual keywords (for
1074  * example, the string '""foo bar""' will be turned into two
1075  * "OR"ed keywords 'foo' and 'bar', not into '"foo bar"'.
1076  *
1077  * @param keywords the keyword string
1078  * @param emsg where to store an error message
1079  * @return an FS URI for the given keywords, NULL
1080  *  if keywords is not legal (i.e. empty).
1081  */
1082 struct GNUNET_FS_Uri *
1083 GNUNET_FS_uri_ksk_create (const char *keywords,
1084                           char **emsg)
1085 {
1086   char **keywordarr;
1087   unsigned int num_Words;
1088   int inWord;
1089   char *pos;
1090   struct GNUNET_FS_Uri *uri;
1091   char *searchString;
1092   int saw_quote;
1093
1094   if (keywords == NULL)
1095     {
1096       GNUNET_break (0);
1097       return NULL;
1098     }
1099   searchString = GNUNET_strdup (keywords);
1100   num_Words = 0;
1101   inWord = 0;
1102   saw_quote = 0;
1103   pos = searchString;
1104   while ('\0' != *pos)
1105     {
1106       if ((saw_quote == 0) && (isspace (*pos)))
1107         {
1108           inWord = 0;
1109         }
1110       else if (0 == inWord)
1111         {
1112           inWord = 1;
1113           ++num_Words;
1114         }
1115       if ('"' == *pos)
1116         saw_quote = (saw_quote + 1) % 2;
1117       pos++;
1118     }
1119   if (num_Words == 0)
1120     {
1121       GNUNET_free (searchString);
1122       *emsg = GNUNET_strdup (_("No keywords specified!\n"));
1123       return NULL;
1124     }
1125   if (saw_quote != 0)
1126     {
1127       GNUNET_free (searchString);
1128       *emsg = GNUNET_strdup (_("Number of double-quotes not balanced!\n"));
1129       return NULL;
1130     }
1131   keywordarr = GNUNET_malloc (num_Words * sizeof (char *));
1132   num_Words = 0;
1133   inWord = 0;
1134   pos = searchString;
1135   while ('\0' != *pos)
1136     {
1137       if ((saw_quote == 0) && (isspace (*pos)))
1138         {
1139           inWord = 0;
1140           *pos = '\0';
1141         }
1142       else if (0 == inWord)
1143         {
1144           keywordarr[num_Words] = pos;
1145           inWord = 1;
1146           ++num_Words;
1147         }
1148       if ('"' == *pos)
1149         saw_quote = (saw_quote + 1) % 2;
1150       pos++;
1151     }
1152   uri =
1153     GNUNET_FS_uri_ksk_create_from_args (num_Words,
1154                                         (const char **) keywordarr);
1155   GNUNET_free (keywordarr);
1156   GNUNET_free (searchString);
1157   return uri;
1158 }
1159
1160
1161 /**
1162  * Create an FS URI from a user-supplied command line of keywords.
1163  * Arguments should start with "+" to indicate mandatory
1164  * keywords.
1165  *
1166  * @param argc number of keywords
1167  * @param argv keywords (double quotes are not required for
1168  *             keywords containing spaces; however, double
1169  *             quotes are required for keywords starting with
1170  *             "+"); there is no mechanism for having double
1171  *             quotes in the actual keywords (if the user
1172  *             did specifically specify double quotes, the
1173  *             caller should convert each double quote
1174  *             into two single quotes).
1175  * @return an FS URI for the given keywords, NULL
1176  *  if keywords is not legal (i.e. empty).
1177  */
1178 struct GNUNET_FS_Uri *
1179 GNUNET_FS_uri_ksk_create_from_args (unsigned int argc,
1180                                     const char **argv)
1181 {
1182   unsigned int i;
1183   struct GNUNET_FS_Uri *uri;
1184   const char *keyword;
1185   char *val;
1186   const char *r;
1187   char *w;
1188   char *emsg;
1189
1190   if (argc == 0)
1191     return NULL;
1192   /* allow URI to be given as one and only keyword and
1193      handle accordingly */
1194   emsg = NULL;
1195   if ( (argc == 1) &&
1196        (strlen(argv[0]) > strlen(GNUNET_FS_URI_PREFIX)) &&
1197        (0 == strncmp(argv[0], GNUNET_FS_URI_PREFIX, strlen(GNUNET_FS_URI_PREFIX)) ) &&
1198        (NULL != (uri = GNUNET_FS_uri_parse(argv[0], &emsg)) ) )
1199     return uri;
1200   GNUNET_free_non_null (emsg);
1201   uri = GNUNET_malloc (sizeof (struct GNUNET_FS_Uri));
1202   uri->type = ksk;
1203   uri->data.ksk.keywordCount = argc;
1204   uri->data.ksk.keywords = GNUNET_malloc (argc * sizeof (char *));
1205   for (i = 0; i < argc; i++)
1206     {
1207       keyword = argv[i];
1208       if (keyword[0] == '+')
1209         val = GNUNET_strdup (keyword);
1210       else
1211         GNUNET_asprintf (&val, " %s", keyword);
1212       r = val;
1213       w = val;
1214       while ('\0' != *r)
1215         {
1216           if ('"' == *r)
1217             r++;
1218           else
1219             *(w++) = *(r++);
1220         }
1221       *w = '\0';
1222       uri->data.ksk.keywords[i] = val;
1223     }
1224   return uri;
1225 }
1226
1227
1228 /**
1229  * Test if two URIs are equal.
1230  *
1231  * @param u1 one of the URIs
1232  * @param u2 the other URI
1233  * @return GNUNET_YES if the URIs are equal
1234  */
1235 int 
1236 GNUNET_FS_uri_test_equal (const struct GNUNET_FS_Uri *u1,
1237                           const struct GNUNET_FS_Uri *u2)
1238 {
1239   int ret;
1240   unsigned int i;
1241   unsigned int j;
1242
1243   GNUNET_assert (u1 != NULL);
1244   GNUNET_assert (u2 != NULL);
1245   if (u1->type != u2->type)
1246     return GNUNET_NO;
1247   switch (u1->type)
1248     {
1249     case chk:
1250       if (0 == memcmp (&u1->data.chk,
1251                        &u2->data.chk,
1252                        sizeof (struct FileIdentifier)))
1253         return GNUNET_YES;
1254       return GNUNET_NO;
1255     case sks:
1256       if ((0 == memcmp (&u1->data.sks.namespace,
1257                         &u2->data.sks.namespace,
1258                         sizeof (GNUNET_HashCode))) &&
1259           (0 == strcmp (u1->data.sks.identifier,
1260                         u2->data.sks.identifier)))
1261
1262         return GNUNET_YES;
1263       return GNUNET_NO;
1264     case ksk:
1265       if (u1->data.ksk.keywordCount != u2->data.ksk.keywordCount)
1266         return GNUNET_NO;
1267       for (i = 0; i < u1->data.ksk.keywordCount; i++)
1268         {
1269           ret = GNUNET_NO;
1270           for (j = 0; j < u2->data.ksk.keywordCount; j++)
1271             {
1272               if (0 == strcmp (u1->data.ksk.keywords[i],
1273                                u2->data.ksk.keywords[j]))
1274                 {
1275                   ret = GNUNET_YES;
1276                   break;
1277                 }
1278             }
1279           if (ret == GNUNET_NO)
1280             return GNUNET_NO;
1281         }
1282       return GNUNET_YES;
1283     case loc:
1284       if (memcmp (&u1->data.loc,
1285                   &u2->data.loc,
1286                   sizeof (struct FileIdentifier) +
1287                   sizeof (struct GNUNET_CRYPTO_RsaPublicKeyBinaryEncoded) +
1288                   sizeof (struct GNUNET_TIME_Absolute) +
1289                   sizeof (unsigned short) + sizeof (unsigned short)) != 0)
1290         return GNUNET_NO;
1291       return GNUNET_YES;
1292     default:
1293       return GNUNET_NO;
1294     }
1295 }
1296
1297
1298 /**
1299  * Is this a namespace URI?
1300  *
1301  * @param uri the uri to check
1302  * @return GNUNET_YES if this is an SKS uri
1303  */
1304 int
1305 GNUNET_FS_uri_test_sks (const struct GNUNET_FS_Uri *uri)
1306 {
1307   return uri->type == sks;
1308 }
1309
1310
1311 /**
1312  * Get the ID of a namespace from the given
1313  * namespace URI.
1314  *
1315  * @param uri the uri to get the namespace ID from
1316  * @param nsid where to store the ID of the namespace
1317  * @return GNUNET_OK on success
1318  */
1319 int 
1320 GNUNET_FS_uri_sks_get_namespace (const struct GNUNET_FS_Uri *uri,
1321                                  GNUNET_HashCode * nsid)
1322 {
1323   if (! GNUNET_FS_uri_test_sks (uri))
1324     {
1325       GNUNET_break (0);
1326       return GNUNET_SYSERR;
1327     }
1328   *nsid = uri->data.sks.namespace;
1329   return GNUNET_OK;
1330 }
1331
1332
1333 /**
1334  * Get the content identifier of an SKS URI.
1335  *
1336  * @param uri the sks uri
1337  * @return NULL on error (not a valid SKS URI)
1338  */
1339 char *
1340 GNUNET_FS_uri_sks_get_content_id (const struct GNUNET_FS_Uri *uri)
1341 {
1342   if (!GNUNET_FS_uri_test_sks (uri))
1343     {
1344       GNUNET_break (0);
1345       return NULL;
1346     }
1347   return GNUNET_strdup (uri->data.sks.identifier);
1348 }
1349
1350
1351 /**
1352  * Convert namespace URI to a human readable format
1353  * (using the namespace description, if available).
1354  *
1355  * @param cfg configuration to use
1356  * @param uri SKS uri to convert
1357  * @return NULL on error (not an SKS URI)
1358  */
1359 char *
1360 GNUNET_FS_uri_sks_to_string_fancy (struct GNUNET_CONFIGURATION_Handle *cfg,
1361                                    const struct GNUNET_FS_Uri *uri)
1362 {
1363   char *ret;
1364   char *name;
1365
1366   if (uri->type != sks)
1367     return NULL;
1368   name = GNUNET_PSEUDONYM_id_to_name (cfg, &uri->data.sks.namespace);
1369   if (name == NULL)
1370     return GNUNET_FS_uri_to_string (uri);
1371   GNUNET_asprintf (&ret,
1372                    "%s: %s",
1373                    name,
1374                    uri->data.sks.identifier);
1375   GNUNET_free (name);
1376   return ret;
1377 }
1378
1379
1380 /**
1381  * Is this a keyword URI?
1382  *
1383  * @param uri the uri
1384  * @return GNUNET_YES if this is a KSK uri
1385  */
1386 int 
1387 GNUNET_FS_uri_test_ksk (const struct GNUNET_FS_Uri *uri)
1388 {
1389 #if EXTRA_CHECKS
1390   unsigned int i;
1391
1392   if (uri->type == ksk)
1393     {
1394       for (i = uri->data.ksk.keywordCount - 1; i >= 0; i--)
1395         GNUNET_assert (uri->data.ksk.keywords[i] != NULL);
1396     }
1397 #endif
1398   return uri->type == ksk;
1399 }
1400
1401
1402 /**
1403  * Is this a file (or directory) URI?
1404  *
1405  * @param uri the uri to check
1406  * @return GNUNET_YES if this is a CHK uri
1407  */
1408 int 
1409 GNUNET_FS_uri_test_chk (const struct GNUNET_FS_Uri *uri)
1410 {
1411   return uri->type == chk;
1412 }
1413
1414
1415 /**
1416  * What is the size of the file that this URI
1417  * refers to?
1418  *
1419  * @param uri the CHK URI to inspect
1420  * @return size of the file as specified in the CHK URI
1421  */
1422 uint64_t 
1423 GNUNET_FS_uri_chk_get_file_size (const struct GNUNET_FS_Uri *uri)
1424 {
1425   switch (uri->type)
1426     {
1427     case chk:
1428       return GNUNET_ntohll (uri->data.chk.file_length);
1429     case loc:
1430       return GNUNET_ntohll (uri->data.loc.fi.file_length);
1431     default:
1432       GNUNET_assert (0);
1433     }
1434   return 0;                     /* unreachable */
1435 }
1436
1437
1438 /**
1439  * Is this a location URI?
1440  *
1441  * @param uri the uri to check
1442  * @return GNUNET_YES if this is a LOC uri
1443  */
1444 int 
1445 GNUNET_FS_uri_test_loc (const struct GNUNET_FS_Uri *uri)
1446 {
1447   return uri->type == loc;
1448 }
1449
1450
1451 /**
1452  * Function called on each value in the meta data.
1453  * Adds it to the URI.
1454  *
1455  * @param cls URI to update
1456  * @param type type of the meta data
1457  * @param data value of the meta data
1458  * @return GNUNET_OK (always)
1459  */
1460 static int
1461 gather_uri_data (void *cls,
1462                  EXTRACTOR_KeywordType type, 
1463                  const char *data)
1464 {
1465   struct GNUNET_FS_Uri *uri = cls;
1466   char *nkword;
1467   int j;
1468   
1469   for (j = uri->data.ksk.keywordCount - 1; j >= 0; j--)
1470     if (0 == strcmp (&uri->data.ksk.keywords[j][1], data))
1471       return GNUNET_OK;
1472   nkword = GNUNET_malloc (strlen (data) + 2);
1473   strcpy (nkword, " ");         /* not mandatory */
1474   strcat (nkword, data);
1475   uri->data.ksk.keywords[uri->data.ksk.keywordCount++] = nkword;
1476   return GNUNET_OK;
1477 }
1478
1479
1480 /**
1481  * Construct a keyword-URI from meta-data (take all entries
1482  * in the meta-data and construct one large keyword URI
1483  * that lists all keywords that can be found in the meta-data).
1484  *
1485  * @param md metadata to use
1486  * @return NULL on error, otherwise a KSK URI
1487  */
1488 struct GNUNET_FS_Uri *
1489 GNUNET_FS_uri_ksk_create_from_meta_data (const struct GNUNET_CONTAINER_MetaData *md)
1490 {
1491   struct GNUNET_FS_Uri *ret;
1492
1493   if (md == NULL)
1494     return NULL;
1495   ret = GNUNET_malloc (sizeof (struct GNUNET_FS_Uri));
1496   ret->type = ksk;
1497   ret->data.ksk.keywordCount = 0;
1498   ret->data.ksk.keywords = NULL;
1499   ret->data.ksk.keywords
1500     = GNUNET_malloc (sizeof (char *) *
1501                      GNUNET_CONTAINER_meta_data_get_contents (md, NULL, NULL));
1502   GNUNET_CONTAINER_meta_data_get_contents (md, &gather_uri_data, ret);
1503   return ret;
1504
1505 }
1506
1507
1508 /**
1509  * In URI-encoding, does the given character
1510  * need to be encoded using %-encoding?
1511  */
1512 static int
1513 needs_percent (char c)
1514 {
1515   return (!((isalnum (c)) ||
1516             (c == '-') || (c == '_') || (c == '.') || (c == '~')));
1517 }
1518
1519
1520 /**
1521  * Convert a KSK URI to a string.
1522  *
1523  * @param uri the URI to convert
1524  * @return NULL on error (i.e. keywordCount == 0)
1525  */
1526 static char *
1527 uri_ksk_to_string (const struct GNUNET_FS_Uri *uri)
1528 {
1529   char ** keywords; 
1530   unsigned int keywordCount;
1531   size_t n;
1532   char *ret;
1533   unsigned int i;
1534   unsigned int j;
1535   unsigned int wpos;
1536   size_t slen;
1537   const char *keyword;
1538
1539   if (uri->type != ksk)
1540     return NULL;
1541   keywords = uri->data.ksk.keywords;
1542   keywordCount = uri->data.ksk.keywordCount;
1543   n =
1544     keywordCount + strlen (GNUNET_FS_URI_PREFIX) +
1545     strlen (GNUNET_FS_URI_KSK_INFIX) + 1;
1546   for (i = 0; i < keywordCount; i++)
1547     {
1548       keyword = keywords[i];
1549       slen = strlen (keyword);
1550       n += slen;
1551       for (j = 0; j < slen; j++)
1552         {
1553           if ((j == 0) && (keyword[j] == ' '))
1554             {
1555               n--;
1556               continue;         /* skip leading space */
1557             }
1558           if (needs_percent (keyword[j]))
1559             n += 2;             /* will use %-encoding */
1560         }
1561     }
1562   ret = GNUNET_malloc (n);
1563   strcpy (ret, GNUNET_FS_URI_PREFIX);
1564   strcat (ret, GNUNET_FS_URI_KSK_INFIX);
1565   wpos = strlen (ret);
1566   for (i = 0; i < keywordCount; i++)
1567     {
1568       keyword = keywords[i];
1569       slen = strlen (keyword);
1570       for (j = 0; j < slen; j++)
1571         {
1572           if ((j == 0) && (keyword[j] == ' '))
1573             continue;           /* skip leading space */
1574           if (needs_percent (keyword[j]))
1575             {
1576               sprintf (&ret[wpos], "%%%02X", keyword[j]);
1577               wpos += 3;
1578             }
1579           else
1580             {
1581               ret[wpos++] = keyword[j];
1582             }
1583         }
1584       if (i != keywordCount - 1)
1585         ret[wpos++] = '+';
1586     }
1587   return ret;
1588 }
1589
1590
1591 /**
1592  * Convert SKS URI to a string.
1593  *
1594  * @param uri sks uri to convert
1595  * @return NULL on error
1596  */
1597 static char *
1598 uri_sks_to_string (const struct GNUNET_FS_Uri *uri)
1599 {
1600   const GNUNET_HashCode * namespace;
1601   const char *identifier;
1602   char *ret;
1603   struct GNUNET_CRYPTO_HashAsciiEncoded ns;
1604   
1605   if (uri->type != sks)
1606     return NULL;
1607   namespace = &uri->data.sks.namespace;
1608   identifier = uri->data.sks.identifier;
1609   GNUNET_CRYPTO_hash_to_enc (namespace, &ns);
1610   GNUNET_asprintf (&ret,
1611                    "%s%s%s/%s",
1612                    GNUNET_FS_URI_PREFIX, 
1613                    GNUNET_FS_URI_SKS_INFIX,
1614                    (const char *) &ns, identifier);
1615   return ret;
1616 }
1617
1618
1619 /**
1620  * Convert a CHK URI to a string.
1621  *
1622  * @param uri chk uri to convert
1623  * @return NULL on error
1624  */
1625 static char *
1626 uri_chk_to_string (const struct GNUNET_FS_Uri *uri)
1627 {
1628   const struct FileIdentifier * fi;
1629   char *ret;
1630   struct GNUNET_CRYPTO_HashAsciiEncoded keyhash;
1631   struct GNUNET_CRYPTO_HashAsciiEncoded queryhash;
1632
1633   if (uri->type != chk)
1634     return NULL;
1635   fi = &uri->data.chk;
1636   GNUNET_CRYPTO_hash_to_enc (&fi->chk.key, &keyhash);
1637   GNUNET_CRYPTO_hash_to_enc (&fi->chk.query, &queryhash);
1638
1639   GNUNET_asprintf (&ret,
1640                    "%s%s%s.%s.%llu",
1641                    GNUNET_FS_URI_PREFIX,
1642                    GNUNET_FS_URI_CHK_INFIX,
1643                    (const char *) &keyhash, 
1644                    (const char *) &queryhash,
1645                    GNUNET_ntohll (fi->file_length));
1646   return ret;
1647 }
1648
1649 /**
1650  * Convert binary data to a string.
1651  *
1652  * @param data binary data to convert
1653  * @param size number of bytes in data
1654  * @return converted data
1655  */
1656 static char *
1657 bin2enc (const void *data, size_t size)
1658 {
1659   /**
1660    * 64 characters for encoding, 6 bits per character
1661    */
1662   static char *tbl =
1663     "0123456789ABCDEFGHIJKLMNOPQRSTUVWXYZabcdefghijklmnopqrstuvwxyz_=";
1664   
1665   size_t len;
1666   size_t pos;
1667   unsigned int bits;
1668   unsigned int hbits;
1669   char *ret;
1670
1671   GNUNET_assert (strlen (tbl) == 64);
1672   len = size * 8 / 6;
1673   if (((size * 8) % 6) != 0)
1674     len++;
1675   ret = GNUNET_malloc (len + 1);
1676   ret[len] = '\0';
1677   len = 0;
1678   bits = 0;
1679   hbits = 0;
1680   for (pos = 0; pos < size; pos++)
1681     {
1682       bits |= ((((const unsigned char *) data)[pos]) << hbits);
1683       hbits += 8;
1684       while (hbits >= 6)
1685         {
1686           ret[len++] = tbl[bits & 63];
1687           bits >>= 6;
1688           hbits -= 6;
1689         }
1690     }
1691   if (hbits > 0)
1692     ret[len++] = tbl[bits & 63];
1693   return ret;
1694 }
1695
1696
1697 /**
1698  * Convert a LOC URI to a string.
1699  *
1700  * @param uri loc uri to convert
1701  * @return NULL on error
1702  */
1703 static char *
1704 uri_loc_to_string (const struct GNUNET_FS_Uri *uri)
1705 {
1706   char *ret;
1707   struct GNUNET_CRYPTO_HashAsciiEncoded keyhash;
1708   struct GNUNET_CRYPTO_HashAsciiEncoded queryhash;
1709   char *peerId;
1710   char *peerSig;
1711
1712   GNUNET_CRYPTO_hash_to_enc (&uri->data.loc.fi.chk.key, &keyhash);
1713   GNUNET_CRYPTO_hash_to_enc (&uri->data.loc.fi.chk.query, &queryhash);
1714   peerId = bin2enc (&uri->data.loc.peer,
1715                     sizeof (struct GNUNET_CRYPTO_RsaPublicKeyBinaryEncoded));
1716   peerSig = bin2enc (&uri->data.loc.contentSignature, 
1717                      sizeof (struct GNUNET_CRYPTO_RsaSignature));
1718   GNUNET_asprintf (&ret,
1719                    "%s%s%s.%s.%llu.%s.%s.%llu",
1720                    GNUNET_FS_URI_PREFIX,
1721                    GNUNET_FS_URI_LOC_INFIX,
1722                    (const char *) &keyhash,
1723                    (const char *) &queryhash,
1724                    (unsigned long long) GNUNET_ntohll (uri->data.loc.fi.file_length),
1725                    peerId,
1726                    peerSig,
1727                    (unsigned long long) uri->data.loc.expirationTime.value);
1728   GNUNET_free (peerSig);
1729   GNUNET_free (peerId);
1730   return ret;
1731 }
1732
1733
1734 /**
1735  * Convert a URI to a UTF-8 String.
1736  *
1737  * @param uri uri to convert to a string
1738  * @return the UTF-8 string
1739  */
1740 char *
1741 GNUNET_FS_uri_to_string (const struct GNUNET_FS_Uri *uri)
1742 {
1743   if (uri == NULL)
1744     {
1745       GNUNET_break (0);
1746       return NULL;
1747     }
1748   switch (uri->type)
1749     {
1750     case ksk:
1751       return uri_ksk_to_string (uri);
1752     case sks:
1753       return uri_sks_to_string (uri);
1754     case chk:
1755       return uri_chk_to_string (uri);
1756     case loc:
1757       return uri_loc_to_string (uri);
1758     default:
1759       GNUNET_break (0);
1760       return NULL;
1761     }
1762 }
1763
1764 /* end of fs_uri.c */