src/util/strings.c

   1 /*
   2      This file is part of GNUnet.
   3      Copyright (C) 2005-2017 GNUnet e.V.
   4
   5      GNUnet is free software: you can redistribute it and/or modify it
   6      under the terms of the GNU Affero General Public License as published
   7      by the Free Software Foundation, either version 3 of the License,
   8      or (at your option) any later version.
   9
  10      GNUnet is distributed in the hope that it will be useful, but
  11      WITHOUT ANY WARRANTY; without even the implied warranty of
  12      MERCHANTABILITY or FITNESS FOR A PARTICULAR PURPOSE.  See the GNU
  13      Affero General Public License for more details.
  14
  15      You should have received a copy of the GNU Affero General Public License
  16      along with this program.  If not, see <http://www.gnu.org/licenses/>.
  17 */
  18 /**
  19  * @file util/strings.c
  20  * @brief string functions
  21  * @author Nils Durner
  22  * @author Christian Grothoff
  23  */
  24
  25 #include "platform.h"
  26 #if HAVE_ICONV
  27 #include <iconv.h>
  28 #endif
  29 #include "gnunet_crypto_lib.h"
  30 #include "gnunet_strings_lib.h"
  31 #include <unicase.h>
  32 #include <unistr.h>
  33 #include <uniconv.h>
  34
  35 #define LOG(kind,...) GNUNET_log_from (kind, "util-strings", __VA_ARGS__)
  36
  37 #define LOG_STRERROR(kind,syscall) GNUNET_log_from_strerror (kind, "util-strings", syscall)
  38
  39
  40 /**
  41  * Fill a buffer of the given size with
  42  * count 0-terminated strings (given as varargs).
  43  * If "buffer" is NULL, only compute the amount of
  44  * space required (sum of "strlen(arg)+1").
  45  *
  46  * Unlike using "snprintf" with "%s", this function
  47  * will add 0-terminators after each string.  The
  48  * #GNUNET_string_buffer_tokenize() function can be
  49  * used to parse the buffer back into individual
  50  * strings.
  51  *
  52  * @param buffer the buffer to fill with strings, can
  53  *               be NULL in which case only the necessary
  54  *               amount of space will be calculated
  55  * @param size number of bytes available in buffer
  56  * @param count number of strings that follow
  57  * @param ... count 0-terminated strings to copy to buffer
  58  * @return number of bytes written to the buffer
  59  *         (or number of bytes that would have been written)
  60  */
  61 size_t
  62 GNUNET_STRINGS_buffer_fill (char *buffer, size_t size, unsigned int count, ...)
  63 {
  64   size_t needed;
  65   size_t slen;
  66   const char *s;
  67   va_list ap;
  68
  69   needed = 0;
  70   va_start (ap, count);
  71   while (count > 0)
  72   {
  73     s = va_arg (ap, const char *);
  74
  75     slen = strlen (s) + 1;
  76     if (buffer != NULL)
  77     {
  78       GNUNET_assert (needed + slen <= size);
  79       GNUNET_memcpy (&buffer[needed], s, slen);
  80     }
  81     needed += slen;
  82     count--;
  83   }
  84   va_end (ap);
  85   return needed;
  86 }
  87
  88
  89 /**
  90  * Convert a peer path to a human-readable string.
  91  *
  92  * @param pids array of PIDs to convert to a string
  93  * @param num_pids length of the @a pids array
  94  * @return string representing the array of @a pids
  95  */
  96 char *
  97 GNUNET_STRINGS_pp2s (const struct GNUNET_PeerIdentity *pids,
  98                      unsigned int num_pids)
  99 {
 100   char *buf;
 101   size_t off;
 102   size_t plen = num_pids * 5 + 1;
 103
 104   off = 0;
 105   buf = GNUNET_malloc (plen);
 106   for (unsigned int i = 0;
 107        i < num_pids;
 108        i++)
 109   {
 110     off += GNUNET_snprintf (&buf[off],
 111                             plen - off,
 112                             "%s%s",
 113                             GNUNET_i2s (&pids[i]),
 114                             (i == num_pids -1) ? "" : "-");
 115   }
 116   return buf;
 117 }
 118
 119
 120 /**
 121  * Given a buffer of a given size, find "count"
 122  * 0-terminated strings in the buffer and assign
 123  * the count (varargs) of type "const char**" to the
 124  * locations of the respective strings in the
 125  * buffer.
 126  *
 127  * @param buffer the buffer to parse
 128  * @param size size of the buffer
 129  * @param count number of strings to locate
 130  * @return offset of the character after the last 0-termination
 131  *         in the buffer, or 0 on error.
 132  */
 133 unsigned int
 134 GNUNET_STRINGS_buffer_tokenize (const char *buffer, size_t size,
 135                                 unsigned int count, ...)
 136 {
 137   unsigned int start;
 138   unsigned int needed;
 139   const char **r;
 140   va_list ap;
 141
 142   needed = 0;
 143   va_start (ap, count);
 144   while (count > 0)
 145   {
 146     r = va_arg (ap, const char **);
 147
 148     start = needed;
 149     while ((needed < size) && (buffer[needed] != '\0'))
 150       needed++;
 151     if (needed == size)
 152     {
 153       va_end (ap);
 154       return 0;                 /* error */
 155     }
 156     *r = &buffer[start];
 157     needed++;                   /* skip 0-termination */
 158     count--;
 159   }
 160   va_end (ap);
 161   return needed;
 162 }
 163
 164
 165 /**
 166  * Convert a given filesize into a fancy human-readable format.
 167  *
 168  * @param size number of bytes
 169  * @return fancy representation of the size (possibly rounded) for humans
 170  */
 171 char *
 172 GNUNET_STRINGS_byte_size_fancy (unsigned long long size)
 173 {
 174   const char *unit = _( /* size unit */ "b");
 175   char *ret;
 176
 177   if (size > 5 * 1024)
 178   {
 179     size = size / 1024;
 180     unit = "KiB";
 181     if (size > 5 * 1024)
 182     {
 183       size = size / 1024;
 184       unit = "MiB";
 185       if (size > 5 * 1024)
 186       {
 187         size = size / 1024;
 188         unit = "GiB";
 189         if (size > 5 * 1024)
 190         {
 191           size = size / 1024;
 192           unit = "TiB";
 193         }
 194       }
 195     }
 196   }
 197   ret = GNUNET_malloc (32);
 198   GNUNET_snprintf (ret, 32, "%llu %s", size, unit);
 199   return ret;
 200 }
 201
 202
 203 /**
 204  * Unit conversion table entry for 'convert_with_table'.
 205  */
 206 struct ConversionTable
 207 {
 208   /**
 209    * Name of the unit (or NULL for end of table).
 210    */
 211   const char *name;
 212
 213   /**
 214    * Factor to apply for this unit.
 215    */
 216   unsigned long long value;
 217 };
 218
 219
 220 /**
 221  * Convert a string of the form "4 X 5 Y" into a numeric value
 222  * by interpreting "X" and "Y" as units and then multiplying
 223  * the numbers with the values associated with the respective
 224  * unit from the conversion table.
 225  *
 226  * @param input input string to parse
 227  * @param table table with the conversion of unit names to numbers
 228  * @param output where to store the result
 229  * @return #GNUNET_OK on success, #GNUNET_SYSERR on error
 230  */
 231 static int
 232 convert_with_table (const char *input,
 233                     const struct ConversionTable *table,
 234                     unsigned long long *output)
 235 {
 236   unsigned long long ret;
 237   char *in;
 238   const char *tok;
 239   unsigned long long last;
 240   unsigned int i;
 241
 242   ret = 0;
 243   last = 0;
 244   in = GNUNET_strdup (input);
 245   for (tok = strtok (in, " "); tok != NULL; tok = strtok (NULL, " "))
 246   {
 247     do
 248     {
 249       i = 0;
 250       while ((table[i].name != NULL) && (0 != strcasecmp (table[i].name, tok)))
 251         i++;
 252       if (table[i].name != NULL)
 253       {
 254         last *= table[i].value;
 255         break; /* next tok */
 256       }
 257       else
 258       {
 259         char *endptr;
 260         ret += last;
 261         errno = 0;
 262         last = strtoull (tok, &endptr, 10);
 263         if ((0 != errno) || (endptr == tok))
 264         {
 265           GNUNET_free (in);
 266           return GNUNET_SYSERR;   /* expected number */
 267         }
 268         if ('\0' == endptr[0])
 269           break; /* next tok */
 270         else
 271           tok = endptr; /* and re-check (handles times like "10s") */
 272       }
 273     } while (GNUNET_YES);
 274   }
 275   ret += last;
 276   *output = ret;
 277   GNUNET_free (in);
 278   return GNUNET_OK;
 279 }
 280
 281
 282 /**
 283  * Convert a given fancy human-readable size to bytes.
 284  *
 285  * @param fancy_size human readable string (i.e. 1 MB)
 286  * @param size set to the size in bytes
 287  * @return #GNUNET_OK on success, #GNUNET_SYSERR on error
 288  */
 289 int
 290 GNUNET_STRINGS_fancy_size_to_bytes (const char *fancy_size,
 291                                     unsigned long long *size)
 292 {
 293   static const struct ConversionTable table[] =
 294   {
 295     { "B", 1},
 296     { "KiB", 1024},
 297     { "kB", 1000},
 298     { "MiB", 1024 * 1024},
 299     { "MB", 1000 * 1000},
 300     { "GiB", 1024 * 1024 * 1024},
 301     { "GB", 1000 * 1000 * 1000},
 302     { "TiB", 1024LL * 1024LL * 1024LL * 1024LL},
 303     { "TB", 1000LL * 1000LL * 1000LL * 1024LL},
 304     { "PiB", 1024LL * 1024LL * 1024LL * 1024LL * 1024LL},
 305     { "PB", 1000LL * 1000LL * 1000LL * 1024LL * 1000LL},
 306     { "EiB", 1024LL * 1024LL * 1024LL * 1024LL * 1024LL * 1024LL},
 307     { "EB", 1000LL * 1000LL * 1000LL * 1024LL * 1000LL * 1000LL},
 308     { NULL, 0}
 309   };
 310
 311   return convert_with_table (fancy_size,
 312                              table,
 313                              size);
 314 }
 315
 316
 317 /**
 318  * Convert a given fancy human-readable time to our internal
 319  * representation.
 320  *
 321  * @param fancy_time human readable string (i.e. 1 minute)
 322  * @param rtime set to the relative time
 323  * @return #GNUNET_OK on success, #GNUNET_SYSERR on error
 324  */
 325 int
 326 GNUNET_STRINGS_fancy_time_to_relative (const char *fancy_time,
 327                                        struct GNUNET_TIME_Relative *rtime)
 328 {
 329   static const struct ConversionTable table[] =
 330   {
 331     { "us", 1},
 332     { "ms", 1000 },
 333     { "s", 1000 * 1000LL },
 334     { "second", 1000 * 1000LL },
 335     { "seconds", 1000 * 1000LL },
 336     { "\"", 1000  * 1000LL },
 337     { "m", 60 * 1000  * 1000LL},
 338     { "min", 60 * 1000  * 1000LL},
 339     { "minute", 60 * 1000  * 1000LL},
 340     { "minutes", 60 * 1000  * 1000LL},
 341     { "'", 60 * 1000  * 1000LL},
 342     { "h", 60 * 60 * 1000  * 1000LL},
 343     { "hour", 60 * 60 * 1000  * 1000LL},
 344     { "hours", 60 * 60 * 1000  * 1000LL},
 345     { "d", 24 * 60 * 60 * 1000LL * 1000LL},
 346     { "day", 24 * 60 * 60 * 1000LL * 1000LL},
 347     { "days", 24 * 60 * 60 * 1000LL * 1000LL},
 348     { "week", 7 * 24 * 60 * 60 * 1000LL * 1000LL},
 349     { "weeks", 7 * 24 * 60 * 60 * 1000LL * 1000LL},
 350     { "year", 31536000000000LL /* year */ },
 351     { "years", 31536000000000LL /* year */ },
 352     { "a", 31536000000000LL /* year */ },
 353     { NULL, 0}
 354   };
 355   int ret;
 356   unsigned long long val;
 357
 358   if (0 == strcasecmp ("forever", fancy_time))
 359   {
 360     *rtime = GNUNET_TIME_UNIT_FOREVER_REL;
 361     return GNUNET_OK;
 362   }
 363   ret = convert_with_table (fancy_time,
 364                             table,
 365                             &val);
 366   rtime->rel_value_us = (uint64_t) val;
 367   return ret;
 368 }
 369
 370
 371 /**
 372  * Convert a given fancy human-readable time to our internal
 373  * representation. The human-readable time is expected to be
 374  * in local time, whereas the returned value will be in UTC.
 375  *
 376  * @param fancy_time human readable string (i.e. %Y-%m-%d %H:%M:%S)
 377  * @param atime set to the absolute time
 378  * @return #GNUNET_OK on success, #GNUNET_SYSERR on error
 379  */
 380 int
 381 GNUNET_STRINGS_fancy_time_to_absolute (const char *fancy_time,
 382                                        struct GNUNET_TIME_Absolute *atime)
 383 {
 384   struct tm tv;
 385   time_t t;
 386
 387   if (0 == strcasecmp ("end of time",
 388                        fancy_time))
 389   {
 390     *atime = GNUNET_TIME_UNIT_FOREVER_ABS;
 391     return GNUNET_OK;
 392   }
 393   memset (&tv, 0, sizeof (tv));
 394   if ( (NULL == strptime (fancy_time, "%a %b %d %H:%M:%S %Y", &tv)) &&
 395        (NULL == strptime (fancy_time, "%c", &tv)) &&
 396        (NULL == strptime (fancy_time, "%Ec", &tv)) &&
 397        (NULL == strptime (fancy_time, "%Y-%m-%d %H:%M:%S", &tv)) &&
 398        (NULL == strptime (fancy_time, "%Y-%m-%d %H:%M", &tv)) &&
 399        (NULL == strptime (fancy_time, "%x", &tv)) &&
 400        (NULL == strptime (fancy_time, "%Ex", &tv)) &&
 401        (NULL == strptime (fancy_time, "%Y-%m-%d", &tv)) &&
 402        (NULL == strptime (fancy_time, "%Y-%m", &tv)) &&
 403        (NULL == strptime (fancy_time, "%Y", &tv)) )
 404     return GNUNET_SYSERR;
 405   t = mktime (&tv);
 406   atime->abs_value_us = (uint64_t) ((uint64_t) t * 1000LL * 1000LL);
 407   return GNUNET_OK;
 408 }
 409
 410
 411 /**
 412  * Convert the len characters long character sequence
 413  * given in input that is in the given input charset
 414  * to a string in given output charset.
 415  *
 416  * @param input input string
 417  * @param len number of bytes in @a input
 418  * @param input_charset character set used for @a input
 419  * @param output_charset desired character set for the return value
 420  * @return the converted string (0-terminated),
 421  *  if conversion fails, a copy of the orignal
 422  *  string is returned.
 423  */
 424 char *
 425 GNUNET_STRINGS_conv (const char *input,
 426                      size_t len,
 427                      const char *input_charset,
 428                      const char *output_charset)
 429 {
 430   char *ret;
 431   uint8_t *u8_string;
 432   char *encoded_string;
 433   size_t u8_string_length;
 434   size_t encoded_string_length;
 435
 436   u8_string = u8_conv_from_encoding (input_charset,
 437                                      iconveh_error,
 438                                      input, len,
 439                                      NULL, NULL,
 440                                      &u8_string_length);
 441   if (NULL == u8_string)
 442   {
 443     LOG_STRERROR (GNUNET_ERROR_TYPE_WARNING, "u8_conv_from_encoding");
 444     goto fail;
 445   }
 446   if (0 == strcmp (output_charset, "UTF-8"))
 447   {
 448     ret = GNUNET_malloc (u8_string_length + 1);
 449     GNUNET_memcpy (ret, u8_string, u8_string_length);
 450     ret[u8_string_length] = '\0';
 451     free (u8_string);
 452     return ret;
 453   }
 454   encoded_string = u8_conv_to_encoding (output_charset, iconveh_error,
 455                                         u8_string, u8_string_length,
 456                                         NULL, NULL,
 457                                         &encoded_string_length);
 458   free (u8_string);
 459   if (NULL == encoded_string)
 460   {
 461     LOG_STRERROR (GNUNET_ERROR_TYPE_WARNING, "u8_conv_to_encoding");
 462     goto fail;
 463   }
 464   ret = GNUNET_malloc (encoded_string_length + 1);
 465   GNUNET_memcpy (ret, encoded_string, encoded_string_length);
 466   ret[encoded_string_length] = '\0';
 467   free (encoded_string);
 468   return ret;
 469  fail:
 470   LOG (GNUNET_ERROR_TYPE_WARNING,
 471        _("Character sets requested were `%s'->`%s'\n"),
 472        "UTF-8", output_charset);
 473   ret = GNUNET_malloc (len + 1);
 474   GNUNET_memcpy (ret, input, len);
 475   ret[len] = '\0';
 476   return ret;
 477 }
 478
 479
 480 /**
 481  * Convert the len characters long character sequence
 482  * given in input that is in the given charset
 483  * to UTF-8.
 484  *
 485  * @param input the input string (not necessarily 0-terminated)
 486  * @param len the number of bytes in the @a input
 487  * @param charset character set to convert from
 488  * @return the converted string (0-terminated),
 489  *  if conversion fails, a copy of the orignal
 490  *  string is returned.
 491  */
 492 char *
 493 GNUNET_STRINGS_to_utf8 (const char *input,
 494                         size_t len,
 495                         const char *charset)
 496 {
 497   return GNUNET_STRINGS_conv (input, len, charset, "UTF-8");
 498 }
 499
 500
 501 /**
 502  * Convert the len bytes-long UTF-8 string
 503  * given in input to the given charset.
 504  *
 505  * @param input the input string (not necessarily 0-terminated)
 506  * @param len the number of bytes in the @a input
 507  * @param charset character set to convert to
 508  * @return the converted string (0-terminated),
 509  *  if conversion fails, a copy of the orignal
 510  *  string is returned.
 511  */
 512 char *
 513 GNUNET_STRINGS_from_utf8 (const char *input,
 514                           size_t len,
 515                           const char *charset)
 516 {
 517   return GNUNET_STRINGS_conv (input, len, "UTF-8", charset);
 518 }
 519
 520
 521 /**
 522  * Convert the utf-8 input string to lowercase.
 523  * Output needs to be allocated appropriately.
 524  *
 525  * @param input input string
 526  * @param output output buffer
 527  */
 528 void
 529 GNUNET_STRINGS_utf8_tolower (const char *input,
 530                              char *output)
 531 {
 532   uint8_t *tmp_in;
 533   size_t len;
 534
 535   tmp_in = u8_tolower ((uint8_t*)input, strlen ((char *) input),
 536                        NULL, UNINORM_NFD, NULL, &len);
 537   GNUNET_memcpy(output, tmp_in, len);
 538   output[len] = '\0';
 539   free(tmp_in);
 540 }
 541
 542
 543 /**
 544  * Convert the utf-8 input string to uppercase.
 545  * Output needs to be allocated appropriately.
 546  *
 547  * @param input input string
 548  * @param output output buffer
 549  */
 550 void
 551 GNUNET_STRINGS_utf8_toupper(const char *input,
 552                             char *output)
 553 {
 554   uint8_t *tmp_in;
 555   size_t len;
 556
 557   tmp_in = u8_toupper ((uint8_t*)input, strlen ((char *) input),
 558                        NULL, UNINORM_NFD, NULL, &len);
 559   GNUNET_memcpy (output, tmp_in, len);
 560   output[len] = '\0';
 561   free (tmp_in);
 562 }
 563
 564
 565 /**
 566  * Complete filename (a la shell) from abbrevition.
 567  * @param fil the name of the file, may contain ~/ or
 568  *        be relative to the current directory
 569  * @returns the full file name,
 570  *          NULL is returned on error
 571  */
 572 char *
 573 GNUNET_STRINGS_filename_expand (const char *fil)
 574 {
 575   char *buffer;
 576 #ifndef MINGW
 577   size_t len;
 578   char *fm;
 579   const char *fil_ptr;
 580 #else
 581   char *fn;
 582   long lRet;
 583 #endif
 584
 585   if (fil == NULL)
 586     return NULL;
 587
 588 #ifndef MINGW
 589   if (fil[0] == DIR_SEPARATOR)
 590     /* absolute path, just copy */
 591     return GNUNET_strdup (fil);
 592   if (fil[0] == '~')
 593   {
 594     fm = getenv ("HOME");
 595     if (fm == NULL)
 596     {
 597       LOG (GNUNET_ERROR_TYPE_WARNING,
 598            _("Failed to expand `$HOME': environment variable `HOME' not set"));
 599       return NULL;
 600     }
 601     fm = GNUNET_strdup (fm);
 602     /* do not copy '~' */
 603     fil_ptr = fil + 1;
 604
 605     /* skip over dir seperator to be consistent */
 606     if (fil_ptr[0] == DIR_SEPARATOR)
 607       fil_ptr++;
 608   }
 609   else
 610   {
 611     /* relative path */
 612     fil_ptr = fil;
 613     len = 512;
 614     fm = NULL;
 615     while (1)
 616     {
 617       buffer = GNUNET_malloc (len);
 618       if (getcwd (buffer, len) != NULL)
 619       {
 620         fm = buffer;
 621         break;
 622       }
 623       if ((errno == ERANGE) && (len < 1024 * 1024 * 4))
 624       {
 625         len *= 2;
 626         GNUNET_free (buffer);
 627         continue;
 628       }
 629       GNUNET_free (buffer);
 630       break;
 631     }
 632     if (fm == NULL)
 633     {
 634       LOG_STRERROR (GNUNET_ERROR_TYPE_WARNING,
 635                     "getcwd");
 636       buffer = getenv ("PWD");  /* alternative */
 637       if (buffer != NULL)
 638         fm = GNUNET_strdup (buffer);
 639     }
 640     if (fm == NULL)
 641       fm = GNUNET_strdup ("./");        /* give up */
 642   }
 643   GNUNET_asprintf (&buffer,
 644                    "%s%s%s",
 645                    fm,
 646                    (fm[strlen (fm) - 1] ==
 647                     DIR_SEPARATOR) ? "" : DIR_SEPARATOR_STR, fil_ptr);
 648   GNUNET_free (fm);
 649   return buffer;
 650 #else
 651   fn = GNUNET_malloc (MAX_PATH + 1);
 652
 653   if ((lRet = plibc_conv_to_win_path (fil, fn)) != ERROR_SUCCESS)
 654   {
 655     SetErrnoFromWinError (lRet);
 656     LOG_STRERROR (GNUNET_ERROR_TYPE_WARNING,
 657                   "plibc_conv_to_win_path");
 658     return NULL;
 659   }
 660   /* is the path relative? */
 661   if ( (0 != strncmp (fn + 1, ":\\", 2)) &&
 662        (0 != strncmp (fn, "\\\\", 2)) )
 663   {
 664     char szCurDir[MAX_PATH + 1];
 665
 666     lRet = GetCurrentDirectory (MAX_PATH + 1,
 667                                 szCurDir);
 668     if (lRet + strlen (fn) + 1 > (MAX_PATH + 1))
 669     {
 670       SetErrnoFromWinError (ERROR_BUFFER_OVERFLOW);
 671       LOG_STRERROR (GNUNET_ERROR_TYPE_WARNING,
 672                     "GetCurrentDirectory");
 673       return NULL;
 674     }
 675     GNUNET_asprintf (&buffer,
 676                      "%s\\%s",
 677                      szCurDir,
 678                      fn);
 679     GNUNET_free (fn);
 680     fn = buffer;
 681   }
 682
 683   return fn;
 684 #endif
 685 }
 686
 687
 688 /**
 689  * Give relative time in human-readable fancy format.
 690  * This is one of the very few calls in the entire API that is
 691  * NOT reentrant!
 692  *
 693  * @param delta time in milli seconds
 694  * @param do_round are we allowed to round a bit?
 695  * @return time as human-readable string
 696  */
 697 const char *
 698 GNUNET_STRINGS_relative_time_to_string (struct GNUNET_TIME_Relative delta,
 699                                         int do_round)
 700 {
 701   static char buf[128];
 702   const char *unit = _( /* time unit */ "µs");
 703   uint64_t dval = delta.rel_value_us;
 704
 705   if (GNUNET_TIME_UNIT_FOREVER_REL.rel_value_us == delta.rel_value_us)
 706     return _("forever");
 707   if (0 == delta.rel_value_us)
 708     return _("0 ms");
 709   if ( ( (GNUNET_YES == do_round) &&
 710          (dval > 5 * 1000) ) ||
 711        (0 == (dval % 1000) ))
 712   {
 713     dval = dval / 1000;
 714     unit = _( /* time unit */ "ms");
 715     if ( ( (GNUNET_YES == do_round) &&
 716            (dval > 5 * 1000) ) ||
 717          (0 == (dval % 1000) ))
 718     {
 719       dval = dval / 1000;
 720       unit = _( /* time unit */ "s");
 721       if ( ( (GNUNET_YES == do_round) &&
 722              (dval > 5 * 60) ) ||
 723            (0 == (dval % 60) ) )
 724       {
 725         dval = dval / 60;
 726         unit = _( /* time unit */ "m");
 727         if ( ( (GNUNET_YES == do_round) &&
 728                (dval > 5 * 60) ) ||
 729              (0 == (dval % 60) ))
 730         {
 731           dval = dval / 60;
 732           unit = _( /* time unit */ "h");
 733           if ( ( (GNUNET_YES == do_round) &&
 734                  (dval > 5 * 24) ) ||
 735                (0 == (dval % 24)) )
 736           {
 737             dval = dval / 24;
 738             if (1 == dval)
 739               unit = _( /* time unit */ "day");
 740             else
 741               unit = _( /* time unit */ "days");
 742           }
 743         }
 744       }
 745     }
 746   }
 747   GNUNET_snprintf (buf, sizeof (buf),
 748                    "%llu %s", dval, unit);
 749   return buf;
 750 }
 751
 752
 753 /**
 754  * "asctime", except for GNUnet time.  Converts a GNUnet internal
 755  * absolute time (which is in UTC) to a string in local time.
 756  * Note that the returned value will be overwritten if this function
 757  * is called again.
 758  *
 759  * @param t the absolute time to convert
 760  * @return timestamp in human-readable form in local time
 761  */
 762 const char *
 763 GNUNET_STRINGS_absolute_time_to_string (struct GNUNET_TIME_Absolute t)
 764 {
 765   static char buf[255];
 766   time_t tt;
 767   struct tm *tp;
 768
 769   if (t.abs_value_us == GNUNET_TIME_UNIT_FOREVER_ABS.abs_value_us)
 770     return _("end of time");
 771   tt = t.abs_value_us / 1000LL / 1000LL;
 772   tp = localtime (&tt);
 773   /* This is hacky, but i don't know a way to detect libc character encoding.
 774    * Just expect utf8 from glibc these days.
 775    * As for msvcrt, use the wide variant, which always returns utf16
 776    * (otherwise we'd have to detect current codepage or use W32API character
 777    * set conversion routines to convert to UTF8).
 778    */
 779 #ifndef WINDOWS
 780   strftime (buf, sizeof (buf), "%a %b %d %H:%M:%S %Y", tp);
 781 #else
 782   {
 783     static wchar_t wbuf[255];
 784     uint8_t *conved;
 785     size_t ssize;
 786
 787     wcsftime (wbuf, sizeof (wbuf) / sizeof (wchar_t),
 788         L"%a %b %d %H:%M:%S %Y", tp);
 789
 790     ssize = sizeof (buf);
 791     conved = u16_to_u8 (wbuf, sizeof (wbuf) / sizeof (wchar_t),
 792         (uint8_t *) buf, &ssize);
 793     if (conved != (uint8_t *) buf)
 794     {
 795       strncpy (buf, (char *) conved, sizeof (buf));
 796       buf[255 - 1] = '\0';
 797       free (conved);
 798     }
 799   }
 800 #endif
 801   return buf;
 802 }
 803
 804
 805 /**
 806  * "man basename"
 807  * Returns a pointer to a part of filename (allocates nothing)!
 808  *
 809  * @param filename filename to extract basename from
 810  * @return short (base) name of the file (that is, everything following the
 811  *         last directory separator in filename. If filename ends with a
 812  *         directory separator, the result will be a zero-length string.
 813  *         If filename has no directory separators, the result is filename
 814  *         itself.
 815  */
 816 const char *
 817 GNUNET_STRINGS_get_short_name (const char *filename)
 818 {
 819   const char *short_fn = filename;
 820   const char *ss;
 821
 822   while (NULL != (ss = strstr (short_fn, DIR_SEPARATOR_STR))
 823       && (ss[1] != '\0'))
 824     short_fn = 1 + ss;
 825   return short_fn;
 826 }
 827
 828
 829 /**
 830  * Get the decoded value corresponding to a character according to Crockford
 831  * Base32 encoding.
 832  *
 833  * @param a a character
 834  * @return corresponding numeric value
 835  */
 836 static unsigned int
 837 getValue__ (unsigned char a)
 838 {
 839   unsigned int dec;
 840
 841   switch (a)
 842   {
 843   case 'O':
 844   case 'o':
 845     a = '0';
 846     break;
 847   case 'i':
 848   case 'I':
 849   case 'l':
 850   case 'L':
 851     a = '1';
 852     break;
 853     /* also consider U to be V */
 854   case 'u':
 855   case 'U':
 856     a = 'V';
 857     break;
 858   default:
 859     break;
 860   }
 861   if ((a >= '0') && (a <= '9'))
 862     return a - '0';
 863   if ((a >= 'a') && (a <= 'z'))
 864     a = toupper (a);
 865     /* return (a - 'a' + 10); */
 866   dec = 0;
 867   if ((a >= 'A') && (a <= 'Z'))
 868   {
 869     if ('I' < a)
 870       dec++;
 871     if ('L' < a)
 872       dec++;
 873     if ('O' < a)
 874       dec++;
 875     if ('U' < a)
 876       dec++;
 877     return (a - 'A' + 10 - dec);
 878   }
 879   return -1;
 880 }
 881
 882
 883 /**
 884  * Convert binary data to ASCII encoding using Crockford Base32 encoding.
 885  * Returns a pointer to the byte after the last byte in the string, that
 886  * is where the 0-terminator was placed if there was room.
 887  *
 888  * @param data data to encode
 889  * @param size size of data (in bytes)
 890  * @param out buffer to fill
 891  * @param out_size size of the buffer. Must be large enough to hold
 892  * (size * 8 + 4) / 5 bytes
 893  * @return pointer to the next byte in @a out or NULL on error.
 894  */
 895 char *
 896 GNUNET_STRINGS_data_to_string (const void *data,
 897                                size_t size,
 898                                char *out,
 899                                size_t out_size)
 900 {
 901   /**
 902    * 32 characters for encoding
 903    */
 904   static char *encTable__ = "0123456789ABCDEFGHJKMNPQRSTVWXYZ";
 905   unsigned int wpos;
 906   unsigned int rpos;
 907   unsigned int bits;
 908   unsigned int vbit;
 909   const unsigned char *udata;
 910
 911   udata = data;
 912   if (out_size < (size * 8 + 4) / 5)
 913   {
 914     GNUNET_break (0);
 915     return NULL;
 916   }
 917   vbit = 0;
 918   wpos = 0;
 919   rpos = 0;
 920   bits = 0;
 921   while ((rpos < size) || (vbit > 0))
 922   {
 923     if ((rpos < size) && (vbit < 5))
 924     {
 925       bits = (bits << 8) | udata[rpos++];   /* eat 8 more bits */
 926       vbit += 8;
 927     }
 928     if (vbit < 5)
 929     {
 930       bits <<= (5 - vbit);      /* zero-padding */
 931       GNUNET_assert (vbit == ((size * 8) % 5));
 932       vbit = 5;
 933     }
 934     if (wpos >= out_size)
 935     {
 936       GNUNET_break (0);
 937       return NULL;
 938     }
 939     out[wpos++] = encTable__[(bits >> (vbit - 5)) & 31];
 940     vbit -= 5;
 941   }
 942   GNUNET_assert (0 == vbit);
 943   if (wpos < out_size)
 944     out[wpos] = '\0';
 945   return &out[wpos];
 946 }
 947
 948
 949 /**
 950  * Return the base32crockford encoding of the given buffer.
 951  *
 952  * The returned string will be freshly allocated, and must be free'd
 953  * with GNUNET_free().
 954  *
 955  * @param buffer with data
 956  * @param size size of the buffer
 957  * @return freshly allocated, null-terminated string
 958  */
 959 char *
 960 GNUNET_STRINGS_data_to_string_alloc (const void *buf,
 961                                      size_t size)
 962 {
 963   char *str_buf;
 964   size_t len = size * 8;
 965   char *end;
 966
 967   if (len % 5 > 0)
 968     len += 5 - len % 5;
 969   len /= 5;
 970   str_buf = GNUNET_malloc (len + 1);
 971   end = GNUNET_STRINGS_data_to_string (buf, size, str_buf, len);
 972   if (NULL == end)
 973   {
 974     GNUNET_free (str_buf);
 975     return NULL;
 976   }
 977   *end = '\0';
 978   return str_buf;
 979 }
 980
 981
 982 /**
 983  * Convert Crockford Base32hex encoding back to data.
 984  * @a out_size must match exactly the size of the data before it was encoded.
 985  *
 986  * @param enc the encoding
 987  * @param enclen number of characters in @a enc (without 0-terminator, which can be missing)
 988  * @param out location where to store the decoded data
 989  * @param out_size size of the output buffer @a out
 990  * @return #GNUNET_OK on success, #GNUNET_SYSERR if result has the wrong encoding
 991  */
 992 int
 993 GNUNET_STRINGS_string_to_data (const char *enc, size_t enclen,
 994                                void *out, size_t out_size)
 995 {
 996   unsigned int rpos;
 997   unsigned int wpos;
 998   unsigned int bits;
 999   unsigned int vbit;
1000   int ret;
1001   int shift;
1002   unsigned char *uout;
1003   unsigned int encoded_len = out_size * 8;
1004
1005   if (0 == enclen)
1006   {
1007     if (0 == out_size)
1008       return GNUNET_OK;
1009     return GNUNET_SYSERR;
1010   }
1011   uout = out;
1012   wpos = out_size;
1013   rpos = enclen;
1014   if ((encoded_len % 5) > 0)
1015   {
1016     vbit = encoded_len % 5; /* padding! */
1017     shift = 5 - vbit;
1018     bits = (ret = getValue__ (enc[--rpos])) >> shift;
1019   }
1020   else
1021   {
1022     vbit = 5;
1023     shift = 0;
1024     bits = (ret = getValue__ (enc[--rpos]));
1025   }
1026   if ((encoded_len + shift) / 5 != enclen)
1027     return GNUNET_SYSERR;
1028   if (-1 == ret)
1029     return GNUNET_SYSERR;
1030   while (wpos > 0)
1031   {
1032     if (0 == rpos)
1033     {
1034       GNUNET_break (0);
1035       return GNUNET_SYSERR;
1036     }
1037     bits = ((ret = getValue__ (enc[--rpos])) << vbit) | bits;
1038     if (-1 == ret)
1039       return GNUNET_SYSERR;
1040     vbit += 5;
1041     if (vbit >= 8)
1042     {
1043       uout[--wpos] = (unsigned char) bits;
1044       bits >>= 8;
1045       vbit -= 8;
1046     }
1047   }
1048   if ( (0 != rpos) ||
1049        (0 != vbit) )
1050     return GNUNET_SYSERR;
1051   return GNUNET_OK;
1052 }
1053
1054
1055 /**
1056  * Parse a path that might be an URI.
1057  *
1058  * @param path path to parse. Must be NULL-terminated.
1059  * @param scheme_part a pointer to 'char *' where a pointer to a string that
1060  *        represents the URI scheme will be stored. Can be NULL. The string is
1061  *        allocated by the function, and should be freed by GNUNET_free() when
1062  *        it is no longer needed.
1063  * @param path_part a pointer to 'const char *' where a pointer to the path
1064  *        part of the URI will be stored. Can be NULL. Points to the same block
1065  *        of memory as 'path', and thus must not be freed. Might point to '\0',
1066  *        if path part is zero-length.
1067  * @return GNUNET_YES if it's an URI, GNUNET_NO otherwise. If 'path' is not
1068  *         an URI, '* scheme_part' and '*path_part' will remain unchanged
1069  *         (if they weren't NULL).
1070  */
1071 int
1072 GNUNET_STRINGS_parse_uri (const char *path,
1073                           char **scheme_part,
1074                           const char **path_part)
1075 {
1076   size_t len;
1077   size_t i;
1078   int end;
1079   int pp_state = 0;
1080   const char *post_scheme_part = NULL;
1081   len = strlen (path);
1082   for (end = 0, i = 0; !end && i < len; i++)
1083   {
1084     switch (pp_state)
1085     {
1086     case 0:
1087       if ( (path[i] == ':') && (i > 0) )
1088       {
1089         pp_state += 1;
1090         continue;
1091       }
1092       if (!((path[i] >= 'A' && path[i] <= 'Z') || (path[i] >= 'a' && path[i] <= 'z')
1093           || (path[i] >= '0' && path[i] <= '9') || path[i] == '+' || path[i] == '-'
1094           || (path[i] == '.')))
1095         end = 1;
1096       break;
1097     case 1:
1098     case 2:
1099       if (path[i] == '/')
1100       {
1101         pp_state += 1;
1102         continue;
1103       }
1104       end = 1;
1105       break;
1106     case 3:
1107       post_scheme_part = &path[i];
1108       end = 1;
1109       break;
1110     default:
1111       end = 1;
1112     }
1113   }
1114   if (post_scheme_part == NULL)
1115     return GNUNET_NO;
1116   if (scheme_part)
1117   {
1118     *scheme_part = GNUNET_malloc (post_scheme_part - path + 1);
1119     GNUNET_memcpy (*scheme_part, path, post_scheme_part - path);
1120     (*scheme_part)[post_scheme_part - path] = '\0';
1121   }
1122   if (path_part)
1123     *path_part = post_scheme_part;
1124   return GNUNET_YES;
1125 }
1126
1127
1128 /**
1129  * Check whether @a filename is absolute or not, and if it's an URI
1130  *
1131  * @param filename filename to check
1132  * @param can_be_uri #GNUNET_YES to check for being URI, #GNUNET_NO - to
1133  *        assume it's not URI
1134  * @param r_is_uri a pointer to an int that is set to #GNUNET_YES if @a filename
1135  *        is URI and to #GNUNET_NO otherwise. Can be NULL. If @a can_be_uri is
1136  *        not #GNUNET_YES, `* r_is_uri` is set to #GNUNET_NO.
1137  * @param r_uri_scheme a pointer to a char * that is set to a pointer to URI scheme.
1138  *        The string is allocated by the function, and should be freed with
1139  *        GNUNET_free(). Can be NULL.
1140  * @return #GNUNET_YES if @a filename is absolute, #GNUNET_NO otherwise.
1141  */
1142 int
1143 GNUNET_STRINGS_path_is_absolute (const char *filename,
1144                                  int can_be_uri,
1145                                  int *r_is_uri,
1146                                  char **r_uri_scheme)
1147 {
1148 #if WINDOWS
1149   size_t len;
1150 #endif
1151   const char *post_scheme_path;
1152   int is_uri;
1153   char * uri;
1154   /* consider POSIX paths to be absolute too, even on W32,
1155    * as plibc expansion will fix them for us.
1156    */
1157   if (filename[0] == '/')
1158     return GNUNET_YES;
1159   if (can_be_uri)
1160   {
1161     is_uri = GNUNET_STRINGS_parse_uri (filename, &uri, &post_scheme_path);
1162     if (r_is_uri)
1163       *r_is_uri = is_uri;
1164     if (is_uri)
1165     {
1166       if (r_uri_scheme)
1167         *r_uri_scheme = uri;
1168       else
1169         GNUNET_free_non_null (uri);
1170 #if WINDOWS
1171       len = strlen(post_scheme_path);
1172       /* Special check for file:///c:/blah
1173        * We want to parse 'c:/', not '/c:/'
1174        */
1175       if (post_scheme_path[0] == '/' && len >= 3 && post_scheme_path[2] == ':')
1176         post_scheme_path = &post_scheme_path[1];
1177 #endif
1178       return GNUNET_STRINGS_path_is_absolute (post_scheme_path, GNUNET_NO, NULL, NULL);
1179     }
1180   }
1181   else
1182   {
1183     if (r_is_uri)
1184       *r_is_uri = GNUNET_NO;
1185   }
1186 #if WINDOWS
1187   len = strlen (filename);
1188   if (len >= 3 &&
1189       ((filename[0] >= 'A' && filename[0] <= 'Z')
1190       || (filename[0] >= 'a' && filename[0] <= 'z'))
1191       && filename[1] == ':' && (filename[2] == '/' || filename[2] == '\\'))
1192     return GNUNET_YES;
1193 #endif
1194   return GNUNET_NO;
1195 }
1196
1197 #if MINGW
1198 #define         _IFMT           0170000 /* type of file */
1199 #define         _IFLNK          0120000 /* symbolic link */
1200 #define  S_ISLNK(m)     (((m)&_IFMT) == _IFLNK)
1201 #endif
1202
1203
1204 /**
1205  * Perform @a checks on @a filename.
1206  *
1207  * @param filename file to check
1208  * @param checks checks to perform
1209  * @return #GNUNET_YES if all checks pass, #GNUNET_NO if at least one of them
1210  *         fails, #GNUNET_SYSERR when a check can't be performed
1211  */
1212 int
1213 GNUNET_STRINGS_check_filename (const char *filename,
1214                                enum GNUNET_STRINGS_FilenameCheck checks)
1215 {
1216   struct stat st;
1217   if ( (NULL == filename) || (filename[0] == '\0') )
1218     return GNUNET_SYSERR;
1219   if (0 != (checks & GNUNET_STRINGS_CHECK_IS_ABSOLUTE))
1220     if (!GNUNET_STRINGS_path_is_absolute (filename, GNUNET_NO, NULL, NULL))
1221       return GNUNET_NO;
1222   if (0 != (checks & (GNUNET_STRINGS_CHECK_EXISTS
1223                       | GNUNET_STRINGS_CHECK_IS_DIRECTORY
1224                       | GNUNET_STRINGS_CHECK_IS_LINK)))
1225   {
1226     if (0 != STAT (filename, &st))
1227     {
1228       if (0 != (checks & GNUNET_STRINGS_CHECK_EXISTS))
1229         return GNUNET_NO;
1230       else
1231         return GNUNET_SYSERR;
1232     }
1233   }
1234   if (0 != (checks & GNUNET_STRINGS_CHECK_IS_DIRECTORY))
1235     if (!S_ISDIR (st.st_mode))
1236       return GNUNET_NO;
1237   if (0 != (checks & GNUNET_STRINGS_CHECK_IS_LINK))
1238     if (!S_ISLNK (st.st_mode))
1239       return GNUNET_NO;
1240   return GNUNET_YES;
1241 }
1242
1243
1244 /**
1245  * Tries to convert @a zt_addr string to an IPv6 address.
1246  * The string is expected to have the format "[ABCD::01]:80".
1247  *
1248  * @param zt_addr 0-terminated string. May be mangled by the function.
1249  * @param addrlen length of @a zt_addr (not counting 0-terminator).
1250  * @param r_buf a buffer to fill. Initially gets filled with zeroes,
1251  *        then its sin6_port, sin6_family and sin6_addr are set appropriately.
1252  * @return #GNUNET_OK if conversion succeded.
1253  *         #GNUNET_SYSERR otherwise, in which
1254  *         case the contents of @a r_buf are undefined.
1255  */
1256 int
1257 GNUNET_STRINGS_to_address_ipv6 (const char *zt_addr,
1258                                 uint16_t addrlen,
1259                                 struct sockaddr_in6 *r_buf)
1260 {
1261   char zbuf[addrlen + 1];
1262   int ret;
1263   char *port_colon;
1264   unsigned int port;
1265   char dummy[2];
1266
1267   if (addrlen < 6)
1268     return GNUNET_SYSERR;
1269   GNUNET_memcpy (zbuf, zt_addr, addrlen);
1270   if ('[' != zbuf[0])
1271   {
1272     GNUNET_log (GNUNET_ERROR_TYPE_WARNING,
1273                 _("IPv6 address did not start with `['\n"));
1274     return GNUNET_SYSERR;
1275   }
1276   zbuf[addrlen] = '\0';
1277   port_colon = strrchr (zbuf, ':');
1278   if (NULL == port_colon)
1279   {
1280     GNUNET_log (GNUNET_ERROR_TYPE_WARNING,
1281                 _("IPv6 address did contain ':' to separate port number\n"));
1282     return GNUNET_SYSERR;
1283   }
1284   if (']' != *(port_colon - 1))
1285   {
1286     GNUNET_log (GNUNET_ERROR_TYPE_WARNING,
1287                 _("IPv6 address did contain ']' before ':' to separate port number\n"));
1288     return GNUNET_SYSERR;
1289   }
1290   ret = SSCANF (port_colon,
1291                 ":%u%1s",
1292                 &port,
1293                 dummy);
1294   if ( (1 != ret) || (port > 65535) )
1295   {
1296     GNUNET_log (GNUNET_ERROR_TYPE_WARNING,
1297                 _("IPv6 address did contain a valid port number after the last ':'\n"));
1298     return GNUNET_SYSERR;
1299   }
1300   *(port_colon-1) = '\0';
1301   memset (r_buf, 0, sizeof (struct sockaddr_in6));
1302   ret = inet_pton (AF_INET6, &zbuf[1], &r_buf->sin6_addr);
1303   if (ret <= 0)
1304   {
1305     GNUNET_log (GNUNET_ERROR_TYPE_WARNING,
1306                 _("Invalid IPv6 address `%s': %s\n"),
1307                 &zbuf[1],
1308                 STRERROR (errno));
1309     return GNUNET_SYSERR;
1310   }
1311   r_buf->sin6_port = htons (port);
1312   r_buf->sin6_family = AF_INET6;
1313 #if HAVE_SOCKADDR_IN_SIN_LEN
1314   r_buf->sin6_len = (u_char) sizeof (struct sockaddr_in6);
1315 #endif
1316   return GNUNET_OK;
1317 }
1318
1319
1320 /**
1321  * Tries to convert 'zt_addr' string to an IPv4 address.
1322  * The string is expected to have the format "1.2.3.4:80".
1323  *
1324  * @param zt_addr 0-terminated string. May be mangled by the function.
1325  * @param addrlen length of @a zt_addr (not counting 0-terminator).
1326  * @param r_buf a buffer to fill.
1327  * @return #GNUNET_OK if conversion succeded.
1328  *         #GNUNET_SYSERR otherwise, in which case
1329  *         the contents of @a r_buf are undefined.
1330  */
1331 int
1332 GNUNET_STRINGS_to_address_ipv4 (const char *zt_addr,
1333                                 uint16_t addrlen,
1334                                 struct sockaddr_in *r_buf)
1335 {
1336   unsigned int temps[4];
1337   unsigned int port;
1338   unsigned int cnt;
1339   char dummy[2];
1340
1341   if (addrlen < 9)
1342     return GNUNET_SYSERR;
1343   cnt = SSCANF (zt_addr,
1344                 "%u.%u.%u.%u:%u%1s",
1345                 &temps[0],
1346                 &temps[1],
1347                 &temps[2],
1348                 &temps[3],
1349                 &port,
1350                 dummy);
1351   if (5 != cnt)
1352     return GNUNET_SYSERR;
1353   for (cnt = 0; cnt < 4; cnt++)
1354     if (temps[cnt] > 0xFF)
1355       return GNUNET_SYSERR;
1356   if (port > 65535)
1357     return GNUNET_SYSERR;
1358   r_buf->sin_family = AF_INET;
1359   r_buf->sin_port = htons (port);
1360   r_buf->sin_addr.s_addr = htonl ((temps[0] << 24) + (temps[1] << 16) +
1361                                   (temps[2] << 8) + temps[3]);
1362 #if HAVE_SOCKADDR_IN_SIN_LEN
1363   r_buf->sin_len = (u_char) sizeof (struct sockaddr_in);
1364 #endif
1365   return GNUNET_OK;
1366 }
1367
1368
1369 /**
1370  * Tries to convert @a addr string to an IP (v4 or v6) address.
1371  * Will automatically decide whether to treat 'addr' as v4 or v6 address.
1372  *
1373  * @param addr a string, may not be 0-terminated.
1374  * @param addrlen number of bytes in @a addr (if addr is 0-terminated,
1375  *        0-terminator should not be counted towards addrlen).
1376  * @param r_buf a buffer to fill.
1377  * @return #GNUNET_OK if conversion succeded. #GNUNET_SYSERR otherwise, in which
1378  *         case the contents of @a r_buf are undefined.
1379  */
1380 int
1381 GNUNET_STRINGS_to_address_ip (const char *addr,
1382                               uint16_t addrlen,
1383                               struct sockaddr_storage *r_buf)
1384 {
1385   if (addr[0] == '[')
1386     return GNUNET_STRINGS_to_address_ipv6 (addr,
1387                                            addrlen,
1388                                            (struct sockaddr_in6 *) r_buf);
1389   return GNUNET_STRINGS_to_address_ipv4 (addr,
1390                                          addrlen,
1391                                          (struct sockaddr_in *) r_buf);
1392 }
1393
1394
1395 /**
1396  * Parse an address given as a string into a
1397  * `struct sockaddr`.
1398  *
1399  * @param addr the address
1400  * @param[out] af set to the parsed address family (i.e. AF_INET)
1401  * @param[out] sa set to the parsed address
1402  * @return 0 on error, otherwise number of bytes in @a sa
1403  */
1404 size_t
1405 GNUNET_STRINGS_parse_socket_addr (const char *addr,
1406                                   uint8_t *af,
1407                                   struct sockaddr **sa)
1408 {
1409   char *cp = GNUNET_strdup (addr);
1410
1411   *af = AF_UNSPEC;
1412   if ('[' == *addr)
1413   {
1414     /* IPv6 */
1415     *sa = GNUNET_malloc (sizeof (struct sockaddr_in6));
1416     if (GNUNET_OK !=
1417         GNUNET_STRINGS_to_address_ipv6 (cp,
1418                                         strlen (cp),
1419                                         (struct sockaddr_in6 *) *sa))
1420     {
1421       GNUNET_free (*sa);
1422       *sa = NULL;
1423       GNUNET_free (cp);
1424       return 0;
1425     }
1426     *af = AF_INET6;
1427     GNUNET_free (cp);
1428     return sizeof (struct sockaddr_in6);
1429   }
1430   else
1431   {
1432     /* IPv4 */
1433     *sa = GNUNET_malloc (sizeof (struct sockaddr_in));
1434     if (GNUNET_OK !=
1435         GNUNET_STRINGS_to_address_ipv4 (cp,
1436                                         strlen (cp),
1437                                         (struct sockaddr_in *) *sa))
1438     {
1439       GNUNET_free (*sa);
1440       *sa = NULL;
1441       GNUNET_free (cp);
1442       return 0;
1443     }
1444     *af = AF_INET;
1445     GNUNET_free (cp);
1446     return sizeof (struct sockaddr_in);
1447   }
1448 }
1449
1450
1451 /**
1452  * Makes a copy of argv that consists of a single memory chunk that can be
1453  * freed with a single call to GNUNET_free();
1454  */
1455 static char *const *
1456 _make_continuous_arg_copy (int argc,
1457                            char *const *argv)
1458 {
1459   size_t argvsize = 0;
1460   int i;
1461   char **new_argv;
1462   char *p;
1463   for (i = 0; i < argc; i++)
1464     argvsize += strlen (argv[i]) + 1 + sizeof (char *);
1465   new_argv = GNUNET_malloc (argvsize + sizeof (char *));
1466   p = (char *) &new_argv[argc + 1];
1467   for (i = 0; i < argc; i++)
1468   {
1469     new_argv[i] = p;
1470     strcpy (p, argv[i]);
1471     p += strlen (argv[i]) + 1;
1472   }
1473   new_argv[argc] = NULL;
1474   return (char *const *) new_argv;
1475 }
1476
1477
1478 /**
1479  * Returns utf-8 encoded arguments.
1480  * Does nothing (returns a copy of argc and argv) on any platform
1481  * other than W32.
1482  * Returned argv has u8argv[u8argc] == NULL.
1483  * Returned argv is a single memory block, and can be freed with a single
1484  *   GNUNET_free() call.
1485  *
1486  * @param argc argc (as given by main())
1487  * @param argv argv (as given by main())
1488  * @param u8argc a location to store new argc in (though it's th same as argc)
1489  * @param u8argv a location to store new argv in
1490  * @return #GNUNET_OK on success, #GNUNET_SYSERR on failure
1491  */
1492 int
1493 GNUNET_STRINGS_get_utf8_args (int argc,
1494                               char *const *argv,
1495                               int *u8argc,
1496                               char *const **u8argv)
1497 {
1498 #if WINDOWS
1499   wchar_t *wcmd;
1500   wchar_t **wargv;
1501   int wargc;
1502   int i;
1503   char **split_u8argv;
1504
1505   wcmd = GetCommandLineW ();
1506   if (NULL == wcmd)
1507     return GNUNET_SYSERR;
1508   wargv = CommandLineToArgvW (wcmd, &wargc);
1509   if (NULL == wargv)
1510     return GNUNET_SYSERR;
1511
1512   split_u8argv = GNUNET_malloc (argc * sizeof (char *));
1513
1514   for (i = 0; i < wargc; i++)
1515   {
1516     size_t strl;
1517     /* Hopefully it will allocate us NUL-terminated strings... */
1518     split_u8argv[i] = (char *) u16_to_u8 (wargv[i], wcslen (wargv[i]) + 1, NULL, &strl);
1519     if (NULL == split_u8argv[i])
1520     {
1521       int j;
1522       for (j = 0; j < i; j++)
1523         free (split_u8argv[j]);
1524       GNUNET_free (split_u8argv);
1525       LocalFree (wargv);
1526       return GNUNET_SYSERR;
1527     }
1528   }
1529
1530   *u8argv = _make_continuous_arg_copy (wargc, split_u8argv);
1531   *u8argc = wargc;
1532
1533   for (i = 0; i < wargc; i++)
1534     free (split_u8argv[i]);
1535   free (split_u8argv);
1536   return GNUNET_OK;
1537 #else
1538   char *const *new_argv = (char *const *) _make_continuous_arg_copy (argc, argv);
1539   *u8argv = new_argv;
1540   *u8argc = argc;
1541   return GNUNET_OK;
1542 #endif
1543 }
1544
1545
1546 /**
1547  * Parse the given port policy.  The format is
1548  * "[!]SPORT[-DPORT]".
1549  *
1550  * @param port_policy string to parse
1551  * @param pp policy to fill in
1552  * @return #GNUNET_OK on success, #GNUNET_SYSERR if the
1553  *         @a port_policy is malformed
1554  */
1555 static int
1556 parse_port_policy (const char *port_policy,
1557                    struct GNUNET_STRINGS_PortPolicy *pp)
1558 {
1559   const char *pos;
1560   int s;
1561   int e;
1562   char eol[2];
1563
1564   pos = port_policy;
1565   if ('!' == *pos)
1566   {
1567     pp->negate_portrange = GNUNET_YES;
1568     pos++;
1569   }
1570   if (2 == sscanf (pos,
1571                    "%u-%u%1s",
1572                    &s,
1573                    &e,
1574                    eol))
1575   {
1576     if ( (0 == s) ||
1577          (s > 0xFFFF) ||
1578          (e < s) ||
1579          (e > 0xFFFF) )
1580     {
1581       GNUNET_log (GNUNET_ERROR_TYPE_WARNING,
1582                   _("Port not in range\n"));
1583       return GNUNET_SYSERR;
1584     }
1585     pp->start_port = (uint16_t) s;
1586     pp->end_port = (uint16_t) e;
1587     return GNUNET_OK;
1588   }
1589   if (1 == sscanf (pos,
1590                    "%u%1s",
1591                    &s,
1592                    eol))
1593   {
1594     if ( (0 == s) ||
1595          (s > 0xFFFF) )
1596     {
1597       GNUNET_log (GNUNET_ERROR_TYPE_WARNING,
1598                   _("Port not in range\n"));
1599       return GNUNET_SYSERR;
1600     }
1601
1602     pp->start_port = (uint16_t) s;
1603     pp->end_port = (uint16_t) s;
1604     return GNUNET_OK;
1605   }
1606   GNUNET_log (GNUNET_ERROR_TYPE_WARNING,
1607               _("Malformed port policy `%s'\n"),
1608               port_policy);
1609   return GNUNET_SYSERR;
1610 }
1611
1612
1613 /**
1614  * Parse an IPv4 network policy. The argument specifies a list of
1615  * subnets. The format is
1616  * <tt>(network[/netmask][:SPORT[-DPORT]];)*</tt> (no whitespace, must
1617  * be terminated with a semicolon). The network must be given in
1618  * dotted-decimal notation. The netmask can be given in CIDR notation
1619  * (/16) or in dotted-decimal (/255.255.0.0).
1620  *
1621  * @param routeListX a string specifying the IPv4 subnets
1622  * @return the converted list, terminated with all zeros;
1623  *         NULL if the synatx is flawed
1624  */
1625 struct GNUNET_STRINGS_IPv4NetworkPolicy *
1626 GNUNET_STRINGS_parse_ipv4_policy (const char *routeListX)
1627 {
1628   unsigned int count;
1629   unsigned int i;
1630   unsigned int j;
1631   unsigned int len;
1632   int cnt;
1633   unsigned int pos;
1634   unsigned int temps[8];
1635   int slash;
1636   struct GNUNET_STRINGS_IPv4NetworkPolicy *result;
1637   int colon;
1638   int end;
1639   char *routeList;
1640   char dummy[2];
1641
1642   if (NULL == routeListX)
1643     return NULL;
1644   len = strlen (routeListX);
1645   if (0 == len)
1646     return NULL;
1647   routeList = GNUNET_strdup (routeListX);
1648   count = 0;
1649   for (i = 0; i < len; i++)
1650     if (routeList[i] == ';')
1651       count++;
1652   result = GNUNET_malloc (sizeof (struct GNUNET_STRINGS_IPv4NetworkPolicy) * (count + 1));
1653   i = 0;
1654   pos = 0;
1655   while (i < count)
1656   {
1657     for (colon = pos; ':' != routeList[colon]; colon++)
1658       if ( (';' == routeList[colon]) ||
1659            ('\0' == routeList[colon]) )
1660         break;
1661     for (end = colon; ';' != routeList[end]; end++)
1662       if ('\0' == routeList[end])
1663         break;
1664     if ('\0' == routeList[end])
1665       break;
1666     routeList[end] = '\0';
1667     if (':' == routeList[colon])
1668     {
1669       routeList[colon] = '\0';
1670       if (GNUNET_OK != parse_port_policy (&routeList[colon + 1],
1671                                           &result[i].pp))
1672         break;
1673     }
1674     cnt =
1675         SSCANF (&routeList[pos],
1676                 "%u.%u.%u.%u/%u.%u.%u.%u%1s",
1677                 &temps[0],
1678                 &temps[1],
1679                 &temps[2],
1680                 &temps[3],
1681                 &temps[4],
1682                 &temps[5],
1683                 &temps[6],
1684                 &temps[7],
1685                 dummy);
1686     if (8 == cnt)
1687     {
1688       for (j = 0; j < 8; j++)
1689         if (temps[j] > 0xFF)
1690         {
1691           LOG (GNUNET_ERROR_TYPE_WARNING,
1692                _("Invalid format for IP: `%s'\n"),
1693                &routeList[pos]);
1694           GNUNET_free (result);
1695           GNUNET_free (routeList);
1696           return NULL;
1697         }
1698       result[i].network.s_addr =
1699           htonl ((temps[0] << 24) + (temps[1] << 16) + (temps[2] << 8) +
1700                  temps[3]);
1701       result[i].netmask.s_addr =
1702           htonl ((temps[4] << 24) + (temps[5] << 16) + (temps[6] << 8) +
1703                  temps[7]);
1704       pos = end + 1;
1705       i++;
1706       continue;
1707     }
1708     /* try second notation */
1709     cnt =
1710         SSCANF (&routeList[pos],
1711                 "%u.%u.%u.%u/%u%1s",
1712                 &temps[0],
1713                 &temps[1],
1714                 &temps[2],
1715                 &temps[3],
1716                 &slash,
1717                 dummy);
1718     if (5 == cnt)
1719     {
1720       for (j = 0; j < 4; j++)
1721         if (temps[j] > 0xFF)
1722         {
1723           LOG (GNUNET_ERROR_TYPE_WARNING,
1724                _("Invalid format for IP: `%s'\n"),
1725                &routeList[pos]);
1726           GNUNET_free (result);
1727           GNUNET_free (routeList);
1728           return NULL;
1729         }
1730       result[i].network.s_addr =
1731           htonl ((temps[0] << 24) + (temps[1] << 16) + (temps[2] << 8) +
1732                  temps[3]);
1733       if ((slash <= 32) && (slash >= 0))
1734       {
1735         result[i].netmask.s_addr = 0;
1736         while (slash > 0)
1737         {
1738           result[i].netmask.s_addr =
1739               (result[i].netmask.s_addr >> 1) + 0x80000000;
1740           slash--;
1741         }
1742         result[i].netmask.s_addr = htonl (result[i].netmask.s_addr);
1743         pos = end + 1;
1744         i++;
1745         continue;
1746       }
1747       else
1748       {
1749         LOG (GNUNET_ERROR_TYPE_WARNING,
1750              _("Invalid network notation ('/%d' is not legal in IPv4 CIDR)."),
1751              slash);
1752         GNUNET_free (result);
1753           GNUNET_free (routeList);
1754         return NULL;            /* error */
1755       }
1756     }
1757     /* try third notation */
1758     slash = 32;
1759     cnt =
1760         SSCANF (&routeList[pos],
1761                 "%u.%u.%u.%u%1s",
1762                 &temps[0],
1763                 &temps[1],
1764                 &temps[2],
1765                 &temps[3],
1766                 dummy);
1767     if (4 == cnt)
1768     {
1769       for (j = 0; j < 4; j++)
1770         if (temps[j] > 0xFF)
1771         {
1772           LOG (GNUNET_ERROR_TYPE_WARNING,
1773                _("Invalid format for IP: `%s'\n"),
1774                &routeList[pos]);
1775           GNUNET_free (result);
1776           GNUNET_free (routeList);
1777           return NULL;
1778         }
1779       result[i].network.s_addr =
1780           htonl ((temps[0] << 24) + (temps[1] << 16) + (temps[2] << 8) +
1781                  temps[3]);
1782       result[i].netmask.s_addr = 0;
1783       while (slash > 0)
1784       {
1785         result[i].netmask.s_addr = (result[i].netmask.s_addr >> 1) + 0x80000000;
1786         slash--;
1787       }
1788       result[i].netmask.s_addr = htonl (result[i].netmask.s_addr);
1789       pos = end + 1;
1790       i++;
1791       continue;
1792     }
1793     LOG (GNUNET_ERROR_TYPE_WARNING,
1794          _("Invalid format for IP: `%s'\n"),
1795          &routeList[pos]);
1796     GNUNET_free (result);
1797     GNUNET_free (routeList);
1798     return NULL;                /* error */
1799   }
1800   if (pos < strlen (routeList))
1801   {
1802     LOG (GNUNET_ERROR_TYPE_WARNING,
1803          _("Invalid format: `%s'\n"),
1804          &routeListX[pos]);
1805     GNUNET_free (result);
1806     GNUNET_free (routeList);
1807     return NULL;                /* oops */
1808   }
1809   GNUNET_free (routeList);
1810   return result;                /* ok */
1811 }
1812
1813
1814 /**
1815  * Parse an IPv6 network policy. The argument specifies a list of
1816  * subnets. The format is <tt>(network[/netmask[:SPORT[-DPORT]]];)*</tt>
1817  * (no whitespace, must be terminated with a semicolon). The network
1818  * must be given in colon-hex notation.  The netmask must be given in
1819  * CIDR notation (/16) or can be omitted to specify a single host.
1820  * Note that the netmask is mandatory if ports are specified.
1821  *
1822  * @param routeListX a string specifying the policy
1823  * @return the converted list, 0-terminated, NULL if the synatx is flawed
1824  */
1825 struct GNUNET_STRINGS_IPv6NetworkPolicy *
1826 GNUNET_STRINGS_parse_ipv6_policy (const char *routeListX)
1827 {
1828   unsigned int count;
1829   unsigned int i;
1830   unsigned int len;
1831   unsigned int pos;
1832   int start;
1833   int slash;
1834   int ret;
1835   char *routeList;
1836   struct GNUNET_STRINGS_IPv6NetworkPolicy *result;
1837   unsigned int bits;
1838   unsigned int off;
1839   int save;
1840   int colon;
1841   char dummy[2];
1842
1843   if (NULL == routeListX)
1844     return NULL;
1845   len = strlen (routeListX);
1846   if (0 == len)
1847     return NULL;
1848   routeList = GNUNET_strdup (routeListX);
1849   count = 0;
1850   for (i = 0; i < len; i++)
1851     if (';' == routeList[i])
1852       count++;
1853   if (';' != routeList[len - 1])
1854   {
1855     LOG (GNUNET_ERROR_TYPE_WARNING,
1856          _("Invalid network notation (does not end with ';': `%s')\n"),
1857          routeList);
1858     GNUNET_free (routeList);
1859     return NULL;
1860   }
1861
1862   result = GNUNET_malloc (sizeof (struct GNUNET_STRINGS_IPv6NetworkPolicy) * (count + 1));
1863   i = 0;
1864   pos = 0;
1865   while (i < count)
1866   {
1867     start = pos;
1868     while (';' != routeList[pos])
1869       pos++;
1870     slash = pos;
1871     while ((slash >= start) && (routeList[slash] != '/'))
1872       slash--;
1873
1874     if (slash < start)
1875     {
1876       memset (&result[i].netmask,
1877               0xFF,
1878               sizeof (struct in6_addr));
1879       slash = pos;
1880     }
1881     else
1882     {
1883       routeList[pos] = '\0';
1884       for (colon = pos; ':' != routeList[colon]; colon--)
1885         if ('/' == routeList[colon])
1886           break;
1887       if (':' == routeList[colon])
1888       {
1889         routeList[colon] = '\0';
1890         if (GNUNET_OK != parse_port_policy (&routeList[colon + 1],
1891                                             &result[i].pp))
1892         {
1893           GNUNET_free (result);
1894           GNUNET_free (routeList);
1895           return NULL;
1896         }
1897       }
1898       ret = inet_pton (AF_INET6, &routeList[slash + 1], &result[i].netmask);
1899       if (ret <= 0)
1900       {
1901         save = errno;
1902         if ( (1 != SSCANF (&routeList[slash + 1],
1903                            "%u%1s",
1904                            &bits,
1905                            dummy)) ||
1906              (bits > 128) )
1907         {
1908           if (0 == ret)
1909             LOG (GNUNET_ERROR_TYPE_WARNING,
1910                  _("Wrong format `%s' for netmask\n"),
1911                  &routeList[slash + 1]);
1912           else
1913           {
1914             errno = save;
1915             LOG_STRERROR (GNUNET_ERROR_TYPE_WARNING, "inet_pton");
1916           }
1917           GNUNET_free (result);
1918           GNUNET_free (routeList);
1919           return NULL;
1920         }
1921         off = 0;
1922         while (bits > 8)
1923         {
1924           result[i].netmask.s6_addr[off++] = 0xFF;
1925           bits -= 8;
1926         }
1927         while (bits > 0)
1928         {
1929           result[i].netmask.s6_addr[off] =
1930               (result[i].netmask.s6_addr[off] >> 1) + 0x80;
1931           bits--;
1932         }
1933       }
1934     }
1935     routeList[slash] = '\0';
1936     ret = inet_pton (AF_INET6, &routeList[start], &result[i].network);
1937     if (ret <= 0)
1938     {
1939       if (0 == ret)
1940         LOG (GNUNET_ERROR_TYPE_WARNING,
1941              _("Wrong format `%s' for network\n"),
1942              &routeList[slash + 1]);
1943       else
1944         LOG_STRERROR (GNUNET_ERROR_TYPE_ERROR,
1945                       "inet_pton");
1946       GNUNET_free (result);
1947       GNUNET_free (routeList);
1948       return NULL;
1949     }
1950     pos++;
1951     i++;
1952   }
1953   GNUNET_free (routeList);
1954   return result;
1955 }
1956
1957
1958
1959 /** ******************** Base64 encoding ***********/
1960
1961 #define FILLCHAR '='
1962 static char *cvt =
1963     "ABCDEFGHIJKLMNOPQRSTUVWXYZ" "abcdefghijklmnopqrstuvwxyz" "0123456789+/";
1964
1965
1966 /**
1967  * Encode into Base64.
1968  *
1969  * @param in the data to encode
1970  * @param len the length of the input
1971  * @param output where to write the output (*output should be NULL,
1972  *   is allocated)
1973  * @return the size of the output
1974  */
1975 size_t
1976 GNUNET_STRINGS_base64_encode (const void *in,
1977                               size_t len,
1978                               char **output)
1979 {
1980   const char *data = in;
1981   size_t ret;
1982   char *opt;
1983
1984   ret = 0;
1985   opt = GNUNET_malloc (2 + (len * 4 / 3) + 8);
1986   for (size_t i = 0; i < len; ++i)
1987   {
1988     char c;
1989
1990     c = (data[i] >> 2) & 0x3f;
1991     opt[ret++] = cvt[(int) c];
1992     c = (data[i] << 4) & 0x3f;
1993     if (++i < len)
1994       c |= (data[i] >> 4) & 0x0f;
1995     opt[ret++] = cvt[(int) c];
1996     if (i < len)
1997     {
1998       c = (data[i] << 2) & 0x3f;
1999       if (++i < len)
2000         c |= (data[i] >> 6) & 0x03;
2001       opt[ret++] = cvt[(int) c];
2002     }
2003     else
2004     {
2005       ++i;
2006       opt[ret++] = FILLCHAR;
2007     }
2008     if (i < len)
2009     {
2010       c = data[i] & 0x3f;
2011       opt[ret++] = cvt[(int) c];
2012     }
2013     else
2014     {
2015       opt[ret++] = FILLCHAR;
2016     }
2017   }
2018   *output = opt;
2019   return ret;
2020 }
2021
2022 #define cvtfind(a)( (((a) >= 'A')&&((a) <= 'Z'))? (a)-'A'\
2023                    :(((a)>='a')&&((a)<='z')) ? (a)-'a'+26\
2024                    :(((a)>='0')&&((a)<='9')) ? (a)-'0'+52\
2025            :((a) == '+') ? 62\
2026            :((a) == '/') ? 63 : -1)
2027
2028
2029 /**
2030  * Decode from Base64.
2031  *
2032  * @param data the data to encode
2033  * @param len the length of the input
2034  * @param output where to write the output (*output should be NULL,
2035  *   is allocated)
2036  * @return the size of the output
2037  */
2038 size_t
2039 GNUNET_STRINGS_base64_decode (const char *data,
2040                               size_t len,
2041                               void **out)
2042 {
2043   char *output;
2044   size_t ret = 0;
2045
2046 #define CHECK_CRLF  while (data[i] == '\r' || data[i] == '\n') {\
2047                         GNUNET_log(GNUNET_ERROR_TYPE_DEBUG | GNUNET_ERROR_TYPE_BULK, "ignoring CR/LF\n"); \
2048                         i++; \
2049                         if (i >= len) goto END;  \
2050                 }
2051
2052   output = GNUNET_malloc ((len * 3 / 4) + 8);
2053   GNUNET_log (GNUNET_ERROR_TYPE_DEBUG,
2054               "base64_decode decoding len=%d\n",
2055               (int) len);
2056   for (size_t i = 0; i < len; ++i)
2057   {
2058     char c;
2059     char c1;
2060
2061     CHECK_CRLF;
2062     if (FILLCHAR == data[i])
2063       break;
2064     c = (char) cvtfind (data[i]);
2065     ++i;
2066     CHECK_CRLF;
2067     c1 = (char) cvtfind (data[i]);
2068     c = (c << 2) | ((c1 >> 4) & 0x3);
2069     output[ret++] = c;
2070     if (++i < len)
2071     {
2072       CHECK_CRLF;
2073       c = data[i];
2074       if (FILLCHAR == c)
2075         break;
2076       c = (char) cvtfind (c);
2077       c1 = ((c1 << 4) & 0xf0) | ((c >> 2) & 0xf);
2078       output[ret++] = c1;
2079     }
2080     if (++i < len)
2081     {
2082       CHECK_CRLF;
2083       c1 = data[i];
2084       if (FILLCHAR == c1)
2085         break;
2086
2087       c1 = (char) cvtfind (c1);
2088       c = ((c << 6) & 0xc0) | c1;
2089       output[ret++] = c;
2090     }
2091   }
2092 END:
2093   *out = output;
2094   return ret;
2095 }
2096
2097
2098 /* end of strings.c */