src/gns/gnunet-gns-proxy.c

   1 /*
   2      This file is part of GNUnet.
   3      Copyright (C) 2012-2014 Christian Grothoff (and other contributing authors)
   4
   5      GNUnet is free software; you can redistribute it and/or modify
   6      it under the terms of the GNU General Public License as published
   7      by the Free Software Foundation; either version 3, or (at your
   8      option) any later version.
   9
  10      GNUnet is distributed in the hope that it will be useful, but
  11      WITHOUT ANY WARRANTY; without even the implied warranty of
  12      MERCHANTABILITY or FITNESS FOR A PARTICULAR PURPOSE.  See the GNU
  13      General Public License for more details.
  14
  15      You should have received a copy of the GNU General Public License
  16      along with GNUnet; see the file COPYING.  If not, write to the
  17      Free Software Foundation, Inc., 51 Franklin Street, Fifth Floor,
  18      Boston, MA 02110-1301, USA.
  19 */
  20 /**
  21  * @author Martin Schanzenbach
  22  * @author Christian Grothoff
  23  * @file src/gns/gnunet-gns-proxy.c
  24  * @brief HTTP(S) proxy that rewrites URIs and fakes certificats to make GNS work
  25  *        with legacy browsers
  26  *
  27  * TODO:
  28  * - double-check queueing logic
  29  */
  30 #include "platform.h"
  31 #include <microhttpd.h>
  32 #if HAVE_CURL_CURL_H
  33 #include <curl/curl.h>
  34 #elif HAVE_GNURL_CURL_H
  35 #include <gnurl/curl.h>
  36 #endif
  37 #include <gnutls/gnutls.h>
  38 #include <gnutls/x509.h>
  39 #include <gnutls/abstract.h>
  40 #include <gnutls/crypto.h>
  41 #if HAVE_GNUTLS_DANE
  42 #include <gnutls/dane.h>
  43 #endif
  44 #include <regex.h>
  45 #include "gnunet_util_lib.h"
  46 #include "gnunet_gns_service.h"
  47 #include "gnunet_identity_service.h"
  48 #include "gns.h"
  49
  50
  51 /**
  52  * Default Socks5 listen port.
  53  */
  54 #define GNUNET_GNS_PROXY_PORT 7777
  55
  56 /**
  57  * Maximum supported length for a URI.
  58  * Should die. @deprecated
  59  */
  60 #define MAX_HTTP_URI_LENGTH 2048
  61
  62 /**
  63  * Size of the buffer for the data upload / download.  Must be
  64  * enough for curl, thus CURL_MAX_WRITE_SIZE is needed here (16k).
  65  */
  66 #define IO_BUFFERSIZE CURL_MAX_WRITE_SIZE
  67
  68 /**
  69  * Size of the read/write buffers for Socks.   Uses
  70  * 256 bytes for the hostname (at most), plus a few
  71  * bytes overhead for the messages.
  72  */
  73 #define SOCKS_BUFFERSIZE (256 + 32)
  74
  75 /**
  76  * Port for plaintext HTTP.
  77  */
  78 #define HTTP_PORT 80
  79
  80 /**
  81  * Port for HTTPS.
  82  */
  83 #define HTTPS_PORT 443
  84
  85 /**
  86  * Largest allowed size for a PEM certificate.
  87  */
  88 #define MAX_PEM_SIZE (10 * 1024)
  89
  90 /**
  91  * After how long do we clean up unused MHD SSL/TLS instances?
  92  */
  93 #define MHD_CACHE_TIMEOUT GNUNET_TIME_relative_multiply (GNUNET_TIME_UNIT_MINUTES, 5)
  94
  95 /**
  96  * After how long do we clean up Socks5 handles that failed to show any activity
  97  * with their respective MHD instance?
  98  */
  99 #define HTTP_HANDSHAKE_TIMEOUT GNUNET_TIME_relative_multiply (GNUNET_TIME_UNIT_SECONDS, 15)
 100
 101
 102 /**
 103  * Log curl error.
 104  *
 105  * @param level log level
 106  * @param fun name of curl_easy-function that gave the error
 107  * @param rc return code from curl
 108  */
 109 #define LOG_CURL_EASY(level,fun,rc) GNUNET_log(level, _("%s failed at %s:%d: `%s'\n"), fun, __FILE__, __LINE__, curl_easy_strerror (rc))
 110
 111
 112 /* *************** Socks protocol definitions (move to TUN?) ****************** */
 113
 114 /**
 115  * Which SOCKS version do we speak?
 116  */
 117 #define SOCKS_VERSION_5 0x05
 118
 119 /**
 120  * Flag to set for 'no authentication'.
 121  */
 122 #define SOCKS_AUTH_NONE 0
 123
 124
 125 /**
 126  * Commands in Socks5.
 127  */
 128 enum Socks5Commands
 129 {
 130   /**
 131    * Establish TCP/IP stream.
 132    */
 133   SOCKS5_CMD_TCP_STREAM = 1,
 134
 135   /**
 136    * Establish TCP port binding.
 137    */
 138   SOCKS5_CMD_TCP_PORT = 2,
 139
 140   /**
 141    * Establish UDP port binding.
 142    */
 143   SOCKS5_CMD_UDP_PORT = 3
 144 };
 145
 146
 147 /**
 148  * Address types in Socks5.
 149  */
 150 enum Socks5AddressType
 151 {
 152   /**
 153    * IPv4 address.
 154    */
 155   SOCKS5_AT_IPV4 = 1,
 156
 157   /**
 158    * IPv4 address.
 159    */
 160   SOCKS5_AT_DOMAINNAME = 3,
 161
 162   /**
 163    * IPv6 address.
 164    */
 165   SOCKS5_AT_IPV6 = 4
 166
 167 };
 168
 169
 170 /**
 171  * Status codes in Socks5 response.
 172  */
 173 enum Socks5StatusCode
 174 {
 175   SOCKS5_STATUS_REQUEST_GRANTED = 0,
 176   SOCKS5_STATUS_GENERAL_FAILURE = 1,
 177   SOCKS5_STATUS_CONNECTION_NOT_ALLOWED_BY_RULE = 2,
 178   SOCKS5_STATUS_NETWORK_UNREACHABLE = 3,
 179   SOCKS5_STATUS_HOST_UNREACHABLE = 4,
 180   SOCKS5_STATUS_CONNECTION_REFUSED_BY_HOST = 5,
 181   SOCKS5_STATUS_TTL_EXPIRED = 6,
 182   SOCKS5_STATUS_COMMAND_NOT_SUPPORTED = 7,
 183   SOCKS5_STATUS_ADDRESS_TYPE_NOT_SUPPORTED = 8
 184 };
 185
 186
 187 /**
 188  * Client hello in Socks5 protocol.
 189  */
 190 struct Socks5ClientHelloMessage
 191 {
 192   /**
 193    * Should be #SOCKS_VERSION_5.
 194    */
 195   uint8_t version;
 196
 197   /**
 198    * How many authentication methods does the client support.
 199    */
 200   uint8_t num_auth_methods;
 201
 202   /* followed by supported authentication methods, 1 byte per method */
 203
 204 };
 205
 206
 207 /**
 208  * Server hello in Socks5 protocol.
 209  */
 210 struct Socks5ServerHelloMessage
 211 {
 212   /**
 213    * Should be #SOCKS_VERSION_5.
 214    */
 215   uint8_t version;
 216
 217   /**
 218    * Chosen authentication method, for us always #SOCKS_AUTH_NONE,
 219    * which skips the authentication step.
 220    */
 221   uint8_t auth_method;
 222 };
 223
 224
 225 /**
 226  * Client socks request in Socks5 protocol.
 227  */
 228 struct Socks5ClientRequestMessage
 229 {
 230   /**
 231    * Should be #SOCKS_VERSION_5.
 232    */
 233   uint8_t version;
 234
 235   /**
 236    * Command code, we only uspport #SOCKS5_CMD_TCP_STREAM.
 237    */
 238   uint8_t command;
 239
 240   /**
 241    * Reserved, always zero.
 242    */
 243   uint8_t resvd;
 244
 245   /**
 246    * Address type, an `enum Socks5AddressType`.
 247    */
 248   uint8_t addr_type;
 249
 250   /*
 251    * Followed by either an ip4/ipv6 address or a domain name with a
 252    * length field (uint8_t) in front (depending on @e addr_type).
 253    * followed by port number in network byte order (uint16_t).
 254    */
 255 };
 256
 257
 258 /**
 259  * Server response to client requests in Socks5 protocol.
 260  */
 261 struct Socks5ServerResponseMessage
 262 {
 263   /**
 264    * Should be #SOCKS_VERSION_5.
 265    */
 266   uint8_t version;
 267
 268   /**
 269    * Status code, an `enum Socks5StatusCode`
 270    */
 271   uint8_t reply;
 272
 273   /**
 274    * Always zero.
 275    */
 276   uint8_t reserved;
 277
 278   /**
 279    * Address type, an `enum Socks5AddressType`.
 280    */
 281   uint8_t addr_type;
 282
 283   /*
 284    * Followed by either an ip4/ipv6 address or a domain name with a
 285    * length field (uint8_t) in front (depending on @e addr_type).
 286    * followed by port number in network byte order (uint16_t).
 287    */
 288
 289 };
 290
 291
 292
 293 /* *********************** Datastructures for HTTP handling ****************** */
 294
 295 /**
 296  * A structure for CA cert/key
 297  */
 298 struct ProxyCA
 299 {
 300   /**
 301    * The certificate
 302    */
 303   gnutls_x509_crt_t cert;
 304
 305   /**
 306    * The private key
 307    */
 308   gnutls_x509_privkey_t key;
 309 };
 310
 311
 312 /**
 313  * Structure for GNS certificates
 314  */
 315 struct ProxyGNSCertificate
 316 {
 317   /**
 318    * The certificate as PEM
 319    */
 320   char cert[MAX_PEM_SIZE];
 321
 322   /**
 323    * The private key as PEM
 324    */
 325   char key[MAX_PEM_SIZE];
 326 };
 327
 328
 329
 330 /**
 331  * A structure for all running Httpds
 332  */
 333 struct MhdHttpList
 334 {
 335   /**
 336    * DLL for httpds
 337    */
 338   struct MhdHttpList *prev;
 339
 340   /**
 341    * DLL for httpds
 342    */
 343   struct MhdHttpList *next;
 344
 345   /**
 346    * the domain name to server (only important for SSL)
 347    */
 348   char *domain;
 349
 350   /**
 351    * The daemon handle
 352    */
 353   struct MHD_Daemon *daemon;
 354
 355   /**
 356    * Optional proxy certificate used
 357    */
 358   struct ProxyGNSCertificate *proxy_cert;
 359
 360   /**
 361    * The task ID
 362    */
 363   struct GNUNET_SCHEDULER_Task * httpd_task;
 364
 365   /**
 366    * is this an ssl daemon?
 367    */
 368   int is_ssl;
 369
 370 };
 371
 372
 373 /* ***************** Datastructures for Socks handling **************** */
 374
 375
 376 /**
 377  * The socks phases.
 378  */
 379 enum SocksPhase
 380 {
 381   /**
 382    * We're waiting to get the client hello.
 383    */
 384   SOCKS5_INIT,
 385
 386   /**
 387    * We're waiting to get the initial request.
 388    */
 389   SOCKS5_REQUEST,
 390
 391   /**
 392    * We are currently resolving the destination.
 393    */
 394   SOCKS5_RESOLVING,
 395
 396   /**
 397    * We're in transfer mode.
 398    */
 399   SOCKS5_DATA_TRANSFER,
 400
 401   /**
 402    * Finish writing the write buffer, then clean up.
 403    */
 404   SOCKS5_WRITE_THEN_CLEANUP,
 405
 406   /**
 407    * Socket has been passed to MHD, do not close it anymore.
 408    */
 409   SOCKS5_SOCKET_WITH_MHD,
 410
 411   /**
 412    * We've finished receiving upload data from MHD.
 413    */
 414   SOCKS5_SOCKET_UPLOAD_STARTED,
 415
 416   /**
 417    * We've finished receiving upload data from MHD.
 418    */
 419   SOCKS5_SOCKET_UPLOAD_DONE,
 420
 421   /**
 422    * We've finished uploading data via CURL and can now download.
 423    */
 424   SOCKS5_SOCKET_DOWNLOAD_STARTED,
 425
 426   /**
 427    * We've finished receiving download data from cURL.
 428    */
 429   SOCKS5_SOCKET_DOWNLOAD_DONE
 430 };
 431
 432
 433
 434 /**
 435  * A structure for socks requests
 436  */
 437 struct Socks5Request
 438 {
 439
 440   /**
 441    * DLL.
 442    */
 443   struct Socks5Request *next;
 444
 445   /**
 446    * DLL.
 447    */
 448   struct Socks5Request *prev;
 449
 450   /**
 451    * The client socket
 452    */
 453   struct GNUNET_NETWORK_Handle *sock;
 454
 455   /**
 456    * Handle to GNS lookup, during #SOCKS5_RESOLVING phase.
 457    */
 458   struct GNUNET_GNS_LookupRequest *gns_lookup;
 459
 460   /**
 461    * Client socket read task
 462    */
 463   struct GNUNET_SCHEDULER_Task * rtask;
 464
 465   /**
 466    * Client socket write task
 467    */
 468   struct GNUNET_SCHEDULER_Task * wtask;
 469
 470   /**
 471    * Timeout task
 472    */
 473   struct GNUNET_SCHEDULER_Task * timeout_task;
 474
 475   /**
 476    * Read buffer
 477    */
 478   char rbuf[SOCKS_BUFFERSIZE];
 479
 480   /**
 481    * Write buffer
 482    */
 483   char wbuf[SOCKS_BUFFERSIZE];
 484
 485   /**
 486    * Buffer we use for moving data between MHD and curl (in both directions).
 487    */
 488   char io_buf[IO_BUFFERSIZE];
 489
 490   /**
 491    * MHD HTTP instance handling this request, NULL for none.
 492    */
 493   struct MhdHttpList *hd;
 494
 495   /**
 496    * MHD response object for this request.
 497    */
 498   struct MHD_Response *response;
 499
 500   /**
 501    * the domain name to server (only important for SSL)
 502    */
 503   char *domain;
 504
 505   /**
 506    * DNS Legacy Host Name as given by GNS, NULL if not given.
 507    */
 508   char *leho;
 509
 510   /**
 511    * Payload of the (last) DANE record encountered.
 512    */
 513   char *dane_data;
 514
 515   /**
 516    * The URL to fetch
 517    */
 518   char *url;
 519
 520   /**
 521    * Handle to cURL
 522    */
 523   CURL *curl;
 524
 525   /**
 526    * HTTP request headers for the curl request.
 527    */
 528   struct curl_slist *headers;
 529
 530   /**
 531    * DNS->IP mappings resolved through GNS
 532    */
 533   struct curl_slist *hosts;
 534
 535   /**
 536    * HTTP response code to give to MHD for the response.
 537    */
 538   unsigned int response_code;
 539
 540   /**
 541    * Number of bytes in @e dane_data.
 542    */
 543   size_t dane_data_len;
 544
 545   /**
 546    * Number of bytes already in read buffer
 547    */
 548   size_t rbuf_len;
 549
 550   /**
 551    * Number of bytes already in write buffer
 552    */
 553   size_t wbuf_len;
 554
 555   /**
 556    * Number of bytes already in the IO buffer.
 557    */
 558   size_t io_len;
 559
 560   /**
 561    * Once known, what's the target address for the connection?
 562    */
 563   struct sockaddr_storage destination_address;
 564
 565   /**
 566    * The socks state
 567    */
 568   enum SocksPhase state;
 569
 570   /**
 571    * Desired destination port.
 572    */
 573   uint16_t port;
 574
 575 };
 576
 577
 578
 579 /* *********************** Globals **************************** */
 580
 581
 582 /**
 583  * The port the proxy is running on (default 7777)
 584  */
 585 static unsigned long port = GNUNET_GNS_PROXY_PORT;
 586
 587 /**
 588  * The CA file (pem) to use for the proxy CA
 589  */
 590 static char *cafile_opt;
 591
 592 /**
 593  * The listen socket of the proxy for IPv4
 594  */
 595 static struct GNUNET_NETWORK_Handle *lsock4;
 596
 597 /**
 598  * The listen socket of the proxy for IPv6
 599  */
 600 static struct GNUNET_NETWORK_Handle *lsock6;
 601
 602 /**
 603  * The listen task ID for IPv4
 604  */
 605 static struct GNUNET_SCHEDULER_Task * ltask4;
 606
 607 /**
 608  * The listen task ID for IPv6
 609  */
 610 static struct GNUNET_SCHEDULER_Task * ltask6;
 611
 612 /**
 613  * The cURL download task (curl multi API).
 614  */
 615 static struct GNUNET_SCHEDULER_Task * curl_download_task;
 616
 617 /**
 618  * The cURL multi handle
 619  */
 620 static CURLM *curl_multi;
 621
 622 /**
 623  * Handle to the GNS service
 624  */
 625 static struct GNUNET_GNS_Handle *gns_handle;
 626
 627 /**
 628  * DLL for http/https daemons
 629  */
 630 static struct MhdHttpList *mhd_httpd_head;
 631
 632 /**
 633  * DLL for http/https daemons
 634  */
 635 static struct MhdHttpList *mhd_httpd_tail;
 636
 637 /**
 638  * Daemon for HTTP (we have one per SSL certificate, and then one for
 639  * all HTTP connections; this is the one for HTTP, not HTTPS).
 640  */
 641 static struct MhdHttpList *httpd;
 642
 643 /**
 644  * DLL of active socks requests.
 645  */
 646 static struct Socks5Request *s5r_head;
 647
 648 /**
 649  * DLL of active socks requests.
 650  */
 651 static struct Socks5Request *s5r_tail;
 652
 653 /**
 654  * The users local GNS master zone
 655  */
 656 static struct GNUNET_CRYPTO_EcdsaPublicKey local_gns_zone;
 657
 658 /**
 659  * The users local shorten zone
 660  */
 661 static struct GNUNET_CRYPTO_EcdsaPrivateKey local_shorten_zone;
 662
 663 /**
 664  * Is shortening enabled?
 665  */
 666 static int do_shorten;
 667
 668 /**
 669  * The CA for SSL certificate generation
 670  */
 671 static struct ProxyCA proxy_ca;
 672
 673 /**
 674  * Response we return on cURL failures.
 675  */
 676 static struct MHD_Response *curl_failure_response;
 677
 678 /**
 679  * Connection to identity service.
 680  */
 681 static struct GNUNET_IDENTITY_Handle *identity;
 682
 683 /**
 684  * Request for our ego.
 685  */
 686 static struct GNUNET_IDENTITY_Operation *id_op;
 687
 688 /**
 689  * Our configuration.
 690  */
 691 static const struct GNUNET_CONFIGURATION_Handle *cfg;
 692
 693
 694 /* ************************* Global helpers ********************* */
 695
 696
 697 /**
 698  * Run MHD now, we have extra data ready for the callback.
 699  *
 700  * @param hd the daemon to run now.
 701  */
 702 static void
 703 run_mhd_now (struct MhdHttpList *hd);
 704
 705
 706 /**
 707  * Clean up s5r handles.
 708  *
 709  * @param s5r the handle to destroy
 710  */
 711 static void
 712 cleanup_s5r (struct Socks5Request *s5r)
 713 {
 714   GNUNET_log (GNUNET_ERROR_TYPE_DEBUG,
 715               "Cleaning up socks request\n");
 716   if (NULL != s5r->curl)
 717   {
 718     GNUNET_log (GNUNET_ERROR_TYPE_DEBUG,
 719                 "Cleaning up cURL handle\n");
 720     curl_multi_remove_handle (curl_multi, s5r->curl);
 721     curl_easy_cleanup (s5r->curl);
 722     s5r->curl = NULL;
 723   }
 724   curl_slist_free_all (s5r->headers);
 725   if (NULL != s5r->hosts)
 726   {
 727     curl_slist_free_all (s5r->hosts);
 728   }
 729   if ( (NULL != s5r->response) &&
 730        (curl_failure_response != s5r->response) )
 731     MHD_destroy_response (s5r->response);
 732   if (NULL != s5r->rtask)
 733     GNUNET_SCHEDULER_cancel (s5r->rtask);
 734   if (NULL != s5r->timeout_task)
 735     GNUNET_SCHEDULER_cancel (s5r->timeout_task);
 736   if (NULL != s5r->wtask)
 737     GNUNET_SCHEDULER_cancel (s5r->wtask);
 738   if (NULL != s5r->gns_lookup)
 739     GNUNET_GNS_lookup_cancel (s5r->gns_lookup);
 740   if (NULL != s5r->sock)
 741   {
 742     if (SOCKS5_SOCKET_WITH_MHD <= s5r->state)
 743       GNUNET_NETWORK_socket_free_memory_only_ (s5r->sock);
 744     else
 745       GNUNET_NETWORK_socket_close (s5r->sock);
 746   }
 747   GNUNET_CONTAINER_DLL_remove (s5r_head,
 748                                s5r_tail,
 749                                s5r);
 750   GNUNET_free_non_null (s5r->domain);
 751   GNUNET_free_non_null (s5r->leho);
 752   GNUNET_free_non_null (s5r->url);
 753   GNUNET_free_non_null (s5r->dane_data);
 754   GNUNET_free (s5r);
 755 }
 756
 757
 758 /* ************************* HTTP handling with cURL *********************** */
 759
 760
 761 /**
 762  * Callback for MHD response generation.  This function is called from
 763  * MHD whenever MHD expects to get data back.  Copies data from the
 764  * io_buf, if available.
 765  *
 766  * @param cls closure with our `struct Socks5Request`
 767  * @param pos in buffer
 768  * @param buf where to copy data
 769  * @param max available space in @a buf
 770  * @return number of bytes written to @a buf
 771  */
 772 static ssize_t
 773 mhd_content_cb (void *cls,
 774                 uint64_t pos,
 775                 char* buf,
 776                 size_t max)
 777 {
 778   struct Socks5Request *s5r = cls;
 779   size_t bytes_to_copy;
 780
 781   if ( (SOCKS5_SOCKET_UPLOAD_STARTED == s5r->state) ||
 782        (SOCKS5_SOCKET_UPLOAD_DONE == s5r->state) )
 783   {
 784     /* we're still not done with the upload, do not yet
 785        start the download, the IO buffer is still full
 786        with upload data. */
 787     GNUNET_log (GNUNET_ERROR_TYPE_DEBUG,
 788                 "Pausing MHD download, not yet ready for download\n");
 789     return 0; /* not yet ready for data download */
 790   }
 791   bytes_to_copy = GNUNET_MIN (max,
 792                               s5r->io_len);
 793   if ( (0 == bytes_to_copy) &&
 794        (SOCKS5_SOCKET_DOWNLOAD_DONE != s5r->state) )
 795   {
 796     GNUNET_log (GNUNET_ERROR_TYPE_DEBUG,
 797                 "Pausing MHD download, no data available\n");
 798     return 0; /* more data later */
 799   }
 800   if ( (0 == bytes_to_copy) &&
 801        (SOCKS5_SOCKET_DOWNLOAD_DONE == s5r->state) )
 802   {
 803     GNUNET_log (GNUNET_ERROR_TYPE_DEBUG,
 804                 "Completed MHD download\n");
 805     return MHD_CONTENT_READER_END_OF_STREAM;
 806   }
 807   memcpy (buf, s5r->io_buf, bytes_to_copy);
 808   memmove (s5r->io_buf,
 809            &s5r->io_buf[bytes_to_copy],
 810            s5r->io_len - bytes_to_copy);
 811   s5r->io_len -= bytes_to_copy;
 812   if (NULL != s5r->curl)
 813     curl_easy_pause (s5r->curl, CURLPAUSE_CONT);
 814   return bytes_to_copy;
 815 }
 816
 817
 818 /**
 819  * Check that the website has presented us with a valid SSL certificate.
 820  * The certificate must either match the domain name or the LEHO name
 821  * (or, if available, the TLSA record).
 822  *
 823  * @param s5r request to check for.
 824  * @return #GNUNET_OK if the certificate is valid
 825  */
 826 static int
 827 check_ssl_certificate (struct Socks5Request *s5r)
 828 {
 829   unsigned int cert_list_size;
 830   const gnutls_datum_t *chainp;
 831   const struct curl_tlssessioninfo *tlsinfo;
 832   char certdn[GNUNET_DNSPARSER_MAX_NAME_LENGTH + 3];
 833   size_t size;
 834   gnutls_x509_crt_t x509_cert;
 835   int rc;
 836   const char *name;
 837
 838   if (CURLE_OK !=
 839       curl_easy_getinfo (s5r->curl,
 840                          CURLINFO_TLS_SESSION,
 841                          (struct curl_slist **) &tlsinfo))
 842     return GNUNET_SYSERR;
 843   if (CURLSSLBACKEND_GNUTLS != tlsinfo->backend)
 844   {
 845     GNUNET_log (GNUNET_ERROR_TYPE_ERROR,
 846                 _("Unsupported CURL SSL backend %d\n"),
 847                 tlsinfo->backend);
 848     return GNUNET_SYSERR;
 849   }
 850   chainp = gnutls_certificate_get_peers (tlsinfo->internals, &cert_list_size);
 851   if ( (! chainp) || (0 == cert_list_size) )
 852     return GNUNET_SYSERR;
 853
 854   size = sizeof (certdn);
 855   /* initialize an X.509 certificate structure. */
 856   gnutls_x509_crt_init (&x509_cert);
 857   gnutls_x509_crt_import (x509_cert,
 858                           chainp,
 859                           GNUTLS_X509_FMT_DER);
 860
 861   if (0 != (rc = gnutls_x509_crt_get_dn_by_oid (x509_cert,
 862                                                 GNUTLS_OID_X520_COMMON_NAME,
 863                                                 0, /* the first and only one */
 864                                                 0 /* no DER encoding */,
 865                                                 certdn,
 866                                                 &size)))
 867   {
 868     GNUNET_log (GNUNET_ERROR_TYPE_WARNING,
 869                 _("Failed to fetch CN from cert: %s\n"),
 870                 gnutls_strerror(rc));
 871     gnutls_x509_crt_deinit (x509_cert);
 872     return GNUNET_SYSERR;
 873   }
 874   /* check for TLSA/DANE records */
 875 #if HAVE_GNUTLS_DANE
 876   if (NULL != s5r->dane_data)
 877   {
 878     char *dd[] = { s5r->dane_data, NULL };
 879     int dlen[] = { s5r->dane_data_len, 0};
 880     dane_state_t dane_state;
 881     dane_query_t dane_query;
 882     unsigned int verify;
 883
 884     /* FIXME: add flags to gnutls to NOT read UNBOUND_ROOT_KEY_FILE here! */
 885     if (0 != (rc = dane_state_init (&dane_state,
 886 #ifdef DANE_F_IGNORE_DNSSEC
 887                                     DANE_F_IGNORE_DNSSEC |
 888 #endif
 889                                     DANE_F_IGNORE_LOCAL_RESOLVER)))
 890     {
 891       GNUNET_log (GNUNET_ERROR_TYPE_WARNING,
 892                   _("Failed to initialize DANE: %s\n"),
 893                   dane_strerror(rc));
 894       gnutls_x509_crt_deinit (x509_cert);
 895       return GNUNET_SYSERR;
 896     }
 897     if (0 != (rc = dane_raw_tlsa (dane_state,
 898                                   &dane_query,
 899                                   dd,
 900                                   dlen,
 901                                   GNUNET_YES,
 902                                   GNUNET_NO)))
 903     {
 904       GNUNET_log (GNUNET_ERROR_TYPE_WARNING,
 905                   _("Failed to parse DANE record: %s\n"),
 906                   dane_strerror(rc));
 907       dane_state_deinit (dane_state);
 908       gnutls_x509_crt_deinit (x509_cert);
 909       return GNUNET_SYSERR;
 910     }
 911     if (0 != (rc = dane_verify_crt_raw (dane_state,
 912                                         chainp,
 913                                         cert_list_size,
 914                                         gnutls_certificate_type_get (tlsinfo->internals),
 915                                         dane_query,
 916                                         0, 0,
 917                                         &verify)))
 918     {
 919       GNUNET_log (GNUNET_ERROR_TYPE_WARNING,
 920                   _("Failed to verify TLS connection using DANE: %s\n"),
 921                   dane_strerror(rc));
 922       dane_query_deinit (dane_query);
 923       dane_state_deinit (dane_state);
 924       gnutls_x509_crt_deinit (x509_cert);
 925       return GNUNET_SYSERR;
 926     }
 927     if (0 != verify)
 928     {
 929       GNUNET_log (GNUNET_ERROR_TYPE_WARNING,
 930                   _("Failed DANE verification failed with GnuTLS verify status code: %u\n"),
 931                   verify);
 932       dane_query_deinit (dane_query);
 933       dane_state_deinit (dane_state);
 934       gnutls_x509_crt_deinit (x509_cert);
 935       return GNUNET_SYSERR;
 936     }
 937     dane_query_deinit (dane_query);
 938     dane_state_deinit (dane_state);
 939     /* success! */
 940   }
 941   else
 942 #endif
 943   {
 944     /* try LEHO or ordinary domain name X509 verification */
 945     name = s5r->domain;
 946     if (NULL != s5r->leho)
 947       name = s5r->leho;
 948     if (NULL != name)
 949     {
 950       if (0 == (rc = gnutls_x509_crt_check_hostname (x509_cert,
 951                                                      name)))
 952       {
 953         GNUNET_log (GNUNET_ERROR_TYPE_WARNING,
 954                     _("SSL certificate subject name (%s) does not match `%s'\n"),
 955                     certdn,
 956                     name);
 957         gnutls_x509_crt_deinit (x509_cert);
 958         return GNUNET_SYSERR;
 959       }
 960     }
 961     else
 962     {
 963       /* we did not even have the domain name!? */
 964       GNUNET_break (0);
 965       return GNUNET_SYSERR;
 966     }
 967   }
 968   gnutls_x509_crt_deinit (x509_cert);
 969   return GNUNET_OK;
 970 }
 971
 972
 973 /**
 974  * We're getting an HTTP response header from cURL.  Convert it to the
 975  * MHD response headers.  Mostly copies the headers, but makes special
 976  * adjustments to "Set-Cookie" and "Location" headers as those may need
 977  * to be changed from the LEHO to the domain the browser expects.
 978  *
 979  * @param buffer curl buffer with a single line of header data; not 0-terminated!
 980  * @param size curl blocksize
 981  * @param nmemb curl blocknumber
 982  * @param cls our `struct Socks5Request *`
 983  * @return size of processed bytes
 984  */
 985 static size_t
 986 curl_check_hdr (void *buffer, size_t size, size_t nmemb, void *cls)
 987 {
 988   struct Socks5Request *s5r = cls;
 989   size_t bytes = size * nmemb;
 990   char *ndup;
 991   const char *hdr_type;
 992   const char *cookie_domain;
 993   char *hdr_val;
 994   long resp_code;
 995   char *new_cookie_hdr;
 996   char *new_location;
 997   size_t offset;
 998   size_t delta_cdomain;
 999   int domain_matched;
1000   char *tok;
1001
1002   if (NULL == s5r->response)
1003   {
1004     /* first, check SSL certificate */
1005     if ( (HTTPS_PORT == s5r->port) &&
1006          (GNUNET_OK != check_ssl_certificate (s5r)) )
1007       return 0;
1008
1009     GNUNET_break (CURLE_OK ==
1010                   curl_easy_getinfo (s5r->curl,
1011                                      CURLINFO_RESPONSE_CODE,
1012                                      &resp_code));
1013     GNUNET_log (GNUNET_ERROR_TYPE_DEBUG,
1014                 "Creating MHD response with code %d\n",
1015                 (int) resp_code);
1016     s5r->response_code = resp_code;
1017     s5r->response = MHD_create_response_from_callback (MHD_SIZE_UNKNOWN,
1018                                                        IO_BUFFERSIZE,
1019                                                        &mhd_content_cb,
1020                                                        s5r,
1021                                                        NULL);
1022     if (NULL != s5r->leho)
1023     {
1024       char *cors_hdr;
1025
1026       GNUNET_asprintf (&cors_hdr,
1027                        (HTTPS_PORT == s5r->port)
1028                        ? "https://%s"
1029                        : "http://%s",
1030                        s5r->leho);
1031
1032       GNUNET_break (MHD_YES ==
1033                     MHD_add_response_header (s5r->response,
1034                                              MHD_HTTP_HEADER_ACCESS_CONTROL_ALLOW_ORIGIN,
1035                                              cors_hdr));
1036       GNUNET_free (cors_hdr);
1037     }
1038     /* force connection to be closed after each request, as we
1039        do not support HTTP pipelining (yet, FIXME!) */
1040     GNUNET_break (MHD_YES ==
1041                   MHD_add_response_header (s5r->response,
1042                                            MHD_HTTP_HEADER_CONNECTION,
1043                                            "close"));
1044   }
1045
1046   ndup = GNUNET_strndup (buffer, bytes);
1047   hdr_type = strtok (ndup, ":");
1048   if (NULL == hdr_type)
1049   {
1050     GNUNET_free (ndup);
1051     return bytes;
1052   }
1053   hdr_val = strtok (NULL, "");
1054   if (NULL == hdr_val)
1055   {
1056     GNUNET_free (ndup);
1057     return bytes;
1058   }
1059   if (' ' == *hdr_val)
1060     hdr_val++;
1061
1062   /* custom logic for certain header types */
1063   new_cookie_hdr = NULL;
1064   if ( (NULL != s5r->leho) &&
1065        (0 == strcasecmp (hdr_type,
1066                          MHD_HTTP_HEADER_SET_COOKIE)) )
1067
1068   {
1069     new_cookie_hdr = GNUNET_malloc (strlen (hdr_val) +
1070                                     strlen (s5r->domain) + 1);
1071     offset = 0;
1072     domain_matched = GNUNET_NO; /* make sure we match domain at most once */
1073     for (tok = strtok (hdr_val, ";"); NULL != tok; tok = strtok (NULL, ";"))
1074     {
1075       if ( (0 == strncasecmp (tok, " domain", strlen (" domain"))) &&
1076            (GNUNET_NO == domain_matched) )
1077       {
1078         domain_matched = GNUNET_YES;
1079         cookie_domain = tok + strlen (" domain") + 1;
1080         if (strlen (cookie_domain) < strlen (s5r->leho))
1081         {
1082           delta_cdomain = strlen (s5r->leho) - strlen (cookie_domain);
1083           if (0 == strcasecmp (cookie_domain, s5r->leho + delta_cdomain))
1084           {
1085             offset += sprintf (new_cookie_hdr + offset,
1086                                " domain=%s;",
1087                                s5r->domain);
1088             continue;
1089           }
1090         }
1091         else if (0 == strcmp (cookie_domain, s5r->leho))
1092         {
1093           offset += sprintf (new_cookie_hdr + offset,
1094                              " domain=%s;",
1095                              s5r->domain);
1096           continue;
1097         }
1098         GNUNET_log (GNUNET_ERROR_TYPE_WARNING,
1099                     _("Cookie domain `%s' supplied by server is invalid\n"),
1100                     tok);
1101       }
1102       memcpy (new_cookie_hdr + offset, tok, strlen (tok));
1103       offset += strlen (tok);
1104       new_cookie_hdr[offset++] = ';';
1105     }
1106     hdr_val = new_cookie_hdr;
1107   }
1108
1109   new_location = NULL;
1110   if (0 == strcasecmp (MHD_HTTP_HEADER_LOCATION, hdr_type))
1111   {
1112     char *leho_host;
1113
1114     GNUNET_asprintf (&leho_host,
1115                      (HTTPS_PORT != s5r->port)
1116                      ? "http://%s"
1117                      : "https://%s",
1118                      s5r->leho);
1119     if (0 == strncmp (leho_host,
1120                       hdr_val,
1121                       strlen (leho_host)))
1122     {
1123       GNUNET_asprintf (&new_location,
1124                        "%s%s%s",
1125                        (HTTPS_PORT != s5r->port)
1126                        ? "http://"
1127                        : "https://",
1128                        s5r->domain,
1129                        hdr_val + strlen (leho_host));
1130       hdr_val = new_location;
1131     }
1132     GNUNET_free (leho_host);
1133   }
1134   /* MHD does not allow certain characters in values, remove those */
1135   if (NULL != (tok = strchr (hdr_val, '\n')))
1136     *tok = '\0';
1137   if (NULL != (tok = strchr (hdr_val, '\r')))
1138     *tok = '\0';
1139   if (NULL != (tok = strchr (hdr_val, '\t')))
1140     *tok = '\0';
1141   if (0 != strlen (hdr_val))
1142   {
1143     GNUNET_log (GNUNET_ERROR_TYPE_DEBUG,
1144                 "Adding header %s: %s to MHD response\n",
1145                 hdr_type,
1146                 hdr_val);
1147     GNUNET_break (MHD_YES ==
1148                   MHD_add_response_header (s5r->response,
1149                                            hdr_type,
1150                                            hdr_val));
1151   }
1152   GNUNET_free (ndup);
1153   GNUNET_free_non_null (new_cookie_hdr);
1154   GNUNET_free_non_null (new_location);
1155   return bytes;
1156 }
1157
1158
1159 /**
1160  * Handle response payload data from cURL.  Copies it into our `io_buf` to make
1161  * it available to MHD.
1162  *
1163  * @param ptr pointer to the data
1164  * @param size number of blocks of data
1165  * @param nmemb blocksize
1166  * @param ctx our `struct Socks5Request *`
1167  * @return number of bytes handled
1168  */
1169 static size_t
1170 curl_download_cb (void *ptr, size_t size, size_t nmemb, void* ctx)
1171 {
1172   struct Socks5Request *s5r = ctx;
1173   size_t total = size * nmemb;
1174
1175   if ( (SOCKS5_SOCKET_UPLOAD_STARTED == s5r->state) ||
1176        (SOCKS5_SOCKET_UPLOAD_DONE == s5r->state) )
1177   {
1178     /* we're still not done with the upload, do not yet
1179        start the download, the IO buffer is still full
1180        with upload data. */
1181     GNUNET_log (GNUNET_ERROR_TYPE_DEBUG,
1182                 "Pausing CURL download, waiting for UPLOAD to finish\n");
1183     return CURL_WRITEFUNC_PAUSE; /* not yet ready for data download */
1184   }
1185   if (sizeof (s5r->io_buf) - s5r->io_len < total)
1186   {
1187     GNUNET_log (GNUNET_ERROR_TYPE_DEBUG,
1188                 "Pausing CURL download, not enough space\n");
1189     return CURL_WRITEFUNC_PAUSE; /* not enough space */
1190   }
1191   memcpy (&s5r->io_buf[s5r->io_len],
1192           ptr,
1193           total);
1194   s5r->io_len += total;
1195   if (s5r->io_len == total)
1196     run_mhd_now (s5r->hd);
1197   return total;
1198 }
1199
1200
1201 /**
1202  * cURL callback for uploaded (PUT/POST) data.  Copies it into our `io_buf`
1203  * to make it available to MHD.
1204  *
1205  * @param buf where to write the data
1206  * @param size number of bytes per member
1207  * @param nmemb number of members available in @a buf
1208  * @param cls our `struct Socks5Request` that generated the data
1209  * @return number of bytes copied to @a buf
1210  */
1211 static size_t
1212 curl_upload_cb (void *buf, size_t size, size_t nmemb, void *cls)
1213 {
1214   struct Socks5Request *s5r = cls;
1215   size_t len = size * nmemb;
1216   size_t to_copy;
1217
1218   if ( (0 == s5r->io_len) &&
1219        (SOCKS5_SOCKET_UPLOAD_DONE != s5r->state) )
1220   {
1221     GNUNET_log (GNUNET_ERROR_TYPE_DEBUG,
1222                 "Pausing CURL UPLOAD, need more data\n");
1223     return CURL_READFUNC_PAUSE;
1224   }
1225   if ( (0 == s5r->io_len) &&
1226        (SOCKS5_SOCKET_UPLOAD_DONE == s5r->state) )
1227   {
1228     s5r->state = SOCKS5_SOCKET_DOWNLOAD_STARTED;
1229     GNUNET_log (GNUNET_ERROR_TYPE_DEBUG,
1230                 "Completed CURL UPLOAD\n");
1231     return 0; /* upload finished, can now download */
1232   }
1233   if ( (SOCKS5_SOCKET_UPLOAD_STARTED != s5r->state) ||
1234        (SOCKS5_SOCKET_UPLOAD_DONE != s5r->state) )
1235   {
1236     GNUNET_break (0);
1237     return CURL_READFUNC_ABORT;
1238   }
1239   to_copy = GNUNET_MIN (s5r->io_len,
1240                         len);
1241   memcpy (buf, s5r->io_buf, to_copy);
1242   memmove (s5r->io_buf,
1243            &s5r->io_buf[to_copy],
1244            s5r->io_len - to_copy);
1245   s5r->io_len -= to_copy;
1246   if (s5r->io_len + to_copy == sizeof (s5r->io_buf))
1247     run_mhd_now (s5r->hd); /* got more space for upload now */
1248   return to_copy;
1249 }
1250
1251
1252 /* ************************** main loop of cURL interaction ****************** */
1253
1254
1255 /**
1256  * Task that is run when we are ready to receive more data
1257  * from curl
1258  *
1259  * @param cls closure
1260  * @param tc task context
1261  */
1262 static void
1263 curl_task_download (void *cls, const struct GNUNET_SCHEDULER_TaskContext *tc);
1264
1265
1266 /**
1267  * Ask cURL for the select() sets and schedule cURL operations.
1268  */
1269 static void
1270 curl_download_prepare ()
1271 {
1272   CURLMcode mret;
1273   fd_set rs;
1274   fd_set ws;
1275   fd_set es;
1276   int max;
1277   struct GNUNET_NETWORK_FDSet *grs;
1278   struct GNUNET_NETWORK_FDSet *gws;
1279   long to;
1280   struct GNUNET_TIME_Relative rtime;
1281
1282   if (NULL != curl_download_task)
1283   {
1284     GNUNET_SCHEDULER_cancel (curl_download_task);
1285     curl_download_task = NULL;
1286   }
1287   max = -1;
1288   FD_ZERO (&rs);
1289   FD_ZERO (&ws);
1290   FD_ZERO (&es);
1291   if (CURLM_OK != (mret = curl_multi_fdset (curl_multi, &rs, &ws, &es, &max)))
1292   {
1293     GNUNET_log (GNUNET_ERROR_TYPE_ERROR,
1294                 "%s failed at %s:%d: `%s'\n",
1295                 "curl_multi_fdset", __FILE__, __LINE__,
1296                 curl_multi_strerror (mret));
1297     return;
1298   }
1299   to = -1;
1300   GNUNET_break (CURLM_OK == curl_multi_timeout (curl_multi, &to));
1301   if (-1 == to)
1302     rtime = GNUNET_TIME_UNIT_FOREVER_REL;
1303   else
1304     rtime = GNUNET_TIME_relative_multiply (GNUNET_TIME_UNIT_MILLISECONDS, to);
1305   if (-1 != max)
1306   {
1307     grs = GNUNET_NETWORK_fdset_create ();
1308     gws = GNUNET_NETWORK_fdset_create ();
1309     GNUNET_NETWORK_fdset_copy_native (grs, &rs, max + 1);
1310     GNUNET_NETWORK_fdset_copy_native (gws, &ws, max + 1);
1311     curl_download_task = GNUNET_SCHEDULER_add_select (GNUNET_SCHEDULER_PRIORITY_DEFAULT,
1312                                                       rtime,
1313                                                       grs, gws,
1314                                                       &curl_task_download, curl_multi);
1315     GNUNET_NETWORK_fdset_destroy (gws);
1316     GNUNET_NETWORK_fdset_destroy (grs);
1317   }
1318   else
1319   {
1320     curl_download_task = GNUNET_SCHEDULER_add_delayed (rtime,
1321                                                        &curl_task_download,
1322                                                        curl_multi);
1323   }
1324 }
1325
1326
1327 /**
1328  * Task that is run when we are ready to receive more data from curl.
1329  *
1330  * @param cls closure, NULL
1331  * @param tc task context
1332  */
1333 static void
1334 curl_task_download (void *cls,
1335                     const struct GNUNET_SCHEDULER_TaskContext *tc)
1336 {
1337   int running;
1338   int msgnum;
1339   struct CURLMsg *msg;
1340   CURLMcode mret;
1341   struct Socks5Request *s5r;
1342
1343   curl_download_task = NULL;
1344   do
1345   {
1346     running = 0;
1347     mret = curl_multi_perform (curl_multi, &running);
1348     while (NULL != (msg = curl_multi_info_read (curl_multi, &msgnum)))
1349     {
1350       GNUNET_break (CURLE_OK ==
1351                     curl_easy_getinfo (msg->easy_handle,
1352                                        CURLINFO_PRIVATE,
1353                                        (char **) &s5r ));
1354       if (NULL == s5r)
1355       {
1356         GNUNET_break (0);
1357         continue;
1358       }
1359       switch (msg->msg)
1360       {
1361       case CURLMSG_NONE:
1362         /* documentation says this is not used */
1363         GNUNET_break (0);
1364         break;
1365       case CURLMSG_DONE:
1366         switch (msg->data.result)
1367         {
1368         case CURLE_OK:
1369         case CURLE_GOT_NOTHING:
1370           GNUNET_log (GNUNET_ERROR_TYPE_DEBUG,
1371                       "CURL download completed.\n");
1372           s5r->state = SOCKS5_SOCKET_DOWNLOAD_DONE;
1373           run_mhd_now (s5r->hd);
1374           break;
1375         default:
1376           GNUNET_log (GNUNET_ERROR_TYPE_ERROR,
1377                       "Download curl failed: %s\n",
1378                       curl_easy_strerror (msg->data.result));
1379           /* FIXME: indicate error somehow? close MHD connection badly as well? */
1380           s5r->state = SOCKS5_SOCKET_DOWNLOAD_DONE;
1381           run_mhd_now (s5r->hd);
1382           break;
1383         }
1384         GNUNET_log (GNUNET_ERROR_TYPE_DEBUG,
1385                     "Cleaning up cURL handle\n");
1386         curl_multi_remove_handle (curl_multi, s5r->curl);
1387         curl_easy_cleanup (s5r->curl);
1388         s5r->curl = NULL;
1389         if (NULL == s5r->response)
1390           s5r->response = curl_failure_response;
1391         break;
1392       case CURLMSG_LAST:
1393         /* documentation says this is not used */
1394         GNUNET_break (0);
1395         break;
1396       default:
1397         /* unexpected status code */
1398         GNUNET_break (0);
1399         break;
1400       }
1401     };
1402   } while (mret == CURLM_CALL_MULTI_PERFORM);
1403   if (CURLM_OK != mret)
1404     GNUNET_log (GNUNET_ERROR_TYPE_ERROR,
1405                 "%s failed at %s:%d: `%s'\n",
1406                 "curl_multi_perform", __FILE__, __LINE__,
1407                 curl_multi_strerror (mret));
1408   if (0 == running)
1409   {
1410     GNUNET_log (GNUNET_ERROR_TYPE_DEBUG,
1411                 "Suspending cURL multi loop, no more events pending\n");
1412     return; /* nothing more in progress */
1413   }
1414   curl_download_prepare ();
1415 }
1416
1417
1418 /* ********************************* MHD response generation ******************* */
1419
1420
1421 /**
1422  * Read HTTP request header field from the request.  Copies the fields
1423  * over to the 'headers' that will be given to curl.  However, 'Host'
1424  * is substituted with the LEHO if present.  We also change the
1425  * 'Connection' header value to "close" as the proxy does not support
1426  * pipelining.
1427  *
1428  * @param cls our `struct Socks5Request`
1429  * @param kind value kind
1430  * @param key field key
1431  * @param value field value
1432  * @return MHD_YES to continue to iterate
1433  */
1434 static int
1435 con_val_iter (void *cls,
1436               enum MHD_ValueKind kind,
1437               const char *key,
1438               const char *value)
1439 {
1440   struct Socks5Request *s5r = cls;
1441   char *hdr;
1442
1443   if ( (0 == strcasecmp (MHD_HTTP_HEADER_HOST, key)) &&
1444        (NULL != s5r->leho) )
1445     value = s5r->leho;
1446   if (0 == strcasecmp (MHD_HTTP_HEADER_CONNECTION, key))
1447     value = "Close";
1448   GNUNET_asprintf (&hdr,
1449                    "%s: %s",
1450                    key,
1451                    value);
1452   GNUNET_log (GNUNET_ERROR_TYPE_DEBUG,
1453               "Adding HEADER `%s' to HTTP request\n",
1454               hdr);
1455   s5r->headers = curl_slist_append (s5r->headers,
1456                                     hdr);
1457   GNUNET_free (hdr);
1458   return MHD_YES;
1459 }
1460
1461
1462 /**
1463  * Main MHD callback for handling requests.
1464  *
1465  * @param cls unused
1466  * @param con MHD connection handle
1467  * @param url the url in the request
1468  * @param meth the HTTP method used ("GET", "PUT", etc.)
1469  * @param ver the HTTP version string (i.e. "HTTP/1.1")
1470  * @param upload_data the data being uploaded (excluding HEADERS,
1471  *        for a POST that fits into memory and that is encoded
1472  *        with a supported encoding, the POST data will NOT be
1473  *        given in upload_data and is instead available as
1474  *        part of MHD_get_connection_values; very large POST
1475  *        data *will* be made available incrementally in
1476  *        upload_data)
1477  * @param upload_data_size set initially to the size of the
1478  *        @a upload_data provided; the method must update this
1479  *        value to the number of bytes NOT processed;
1480  * @param con_cls pointer to location where we store the 'struct Request'
1481  * @return MHD_YES if the connection was handled successfully,
1482  *         MHD_NO if the socket must be closed due to a serious
1483  *         error while handling the request
1484  */
1485 static int
1486 create_response (void *cls,
1487                  struct MHD_Connection *con,
1488                  const char *url,
1489                  const char *meth,
1490                  const char *ver,
1491                  const char *upload_data,
1492                  size_t *upload_data_size,
1493                  void **con_cls)
1494 {
1495   struct Socks5Request *s5r = *con_cls;
1496   char *curlurl;
1497   char *curl_hosts;
1498   char ipstring[INET6_ADDRSTRLEN];
1499   char ipaddr[INET6_ADDRSTRLEN + 2];
1500   const struct sockaddr *sa;
1501   const struct sockaddr_in *s4;
1502   const struct sockaddr_in6 *s6;
1503   uint16_t port;
1504   size_t left;
1505
1506   if (NULL == s5r)
1507   {
1508     GNUNET_break (0);
1509     return MHD_NO;
1510   }
1511   if ( (NULL == s5r->curl) &&
1512        (SOCKS5_SOCKET_WITH_MHD == s5r->state) )
1513   {
1514     /* first time here, initialize curl handle */
1515     sa = (const struct sockaddr *) &s5r->destination_address;
1516     switch (sa->sa_family)
1517     {
1518     case AF_INET:
1519       s4 = (const struct sockaddr_in *) &s5r->destination_address;
1520       if (NULL == inet_ntop (AF_INET,
1521                              &s4->sin_addr,
1522                              ipstring,
1523                              sizeof (ipstring)))
1524       {
1525         GNUNET_break (0);
1526         return MHD_NO;
1527       }
1528       GNUNET_snprintf (ipaddr,
1529                        sizeof (ipaddr),
1530                        "%s",
1531                        ipstring);
1532       port = ntohs (s4->sin_port);
1533       break;
1534     case AF_INET6:
1535       s6 = (const struct sockaddr_in6 *) &s5r->destination_address;
1536       if (NULL == inet_ntop (AF_INET6,
1537                              &s6->sin6_addr,
1538                              ipstring,
1539                              sizeof (ipstring)))
1540       {
1541         GNUNET_break (0);
1542         return MHD_NO;
1543       }
1544       GNUNET_snprintf (ipaddr,
1545                        sizeof (ipaddr),
1546                        "[%s]",
1547                        ipstring);
1548       port = ntohs (s6->sin6_port);
1549       break;
1550     default:
1551       GNUNET_break (0);
1552       return MHD_NO;
1553     }
1554     s5r->curl = curl_easy_init ();
1555     if (NULL == s5r->curl)
1556       return MHD_queue_response (con,
1557                                  MHD_HTTP_INTERNAL_SERVER_ERROR,
1558                                  curl_failure_response);
1559     curl_easy_setopt (s5r->curl, CURLOPT_HEADERFUNCTION, &curl_check_hdr);
1560     curl_easy_setopt (s5r->curl, CURLOPT_HEADERDATA, s5r);
1561     curl_easy_setopt (s5r->curl, CURLOPT_FOLLOWLOCATION, 0);
1562     curl_easy_setopt (s5r->curl, CURLOPT_IPRESOLVE, CURL_IPRESOLVE_V4);
1563     curl_easy_setopt (s5r->curl, CURLOPT_CONNECTTIMEOUT, 600L);
1564     curl_easy_setopt (s5r->curl, CURLOPT_TIMEOUT, 600L);
1565     curl_easy_setopt (s5r->curl, CURLOPT_NOSIGNAL, 1L);
1566     curl_easy_setopt (s5r->curl, CURLOPT_HTTP_CONTENT_DECODING, 0);
1567     curl_easy_setopt (s5r->curl, CURLOPT_HTTP_TRANSFER_DECODING, 0);
1568     curl_easy_setopt (s5r->curl, CURLOPT_NOSIGNAL, 1L);
1569     curl_easy_setopt (s5r->curl, CURLOPT_PRIVATE, s5r);
1570     curl_easy_setopt (s5r->curl, CURLOPT_VERBOSE, 0);
1571     /**
1572      * Pre-populate cache to resolve Hostname.
1573      * This is necessary as the DNS name in the CURLOPT_URL is used
1574      * for SNI http://de.wikipedia.org/wiki/Server_Name_Indication
1575      */
1576     if (NULL != s5r->leho)
1577     {
1578         GNUNET_asprintf (&curl_hosts,
1579                          "%s:%d:%s",
1580                          s5r->leho,
1581                          port,
1582                          ipaddr);
1583         s5r->hosts = curl_slist_append(NULL, curl_hosts);
1584         curl_easy_setopt(s5r->curl, CURLOPT_RESOLVE, s5r->hosts);
1585         GNUNET_free (curl_hosts);
1586     }
1587     GNUNET_asprintf (&curlurl,
1588                      (HTTPS_PORT != s5r->port)
1589                      ? "http://%s:%d%s"
1590                      : "https://%s:%d%s",
1591                      (NULL != s5r->leho)
1592                      ? s5r->leho
1593                      : ipaddr,
1594                      port,
1595                      s5r->url);
1596     curl_easy_setopt (s5r->curl,
1597                       CURLOPT_URL,
1598                       curlurl);
1599     GNUNET_free (curlurl);
1600
1601     if (0 == strcasecmp (meth, MHD_HTTP_METHOD_PUT))
1602     {
1603       s5r->state = SOCKS5_SOCKET_UPLOAD_STARTED;
1604       curl_easy_setopt (s5r->curl, CURLOPT_UPLOAD, 1);
1605       curl_easy_setopt (s5r->curl, CURLOPT_WRITEFUNCTION, &curl_download_cb);
1606       curl_easy_setopt (s5r->curl, CURLOPT_WRITEDATA, s5r);
1607       curl_easy_setopt (s5r->curl, CURLOPT_READFUNCTION, &curl_upload_cb);
1608       curl_easy_setopt (s5r->curl, CURLOPT_READDATA, s5r);
1609     }
1610     else if (0 == strcasecmp (meth, MHD_HTTP_METHOD_POST))
1611     {
1612       s5r->state = SOCKS5_SOCKET_UPLOAD_STARTED;
1613       curl_easy_setopt (s5r->curl, CURLOPT_POST, 1);
1614       curl_easy_setopt (s5r->curl, CURLOPT_WRITEFUNCTION, &curl_download_cb);
1615       curl_easy_setopt (s5r->curl, CURLOPT_WRITEDATA, s5r);
1616       curl_easy_setopt (s5r->curl, CURLOPT_READFUNCTION, &curl_upload_cb);
1617       curl_easy_setopt (s5r->curl, CURLOPT_READDATA, s5r);
1618     }
1619     else if (0 == strcasecmp (meth, MHD_HTTP_METHOD_HEAD))
1620     {
1621       s5r->state = SOCKS5_SOCKET_DOWNLOAD_STARTED;
1622       curl_easy_setopt (s5r->curl, CURLOPT_NOBODY, 1);
1623     }
1624     else if (0 == strcasecmp (meth, MHD_HTTP_METHOD_GET))
1625     {
1626       s5r->state = SOCKS5_SOCKET_DOWNLOAD_STARTED;
1627       curl_easy_setopt (s5r->curl, CURLOPT_HTTPGET, 1);
1628       curl_easy_setopt (s5r->curl, CURLOPT_WRITEFUNCTION, &curl_download_cb);
1629       curl_easy_setopt (s5r->curl, CURLOPT_WRITEDATA, s5r);
1630     }
1631     else
1632     {
1633       GNUNET_log (GNUNET_ERROR_TYPE_WARNING,
1634                   _("Unsupported HTTP method `%s'\n"),
1635                   meth);
1636       curl_easy_cleanup (s5r->curl);
1637       s5r->curl = NULL;
1638       return MHD_NO;
1639     }
1640
1641     if (0 == strcasecmp (ver, MHD_HTTP_VERSION_1_0))
1642     {
1643       curl_easy_setopt (s5r->curl, CURLOPT_HTTP_VERSION, CURL_HTTP_VERSION_1_0);
1644     }
1645     else if (0 == strcasecmp (ver, MHD_HTTP_VERSION_1_1))
1646     {
1647       curl_easy_setopt (s5r->curl, CURLOPT_HTTP_VERSION, CURL_HTTP_VERSION_1_1);
1648     }
1649     else
1650     {
1651       curl_easy_setopt (s5r->curl, CURLOPT_HTTP_VERSION, CURL_HTTP_VERSION_NONE);
1652     }
1653
1654     if (HTTPS_PORT == s5r->port)
1655     {
1656       curl_easy_setopt (s5r->curl, CURLOPT_USE_SSL, CURLUSESSL_ALL);
1657       curl_easy_setopt (s5r->curl, CURLOPT_SSL_VERIFYPEER, 1L);
1658       /* Disable cURL checking the hostname, as we will check ourselves
1659          as only we have the domain name or the LEHO or the DANE record */
1660       curl_easy_setopt (s5r->curl, CURLOPT_SSL_VERIFYHOST, 0L);
1661     }
1662     else
1663     {
1664       curl_easy_setopt (s5r->curl, CURLOPT_USE_SSL, CURLUSESSL_NONE);
1665     }
1666
1667     if (CURLM_OK != curl_multi_add_handle (curl_multi, s5r->curl))
1668     {
1669       GNUNET_break (0);
1670       curl_easy_cleanup (s5r->curl);
1671       s5r->curl = NULL;
1672       return MHD_NO;
1673     }
1674     MHD_get_connection_values (con,
1675                                MHD_HEADER_KIND,
1676                                &con_val_iter, s5r);
1677     curl_easy_setopt (s5r->curl, CURLOPT_HTTPHEADER, s5r->headers);
1678     curl_download_prepare ();
1679     return MHD_YES;
1680   }
1681
1682   /* continuing to process request */
1683   if (0 != *upload_data_size)
1684   {
1685     left = GNUNET_MIN (*upload_data_size,
1686                        sizeof (s5r->io_buf) - s5r->io_len);
1687     memcpy (&s5r->io_buf[s5r->io_len],
1688             upload_data,
1689             left);
1690     s5r->io_len += left;
1691     *upload_data_size -= left;
1692     GNUNET_assert (NULL != s5r->curl);
1693     curl_easy_pause (s5r->curl, CURLPAUSE_CONT);
1694     curl_download_prepare ();
1695     return MHD_YES;
1696   }
1697   if (SOCKS5_SOCKET_UPLOAD_STARTED == s5r->state)
1698   {
1699     GNUNET_log (GNUNET_ERROR_TYPE_DEBUG,
1700                 "Finished processing UPLOAD\n");
1701     s5r->state = SOCKS5_SOCKET_UPLOAD_DONE;
1702   }
1703   if (NULL == s5r->response)
1704     return MHD_YES; /* too early to queue response, did not yet get headers from cURL */
1705   GNUNET_log (GNUNET_ERROR_TYPE_DEBUG,
1706               "Queueing response with MHD\n");
1707   return MHD_queue_response (con,
1708                              s5r->response_code,
1709                              s5r->response);
1710 }
1711
1712
1713 /* ******************** MHD HTTP setup and event loop ******************** */
1714
1715
1716 /**
1717  * Function called when MHD decides that we are done with a connection.
1718  *
1719  * @param cls NULL
1720  * @param connection connection handle
1721  * @param con_cls value as set by the last call to
1722  *        the MHD_AccessHandlerCallback, should be our `struct Socks5Request *`
1723  * @param toe reason for request termination (ignored)
1724  */
1725 static void
1726 mhd_completed_cb (void *cls,
1727                   struct MHD_Connection *connection,
1728                   void **con_cls,
1729                   enum MHD_RequestTerminationCode toe)
1730 {
1731   struct Socks5Request *s5r = *con_cls;
1732
1733   if (NULL == s5r)
1734     return;
1735   if (MHD_REQUEST_TERMINATED_COMPLETED_OK != toe)
1736     GNUNET_log (GNUNET_ERROR_TYPE_INFO,
1737                 "MHD encountered error handling request: %d\n",
1738                 toe);
1739   cleanup_s5r (s5r);
1740   curl_download_prepare();
1741   *con_cls = NULL;
1742 }
1743
1744
1745 /**
1746  * Function called when MHD first processes an incoming connection.
1747  * Gives us the respective URI information.
1748  *
1749  * We use this to associate the `struct MHD_Connection` with our
1750  * internal `struct Socks5Request` data structure (by checking
1751  * for matching sockets).
1752  *
1753  * @param cls the HTTP server handle (a `struct MhdHttpList`)
1754  * @param url the URL that is being requested
1755  * @param connection MHD connection object for the request
1756  * @return the `struct Socks5Request` that this @a connection is for
1757  */
1758 static void *
1759 mhd_log_callback (void *cls,
1760                   const char *url,
1761                   struct MHD_Connection *connection)
1762 {
1763   struct Socks5Request *s5r;
1764   const union MHD_ConnectionInfo *ci;
1765   int sock;
1766
1767   ci = MHD_get_connection_info (connection,
1768                                 MHD_CONNECTION_INFO_CONNECTION_FD);
1769   if (NULL == ci)
1770   {
1771     GNUNET_break (0);
1772     return NULL;
1773   }
1774   sock = ci->connect_fd;
1775   for (s5r = s5r_head; NULL != s5r; s5r = s5r->next)
1776   {
1777     if (GNUNET_NETWORK_get_fd (s5r->sock) == sock)
1778     {
1779       if (NULL != s5r->url)
1780       {
1781         GNUNET_break (0);
1782         return NULL;
1783       }
1784       s5r->url = GNUNET_strdup (url);
1785       GNUNET_SCHEDULER_cancel (s5r->timeout_task);
1786       s5r->timeout_task = NULL;
1787       return s5r;
1788     }
1789   }
1790   GNUNET_break (0);
1791   return NULL;
1792 }
1793
1794
1795 /**
1796  * Kill the given MHD daemon.
1797  *
1798  * @param hd daemon to stop
1799  */
1800 static void
1801 kill_httpd (struct MhdHttpList *hd)
1802 {
1803   GNUNET_CONTAINER_DLL_remove (mhd_httpd_head,
1804                                mhd_httpd_tail,
1805                                hd);
1806   GNUNET_free_non_null (hd->domain);
1807   MHD_stop_daemon (hd->daemon);
1808   if (NULL != hd->httpd_task)
1809   {
1810     GNUNET_SCHEDULER_cancel (hd->httpd_task);
1811     hd->httpd_task = NULL;
1812   }
1813   GNUNET_free_non_null (hd->proxy_cert);
1814   if (hd == httpd)
1815     httpd = NULL;
1816   GNUNET_free (hd);
1817 }
1818
1819
1820 /**
1821  * Task run whenever HTTP server is idle for too long. Kill it.
1822  *
1823  * @param cls the `struct MhdHttpList *`
1824  * @param tc sched context
1825  */
1826 static void
1827 kill_httpd_task (void *cls,
1828                  const struct GNUNET_SCHEDULER_TaskContext *tc)
1829 {
1830   struct MhdHttpList *hd = cls;
1831
1832   hd->httpd_task = NULL;
1833   kill_httpd (hd);
1834 }
1835
1836
1837 /**
1838  * Task run whenever HTTP server operations are pending.
1839  *
1840  * @param cls the `struct MhdHttpList *` of the daemon that is being run
1841  * @param tc sched context
1842  */
1843 static void
1844 do_httpd (void *cls,
1845           const struct GNUNET_SCHEDULER_TaskContext *tc);
1846
1847
1848 /**
1849  * Schedule MHD.  This function should be called initially when an
1850  * MHD is first getting its client socket, and will then automatically
1851  * always be called later whenever there is work to be done.
1852  *
1853  * @param hd the daemon to schedule
1854  */
1855 static void
1856 schedule_httpd (struct MhdHttpList *hd)
1857 {
1858   fd_set rs;
1859   fd_set ws;
1860   fd_set es;
1861   struct GNUNET_NETWORK_FDSet *wrs;
1862   struct GNUNET_NETWORK_FDSet *wws;
1863   int max;
1864   int haveto;
1865   MHD_UNSIGNED_LONG_LONG timeout;
1866   struct GNUNET_TIME_Relative tv;
1867
1868   FD_ZERO (&rs);
1869   FD_ZERO (&ws);
1870   FD_ZERO (&es);
1871   max = -1;
1872   if (MHD_YES != MHD_get_fdset (hd->daemon, &rs, &ws, &es, &max))
1873   {
1874     kill_httpd (hd);
1875     return;
1876   }
1877   haveto = MHD_get_timeout (hd->daemon, &timeout);
1878   if (MHD_YES == haveto)
1879     tv.rel_value_us = (uint64_t) timeout * 1000LL;
1880   else
1881     tv = GNUNET_TIME_UNIT_FOREVER_REL;
1882   if (-1 != max)
1883   {
1884     wrs = GNUNET_NETWORK_fdset_create ();
1885     wws = GNUNET_NETWORK_fdset_create ();
1886     GNUNET_NETWORK_fdset_copy_native (wrs, &rs, max + 1);
1887     GNUNET_NETWORK_fdset_copy_native (wws, &ws, max + 1);
1888   }
1889   else
1890   {
1891     wrs = NULL;
1892     wws = NULL;
1893   }
1894   if (NULL != hd->httpd_task)
1895     GNUNET_SCHEDULER_cancel (hd->httpd_task);
1896   if ( (MHD_YES != haveto) &&
1897        (-1 == max) &&
1898        (hd != httpd) )
1899   {
1900     /* daemon is idle, kill after timeout */
1901     hd->httpd_task = GNUNET_SCHEDULER_add_delayed (MHD_CACHE_TIMEOUT,
1902                                                    &kill_httpd_task,
1903                                                    hd);
1904   }
1905   else
1906   {
1907     hd->httpd_task =
1908       GNUNET_SCHEDULER_add_select (GNUNET_SCHEDULER_PRIORITY_DEFAULT,
1909                                    tv, wrs, wws,
1910                                    &do_httpd, hd);
1911   }
1912   if (NULL != wrs)
1913     GNUNET_NETWORK_fdset_destroy (wrs);
1914   if (NULL != wws)
1915     GNUNET_NETWORK_fdset_destroy (wws);
1916 }
1917
1918
1919 /**
1920  * Task run whenever HTTP server operations are pending.
1921  *
1922  * @param cls the `struct MhdHttpList` of the daemon that is being run
1923  * @param tc scheduler context
1924  */
1925 static void
1926 do_httpd (void *cls,
1927           const struct GNUNET_SCHEDULER_TaskContext *tc)
1928 {
1929   struct MhdHttpList *hd = cls;
1930
1931   hd->httpd_task = NULL;
1932   MHD_run (hd->daemon);
1933   schedule_httpd (hd);
1934 }
1935
1936
1937 /**
1938  * Run MHD now, we have extra data ready for the callback.
1939  *
1940  * @param hd the daemon to run now.
1941  */
1942 static void
1943 run_mhd_now (struct MhdHttpList *hd)
1944 {
1945   if (NULL !=
1946       hd->httpd_task)
1947     GNUNET_SCHEDULER_cancel (hd->httpd_task);
1948   hd->httpd_task = GNUNET_SCHEDULER_add_now (&do_httpd,
1949                                              hd);
1950 }
1951
1952
1953 /**
1954  * Read file in filename
1955  *
1956  * @param filename file to read
1957  * @param size pointer where filesize is stored
1958  * @return NULL on error
1959  */
1960 static void*
1961 load_file (const char* filename,
1962            unsigned int* size)
1963 {
1964   void *buffer;
1965   uint64_t fsize;
1966
1967   if (GNUNET_OK !=
1968       GNUNET_DISK_file_size (filename, &fsize,
1969                              GNUNET_YES, GNUNET_YES))
1970     return NULL;
1971   if (fsize > MAX_PEM_SIZE)
1972     return NULL;
1973   *size = (unsigned int) fsize;
1974   buffer = GNUNET_malloc (*size);
1975   if (fsize != GNUNET_DISK_fn_read (filename, buffer, (size_t) fsize))
1976   {
1977     GNUNET_free (buffer);
1978     return NULL;
1979   }
1980   return buffer;
1981 }
1982
1983
1984 /**
1985  * Load PEM key from file
1986  *
1987  * @param key where to store the data
1988  * @param keyfile path to the PEM file
1989  * @return #GNUNET_OK on success
1990  */
1991 static int
1992 load_key_from_file (gnutls_x509_privkey_t key,
1993                     const char* keyfile)
1994 {
1995   gnutls_datum_t key_data;
1996   int ret;
1997
1998   key_data.data = load_file (keyfile, &key_data.size);
1999   if (NULL == key_data.data)
2000     return GNUNET_SYSERR;
2001   ret = gnutls_x509_privkey_import (key, &key_data,
2002                                     GNUTLS_X509_FMT_PEM);
2003   if (GNUTLS_E_SUCCESS != ret)
2004   {
2005     GNUNET_log (GNUNET_ERROR_TYPE_ERROR,
2006                 _("Unable to import private key from file `%s'\n"),
2007                 keyfile);
2008   }
2009   GNUNET_free_non_null (key_data.data);
2010   return (GNUTLS_E_SUCCESS != ret) ? GNUNET_SYSERR : GNUNET_OK;
2011 }
2012
2013
2014 /**
2015  * Load cert from file
2016  *
2017  * @param crt struct to store data in
2018  * @param certfile path to pem file
2019  * @return #GNUNET_OK on success
2020  */
2021 static int
2022 load_cert_from_file (gnutls_x509_crt_t crt,
2023                      const char* certfile)
2024 {
2025   gnutls_datum_t cert_data;
2026   int ret;
2027
2028   cert_data.data = load_file (certfile, &cert_data.size);
2029   if (NULL == cert_data.data)
2030     return GNUNET_SYSERR;
2031   ret = gnutls_x509_crt_import (crt, &cert_data,
2032                                 GNUTLS_X509_FMT_PEM);
2033   if (GNUTLS_E_SUCCESS != ret)
2034   {
2035     GNUNET_log (GNUNET_ERROR_TYPE_ERROR,
2036                _("Unable to import certificate %s\n"), certfile);
2037   }
2038   GNUNET_free_non_null (cert_data.data);
2039   return (GNUTLS_E_SUCCESS != ret) ? GNUNET_SYSERR : GNUNET_OK;
2040 }
2041
2042
2043 /**
2044  * Generate new certificate for specific name
2045  *
2046  * @param name the subject name to generate a cert for
2047  * @return a struct holding the PEM data, NULL on error
2048  */
2049 static struct ProxyGNSCertificate *
2050 generate_gns_certificate (const char *name)
2051 {
2052   unsigned int serial;
2053   size_t key_buf_size;
2054   size_t cert_buf_size;
2055   gnutls_x509_crt_t request;
2056   time_t etime;
2057   struct tm *tm_data;
2058   struct ProxyGNSCertificate *pgc;
2059
2060   GNUNET_log (GNUNET_ERROR_TYPE_DEBUG,
2061               "Generating TLS/SSL certificate for `%s'\n",
2062               name);
2063   GNUNET_break (GNUTLS_E_SUCCESS == gnutls_x509_crt_init (&request));
2064   GNUNET_break (GNUTLS_E_SUCCESS == gnutls_x509_crt_set_key (request, proxy_ca.key));
2065   pgc = GNUNET_new (struct ProxyGNSCertificate);
2066   gnutls_x509_crt_set_dn_by_oid (request, GNUTLS_OID_X520_COUNTRY_NAME,
2067                                  0, "ZZ", 2);
2068   gnutls_x509_crt_set_dn_by_oid (request, GNUTLS_OID_X520_ORGANIZATION_NAME,
2069                                  0, "GNU Name System", 4);
2070   gnutls_x509_crt_set_dn_by_oid (request, GNUTLS_OID_X520_COMMON_NAME,
2071                                  0, name, strlen (name));
2072   GNUNET_break (GNUTLS_E_SUCCESS == gnutls_x509_crt_set_version (request, 3));
2073   gnutls_rnd (GNUTLS_RND_NONCE, &serial, sizeof (serial));
2074   gnutls_x509_crt_set_serial (request,
2075                               &serial,
2076                               sizeof (serial));
2077   etime = time (NULL);
2078   tm_data = localtime (&etime);
2079   gnutls_x509_crt_set_activation_time (request,
2080                                        etime);
2081   tm_data->tm_year++;
2082   etime = mktime (tm_data);
2083   gnutls_x509_crt_set_expiration_time (request,
2084                                        etime);
2085   gnutls_x509_crt_sign (request,
2086                         proxy_ca.cert,
2087                         proxy_ca.key);
2088   key_buf_size = sizeof (pgc->key);
2089   cert_buf_size = sizeof (pgc->cert);
2090   gnutls_x509_crt_export (request, GNUTLS_X509_FMT_PEM,
2091                           pgc->cert, &cert_buf_size);
2092   gnutls_x509_privkey_export (proxy_ca.key, GNUTLS_X509_FMT_PEM,
2093                               pgc->key, &key_buf_size);
2094   gnutls_x509_crt_deinit (request);
2095   return pgc;
2096 }
2097
2098
2099 /**
2100  * Function called by MHD with errors, suppresses them all.
2101  *
2102  * @param cls closure
2103  * @param fm format string (`printf()`-style)
2104  * @param ap arguments to @a fm
2105  */
2106 static void
2107 mhd_error_log_callback (void *cls,
2108                         const char *fm,
2109                         va_list ap)
2110 {
2111   /* do nothing */
2112 }
2113
2114
2115 /**
2116  * Lookup (or create) an SSL MHD instance for a particular domain.
2117  *
2118  * @param domain the domain the SSL daemon has to serve
2119  * @return NULL on error
2120  */
2121 static struct MhdHttpList *
2122 lookup_ssl_httpd (const char* domain)
2123 {
2124   struct MhdHttpList *hd;
2125   struct ProxyGNSCertificate *pgc;
2126
2127   if (NULL == domain)
2128   {
2129     GNUNET_break (0);
2130     return NULL;
2131   }
2132   for (hd = mhd_httpd_head; NULL != hd; hd = hd->next)
2133     if ( (NULL != hd->domain) &&
2134          (0 == strcmp (hd->domain, domain)) )
2135       return hd;
2136   GNUNET_log (GNUNET_ERROR_TYPE_DEBUG,
2137               "Starting fresh MHD HTTPS instance for domain `%s'\n",
2138               domain);
2139   pgc = generate_gns_certificate (domain);
2140   hd = GNUNET_new (struct MhdHttpList);
2141   hd->is_ssl = GNUNET_YES;
2142   hd->domain = GNUNET_strdup (domain);
2143   hd->proxy_cert = pgc;
2144   hd->daemon = MHD_start_daemon (MHD_USE_DEBUG | MHD_USE_SSL | MHD_USE_NO_LISTEN_SOCKET,
2145                                  0,
2146                                  NULL, NULL,
2147                                  &create_response, hd,
2148                                  MHD_OPTION_CONNECTION_TIMEOUT, (unsigned int) 16,
2149                                  MHD_OPTION_NOTIFY_COMPLETED, &mhd_completed_cb, NULL,
2150                                  MHD_OPTION_URI_LOG_CALLBACK, &mhd_log_callback, NULL,
2151                                  MHD_OPTION_EXTERNAL_LOGGER, &mhd_error_log_callback, NULL,
2152                                  MHD_OPTION_HTTPS_MEM_KEY, pgc->key,
2153                                  MHD_OPTION_HTTPS_MEM_CERT, pgc->cert,
2154                                  MHD_OPTION_END);
2155   if (NULL == hd->daemon)
2156   {
2157     GNUNET_free (pgc);
2158     GNUNET_free (hd);
2159     return NULL;
2160   }
2161   GNUNET_CONTAINER_DLL_insert (mhd_httpd_head,
2162                                mhd_httpd_tail,
2163                                hd);
2164   return hd;
2165 }
2166
2167
2168 /**
2169  * Task run when a Socks5Request somehow fails to be associated with
2170  * an MHD connection (i.e. because the client never speaks HTTP after
2171  * the SOCKS5 handshake).  Clean up.
2172  *
2173  * @param cls the `struct Socks5Request *`
2174  * @param tc sched context
2175  */
2176 static void
2177 timeout_s5r_handshake (void *cls,
2178                        const struct GNUNET_SCHEDULER_TaskContext *tc)
2179 {
2180   struct Socks5Request *s5r = cls;
2181
2182   s5r->timeout_task = NULL;
2183   cleanup_s5r (s5r);
2184 }
2185
2186
2187 /**
2188  * We're done with the Socks5 protocol, now we need to pass the
2189  * connection data through to the final destination, either
2190  * direct (if the protocol might not be HTTP), or via MHD
2191  * (if the port looks like it should be HTTP).
2192  *
2193  * @param s5r socks request that has reached the final stage
2194  */
2195 static void
2196 setup_data_transfer (struct Socks5Request *s5r)
2197 {
2198   struct MhdHttpList *hd;
2199   int fd;
2200   const struct sockaddr *addr;
2201   socklen_t len;
2202
2203   switch (s5r->port)
2204   {
2205   case HTTPS_PORT:
2206     hd = lookup_ssl_httpd (s5r->domain);
2207     if (NULL == hd)
2208     {
2209       GNUNET_log (GNUNET_ERROR_TYPE_ERROR,
2210                   _("Failed to start HTTPS server for `%s'\n"),
2211                   s5r->domain);
2212       cleanup_s5r (s5r);
2213       return;
2214     }
2215     break;
2216   case HTTP_PORT:
2217   default:
2218     GNUNET_assert (NULL != httpd);
2219     hd = httpd;
2220     break;
2221   }
2222   fd = GNUNET_NETWORK_get_fd (s5r->sock);
2223   addr = GNUNET_NETWORK_get_addr (s5r->sock);
2224   len = GNUNET_NETWORK_get_addrlen (s5r->sock);
2225   s5r->state = SOCKS5_SOCKET_WITH_MHD;
2226   if (MHD_YES != MHD_add_connection (hd->daemon, fd, addr, len))
2227   {
2228     GNUNET_log (GNUNET_ERROR_TYPE_WARNING,
2229                 _("Failed to pass client to MHD\n"));
2230     cleanup_s5r (s5r);
2231     return;
2232   }
2233   s5r->hd = hd;
2234   schedule_httpd (hd);
2235   s5r->timeout_task = GNUNET_SCHEDULER_add_delayed (HTTP_HANDSHAKE_TIMEOUT,
2236                                                     &timeout_s5r_handshake,
2237                                                     s5r);
2238 }
2239
2240
2241 /* ********************* SOCKS handling ************************* */
2242
2243
2244 /**
2245  * Write data from buffer to socks5 client, then continue with state machine.
2246  *
2247  * @param cls the closure with the `struct Socks5Request`
2248  * @param tc scheduler context
2249  */
2250 static void
2251 do_write (void *cls,
2252           const struct GNUNET_SCHEDULER_TaskContext *tc)
2253 {
2254   struct Socks5Request *s5r = cls;
2255   ssize_t len;
2256
2257   s5r->wtask = NULL;
2258   len = GNUNET_NETWORK_socket_send (s5r->sock,
2259                                     s5r->wbuf,
2260                                     s5r->wbuf_len);
2261   if (len <= 0)
2262   {
2263     /* write error: connection closed, shutdown, etc.; just clean up */
2264     cleanup_s5r (s5r);
2265     return;
2266   }
2267   memmove (s5r->wbuf,
2268            &s5r->wbuf[len],
2269            s5r->wbuf_len - len);
2270   s5r->wbuf_len -= len;
2271   if (s5r->wbuf_len > 0)
2272   {
2273     /* not done writing */
2274     s5r->wtask =
2275       GNUNET_SCHEDULER_add_write_net (GNUNET_TIME_UNIT_FOREVER_REL,
2276                                       s5r->sock,
2277                                       &do_write, s5r);
2278     return;
2279   }
2280
2281   /* we're done writing, continue with state machine! */
2282
2283   switch (s5r->state)
2284   {
2285   case SOCKS5_INIT:
2286     GNUNET_assert (0);
2287     break;
2288   case SOCKS5_REQUEST:
2289     GNUNET_assert (NULL != s5r->rtask);
2290     break;
2291   case SOCKS5_DATA_TRANSFER:
2292     setup_data_transfer (s5r);
2293     return;
2294   case SOCKS5_WRITE_THEN_CLEANUP:
2295     cleanup_s5r (s5r);
2296     return;
2297   default:
2298     GNUNET_break (0);
2299     break;
2300   }
2301 }
2302
2303
2304 /**
2305  * Return a server response message indicating a failure to the client.
2306  *
2307  * @param s5r request to return failure code for
2308  * @param sc status code to return
2309  */
2310 static void
2311 signal_socks_failure (struct Socks5Request *s5r,
2312                       enum Socks5StatusCode sc)
2313 {
2314   struct Socks5ServerResponseMessage *s_resp;
2315
2316   s_resp = (struct Socks5ServerResponseMessage *) &s5r->wbuf[s5r->wbuf_len];
2317   memset (s_resp, 0, sizeof (struct Socks5ServerResponseMessage));
2318   s_resp->version = SOCKS_VERSION_5;
2319   s_resp->reply = sc;
2320   s5r->state = SOCKS5_WRITE_THEN_CLEANUP;
2321   if (NULL != s5r->wtask)
2322     s5r->wtask =
2323       GNUNET_SCHEDULER_add_write_net (GNUNET_TIME_UNIT_FOREVER_REL,
2324                                       s5r->sock,
2325                                       &do_write, s5r);
2326 }
2327
2328
2329 /**
2330  * Return a server response message indicating success.
2331  *
2332  * @param s5r request to return success status message for
2333  */
2334 static void
2335 signal_socks_success (struct Socks5Request *s5r)
2336 {
2337   struct Socks5ServerResponseMessage *s_resp;
2338
2339   s_resp = (struct Socks5ServerResponseMessage *) &s5r->wbuf[s5r->wbuf_len];
2340   s_resp->version = SOCKS_VERSION_5;
2341   s_resp->reply = SOCKS5_STATUS_REQUEST_GRANTED;
2342   s_resp->reserved = 0;
2343   s_resp->addr_type = SOCKS5_AT_IPV4;
2344   /* zero out IPv4 address and port */
2345   memset (&s_resp[1],
2346           0,
2347           sizeof (struct in_addr) + sizeof (uint16_t));
2348   s5r->wbuf_len += sizeof (struct Socks5ServerResponseMessage) +
2349     sizeof (struct in_addr) + sizeof (uint16_t);
2350   if (NULL == s5r->wtask)
2351     s5r->wtask =
2352       GNUNET_SCHEDULER_add_write_net (GNUNET_TIME_UNIT_FOREVER_REL,
2353                                       s5r->sock,
2354                                       &do_write, s5r);
2355 }
2356
2357
2358 /**
2359  * Process GNS results for target domain.
2360  *
2361  * @param cls the `struct Socks5Request *`
2362  * @param rd_count number of records returned
2363  * @param rd record data
2364  */
2365 static void
2366 handle_gns_result (void *cls,
2367                    uint32_t rd_count,
2368                    const struct GNUNET_GNSRECORD_Data *rd)
2369 {
2370   struct Socks5Request *s5r = cls;
2371   uint32_t i;
2372   const struct GNUNET_GNSRECORD_Data *r;
2373   int got_ip;
2374
2375   s5r->gns_lookup = NULL;
2376   got_ip = GNUNET_NO;
2377   for (i=0;i<rd_count;i++)
2378   {
2379     r = &rd[i];
2380     switch (r->record_type)
2381     {
2382     case GNUNET_DNSPARSER_TYPE_A:
2383       {
2384         struct sockaddr_in *in;
2385
2386         if (sizeof (struct in_addr) != r->data_size)
2387         {
2388           GNUNET_break_op (0);
2389           break;
2390         }
2391         if (GNUNET_YES == got_ip)
2392           break;
2393         if (GNUNET_OK !=
2394             GNUNET_NETWORK_test_pf (PF_INET))
2395           break;
2396         got_ip = GNUNET_YES;
2397         in = (struct sockaddr_in *) &s5r->destination_address;
2398         in->sin_family = AF_INET;
2399         memcpy (&in->sin_addr,
2400                 r->data,
2401                 r->data_size);
2402         in->sin_port = htons (s5r->port);
2403 #if HAVE_SOCKADDR_IN_SIN_LEN
2404         in->sin_len = sizeof (*in);
2405 #endif
2406       }
2407       break;
2408     case GNUNET_DNSPARSER_TYPE_AAAA:
2409       {
2410         struct sockaddr_in6 *in;
2411
2412         if (sizeof (struct in6_addr) != r->data_size)
2413         {
2414           GNUNET_break_op (0);
2415           break;
2416         }
2417         if (GNUNET_YES == got_ip)
2418           break;
2419         if (GNUNET_OK !=
2420             GNUNET_NETWORK_test_pf (PF_INET))
2421           break;
2422         /* FIXME: allow user to disable IPv6 per configuration option... */
2423         got_ip = GNUNET_YES;
2424         in = (struct sockaddr_in6 *) &s5r->destination_address;
2425         in->sin6_family = AF_INET6;
2426         memcpy (&in->sin6_addr,
2427                 r->data,
2428                 r->data_size);
2429         in->sin6_port = htons (s5r->port);
2430 #if HAVE_SOCKADDR_IN_SIN_LEN
2431         in->sin6_len = sizeof (*in);
2432 #endif
2433       }
2434       break;
2435     case GNUNET_GNSRECORD_TYPE_VPN:
2436       GNUNET_break (0); /* should have been translated within GNS */
2437       break;
2438     case GNUNET_GNSRECORD_TYPE_LEHO:
2439       GNUNET_free_non_null (s5r->leho);
2440       s5r->leho = GNUNET_strndup (r->data,
2441                                   r->data_size);
2442       break;
2443     case GNUNET_GNSRECORD_TYPE_BOX:
2444       {
2445         const struct GNUNET_GNSRECORD_BoxRecord *box;
2446
2447         if (r->data_size < sizeof (struct GNUNET_GNSRECORD_BoxRecord))
2448         {
2449           GNUNET_break_op (0);
2450           break;
2451         }
2452         box = r->data;
2453         if ( (ntohl (box->record_type) != GNUNET_DNSPARSER_TYPE_TLSA) ||
2454              (ntohs (box->protocol) != IPPROTO_TCP) ||
2455              (ntohs (box->service) != s5r->port) )
2456           break; /* BOX record does not apply */
2457         GNUNET_free_non_null (s5r->dane_data);
2458         s5r->dane_data_len = r->data_size - sizeof (struct GNUNET_GNSRECORD_BoxRecord);
2459         s5r->dane_data = GNUNET_malloc (s5r->dane_data_len);
2460         memcpy (s5r->dane_data,
2461                 &box[1],
2462                 s5r->dane_data_len);
2463         break;
2464       }
2465     default:
2466       /* don't care */
2467       break;
2468     }
2469   }
2470   if (GNUNET_YES != got_ip)
2471   {
2472     GNUNET_log (GNUNET_ERROR_TYPE_DEBUG,
2473                 "Name resolution failed to yield useful IP address.\n");
2474     signal_socks_failure (s5r,
2475                           SOCKS5_STATUS_GENERAL_FAILURE);
2476     return;
2477   }
2478   s5r->state = SOCKS5_DATA_TRANSFER;
2479   signal_socks_success (s5r);
2480 }
2481
2482
2483 /**
2484  * Remove the first @a len bytes from the beginning of the read buffer.
2485  *
2486  * @param s5r the handle clear the read buffer for
2487  * @param len number of bytes in read buffer to advance
2488  */
2489 static void
2490 clear_from_s5r_rbuf (struct Socks5Request *s5r,
2491                      size_t len)
2492 {
2493   GNUNET_assert (len <= s5r->rbuf_len);
2494   memmove (s5r->rbuf,
2495            &s5r->rbuf[len],
2496            s5r->rbuf_len - len);
2497   s5r->rbuf_len -= len;
2498 }
2499
2500
2501 /**
2502  * Read data from incoming Socks5 connection
2503  *
2504  * @param cls the closure with the `struct Socks5Request`
2505  * @param tc the scheduler context
2506  */
2507 static void
2508 do_s5r_read (void *cls,
2509              const struct GNUNET_SCHEDULER_TaskContext *tc)
2510 {
2511   struct Socks5Request *s5r = cls;
2512   const struct Socks5ClientHelloMessage *c_hello;
2513   struct Socks5ServerHelloMessage *s_hello;
2514   const struct Socks5ClientRequestMessage *c_req;
2515   ssize_t rlen;
2516   size_t alen;
2517
2518   s5r->rtask = NULL;
2519   if ( (NULL != tc->read_ready) &&
2520        (GNUNET_NETWORK_fdset_isset (tc->read_ready, s5r->sock)) )
2521   {
2522     rlen = GNUNET_NETWORK_socket_recv (s5r->sock,
2523                                        &s5r->rbuf[s5r->rbuf_len],
2524                                        sizeof (s5r->rbuf) - s5r->rbuf_len);
2525     if (rlen <= 0)
2526     {
2527       GNUNET_log (GNUNET_ERROR_TYPE_DEBUG,
2528                   "socks5 client disconnected.\n");
2529       cleanup_s5r (s5r);
2530       return;
2531     }
2532     s5r->rbuf_len += rlen;
2533   }
2534   s5r->rtask = GNUNET_SCHEDULER_add_read_net (GNUNET_TIME_UNIT_FOREVER_REL,
2535                                               s5r->sock,
2536                                               &do_s5r_read, s5r);
2537   GNUNET_log (GNUNET_ERROR_TYPE_DEBUG,
2538               "Processing %u bytes of socks data in state %d\n",
2539               s5r->rbuf_len,
2540               s5r->state);
2541   switch (s5r->state)
2542   {
2543   case SOCKS5_INIT:
2544     c_hello = (const struct Socks5ClientHelloMessage*) &s5r->rbuf;
2545     if ( (s5r->rbuf_len < sizeof (struct Socks5ClientHelloMessage)) ||
2546          (s5r->rbuf_len < sizeof (struct Socks5ClientHelloMessage) + c_hello->num_auth_methods) )
2547       return; /* need more data */
2548     if (SOCKS_VERSION_5 != c_hello->version)
2549     {
2550       GNUNET_log (GNUNET_ERROR_TYPE_ERROR,
2551                   _("Unsupported socks version %d\n"),
2552                   (int) c_hello->version);
2553       cleanup_s5r (s5r);
2554       return;
2555     }
2556     clear_from_s5r_rbuf (s5r,
2557                          sizeof (struct Socks5ClientHelloMessage) + c_hello->num_auth_methods);
2558     GNUNET_assert (0 == s5r->wbuf_len);
2559     s_hello = (struct Socks5ServerHelloMessage *) &s5r->wbuf;
2560     s5r->wbuf_len = sizeof (struct Socks5ServerHelloMessage);
2561     s_hello->version = SOCKS_VERSION_5;
2562     s_hello->auth_method = SOCKS_AUTH_NONE;
2563     GNUNET_assert (NULL == s5r->wtask);
2564     s5r->wtask = GNUNET_SCHEDULER_add_write_net (GNUNET_TIME_UNIT_FOREVER_REL,
2565                                                  s5r->sock,
2566                                                  &do_write, s5r);
2567     s5r->state = SOCKS5_REQUEST;
2568     return;
2569   case SOCKS5_REQUEST:
2570     c_req = (const struct Socks5ClientRequestMessage *) &s5r->rbuf;
2571     if (s5r->rbuf_len < sizeof (struct Socks5ClientRequestMessage))
2572       return;
2573     switch (c_req->command)
2574     {
2575     case SOCKS5_CMD_TCP_STREAM:
2576       /* handled below */
2577       break;
2578     default:
2579       GNUNET_log (GNUNET_ERROR_TYPE_ERROR,
2580                   _("Unsupported socks command %d\n"),
2581                   (int) c_req->command);
2582       signal_socks_failure (s5r,
2583                             SOCKS5_STATUS_COMMAND_NOT_SUPPORTED);
2584       return;
2585     }
2586     switch (c_req->addr_type)
2587     {
2588     case SOCKS5_AT_IPV4:
2589       {
2590         const struct in_addr *v4 = (const struct in_addr *) &c_req[1];
2591         const uint16_t *port = (const uint16_t *) &v4[1];
2592         struct sockaddr_in *in;
2593
2594         s5r->port = ntohs (*port);
2595         if (HTTPS_PORT == s5r->port)
2596         {
2597           GNUNET_log (GNUNET_ERROR_TYPE_ERROR,
2598                       _("SSL connection to plain IPv4 address requested\n"));
2599           signal_socks_failure (s5r,
2600                                 SOCKS5_STATUS_CONNECTION_NOT_ALLOWED_BY_RULE);
2601           return;
2602         }
2603         alen = sizeof (struct in_addr);
2604         if (s5r->rbuf_len < sizeof (struct Socks5ClientRequestMessage) +
2605             alen + sizeof (uint16_t))
2606           return; /* need more data */
2607         in = (struct sockaddr_in *) &s5r->destination_address;
2608         in->sin_family = AF_INET;
2609         in->sin_addr = *v4;
2610         in->sin_port = *port;
2611 #if HAVE_SOCKADDR_IN_SIN_LEN
2612         in->sin_len = sizeof (*in);
2613 #endif
2614         s5r->state = SOCKS5_DATA_TRANSFER;
2615       }
2616       break;
2617     case SOCKS5_AT_IPV6:
2618       {
2619         const struct in6_addr *v6 = (const struct in6_addr *) &c_req[1];
2620         const uint16_t *port = (const uint16_t *) &v6[1];
2621         struct sockaddr_in6 *in;
2622
2623         s5r->port = ntohs (*port);
2624         if (HTTPS_PORT == s5r->port)
2625         {
2626           GNUNET_log (GNUNET_ERROR_TYPE_ERROR,
2627                       _("SSL connection to plain IPv4 address requested\n"));
2628           signal_socks_failure (s5r,
2629                                 SOCKS5_STATUS_CONNECTION_NOT_ALLOWED_BY_RULE);
2630           return;
2631         }
2632         alen = sizeof (struct in6_addr);
2633         if (s5r->rbuf_len < sizeof (struct Socks5ClientRequestMessage) +
2634             alen + sizeof (uint16_t))
2635           return; /* need more data */
2636         in = (struct sockaddr_in6 *) &s5r->destination_address;
2637         in->sin6_family = AF_INET6;
2638         in->sin6_addr = *v6;
2639         in->sin6_port = *port;
2640 #if HAVE_SOCKADDR_IN_SIN_LEN
2641         in->sin6_len = sizeof (*in);
2642 #endif
2643         s5r->state = SOCKS5_DATA_TRANSFER;
2644       }
2645       break;
2646     case SOCKS5_AT_DOMAINNAME:
2647       {
2648         const uint8_t *dom_len;
2649         const char *dom_name;
2650         const uint16_t *port;
2651
2652         dom_len = (const uint8_t *) &c_req[1];
2653         alen = *dom_len + 1;
2654         if (s5r->rbuf_len < sizeof (struct Socks5ClientRequestMessage) +
2655             alen + sizeof (uint16_t))
2656           return; /* need more data */
2657         dom_name = (const char *) &dom_len[1];
2658         port = (const uint16_t*) &dom_name[*dom_len];
2659         s5r->domain = GNUNET_strndup (dom_name, *dom_len);
2660         GNUNET_log (GNUNET_ERROR_TYPE_DEBUG,
2661                     "Requested connection is to %s:%d\n",
2662                     s5r->domain,
2663                     ntohs (*port));
2664         s5r->state = SOCKS5_RESOLVING;
2665         s5r->port = ntohs (*port);
2666         s5r->gns_lookup = GNUNET_GNS_lookup (gns_handle,
2667                                              s5r->domain,
2668                                              &local_gns_zone,
2669                                              GNUNET_DNSPARSER_TYPE_A,
2670                                              GNUNET_NO /* only cached */,
2671                                              (GNUNET_YES == do_shorten) ? &local_shorten_zone : NULL,
2672                                              &handle_gns_result,
2673                                              s5r);
2674         break;
2675       }
2676     default:
2677       GNUNET_log (GNUNET_ERROR_TYPE_ERROR,
2678                   _("Unsupported socks address type %d\n"),
2679                   (int) c_req->addr_type);
2680       signal_socks_failure (s5r,
2681                             SOCKS5_STATUS_ADDRESS_TYPE_NOT_SUPPORTED);
2682       return;
2683     }
2684     clear_from_s5r_rbuf (s5r,
2685                          sizeof (struct Socks5ClientRequestMessage) +
2686                          alen + sizeof (uint16_t));
2687     if (0 != s5r->rbuf_len)
2688     {
2689       /* read more bytes than healthy, why did the client send more!? */
2690       GNUNET_break_op (0);
2691       signal_socks_failure (s5r,
2692                             SOCKS5_STATUS_GENERAL_FAILURE);
2693       return;
2694     }
2695     if (SOCKS5_DATA_TRANSFER == s5r->state)
2696     {
2697       /* if we are not waiting for GNS resolution, signal success */
2698       signal_socks_success (s5r);
2699     }
2700     /* We are done reading right now */
2701     GNUNET_SCHEDULER_cancel (s5r->rtask);
2702     s5r->rtask = NULL;
2703     return;
2704   case SOCKS5_RESOLVING:
2705     GNUNET_assert (0);
2706     return;
2707   case SOCKS5_DATA_TRANSFER:
2708     GNUNET_assert (0);
2709     return;
2710   default:
2711     GNUNET_assert (0);
2712     return;
2713   }
2714 }
2715
2716
2717 /**
2718  * Accept new incoming connections
2719  *
2720  * @param cls the closure with the lsock4 or lsock6
2721  * @param tc the scheduler context
2722  */
2723 static void
2724 do_accept (void *cls,
2725            const struct GNUNET_SCHEDULER_TaskContext *tc)
2726 {
2727   struct GNUNET_NETWORK_Handle *lsock = cls;
2728   struct GNUNET_NETWORK_Handle *s;
2729   struct Socks5Request *s5r;
2730
2731   if (lsock == lsock4)
2732     ltask4 = NULL;
2733   else
2734     ltask6 = NULL;
2735   if (0 != (tc->reason & GNUNET_SCHEDULER_REASON_SHUTDOWN))
2736     return;
2737   if (lsock == lsock4)
2738     ltask4 = GNUNET_SCHEDULER_add_read_net (GNUNET_TIME_UNIT_FOREVER_REL,
2739                                             lsock,
2740                                             &do_accept, lsock);
2741   else
2742     ltask6 = GNUNET_SCHEDULER_add_read_net (GNUNET_TIME_UNIT_FOREVER_REL,
2743                                             lsock,
2744                                             &do_accept, lsock);
2745   s = GNUNET_NETWORK_socket_accept (lsock, NULL, NULL);
2746   if (NULL == s)
2747   {
2748     GNUNET_log_strerror (GNUNET_ERROR_TYPE_ERROR, "accept");
2749     return;
2750   }
2751   GNUNET_log (GNUNET_ERROR_TYPE_DEBUG,
2752               "Got an inbound connection, waiting for data\n");
2753   s5r = GNUNET_new (struct Socks5Request);
2754   GNUNET_CONTAINER_DLL_insert (s5r_head,
2755                                s5r_tail,
2756                                s5r);
2757   s5r->sock = s;
2758   s5r->state = SOCKS5_INIT;
2759   s5r->rtask = GNUNET_SCHEDULER_add_read_net (GNUNET_TIME_UNIT_FOREVER_REL,
2760                                               s5r->sock,
2761                                               &do_s5r_read, s5r);
2762 }
2763
2764
2765 /* ******************* General / main code ********************* */
2766
2767
2768 /**
2769  * Task run on shutdown
2770  *
2771  * @param cls closure
2772  * @param tc task context
2773  */
2774 static void
2775 do_shutdown (void *cls,
2776              const struct GNUNET_SCHEDULER_TaskContext *tc)
2777 {
2778   GNUNET_log (GNUNET_ERROR_TYPE_INFO,
2779               "Shutting down...\n");
2780   while (NULL != mhd_httpd_head)
2781     kill_httpd (mhd_httpd_head);
2782   while (NULL != s5r_head)
2783     cleanup_s5r (s5r_head);
2784   if (NULL != lsock4)
2785   {
2786     GNUNET_NETWORK_socket_close (lsock4);
2787     lsock4 = NULL;
2788   }
2789   if (NULL != lsock6)
2790   {
2791     GNUNET_NETWORK_socket_close (lsock6);
2792     lsock6 = NULL;
2793   }
2794   if (NULL != id_op)
2795   {
2796     GNUNET_IDENTITY_cancel (id_op);
2797     id_op = NULL;
2798   }
2799   if (NULL != identity)
2800   {
2801     GNUNET_IDENTITY_disconnect (identity);
2802     identity = NULL;
2803   }
2804   if (NULL != curl_multi)
2805   {
2806     curl_multi_cleanup (curl_multi);
2807     curl_multi = NULL;
2808   }
2809   if (NULL != gns_handle)
2810   {
2811     GNUNET_GNS_disconnect (gns_handle);
2812     gns_handle = NULL;
2813   }
2814   if (NULL != curl_download_task)
2815   {
2816     GNUNET_SCHEDULER_cancel (curl_download_task);
2817     curl_download_task = NULL;
2818   }
2819   if (NULL != ltask4)
2820   {
2821     GNUNET_SCHEDULER_cancel (ltask4);
2822     ltask4 = NULL;
2823   }
2824   if (NULL != ltask6)
2825   {
2826     GNUNET_SCHEDULER_cancel (ltask6);
2827     ltask6 = NULL;
2828   }
2829   gnutls_x509_crt_deinit (proxy_ca.cert);
2830   gnutls_x509_privkey_deinit (proxy_ca.key);
2831   gnutls_global_deinit ();
2832 }
2833
2834
2835 /**
2836  * Create an IPv4 listen socket bound to our port.
2837  *
2838  * @return NULL on error
2839  */
2840 static struct GNUNET_NETWORK_Handle *
2841 bind_v4 ()
2842 {
2843   struct GNUNET_NETWORK_Handle *ls;
2844   struct sockaddr_in sa4;
2845   int eno;
2846
2847   memset (&sa4, 0, sizeof (sa4));
2848   sa4.sin_family = AF_INET;
2849   sa4.sin_port = htons (port);
2850 #if HAVE_SOCKADDR_IN_SIN_LEN
2851   sa4.sin_len = sizeof (sa4);
2852 #endif
2853   ls = GNUNET_NETWORK_socket_create (AF_INET,
2854                                      SOCK_STREAM,
2855                                      0);
2856   if (NULL == ls)
2857     return NULL;
2858   if (GNUNET_OK !=
2859       GNUNET_NETWORK_socket_bind (ls, (const struct sockaddr *) &sa4,
2860                                   sizeof (sa4)))
2861   {
2862     eno = errno;
2863     GNUNET_NETWORK_socket_close (ls);
2864     errno = eno;
2865     return NULL;
2866   }
2867   return ls;
2868 }
2869
2870
2871 /**
2872  * Create an IPv6 listen socket bound to our port.
2873  *
2874  * @return NULL on error
2875  */
2876 static struct GNUNET_NETWORK_Handle *
2877 bind_v6 ()
2878 {
2879   struct GNUNET_NETWORK_Handle *ls;
2880   struct sockaddr_in6 sa6;
2881   int eno;
2882
2883   memset (&sa6, 0, sizeof (sa6));
2884   sa6.sin6_family = AF_INET6;
2885   sa6.sin6_port = htons (port);
2886 #if HAVE_SOCKADDR_IN_SIN_LEN
2887   sa6.sin6_len = sizeof (sa6);
2888 #endif
2889   ls = GNUNET_NETWORK_socket_create (AF_INET6,
2890                                      SOCK_STREAM,
2891                                      0);
2892   if (NULL == ls)
2893     return NULL;
2894   if (GNUNET_OK !=
2895       GNUNET_NETWORK_socket_bind (ls, (const struct sockaddr *) &sa6,
2896                                   sizeof (sa6)))
2897   {
2898     eno = errno;
2899     GNUNET_NETWORK_socket_close (ls);
2900     errno = eno;
2901     return NULL;
2902   }
2903   return ls;
2904 }
2905
2906
2907 /**
2908  * Continue initialization after we have our zone information.
2909  */
2910 static void
2911 run_cont ()
2912 {
2913   struct MhdHttpList *hd;
2914
2915   /* Open listen socket for socks proxy */
2916   lsock6 = bind_v6 ();
2917   if (NULL == lsock6)
2918     GNUNET_log_strerror (GNUNET_ERROR_TYPE_ERROR, "bind");
2919   else
2920   {
2921     if (GNUNET_OK != GNUNET_NETWORK_socket_listen (lsock6, 5))
2922     {
2923       GNUNET_log_strerror (GNUNET_ERROR_TYPE_ERROR, "listen");
2924       GNUNET_NETWORK_socket_close (lsock6);
2925       lsock6 = NULL;
2926     }
2927     else
2928     {
2929       ltask6 = GNUNET_SCHEDULER_add_read_net (GNUNET_TIME_UNIT_FOREVER_REL,
2930                                               lsock6, &do_accept, lsock6);
2931     }
2932   }
2933   lsock4 = bind_v4 ();
2934   if (NULL == lsock4)
2935     GNUNET_log_strerror (GNUNET_ERROR_TYPE_ERROR, "bind");
2936   else
2937   {
2938     if (GNUNET_OK != GNUNET_NETWORK_socket_listen (lsock4, 5))
2939     {
2940       GNUNET_log_strerror (GNUNET_ERROR_TYPE_ERROR, "listen");
2941       GNUNET_NETWORK_socket_close (lsock4);
2942       lsock4 = NULL;
2943     }
2944     else
2945     {
2946       ltask4 = GNUNET_SCHEDULER_add_read_net (GNUNET_TIME_UNIT_FOREVER_REL,
2947                                               lsock4, &do_accept, lsock4);
2948     }
2949   }
2950   if ( (NULL == lsock4) &&
2951        (NULL == lsock6) )
2952   {
2953     GNUNET_SCHEDULER_shutdown ();
2954     return;
2955   }
2956   if (0 != curl_global_init (CURL_GLOBAL_WIN32))
2957   {
2958     GNUNET_log (GNUNET_ERROR_TYPE_ERROR,
2959                 "cURL global init failed!\n");
2960     GNUNET_SCHEDULER_shutdown ();
2961     return;
2962   }
2963   GNUNET_log (GNUNET_ERROR_TYPE_DEBUG,
2964               "Proxy listens on port %u\n",
2965               port);
2966
2967   /* start MHD daemon for HTTP */
2968   hd = GNUNET_new (struct MhdHttpList);
2969   hd->daemon = MHD_start_daemon (MHD_USE_DEBUG | MHD_USE_NO_LISTEN_SOCKET,
2970                                  0,
2971                                  NULL, NULL,
2972                                  &create_response, hd,
2973                                  MHD_OPTION_CONNECTION_TIMEOUT, (unsigned int) 16,
2974                                  MHD_OPTION_NOTIFY_COMPLETED, &mhd_completed_cb, NULL,
2975                                  MHD_OPTION_URI_LOG_CALLBACK, &mhd_log_callback, NULL,
2976                                  MHD_OPTION_END);
2977   if (NULL == hd->daemon)
2978   {
2979     GNUNET_free (hd);
2980     GNUNET_SCHEDULER_shutdown ();
2981     return;
2982   }
2983   httpd = hd;
2984   GNUNET_CONTAINER_DLL_insert (mhd_httpd_head, mhd_httpd_tail, hd);
2985 }
2986
2987
2988 /**
2989  * Method called to inform about the egos of the shorten zone of this peer.
2990  *
2991  * When used with #GNUNET_IDENTITY_create or #GNUNET_IDENTITY_get,
2992  * this function is only called ONCE, and 'NULL' being passed in
2993  * @a ego does indicate an error (i.e. name is taken or no default
2994  * value is known).  If @a ego is non-NULL and if '*ctx'
2995  * is set in those callbacks, the value WILL be passed to a subsequent
2996  * call to the identity callback of #GNUNET_IDENTITY_connect (if
2997  * that one was not NULL).
2998  *
2999  * @param cls closure, NULL
3000  * @param ego ego handle
3001  * @param ctx context for application to store data for this ego
3002  *                 (during the lifetime of this process, initially NULL)
3003  * @param name name assigned by the user for this ego,
3004  *                   NULL if the user just deleted the ego and it
3005  *                   must thus no longer be used
3006  */
3007 static void
3008 identity_shorten_cb (void *cls,
3009                      struct GNUNET_IDENTITY_Ego *ego,
3010                      void **ctx,
3011                      const char *name)
3012 {
3013   id_op = NULL;
3014   if (NULL == ego)
3015   {
3016     GNUNET_log (GNUNET_ERROR_TYPE_WARNING,
3017                 _("No ego configured for `shorten-zone`\n"));
3018   }
3019   else
3020   {
3021     local_shorten_zone = *GNUNET_IDENTITY_ego_get_private_key (ego);
3022     do_shorten = GNUNET_YES;
3023   }
3024   run_cont ();
3025 }
3026
3027
3028 /**
3029  * Method called to inform about the egos of the master zone of this peer.
3030  *
3031  * When used with #GNUNET_IDENTITY_create or #GNUNET_IDENTITY_get,
3032  * this function is only called ONCE, and 'NULL' being passed in
3033  * @a ego does indicate an error (i.e. name is taken or no default
3034  * value is known).  If @a ego is non-NULL and if '*ctx'
3035  * is set in those callbacks, the value WILL be passed to a subsequent
3036  * call to the identity callback of #GNUNET_IDENTITY_connect (if
3037  * that one was not NULL).
3038  *
3039  * @param cls closure, NULL
3040  * @param ego ego handle
3041  * @param ctx context for application to store data for this ego
3042  *                 (during the lifetime of this process, initially NULL)
3043  * @param name name assigned by the user for this ego,
3044  *                   NULL if the user just deleted the ego and it
3045  *                   must thus no longer be used
3046  */
3047 static void
3048 identity_master_cb (void *cls,
3049                     struct GNUNET_IDENTITY_Ego *ego,
3050                     void **ctx,
3051                     const char *name)
3052 {
3053   id_op = NULL;
3054   if (NULL == ego)
3055   {
3056     GNUNET_log (GNUNET_ERROR_TYPE_ERROR,
3057                 _("No ego configured for `%s`\n"),
3058                 "gns-proxy");
3059     GNUNET_SCHEDULER_shutdown ();
3060     return;
3061   }
3062   GNUNET_IDENTITY_ego_get_public_key (ego,
3063                                       &local_gns_zone);
3064   id_op = GNUNET_IDENTITY_get (identity,
3065                                "gns-short",
3066                                &identity_shorten_cb,
3067                                NULL);
3068 }
3069
3070
3071 /**
3072  * Main function that will be run
3073  *
3074  * @param cls closure
3075  * @param args remaining command-line arguments
3076  * @param cfgfile name of the configuration file used (for saving, can be NULL!)
3077  * @param c configuration
3078  */
3079 static void
3080 run (void *cls, char *const *args, const char *cfgfile,
3081      const struct GNUNET_CONFIGURATION_Handle *c)
3082 {
3083   char* cafile_cfg = NULL;
3084   char* cafile;
3085
3086   cfg = c;
3087
3088   if (NULL == (curl_multi = curl_multi_init ()))
3089   {
3090     GNUNET_log (GNUNET_ERROR_TYPE_ERROR,
3091                 "Failed to create cURL multi handle!\n");
3092     return;
3093   }
3094   cafile = cafile_opt;
3095   if (NULL == cafile)
3096   {
3097     if (GNUNET_OK != GNUNET_CONFIGURATION_get_value_filename (cfg, "gns-proxy",
3098                                                               "PROXY_CACERT",
3099                                                               &cafile_cfg))
3100     {
3101       GNUNET_log_config_missing (GNUNET_ERROR_TYPE_ERROR,
3102                                  "gns-proxy",
3103                                  "PROXY_CACERT");
3104       return;
3105     }
3106     cafile = cafile_cfg;
3107   }
3108   GNUNET_log (GNUNET_ERROR_TYPE_DEBUG,
3109               "Using %s as CA\n", cafile);
3110
3111   gnutls_global_init ();
3112   gnutls_x509_crt_init (&proxy_ca.cert);
3113   gnutls_x509_privkey_init (&proxy_ca.key);
3114
3115   if ( (GNUNET_OK != load_cert_from_file (proxy_ca.cert, cafile)) ||
3116        (GNUNET_OK != load_key_from_file (proxy_ca.key, cafile)) )
3117   {
3118     GNUNET_log (GNUNET_ERROR_TYPE_ERROR,
3119                 _("Failed to load SSL/TLS key and certificate from `%s'\n"),
3120                 cafile);
3121     gnutls_x509_crt_deinit (proxy_ca.cert);
3122     gnutls_x509_privkey_deinit (proxy_ca.key);
3123     gnutls_global_deinit ();
3124     GNUNET_free_non_null (cafile_cfg);
3125     return;
3126   }
3127   GNUNET_free_non_null (cafile_cfg);
3128   if (NULL == (gns_handle = GNUNET_GNS_connect (cfg)))
3129   {
3130     GNUNET_log (GNUNET_ERROR_TYPE_ERROR,
3131                 "Unable to connect to GNS!\n");
3132     gnutls_x509_crt_deinit (proxy_ca.cert);
3133     gnutls_x509_privkey_deinit (proxy_ca.key);
3134     gnutls_global_deinit ();
3135     return;
3136   }
3137   identity = GNUNET_IDENTITY_connect (cfg,
3138                                       NULL, NULL);
3139   id_op = GNUNET_IDENTITY_get (identity,
3140                                "gns-proxy",
3141                                &identity_master_cb,
3142                                NULL);
3143   GNUNET_SCHEDULER_add_delayed (GNUNET_TIME_UNIT_FOREVER_REL,
3144                                 &do_shutdown, NULL);
3145 }
3146
3147
3148 /**
3149  * The main function for gnunet-gns-proxy.
3150  *
3151  * @param argc number of arguments from the command line
3152  * @param argv command line arguments
3153  * @return 0 ok, 1 on error
3154  */
3155 int
3156 main (int argc, char *const *argv)
3157 {
3158   static const struct GNUNET_GETOPT_CommandLineOption options[] = {
3159     {'p', "port", NULL,
3160      gettext_noop ("listen on specified port (default: 7777)"), 1,
3161      &GNUNET_GETOPT_set_ulong, &port},
3162     {'a', "authority", NULL,
3163       gettext_noop ("pem file to use as CA"), 1,
3164       &GNUNET_GETOPT_set_string, &cafile_opt},
3165     GNUNET_GETOPT_OPTION_END
3166   };
3167   static const char* page =
3168     "<html><head><title>gnunet-gns-proxy</title>"
3169     "</head><body>cURL fail</body></html>";
3170   int ret;
3171
3172   if (GNUNET_OK != GNUNET_STRINGS_get_utf8_args (argc, argv, &argc, &argv))
3173     return 2;
3174   GNUNET_log_setup ("gnunet-gns-proxy", "WARNING", NULL);
3175   curl_failure_response = MHD_create_response_from_buffer (strlen (page),
3176                                                            (void*)page,
3177                                                            MHD_RESPMEM_PERSISTENT);
3178
3179   ret =
3180       (GNUNET_OK ==
3181        GNUNET_PROGRAM_run (argc, argv, "gnunet-gns-proxy",
3182                            _("GNUnet GNS proxy"),
3183                            options,
3184                            &run, NULL)) ? 0 : 1;
3185   MHD_destroy_response (curl_failure_response);
3186   GNUNET_free_non_null ((char *) argv);
3187   GNUNET_CRYPTO_ecdsa_key_clear (&local_shorten_zone);
3188   return ret;
3189 }
3190
3191 /* end of gnunet-gns-proxy.c */