src/transport/plugin_transport_http.c

   1 /*
   2      This file is part of GNUnet
   3      (C) 2002, 2003, 2004, 2005, 2006, 2007, 2008, 2009 Christian Grothoff (and other contributing authors)
   4
   5      GNUnet is free software; you can redistribute it and/or modify
   6      it under the terms of the GNU General Public License as published
   7      by the Free Software Foundation; either version 3, or (at your
   8      option) any later version.
   9
  10      GNUnet is distributed in the hope that it will be useful, but
  11      WITHOUT ANY WARRANTY; without even the implied warranty of
  12      MERCHANTABILITY or FITNESS FOR A PARTICULAR PURPOSE.  See the GNU
  13      General Public License for more details.
  14
  15      You should have received a copy of the GNU General Public License
  16      along with GNUnet; see the file COPYING.  If not, write to the
  17      Free Software Foundation, Inc., 59 Temple Place - Suite 330,
  18      Boston, MA 02111-1307, USA.
  19 */
  20
  21 /**
  22  * @file transport/plugin_transport_http.c
  23  * @brief http transport service plugin
  24  * @author Matthias Wachs
  25  */
  26
  27 #include "platform.h"
  28 #include "gnunet_constants.h"
  29 #include "gnunet_protocols.h"
  30 #include "gnunet_connection_lib.h"
  31 #include "gnunet_service_lib.h"
  32 #include "gnunet_statistics_service.h"
  33 #include "gnunet_transport_service.h"
  34 #include "gnunet_resolver_service.h"
  35 #include "gnunet_server_lib.h"
  36 #include "gnunet_container_lib.h"
  37 #include "plugin_transport.h"
  38 #include "gnunet_os_lib.h"
  39 #include "microhttpd.h"
  40 #include <curl/curl.h>
  41
  42
  43 #define DEBUG_CURL GNUNET_NO
  44 #define DEBUG_HTTP GNUNET_NO
  45 #define DEBUG_CONNECTIONS GNUNET_YES
  46
  47 #define INBOUND GNUNET_NO
  48 #define OUTBOUND GNUNET_YES
  49
  50 /**
  51  * Text of the response sent back after the last bytes of a PUT
  52  * request have been received (just to formally obey the HTTP
  53  * protocol).
  54  */
  55 #define HTTP_PUT_RESPONSE "Thank you!"
  56
  57 /**
  58  * After how long do we expire an address that we
  59  * learned from another peer if it is not reconfirmed
  60  * by anyone?
  61  */
  62 #define LEARNED_ADDRESS_EXPIRATION GNUNET_TIME_relative_multiply (GNUNET_TIME_UNIT_HOURS, 6)
  63
  64 /**
  65  * Page returned if request invalid
  66  */
  67 #define HTTP_ERROR_RESPONSE "<!DOCTYPE HTML PUBLIC \"-//IETF//DTD HTML 2.0//EN\"><HTML><HEAD><TITLE>404 Not Found</TITLE></HEAD><BODY><H1>Not Found</H1>The requested URL was not found on this server.<P><HR><ADDRESS></ADDRESS></BODY></HTML>"
  68
  69 /**
  70  * Timeout for a http connect
  71  */
  72 #define HTTP_CONNECT_TIMEOUT 30
  73
  74 /**
  75  * Network format for IPv4 addresses.
  76  */
  77 struct IPv4HttpAddress
  78 {
  79   /**
  80    * IPv4 address, in network byte order.
  81    */
  82   uint32_t ipv4_addr GNUNET_PACKED;
  83
  84   /**
  85    * Port number, in network byte order.
  86    */
  87   uint16_t u_port GNUNET_PACKED;
  88
  89 };
  90
  91
  92 /**
  93  * Network format for IPv6 addresses.
  94  */
  95 struct IPv6HttpAddress
  96 {
  97   /**
  98    * IPv6 address.
  99    */
 100   struct in6_addr ipv6_addr GNUNET_PACKED;
 101
 102   /**
 103    * Port number, in network byte order.
 104    */
 105   uint16_t u6_port GNUNET_PACKED;
 106
 107 };
 108
 109
 110 /**
 111  *  Message to send using http
 112  */
 113 struct HTTP_Message
 114 {
 115   /**
 116    * next pointer for double linked list
 117    */
 118   struct HTTP_Message * next;
 119
 120   /**
 121    * previous pointer for double linked list
 122    */
 123   struct HTTP_Message * prev;
 124
 125   /**
 126    * buffer containing data to send
 127    */
 128   char *buf;
 129
 130   /**
 131    * amount of data already sent
 132    */
 133   size_t pos;
 134
 135   /**
 136    * buffer length
 137    */
 138   size_t size;
 139
 140   /**
 141    * Continuation function to call once the transmission buffer
 142    * has again space available.  NULL if there is no
 143    * continuation to call.
 144    */
 145   GNUNET_TRANSPORT_TransmitContinuation transmit_cont;
 146
 147   /**
 148    * Closure for transmit_cont.
 149    */
 150   void *transmit_cont_cls;
 151 };
 152
 153
 154 struct HTTP_PeerContext
 155 {
 156   /**
 157    * peer's identity
 158    */
 159   struct GNUNET_PeerIdentity identity;
 160
 161   /**
 162    * Pointer to the global plugin struct.
 163    */
 164   struct Plugin *plugin;
 165
 166   /**
 167    * Linked list of connections with this peer
 168    * head
 169    */
 170   struct Session * head;
 171
 172   /**
 173    * Linked list of connections with this peer
 174    * tail
 175    */
 176   struct Session * tail;
 177
 178   /**
 179    * id for next session
 180    */
 181   size_t session_id_counter;
 182 };
 183
 184
 185 struct Session
 186 {
 187   /**
 188    * API requirement.
 189    */
 190   struct SessionHeader header;
 191
 192   /**
 193    * next session in linked list
 194    */
 195   struct Session * next;
 196
 197   /**
 198    * previous session in linked list
 199    */
 200   struct Session * prev;
 201
 202   /**
 203    * address of this session
 204    */
 205   void * addr;
 206
 207   /**
 208    * address length
 209    */
 210   size_t addrlen;
 211
 212   /**
 213    * target url
 214    */
 215   char * url;
 216
 217   /**
 218    * Message queue for outbound messages
 219    * head of queue
 220    */
 221   struct HTTP_Message * pending_msgs_head;
 222
 223   /**
 224    * Message queue for outbound messages
 225    * tail of queue
 226    */
 227   struct HTTP_Message * pending_msgs_tail;
 228
 229   /**
 230    * partner peer this connection belongs to
 231    */
 232   struct HTTP_PeerContext * peercontext;
 233
 234   /**
 235    * message stream tokenizer for incoming data
 236    */
 237   struct GNUNET_SERVER_MessageStreamTokenizer *msgtok;
 238
 239   /**
 240    * session direction
 241    * outbound: OUTBOUND (GNUNET_YES)
 242    * inbound : INBOUND (GNUNET_NO)
 243    */
 244   unsigned int direction;
 245
 246   /**
 247    * is session connected to send data?
 248    */
 249   unsigned int send_connected;
 250
 251   /**
 252    * is send connection active?
 253    */
 254   unsigned int send_active;
 255
 256   /**
 257    * connection disconnect forced (e.g. from transport)
 258    */
 259   unsigned int send_force_disconnect;
 260
 261   /**
 262    * is session connected to receive data?
 263    */
 264   unsigned int recv_connected;
 265
 266   /**
 267    * is receive connection active?
 268    */
 269   unsigned int recv_active;
 270
 271   /**
 272    * connection disconnect forced (e.g. from transport)
 273    */
 274   unsigned int recv_force_disconnect;
 275
 276   /**
 277    * id for next session
 278    * NOTE: 0 is not an ID, zero is not defined. A correct ID is always > 0
 279    */
 280   size_t session_id;
 281
 282   /**
 283    * entity managing sending data
 284    * outbound session: CURL *
 285    * inbound session: mhd_connection *
 286    */
 287   void * send_endpoint;
 288
 289   /**
 290    * entity managing recieving data
 291    * outbound session: CURL *
 292    * inbound session: mhd_connection *
 293    */
 294   void * recv_endpoint;
 295 };
 296
 297 /**
 298  * Encapsulation of all of the state of the plugin.
 299  */
 300 struct Plugin
 301 {
 302   /**
 303    * Our environment.
 304    */
 305   struct GNUNET_TRANSPORT_PluginEnvironment *env;
 306
 307   unsigned int port_inbound;
 308
 309   struct GNUNET_CONTAINER_MultiHashMap *peers;
 310
 311   /**
 312    * Daemon for listening for new IPv4 connections.
 313    */
 314   struct MHD_Daemon *http_server_daemon_v4;
 315
 316   /**
 317    * Daemon for listening for new IPv6connections.
 318    */
 319   struct MHD_Daemon *http_server_daemon_v6;
 320
 321   /**
 322    * Our primary task for http daemon handling IPv4 connections
 323    */
 324   GNUNET_SCHEDULER_TaskIdentifier http_server_task_v4;
 325
 326   /**
 327    * Our primary task for http daemon handling IPv6 connections
 328    */
 329   GNUNET_SCHEDULER_TaskIdentifier http_server_task_v6;
 330
 331   /**
 332    * The task sending data
 333    */
 334   GNUNET_SCHEDULER_TaskIdentifier http_curl_task;
 335
 336   /**
 337    * cURL Multihandle
 338    */
 339   CURLM * multi_handle;
 340
 341   /**
 342    * Our ASCII encoded, hashed peer identity
 343    * This string is used to distinguish between connections and is added to the urls
 344    */
 345   struct GNUNET_CRYPTO_HashAsciiEncoded my_ascii_hash_ident;
 346 };
 347
 348
 349 /**
 350  * Function called for a quick conversion of the binary address to
 351  * a numeric address.  Note that the caller must not free the
 352  * address and that the next call to this function is allowed
 353  * to override the address again.
 354  *
 355  * @param cls closure
 356  * @param addr binary address
 357  * @param addrlen length of the address
 358  * @return string representing the same address
 359  */
 360 static const char*
 361 http_plugin_address_to_string (void *cls,
 362                                    const void *addr,
 363                                    size_t addrlen);
 364
 365 static char * create_url(void * cls, const void * addr, size_t addrlen, size_t id)
 366 {
 367   struct Plugin *plugin = cls;
 368   char *url = NULL;
 369
 370   GNUNET_assert ((addr!=NULL) && (addrlen != 0));
 371   GNUNET_asprintf(&url,
 372                   "http://%s/%s;%u",
 373                   http_plugin_address_to_string(NULL, addr, addrlen),
 374                   (char *) (&plugin->my_ascii_hash_ident),id);
 375
 376   return url;
 377 }
 378
 379 /**
 380  * Removes a message from the linked list of messages
 381  * @param con connection to remove message from
 382  * @param msg message to remove
 383  * @return GNUNET_SYSERR if msg not found, GNUNET_OK on success
 384  */
 385 static int remove_http_message (struct Session * ps, struct HTTP_Message * msg)
 386 {
 387   GNUNET_CONTAINER_DLL_remove(ps->pending_msgs_head,ps->pending_msgs_tail,msg);
 388   GNUNET_free(msg);
 389   return GNUNET_OK;
 390 }
 391
 392 /**
 393  * Removes a session from the linked list of sessions
 394  * @param pc peer context
 395  * @param ps session
 396  * @param call_msg_cont GNUNET_YES to call pending message continuations, otherwise no
 397  * @param call_msg_cont_result, result to call message continuations with
 398  * @return GNUNET_SYSERR if msg not found, GNUNET_OK on success
 399  */
 400 static int remove_session (struct HTTP_PeerContext * pc, struct Session * ps,  int call_msg_cont, int call_msg_cont_result)
 401 {
 402   struct HTTP_Message * msg;
 403   GNUNET_log (GNUNET_ERROR_TYPE_DEBUG,"Connection %X: removing %s session with id %u\n", ps, (ps->direction == INBOUND) ? "inbound" : "outbound",ps->session_id);
 404   GNUNET_free_non_null (ps->addr);
 405   GNUNET_SERVER_mst_destroy (ps->msgtok);
 406   GNUNET_free(ps->url);
 407
 408   msg = ps->pending_msgs_head;
 409   while (msg!=NULL)
 410   {
 411     if ((call_msg_cont == GNUNET_YES) && (msg->transmit_cont!=NULL))
 412     {
 413       msg->transmit_cont (msg->transmit_cont_cls,&pc->identity,call_msg_cont_result);
 414     }
 415     GNUNET_free(msg);
 416     GNUNET_CONTAINER_DLL_remove(ps->pending_msgs_head,ps->pending_msgs_head,msg);
 417     msg = ps->pending_msgs_head;
 418   }
 419
 420   GNUNET_CONTAINER_DLL_remove(pc->head,pc->tail,ps);
 421   GNUNET_free(ps);
 422   ps = NULL;
 423   return GNUNET_OK;
 424 }
 425
 426 static struct Session * get_Session (void * cls, struct HTTP_PeerContext *pc, const void * addr, size_t addr_len)
 427 {
 428   struct Session * cc = pc->head;
 429   struct Session * con = NULL;
 430   unsigned int count = 0;
 431
 432   GNUNET_assert((addr_len == sizeof (struct IPv4HttpAddress)) || (addr_len == sizeof (struct IPv6HttpAddress)));
 433   while (cc!=NULL)
 434   {
 435     if (addr_len == cc->addrlen)
 436     {
 437       if (0 == memcmp(cc->addr, addr, addr_len))
 438       {
 439         /* connection can not be used, since it is disconnected */
 440         if ((cc->recv_force_disconnect==GNUNET_NO) && (cc->send_force_disconnect==GNUNET_NO))
 441           con = cc;
 442         break;
 443       }
 444     }
 445     count++;
 446     cc=cc->next;
 447   }
 448   return con;
 449 }
 450
 451
 452 /**
 453  * Callback called by MHD when a connection is terminated
 454  */
 455 static void mhd_termination_cb (void *cls, struct MHD_Connection * connection, void **httpSessionCache)
 456 {
 457   struct Session * ps = *httpSessionCache;
 458   if (ps == NULL)
 459     return;
 460   struct HTTP_PeerContext * pc = ps->peercontext;
 461
 462   if (connection==ps->recv_endpoint)
 463   {
 464 #if DEBUG_CONNECTIONS
 465     GNUNET_log (GNUNET_ERROR_TYPE_DEBUG,"Connection %X: inbound connection from peer `%s' was terminated\n", ps, GNUNET_i2s(&pc->identity));
 466 #endif
 467     ps->recv_active = GNUNET_NO;
 468     ps->recv_connected = GNUNET_NO;
 469     ps->recv_endpoint = NULL;
 470   }
 471   if (connection==ps->send_endpoint)
 472   {
 473
 474     ps->send_active = GNUNET_NO;
 475     ps->send_connected = GNUNET_NO;
 476     ps->send_endpoint = NULL;
 477 #if DEBUG_CONNECTIONS
 478     GNUNET_log (GNUNET_ERROR_TYPE_DEBUG,"Connection %X: outbound connection from peer `%s' was terminated\n", ps, GNUNET_i2s(&pc->identity));
 479 #endif
 480   }
 481
 482   /* if both connections disconnected, remove session */
 483   if ((ps->send_connected == GNUNET_NO) && (ps->recv_connected == GNUNET_NO))
 484   {
 485     remove_session(pc,ps,GNUNET_YES,GNUNET_SYSERR);
 486   }
 487 }
 488
 489 static void mhd_write_mst_cb (void *cls,
 490                               void *client,
 491                               const struct GNUNET_MessageHeader *message)
 492 {
 493
 494   struct Session *ps  = cls;
 495   struct HTTP_PeerContext *pc = ps->peercontext;
 496   GNUNET_assert(ps != NULL);
 497   GNUNET_assert(pc != NULL);
 498
 499   GNUNET_log (GNUNET_ERROR_TYPE_DEBUG,
 500               "Connection %X: Forwarding message to transport service, type %u and size %u from `%s' (`%s')\n",
 501               ps,
 502               ntohs(message->type),
 503               ntohs(message->size),
 504               GNUNET_i2s(&(ps->peercontext)->identity),http_plugin_address_to_string(NULL,ps->addr,ps->addrlen));
 505
 506   pc->plugin->env->receive (ps->peercontext->plugin->env->cls,
 507                             &pc->identity,
 508                             message, 1, ps,
 509                             ps->addr,
 510                             ps->addrlen);
 511 }
 512
 513 static void curl_receive_mst_cb  (void *cls,
 514                                 void *client,
 515                                 const struct GNUNET_MessageHeader *message)
 516 {
 517   struct Session *ps  = cls;
 518   struct HTTP_PeerContext *pc = ps->peercontext;
 519   GNUNET_assert(ps != NULL);
 520   GNUNET_assert(pc != NULL);
 521
 522   GNUNET_log (GNUNET_ERROR_TYPE_DEBUG,
 523               "Forwarding message to transport service, type %u and size %u from `%s' (`%s')\n",
 524               ntohs(message->type),
 525               ntohs(message->size),
 526               GNUNET_i2s(&(pc->identity)),http_plugin_address_to_string(NULL,ps->addr,ps->addrlen));
 527
 528   pc->plugin->env->receive (pc->plugin->env->cls,
 529                             &pc->identity,
 530                             message, 1, ps,
 531                             ps->addr,
 532                             ps->addrlen);
 533 }
 534
 535
 536 /**
 537  * Check if ip is allowed to connect.
 538  */
 539 static int
 540 mhd_accept_cb (void *cls,
 541                       const struct sockaddr *addr, socklen_t addr_len)
 542 {
 543 #if 0
 544   struct Plugin *plugin = cls;
 545 #endif
 546   /* Every connection is accepted, nothing more to do here */
 547   return MHD_YES;
 548 }
 549
 550 int mhd_send_callback (void *cls, uint64_t pos, char *buf, int max)
 551 {
 552   int bytes_read = 0;
 553
 554   struct Session * ps = cls;
 555   struct HTTP_PeerContext * pc;
 556   struct HTTP_Message * msg;
 557   int res;res=5;
 558
 559   GNUNET_assert (ps!=NULL);
 560   pc = ps->peercontext;
 561   msg = ps->pending_msgs_tail;
 562   if (ps->send_force_disconnect==GNUNET_YES)
 563   {
 564 #if DEBUG_CONNECTIONS
 565     GNUNET_log (GNUNET_ERROR_TYPE_DEBUG,"Connection %X: outbound forced to disconnect\n",ps);
 566 #endif
 567     return -1;
 568   }
 569
 570   if (msg!=NULL)
 571   {
 572     if ((msg->size-msg->pos) <= max)
 573     {
 574       memcpy(buf,&msg->buf[msg->pos],(msg->size-msg->pos));
 575       bytes_read = msg->size-msg->pos;
 576       msg->pos+=(msg->size-msg->pos);
 577     }
 578     else
 579     {
 580       memcpy(buf,&msg->buf[msg->pos],max);
 581       msg->pos+=max;
 582       bytes_read = max;
 583     }
 584
 585     if (msg->pos==msg->size)
 586     {
 587       if (NULL!=msg->transmit_cont)
 588         msg->transmit_cont (msg->transmit_cont_cls,&pc->identity,GNUNET_OK);
 589       res = remove_http_message(ps,msg);
 590     }
 591   }
 592   return bytes_read;
 593 }
 594
 595 /**
 596  * Process GET or PUT request received via MHD.  For
 597  * GET, queue response that will send back our pending
 598  * messages.  For PUT, process incoming data and send
 599  * to GNUnet core.  In either case, check if a session
 600  * already exists and create a new one if not.
 601  */
 602 static int
 603 mdh_access_cb (void *cls,
 604                        struct MHD_Connection *mhd_connection,
 605                        const char *url,
 606                        const char *method,
 607                        const char *version,
 608                        const char *upload_data,
 609                        size_t * upload_data_size, void **httpSessionCache)
 610 {
 611   struct Plugin *plugin = cls;
 612   struct MHD_Response *response;
 613   const union MHD_ConnectionInfo * conn_info;
 614
 615   struct sockaddr_in  *addrin;
 616   struct sockaddr_in6 *addrin6;
 617
 618   char address[INET6_ADDRSTRLEN+14];
 619   struct GNUNET_PeerIdentity pi_in;
 620   size_t id_num = 0;
 621
 622   struct IPv4HttpAddress ipv4addr;
 623   struct IPv6HttpAddress ipv6addr;
 624
 625   struct HTTP_PeerContext *pc;
 626   struct Session *ps;
 627   struct Session *ps_tmp;
 628
 629   int res = GNUNET_NO;
 630   int send_error_to_client;
 631   void * addr;
 632   size_t addr_len;
 633
 634   GNUNET_assert(cls !=NULL);
 635   send_error_to_client = GNUNET_NO;
 636
 637   if (NULL == *httpSessionCache)
 638   {
 639     /* check url for peer identity , if invalid send HTTP 404*/
 640     size_t len = strlen(&url[1]);
 641     char * peer = GNUNET_malloc(104+1);
 642
 643     if ((len>104) && (url[104]==';'))
 644     {
 645         char * id = GNUNET_malloc((len-104)+1);
 646         strcpy(id,&url[105]);
 647         memcpy(peer,&url[1],103);
 648         peer[103] = '\0';
 649         id_num = strtoul ( id, NULL , 10);
 650         GNUNET_free(id);
 651     }
 652     res = GNUNET_CRYPTO_hash_from_string (peer, &(pi_in.hashPubKey));
 653     GNUNET_free(peer);
 654     if ( GNUNET_SYSERR == res )
 655     {
 656       response = MHD_create_response_from_data (strlen (HTTP_ERROR_RESPONSE),HTTP_ERROR_RESPONSE, MHD_NO, MHD_NO);
 657       res = MHD_queue_response (mhd_connection, MHD_HTTP_NOT_FOUND, response);
 658       MHD_destroy_response (response);
 659       if (res == MHD_YES)
 660         GNUNET_log (GNUNET_ERROR_TYPE_DEBUG,"Peer has no valid ident, sent HTTP 1.1/404\n");
 661       else
 662         GNUNET_log (GNUNET_ERROR_TYPE_DEBUG,"Peer has no valid ident, could not send error\n");
 663       return res;
 664     }
 665   }
 666   else
 667   {
 668     ps = *httpSessionCache;
 669     pc = ps->peercontext;
 670   }
 671
 672   if (NULL == *httpSessionCache)
 673   {
 674     /* get peer context */
 675     pc = GNUNET_CONTAINER_multihashmap_get (plugin->peers, &pi_in.hashPubKey);
 676     /* Peer unknown */
 677     if (pc==NULL)
 678     {
 679       pc = GNUNET_malloc(sizeof (struct HTTP_PeerContext));
 680       pc->plugin = plugin;
 681       pc->session_id_counter=1;
 682       memcpy(&pc->identity, &pi_in, sizeof(struct GNUNET_PeerIdentity));
 683       GNUNET_CONTAINER_multihashmap_put(plugin->peers, &pc->identity.hashPubKey, pc, GNUNET_CONTAINER_MULTIHASHMAPOPTION_UNIQUE_ONLY);
 684     }
 685
 686     conn_info = MHD_get_connection_info(mhd_connection, MHD_CONNECTION_INFO_CLIENT_ADDRESS );
 687     /* Incoming IPv4 connection */
 688     if ( AF_INET == conn_info->client_addr->sin_family)
 689     {
 690       addrin = conn_info->client_addr;
 691       inet_ntop(addrin->sin_family, &(addrin->sin_addr),address,INET_ADDRSTRLEN);
 692       memcpy(&ipv4addr.ipv4_addr,&(addrin->sin_addr),sizeof(struct in_addr));
 693       ipv4addr.u_port = addrin->sin_port;
 694       addr = &ipv4addr;
 695       addr_len = sizeof(struct IPv4HttpAddress);
 696     }
 697     /* Incoming IPv6 connection */
 698     if ( AF_INET6 == conn_info->client_addr->sin_family)
 699     {
 700       addrin6 = (struct sockaddr_in6 *) conn_info->client_addr;
 701       inet_ntop(addrin6->sin6_family, &(addrin6->sin6_addr),address,INET6_ADDRSTRLEN);
 702       memcpy(&ipv6addr.ipv6_addr,&(addrin6->sin6_addr),sizeof(struct in6_addr));
 703       ipv6addr.u6_port = addrin6->sin6_port;
 704       addr = &ipv6addr;
 705       addr_len = sizeof(struct IPv6HttpAddress);
 706     }
 707
 708
 709     //ps = get_Session(plugin, pc, addr, addr_len);
 710     ps = NULL;
 711     /* only inbound sessions here */
 712
 713     ps_tmp = pc->head;
 714     while (ps_tmp!=NULL)
 715     {
 716       if ((ps_tmp->direction==INBOUND) && (ps_tmp->session_id == id_num) && (id_num!=0))
 717       {
 718         if ((ps_tmp->recv_force_disconnect!=GNUNET_YES) && (ps_tmp->send_force_disconnect!=GNUNET_YES))
 719         ps=ps_tmp;
 720         break;
 721       }
 722       ps_tmp=ps_tmp->next;
 723     }
 724
 725     if (ps==NULL)
 726     {
 727       ps = GNUNET_malloc(sizeof (struct Session));
 728       ps->addr = GNUNET_malloc(addr_len);
 729       memcpy(ps->addr,addr,addr_len);
 730       ps->addrlen = addr_len;
 731       ps->direction=INBOUND;
 732       ps->pending_msgs_head = NULL;
 733       ps->pending_msgs_tail = NULL;
 734       ps->send_connected=GNUNET_NO;
 735       ps->send_active=GNUNET_NO;
 736       ps->recv_connected=GNUNET_NO;
 737       ps->recv_active=GNUNET_NO;
 738       ps->peercontext=pc;
 739       ps->session_id =id_num;
 740       ps->url = create_url (plugin, ps->addr, ps->addrlen, ps->session_id);
 741       GNUNET_CONTAINER_DLL_insert(pc->head,pc->tail,ps);
 742     }
 743
 744     *httpSessionCache = ps;
 745     if (ps->msgtok==NULL)
 746       ps->msgtok = GNUNET_SERVER_mst_create (&mhd_write_mst_cb, ps);
 747
 748     GNUNET_log (GNUNET_ERROR_TYPE_DEBUG,"Connection %X: HTTP Daemon has new an incoming `%s' request from peer `%s' (`%s')\n",
 749                 ps,
 750                 method,
 751                 GNUNET_i2s(&pc->identity),
 752                 http_plugin_address_to_string(NULL, ps->addr, ps->addrlen));
 753   }
 754
 755   /* Is it a PUT or a GET request */
 756   if (0 == strcmp (MHD_HTTP_METHOD_PUT, method))
 757   {
 758     if (ps->recv_force_disconnect)
 759     {
 760 #if DEBUG_CONNECTIONS
 761       GNUNET_log (GNUNET_ERROR_TYPE_DEBUG,"Connection %X: inbound connection was forced to disconnect\n",ps);
 762 #endif
 763       ps->recv_active = GNUNET_NO;
 764       return MHD_NO;
 765     }
 766     if ((*upload_data_size == 0) && (ps->recv_active==GNUNET_NO))
 767     {
 768       ps->recv_endpoint = mhd_connection;
 769       ps->recv_connected = GNUNET_YES;
 770       ps->recv_active = GNUNET_YES;
 771 #if DEBUG_CONNECTIONS
 772       GNUNET_log (GNUNET_ERROR_TYPE_DEBUG,"Connection %X: inbound PUT connection connected\n",ps);
 773 #endif
 774       return MHD_YES;
 775     }
 776
 777     /* Transmission of all data complete */
 778     if ((*upload_data_size == 0) && (ps->recv_active == GNUNET_YES))
 779     {
 780       response = MHD_create_response_from_data (strlen (HTTP_PUT_RESPONSE),HTTP_PUT_RESPONSE, MHD_NO, MHD_NO);
 781       res = MHD_queue_response (mhd_connection, MHD_HTTP_OK, response);
 782 #if DEBUG_CONNECTIONS
 783       GNUNET_log (GNUNET_ERROR_TYPE_DEBUG,"Connection %X: Sent HTTP/1.1: 200 OK as PUT Response\n",ps);
 784 #endif
 785       MHD_destroy_response (response);
 786       ps->recv_active=GNUNET_NO;
 787       return MHD_YES;
 788     }
 789
 790     /* Recieving data */
 791     if ((*upload_data_size > 0) && (ps->recv_active == GNUNET_YES))
 792     {
 793       res = GNUNET_SERVER_mst_receive(ps->msgtok, ps, upload_data,*upload_data_size, GNUNET_NO, GNUNET_NO);
 794       (*upload_data_size) = 0;
 795       return MHD_YES;
 796     }
 797     else
 798       return MHD_NO;
 799   }
 800   if ( 0 == strcmp (MHD_HTTP_METHOD_GET, method) )
 801   {
 802     if (ps->send_force_disconnect)
 803     {
 804 #if DEBUG_CONNECTIONS
 805       GNUNET_log (GNUNET_ERROR_TYPE_DEBUG,"Connection %X: outbound connection was  forced to disconnect\n",ps);
 806 #endif
 807       ps->send_active = GNUNET_NO;
 808       return MHD_NO;
 809     }
 810     ps->send_connected = GNUNET_YES;
 811     ps->send_active = GNUNET_YES;
 812     ps->send_endpoint = mhd_connection;
 813 #if DEBUG_CONNECTIONS
 814       GNUNET_log (GNUNET_ERROR_TYPE_DEBUG,"Connection %X: inbound GET connection connected\n",ps);
 815 #endif
 816     response = MHD_create_response_from_callback(-1,32 * 1024, &mhd_send_callback, ps, NULL);
 817     res = MHD_queue_response (mhd_connection, MHD_HTTP_OK, response);
 818     MHD_destroy_response (response);
 819     return MHD_YES;
 820   }
 821   return MHD_NO;
 822 }
 823
 824
 825 /**
 826  * Call MHD to process pending ipv4 requests and then go back
 827  * and schedule the next run.
 828  */
 829 static void http_server_daemon_v4_run (void *cls, const struct GNUNET_SCHEDULER_TaskContext *tc);
 830 /**
 831  * Call MHD to process pending ipv6 requests and then go back
 832  * and schedule the next run.
 833  */
 834 static void http_server_daemon_v6_run (void *cls, const struct GNUNET_SCHEDULER_TaskContext *tc);
 835
 836 /**
 837  * Function that queries MHD's select sets and
 838  * starts the task waiting for them.
 839  */
 840 static GNUNET_SCHEDULER_TaskIdentifier
 841 http_server_daemon_prepare (void * cls, struct MHD_Daemon *daemon_handle)
 842 {
 843   struct Plugin *plugin = cls;
 844   GNUNET_SCHEDULER_TaskIdentifier ret;
 845   fd_set rs;
 846   fd_set ws;
 847   fd_set es;
 848   struct GNUNET_NETWORK_FDSet *wrs;
 849   struct GNUNET_NETWORK_FDSet *wws;
 850   struct GNUNET_NETWORK_FDSet *wes;
 851   int max;
 852   unsigned long long timeout;
 853   int haveto;
 854   struct GNUNET_TIME_Relative tv;
 855
 856   GNUNET_assert(cls !=NULL);
 857   ret = GNUNET_SCHEDULER_NO_TASK;
 858   FD_ZERO(&rs);
 859   FD_ZERO(&ws);
 860   FD_ZERO(&es);
 861   wrs = GNUNET_NETWORK_fdset_create ();
 862   wes = GNUNET_NETWORK_fdset_create ();
 863   wws = GNUNET_NETWORK_fdset_create ();
 864   max = -1;
 865   GNUNET_assert (MHD_YES ==
 866                  MHD_get_fdset (daemon_handle,
 867                                 &rs,
 868                                 &ws,
 869                                 &es,
 870                                 &max));
 871   haveto = MHD_get_timeout (daemon_handle, &timeout);
 872   if (haveto == MHD_YES)
 873     tv.value = (uint64_t) timeout;
 874   else
 875     tv = GNUNET_TIME_UNIT_FOREVER_REL;
 876   GNUNET_NETWORK_fdset_copy_native (wrs, &rs, max);
 877   GNUNET_NETWORK_fdset_copy_native (wws, &ws, max);
 878   GNUNET_NETWORK_fdset_copy_native (wes, &es, max);
 879   if (daemon_handle == plugin->http_server_daemon_v4)
 880   {
 881     ret = GNUNET_SCHEDULER_add_select (plugin->env->sched,
 882                                        GNUNET_SCHEDULER_PRIORITY_DEFAULT,
 883                                        GNUNET_SCHEDULER_NO_TASK,
 884                                        tv,
 885                                        wrs,
 886                                        wws,
 887                                        &http_server_daemon_v4_run,
 888                                        plugin);
 889   }
 890   if (daemon_handle == plugin->http_server_daemon_v6)
 891   {
 892     ret = GNUNET_SCHEDULER_add_select (plugin->env->sched,
 893                                        GNUNET_SCHEDULER_PRIORITY_DEFAULT,
 894                                        GNUNET_SCHEDULER_NO_TASK,
 895                                        tv,
 896                                        wrs,
 897                                        wws,
 898                                        &http_server_daemon_v6_run,
 899                                        plugin);
 900   }
 901   GNUNET_NETWORK_fdset_destroy (wrs);
 902   GNUNET_NETWORK_fdset_destroy (wws);
 903   GNUNET_NETWORK_fdset_destroy (wes);
 904   return ret;
 905 }
 906
 907 /**
 908  * Call MHD to process pending requests and then go back
 909  * and schedule the next run.
 910  */
 911 static void http_server_daemon_v4_run (void *cls,
 912                              const struct GNUNET_SCHEDULER_TaskContext *tc)
 913 {
 914   struct Plugin *plugin = cls;
 915
 916   GNUNET_assert(cls !=NULL);
 917   if (plugin->http_server_task_v4 != GNUNET_SCHEDULER_NO_TASK)
 918     plugin->http_server_task_v4 = GNUNET_SCHEDULER_NO_TASK;
 919
 920   if (0 != (tc->reason & GNUNET_SCHEDULER_REASON_SHUTDOWN))
 921     return;
 922
 923   GNUNET_assert (MHD_YES == MHD_run (plugin->http_server_daemon_v4));
 924   plugin->http_server_task_v4 = http_server_daemon_prepare (plugin, plugin->http_server_daemon_v4);
 925   return;
 926 }
 927
 928
 929 /**
 930  * Call MHD to process pending requests and then go back
 931  * and schedule the next run.
 932  */
 933 static void http_server_daemon_v6_run (void *cls,
 934                              const struct GNUNET_SCHEDULER_TaskContext *tc)
 935 {
 936   struct Plugin *plugin = cls;
 937
 938   GNUNET_assert(cls !=NULL);
 939   if (plugin->http_server_task_v6 != GNUNET_SCHEDULER_NO_TASK)
 940     plugin->http_server_task_v6 = GNUNET_SCHEDULER_NO_TASK;
 941
 942   if (0 != (tc->reason & GNUNET_SCHEDULER_REASON_SHUTDOWN))
 943     return;
 944
 945   GNUNET_assert (MHD_YES == MHD_run (plugin->http_server_daemon_v6));
 946   plugin->http_server_task_v6 = http_server_daemon_prepare (plugin, plugin->http_server_daemon_v6);
 947   return;
 948 }
 949
 950 /**
 951  * Function setting up curl handle and selecting message to send
 952  * @param cls plugin
 953  * @param ses session to send data to
 954  * @param con connection
 955  * @return bytes sent to peer
 956  */
 957 static ssize_t send_check_connections (void *cls, struct Session *ps);
 958
 959 static size_t curl_get_header_function( void *ptr, size_t size, size_t nmemb, void *stream)
 960 {
 961   struct Session * ps = stream;
 962
 963   char * tmp;
 964   size_t len = size * nmemb;
 965   long http_result = 0;
 966   int res;
 967   /* Getting last http result code */
 968   if (ps->recv_connected==GNUNET_NO)
 969   {
 970     GNUNET_assert(NULL!=ps);
 971     res = curl_easy_getinfo(ps->recv_endpoint, CURLINFO_RESPONSE_CODE, &http_result);
 972     if (CURLE_OK == res)
 973     {
 974       if (http_result == 200)
 975       {
 976         ps->recv_connected = GNUNET_YES;
 977         ps->recv_active = GNUNET_YES;
 978 #if DEBUG_CONNECTIONS
 979         GNUNET_log (GNUNET_ERROR_TYPE_DEBUG,"Connection %X: connected to recieve data\n",ps);
 980 #endif
 981         // Calling send_check_connections again since receive is established
 982         send_check_connections (ps->peercontext->plugin, ps);
 983       }
 984     }
 985   }
 986
 987   tmp = NULL;
 988   if ((size * nmemb) < SIZE_MAX)
 989     tmp = GNUNET_malloc (len+1);
 990
 991   if ((tmp != NULL) && (len > 0))
 992   {
 993     memcpy(tmp,ptr,len);
 994     if (len>=2)
 995     {
 996       if (tmp[len-2] == 13)
 997         tmp[len-2]= '\0';
 998     }
 999 #if DEBUG_HTTP
1000     GNUNET_log (GNUNET_ERROR_TYPE_DEBUG, "Header: `%s' %u \n",tmp, http_result);
1001 #endif
1002   }
1003   if (NULL != tmp)
1004     GNUNET_free (tmp);
1005
1006   return size * nmemb;
1007 }
1008
1009 static size_t curl_put_header_function( void *ptr, size_t size, size_t nmemb, void *stream)
1010 {
1011   struct Session * ps = stream;
1012
1013   char * tmp;
1014   size_t len = size * nmemb;
1015   long http_result = 0;
1016   int res;
1017
1018   /* Getting last http result code */
1019   GNUNET_assert(NULL!=ps);
1020   res = curl_easy_getinfo(ps->send_endpoint, CURLINFO_RESPONSE_CODE, &http_result);
1021   if (CURLE_OK == res)
1022   {
1023     if ((http_result == 100) && (ps->send_connected==GNUNET_NO))
1024     {
1025       ps->send_connected = GNUNET_YES;
1026       ps->send_active = GNUNET_YES;
1027 #if DEBUG_CONNECTIONS
1028       GNUNET_log (GNUNET_ERROR_TYPE_DEBUG,"Connection %X: connected to send data\n",ps);
1029 #endif
1030     }
1031     if ((http_result == 200) && (ps->send_connected==GNUNET_YES))
1032     {
1033       ps->send_connected = GNUNET_NO;
1034       ps->send_active = GNUNET_NO;
1035 #if DEBUG_CONNECTIONS
1036       GNUNET_log (GNUNET_ERROR_TYPE_DEBUG,"Connection %X: sending disconnected\n",ps);
1037 #endif
1038     }
1039   }
1040
1041   tmp = NULL;
1042   if ((size * nmemb) < SIZE_MAX)
1043     tmp = GNUNET_malloc (len+1);
1044
1045   if ((tmp != NULL) && (len > 0))
1046   {
1047     memcpy(tmp,ptr,len);
1048     if (len>=2)
1049     {
1050       if (tmp[len-2] == 13)
1051         tmp[len-2]= '\0';
1052     }
1053 #if DEBUG_HTTP
1054     GNUNET_log (GNUNET_ERROR_TYPE_DEBUG, "Header: `%s' %u \n",tmp, http_result);
1055 #endif
1056   }
1057   if (NULL != tmp)
1058     GNUNET_free (tmp);
1059
1060   return size * nmemb;
1061 }
1062
1063 /**
1064  * Callback method used with libcurl
1065  * Method is called when libcurl needs to read data during sending
1066  * @param stream pointer where to write data
1067  * @param size size of an individual element
1068  * @param nmemb count of elements that can be written to the buffer
1069  * @param ptr source pointer, passed to the libcurl handle
1070  * @return bytes written to stream
1071  */
1072 static size_t curl_send_cb(void *stream, size_t size, size_t nmemb, void *ptr)
1073 {
1074   struct Session * ps = ptr;
1075   struct HTTP_Message * msg = ps->pending_msgs_tail;
1076   size_t bytes_sent;
1077   size_t len;
1078
1079   if (ps->send_active == GNUNET_NO)
1080         return CURL_READFUNC_PAUSE;
1081
1082
1083   if ((ps->pending_msgs_tail == NULL) && (ps->send_active == GNUNET_YES))
1084   {
1085 #if DEBUG_CONNECTIONS
1086     GNUNET_log (GNUNET_ERROR_TYPE_DEBUG,"Connection %X: No Message to send, pausing connection\n",ps);
1087 #endif
1088     ps->send_active = GNUNET_NO;
1089     return CURL_READFUNC_PAUSE;
1090   }
1091
1092   msg = ps->pending_msgs_tail;
1093   /* data to send */
1094   if (msg->pos < msg->size)
1095   {
1096     /* data fit in buffer */
1097     if ((msg->size - msg->pos) <= (size * nmemb))
1098     {
1099       len = (msg->size - msg->pos);
1100       memcpy(stream, &msg->buf[msg->pos], len);
1101       msg->pos += len;
1102       bytes_sent = len;
1103     }
1104     else
1105     {
1106       len = size*nmemb;
1107       memcpy(stream, &msg->buf[msg->pos], len);
1108       msg->pos += len;
1109       bytes_sent = len;
1110     }
1111   }
1112   /* no data to send */
1113   else
1114   {
1115     bytes_sent = 0;
1116   }
1117
1118   if ( msg->pos == msg->size)
1119   {
1120 #if DEBUG_CONNECTIONS
1121     GNUNET_log (GNUNET_ERROR_TYPE_DEBUG,"Connection %X: Message with %u bytes sent, removing message from queue \n",ps, msg->pos);
1122 #endif
1123     /* Calling transmit continuation  */
1124     if (( NULL != ps->pending_msgs_tail) && (NULL != ps->pending_msgs_tail->transmit_cont))
1125       msg->transmit_cont (ps->pending_msgs_tail->transmit_cont_cls,&(ps->peercontext)->identity,GNUNET_OK);
1126     remove_http_message(ps, msg);
1127   }
1128   return bytes_sent;
1129 }
1130
1131 /**
1132 * Callback method used with libcurl
1133 * Method is called when libcurl needs to write data during sending
1134 * @param stream pointer where to write data
1135 * @param size size of an individual element
1136 * @param nmemb count of elements that can be written to the buffer
1137 * @param ptr destination pointer, passed to the libcurl handle
1138 * @return bytes read from stream
1139 */
1140 static size_t curl_receive_cb( void *stream, size_t size, size_t nmemb, void *ptr)
1141 {
1142   struct Session * ps = ptr;
1143 #if DEBUG_CONNECTIONS
1144   GNUNET_log (GNUNET_ERROR_TYPE_DEBUG,"Connection %X: %u bytes received\n",ps, size*nmemb);
1145 #endif
1146   GNUNET_SERVER_mst_receive(ps->msgtok, ps, stream, size*nmemb, GNUNET_NO, GNUNET_NO);
1147   return (size * nmemb);
1148
1149 }
1150
1151 /**
1152  * Function setting up file descriptors and scheduling task to run
1153  * @param cls closure
1154  * @param ses session to send data to
1155  * @param
1156  */
1157 static int curl_schedule(void *cls, struct Session* ses );
1158
1159
1160
1161 /**
1162  * Function setting up curl handle and selecting message to send
1163  * @param cls plugin
1164  * @param ses session to send data to
1165  * @param con connection
1166  * @return GNUNET_SYSERR on failure, GNUNET_NO if connecting, GNUNET_YES if ok
1167  */
1168 static ssize_t send_check_connections (void *cls, struct Session *ps)
1169 {
1170   struct Plugin *plugin = cls;
1171   CURLMcode mret;
1172   struct HTTP_Message * msg;
1173   struct GNUNET_TIME_Relative timeout = GNUNET_CONSTANTS_IDLE_CONNECTION_TIMEOUT;
1174
1175   GNUNET_assert(cls !=NULL);
1176
1177   if (ps->direction == OUTBOUND)
1178   {
1179     /* RECV DIRECTION */
1180     /* Check if session is connected to receive data, otherwise connect to peer */
1181     if (ps->recv_connected == GNUNET_NO)
1182     {
1183         if (ps->recv_endpoint == NULL)
1184         {
1185           ps->recv_endpoint = curl_easy_init();
1186 #if DEBUG_CURL
1187         curl_easy_setopt(ps->recv_endpoint, CURLOPT_VERBOSE, 1L);
1188 #endif
1189         curl_easy_setopt(ps->recv_endpoint, CURLOPT_URL, ps->url);
1190         curl_easy_setopt(ps->recv_endpoint, CURLOPT_HEADERFUNCTION, &curl_get_header_function);
1191         curl_easy_setopt(ps->recv_endpoint, CURLOPT_WRITEHEADER, ps);
1192         curl_easy_setopt(ps->recv_endpoint, CURLOPT_READFUNCTION, curl_send_cb);
1193         curl_easy_setopt(ps->recv_endpoint, CURLOPT_READDATA, ps);
1194         curl_easy_setopt(ps->recv_endpoint, CURLOPT_WRITEFUNCTION, curl_receive_cb);
1195         curl_easy_setopt(ps->recv_endpoint, CURLOPT_WRITEDATA, ps);
1196         curl_easy_setopt(ps->recv_endpoint, CURLOPT_TIMEOUT, (long) timeout.value);
1197         curl_easy_setopt(ps->recv_endpoint, CURLOPT_PRIVATE, ps);
1198         curl_easy_setopt(ps->recv_endpoint, CURLOPT_CONNECTTIMEOUT, HTTP_CONNECT_TIMEOUT);
1199         curl_easy_setopt(ps->recv_endpoint, CURLOPT_BUFFERSIZE, GNUNET_SERVER_MAX_MESSAGE_SIZE);
1200
1201         mret = curl_multi_add_handle(plugin->multi_handle, ps->recv_endpoint);
1202         if (mret != CURLM_OK)
1203         {
1204           GNUNET_log (GNUNET_ERROR_TYPE_ERROR,
1205                       _("%s failed at %s:%d: `%s'\n"),
1206                       "curl_multi_add_handle", __FILE__, __LINE__,
1207                       curl_multi_strerror (mret));
1208           return GNUNET_SYSERR;
1209         }
1210         if (curl_schedule (plugin, NULL) == GNUNET_SYSERR)
1211                 return GNUNET_SYSERR;
1212 #if DEBUG_CONNECTIONS
1213         GNUNET_log (GNUNET_ERROR_TYPE_DEBUG,"Connection %X: inbound not connected, initiating connection\n",ps);
1214 #endif
1215       }
1216     }
1217
1218     /* waiting for receive direction */
1219     if (ps->recv_connected==GNUNET_NO)
1220       return GNUNET_NO;
1221
1222     /* SEND DIRECTION */
1223     /* Check if session is connected to send data, otherwise connect to peer */
1224     if ((ps->send_connected == GNUNET_YES) && (ps->send_endpoint!= NULL))
1225     {
1226       if (ps->send_active == GNUNET_YES)
1227       {
1228 #if DEBUG_CONNECTIONS
1229         GNUNET_log (GNUNET_ERROR_TYPE_DEBUG,"Connection %X: outbound active, enqueueing message\n",ps);
1230 #endif
1231         return GNUNET_YES;
1232       }
1233       if (ps->send_active == GNUNET_NO)
1234       {
1235 #if DEBUG_CONNECTIONS
1236         GNUNET_log (GNUNET_ERROR_TYPE_DEBUG,"Connection %X: outbound paused, unpausing existing connection and enqueueing message\n",ps);
1237 #endif
1238         if (CURLE_OK == curl_easy_pause(ps->send_endpoint,CURLPAUSE_CONT))
1239         {
1240                         ps->send_active=GNUNET_YES;
1241                         return GNUNET_YES;
1242         }
1243         else
1244                 return GNUNET_SYSERR;
1245       }
1246     }
1247     /* not connected, initiate connection */
1248     if ((ps->send_connected==GNUNET_NO) && (NULL == ps->send_endpoint))
1249       ps->send_endpoint = curl_easy_init();
1250     GNUNET_assert (ps->send_endpoint != NULL);
1251     GNUNET_assert (NULL != ps->pending_msgs_tail);
1252 #if DEBUG_CONNECTIONS
1253     GNUNET_log (GNUNET_ERROR_TYPE_DEBUG,"Connection %X: outbound not connected, initiating connection\n",ps);
1254 #endif
1255     ps->send_active = GNUNET_NO;
1256     msg = ps->pending_msgs_tail;
1257
1258   #if DEBUG_CURL
1259     curl_easy_setopt(ps->send_endpoint, CURLOPT_VERBOSE, 1L);
1260   #endif
1261     curl_easy_setopt(ps->send_endpoint, CURLOPT_URL, ps->url);
1262     curl_easy_setopt(ps->send_endpoint, CURLOPT_PUT, 1L);
1263     curl_easy_setopt(ps->send_endpoint, CURLOPT_HEADERFUNCTION, &curl_put_header_function);
1264     curl_easy_setopt(ps->send_endpoint, CURLOPT_WRITEHEADER, ps);
1265     curl_easy_setopt(ps->send_endpoint, CURLOPT_READFUNCTION, curl_send_cb);
1266     curl_easy_setopt(ps->send_endpoint, CURLOPT_READDATA, ps);
1267     curl_easy_setopt(ps->send_endpoint, CURLOPT_WRITEFUNCTION, curl_receive_cb);
1268     curl_easy_setopt(ps->send_endpoint, CURLOPT_READDATA, ps);
1269     curl_easy_setopt(ps->send_endpoint, CURLOPT_TIMEOUT, (long) timeout.value);
1270     curl_easy_setopt(ps->send_endpoint, CURLOPT_PRIVATE, ps);
1271     curl_easy_setopt(ps->send_endpoint, CURLOPT_CONNECTTIMEOUT, HTTP_CONNECT_TIMEOUT);
1272     curl_easy_setopt(ps->send_endpoint, CURLOPT_BUFFERSIZE, GNUNET_SERVER_MAX_MESSAGE_SIZE);
1273
1274     mret = curl_multi_add_handle(plugin->multi_handle, ps->send_endpoint);
1275     if (mret != CURLM_OK)
1276     {
1277       GNUNET_log (GNUNET_ERROR_TYPE_ERROR,
1278                   _("%s failed at %s:%d: `%s'\n"),
1279                   "curl_multi_add_handle", __FILE__, __LINE__,
1280                   curl_multi_strerror (mret));
1281       return GNUNET_SYSERR;
1282     }
1283     if (curl_schedule (plugin, NULL) == GNUNET_SYSERR)
1284         return GNUNET_SYSERR;
1285     return GNUNET_YES;
1286   }
1287   if (ps->direction == INBOUND)
1288   {
1289     GNUNET_assert (NULL != ps->pending_msgs_tail);
1290     msg = ps->pending_msgs_tail;
1291     if ((ps->recv_connected==GNUNET_YES) && (ps->send_connected==GNUNET_YES))
1292         return GNUNET_YES;
1293   }
1294   return GNUNET_SYSERR;
1295 }
1296
1297 static void curl_perform (void *cls,
1298              const struct GNUNET_SCHEDULER_TaskContext *tc)
1299 {
1300   struct Plugin *plugin = cls;
1301   static unsigned int handles_last_run;
1302   int running;
1303   struct CURLMsg *msg;
1304   CURLMcode mret;
1305   struct Session *ps = NULL;
1306   struct HTTP_PeerContext *pc = NULL;
1307   struct HTTP_Message * cur_msg = NULL;
1308   long http_result;
1309
1310   GNUNET_assert(cls !=NULL);
1311
1312   plugin->http_curl_task = GNUNET_SCHEDULER_NO_TASK;
1313   if (0 != (tc->reason & GNUNET_SCHEDULER_REASON_SHUTDOWN))
1314     return;
1315
1316   do
1317     {
1318       running = 0;
1319       mret = curl_multi_perform (plugin->multi_handle, &running);
1320       if ((running < handles_last_run) && (running>0))
1321         {
1322           do
1323             {
1324
1325               msg = curl_multi_info_read (plugin->multi_handle, &running);
1326               if (running == 0)
1327                   break;
1328               /* get session for affected curl handle */
1329               GNUNET_assert ( msg->easy_handle != NULL );
1330               curl_easy_getinfo(msg->easy_handle, CURLINFO_PRIVATE, (char *) &ps);
1331               GNUNET_assert ( ps != NULL );
1332               pc = ps->peercontext;
1333               GNUNET_assert ( pc != NULL );
1334               switch (msg->msg)
1335                 {
1336
1337                 case CURLMSG_DONE:
1338                   if ( (msg->data.result != CURLE_OK) &&
1339                        (msg->data.result != CURLE_GOT_NOTHING) )
1340                   {
1341                     /* sending msg failed*/
1342                     if (msg->easy_handle == ps->send_endpoint)
1343                     {
1344 #if DEBUG_CONNECTIONS
1345                       GNUNET_log(GNUNET_ERROR_TYPE_INFO,
1346                                  _("Connection %X: HTTP PUT to peer `%s' (`%s') failed: `%s' `%s'\n"),
1347                                  ps,
1348                                  GNUNET_i2s(&pc->identity),
1349                                  http_plugin_address_to_string(NULL, ps->addr, ps->addrlen),
1350                                  "curl_multi_perform",
1351                                  curl_easy_strerror (msg->data.result));
1352 #endif
1353                       ps->send_connected = GNUNET_NO;
1354                       ps->send_active = GNUNET_NO;
1355                       curl_multi_remove_handle(plugin->multi_handle,ps->send_endpoint);
1356                       curl_easy_cleanup(ps->send_endpoint);
1357                       ps->send_endpoint=NULL;
1358                       cur_msg = ps->pending_msgs_tail;
1359                       if (( NULL != cur_msg) && ( NULL != cur_msg->transmit_cont))
1360                         cur_msg->transmit_cont (cur_msg->transmit_cont_cls,&pc->identity,GNUNET_SYSERR);
1361                     }
1362                     /* GET connection failed */
1363                     if (msg->easy_handle == ps->recv_endpoint)
1364                     {
1365 #if DEBUG_CONNECTIONS
1366                       GNUNET_log(GNUNET_ERROR_TYPE_INFO,
1367                            _("Connection %X: HTTP GET to peer `%s' (`%s') failed: `%s' `%s'\n"),
1368                            ps,
1369                            GNUNET_i2s(&pc->identity),
1370                            http_plugin_address_to_string(NULL, ps->addr, ps->addrlen),
1371                            "curl_multi_perform",
1372                            curl_easy_strerror (msg->data.result));
1373 #endif
1374                       ps->recv_connected = GNUNET_NO;
1375                       ps->recv_active = GNUNET_NO;
1376                       curl_multi_remove_handle(plugin->multi_handle,ps->recv_endpoint);
1377                       curl_easy_cleanup(ps->recv_endpoint);
1378                       ps->recv_endpoint=NULL;
1379                     }
1380                   }
1381                   else
1382                   {
1383                     if (msg->easy_handle == ps->send_endpoint)
1384                     {
1385                       GNUNET_assert (CURLE_OK == curl_easy_getinfo(msg->easy_handle, CURLINFO_RESPONSE_CODE, &http_result));
1386 #if DEBUG_CONNECTIONS
1387                       GNUNET_log (GNUNET_ERROR_TYPE_DEBUG,
1388                                   "Connection %X: HTTP PUT connection to peer `%s' (`%s') was closed with HTTP code %u\n",
1389                                    ps,
1390                                    GNUNET_i2s(&pc->identity),
1391                                    http_plugin_address_to_string(NULL, ps->addr, ps->addrlen),
1392                                    http_result);
1393 #endif
1394                       /* Calling transmit continuation  */
1395                       cur_msg = ps->pending_msgs_tail;
1396                       if (( NULL != cur_msg) && (NULL != cur_msg->transmit_cont))
1397                       {
1398                         /* HTTP 1xx : Last message before here was informational */
1399                         if ((http_result >=100) && (http_result < 200))
1400                           cur_msg->transmit_cont (cur_msg->transmit_cont_cls,&pc->identity,GNUNET_OK);
1401                         /* HTTP 2xx: successful operations */
1402                         if ((http_result >=200) && (http_result < 300))
1403                           cur_msg->transmit_cont (cur_msg->transmit_cont_cls,&pc->identity,GNUNET_OK);
1404                         /* HTTP 3xx..5xx: error */
1405                         if ((http_result >=300) && (http_result < 600))
1406                           cur_msg->transmit_cont (cur_msg->transmit_cont_cls,&pc->identity,GNUNET_SYSERR);
1407                       }
1408                       ps->send_connected = GNUNET_NO;
1409                       ps->send_active = GNUNET_NO;
1410                       curl_multi_remove_handle(plugin->multi_handle,ps->send_endpoint);
1411                       curl_easy_cleanup(ps->send_endpoint);
1412                       ps->send_endpoint =NULL;
1413                     }
1414                     if (msg->easy_handle == ps->recv_endpoint)
1415                     {
1416 #if DEBUG_CONNECTIONS
1417                       GNUNET_log (GNUNET_ERROR_TYPE_DEBUG,
1418                                   "Connection %X: HTTP GET connection to peer `%s' (`%s') was closed with HTTP code %u\n",
1419                                    ps,
1420                                    GNUNET_i2s(&pc->identity),
1421                                    http_plugin_address_to_string(NULL, ps->addr, ps->addrlen),
1422                                    http_result);
1423 #endif
1424                       ps->recv_connected = GNUNET_NO;
1425                       ps->recv_active = GNUNET_NO;
1426                       curl_multi_remove_handle(plugin->multi_handle,ps->recv_endpoint);
1427                       curl_easy_cleanup(ps->recv_endpoint);
1428                       ps->recv_endpoint=NULL;
1429                     }
1430                   }
1431                   if ((ps->recv_connected == GNUNET_NO) && (ps->send_connected == GNUNET_NO))
1432                     remove_session (pc, ps, GNUNET_YES, GNUNET_SYSERR);
1433                   return;
1434                 default:
1435                   break;
1436                 }
1437
1438             }
1439           while ( (running > 0) );
1440         }
1441       handles_last_run = running;
1442     }
1443   while (mret == CURLM_CALL_MULTI_PERFORM);
1444   curl_schedule(plugin, cls);
1445 }
1446
1447
1448 /**
1449  * Function setting up file descriptors and scheduling task to run
1450  * @param ses session to send data to
1451  * @return GNUNET_SYSERR for hard failure, GNUNET_OK for ok
1452  */
1453 static int curl_schedule(void *cls, struct Session* ses )
1454 {
1455   struct Plugin *plugin = cls;
1456   fd_set rs;
1457   fd_set ws;
1458   fd_set es;
1459   int max;
1460   struct GNUNET_NETWORK_FDSet *grs;
1461   struct GNUNET_NETWORK_FDSet *gws;
1462   long to;
1463   CURLMcode mret;
1464
1465   GNUNET_assert(cls !=NULL);
1466   max = -1;
1467   FD_ZERO (&rs);
1468   FD_ZERO (&ws);
1469   FD_ZERO (&es);
1470   mret = curl_multi_fdset (plugin->multi_handle, &rs, &ws, &es, &max);
1471   if (mret != CURLM_OK)
1472     {
1473       GNUNET_log (GNUNET_ERROR_TYPE_ERROR,
1474                   _("%s failed at %s:%d: `%s'\n"),
1475                   "curl_multi_fdset", __FILE__, __LINE__,
1476                   curl_multi_strerror (mret));
1477       return GNUNET_SYSERR;
1478     }
1479   mret = curl_multi_timeout (plugin->multi_handle, &to);
1480   if (mret != CURLM_OK)
1481     {
1482       GNUNET_log (GNUNET_ERROR_TYPE_ERROR,
1483                   _("%s failed at %s:%d: `%s'\n"),
1484                   "curl_multi_timeout", __FILE__, __LINE__,
1485                   curl_multi_strerror (mret));
1486       return GNUNET_SYSERR;
1487     }
1488
1489   grs = GNUNET_NETWORK_fdset_create ();
1490   gws = GNUNET_NETWORK_fdset_create ();
1491   GNUNET_NETWORK_fdset_copy_native (grs, &rs, max + 1);
1492   GNUNET_NETWORK_fdset_copy_native (gws, &ws, max + 1);
1493   plugin->http_curl_task = GNUNET_SCHEDULER_add_select (plugin->env->sched,
1494                                    GNUNET_SCHEDULER_PRIORITY_DEFAULT,
1495                                    GNUNET_SCHEDULER_NO_TASK,
1496                                    GNUNET_TIME_relative_multiply (GNUNET_TIME_UNIT_SECONDS, 0),
1497                                    grs,
1498                                    gws,
1499                                    &curl_perform,
1500                                    plugin);
1501   GNUNET_NETWORK_fdset_destroy (gws);
1502   GNUNET_NETWORK_fdset_destroy (grs);
1503   return GNUNET_OK;
1504 }
1505
1506
1507 /**
1508  * Function that can be used by the transport service to transmit
1509  * a message using the plugin.   Note that in the case of a
1510  * peer disconnecting, the continuation MUST be called
1511  * prior to the disconnect notification itself.  This function
1512  * will be called with this peer's HELLO message to initiate
1513  * a fresh connection to another peer.
1514  *
1515  * @param cls closure
1516  * @param target who should receive this message
1517  * @param msgbuf the message to transmit
1518  * @param msgbuf_size number of bytes in 'msgbuf'
1519  * @param priority how important is the message (most plugins will
1520  *                 ignore message priority and just FIFO)
1521  * @param timeout how long to wait at most for the transmission (does not
1522  *                require plugins to discard the message after the timeout,
1523  *                just advisory for the desired delay; most plugins will ignore
1524  *                this as well)
1525  * @param session which session must be used (or NULL for "any")
1526  * @param addr the address to use (can be NULL if the plugin
1527  *                is "on its own" (i.e. re-use existing TCP connection))
1528  * @param addrlen length of the address in bytes
1529  * @param force_address GNUNET_YES if the plugin MUST use the given address,
1530  *                GNUNET_NO means the plugin may use any other address and
1531  *                GNUNET_SYSERR means that only reliable existing
1532  *                bi-directional connections should be used (regardless
1533  *                of address)
1534  * @param cont continuation to call once the message has
1535  *        been transmitted (or if the transport is ready
1536  *        for the next transmission call; or if the
1537  *        peer disconnected...); can be NULL
1538  * @param cont_cls closure for cont
1539  * @return number of bytes used (on the physical network, with overheads);
1540  *         -1 on hard errors (i.e. address invalid); 0 is a legal value
1541  *         and does NOT mean that the message was not transmitted (DV)
1542  */
1543 static ssize_t
1544 http_plugin_send (void *cls,
1545                   const struct GNUNET_PeerIdentity *target,
1546                   const char *msgbuf,
1547                   size_t msgbuf_size,
1548                   unsigned int priority,
1549                   struct GNUNET_TIME_Relative to,
1550                   struct Session *session,
1551                   const void *addr,
1552                   size_t addrlen,
1553                   int force_address,
1554                   GNUNET_TRANSPORT_TransmitContinuation cont,
1555                   void *cont_cls)
1556 {
1557   struct Plugin *plugin = cls;
1558   struct HTTP_Message *msg;
1559
1560   struct HTTP_PeerContext * pc;
1561   struct Session * ps = NULL;
1562   struct Session * ps_tmp = NULL;
1563
1564   GNUNET_assert(cls !=NULL);
1565
1566   char * force = GNUNET_malloc(40);
1567   if (force_address == GNUNET_YES)
1568     strcpy(force,"forced addr.");
1569   if (force_address == GNUNET_NO)
1570     strcpy(force,"any addr.");
1571   if (force_address == GNUNET_SYSERR)
1572     strcpy(force,"reliable bi-direc. address addr.");
1573   GNUNET_log (GNUNET_ERROR_TYPE_DEBUG,"Transport tells me to send %u bytes to `%s' using %s (%s) and session: %X\n",
1574                                       msgbuf_size,
1575                                       GNUNET_i2s(target),
1576                                       force,
1577                                       http_plugin_address_to_string(NULL, addr, addrlen),
1578                                       session);
1579   GNUNET_free(force);
1580
1581   pc = GNUNET_CONTAINER_multihashmap_get (plugin->peers, &target->hashPubKey);
1582   /* Peer unknown */
1583   if (pc==NULL)
1584   {
1585     pc = GNUNET_malloc(sizeof (struct HTTP_PeerContext));
1586     pc->plugin = plugin;
1587     pc->session_id_counter=1;
1588     memcpy(&pc->identity, target, sizeof(struct GNUNET_PeerIdentity));
1589     GNUNET_CONTAINER_multihashmap_put(plugin->peers, &pc->identity.hashPubKey, pc, GNUNET_CONTAINER_MULTIHASHMAPOPTION_UNIQUE_ONLY);
1590   }
1591
1592   /* Search for existing session using the passed address */
1593   if  ((addr!=NULL) && (addrlen != 0))
1594   {
1595     ps = get_Session(plugin, pc, addr, addrlen);
1596   }
1597   if (ps != NULL)
1598     GNUNET_log (GNUNET_ERROR_TYPE_DEBUG,"Found existing connection to peer %s with given address, using %X\n", GNUNET_i2s(target), ps);
1599
1600   /* Search for existing session using the passed session */
1601   if ((ps==NULL) && (force_address != GNUNET_YES))
1602   {
1603     ps_tmp = pc->head;
1604     while (ps_tmp!=NULL)
1605     {
1606       if ((ps_tmp==session) && (ps_tmp->recv_force_disconnect==GNUNET_NO) && (ps_tmp->send_force_disconnect==GNUNET_NO) &&
1607           (ps_tmp->recv_connected==GNUNET_YES) && (ps_tmp->send_connected==GNUNET_YES))
1608       {
1609         GNUNET_log (GNUNET_ERROR_TYPE_DEBUG,"Found existing connection to peer %s with given session, using inbound session %X\n", GNUNET_i2s(target), ps_tmp);
1610         ps = ps_tmp;
1611         break;
1612       }
1613       ps_tmp=ps_tmp->next;
1614     }
1615   }
1616
1617   /* session not existing, address not forced -> looking for other session */
1618   if ((ps==NULL) && (force_address != GNUNET_YES))
1619   {
1620     GNUNET_log (GNUNET_ERROR_TYPE_DEBUG,"No existing connection, but free to choose existing, searching for existing connection to peer %s\n", GNUNET_i2s(target));
1621     /* Choosing different session to peer when possible */
1622     struct Session * tmp = pc->head;
1623     while (tmp!=NULL)
1624     {
1625       if ((tmp->recv_connected) && (tmp->send_connected) && (tmp->recv_force_disconnect==GNUNET_NO) && (tmp->send_force_disconnect==GNUNET_NO))
1626       {
1627         ps = tmp;
1628       }
1629       tmp = tmp->next;
1630     }
1631     if (ps != NULL)
1632      GNUNET_log (GNUNET_ERROR_TYPE_DEBUG,"No existing connection to peer %s, selected connection %X\n", GNUNET_i2s(target),ps);
1633     else
1634       GNUNET_log (GNUNET_ERROR_TYPE_DEBUG,"No existing connection to peer %s, no connection found\n", GNUNET_i2s(target));
1635   }
1636
1637   /* session not existing, but address forced -> creating new session */
1638   if ((ps==NULL) || ((ps==NULL) && (force_address == GNUNET_YES)))
1639   {
1640     if ((addr!=NULL) && (addrlen!=0))
1641     {
1642       if (force_address == GNUNET_YES)
1643         GNUNET_log (GNUNET_ERROR_TYPE_DEBUG,"No existing connection & forced address: creating new connection to peer %s\n", GNUNET_i2s(target));
1644       if (force_address != GNUNET_YES)
1645         GNUNET_log (GNUNET_ERROR_TYPE_DEBUG,"No existing connection: creating new connection to peer %s\n", GNUNET_i2s(target));
1646
1647       ps = GNUNET_malloc(sizeof (struct Session));
1648       if ((addrlen!=0) && (addr!=NULL))
1649       {
1650       ps->addr = GNUNET_malloc(addrlen);
1651       memcpy(ps->addr,addr,addrlen);
1652       ps->addrlen = addrlen;
1653       }
1654       else
1655       {
1656         ps->addr = NULL;
1657         ps->addrlen = 0;
1658       }
1659       ps->direction=OUTBOUND;
1660       ps->recv_connected = GNUNET_NO;
1661       ps->recv_force_disconnect = GNUNET_NO;
1662       ps->send_connected = GNUNET_NO;
1663       ps->send_force_disconnect = GNUNET_NO;
1664       ps->pending_msgs_head = NULL;
1665       ps->pending_msgs_tail = NULL;
1666       ps->peercontext=pc;
1667       ps->session_id = pc->session_id_counter;
1668       pc->session_id_counter++;
1669       ps->url = create_url (plugin, ps->addr, ps->addrlen, ps->session_id);
1670       if (ps->msgtok == NULL)
1671         ps->msgtok = GNUNET_SERVER_mst_create (&curl_receive_mst_cb, ps);
1672       GNUNET_CONTAINER_DLL_insert(pc->head,pc->tail,ps);
1673     }
1674     else
1675     {
1676       GNUNET_log (GNUNET_ERROR_TYPE_DEBUG,"No existing session & and no address given: no way to send this message to peer `%s'!\n", GNUNET_i2s(target));
1677       return GNUNET_SYSERR;
1678     }
1679   }
1680
1681   /* create msg */
1682   msg = GNUNET_malloc (sizeof (struct HTTP_Message) + msgbuf_size);
1683   msg->next = NULL;
1684   msg->size = msgbuf_size;
1685   msg->pos = 0;
1686   msg->buf = (char *) &msg[1];
1687   msg->transmit_cont = cont;
1688   msg->transmit_cont_cls = cont_cls;
1689   memcpy (msg->buf,msgbuf, msgbuf_size);
1690   GNUNET_CONTAINER_DLL_insert(ps->pending_msgs_head,ps->pending_msgs_tail,msg);
1691
1692   if (send_check_connections (plugin, ps) != GNUNET_SYSERR)
1693           return msg->size;
1694   else
1695           return GNUNET_SYSERR;
1696 }
1697
1698
1699
1700 /**
1701  * Function that can be used to force the plugin to disconnect
1702  * from the given peer and cancel all previous transmissions
1703  * (and their continuationc).
1704  *
1705  * @param cls closure
1706  * @param target peer from which to disconnect
1707  */
1708 static void
1709 http_plugin_disconnect (void *cls,
1710                             const struct GNUNET_PeerIdentity *target)
1711 {
1712
1713   struct Plugin *plugin = cls;
1714   struct HTTP_PeerContext *pc = NULL;
1715   struct Session *ps = NULL;
1716   //struct Session *tmp = NULL;
1717
1718   pc = GNUNET_CONTAINER_multihashmap_get (plugin->peers, &target->hashPubKey);
1719   if (pc==NULL)
1720     return;
1721   ps = pc->head;
1722
1723   while (ps!=NULL)
1724   {
1725         /* Telling transport that session is getting disconnected */
1726         plugin->env->session_end(plugin, target, ps);
1727     if (ps->direction==OUTBOUND)
1728     {
1729       if (ps->send_endpoint!=NULL)
1730       {
1731         //curl_multi_remove_handle(plugin->multi_handle,ps->send_endpoint);
1732         //curl_easy_cleanup(ps->send_endpoint);
1733         //ps->send_endpoint=NULL;
1734         ps->send_force_disconnect = GNUNET_YES;
1735       }
1736       if (ps->recv_endpoint!=NULL)
1737       {
1738        //curl_multi_remove_handle(plugin->multi_handle,ps->recv_endpoint);
1739        //curl_easy_cleanup(ps->recv_endpoint);
1740        //ps->recv_endpoint=NULL;
1741        ps->recv_force_disconnect = GNUNET_YES;
1742       }
1743     }
1744
1745     if (ps->direction==INBOUND)
1746     {
1747       ps->recv_force_disconnect = GNUNET_YES;
1748       ps->send_force_disconnect = GNUNET_YES;
1749     }
1750
1751     while (ps->pending_msgs_head!=NULL)
1752     {
1753       remove_http_message(ps, ps->pending_msgs_head);
1754     }
1755     ps->recv_active = GNUNET_NO;
1756     ps->send_active = GNUNET_NO;
1757     ps=ps->next;
1758   }
1759 }
1760
1761
1762 /**
1763  * Convert the transports address to a nice, human-readable
1764  * format.
1765  *
1766  * @param cls closure
1767  * @param type name of the transport that generated the address
1768  * @param addr one of the addresses of the host, NULL for the last address
1769  *        the specific address format depends on the transport
1770  * @param addrlen length of the address
1771  * @param numeric should (IP) addresses be displayed in numeric form?
1772  * @param timeout after how long should we give up?
1773  * @param asc function to call on each string
1774  * @param asc_cls closure for asc
1775  */
1776 static void
1777 http_plugin_address_pretty_printer (void *cls,
1778                                         const char *type,
1779                                         const void *addr,
1780                                         size_t addrlen,
1781                                         int numeric,
1782                                         struct GNUNET_TIME_Relative timeout,
1783                                         GNUNET_TRANSPORT_AddressStringCallback
1784                                         asc, void *asc_cls)
1785 {
1786   const struct IPv4HttpAddress *t4;
1787   const struct IPv6HttpAddress *t6;
1788   struct sockaddr_in a4;
1789   struct sockaddr_in6 a6;
1790   char * address;
1791   char * ret;
1792   unsigned int port;
1793   unsigned int res;
1794
1795   GNUNET_assert(cls !=NULL);
1796   if (addrlen == sizeof (struct IPv6HttpAddress))
1797   {
1798     address = GNUNET_malloc (INET6_ADDRSTRLEN);
1799     t6 = addr;
1800     a6.sin6_addr = t6->ipv6_addr;
1801     inet_ntop(AF_INET6, &(a6.sin6_addr),address,INET6_ADDRSTRLEN);
1802     port = ntohs(t6->u6_port);
1803   }
1804   else if (addrlen == sizeof (struct IPv4HttpAddress))
1805   {
1806     address = GNUNET_malloc (INET_ADDRSTRLEN);
1807     t4 = addr;
1808     a4.sin_addr.s_addr =  t4->ipv4_addr;
1809     inet_ntop(AF_INET, &(a4.sin_addr),address,INET_ADDRSTRLEN);
1810     port = ntohs(t4->u_port);
1811   }
1812   else
1813   {
1814     /* invalid address */
1815     GNUNET_break_op (0);
1816     asc (asc_cls, NULL);
1817     return;
1818   }
1819   res = GNUNET_asprintf(&ret,"http://%s:%u/",address,port);
1820   GNUNET_free (address);
1821   GNUNET_assert(res != 0);
1822
1823   asc (asc_cls, ret);
1824 }
1825
1826
1827
1828 /**
1829  * Another peer has suggested an address for this
1830  * peer and transport plugin.  Check that this could be a valid
1831  * address.  If so, consider adding it to the list
1832  * of addresses.
1833  *
1834  * @param cls closure
1835  * @param addr pointer to the address
1836  * @param addrlen length of addr
1837  * @return GNUNET_OK if this is a plausible address for this peer
1838  *         and transport
1839  */
1840 static int
1841 http_plugin_address_suggested (void *cls,
1842                                const void *addr, size_t addrlen)
1843 {
1844   struct Plugin *plugin = cls;
1845   struct IPv4HttpAddress *v4;
1846   struct IPv6HttpAddress *v6;
1847   unsigned int port;
1848
1849   GNUNET_assert(cls !=NULL);
1850   if ((addrlen != sizeof (struct IPv4HttpAddress)) &&
1851       (addrlen != sizeof (struct IPv6HttpAddress)))
1852     {
1853       return GNUNET_SYSERR;
1854     }
1855   if (addrlen == sizeof (struct IPv4HttpAddress))
1856     {
1857       v4 = (struct IPv4HttpAddress *) addr;
1858       if (INADDR_LOOPBACK == ntohl(v4->ipv4_addr))
1859       {
1860         return GNUNET_SYSERR;
1861       }
1862       port = ntohs (v4->u_port);
1863       if (port != plugin->port_inbound)
1864       {
1865         return GNUNET_SYSERR;
1866       }
1867     }
1868   if (addrlen == sizeof (struct IPv6HttpAddress))
1869     {
1870       v6 = (struct IPv6HttpAddress *) addr;
1871       if (IN6_IS_ADDR_LINKLOCAL (&v6->ipv6_addr))
1872         {
1873           return GNUNET_SYSERR;
1874         }
1875       port = ntohs (v6->u6_port);
1876       if (port != plugin->port_inbound)
1877       {
1878         return GNUNET_SYSERR;
1879       }
1880     }
1881
1882   return GNUNET_OK;
1883 }
1884
1885
1886 /**
1887  * Function called for a quick conversion of the binary address to
1888  * a numeric address.  Note that the caller must not free the
1889  * address and that the next call to this function is allowed
1890  * to override the address again.
1891  *
1892  * @param cls closure
1893  * @param addr binary address
1894  * @param addrlen length of the address
1895  * @return string representing the same address
1896  */
1897 static const char*
1898 http_plugin_address_to_string (void *cls,
1899                                    const void *addr,
1900                                    size_t addrlen)
1901 {
1902   const struct IPv4HttpAddress *t4;
1903   const struct IPv6HttpAddress *t6;
1904   struct sockaddr_in a4;
1905   struct sockaddr_in6 a6;
1906   char * address;
1907   char * ret;
1908   uint16_t port;
1909   unsigned int res;
1910
1911   if (addrlen == sizeof (struct IPv6HttpAddress))
1912     {
1913       address = GNUNET_malloc (INET6_ADDRSTRLEN);
1914       t6 = addr;
1915       a6.sin6_addr = t6->ipv6_addr;
1916       inet_ntop(AF_INET6, &(a6.sin6_addr),address,INET6_ADDRSTRLEN);
1917       port = ntohs(t6->u6_port);
1918     }
1919   else if (addrlen == sizeof (struct IPv4HttpAddress))
1920     {
1921       address = GNUNET_malloc (INET_ADDRSTRLEN);
1922       t4 = addr;
1923       a4.sin_addr.s_addr =  t4->ipv4_addr;
1924       inet_ntop(AF_INET, &(a4.sin_addr),address,INET_ADDRSTRLEN);
1925       port = ntohs(t4->u_port);
1926     }
1927   else
1928     {
1929       /* invalid address */
1930       return NULL;
1931     }
1932   res = GNUNET_asprintf(&ret,"%s:%u",address,port);
1933   GNUNET_free (address);
1934   GNUNET_assert(res != 0);
1935   return ret;
1936 }
1937
1938 /**
1939  * Add the IP of our network interface to the list of
1940  * our external IP addresses.
1941  *
1942  * @param cls the 'struct Plugin*'
1943  * @param name name of the interface
1944  * @param isDefault do we think this may be our default interface
1945  * @param addr address of the interface
1946  * @param addrlen number of bytes in addr
1947  * @return GNUNET_OK to continue iterating
1948  */
1949 static int
1950 process_interfaces (void *cls,
1951                     const char *name,
1952                     int isDefault,
1953                     const struct sockaddr *addr, socklen_t addrlen)
1954 {
1955   struct Plugin *plugin = cls;
1956   struct IPv4HttpAddress * t4;
1957   struct IPv6HttpAddress * t6;
1958   int af;
1959
1960   GNUNET_assert(cls !=NULL);
1961   af = addr->sa_family;
1962   if (af == AF_INET)
1963     {
1964       t4 = GNUNET_malloc(sizeof(struct IPv4HttpAddress));
1965       if (INADDR_LOOPBACK == ntohl(((struct sockaddr_in *) addr)->sin_addr.s_addr))
1966       {
1967         /* skip loopback addresses */
1968         return GNUNET_OK;
1969       }
1970       t4->ipv4_addr = ((struct sockaddr_in *) addr)->sin_addr.s_addr;
1971       t4->u_port = htons (plugin->port_inbound);
1972       plugin->env->notify_address(plugin->env->cls,"http",t4, sizeof (struct IPv4HttpAddress), GNUNET_TIME_UNIT_FOREVER_REL);
1973
1974     }
1975   else if (af == AF_INET6)
1976     {
1977       t6 = GNUNET_malloc(sizeof(struct IPv6HttpAddress));
1978       if (IN6_IS_ADDR_LINKLOCAL (&((struct sockaddr_in6 *) addr)->sin6_addr))
1979         {
1980           /* skip link local addresses */
1981           return GNUNET_OK;
1982         }
1983       if (IN6_IS_ADDR_LOOPBACK (&((struct sockaddr_in6 *) addr)->sin6_addr))
1984         {
1985           /* skip loopback addresses */
1986           return GNUNET_OK;
1987         }
1988       memcpy (&t6->ipv6_addr,
1989               &((struct sockaddr_in6 *) addr)->sin6_addr,
1990               sizeof (struct in6_addr));
1991       t6->u6_port = htons (plugin->port_inbound);
1992       plugin->env->notify_address(plugin->env->cls,"http",t6,sizeof (struct IPv6HttpAddress) , GNUNET_TIME_UNIT_FOREVER_REL);
1993     }
1994   return GNUNET_OK;
1995 }
1996
1997 int remove_peer_context_Iterator (void *cls, const GNUNET_HashCode *key, void *value)
1998 {
1999   struct HTTP_PeerContext * pc = value;
2000   struct Session * ps = pc->head;
2001   struct Session * tmp = NULL;
2002   struct HTTP_Message * msg = NULL;
2003   struct HTTP_Message * msg_tmp = NULL;
2004
2005   GNUNET_log (GNUNET_ERROR_TYPE_DEBUG,"Freeing context for peer `%s'\n",GNUNET_i2s(&pc->identity));
2006
2007   while (ps!=NULL)
2008   {
2009     tmp = ps->next;
2010
2011     GNUNET_free_non_null (ps->addr);
2012     GNUNET_free(ps->url);
2013     if (ps->msgtok != NULL)
2014       GNUNET_SERVER_mst_destroy (ps->msgtok);
2015
2016     msg = ps->pending_msgs_head;
2017     while (msg!=NULL)
2018     {
2019       msg_tmp = msg->next;
2020       GNUNET_free(msg);
2021       msg = msg_tmp;
2022     }
2023     if (ps->direction==OUTBOUND)
2024     {
2025       if (ps->send_endpoint!=NULL)
2026         curl_easy_cleanup(ps->send_endpoint);
2027       if (ps->recv_endpoint!=NULL)
2028         curl_easy_cleanup(ps->recv_endpoint);
2029     }
2030
2031     GNUNET_free(ps);
2032     ps=tmp;
2033   }
2034   GNUNET_free(pc);
2035   return GNUNET_YES;
2036 }
2037
2038
2039 /**
2040  * Exit point from the plugin.
2041  */
2042 void *
2043 libgnunet_plugin_transport_http_done (void *cls)
2044 {
2045   struct GNUNET_TRANSPORT_PluginFunctions *api = cls;
2046   struct Plugin *plugin = api->cls;
2047   CURLMcode mret;
2048
2049   GNUNET_assert(cls !=NULL);
2050
2051   if (plugin->http_server_daemon_v4 != NULL)
2052   {
2053     MHD_stop_daemon (plugin->http_server_daemon_v4);
2054     plugin->http_server_daemon_v4 = NULL;
2055   }
2056   if (plugin->http_server_daemon_v6 != NULL)
2057   {
2058     MHD_stop_daemon (plugin->http_server_daemon_v6);
2059     plugin->http_server_daemon_v6 = NULL;
2060   }
2061
2062
2063
2064   if ( plugin->http_server_task_v4 != GNUNET_SCHEDULER_NO_TASK)
2065   {
2066     GNUNET_SCHEDULER_cancel(plugin->env->sched, plugin->http_server_task_v4);
2067     plugin->http_server_task_v4 = GNUNET_SCHEDULER_NO_TASK;
2068   }
2069
2070   if ( plugin->http_server_task_v6 != GNUNET_SCHEDULER_NO_TASK)
2071   {
2072     GNUNET_SCHEDULER_cancel(plugin->env->sched, plugin->http_server_task_v6);
2073     plugin->http_server_task_v6 = GNUNET_SCHEDULER_NO_TASK;
2074   }
2075
2076   if ( plugin->http_curl_task != GNUNET_SCHEDULER_NO_TASK)
2077   {
2078     GNUNET_SCHEDULER_cancel(plugin->env->sched, plugin->http_curl_task);
2079     plugin->http_curl_task = GNUNET_SCHEDULER_NO_TASK;
2080   }
2081
2082   /* free all peer information */
2083   if (plugin->peers!=NULL)
2084   {
2085           GNUNET_CONTAINER_multihashmap_iterate (plugin->peers,
2086                                                                                          &remove_peer_context_Iterator,
2087                                                                                          NULL);
2088           GNUNET_CONTAINER_multihashmap_destroy (plugin->peers);
2089   }
2090   if (plugin->multi_handle!=NULL)
2091   {
2092           mret = curl_multi_cleanup(plugin->multi_handle);
2093           if ( CURLM_OK != mret)
2094                 GNUNET_log (GNUNET_ERROR_TYPE_DEBUG,"curl multihandle clean up failed\n");
2095           plugin->multi_handle = NULL;
2096   }
2097   GNUNET_free (plugin);
2098   GNUNET_free (api);
2099   GNUNET_log (GNUNET_ERROR_TYPE_DEBUG,"Unload http plugin complete...\n");
2100   return NULL;
2101 }
2102
2103
2104 /**
2105  * Entry point for the plugin.
2106  */
2107 void *
2108 libgnunet_plugin_transport_http_init (void *cls)
2109 {
2110   struct GNUNET_TRANSPORT_PluginEnvironment *env = cls;
2111   struct Plugin *plugin;
2112   struct GNUNET_TRANSPORT_PluginFunctions *api;
2113   struct GNUNET_TIME_Relative gn_timeout;
2114   long long unsigned int port;
2115
2116   GNUNET_assert(cls !=NULL);
2117   GNUNET_log (GNUNET_ERROR_TYPE_DEBUG,"Starting http plugin...\n");
2118
2119   plugin = GNUNET_malloc (sizeof (struct Plugin));
2120   plugin->env = env;
2121   plugin->peers = NULL;
2122
2123   api = GNUNET_malloc (sizeof (struct GNUNET_TRANSPORT_PluginFunctions));
2124   api->cls = plugin;
2125   api->send = &http_plugin_send;
2126   api->disconnect = &http_plugin_disconnect;
2127   api->address_pretty_printer = &http_plugin_address_pretty_printer;
2128   api->check_address = &http_plugin_address_suggested;
2129   api->address_to_string = &http_plugin_address_to_string;
2130
2131   /* Hashing our identity to use it in URLs */
2132   GNUNET_CRYPTO_hash_to_enc ( &(plugin->env->my_identity->hashPubKey), &plugin->my_ascii_hash_ident);
2133
2134   /* Reading port number from config file */
2135   if ((GNUNET_OK !=
2136        GNUNET_CONFIGURATION_get_value_number (env->cfg,
2137                                               "transport-http",
2138                                               "PORT",
2139                                               &port)) ||
2140       (port > 65535) )
2141     {
2142       GNUNET_log_from (GNUNET_ERROR_TYPE_ERROR,
2143                        "http",
2144                        _
2145                        ("Require valid port number for transport plugin `%s' in configuration!\n"),
2146                        "transport-http");
2147       libgnunet_plugin_transport_http_done (api);
2148       return NULL;
2149     }
2150   GNUNET_assert ((port > 0) && (port <= 65535));
2151   plugin->port_inbound = port;
2152   gn_timeout = GNUNET_CONSTANTS_IDLE_CONNECTION_TIMEOUT;
2153   unsigned int timeout = (gn_timeout.value) / 1000;
2154   if ((plugin->http_server_daemon_v4 == NULL) && (plugin->http_server_daemon_v6 == NULL) && (port != 0))
2155     {
2156     plugin->http_server_daemon_v6 = MHD_start_daemon (
2157 #if DEBUG_HTTP
2158                                                                    MHD_USE_DEBUG |
2159 #endif
2160                                                                    MHD_USE_IPv6,
2161                                        port,
2162                                        &mhd_accept_cb,
2163                                        plugin , &mdh_access_cb, plugin,
2164                                        MHD_OPTION_CONNECTION_LIMIT, (unsigned int) 32,
2165                                        MHD_OPTION_PER_IP_CONNECTION_LIMIT, (unsigned int) 6,
2166                                        MHD_OPTION_CONNECTION_TIMEOUT, (unsigned int) timeout,
2167                                        MHD_OPTION_CONNECTION_MEMORY_LIMIT, (size_t) (16 * 1024),
2168                                        MHD_OPTION_NOTIFY_COMPLETED, &mhd_termination_cb, NULL,
2169                                        MHD_OPTION_END);
2170     plugin->http_server_daemon_v4 = MHD_start_daemon (
2171 #if DEBUG_HTTP
2172                                                                    MHD_USE_DEBUG |
2173 #endif
2174                                                                    MHD_NO_FLAG,
2175                                        port,
2176                                        &mhd_accept_cb,
2177                                        plugin , &mdh_access_cb, plugin,
2178                                        MHD_OPTION_CONNECTION_LIMIT, (unsigned int) 32,
2179                                        MHD_OPTION_PER_IP_CONNECTION_LIMIT, (unsigned int) 6,
2180                                        MHD_OPTION_CONNECTION_TIMEOUT, (unsigned int) timeout,
2181                                        MHD_OPTION_CONNECTION_MEMORY_LIMIT, (size_t) (16 * 1024),
2182                                        MHD_OPTION_NOTIFY_COMPLETED, &mhd_termination_cb, NULL,
2183                                        MHD_OPTION_END);
2184     }
2185   if (plugin->http_server_daemon_v4 != NULL)
2186     plugin->http_server_task_v4 = http_server_daemon_prepare (plugin, plugin->http_server_daemon_v4);
2187   if (plugin->http_server_daemon_v6 != NULL)
2188     plugin->http_server_task_v6 = http_server_daemon_prepare (plugin, plugin->http_server_daemon_v6);
2189
2190   if (plugin->http_server_task_v4 != GNUNET_SCHEDULER_NO_TASK)
2191     GNUNET_log (GNUNET_ERROR_TYPE_DEBUG,"Starting MHD with IPv4 on port %u\n",port);
2192   else if (plugin->http_server_task_v6 != GNUNET_SCHEDULER_NO_TASK)
2193     GNUNET_log (GNUNET_ERROR_TYPE_DEBUG,"Starting MHD with IPv4 and IPv6 on port %u\n",port);
2194   else
2195   {
2196     GNUNET_log (GNUNET_ERROR_TYPE_DEBUG,"No MHD was started, transport plugin not functional!\n");
2197     libgnunet_plugin_transport_http_done (api);
2198     return NULL;
2199   }
2200
2201   /* Initializing cURL */
2202   curl_global_init(CURL_GLOBAL_ALL);
2203   plugin->multi_handle = curl_multi_init();
2204
2205   if ( NULL == plugin->multi_handle )
2206   {
2207     GNUNET_log_from (GNUNET_ERROR_TYPE_ERROR,
2208                      "http",
2209                      _("Could not initialize curl multi handle, failed to start http plugin!\n"),
2210                      "transport-http");
2211     libgnunet_plugin_transport_http_done (api);
2212     return NULL;
2213   }
2214
2215   plugin->peers = GNUNET_CONTAINER_multihashmap_create (10);
2216   GNUNET_OS_network_interfaces_list (&process_interfaces, plugin);
2217
2218   return api;
2219 }
2220
2221 /* end of plugin_transport_http.c */