- proper service-side error reporting for the SP API
[oweals/gnunet.git] / src / scalarproduct / scalarproduct_api.c
index 4f8cde8fe31577a0508c1451152db56fe209a3a5..9c497129a71d820c8a845088241dcfba12afbc32 100644 (file)
@@ -4,7 +4,7 @@
 
      GNUnet is free software; you can redistribute it and/or modify
      it under the terms of the GNU General Public License as published
-     by the Free Software Foundation; either version 2, or (at your
+     by the Free Software Foundation; either version 3, or (at your
      option) any later version.
 
      GNUnet is distributed in the hope that it will be useful, but
  */
 
 /**
- * @file vectorproduct/vectorproduct_api.c
- * @brief API for the vectorproduct
+ * @file scalarproduct/scalarproduct_api.c
+ * @brief API for the scalarproduct
  * @author Christian Fuchs
  * @author Gaurav Kukreja
- * 
+ *
  */
 #include "platform.h"
 #include "gnunet_util_lib.h"
 #include "gnunet_statistics_service.h"
-#include "gnunet_vectorproduct_service.h"
+#include "gnunet_scalarproduct_service.h"
 #include "gnunet_protocols.h"
+#include "scalarproduct.h"
 
-#define LOG(kind,...) GNUNET_log_from (kind, "vectorproduct-api",__VA_ARGS__)
+#define LOG(kind,...) GNUNET_log_from (kind, "scalarproduct-api",__VA_ARGS__)
 
 /**************************************************************
  ***  Datatype Declarations                          **********
  **************************************************************/
 
 /**
- * Entry in the request queue per client
+ * the abstraction function for our internal callback
+ */
+typedef void (*GNUNET_SCALARPRODUCT_ResponseMessageHandler) (void *cls,
+                                                             const struct GNUNET_MessageHeader *msg,
+                                                             enum GNUNET_SCALARPRODUCT_ResponseStatus status);
+
+/**
+ * A handle returned for each computation
  */
-struct GNUNET_VECTORPRODUCT_QueueEntry
+struct GNUNET_SCALARPRODUCT_ComputationHandle
 {
   /**
-   * This is a linked list.
+   * Our configuration.
    */
-  struct GNUNET_VECTORPRODUCT_QueueEntry *next;
+  const struct GNUNET_CONFIGURATION_Handle *cfg;
 
   /**
-   * This is a linked list.
+   * Current connection to the scalarproduct service.
    */
-  struct GNUNET_VECTORPRODUCT_QueueEntry *prev;
+  struct GNUNET_CLIENT_Connection *client;
 
   /**
-   * Handle to the master context.
+   * Handle for statistics.
    */
-  struct GNUNET_VECTORPRODUCT_Handle *h;
+  struct GNUNET_STATISTICS_Handle *stats;
 
   /**
-   * Size of the message
+   * The shared session key identifying this computation
    */
-  uint16_t message_size;
+  struct GNUNET_HashCode key;
 
   /**
-   * Message to be sent to the vectorproduct service
+   * Current transmit handle.
    */
-  struct GNUNET_VECTORPRODUCT_client_request* msg;
+  struct GNUNET_CLIENT_TransmitHandle *th;
 
-  union
-  {
-    /**
-     * Function to call after transmission of the request.
-     */
-    GNUNET_VECTORPRODUCT_ContinuationWithStatus cont_status;
-
-    /**
-     * Function to call after transmission of the request.
-     */
-    GNUNET_VECTORPRODUCT_DatumProcessor cont_datum;
-  };
+  /**
+   * count of all elements we offer for computation
+   */
+  uint32_t element_count_total;
 
   /**
-   * Closure for 'cont'.
+   * count of the transfered elements we offer for computation
    */
-  void *cont_cls;
+  uint32_t element_count_transfered;
+  
+  /**
+   * the client's elements which 
+   */
+  struct GNUNET_SCALARPRODUCT_Element * elements;
+  
+  /**
+   * Message to be sent to the scalarproduct service
+   */
+  void * msg;
 
   /**
-   * Has this message been transmitted to the service?
-   * Only ever GNUNET_YES for the head of the queue.
-   * Note that the overall struct should end at a
-   * multiple of 64 bits.
+   * The client's msg handler callback
+   */
+  union
+  {
+  /**
+   * Function to call after transmission of the request (Bob).
    */
-  int16_t was_transmitted;
+  GNUNET_SCALARPRODUCT_ContinuationWithStatus cont_status;
 
   /**
-   * Timeout for the current operation.
+   * Function to call after transmission of the request (Alice).
    */
-  struct GNUNET_TIME_Absolute timeout;
+  GNUNET_SCALARPRODUCT_DatumProcessor cont_datum;
+  };
 
   /**
-   * Task for timeout signaling.
+   * Closure for 'cont'.
    */
-  GNUNET_SCHEDULER_TaskIdentifier timeout_task;
+  void *cont_cls;
 
   /**
-   * Response Processor for response from the service. This function calls the
-   * continuation function provided by the client.
+   * API internal callback for results and failures to be forwarded to the client
    */
-  GNUNET_VECTORPRODUCT_ResponseMessageHandler response_proc;
+  GNUNET_SCALARPRODUCT_ResponseMessageHandler response_proc;
+  
+  /**
+   * 
+   */
+  GNUNET_SCHEDULER_TaskIdentifier cont_multipart;
 };
 
 /**************************************************************
- ***  Function Declarations                          **********
+ ***  Forward Function Declarations                          **********
  **************************************************************/
 
-/**
- * Creates a new entry at the tail of the DLL
- * 
- * @param h handle to the master context
- * 
- * @return pointer to the entry
- */
-static struct GNUNET_VECTORPRODUCT_QueueEntry *
-make_queue_entry (struct GNUNET_VECTORPRODUCT_Handle *h);
-
-/**
- * Removes the head entry from the queue
- * 
- * @param h Handle to the master context
- */
-static struct GNUNET_VECTORPRODUCT_QueueEntry *
-free_queue_head_entry (struct GNUNET_VECTORPRODUCT_Handle * h);
-
-/**
- * Triggered when timeout occurs for a request in queue
- * 
- * @param cls The pointer to the QueueEntry
- * @param tc Task Context
- */
-static void
-timeout_queue_entry (void *cls, const struct GNUNET_SCHEDULER_TaskContext *tc);
-
-/**
- * Called when a response is received from the service. After basic check
- * handler in qe->response_proc is called. This functions handles the response
- * to the client which used the API.
- * 
- * @param cls Pointer to the Master Context
- * @param msg Pointer to the data received in response
- */
-static void
-receive_cb (void *cls, const struct GNUNET_MessageHeader *msg);
-
-/**
- * Transmits the request to the VectorProduct Sevice
- * 
- * @param cls Closure
- * @param size Size of the buffer
- * @param buf Pointer to the buffer
- * 
- * @return Size of the message sent
- */
-static size_t transmit_request (void *cls, size_t size,
-                                void *buf);
-
-/**
- * Issues transmit request for the new entries in the queue
- * 
- * @param h handle to the master context
- */
-static void
-process_queue (struct GNUNET_VECTORPRODUCT_Handle *h);
+void
+GNUNET_SCALARPRODUCT_cancel (struct GNUNET_SCALARPRODUCT_ComputationHandle * h);
 
+static size_t do_send_message (void *cls, size_t size, void *buf);
 /**************************************************************
  ***  Static Function Declarations                   **********
  **************************************************************/
 
 
 /**
- * Creates a new entry at the tail of the DLL
- * 
- * @param h handle to the master context
- * 
- * @return pointer to the entry
- */
-static struct GNUNET_VECTORPRODUCT_QueueEntry *
-make_queue_entry (struct GNUNET_VECTORPRODUCT_Handle *h)
-{
-  struct GNUNET_VECTORPRODUCT_QueueEntry *qe;
-
-  qe = GNUNET_new (struct GNUNET_VECTORPRODUCT_QueueEntry);
-
-  // if queue empty
-  if (NULL == h->queue_head && NULL == h->queue_tail)
-    {
-      qe->next = NULL;
-      qe->prev = NULL;
-      h->queue_head = qe;
-      h->queue_tail = qe;
-    }
-  else
-    {
-      qe->prev = h->queue_tail;
-      h->queue_tail->next = qe;
-      h->queue_tail = qe;
-    }
-
-  return qe;
-}
-
-
-/**
- * Removes the head entry from the queue
- * 
- * @param h Handle to the master context
- */
-static struct GNUNET_VECTORPRODUCT_QueueEntry *
-free_queue_head_entry (struct GNUNET_VECTORPRODUCT_Handle * h)
-{
-  struct GNUNET_VECTORPRODUCT_QueueEntry * qe = NULL;
-
-  GNUNET_assert (NULL != h);
-  if (NULL == h->queue_head && NULL == h->queue_tail)
-    {
-      // The queue is empty. Just return.
-      LOG (GNUNET_ERROR_TYPE_DEBUG, "Queue was empty when free_queue_head_entry was called.\n");
-    }
-  else if (h->queue_head == h->queue_tail) //only one entry
-    {
-      qe = h->queue_head;
-      qe->next = NULL;
-      qe->prev = NULL;
-      h->queue_head = NULL;
-      h->queue_tail = NULL;
-    }
-  else
-    {
-      qe = h->queue_head;
-      h->queue_head = h->queue_head->next;
-      h->queue_head->prev = NULL;
-      qe->next = NULL;
-      qe->prev = NULL;
-    }
-  return qe;
-}
-
-
-/**
- * Triggered when timeout occurs for a request in queue
- * 
- * @param cls The pointer to the QueueEntry
- * @param tc Task Context
- */
-static void
-timeout_queue_entry (void *cls, const struct GNUNET_SCHEDULER_TaskContext *tc)
-{
-  struct GNUNET_VECTORPRODUCT_QueueEntry * qe = cls;
-
-  // Update Statistics
-  GNUNET_STATISTICS_update (qe->h->stats,
-                            gettext_noop ("# queue entry timeouts"), 1,
-                            GNUNET_NO);
-
-  // Clear the timeout_task
-  qe->timeout_task = GNUNET_SCHEDULER_NO_TASK;
-
-  // transmit_request is supposed to cancel timeout task.
-  // If message was not transmitted, there is definitely an error.
-  GNUNET_assert (GNUNET_NO == qe->was_transmitted);
-
-  LOG (GNUNET_ERROR_TYPE_INFO, "Timeout of request in datastore queue\n");
-
-  // remove the queue_entry for the queue
-  GNUNET_CONTAINER_DLL_remove (qe->h->queue_head, qe->h->queue_tail, qe);
-  qe->response_proc (qe, NULL, GNUNET_VECTORPRODUCT_Status_Timeout);
-}
-
-
-/**
- * Handles the RESULT received in reply of prepare_response from the 
- * service
- * 
- * @param cls Handle to the Master Context
+ * Handles the STATUS received from the service for a response, does not contain a payload
+ *
+ * @param cls our Handle
  * @param msg Pointer to the response received
+ * @param status the condition the request was terminated with (eg: disconnect)
  */
 static void
 process_status_message (void *cls,
                         const struct GNUNET_MessageHeader *msg,
-                        enum GNUNET_VECTORPRODUCT_ResponseStatus status)
+                        enum GNUNET_SCALARPRODUCT_ResponseStatus status)
 {
-  struct GNUNET_VECTORPRODUCT_QueueEntry *qe = cls;
-
-  GNUNET_assert (qe != NULL);
+  struct GNUNET_SCALARPRODUCT_ComputationHandle *qe = cls;
 
-  if (qe->cont_status != NULL)
-    qe->cont_status (qe->cont_cls, &qe->msg->key, status);
+  qe->cont_status (qe->cont_cls, status);
 }
 
 
 /**
- * Handles the RESULT received in reply of prepare_response from the 
- * service
- * 
- * @param cls Handle to the Master Context
+ * Handles the RESULT received from the service for a request, should contain a result MPI value
+ *
+ * @param cls our Handle
  * @param msg Pointer to the response received
+ * @param status the condition the request was terminated with (eg: disconnect)
  */
 static void
 process_result_message (void *cls,
                         const struct GNUNET_MessageHeader *msg,
-                        enum GNUNET_VECTORPRODUCT_ResponseStatus status)
+                        enum GNUNET_SCALARPRODUCT_ResponseStatus status)
 {
-  struct GNUNET_VECTORPRODUCT_QueueEntry *qe = cls;
-
-  GNUNET_assert (qe != NULL);
+  struct GNUNET_SCALARPRODUCT_ComputationHandle *qe = cls;
+  const struct GNUNET_SCALARPRODUCT_client_response *message =
+          (const struct GNUNET_SCALARPRODUCT_client_response *) msg;
+  gcry_mpi_t result = NULL;
+  gcry_error_t rc;
 
-  if (msg == NULL && qe->cont_datum != NULL)
-    {
-      LOG (GNUNET_ERROR_TYPE_DEBUG, "Timeout reached or session terminated.\n");
-    }
-  if (qe->cont_datum != NULL)
+  if (GNUNET_SCALARPRODUCT_Status_Success == status)
     {
-      qe->cont_datum (qe->cont_cls, &qe->msg->key, &qe->msg->peer, status, (struct GNUNET_VECTORPRODUCT_client_response *) msg);
+      size_t product_len = ntohl (message->product_length);
+      result = gcry_mpi_new (0);
+
+      if (0 < product_len)
+        {
+          gcry_mpi_t num;
+          size_t read = 0;
+
+          if (0 != (rc = gcry_mpi_scan (&num, GCRYMPI_FMT_STD, &message[1], product_len, &read)))
+            {
+              LOG_GCRY(GNUNET_ERROR_TYPE_ERROR, "gcry_mpi_scan", rc);
+              gcry_mpi_release (result);
+              result = NULL;
+              status = GNUNET_SCALARPRODUCT_Status_InvalidResponse;
+            }
+          else
+            {
+              if (0 < message->range)
+                gcry_mpi_add (result, result, num);
+              else if (0 > message->range)
+                gcry_mpi_sub (result, result, num);
+              gcry_mpi_release (num);
+            }
+        }
     }
+  qe->cont_datum (qe->cont_cls, status, result);
 }
 
 
 /**
- * Called when a response is received from the service. After basic check
+ * Called when a response is received from the service. After basic check, the
  * handler in qe->response_proc is called. This functions handles the response
  * to the client which used the API.
- * 
+ *
  * @param cls Pointer to the Master Context
  * @param msg Pointer to the data received in response
  */
 static void
 receive_cb (void *cls, const struct GNUNET_MessageHeader *msg)
 {
-  struct GNUNET_VECTORPRODUCT_Handle *h = cls;
-  struct GNUNET_VECTORPRODUCT_QueueEntry *qe;
-  int16_t was_transmitted;
-  struct GNUNET_VECTORPRODUCT_client_response *message =
-          (struct GNUNET_VECTORPRODUCT_client_response *) msg;
-
-  h->in_receive = GNUNET_NO;
-  LOG (GNUNET_ERROR_TYPE_DEBUG, "Received reply from VectorProduct\n");
-
-  if (NULL == (qe = free_queue_head_entry (h)))
-    {
-      /**
-       * The queue head will be NULL if the client disconnected,
-       * * In case of Alice, client disconnected after sending request, before receiving response
-       * * In case of Bob, client disconnected after preparing response, before getting request from Alice.
-       */
-      process_queue (h);
-      return;
-    }
-
-  if (h->client == NULL)
-    {
-      // GKUKREJA : handle this correctly
-      /**
-       * The queue head will be NULL if the client disconnected,
-       * * In case of Alice, client disconnected after sending request, before receiving response
-       * * In case of Bob, client disconnected after preparing response, before getting request from Alice.
-       */
-      process_queue (h);
-      return;
-    }
+  struct GNUNET_SCALARPRODUCT_ComputationHandle *h = cls;
+  const struct GNUNET_SCALARPRODUCT_client_response *message =
+          (const struct GNUNET_SCALARPRODUCT_client_response *) msg;
+  enum GNUNET_SCALARPRODUCT_ResponseStatus status = GNUNET_SCALARPRODUCT_Status_InvalidResponse;
 
-  was_transmitted = qe->was_transmitted;
-  // Control will only come here, when the request was transmitted to service,
-  // and service responded.
-  GNUNET_assert (was_transmitted == GNUNET_YES);
-
-  if (msg == NULL)
+  if (NULL == msg)
     {
-      LOG (GNUNET_ERROR_TYPE_WARNING, "Service responded with NULL!\n");
-      qe->response_proc (qe, NULL, GNUNET_VECTORPRODUCT_Status_Failure);
+      LOG (GNUNET_ERROR_TYPE_WARNING, "Disconnected by Service.\n");
+      status = GNUNET_SCALARPRODUCT_Status_ServiceDisconnected;
     }
-  else if ((ntohs (msg->type) != GNUNET_MESSAGE_TYPE_VECTORPRODUCT_SERVICE_TO_CLIENT))
-    {
-      LOG (GNUNET_ERROR_TYPE_WARNING, "Invalid Message Received\n");
-      qe->response_proc (qe, msg, GNUNET_VECTORPRODUCT_Status_InvalidResponse);
-    }
-  else if (ntohl (message->product_length) == 0)
+  else if ((GNUNET_SYSERR != message->status) && (0 < message->product_length ))
     {
       // response for the responder client, successful
       GNUNET_STATISTICS_update (h->stats,
                                 gettext_noop ("# SUC responder result messages received"), 1,
                                 GNUNET_NO);
 
-      LOG (GNUNET_ERROR_TYPE_DEBUG, "Received message from service without product attached.\n");
-      qe->response_proc (qe, msg, GNUNET_VECTORPRODUCT_Status_Success);
-    }
-  else if (ntohl (message->product_length) > 0)
-    {
-      // response for the requester client, successful
-      GNUNET_STATISTICS_update (h->stats,
-                                gettext_noop ("# SUC requester result messages received"), 1,
-                                GNUNET_NO);
-
-      LOG (GNUNET_ERROR_TYPE_DEBUG, "Received message from requester service for requester client.\n");
-      qe->response_proc (qe, msg, GNUNET_VECTORPRODUCT_Status_Success);
+      status = GNUNET_SCALARPRODUCT_Status_Success;
     }
+  else if (message->status == GNUNET_SYSERR){
+      // service signaled an error
+      status = GNUNET_SCALARPRODUCT_Status_Failure;
+  }
+  
+  if (h->cont_status != NULL)
+    h->response_proc (h, msg, status);
 
-  GNUNET_free (qe);
-  process_queue (h);
+  GNUNET_free (h);
 }
 
 
+static void
+send_multipart (void * cls, const struct GNUNET_SCHEDULER_TaskContext * tc)
+{
+  struct GNUNET_SCALARPRODUCT_ComputationHandle *h = (struct GNUNET_SCALARPRODUCT_ComputationHandle *) cls;
+  struct GNUNET_SCALARPRODUCT_computation_message_multipart *msg;
+  uint32_t size;
+  uint32_t todo;
+
+  h->cont_multipart = GNUNET_SCHEDULER_NO_TASK;
+
+  todo = h->element_count_total - h->element_count_transfered;
+  size = sizeof (struct GNUNET_SCALARPRODUCT_computation_message_multipart) +todo * sizeof (struct GNUNET_SCALARPRODUCT_Element);
+  if (GNUNET_SERVER_MAX_MESSAGE_SIZE <= size) {
+    //create a multipart msg, first we calculate a new msg size for the head msg
+    todo = (GNUNET_SERVER_MAX_MESSAGE_SIZE - 1 - sizeof (struct GNUNET_SCALARPRODUCT_computation_message_multipart)) / sizeof (struct GNUNET_SCALARPRODUCT_Element);
+    size = sizeof (struct GNUNET_SCALARPRODUCT_computation_message_multipart) +todo * sizeof (struct GNUNET_SCALARPRODUCT_Element);
+  }
+
+  msg = (struct GNUNET_SCALARPRODUCT_computation_message_multipart*) GNUNET_malloc (size);
+  h->msg = msg;
+  msg->header.size = htons (size);
+  msg->header.type = htons (GNUNET_MESSAGE_TYPE_SCALARPRODUCT_CLIENT_MUTLIPART);
+  msg->element_count_contained = htonl (todo);
+
+  memcpy (&msg[1], &h->elements[h->element_count_transfered], todo);
+  h->element_count_transfered += todo;
+
+  h->th = GNUNET_CLIENT_notify_transmit_ready (h->client, size,
+                                               GNUNET_TIME_UNIT_FOREVER_REL,
+                                               GNUNET_YES, // retry is OK in the initial stage
+                                               &do_send_message, h);
+
+  if (!h->th) {
+    LOG (GNUNET_ERROR_TYPE_ERROR,
+         _ ("Failed to send a multipart message to the scalarproduct service\n"));
+    GNUNET_STATISTICS_update (h->stats,
+                              gettext_noop ("# transmission request failures"),
+                              1, GNUNET_NO);
+    GNUNET_STATISTICS_destroy (h->stats, GNUNET_YES);
+    GNUNET_CLIENT_disconnect (h->client);
+    GNUNET_free (h->msg);
+    h->msg = NULL;
+    if (h->cont_status != NULL)
+      h->response_proc (h, NULL, GNUNET_SCALARPRODUCT_Status_Failure);
+
+    GNUNET_SCALARPRODUCT_cancel (cls);
+  }
+}
+
 /**
- * Transmits the request to the VectorProduct Sevice
- * 
+ * Transmits the request to the VectorProduct Service
+ *
  * @param cls Closure
  * @param size Size of the buffer
  * @param buf Pointer to the buffer
- * 
+ *
  * @return Size of the message sent
  */
 static size_t
-transmit_request (void *cls, size_t size,
-                  void *buf)
+do_send_message (void *cls, size_t size,
+                 void *buf)
 {
-  struct GNUNET_VECTORPRODUCT_Handle *h = cls;
-  struct GNUNET_VECTORPRODUCT_QueueEntry *qe;
-  size_t msize;
-  
-  if (NULL == (qe = h->queue_head))
-    {
-      LOG (GNUNET_ERROR_TYPE_DEBUG, "Queue head is NULL!\n\n");
-      return 0;
-    }
+  struct GNUNET_SCALARPRODUCT_ComputationHandle *h = cls;
 
-  GNUNET_SCHEDULER_cancel (qe->timeout_task);
-  qe->timeout_task = GNUNET_SCHEDULER_NO_TASK;
+  if (NULL == buf) {
+    LOG (GNUNET_ERROR_TYPE_DEBUG, "Failed to transmit request to SCALARPRODUCT.\n");
+    GNUNET_STATISTICS_update (h->stats,
+                              gettext_noop ("# transmission request failures"),
+                              1, GNUNET_NO);
 
-  h->th = NULL;
-  if (NULL == (qe = h->queue_head))
-    return 0; /* no entry in queue */
-  if (buf == NULL)
-    {
-      LOG (GNUNET_ERROR_TYPE_DEBUG, "Failed to transmit request to VECTORPRODUCT.\n");
-      GNUNET_STATISTICS_update (h->stats,
-                                gettext_noop ("# transmission request failures"),
-                                1, GNUNET_NO);
-      GNUNET_VECTORPRODUCT_disconnect (h);
-      return 0;
-    }
-  if (size < (msize = qe->message_size))
-    {
-      process_queue (h);
-      return 0;
-    }
-  LOG (GNUNET_ERROR_TYPE_DEBUG, "Transmitting %u byte request to VECTORPRODUCT\n",
-       msize);
-
-  memcpy (buf, qe->msg, size);
-  GNUNET_free (qe->msg);
-  qe->was_transmitted = GNUNET_YES;
+    // notify caller about the error, done here.
+    if (h->cont_status != NULL)
+      h->response_proc (h, NULL, GNUNET_SCALARPRODUCT_Status_Failure);
 
-  GNUNET_assert (GNUNET_NO == h->in_receive);
-  h->in_receive = GNUNET_YES;
+    GNUNET_SCALARPRODUCT_cancel (cls);
+    return 0;
+  }
+  memcpy (buf, h->msg, size);
 
-  GNUNET_CLIENT_receive (h->client, &receive_cb, h,
-                         GNUNET_TIME_UNIT_FOREVER_REL);
+  GNUNET_free (h->msg);
+  h->msg = NULL;
+  h->th = NULL;
 
 #if INSANE_STATISTICS
   GNUNET_STATISTICS_update (h->stats,
-                            gettext_noop ("# bytes sent to vectorproduct"), 1,
+                            gettext_noop ("# bytes sent to scalarproduct"), 1,
                             GNUNET_NO);
 #endif
-  return size;
-}
 
-
-/**
- * Issues transmit request for the new entries in the queue
- * 
- * @param h handle to the master context
- */
-static void
-process_queue (struct GNUNET_VECTORPRODUCT_Handle *h)
-{
-  struct GNUNET_VECTORPRODUCT_QueueEntry *qe;
+  /* done sending */
+  if (h->element_count_total == h->element_count_transfered) {
+    GNUNET_CLIENT_receive (h->client, &receive_cb, h,
+                           GNUNET_TIME_UNIT_FOREVER_REL);
+    return size;
+  }
   
-  if (NULL == (qe = h->queue_head))
-    {
-      LOG (GNUNET_ERROR_TYPE_DEBUG, "Queue empty\n");
-      return; /* no entry in queue */
-    }
-  if (qe->was_transmitted == GNUNET_YES)
-    {
-      LOG (GNUNET_ERROR_TYPE_DEBUG, "Head request already transmitted\n");
-      return; /* waiting for replies */
-    }
-  if (h->th != NULL)
-    {
-      LOG (GNUNET_ERROR_TYPE_DEBUG, "Pending transmission request\n");
-      return; /* request pending */
-    }
-  if (h->client == NULL)
-    {
-      LOG (GNUNET_ERROR_TYPE_DEBUG, "Not connected\n");
-      return; /* waiting for reconnect */
-    }
-  if (GNUNET_YES == h->in_receive)
-    {
-      /* wait for response to previous query */
-      return;
-    }
-
-  h->th =
-          GNUNET_CLIENT_notify_transmit_ready (h->client, qe->message_size,
-                                               GNUNET_TIME_UNIT_FOREVER_REL,
-                                               GNUNET_YES,
-                                               &transmit_request, h);
-
-  if (h->th == NULL)
-    {
-      LOG (GNUNET_ERROR_TYPE_ERROR,
-           _ ("Failed to send a message to the vectorproduct service\n"));
-      return;
-    }
-
-  GNUNET_assert (GNUNET_NO == h->in_receive);
-  GNUNET_break (NULL != h->th);
+  h->cont_multipart = GNUNET_SCHEDULER_add_now (&send_multipart, h);
+  
+  return size;
 }
 
 
-
 /**************************************************************
  ***  API                                            **********
  **************************************************************/
 
 
 /**
- * Called by the responder client to prepare response
- * 
- * @param h handle to the master context
- * @param key Session key - unique to the requesting client
- * @param element_count Number of elements in the vector
- * @param mask_length number of bytes in the mask
+ * Used by Bob's client to cooperate with Alice,
+ *
+ * @param cfg the gnunet configuration handle
+ * @param key Session key unique to the requesting client
  * @param elements Array of elements of the vector
- * @param mask Array of the mask
- * @param timeout Relative timeout for the operation
+ * @param element_count Number of elements in the vector
  * @param cont Callback function
  * @param cont_cls Closure for the callback function
+ *
+ * @return a new handle for this computation
  */
-struct GNUNET_VECTORPRODUCT_QueueEntry *
-GNUNET_VECTORPRODUCT_prepare_response (struct GNUNET_VECTORPRODUCT_Handle *h,
-                                       const struct GNUNET_HashCode * key,
-                                       uint16_t element_count,
-                                       int32_t * elements,
-                                       struct GNUNET_TIME_Relative timeout,
-                                       GNUNET_VECTORPRODUCT_ContinuationWithStatus cont,
-                                       void *cont_cls)
+struct GNUNET_SCALARPRODUCT_ComputationHandle *
+GNUNET_SCALARPRODUCT_accept_computation (const struct GNUNET_CONFIGURATION_Handle * cfg,
+                               const struct GNUNET_HashCode * session_key,
+                               const struct GNUNET_SCALARPRODUCT_Element * elements,
+                               uint32_t element_count,
+                               GNUNET_SCALARPRODUCT_ContinuationWithStatus cont,
+                               void * cont_cls)
 {
-  struct GNUNET_VECTORPRODUCT_QueueEntry *qe = make_queue_entry (h);
-  int32_t * vector;
-  uint16_t size;
-  unsigned int i;
-  
-  GNUNET_assert (GNUNET_SERVER_MAX_MESSAGE_SIZE >= sizeof (struct GNUNET_VECTORPRODUCT_client_request)
-                 +element_count * sizeof (int32_t));
-  size = sizeof (struct GNUNET_VECTORPRODUCT_client_request) +element_count * sizeof (int32_t);
-
-  qe->message_size = size;
-  qe->msg = GNUNET_malloc (size);
-  qe->msg->header.size = htons (size);
-  qe->msg->header.type = htons (GNUNET_MESSAGE_TYPE_VECTORPRODUCT_CLIENT_TO_BOB);
-  qe->msg->element_count = htons (element_count);
-  qe->msg->mask_length = htons (0);
-  memcpy (&qe->msg->key, key, sizeof (struct GNUNET_HashCode));
-  qe->cont_status = cont;
-  qe->cont_cls = cont_cls;
-  qe->was_transmitted = GNUNET_NO;
-  qe->timeout_task = GNUNET_SCHEDULER_add_delayed (timeout, &timeout_queue_entry, qe);
-  qe->response_proc = &process_status_message;
-  qe->timeout = GNUNET_TIME_relative_to_absolute (timeout);
-
-  vector = (int32_t *) & qe->msg[1];
-  // copy each element over to the message
-  for (i = 0; i < element_count; i++)
-    vector[i] = htonl (elements[i]);
-
-  process_queue (h);
-  return qe;
+  struct GNUNET_SCALARPRODUCT_ComputationHandle *h;
+  struct GNUNET_SCALARPRODUCT_computation_message *msg;
+  uint32_t size;
+  uint16_t possible;
+
+  GNUNET_assert (GNUNET_SERVER_MAX_MESSAGE_SIZE >= sizeof (struct GNUNET_SCALARPRODUCT_computation_message)
+                 + element_count * sizeof (int32_t));
+  h = GNUNET_new (struct GNUNET_SCALARPRODUCT_ComputationHandle);
+  h->client = GNUNET_CLIENT_connect ("scalarproduct", cfg);
+  if (!h->client)
+    {
+      LOG (GNUNET_ERROR_TYPE_ERROR,
+           _ ("Failed to connect to the scalarproduct service\n"));
+      GNUNET_free (h);
+      return NULL;
+    }
+  h->stats = GNUNET_STATISTICS_create ("scalarproduct-api", cfg);
+  if (!h->stats)
+    {
+      LOG (GNUNET_ERROR_TYPE_ERROR,
+           _ ("Failed to send a message to the statistics service\n"));
+      GNUNET_CLIENT_disconnect (h->client);
+      GNUNET_free (h);
+      return NULL;
+    }
+
+  h->element_count_total = element_count;
+  size = sizeof (struct GNUNET_SCALARPRODUCT_computation_message) + element_count * sizeof (struct GNUNET_SCALARPRODUCT_Element);
+  if (GNUNET_SERVER_MAX_MESSAGE_SIZE > size) {
+    possible = element_count;
+    h->element_count_transfered = element_count;
+  }
+  else {
+    //create a multipart msg, first we calculate a new msg size for the head msg
+    possible = (GNUNET_SERVER_MAX_MESSAGE_SIZE - 1 - sizeof (struct GNUNET_SCALARPRODUCT_computation_message)) / sizeof (struct GNUNET_SCALARPRODUCT_Element);
+    h->element_count_transfered = possible;
+    size = sizeof (struct GNUNET_SCALARPRODUCT_computation_message) + possible*sizeof (struct GNUNET_SCALARPRODUCT_Element);
+    h->elements = (struct GNUNET_SCALARPRODUCT_Element*) 
+            GNUNET_malloc (sizeof(struct GNUNET_SCALARPRODUCT_Element) * element_count);
+    memcpy (h->elements, elements, sizeof (struct GNUNET_SCALARPRODUCT_Element)*element_count);
+  }
+
+  h->cont_status = cont;
+  h->cont_cls = cont_cls;
+  h->response_proc = &process_status_message;
+  h->cfg = cfg;
+  memcpy (&h->key, session_key, sizeof (struct GNUNET_HashCode));
+
+  msg = (struct GNUNET_SCALARPRODUCT_computation_message*) GNUNET_malloc (size);
+  h->msg = msg;
+  msg->header.size = htons (size);
+  msg->header.type = htons (GNUNET_MESSAGE_TYPE_SCALARPRODUCT_CLIENT_TO_BOB);
+  msg->element_count_total = htonl (element_count);
+  msg->element_count_contained = htonl (possible);
+
+  memcpy (&msg->session_key, session_key, sizeof (struct GNUNET_HashCode));
+  memcpy (&msg[1], elements, possible);
+
+  h->th = GNUNET_CLIENT_notify_transmit_ready (h->client, size,
+                                               GNUNET_TIME_UNIT_FOREVER_REL,
+                                               GNUNET_YES, // retry is OK in the initial stage
+                                               &do_send_message, h);
+  if (!h->th)
+    {
+      LOG (GNUNET_ERROR_TYPE_ERROR,
+           _ ("Failed to send a message to the scalarproduct service\n"));
+      GNUNET_STATISTICS_update (h->stats,
+                              gettext_noop ("# transmission request failures"),
+                              1, GNUNET_NO);
+      GNUNET_STATISTICS_destroy (h->stats, GNUNET_YES);
+      GNUNET_CLIENT_disconnect (h->client);
+      GNUNET_free (h->msg);
+      GNUNET_free_non_null (h->elements);
+      GNUNET_free (h);
+      return NULL;
+    }
+  return h;
 }
 
 
 /**
- * Request the Scalar Product Evaluation
- * 
- * @param h handle to the master context
- * @param key Session key - unique to the requesting client
+ * Request by Alice's client for computing a scalar product
+ *
+ * @param cfg the gnunet configuration handle
+ * @param session_key Session key should be unique to the requesting client
  * @param peer PeerID of the other peer
- * @param element_count Number of elements in the vector
- * @param mask_length number of bytes in the mask
  * @param elements Array of elements of the vector
- * @param mask Array of the mask
- * @param timeout Relative timeout for the operation
+ * @param element_count Number of elements in the vector
  * @param cont Callback function
  * @param cont_cls Closure for the callback function
+ *
+ * @return a new handle for this computation
  */
-struct GNUNET_VECTORPRODUCT_QueueEntry *
-GNUNET_VECTORPRODUCT_request (struct GNUNET_VECTORPRODUCT_Handle *h,
-                              const struct GNUNET_HashCode * key,
-                              const struct GNUNET_PeerIdentity * peer,
-                              uint16_t element_count,
-                              uint16_t mask_length,
-                              int32_t * elements,
-                              const unsigned char * mask,
-                              struct GNUNET_TIME_Relative timeout,
-                              GNUNET_VECTORPRODUCT_DatumProcessor cont,
-                              void *cont_cls)
+struct GNUNET_SCALARPRODUCT_ComputationHandle *
+GNUNET_SCALARPRODUCT_start_computation (const struct GNUNET_CONFIGURATION_Handle * cfg,
+                              const struct GNUNET_HashCode * session_key,
+                              const struct GNUNET_PeerIdentity *peer,
+                              const struct GNUNET_SCALARPRODUCT_Element * elements,
+                              uint32_t element_count,
+                              GNUNET_SCALARPRODUCT_DatumProcessor cont,
+                              void * cont_cls)
 {
-  struct GNUNET_VECTORPRODUCT_QueueEntry *qe = make_queue_entry (h);
-  int32_t * vector;
-  uint16_t size;
-  unsigned int i;
-  
-  GNUNET_assert (GNUNET_SERVER_MAX_MESSAGE_SIZE >= sizeof (struct GNUNET_VECTORPRODUCT_client_request)
-                 +element_count * sizeof (int32_t)
-                 + mask_length);
-  size = sizeof (struct GNUNET_VECTORPRODUCT_client_request) +element_count * sizeof (int32_t) + mask_length;
-
-  qe->message_size = size;
-  qe->msg = GNUNET_malloc (size);
-  qe->msg->header.size = htons (size);
-  qe->msg->header.type = htons (GNUNET_MESSAGE_TYPE_VECTORPRODUCT_CLIENT_TO_ALICE);
-  memcpy (&qe->msg->peer, peer, sizeof (struct GNUNET_PeerIdentity));
-  qe->msg->element_count = htons (element_count);
-  qe->msg->mask_length = htons (mask_length);
-  memcpy (&qe->msg->key, key, sizeof (struct GNUNET_HashCode));
-  qe->cont_datum = cont;
-  qe->cont_cls = cont_cls;
-  qe->was_transmitted = GNUNET_NO;
-  qe->timeout_task = GNUNET_SCHEDULER_add_delayed (timeout, &timeout_queue_entry, qe);
-  qe->response_proc = &process_result_message;
-  qe->timeout = GNUNET_TIME_relative_to_absolute (timeout);
-
-  vector = (int32_t*) & qe->msg[1];
-  // copy each element over to the message
-  for (i = 0; i < element_count; i++)
-    vector[i] = htonl (elements[i]);
-
-  // fill in the mask
-  memcpy (&vector[element_count], mask, mask_length);
-
-  process_queue (h);
-  return qe;
-}
+  struct GNUNET_SCALARPRODUCT_ComputationHandle *h;
+  struct GNUNET_SCALARPRODUCT_computation_message *msg;
+  uint32_t size;
+  uint16_t possible;
+
+  h = GNUNET_new (struct GNUNET_SCALARPRODUCT_ComputationHandle);
+  h->client = GNUNET_CLIENT_connect ("scalarproduct", cfg);
+  if (!h->client)
+    {
+      LOG (GNUNET_ERROR_TYPE_ERROR,
+           _ ("Failed to connect to the scalarproduct service\n"));
+      GNUNET_free (h);
+      return NULL;
+    }
+  h->stats = GNUNET_STATISTICS_create ("scalarproduct-api", cfg);
+  if (!h->stats)
+    {
+      LOG (GNUNET_ERROR_TYPE_ERROR,
+           _ ("Failed to send a message to the statistics service\n"));
+      GNUNET_CLIENT_disconnect (h->client);
+      GNUNET_free (h);
+      return NULL;
+    }
 
+  h->element_count_total = element_count;
+  size = sizeof (struct GNUNET_SCALARPRODUCT_computation_message) + element_count * sizeof (struct GNUNET_SCALARPRODUCT_Element);
+  if (GNUNET_SERVER_MAX_MESSAGE_SIZE > size) {
+    possible = element_count;
+    h->element_count_transfered = element_count;
+  }
+  else {
+    //create a multipart msg, first we calculate a new msg size for the head msg
+    possible = (GNUNET_SERVER_MAX_MESSAGE_SIZE - 1 - sizeof (struct GNUNET_SCALARPRODUCT_computation_message)) / sizeof (struct GNUNET_SCALARPRODUCT_Element);
+    h->element_count_transfered = possible;
+    size = sizeof (struct GNUNET_SCALARPRODUCT_computation_message) + possible*sizeof (struct GNUNET_SCALARPRODUCT_Element);
+    h->elements = (struct GNUNET_SCALARPRODUCT_Element*) 
+            GNUNET_malloc (sizeof(struct GNUNET_SCALARPRODUCT_Element) * element_count);
+    memcpy (h->elements, elements, sizeof (struct GNUNET_SCALARPRODUCT_Element)*element_count);
+  }
+  
+  h->cont_datum = cont;
+  h->cont_cls = cont_cls;
+  h->response_proc = &process_result_message;
+  h->cfg = cfg;
+  memcpy (&h->key, session_key, sizeof (struct GNUNET_HashCode));
 
-/**
- * Connect to the vectorproduct service.
- *
- * @param cfg configuration to use
- * @return handle to use to access the service
- */
-struct GNUNET_VECTORPRODUCT_Handle *
-GNUNET_VECTORPRODUCT_connect (const struct GNUNET_CONFIGURATION_Handle * cfg)
-{
-  struct GNUNET_CLIENT_Connection *client;
-  struct GNUNET_VECTORPRODUCT_Handle *h;
+  msg = (struct GNUNET_SCALARPRODUCT_computation_message*) GNUNET_malloc (size);
+  h->msg = msg;
+  msg->header.size = htons (size);
+  msg->header.type = htons (GNUNET_MESSAGE_TYPE_SCALARPRODUCT_CLIENT_TO_ALICE);
+  msg->element_count_total = htonl (element_count);
+  msg->element_count_contained = htonl (possible);
 
-  client = GNUNET_CLIENT_connect ("vectorproduct", cfg);
+  memcpy (&msg->peer, peer, sizeof (struct GNUNET_PeerIdentity));
+  memcpy (&msg->session_key, session_key, sizeof (struct GNUNET_HashCode));
+  memcpy (&msg[1], elements, possible);
 
-  if (NULL == client)
+  h->th = GNUNET_CLIENT_notify_transmit_ready (h->client, size,
+                                               GNUNET_TIME_UNIT_FOREVER_REL,
+                                               GNUNET_YES, // retry is OK in the initial stage
+                                               &do_send_message, h);
+  if (!h->th)
     {
       LOG (GNUNET_ERROR_TYPE_ERROR,
-           _ ("Failed to connect to the vectorproduct service\n"));
+           _ ("Failed to send a message to the scalarproduct service\n"));
+      GNUNET_STATISTICS_update (h->stats,
+                              gettext_noop ("# transmission request failures"),
+                              1, GNUNET_NO);
+      GNUNET_STATISTICS_destroy (h->stats, GNUNET_YES);
+      GNUNET_CLIENT_disconnect (h->client);
+      GNUNET_free (h->msg);
+      GNUNET_free_non_null (h->elements);
+      GNUNET_free (h);
       return NULL;
     }
-
-  h = GNUNET_malloc (sizeof (struct GNUNET_VECTORPRODUCT_Handle) +
-                     GNUNET_SERVER_MAX_MESSAGE_SIZE - 1);
-  h->client = client;
-  h->cfg = cfg;
-  h->stats = GNUNET_STATISTICS_create ("vectorproduct-api", cfg);
   return h;
 }
 
-
 /**
- * Disconnect from the vectorproduct service.
- * 
- * @param h handle to the vectorproduct
+ * Cancel an ongoing computation or revoke our collaboration offer.
+ * Closes the connection to the service
+ *
+ * @param h computation handle to terminate
  */
 void
-GNUNET_VECTORPRODUCT_disconnect (struct GNUNET_VECTORPRODUCT_Handle * h)
+GNUNET_SCALARPRODUCT_cancel (struct GNUNET_SCALARPRODUCT_ComputationHandle * h)
 {
-  struct GNUNET_VECTORPRODUCT_QueueEntry * qe;
-
-  LOG (GNUNET_ERROR_TYPE_INFO,
-       "Disconnecting from VectorProduct\n");
-
-  while (NULL != h->queue_head)
-    {
-      GNUNET_assert (NULL != (qe = free_queue_head_entry (h)));
-      qe->response_proc (qe, NULL, GNUNET_VECTORPRODUCT_Status_ServiceDisconnected);
-    }
-
-  if (h->client != NULL)
-    {
-      GNUNET_CLIENT_disconnect (h->client);
-      h->client = NULL;
-    }
-
-  GNUNET_STATISTICS_destroy (h->stats, GNUNET_NO);
-  h->stats = NULL;
+  if (NULL != h->th)
+    GNUNET_CLIENT_notify_transmit_ready_cancel (h->th);
+  if (GNUNET_SCHEDULER_NO_TASK != h->cont_multipart)
+    GNUNET_SCHEDULER_cancel (h->cont_multipart);
+  GNUNET_free_non_null (h->elements);
+  GNUNET_free_non_null (h->msg);
+  GNUNET_CLIENT_disconnect (h->client);
+  GNUNET_STATISTICS_destroy (h->stats, GNUNET_YES);
+  GNUNET_free (h);
 }
 
-/* end of ext_api.c */
+
+/* end of scalarproduct_api.c */