ddc7b038cfa51491429db49dcd85c006f7aba06e
[oweals/gnunet.git] / src / include / gnunet_namestore_service.h
1 /*
2      This file is part of GNUnet
3      (C) 2012, 2013 Christian Grothoff (and other contributing authors)
4
5      GNUnet is free software; you can redistribute it and/or modify
6      it under the terms of the GNU General Public License as published
7      by the Free Software Foundation; either version 3, or (at your
8      option) any later version.
9
10      GNUnet is distributed in the hope that it will be useful, but
11      WITHOUT ANY WARRANTY; without even the implied warranty of
12      MERCHANTABILITY or FITNESS FOR A PARTICULAR PURPOSE.  See the GNU
13      General Public License for more details.
14
15      You should have received a copy of the GNU General Public License
16      along with GNUnet; see the file COPYING.  If not, write to the
17      Free Software Foundation, Inc., 59 Temple Place - Suite 330,
18      Boston, MA 02111-1307, USA.
19 */
20
21 /**
22  * @file include/gnunet_namestore_service.h
23  * @brief API that can be used to store naming information on a GNUnet node;
24  *        Naming information can either be records for which this peer/user
25  *        is authoritative, or blocks which are cached, encrypted naming
26  *        data from other peers.
27  * @author Christian Grothoff
28  */
29 #ifndef GNUNET_NAMESTORE_SERVICE_H
30 #define GNUNET_NAMESTORE_SERVICE_H
31
32 #include "gnunet_util_lib.h"
33 #include "gnunet_block_lib.h"
34
35 #ifdef __cplusplus
36 extern "C"
37 {
38 #if 0                           /* keep Emacsens' auto-indent happy */
39 }
40 #endif
41 #endif
42
43 /**
44  * Record type indicating any record/'*'
45  */
46 #define GNUNET_NAMESTORE_TYPE_ANY 0
47
48 /**
49  * Record type for GNS zone transfer ("PKEY").
50  */
51 #define GNUNET_NAMESTORE_TYPE_PKEY 65536
52
53 /**
54  * Record type for GNS zone transfer ("PSEU").
55  */
56 #define GNUNET_NAMESTORE_TYPE_PSEU 65537
57
58 /**
59  * Record type for GNS legacy hostnames ("LEHO").
60  */
61 #define GNUNET_NAMESTORE_TYPE_LEHO 65538
62
63 /**
64  * Record type for VPN resolution
65  */
66 #define GNUNET_NAMESTORE_TYPE_VPN 65539
67
68 /**
69  * Record type for zone revocation
70  */
71 #define GNUNET_NAMESTORE_TYPE_REV 65540
72
73 /**
74  * Record type for a social place.
75  */
76 #define GNUNET_NAMESTORE_TYPE_PLACE 65541
77
78 /**
79  * Entry in the queue.
80  */
81 struct GNUNET_NAMESTORE_QueueEntry;
82
83 /**
84  * Handle to the namestore service.
85  */
86 struct GNUNET_NAMESTORE_Handle;
87
88 /**
89  * Handle to the namestore zone iterator.
90  */
91 struct GNUNET_NAMESTORE_ZoneIterator;
92
93 /**
94  * Maximum size of a value that can be stored in the namestore.
95  */
96 #define GNUNET_NAMESTORE_MAX_VALUE_SIZE (63 * 1024)
97
98
99 /**
100  * Connect to the namestore service.
101  *
102  * @param cfg configuration to use
103  * @return handle to use to access the service
104  */
105 struct GNUNET_NAMESTORE_Handle *
106 GNUNET_NAMESTORE_connect (const struct GNUNET_CONFIGURATION_Handle *cfg);
107
108
109 /**
110  * Disconnect from the namestore service (and free associated
111  * resources).
112  *
113  * @param h handle to the namestore
114  */
115 void
116 GNUNET_NAMESTORE_disconnect (struct GNUNET_NAMESTORE_Handle *h);
117
118
119 /**
120  * Continuation called to notify client about result of the
121  * operation.
122  *
123  * @param cls closure
124  * @param success GNUNET_SYSERR on failure (including timeout/queue drop/failure to validate)
125  *                GNUNET_NO if content was already there or not found
126  *                GNUNET_YES (or other positive value) on success
127  * @param emsg NULL on success, otherwise an error message
128  */
129 typedef void (*GNUNET_NAMESTORE_ContinuationWithStatus) (void *cls,
130                                                          int32_t success,
131                                                          const char *emsg);
132
133
134 /**
135  * Flags that can be set for a record.
136  */
137 enum GNUNET_NAMESTORE_RecordFlags
138 {
139   
140   /**
141    * No special options.
142    */
143   GNUNET_NAMESTORE_RF_NONE = 0,
144
145   /**
146    * This peer is the authority for this record; it must thus
147    * not be deleted (other records can be deleted if we run
148    * out of space).
149    */
150   GNUNET_NAMESTORE_RF_AUTHORITY = 1,
151
152   /**
153    * This is a private record of this peer and it should
154    * thus not be handed out to other peers.
155    */
156   GNUNET_NAMESTORE_RF_PRIVATE = 2,
157
158   /**
159    * This record was added by the system
160    * and is pending user confimation
161    */
162   GNUNET_NAMESTORE_RF_PENDING = 4,
163
164   /**
165    * This expiration time of the record is a relative
166    * time (not an absolute time).
167    */
168   GNUNET_NAMESTORE_RF_RELATIVE_EXPIRATION = 8,
169
170   /**
171    * This record should not be used unless all (other) records with an absolute
172    * expiration time have expired.
173    */
174   GNUNET_NAMESTORE_RF_SHADOW_RECORD = 16
175
176   /**
177    * When comparing flags for record equality for removal,
178    * which flags should must match (in addition to the type,
179    * name, expiration value and data of the record)?  All flags
180    * that are not listed here will be ignored for this purpose.
181    * (for example, we don't expect that users will remember to
182    * pass the '--private' option when removing a record from
183    * the namestore, hence we don't require this particular option
184    * to match upon removal).  See also
185    * 'GNUNET_NAMESTORE_records_cmp'.
186    */
187 #define GNUNET_NAMESTORE_RF_RCMP_FLAGS (GNUNET_NAMESTORE_RF_RELATIVE_EXPIRATION)
188 };
189
190
191 /**
192  * A GNS record.
193  */
194 struct GNUNET_NAMESTORE_RecordData
195 {
196
197   /**
198    * Binary value stored in the DNS record.
199    * FIXME: goofy API: sometimes 'data' is individually
200    * 'malloc'ed, sometimes it points into some existing
201    * data area (so sometimes this should be a 'void *',
202    * sometimes a 'const void *').  This is unclean.  We
203    * should go over the code and make sure that 'data'
204    * is NEVER individually alloc'ed here but always points
205    * to some "other" location.
206    */
207   const void *data;
208
209   /**
210    * Expiration time for the DNS record.  Can be relative
211    * or absolute, depending on 'flags'.
212    */
213   uint64_t expiration_time;
214
215   /**
216    * Number of bytes in 'data'.
217    */
218   size_t data_size;
219
220   /**
221    * Type of the GNS/DNS record.
222    */
223   uint32_t record_type;
224
225   /**
226    * Flags for the record.
227    */
228   enum GNUNET_NAMESTORE_RecordFlags flags;
229 };
230
231
232
233 GNUNET_NETWORK_STRUCT_BEGIN
234
235
236 /**
237  * Information we have in an encrypted block with record data (i.e. in the DHT).
238  */
239 struct GNUNET_NAMESTORE_Block
240 {
241
242   /**
243    * Signature of the block.
244    */
245   struct GNUNET_CRYPTO_EccSignature signature;
246
247   /**
248    * Derived key used for signing; hash of this is the query.
249    */
250   struct GNUNET_CRYPTO_EccPublicKey derived_key;
251
252   /**
253    * Number of bytes signed; also specifies the number of bytes
254    * of encrypted data that follow.
255    */
256   struct GNUNET_CRYPTO_EccSignaturePurpose purpose;
257   
258   /**
259    * Expiration time of the block.
260    */
261   struct GNUNET_TIME_AbsoluteNBO expiration_time;
262
263   /* followed by encrypted data */
264 };
265
266 GNUNET_NETWORK_STRUCT_END
267
268 /**
269  * Store an item in the namestore.  If the item is already present,
270  * it is replaced with the new record.  
271  *
272  * @param h handle to the namestore
273  * @param block block to store
274  * @param cont continuation to call when done
275  * @param cont_cls closure for cont
276  * @return handle to abort the request
277  */
278 struct GNUNET_NAMESTORE_QueueEntry *
279 GNUNET_NAMESTORE_block_cache (struct GNUNET_NAMESTORE_Handle *h,
280                               const struct GNUNET_NAMESTORE_Block *block,
281                               GNUNET_NAMESTORE_ContinuationWithStatus cont,
282                               void *cont_cls);
283
284
285 /**
286  * Store an item in the namestore.  If the item is already present,
287  * it is replaced with the new record.  Use an empty array to
288  * remove all records under the given name.
289  *
290  * @param h handle to the namestore
291  * @param pkey private key of the zone
292  * @param label name that is being mapped (at most 255 characters long)
293  * @param rd_count number of records in the 'rd' array
294  * @param rd array of records with data to store
295  * @param cont continuation to call when done
296  * @param cont_cls closure for 'cont'
297  * @return handle to abort the request
298  */
299 struct GNUNET_NAMESTORE_QueueEntry *
300 GNUNET_NAMESTORE_records_store (struct GNUNET_NAMESTORE_Handle *h,
301                                 const struct GNUNET_CRYPTO_EccPrivateKey *pkey,
302                                 const char *label,
303                                 unsigned int rd_count,
304                                 const struct GNUNET_NAMESTORE_RecordData *rd,
305                                 GNUNET_NAMESTORE_ContinuationWithStatus cont,
306                                 void *cont_cls);
307
308
309 /**
310  * Process a record that was stored in the namestore.
311  *
312  * @param cls closure
313  * @param block block that was stored in the namestore
314  */
315 typedef void (*GNUNET_NAMESTORE_BlockProcessor) (void *cls,
316                                                  const struct GNUNET_NAMESTORE_Block *block);
317
318
319 /**
320  * Get a result for a particular key from the namestore.  The processor
321  * will only be called once.  
322  *
323  * @param h handle to the namestore
324  * @param derived_hash hash of zone key combined with name to lookup
325  * @param proc function to call on the matching block, or with
326  *        NULL if there is no matching block
327  * @param proc_cls closure for proc
328  * @return a handle that can be used to cancel
329  */
330 struct GNUNET_NAMESTORE_QueueEntry *
331 GNUNET_NAMESTORE_lookup_block (struct GNUNET_NAMESTORE_Handle *h, 
332                                const struct GNUNET_HashCode *derived_hash,
333                                GNUNET_NAMESTORE_BlockProcessor proc, void *proc_cls);
334
335
336 /**
337  * Process a record that was stored in the namestore.
338  *
339  * @param cls closure
340  * @param zone private key of the zone
341  * @param label label of the records
342  * @param rd_count number of entries in 'rd' array
343  * @param rd array of records with data to store
344  */
345 typedef void (*GNUNET_NAMESTORE_RecordMonitor) (void *cls,
346                                                 const struct GNUNET_CRYPTO_EccPrivateKey *zone,
347                                                 const char *label,
348                                                 unsigned int rd_count,
349                                                 const struct GNUNET_NAMESTORE_RecordData *rd);
350
351
352 /**
353  * Look for an existing PKEY delegation record for a given public key.
354  * Returns at most one result to the processor.
355  *
356  * @param h handle to the namestore
357  * @param zone public key of the zone to look up in, never NULL
358  * @param value_zone public key of the target zone (value), never NULL
359  * @param proc function to call on the matching records, or with
360  *        NULL (rd_count == 0) if there are no matching records
361  * @param proc_cls closure for proc
362  * @return a handle that can be used to
363  *         cancel
364  */
365 struct GNUNET_NAMESTORE_QueueEntry *
366 GNUNET_NAMESTORE_zone_to_name (struct GNUNET_NAMESTORE_Handle *h, 
367                                const struct GNUNET_CRYPTO_EccPrivateKey *zone,
368                                const struct GNUNET_CRYPTO_EccPublicKey *value_zone,
369                                GNUNET_NAMESTORE_RecordMonitor proc, void *proc_cls);
370
371
372 /**
373  * Process a records that were decrypted from a block.
374  *
375  * @param cls closure
376  * @param rd_count number of entries in @a rd array
377  * @param rd array of records with data to store
378  */
379 typedef void (*GNUNET_NAMESTORE_RecordCallback) (void *cls,
380                                                  unsigned int rd_count,
381                                                  const struct GNUNET_NAMESTORE_RecordData *rd);
382
383
384 /**
385  * Perform a lookup and decrypt the resulting block.
386  *
387  * @param h namestore to perform lookup in
388  * @param value_zone zone to look up record in
389  * @param label label to look for
390  * @param proc function to call with the result
391  * @param proc_cls closure for @a proc
392  */
393 struct GNUNET_NAMESTORE_QueueEntry *
394 GNUNET_NAMESTORE_lookup (struct GNUNET_NAMESTORE_Handle *h,
395                          const struct GNUNET_CRYPTO_EccPublicKey *value_zone,
396                          const char *label,
397                          GNUNET_NAMESTORE_RecordMonitor proc, void *proc_cls);
398
399
400 /**
401  * Cancel a namestore operation.  The final callback from the
402  * operation must not have been done yet.  Must be called on any
403  * namestore operation that has not yet completed prior to calling
404  * #GNUNET_NAMESTORE_disconnect.
405  *
406  * @param qe operation to cancel
407  */
408 void
409 GNUNET_NAMESTORE_cancel (struct GNUNET_NAMESTORE_QueueEntry *qe);
410
411
412 /**
413  * Starts a new zone iteration (used to periodically PUT all of our
414  * records into our DHT). @a proc will be called once immediately, and
415  * then again after #GNUNET_NAMESTORE_zone_iterator_next is invoked.
416  *
417  * @param h handle to the namestore
418  * @param zone zone to access
419  * @param proc function to call on each name from the zone; it
420  *        will be called repeatedly with a value (if available)
421  *        and always once at the end with a name of NULL.
422  * @param proc_cls closure for proc
423  * @return an iterator handle to use for iteration
424  */
425 struct GNUNET_NAMESTORE_ZoneIterator *
426 GNUNET_NAMESTORE_zone_iteration_start (struct GNUNET_NAMESTORE_Handle *h,
427                                        const struct GNUNET_CRYPTO_EccPrivateKey *zone,
428                                        GNUNET_NAMESTORE_RecordMonitor proc,
429                                        void *proc_cls);
430
431
432 /**
433  * Calls the record processor specified in GNUNET_NAMESTORE_zone_iteration_start
434  * for the next record.
435  *
436  * @param it the iterator
437  */
438 void
439 GNUNET_NAMESTORE_zone_iterator_next (struct GNUNET_NAMESTORE_ZoneIterator *it);
440
441
442 /**
443  * Stops iteration and releases the namestore handle for further calls.  Must
444  * be called on any iteration that has not yet completed prior to calling
445  * #GNUNET_NAMESTORE_disconnect.
446  *
447  * @param it the iterator
448  */
449 void
450 GNUNET_NAMESTORE_zone_iteration_stop (struct GNUNET_NAMESTORE_ZoneIterator *it);
451
452
453 /**
454  * Handle for a monitoring activity.
455  */
456 struct GNUNET_NAMESTORE_ZoneMonitor;
457
458
459 /**
460  * Function called once the monitor has caught up with the current 
461  * state of the database.  Will be called AGAIN after each disconnect
462  * (record monitor called with 'NULL' for zone_key) once we're again
463  * in sync.
464  *
465  * @param cls closure
466  */
467 typedef void (*GNUNET_NAMESTORE_RecordsSynchronizedCallback)(void *cls);
468
469
470 /**
471  * Begin monitoring a zone for changes.  Will first call the 'monitor' function
472  * on all existing records in the selected zone(s), then calls 'sync_cb',
473  * and then calls the 'monitor' whenever a record changes.  If the namestore
474  * disconnects, the 'monitor' function is called with a disconnect event; if
475  * the connection is re-established, the process begins from the start (all
476  * existing records, sync, then updates).
477  *
478  * @param cfg configuration to use to connect to namestore
479  * @param zone zone to monitor
480  * @param monitor function to call on zone changes
481  * @param sync_cb function called when we're in sync with the namestore
482  * @param cls closure for 'monitor' and 'sync_cb'
483  * @return handle to stop monitoring
484  */
485 struct GNUNET_NAMESTORE_ZoneMonitor *
486 GNUNET_NAMESTORE_zone_monitor_start (const struct GNUNET_CONFIGURATION_Handle *cfg,
487                                      const struct GNUNET_CRYPTO_EccPrivateKey *zone,
488                                      GNUNET_NAMESTORE_RecordMonitor monitor,
489                                      GNUNET_NAMESTORE_RecordsSynchronizedCallback sync_cb,
490                                      void *cls);
491
492
493 /**
494  * Stop monitoring a zone for changes.
495  *
496  * @param zm handle to the monitor activity to stop
497  */
498 void
499 GNUNET_NAMESTORE_zone_monitor_stop (struct GNUNET_NAMESTORE_ZoneMonitor *zm);
500
501
502 /* convenience APIs for serializing / deserializing GNS records */
503
504 /**
505  * Calculate how many bytes we will need to serialize the given
506  * records.
507  *
508  * @param rd_count number of records in the rd array
509  * @param rd array of #GNUNET_NAMESTORE_RecordData with @a rd_count elements
510  *
511  * @return the required size to serialize
512  *
513  */
514 size_t
515 GNUNET_NAMESTORE_records_get_size (unsigned int rd_count,
516                                    const struct GNUNET_NAMESTORE_RecordData *rd);
517
518
519 /**
520  * Serialize the given records to the given destination buffer.
521  *
522  * @param rd_count number of records in the rd array
523  * @param rd array of #GNUNET_NAMESTORE_RecordData with @a rd_count elements
524  * @param dest_size size of the destination array
525  * @param dest where to write the result
526  * @return the size of serialized records, -1 if records do not fit
527  */
528 ssize_t
529 GNUNET_NAMESTORE_records_serialize (unsigned int rd_count,
530                                     const struct GNUNET_NAMESTORE_RecordData *rd,
531                                     size_t dest_size,
532                                     char *dest);
533
534
535 /**
536  * Deserialize the given records to the given destination.
537  *
538  * @param len size of the serialized record data
539  * @param src the serialized record data
540  * @param rd_count number of records in the rd array
541  * @param dest where to put the data
542  *
543  * @return GNUNET_OK on success, GNUNET_SYSERR on error
544  */
545 int
546 GNUNET_NAMESTORE_records_deserialize (size_t len,
547                                       const char *src,
548                                       unsigned int rd_count,
549                                       struct GNUNET_NAMESTORE_RecordData *dest);
550
551
552 /**
553  * Convert the 'value' of a record to a string.
554  *
555  * @param type type of the record
556  * @param data value in binary encoding
557  * @param data_size number of bytes in data
558  * @return NULL on error, otherwise human-readable representation of the value
559  */
560 char *
561 GNUNET_NAMESTORE_value_to_string (uint32_t type,
562                                   const void *data,
563                                   size_t data_size);
564
565
566 /**
567  * Convert human-readable version of a 'value' of a record to the binary
568  * representation.
569  *
570  * @param type type of the record
571  * @param s human-readable string
572  * @param data set to value in binary encoding (will be allocated)
573  * @param data_size set to number of bytes in data
574  * @return GNUNET_OK on success
575  */
576 int
577 GNUNET_NAMESTORE_string_to_value (uint32_t type,
578                                   const char *s,
579                                   void **data,
580                                   size_t *data_size);
581
582
583 /**
584  * Convert a type name (i.e. "AAAA") to the corresponding number.
585  *
586  * @param typename name to convert
587  * @return corresponding number, UINT32_MAX on error
588  */
589 uint32_t
590 GNUNET_NAMESTORE_typename_to_number (const char *typename);
591
592
593 /**
594  * Convert a type number (i.e. 1) to the corresponding type string (i.e. "A")
595  *
596  * @param type number of a type to convert
597  * @return corresponding typestring, NULL on error
598  */
599 const char *
600 GNUNET_NAMESTORE_number_to_typename (uint32_t type);
601
602
603 /**
604  * Test if a given record is expired.
605  * 
606  * @param rd record to test
607  * @return #GNUNET_YES if the record is expired,
608  *         #GNUNET_NO if not
609  */
610 int
611 GNUNET_NAMESTORE_is_expired (const struct GNUNET_NAMESTORE_RecordData *rd);
612
613
614 /**
615  * Convert a UTF-8 string to UTF-8 lowercase
616  * @param src source string
617  * @return converted result
618  */
619 char *
620 GNUNET_NAMESTORE_normalize_string (const char *src);
621
622
623 /**
624  * Convert a zone to a string (for printing debug messages).
625  * This is one of the very few calls in the entire API that is
626  * NOT reentrant!
627  *
628  * @param z public key of a zone
629  * @return string form; will be overwritten by next call to #GNUNET_NAMESTORE_z2s.
630  */
631 const char *
632 GNUNET_NAMESTORE_z2s (const struct GNUNET_CRYPTO_EccPublicKey *z);
633
634
635 /**
636  * Calculate the DHT query for a given @a label in a given @a zone.
637  * 
638  * @param zone private key of the zone
639  * @param label label of the record
640  * @param query hash to use for the query
641  */
642 void
643 GNUNET_NAMESTORE_query_from_private_key (const struct GNUNET_CRYPTO_EccPrivateKey *zone,
644                                          const char *label,
645                                          struct GNUNET_HashCode *query);
646
647
648 /**
649  * Calculate the DHT query for a given @a label in a given @a zone.
650  * 
651  * @param pub public key of the zone
652  * @param label label of the record
653  * @param query hash to use for the query
654  */
655 void
656 GNUNET_NAMESTORE_query_from_public_key (const struct GNUNET_CRYPTO_EccPublicKey *pub,
657                                         const char *label,
658                                         struct GNUNET_HashCode *query);
659
660
661 /**
662  * Sign name and records
663  *
664  * @param key the private key
665  * @param expire block expiration
666  * @param label the name for the records
667  * @param rd record data
668  * @param rd_count number of records
669  */
670 struct GNUNET_NAMESTORE_Block *
671 GNUNET_NAMESTORE_block_create (const struct GNUNET_CRYPTO_EccPrivateKey *key,
672                                struct GNUNET_TIME_Absolute expire,
673                                const char *label,
674                                const struct GNUNET_NAMESTORE_RecordData *rd,
675                                unsigned int rd_count);
676
677
678 /**
679  * Check if a signature is valid.  This API is used by the GNS Block
680  * to validate signatures received from the network.
681  *
682  * @param block block to verify
683  * @return #GNUNET_OK if the signature is valid
684  */
685 int
686 GNUNET_NAMESTORE_block_verify (const struct GNUNET_NAMESTORE_Block *block);
687
688
689 /**
690  * Decrypt block.
691  *
692  * @param block block to decrypt
693  * @param zone_key public key of the zone
694  * @param label the name for the records
695  * @param proc function to call with the result
696  * @param proc_cls closure for @a proc
697  * @return #GNUNET_OK on success, #GNUNET_SYSERR if the block was 
698  *        not well-formed
699  */
700 int
701 GNUNET_NAMESTORE_block_decrypt (const struct GNUNET_NAMESTORE_Block *block,
702                                 const struct GNUNET_CRYPTO_EccPublicKey *zone_key,
703                                 const char *label,
704                                 GNUNET_NAMESTORE_RecordCallback proc,
705                                 void *proc_cls);
706
707
708 /**
709  * Compares if two records are equal
710  *
711  * @param a a record
712  * @param b another record 
713  * @return #GNUNET_YES if the records are equal, or #GNUNET_NO if not.
714  */
715 int
716 GNUNET_NAMESTORE_records_cmp (const struct GNUNET_NAMESTORE_RecordData *a,
717                               const struct GNUNET_NAMESTORE_RecordData *b);
718
719
720 /**
721  * Returns the expiration time of the given block of records. The block
722  * expiration time is the expiration time of the block with smallest
723  * expiration time.
724  *
725  * @param rd_count number of records given in 'rd'
726  * @param rd array of records
727  * @return absolute expiration time
728  */
729 struct GNUNET_TIME_Absolute
730 GNUNET_NAMESTORE_record_get_expiration_time (unsigned int rd_count, 
731                                              const struct GNUNET_NAMESTORE_RecordData *rd);
732
733
734 #if 0                           /* keep Emacsens' auto-indent happy */
735 {
736 #endif
737 #ifdef __cplusplus
738 }
739 #endif
740
741 /* end of gnunet_namestore_service.h */
742 #endif