GNUNET_DISK_OPEN_READ
[oweals/gnunet.git] / TODO
1 PHASE #1: (Goal: settle key design questions)
2
3 Util:
4 * improve disk API [Nils]
5 * Windows: use events instead of pipes to signal select()s [Nils]
6 * only connect() sockets that are ready (select())
7   [Nils: I'm not sure what you mean by this; fresh sockets are always
8    ready for connect(), just 'write' after connect needs select AFAIK;
9    please clarify. --Christian]
10
11 TESTCASES WANTED:
12 For these functions, it would be nice if we had testcases ("make check")
13 that would cause them to be executed and check that they are working:
14 * gnunet-service-peerinfo:
15   - change_host_trust / flush_trust 
16   - remove_garbage / 
17   - discard_hosts_helper / cron_clean_data_hosts
18 * gnunet-service-transport:
19   - try_unvalidated_addresses
20   - lookup_address_callback
21   - lookup_hello_callback
22   - plugin_env_lookup_address
23   - notify_clients_disconnect
24   - list_validated_addresses
25   - cleanup_validation
26   - disconnect_neighbour
27   - handle_set_quota
28 * plugin_transport_tcp.c:
29   - tcp_plugin_cancel
30   - tcp_plugin_address_pretty_printer / append_port
31   - tcp_plugin_set_receive_quota
32   - delayed_done
33 * transport_api:
34   - GNUNET_TRANSPORT_set_qutoa / send_set_quota
35   - hello_wait_timeout 
36   - transmit_ready
37   - transmit_timeout
38   - remove_from_any_list / remove_neighbour
39   - GNUNET_TRANSPORT_notify_transmit_ready_cancel
40 * core_api:
41   - timeout_request
42   - solicit_traffic / copy_and_free
43   - GNUNET_CORE_peer_configure / produce_configure_message
44 * gnunet-service-core:
45   - update_window
46   - find_client
47   - handle_client_request_configure
48   - set_key_retry_task
49   - align_and_deliver
50   - handle_transport_notify_disconnect
51 * hostlist (everything)
52 * topology (everything)
53
54
55
56 PHASE #2: (Goal: recover basic file-sharing functionality)
57
58 Datastores:
59 * implement sqlite-based sqstore/datastore service
60   + implement service (datastore + talks to plugin)
61   + implement library (talks to service)
62   + implement sqlite plugin (talks to DB)
63 * implement sqlite-based dstore services
64   + implement library (talks to service)
65   + implement service (talks to plugin)
66   + implement sqlite plugin (talks to DB)
67
68 Applications:
69 * DHT, DV
70 * FS / fs-libs
71
72
73
74 PHASE #3: (Goal: ready for pre-release) [completion-goal: end of 2009]
75
76 * testing
77 * setup
78 * gtk, qt GUIs
79 * tbench
80 * tracekit
81 * vpn
82
83 Transports:
84 * UDP backend (need LIBRARY to support (de)fragmentation!)
85 * HTTP backend
86 * Testing:
87   +  Testcases for set_quota, timeouts, disconnects, transmit_ready_cancel
88   + Better coverage of gnunet-service-transport (hello validation)
89   + direct test of plugins compliance to plugin API
90
91 Databases:
92 * sqlite, mysql & postgres backend
93
94
95
96 Minor TODO items:
97 * UTIL:
98   - crypto_hash: use libgcrypt (supports SHA-512 since 2003)
99   - container_bloomfilter: improve efficiency (see FIXME)
100 * SERVER:
101   - inefficient memmove
102 * TRANSPORT:
103   - transport_api: support forcing disconnects through low quotas!
104     (required for working F2F support!)
105   - API: consider having core provide deadline information for each message
106     (likely important for DV plugin which wants to loop back!)
107   - implement transport API to pretty-print transport address 
108     + transport_api extension (API extension!)
109     + service-transport extension (protocol extension)
110   - add calls to statistics in various places
111   - implement gnunet-transport (transport configurator / tester)
112   - UPnP-based IP detection
113     (Note: build library always, build service when libxml2/etc. are available)
114   - instantly filter addresses from *other* peers that 
115     are *equal* to our own address + port (i.e., localhost:2086).  We 
116     no longer filter those for outgoing (helps with loopback testing
117     and keeps the code clean), but we should filter strictly *impossible*
118     incoming addresses!  This is for efficiency, not correctness.
119   - We currently are happy to take any address told to us in a WELCOME
120     to our set of addresses; we should have some minimal threshold-based
121     scheme, limiting both the total number of addresses that we accept 
122     this way as well as requiring multiple confirmations; also, we
123     should possibly try to confirm that the given address works for
124     us ourselves (loopback-style) before adding it to the list
125     [SECURITY issue]
126   - not sure current way of doing ACKs works well-enough 
127     with unreliable transports where the ACK maybe lost;
128     the "is_new" check would then possibly prevent future
129     ACKs to be delivered, all while we're happily 
130     receiving messages from that peer!  Worse, the other
131     peer won't generate another ACK since it thinks we're
132     connected just fine...
133     Key questions:
134     + How necessary is ACKing in the first place? (alternatives?)
135     + Should we transmit ACKs in response to every HELLO? (would that 
136       fully address the problem?)
137   - latency measurements implemented in the transport
138     plugins makes it only work for bi-di transports
139     and results in code replication
140   - should latency be included in the ReceiveCallback and
141     NotifyConnect or passed on request?
142 * SETUP:
143   - auto-generate "defaults.conf" using gnunet-setup from "config.scm"
144   - integrate all options into "config.scm"
145   - change config-file writing to exclude options set to default values
146 * ARM:
147   - implement exponential back-off for service restarts
148   - better tracking of which config changes actually need to cause process restarts by ARM.
149   - have way to specify dependencies between services (to manage ARM restarts better)
150   - client-API is inefficient since it opens a TCP connection per service that is started
151     (instead of re-using connections).
152 * PEERINFO:
153   - have gnunet-peerinfo print actual host addresses again
154   - add option to gnunet-peerinfo to modify trust value
155 * POSTGRES-DB:
156   - finish postgres implementation; simplify other SQLs using new stats
157 * HTTPS transport
158   - PolariSSL for MHD?
159   - https integration
160 * GAP improvements:
161   - active reply route caching design & implementation of service,
162     gap extension!
163 * HOSTLIST:
164   - implement advertising of hostlist URL
165   - implement learning of hostlist URLs
166
167
168
169 => PRE-RELEASE
170
171 PHASE #4: [completion-goal: mid 2010]
172 * Documentation
173 * new webpage
174
175
176
177
178 Stuff to remember:
179 * Features eliminated from util:
180   - threading (goal: good riddance!)
181   - complex logging features [ectx-passing, target-kinds] (goal: good riddance!)
182   - complex configuration features [defaults, notifications] (goal: good riddance!)
183   - network traffic monitors (goal: eliminate)
184   - IPC semaphores (goal: d-bus? / eliminate?)
185   - second timers
186   - DNS lookup (goal: have async service; issue: still need synchronous resolution in places, current code may not be portable)
187   => code shrunk from 61 files to 34, 22k LOC to 15k LOC, 470k to 330k (with symbols)
188 * New features in util:
189   - scheduler
190   - service and program boot-strap code
191 * Major changes in util:
192   - more expressive server (replaces selector)
193 * Open questions: 
194   - how to integrate scheduler with GTK event loop!
195
196
197
198 Test coverage:
199 * UTIL      : 78.7%
200 * HELLO     : 93.7%
201 * ARM       : 69.9%
202 * RESOLVER  : 60.4%
203 * STATISTICS: 82.8%
204 * PEERINFO  : 71.5%
205 * TRANSPORT : 70.9%
206 * CORE      : 65.8%
207 ===================
208 * TOTAL     : 74.9%
209
210 Not yet tested:
211 * HOSTLIST  :  0.0%
212 * TOPOLOGY  :  0.0%