-Merge branch 'master' of ssh://gnunet.org/gnunet into gsoc2018/rest_api
[oweals/gnunet.git] / src / fs / test_gnunet_fs_rec.py.in
1 #!@PYTHON@
2 #    This file is part of GNUnet.
3 #    (C) 2010 Christian Grothoff (and other contributing authors)
4 #
5 #    GNUnet is free software: you can redistribute it and/or modify it
6 #    under the terms of the GNU Affero General Public License as published
7 #    by the Free Software Foundation, either version 3 of the License,
8 #    or (at your option) any later version.
9 #
10 #    GNUnet is distributed in the hope that it will be useful, but
11 #    WITHOUT ANY WARRANTY; without even the implied warranty of
12 #    MERCHANTABILITY or FITNESS FOR A PARTICULAR PURPOSE.  See the GNU
13 #    Affero General Public License for more details.
14 #   
15 #    You should have received a copy of the GNU Affero General Public License
16 #    along with this program.  If not, see <http://www.gnu.org/licenses/>.
17 #
18 # Testcase for file-sharing command-line tools (recursive publishing & download)
19 import sys
20 import os
21 import subprocess
22 import re
23 import shutil
24 import tarfile
25 import filecmp
26
27 srcdir = "../.."
28 gnunet_pyexpect_dir = os.path.join(srcdir, "contrib/scripts")
29 if gnunet_pyexpect_dir not in sys.path:
30     sys.path.append(gnunet_pyexpect_dir)
31
32 from gnunet_pyexpect import pexpect
33 from pydiffer import dcdiff
34
35 if os.name == 'posix':
36     download = './gnunet-download'
37     gnunetarm = 'gnunet-arm'
38     publish = './gnunet-publish'
39     unindex = './gnunet-unindex'
40     search = './gnunet-search'
41     directory = './gnunet-directory'
42 elif os.name == 'nt':
43     download = './gnunet-download.exe'
44     gnunetarm = 'gnunet-arm.exe'
45     publish = './gnunet-publish.exe'
46     unindex = './gnunet-unindex.exe'
47     search = './gnunet-search.exe'
48     directory = './gnunet-directory.exe'
49
50 if os.name == "nt":
51     shutil.rmtree(os.path.join(os.getenv("TEMP"), "gnunet-test-fs-py-rec"), True)
52 else:
53     shutil.rmtree("/tmp/gnunet-test-fs-py-rec", True)
54
55 arm = subprocess.Popen([gnunetarm, '-sq', '-c', 'test_gnunet_fs_rec_data.conf'])
56 arm.communicate()
57
58 # pray that `tar' is in PATH.
59 # FIXME: Actually we should check for that and output
60 #        a message if it isn't found.
61 tar = tarfile.open('test_gnunet_fs_rec_data.tgz')
62 tar.extractall()
63 # first, basic publish-search-download run
64 try:
65     pub = pexpect()
66     pub.spawn(None, [publish, '-c', 'test_gnunet_fs_rec_data.conf', '-d', '-k', 'testdir', 'dir/'], stdout=subprocess.PIPE, stderr=subprocess.STDOUT)
67     # Can't say much for publishing, except that the last one is the toplevel directory
68     pub.expect("stdout", re.compile(r"Publishing `.+' done\.\r?\n"))
69     pub.expect("stdout", re.compile(r"URI is `gnunet://fs/chk/[A-Z0-9]{103}\.[A-Z0-9]{103}\.\d+'\.\r?\n"))
70     pub.expect("stdout", re.compile(r"Publishing `.+' done\.\r?\n"))
71     pub.expect("stdout", re.compile(r"URI is `gnunet://fs/chk/[A-Z0-9]{103}\.[A-Z0-9]{103}\.\d+'\.\r?\n"))
72     pub.expect("stdout", re.compile(r"Publishing `.+' done\.\r?\n"))
73     pub.expect("stdout", re.compile(r"URI is `gnunet://fs/chk/[A-Z0-9]{103}\.[A-Z0-9]{103}\.\d+'\.\r?\n"))
74     pub.expect("stdout", re.compile(r"Publishing `.+' done\.\r?\n"))
75     pub.expect("stdout", re.compile(r"URI is `gnunet://fs/chk/[A-Z0-9]{103}\.[A-Z0-9]{103}\.\d+'\.\r?\n"))
76     pub.expect("stdout", re.compile(r"Publishing `.+' done\.\r?\n"))
77     pub.expect("stdout", re.compile(r"URI is `gnunet://fs/chk/[A-Z0-9]{103}\.[A-Z0-9]{103}\.\d+'\.\r?\n"))
78     pub.expect("stdout", re.compile(r"Publishing `.+' done\.\r?\n"))
79     pub.expect("stdout", re.compile(r"URI is `gnunet://fs/chk/[A-Z0-9]{103}\.[A-Z0-9]{103}\.\d+'\.\r?\n"))
80     pub.expect("stdout", re.compile(r"Publishing `.+[\\/]dir[\\/]' done\.\r?\n"))
81     m = pub.expect("stdout", re.compile(r".+\r?\n"))
82     if not m:
83         sys.exit(3)
84     output = m.string
85     url = output[output.find("`")+1:output.find("'")]
86
87     down = pexpect()
88     down.spawn(None, [download, '-c', 'test_gnunet_fs_rec_data.conf', '-R', '-o', 'rdir.gnd', url], stdout=subprocess.PIPE, stderr=subprocess.STDOUT)
89     down.expect("stdout", re.compile(r"Downloading `rdir.gnd' done (.*).\r?\n"))
90
91     d = pexpect()
92     d.spawn(None, [directory, '-c', 'test_gnunet_fs_rec_data.conf', 'rdir/a.gnd'], stdout=subprocess.PIPE, stderr=subprocess.STDOUT)
93     d.expect("stdout", re.compile(r"Directory `a/' meta data:\r?\n"))
94     d.expect("stdout", re.compile(r"Directory `a/' contents:\r?\n"))
95     d.expect("stdout", re.compile(r"COPYING (.*)\r?\n"))
96     d.expect("stdout", re.compile(r"INSTALL (.*)\r?\n"))
97
98     os.remove("rdir/b.gnd")
99     os.remove("rdir/a.gnd")
100     diff = dcdiff('dir', 'rdir')
101     if len(diff) != 0:
102         raise Exception("Unexpected difference between source directory and downloaded result:\n{}".format(diff))
103
104
105 finally:
106     arm = subprocess.Popen([gnunetarm, '-eq', '-c', 'test_gnunet_fs_rec_data.conf'])
107     arm.communicate()
108     if os.name == "nt":
109         shutil.rmtree(os.path.join(os.getenv("TEMP"), "gnunet-test-fs-py-rec"), True)
110     else:
111         shutil.rmtree("/tmp/gnunet-test-fs-py-rec", True)
112     shutil.rmtree("dir", True)
113     shutil.rmtree("rdir", True)
114     shutil.rmtree("rdir.gnd", True)