travis/gitlab/azure: Use bash to avoid a_test_which_does_not_exist
[oweals/u-boot.git] / .gitlab-ci.yml
1 # SPDX-License-Identifier: GPL-2.0+
2
3 # Grab our configured image.  The source for this is found at:
4 # https://gitlab.denx.de/u-boot/gitlab-ci-runner
5 image: trini/u-boot-gitlab-ci-runner:bionic-20200311-10Apr2020
6
7 # We run some tests in different order, to catch some failures quicker.
8 stages:
9   - testsuites
10   - test.py
11   - world build
12
13 .buildman_and_testpy_template: &buildman_and_testpy_dfn
14   tags: [ 'all' ]
15   stage: test.py
16   before_script:
17     # Clone uboot-test-hooks
18     - git clone --depth=1 git://github.com/swarren/uboot-test-hooks.git /tmp/uboot-test-hooks
19     - ln -s travis-ci /tmp/uboot-test-hooks/bin/`hostname`
20     - ln -s travis-ci /tmp/uboot-test-hooks/py/`hostname`
21     - grub-mkimage --prefix="" -o ~/grub_x86.efi -O i386-efi normal  echo lsefimmap lsefi lsefisystab efinet tftp minicmd
22     - grub-mkimage --prefix="" -o ~/grub_x64.efi -O x86_64-efi normal  echo lsefimmap lsefi lsefisystab efinet tftp minicmd
23     - cp /opt/grub/grubriscv64.efi ~/grub_riscv64.efi
24     - cp /opt/grub/grubriscv32.efi ~/grub_riscv32.efi
25     - cp /opt/grub/grubaa64.efi ~/grub_arm64.efi
26     - cp /opt/grub/grubarm.efi ~/grub_arm.efi
27     - if [[ "${TEST_PY_BD}" == "qemu-riscv32_spl" ]]; then
28         wget -O - https://github.com/riscv/opensbi/releases/download/v0.6/opensbi-0.6-rv32-bin.tar.xz | tar -C /tmp -xJ;
29         export OPENSBI=/tmp/opensbi-0.6-rv32-bin/platform/qemu/virt/firmware/fw_dynamic.bin;
30       fi
31     - if [[ "${TEST_PY_BD}" == "qemu-riscv64_spl" ]]; then
32         wget -O - https://github.com/riscv/opensbi/releases/download/v0.6/opensbi-0.6-rv64-bin.tar.xz | tar -C /tmp -xJ;
33         export OPENSBI=/tmp/opensbi-0.6-rv64-bin/platform/qemu/virt/firmware/fw_dynamic.bin;
34       fi
35
36   after_script:
37     - rm -rf /tmp/uboot-test-hooks /tmp/venv
38   script:
39     # From buildman, exit code 129 means warnings only.  If we've been asked to
40     # use clang only do one configuration.
41     - export UBOOT_TRAVIS_BUILD_DIR=/tmp/${TEST_PY_BD}
42     - ret=0;
43       tools/buildman/buildman -o ${UBOOT_TRAVIS_BUILD_DIR} -w -E
44         --board ${TEST_PY_BD} ${OVERRIDE} || ret=$?;
45       if [[ $ret -ne 0 && $ret -ne 129 ]]; then
46         tools/buildman/buildman -o ${UBOOT_TRAVIS_BUILD_DIR} -w -se
47            --board ${TEST_PY_BD};
48         exit $ret;
49       fi
50     - virtualenv -p /usr/bin/python3 /tmp/venv
51     - . /tmp/venv/bin/activate
52     - pip install -r test/py/requirements.txt
53     # "${var:+"-k $var"}" expands to "" if $var is empty, "-k $var" if not
54     - export PATH=/opt/qemu/bin:/tmp/uboot-test-hooks/bin:${PATH};
55       export PYTHONPATH=/tmp/uboot-test-hooks/py/travis-ci;
56       ./test/py/test.py --bd ${TEST_PY_BD} ${TEST_PY_ID}
57         ${TEST_PY_TEST_SPEC:+"-k ${TEST_PY_TEST_SPEC}"}
58         --build-dir "$UBOOT_TRAVIS_BUILD_DIR";
59       ret=$?;
60       if [[ $ret -ne 0 ]]; then
61         exit $ret;
62       fi
63
64 build all 32bit ARM platforms:
65   tags: [ 'all' ]
66   stage: world build
67   script:
68     - ret=0;
69       ./tools/buildman/buildman -o /tmp -P -E arm -x aarch64 || ret=$?;
70       if [[ $ret -ne 0 && $ret -ne 129 ]]; then
71         ./tools/buildman/buildman -o /tmp -seP;
72         exit $ret;
73       fi;
74
75 build all 64bit ARM platforms:
76   tags: [ 'all' ]
77   stage: world build
78   script:
79     - virtualenv -p /usr/bin/python3 /tmp/venv
80     - . /tmp/venv/bin/activate
81     - pip install pyelftools
82     - ret=0;
83       ./tools/buildman/buildman -o /tmp -P -E aarch64 || ret=$?;
84       if [[ $ret -ne 0 && $ret -ne 129 ]]; then
85         ./tools/buildman/buildman -o /tmp -seP;
86         exit $ret;
87       fi;
88
89 build all PowerPC platforms:
90   tags: [ 'all' ]
91   stage: world build
92   script:
93     - ret=0;
94       ./tools/buildman/buildman -o /tmp -P -E powerpc || ret=$?;
95       if [[ $ret -ne 0 && $ret -ne 129 ]]; then
96         ./tools/buildman/buildman -o /tmp -seP;
97         exit $ret;
98       fi;
99
100 build all other platforms:
101   tags: [ 'all' ]
102   stage: world build
103   script:
104     - ret=0;
105       ./tools/buildman/buildman -o /tmp -P -E -x arm,powerpc || ret=$?;
106       if [[ $ret -ne 0 && $ret -ne 129 ]]; then
107         ./tools/buildman/buildman -o /tmp -seP;
108         exit $ret;
109       fi;
110
111 # QA jobs for code analytics
112 # static code analysis with cppcheck (we can add --enable=all later)
113 cppcheck:
114   tags: [ 'all' ]
115   stage: testsuites
116   script:
117     - cppcheck --force --quiet --inline-suppr .
118
119 # search for TODO within source tree
120 grep TODO/FIXME/HACK:
121   tags: [ 'all' ]
122   stage: testsuites
123   script:
124     - grep -r TODO .
125     - grep -r FIXME .
126     # search for HACK within source tree and ignore HACKKIT board
127     - grep -r HACK . | grep -v HACKKIT
128
129 # build HTML documentation
130 htmldocs:
131   tags: [ 'all' ]
132   stage: testsuites
133   script:
134     - make htmldocs
135
136 # some statistics about the code base
137 sloccount:
138   tags: [ 'all' ]
139   stage: testsuites
140   script:
141     - sloccount .
142
143 # ensure all configs have MAINTAINERS entries
144 Check for configs without MAINTAINERS entry:
145   tags: [ 'all' ]
146   stage: testsuites
147   script:
148     - if [ `./tools/genboardscfg.py -f 2>&1 | wc -l` -ne 0 ]; then exit 1; fi
149
150 # Ensure host tools build
151 Build tools-only:
152   tags: [ 'all' ]
153   stage: testsuites
154   script:
155     - make tools-only_config tools-only -j$(nproc)
156
157 # Ensure env tools build
158 Build envtools:
159   tags: [ 'all' ]
160   stage: testsuites
161   script:
162     - make tools-only_config envtools -j$(nproc)
163
164 Run binman, buildman, dtoc, Kconfig and patman testsuites:
165   tags: [ 'all' ]
166   stage: testsuites
167   script:
168     - git config --global user.name "GitLab CI Runner";
169       git config --global user.email trini@konsulko.com;
170       export USER=gitlab;
171       virtualenv -p /usr/bin/python3 /tmp/venv;
172       . /tmp/venv/bin/activate;
173       pip install pyelftools pytest;
174       export UBOOT_TRAVIS_BUILD_DIR=/tmp/sandbox_spl;
175       export PYTHONPATH="${UBOOT_TRAVIS_BUILD_DIR}/scripts/dtc/pylibfdt";
176       export PATH="${UBOOT_TRAVIS_BUILD_DIR}/scripts/dtc:${PATH}";
177       ./tools/buildman/buildman -o ${UBOOT_TRAVIS_BUILD_DIR} -w sandbox_spl;
178       ./tools/binman/binman --toolpath ${UBOOT_TRAVIS_BUILD_DIR}/tools test;
179       ./tools/buildman/buildman -t;
180       ./tools/dtoc/dtoc -t;
181       ./tools/patman/patman --test;
182       make testconfig
183
184 # Test sandbox with test.py
185 sandbox test.py:
186   tags: [ 'all' ]
187   variables:
188     TEST_PY_BD: "sandbox"
189   <<: *buildman_and_testpy_dfn
190
191 sandbox with clang test.py:
192   tags: [ 'all' ]
193   variables:
194     TEST_PY_BD: "sandbox"
195     OVERRIDE: "-O clang-7"
196   <<: *buildman_and_testpy_dfn
197
198 sandbox_spl test.py:
199   tags: [ 'all' ]
200   variables:
201     TEST_PY_BD: "sandbox_spl"
202     TEST_PY_TEST_SPEC: "test_ofplatdata"
203   <<: *buildman_and_testpy_dfn
204
205 evb-ast2500 test.py:
206   tags: [ 'all' ]
207   variables:
208     TEST_PY_BD: "evb-ast2500"
209     TEST_PY_ID: "--id qemu"
210   <<: *buildman_and_testpy_dfn
211
212 sandbox_flattree test.py:
213   tags: [ 'all' ]
214   variables:
215     TEST_PY_BD: "sandbox_flattree"
216   <<: *buildman_and_testpy_dfn
217
218 vexpress_ca15_tc2 test.py:
219   tags: [ 'all' ]
220   variables:
221     TEST_PY_BD: "vexpress_ca15_tc2"
222     TEST_PY_ID: "--id qemu"
223   <<: *buildman_and_testpy_dfn
224
225 vexpress_ca9x4 test.py:
226   tags: [ 'all' ]
227   variables:
228     TEST_PY_BD: "vexpress_ca9x4"
229     TEST_PY_ID: "--id qemu"
230   <<: *buildman_and_testpy_dfn
231
232 integratorcp_cm926ejs test.py:
233   tags: [ 'all' ]
234   variables:
235     TEST_PY_BD: "integratorcp_cm926ejs"
236     TEST_PY_TEST_SPEC: "not sleep"
237     TEST_PY_ID: "--id qemu"
238   <<: *buildman_and_testpy_dfn
239
240 qemu_arm test.py:
241   tags: [ 'all' ]
242   variables:
243     TEST_PY_BD: "qemu_arm"
244     TEST_PY_TEST_SPEC: "not sleep"
245   <<: *buildman_and_testpy_dfn
246
247 qemu_arm64 test.py:
248   tags: [ 'all' ]
249   variables:
250     TEST_PY_BD: "qemu_arm64"
251     TEST_PY_TEST_SPEC: "not sleep"
252   <<: *buildman_and_testpy_dfn
253
254 qemu_mips test.py:
255   tags: [ 'all' ]
256   variables:
257     TEST_PY_BD: "qemu_mips"
258     TEST_PY_TEST_SPEC: "not sleep"
259   <<: *buildman_and_testpy_dfn
260
261 qemu_mipsel test.py:
262   tags: [ 'all' ]
263   variables:
264     TEST_PY_BD: "qemu_mipsel"
265     TEST_PY_TEST_SPEC: "not sleep"
266   <<: *buildman_and_testpy_dfn
267
268 qemu_mips64 test.py:
269   tags: [ 'all' ]
270   variables:
271     TEST_PY_BD: "qemu_mips64"
272     TEST_PY_TEST_SPEC: "not sleep"
273   <<: *buildman_and_testpy_dfn
274
275 qemu_mips64el test.py:
276   tags: [ 'all' ]
277   variables:
278     TEST_PY_BD: "qemu_mips64el"
279     TEST_PY_TEST_SPEC: "not sleep"
280   <<: *buildman_and_testpy_dfn
281
282 qemu-ppce500 test.py:
283   tags: [ 'all' ]
284   variables:
285     TEST_PY_BD: "qemu-ppce500"
286     TEST_PY_TEST_SPEC: "not sleep"
287   <<: *buildman_and_testpy_dfn
288
289 qemu-riscv32 test.py:
290   tags: [ 'all' ]
291   variables:
292     TEST_PY_BD: "qemu-riscv32"
293     TEST_PY_TEST_SPEC: "not sleep"
294   <<: *buildman_and_testpy_dfn
295
296 qemu-riscv64 test.py:
297   tags: [ 'all' ]
298   variables:
299     TEST_PY_BD: "qemu-riscv64"
300     TEST_PY_TEST_SPEC: "not sleep"
301   <<: *buildman_and_testpy_dfn
302
303 qemu-riscv32_spl test.py:
304   tags: [ 'all' ]
305   variables:
306     TEST_PY_BD: "qemu-riscv32_spl"
307     TEST_PY_TEST_SPEC: "not sleep"
308   <<: *buildman_and_testpy_dfn
309
310 qemu-riscv64_spl test.py:
311   tags: [ 'all' ]
312   variables:
313     TEST_PY_BD: "qemu-riscv64_spl"
314     TEST_PY_TEST_SPEC: "not sleep"
315   <<: *buildman_and_testpy_dfn
316
317 qemu-x86 test.py:
318   tags: [ 'all' ]
319   variables:
320     TEST_PY_BD: "qemu-x86"
321     TEST_PY_TEST_SPEC: "not sleep"
322   <<: *buildman_and_testpy_dfn
323
324 qemu-x86_64 test.py:
325   tags: [ 'all' ]
326   variables:
327     TEST_PY_BD: "qemu-x86_64"
328     TEST_PY_TEST_SPEC: "not sleep"
329   <<: *buildman_and_testpy_dfn
330
331 xilinx_zynq_virt test.py:
332   tags: [ 'all' ]
333   variables:
334     TEST_PY_BD: "xilinx_zynq_virt"
335     TEST_PY_TEST_SPEC: "not sleep"
336     TEST_PY_ID: "--id qemu"
337   <<: *buildman_and_testpy_dfn
338
339 xilinx_versal_virt test.py:
340   tags: [ 'all' ]
341   variables:
342     TEST_PY_BD: "xilinx_versal_virt"
343     TEST_PY_TEST_SPEC: "not sleep"
344     TEST_PY_ID: "--id qemu"
345   <<: *buildman_and_testpy_dfn
346
347 xtfpga test.py:
348   tags: [ 'all' ]
349   variables:
350     TEST_PY_BD: "xtfpga"
351     TEST_PY_TEST_SPEC: "not sleep"
352     TEST_PY_ID: "--id qemu"
353   <<: *buildman_and_testpy_dfn