Refactor tests launching procedure
[transportpce.git] / tox.ini
1 [tox]
2 minversion = 3.7.0
3 envlist = buildcontroller,testsPCE,sims121,tests121,sims221,tests221,sims71,tests71,tests_hybrid
4     docs
5     docs-linkcheck
6     checkbashisms
7     pre-commit
8     gitlint
9 skipsdist = true
10 setupdir = tests/
11
12 [testenv]
13 passenv = USE_LIGHTY http_proxy HTTP_PROXY https_proxy HTTPS_PROXY no_proxy NO_PROXY
14 setenv =
15     USE_LIGHTY = True
16 usedevelop = true
17 basepython = python3
18 deps =
19   -r{toxinidir}/tests/requirements.txt
20   -r{toxinidir}/tests/test-requirements.txt
21   setuptools>=7.0
22 changedir = {toxinidir}/tests
23 parallel_show_output = true
24
25 [testenv:buildcontroller]
26 whitelist_externals = sh
27                       sudo
28 commands =
29 #install maven and JDK11 on the Gate since they are not there by default
30   sh -c "which mvn >/dev/null || ./installMavenCentOS.sh"
31 #install honeynode 1.2.1 simulators
32 #patch OLM constant to speed up tests, unnecessary for PCE tests
33   sh -c "sed -i'_' 's@=.*//#FUNCTESTVAL=@=@g' ../olm/src/main/java/org/opendaylight/transportpce/olm/util/OlmUtils.java"
34 #build controller, source JDK_JAVA_OPTIONS to remove illegal reflective acces warnings introduced by Java11
35   sh -c ". $PWD/reflectwarn.sh && cd .. && mvn clean install -B -q -s tests/odl_settings.xml -DskipTests -Dmaven.javadoc.skip=true -Dodlparent.spotbugs.skip -Dodlparent.checkstyle.skip"
36   sh -c "mv  ../olm/src/main/java/org/opendaylight/transportpce/olm/util/OlmUtils.java_  ../olm/src/main/java/org/opendaylight/transportpce/olm/util/OlmUtils.java"
37 #patch Karaf exec for the same reason at runtime
38   sh -c "sed -i'_' 's@!/bin/sh@!/bin/sh\'$'\n. $(dirname $0)/../../../../tests/reflectwarn.sh@' ../karaf/target/assembly/bin/karaf"
39   # the following command would be the straight and right way to support both BSD and GNU sed versions
40   # sh -c "sed -i'_' '1 a\'$'\n. \$(dirname \$0)/\.\./\.\./\.\./\.\./tests/reflectwarn.sh\n' ../karaf/target/assembly/bin/karaf"
41   # but tox reinterprets the quotes as
42   # sh -c 'sed -i'"'"'_'"'"' '"'"'1 a\'"'"'$'"'"'\n. \$(dirname \$0)/\.\./\.\./\.\./\.\./tests/reflectwarn.sh\n'"'"' ../karaf/target/assembly/bin/karaf'
43   # ,what results in an unexpected different formating (with a $ on the second line and the dot on the third)
44 #build Lighty if needed
45   sh -c 'if [ "$USE_LIGHTY" = "True" ]; then (cd ../lighty && ./build.sh); fi'
46
47 [testenv:sims121]
48 whitelist_externals = sh
49 depends = buildcontroller
50 # sims profiles does not strictly depends on buildcontroller
51 # but this dependency avoids race condition in the gate
52 commands =
53   - sh -c "./install_honeynode.sh 1.2.1"
54
55 [testenv:sims221]
56 whitelist_externals = sh
57 depends = buildcontroller
58 commands =
59   - sh -c "./install_honeynode.sh 2.2.1"
60
61 [testenv:sims71]
62 whitelist_externals = sh
63 depends = buildcontroller
64 commands =
65   - sh -c "./install_honeynode.sh 7.1"
66
67 [testenv:testsPCE]
68 depends = buildcontroller
69 whitelist_externals = launch_tests.sh
70 passenv = LAUNCHER
71 commands =
72   ./launch_tests.sh pce {posargs:}
73
74 [testenv:tests121]
75 depends = buildcontroller,sims121,testsPCE
76 #the last dependency is to avoid temporarily concurrent ressources problem to fix in parallel mode
77 whitelist_externals = launch_tests.sh
78 passenv = LAUNCHER
79 commands =
80   ./launch_tests.sh 1.2.1 {posargs:}
81 # By default, all tests in the folder transportpce_tests/1.2.1/ are run.
82 # Though, a restricted list of tests can be passed as argument to 'tox -e tests121'.
83 # For example, 'tox -e tests121 portmapping' will run only the portmapping test.
84 # and 'tox -e tests121 "portmapping pce"' will run the portmapping and pce tests.
85 # Additionnally, a different launcher command than 'nosetests --with-xunit' can be
86 # used by exporting the variable LAUNCHER. For example 'export LAUNCHER="python3"'
87 # which is more verbose than nose or 'export LAUNCHER="ls -l"' to only list script
88 # files attributes.
89
90 [testenv:tests221]
91 depends = buildcontroller,sims221,tests121
92 #the last dependency is to avoid temporarily concurrent ressources problem to fix in parallel mode
93 whitelist_externals = launch_tests.sh
94 passenv = LAUNCHER
95 commands =
96   ./launch_tests.sh 2.2.1 {posargs:}
97
98 [testenv:tests71]
99 depends = buildcontroller,sims71,tests221
100 #the last dependency is to avoid temporarily concurrent ressources problem to fix in parallel mode
101 whitelist_externals = launch_tests.sh
102 passenv = LAUNCHER
103 commands =
104   ./launch_tests.sh 7.1 {posargs:}
105
106 [testenv:tests_hybrid]
107 depends = buildcontroller,sims121,sims221,sims71,tests71
108 #the last dependency is to avoid temporarily concurrent ressources problem to fix in parallel mode
109 whitelist_externals = launch_tests.sh
110 passenv = LAUNCHER
111 commands =
112 #  nosetests --with-xunit transportpce_tests/hybrid/test01_device_change_notifications.py
113   ./launch_tests.sh hybrid {posargs:}
114
115 [testenv:gnpy]
116 depends = buildcontroller
117 whitelist_externals = sh
118                       sudo
119 commands =
120   #sudo docker pull atriki/gnpyrest:v1.2
121   sudo docker run -d -p 8008:5000 --name gnpy_tpce_rest1 atriki/gnpyrest:v1.2
122   nosetests --with-xunit transportpce_tests/with_docker/test_gnpy.py
123   sudo docker container rm -f gnpy_tpce_rest1
124
125 [testenv:nbinotifications]
126 depends = buildcontroller,sims221
127 whitelist_externals = sh
128                       sudo
129 commands =
130   sudo docker-compose -f ./nbinotifications/docker-compose.yml up -d
131   nosetests --with-xunit transportpce_tests/with_docker/test_nbinotifications.py
132   sudo docker-compose -f ./nbinotifications/docker-compose.yml down --rmi all
133
134 [testenv:docs]
135 passenv = http_proxy HTTP_PROXY https_proxy HTTPS_PROXY no_proxy NO_PROXY
136 basepython = python3
137 deps = -rdocs/requirements.txt
138 commands =
139     sphinx-build -q -W -b html -n -d {envtmpdir}/doctrees ../docs/ {toxinidir}/docs/_build/html
140
141 [testenv:docs-linkcheck]
142 passenv = http_proxy HTTP_PROXY https_proxy HTTPS_PROXY no_proxy NO_PROXY
143 basepython = python3
144 deps = -rdocs/requirements.txt
145 commands = sphinx-build -q -b linkcheck -d {envtmpdir}/doctrees ../docs/ {toxinidir}/docs/_build/linkcheck
146
147 [testenv:checkbashisms]
148 deps =
149 whitelist_externals = sh
150                       checkbashisms
151                       sudo
152                       find
153 commands =
154     sh -c 'command checkbashisms>/dev/null || sudo yum install devscripts-minimal || (echo "checkbashisms command not found - please install it (e.g. sudo apt-get install devscripts | yum install devscripts-minimal )" >&2 && exit 1)'
155     find . -not -path '*/\.*' -name *.sh -exec checkbashisms -f  \{\} +
156
157 [testenv:spelling]
158 basepython = python3
159 deps =
160     -rdocs/requirements.txt
161     sphinxcontrib-spelling
162     PyEnchant
163 commands = sphinx-build -b spelling  -d {envtmpdir}/doctrees ../docs/ {toxinidir}/docs/_build/spelling
164
165 [testenv:autopep8]
166 basepython = python3
167 deps = autopep8
168 commands =
169     autopep8 --max-line-length 120 --in-place --recursive transportpce_tests/
170
171 [testenv:pylint]
172 basepython = python3
173 deps = pylint
174 whitelist_externals = find
175 commands =
176     find transportpce_tests/ -name *.py -exec pylint --max-line-length=120 --disable=missing-docstring --method-rgx="(([a-z_][a-zA-Z0-9_]{2,})|(_[a-z0-9_]*)|(__[a-zA-Z][a-zA-Z0-9_]+__))$" --variable-rgx="[a-zA-Z_][a-zA-Z0-9_]{1,30}$" --reports=y --score=y  --output-format=colorized  \{\} +
177
178 [testenv:pyang]
179 basepython = python3
180 deps = pyang
181 whitelist_externals = find
182 commands =
183     pyang --version
184     find ../api/ -name target -prune -o -name *.yang -exec pyang --lint --canonical --max-line-length=120 -p../api/src/main/yang/:../ordmodels/common/src/main/yang/:../ordmodels/service/src/main/yang/:../tapimodels/src/main/yang/ \{\} +
185 #find ../api/ ../ordmodels/ ../tapimodels/ -name target -prune -o -name *.yang -exec pyang --lint --canonical --max-line-length=120 -p../api/src/main/yang/:../ordmodels/common/src/main/yang/:../ordmodels/service/src/main/yang/:../tapimodels/src/main/yang/ \{\} +
186
187 [testenv:pyangformat]
188 basepython = python3
189 deps = pyang
190 whitelist_externals = sh
191 commands =
192     pyang --version
193     sh -c 'find ../api/ -name target -prune -o -name *.yang -print | while read -r fname; do pyang -f yang --yang-canonical --yang-remove-unused-imports --max-line-length=120 --keep-comments -p../api/src/main/yang/:../ordmodels/common/src/main/yang/:../ordmodels/service/src/main/yang/:../tapimodels/src/main/yang/ "$fname"  -o /tmp/tmpfile.$$ && mv /tmp/tmpfile.$$ "$fname";done'
194
195 [testenv:pre-commit-install]
196 basepython = python3
197 deps = pre-commit
198 commands =
199     pre-commit install
200     pre-commit install --hook-type commit-msg
201
202 [testenv:pre-commit-uninstall]
203 basepython = python3
204 deps = pre-commit
205 commands =
206     pre-commit uninstall
207     pre-commit uninstall --hook-type commit-msg
208
209 [testenv:pre-commit]
210 basepython = python3
211 deps = pre-commit
212 passenv = HOME
213 commands =
214     pre-commit run --all-files --show-diff-on-failure
215     pre-commit run gitlint --hook-stage commit-msg --commit-msg-filename .git/COMMIT_EDITMSG
216     # Gitlint only proposes a pre-commit configuration for the commit-msg stage but none for the commit stage.
217     # Its default arguments --passed and --msg-filename are different from CI recommandations.
218     # As a result, the line above is always skipped in jenkins CI since there cannot be a .git/COMMIT_EDITMSG file.
219     # A dedicated gitlint profile for CI is proposed below. Also to behave fine locally, this profile must have access
220     # to the HOME variable so that Gitlint can retrieve Git user settings.
221
222 [testenv:gitlint]
223 basepython = python3
224 deps = gitlint
225 commands =
226     gitlint
227