Fix scenario verification jobs
[infra/cicd.git] / jjb / cloud-infra / cloud-infra-verify-scenario.yaml
1 ---
2 #
3 # ============LICENSE_START=======================================================
4 #  Copyright (C) 2019 Nordix Foundation.
5 # ================================================================================
6 # Licensed under the Apache License, Version 2.0 (the "License");
7 # you may not use this file except in compliance with the License.
8 # You may obtain a copy of the License at
9 #
10 #      http://www.apache.org/licenses/LICENSE-2.0
11 #
12 # Unless required by applicable law or agreed to in writing, software
13 # distributed under the License is distributed on an "AS IS" BASIS,
14 # WITHOUT WARRANTIES OR CONDITIONS OF ANY KIND, either express or implied.
15 # See the License for the specific language governing permissions and
16 # limitations under the License.
17 #
18 # SPDX-License-Identifier: Apache-2.0
19 # ============LICENSE_END=========================================================
20
21 #--------------------------------------------------------------------------------------
22 # The jobs declared in this JJB configuration file are used for verifying patches
23 # that are sent to the repositories below
24 #   - cloud-infra/swconfig
25 #
26 # These jobs verify changes that
27 #   - implement new scenarios or fix bugs in the existing scenarios
28 #
29 # These jobs are set to run on slaves with label vpod-deploy-ubuntu1604.
30 # The slaves have
31 #   - Ubuntu1604 as the base distro
32 #   - nested virtualization
33 #   - internet access
34 #   - passwordless sudo
35 #   - 16 CPUs/32GB RAM/200 GB Disk
36 #   - docker, git vim curl wget zip unzip chrony apt-transport-https ca-certificates curl
37 #     gnupg-agent software-properties-common docker-ce docker-ce-cli containerd.io openjdk-8-jre
38 #
39 # The slaves should not have a cloud infra scenario deployed on them.
40 #--------------------------------------------------------------------------------------
41
42 - project:
43     name: 'cloud-infra-verify-scenario'
44
45     project: 'infra/swconfig'
46
47     stream:
48       - 'master':
49           branch: '{stream}'
50           disabled: 'false'
51
52     os:
53       - ubuntu1804:
54           disabled: 'false'
55           distribution: 'ubuntu18'
56           ipa_dib_os_element: 'coreos'
57           dib_os_release: 'bionic'
58           dib_os_element: 'ubuntu-minimal'
59
60     type:
61       - virtual:
62           slave-label: 'vpod-deploy-city'
63
64     phase:
65       - deploy:
66           build-timeout: 60
67       - functest:
68           build-timeout: 30
69
70     jobs:
71       - 'cloud-infra-verify-scenario-{os}-{type}-{stream}'
72       - 'cloud-infra-verify-scenario-{os}-{phase}-{type}-{stream}'
73
74 - job-template:
75     name: 'cloud-infra-verify-scenario-{os}-{type}-{stream}'
76
77     project-type: multijob
78
79     disabled: '{obj:disabled}'
80
81     concurrent: true
82
83     parameters:
84       - project-parameters:
85           project: '{project}'
86           branch: '{branch}'
87       - nordix-gerrit-parameters
88       - label:
89           name: SLAVE_LABEL
90           default: '{slave-label}'
91           description: 'Slave label to schedule this job on. All slaves have Ubuntu1604 no matter what distro target nodes use'
92       - string:
93           name: DISTRIBUTION
94           default: '{distribution}'
95           description: 'Distribution to use for configuring target nodes (networking etc.)'
96       - string:
97           name: DEPLOY_TYPE
98           default: '{type}'
99           description: 'Type of the deployment'
100       - string:
101           name: USE_PREBUILT_DEPLOYMENT_IMAGE
102           default: 'true'
103           description: 'Use prebuilt deployment image while running as part of CI/CD'
104       - string:
105           name: IPA_DIB_OS_ELEMENT
106           default: '{ipa_dib_os_element}'
107           description: 'DIB OS Element to use for building the ramdisk image'
108       - string:
109           name: DIB_OS_RELEASE
110           default: '{dib_os_release}'
111           description: 'DIB OS Release to use for building the deployment image to provision target nodes with'
112       - string:
113           name: DIB_OS_ELEMENT
114           default: '{dib_os_element}'
115           description: 'DIB OS Element to use for building the deployment image to provision target nodes with'
116       - string:
117           name: DEPLOY_SCENARIO
118           default: 'k8-calico-nofeature'
119           description: 'Scenario to deploy and test'
120       - string:
121           name: TEST_SUITE
122           default: 'healthcheck'
123           description: 'Test suite to run'
124       - string:
125           name: CLEANUP
126           default: 'true'
127           description: 'Cleanup leftovers of the previous run'
128
129     properties:
130       - logrotate
131       - build-blocker:
132           use-build-blocker: true
133           blocking-jobs:
134             - 'cloud-infra-verify-engine-{os}-.*'
135             - 'cloud-infra-verify-scenario-{os}-.*'
136             - 'cloud-infra-periodic-engine-{os}-.*'
137             - 'cloud-infra-os-.*'
138             - 'cloud-infra-k8-.*'
139           block-level: 'NODE'
140       - throttle:
141           max-per-node: 1
142           max-total: 3
143           option: project
144
145     wrappers:
146       - build-timeout:
147           timeout: 90
148       - fix-workspace-permissions
149
150     scm:
151       - git-scm-gerrit:
152           ssh-credentials-id: nordixinfra-nordix-gerrit-ssh
153           branch: '{branch}'
154           refspec: $GERRIT_REFSPEC
155
156     triggers:
157       - nordix-gerrit-trigger-patchset-created:
158           project: 'infra\/swconfig'
159           branch: '{branch}'
160           files: '**'
161
162     builders:
163       - 'cloud-infra-determine-scenario-macro'
164       - multijob:
165           name: deploy
166           condition: SUCCESSFUL
167           projects:
168             - name: 'cloud-infra-verify-scenario-{os}-deploy-{type}-{stream}'
169               current-parameters: true
170               predefined-parameters: |
171                 DISTRIBUTION=$DISTRIBUTION
172                 DEPLOY_TYPE=$DEPLOY_TYPE
173                 USE_PREBUILT_DEPLOYMENT_IMAGE=$USE_PREBUILT_DEPLOYMENT_IMAGE
174                 IPA_DIB_OS_ELEMENT=$IPA_DIB_OS_ELEMENT
175                 DIB_OS_RELEASE=$DIB_OS_RELEASE
176                 DIB_OS_ELEMENT=$DIB_OS_ELEMENT
177                 DEPLOY_SCENARIO=$DEPLOY_SCENARIO
178                 CLEANUP=$CLEANUP
179                 GERRIT_PROJECT=$GERRIT_PROJECT
180                 GERRIT_BRANCH=$GERRIT_BRANCH
181                 GERRIT_REFSPEC=$GERRIT_REFSPEC
182                 GERRIT_CHANGE_NUMBER=$GERRIT_CHANGE_NUMBER
183                 GERRIT_CHANGE_COMMIT_MESSAGE=$GERRIT_CHANGE_COMMIT_MESSAGE
184               node-parameters: true
185               kill-phase-on: FAILURE
186               abort-all-job: true
187       - multijob:
188           name: functest
189           condition: SUCCESSFUL
190           projects:
191             - name: 'cloud-infra-verify-scenario-{os}-functest-{type}-{stream}'
192               current-parameters: true
193               predefined-parameters: |
194                 DISTRIBUTION=$DISTRIBUTION
195                 DEPLOY_TYPE=$DEPLOY_TYPE
196                 USE_PREBUILT_DEPLOYMENT_IMAGE=$USE_PREBUILT_DEPLOYMENT_IMAGE
197                 IPA_DIB_OS_ELEMENT=$IPA_DIB_OS_ELEMENT
198                 DIB_OS_RELEASE=$DIB_OS_RELEASE
199                 DIB_OS_ELEMENT=$DIB_OS_ELEMENT
200                 DEPLOY_SCENARIO=$DEPLOY_SCENARIO
201                 TEST_SUITE=$TEST_SUITE
202                 CLEANUP=$CLEANUP
203                 GERRIT_PROJECT=$GERRIT_PROJECT
204                 GERRIT_BRANCH=$GERRIT_BRANCH
205                 GERRIT_REFSPEC=$GERRIT_REFSPEC
206                 GERRIT_CHANGE_NUMBER=$GERRIT_CHANGE_NUMBER
207                 GERRIT_CHANGE_COMMIT_MESSAGE=$GERRIT_CHANGE_COMMIT_MESSAGE
208               node-parameters: true
209               kill-phase-on: FAILURE
210               abort-all-job: true
211
212 - job-template:
213     name: 'cloud-infra-verify-scenario-{os}-{phase}-{type}-{stream}'
214
215     disabled: false
216
217     concurrent: true
218
219     properties:
220       - logrotate
221
222     parameters:
223       - string:
224           name: PROJECT
225           default: $GERRIT_PROJECT
226       - string:
227           name: DISTRIBUTION
228           default: 'ubuntu18'
229           description: 'Distribution to use for configuring target nodes (networking etc.). Overriden by upstream job.'
230       - string:
231           name: DEPLOY_TYPE
232           default: 'virtual'
233           description: 'Type of the deployment. Overriden by upstream job.'
234       - string:
235           name: USE_PREBUILT_DEPLOYMENT_IMAGE
236           default: 'false'
237           description: 'Use prebuilt deployment image while running as part of CI/CD'
238       - string:
239           name: IPA_DIB_OS_ELEMENT
240           default: 'fedora'
241           description: 'DIB OS Element to use for building the ramdisk image. Overriden by upstream job.'
242       - string:
243           name: DIB_OS_RELEASE
244           default: 'bionic'
245           description: 'DIB OS Release to use for building the deployment image to provision target nodes with. Overriden by upstream job.'
246       - string:
247           name: DIB_OS_ELEMENT
248           default: 'ubuntu-minimal'
249           description: 'DIB OS Element to use for building the deployment image to provision target nodes with. Overriden by upstream job.'
250       - string:
251           name: DEPLOY_SCENARIO
252           default: 'k8-calico-nofeature'
253           description: 'Scenario to deploy and test'
254       - string:
255           name: TEST_FW
256           default: '{phase}'
257           description: 'Test framework to use'
258       - string:
259           name: TEST_SUITE
260           default: 'healthcheck'
261           description: 'Test suite to run'
262       - string:
263           name: ENGINE_REPO_URL
264           default: 'https://gerrit.nordix.org/infra/engine.git'
265           description: 'URL to Nordix Cloud Infra engine repository'
266       - string:
267           name: TEST_REPO_URL
268           default: 'https://gerrit.nordix.org/infra/test.git'
269           description: 'URL to Nordix Cloud Infra test repository'
270       - string:
271           name: CLEANUP
272           default: 'false'
273
274     wrappers:
275       - build-timeout:
276           timeout: '{build-timeout}'
277       - fix-workspace-permissions
278
279     scm:
280       - git-scm-gerrit:
281           ssh-credentials-id: nordixinfra-nordix-gerrit-ssh
282           branch: '{branch}'
283           refspec: $GERRIT_REFSPEC
284
285     builders:
286       - 'cloud-infra-determine-scenario-macro'
287       - 'cloud-infra-scenario-{phase}-macro'
288
289 # vim: set ts=2 sw=2 expandtab: