Move verify and periodic jobs to City Cloud instances
[infra/cicd.git] / jjb / cloud-infra / cloud-infra-periodic-engine.yaml
1 ---
2 #
3 # ============LICENSE_START=======================================================
4 #  Copyright (C) 2019 Nordix Foundation.
5 # ================================================================================
6 # Licensed under the Apache License, Version 2.0 (the "License");
7 # you may not use this file except in compliance with the License.
8 # You may obtain a copy of the License at
9 #
10 #      http://www.apache.org/licenses/LICENSE-2.0
11 #
12 # Unless required by applicable law or agreed to in writing, software
13 # distributed under the License is distributed on an "AS IS" BASIS,
14 # WITHOUT WARRANTIES OR CONDITIONS OF ANY KIND, either express or implied.
15 # See the License for the specific language governing permissions and
16 # limitations under the License.
17 #
18 # SPDX-License-Identifier: Apache-2.0
19 # ============LICENSE_END=========================================================
20
21 #--------------------------------------------------------------------------------------
22 # The jobs declared in this JJB configuration file are used for verifying cloud-infra
23 # engine from the tip of the master branch periodically to check the stability of it.
24 #
25 # These jobs are set to run on slaves with label vpod-deploy-ubuntu1604.
26 # The slaves have
27 #   - Ubuntu1604 as the base distro
28 #   - nested virtualization
29 #   - internet access
30 #   - passwordless sudo
31 #   - 16 CPUs/32GB RAM/200 GB Disk
32 #   - docker, git vim curl wget zip unzip chrony apt-transport-https ca-certificates curl
33 #     gnupg-agent software-properties-common docker-ce docker-ce-cli containerd.io openjdk-8-jre
34 #
35 # The slaves should not have a cloud infra scenario deployed on them.
36 #--------------------------------------------------------------------------------------
37
38 - project:
39     name: 'cloud-infra-periodic-engine'
40
41     project: 'infra/engine'
42
43     stream:
44       - 'master':
45           branch: '{stream}'
46           disabled: 'false'
47
48     os:
49       - ubuntu1804:
50           disabled: 'false'
51           distribution: 'ubuntu18'
52           ipa_dib_os_element: 'coreos'
53           dib_os_release: 'bionic'
54           dib_os_element: 'ubuntu-minimal'
55       - centos7:
56           disabled: 'true'
57           distribution: 'centos7'
58           ipa_dib_os_element: 'coreos'
59           dib_os_release: '7'
60           dib_os_element: 'centos-minimal'
61
62     type:
63       - virtual
64
65     phase:
66       - deploy
67       - functest
68
69     jobs:
70       - 'cloud-infra-periodic-engine-{os}-{type}-{stream}'
71       - 'cloud-infra-periodic-{os}-{phase}-{type}-{stream}'
72
73 - job-template:
74     name: 'cloud-infra-periodic-engine-{os}-{type}-{stream}'
75
76     project-type: multijob
77
78     disabled: '{obj:disabled}'
79
80     concurrent: true
81
82     parameters:
83       - project-parameters:
84           project: '{project}'
85           branch: '{branch}'
86       - nordix-gerrit-parameters
87       - label:
88           name: SLAVE_LABEL
89           default: 'vpod-deploy-city'
90           description: 'Slave label to schedule this job on. All slaves have Ubuntu1604 no matter what distro target nodes use'
91       - string:
92           name: DISTRIBUTION
93           default: '{distribution}'
94           description: 'Distribution to use for configuring target nodes (networking etc.)'
95       - string:
96           name: USE_PREBUILT_DEPLOYMENT_IMAGE
97           default: 'true'
98           description: 'Use prebuilt deployment image while running as part of CI/CD'
99       - string:
100           name: IPA_DIB_OS_ELEMENT
101           default: '{ipa_dib_os_element}'
102           description: 'DIB OS Element to use for building the ramdisk image'
103       - string:
104           name: DIB_OS_RELEASE
105           default: '{dib_os_release}'
106           description: 'DIB OS Release to use for building the deployment image to provision target nodes with'
107       - string:
108           name: DIB_OS_ELEMENT
109           default: '{dib_os_element}'
110           description: 'DIB OS Element to use for building the deployment image to provision target nodes with'
111       - string:
112           name: DEPLOY_SCENARIO
113           default: 'k8-calico-nofeature'
114           description: 'Scenario to deploy and test'
115       - string:
116           name: TEST_SUITE
117           default: 'healthcheck'
118           description: 'Test suite to run'
119       - string:
120           name: CLEANUP
121           default: 'true'
122           description: 'Cleanup leftovers of the previous run'
123
124     properties:
125       - logrotate
126       - build-blocker:
127           use-build-blocker: true
128           blocking-jobs:
129             - 'cloud-infra-verify-engine-{os}-.*'
130             - 'cloud-infra-periodic-engine-{os}-.*'
131             - 'cloud-infra-os-.*'
132             - 'cloud-infra-k8-.*'
133           block-level: 'NODE'
134       - throttle:
135           max-per-node: 1
136           max-total: 3
137           option: project
138
139     wrappers:
140       - build-timeout:
141           timeout: 120
142       - fix-workspace-permissions
143
144     scm:
145       - git-scm:
146           ssh-credentials-id: nordixinfra-nordix-gerrit-ssh
147           branch: '{branch}'
148           refspec: ''
149
150     triggers:
151       - timed: 'H H/2 * * *'
152
153     builders:
154       - multijob:
155           name: deploy
156           condition: SUCCESSFUL
157           projects:
158             - name: 'cloud-infra-periodic-{os}-deploy-{type}-{stream}'
159               current-parameters: true
160               predefined-parameters: |
161                 DISTRIBUTION=$DISTRIBUTION
162                 USE_PREBUILT_DEPLOYMENT_IMAGE=$USE_PREBUILT_DEPLOYMENT_IMAGE
163                 IPA_DIB_OS_ELEMENT=$IPA_DIB_OS_ELEMENT
164                 DIB_OS_RELEASE=$DIB_OS_RELEASE
165                 DIB_OS_ELEMENT=$DIB_OS_ELEMENT
166                 DEPLOY_SCENARIO=$DEPLOY_SCENARIO
167                 CLEANUP=$CLEANUP
168               git-revision: true
169               node-parameters: true
170               kill-phase-on: FAILURE
171               abort-all-job: true
172       - multijob:
173           name: functest
174           condition: ALWAYS
175           projects:
176             - name: 'cloud-infra-periodic-{os}-functest-{type}-{stream}'
177               current-parameters: true
178               predefined-parameters: |
179                 DISTRIBUTION=$DISTRIBUTION
180                 DEPLOY_SCENARIO=$DEPLOY_SCENARIO
181                 TEST_SUITE=$TEST_SUITE
182                 CLEANUP=$CLEANUP
183               node-parameters: true
184               kill-phase-on: NEVER
185               abort-all-job: false
186       - multijob:
187           name: yardstick
188           condition: ALWAYS
189           projects:
190             - name: 'cloud-infra-periodic-{os}-yardstick-{type}-{stream}'
191               current-parameters: true
192               predefined-parameters: |
193                 DISTRIBUTION=$DISTRIBUTION
194                 DEPLOY_SCENARIO=$DEPLOY_SCENARIO
195                 TEST_SUITE=$TEST_SUITE
196                 CLEANUP=$CLEANUP
197               node-parameters: true
198               kill-phase-on: NEVER
199               abort-all-job: false
200
201 - job-template:
202     name: 'cloud-infra-periodic-{os}-{phase}-{type}-{stream}'
203
204     disabled: false
205
206     concurrent: true
207
208     properties:
209       - logrotate
210
211     parameters:
212       - string:
213           name: PROJECT
214           default: $GERRIT_PROJECT
215       - string:
216           name: DISTRIBUTION
217           default: 'ubuntu18'
218           description: 'Distribution to use for configuring target nodes (networking etc.). Overriden by upstream job.'
219       - string:
220           name: USE_PREBUILT_DEPLOYMENT_IMAGE
221           default: 'false'
222           description: 'Use prebuilt deployment image while running as part of CI/CD'
223       - string:
224           name: IPA_DIB_OS_ELEMENT
225           default: 'fedora'
226           description: 'DIB OS Element to use for building the ramdisk image. Overriden by upstream job.'
227       - string:
228           name: DIB_OS_RELEASE
229           default: 'bionic'
230           description: 'DIB OS Release to use for building the deployment image to provision target nodes with. Overriden by upstream job.'
231       - string:
232           name: DIB_OS_ELEMENT
233           default: 'ubuntu-minimal'
234           description: 'DIB OS Element to use for building the deployment image to provision target nodes with. Overriden by upstream job.'
235       - string:
236           name: ENGINE_ANSIBLE_PARAMS
237           default: ' -v '
238           description: 'Extra paramters that can be added when run the play books.'
239       - string:
240           name: DEPLOY_SCENARIO
241           default: 'k8-calico-nofeature'
242           description: 'Scenario to deploy and test'
243       - string:
244           name: TEST_FW
245           default: '{phase}'
246           description: 'Test framework to use'
247       - string:
248           name: TEST_SUITE
249           default: 'healthcheck'
250           description: 'Test suite to run'
251       - string:
252           name: TEST_REPO_URL
253           default: 'https://gerrit.nordix.org/infra/test.git'
254           description: 'URL to Nordix Cloud Infra test repository'
255       - string:
256           name: CLEANUP
257           default: 'false'
258
259     wrappers:
260       - build-timeout:
261           timeout: 120
262       - fix-workspace-permissions
263
264     scm:
265       - git-scm:
266           ssh-credentials-id: nordixinfra-nordix-gerrit-ssh
267           branch: '{branch}'
268           refspec: ''
269
270     builders:
271       - 'cloud-infra-{phase}-macro'
272
273 # vim: set ts=2 sw=2 expandtab: