Merge "Add gre type driver for dc-gw and tdd cases"

Update global-jjb to v0.39.0

- This pulls updated lftools v.0.25.1

Change-Id: Iff10b7ccf36daeea69ab2601475af7224d4993f9
Signed-off-by: Anil Belur <abelur@linuxfoundation.org>

Add missing disabled var to templates

Change-Id: Ief35bec1a6649fc5103f1fe84f167c217d356f22
Signed-off-by: Anil Belur <abelur@linuxfoundation.org>

Merge "Add disable-job var to packaging templates"

Add disable-job var to packaging templates

Change-Id: I2e3769d2598390c7d229a22b7b39ed4885b64beb
Signed-off-by: Anil Belur <abelur@linuxfoundation.org>

Strip git2u packages from devstack rocky

CSIT tests with devstack rocky tries to pull in git dependencies
which conflicts with existing git2u rpms. As a workaround
uninstall them on the devstack rocky image since its not
required.

Change-Id: Ib4f2797c83ded9d19d4d391bbde28cadfdd1f3a6
Signed-off-by: Anil Belur <abelur@linuxfoundation.org>

Merge "Update devstack rocky to the latest"

Merge "Add required deps for devstack rocky"

Add gre type driver for dc-gw and tdd cases

Change-Id: I7716305fb5be438d4fdb4fb2105beada37e2f2e0
Signed-off-by: JayaPr <jaya.priyadarshini@ericsson.com>

Update devstack rocky to the latest

This pulls in the dependencies required for rdma-core
libraries and replace the git2u with default upstream
git rpms.

https://lists.opendaylight.org/pipermail/integration-dev/2019-July/013472.html

Change-Id: I0404e8f4adcbd071cb180f51438d3baa534006b6
Signed-off-by: Anil Belur <abelur@linuxfoundation.org>

Disable packaging jobs for debs

As discussed in the integration call the deb packages
are no longer maintained which is failing the
verify/test jobs.

Change-Id: If0469952d7522a8ddbb4a57edec9b7cfd0f59f46
Signed-off-by: Anil Belur <abelur@linuxfoundation.org>

Add required deps for devstack rocky

Add the required dependency for runtime core libraries
(libibverbs, libmlx5) to devstack rocky image. This
fixes stack initialization issues with CSIT jobs.

https://bugzilla.redhat.com/show_bug.cgi?id=1658141
https://patchwork.ozlabs.org/patch/1011038/

Change-Id: I2db53ef844bd0ee2261560235e05846acfb17eee
Signed-off-by: Anil Belur <abelur@linuxfoundation.org>

Enable archetype/fluorine jobs

The jobs were disabled as part of Oxygen disablement, but that
is not accurate here.

Change-Id: I5eddc74c968e13ca133207d2add45aaabe1ed506
Signed-off-by: Robert Varga <robert.varga@pantheon.tech>

Merge "Migrate Ubuntu 16.04 docker image to common-packer"

Merge "DONT use with_items with yum module"

DONT use with_items with yum module

This fixes deprecation warning to invoke yum module without
with_items. Using with_items is slower and not recommended.

[DEPRECATION WARNING]: Invoking "yum" only once while using a loop
via squash_actions is deprecated. Instead of using a loop to supply
multiple items and specifying `name: {{item}}`, please use
`name: [u'{{sed_output.stdout_lines }}']` and remove the loop.
This feature will be removed in version 2.11.

Change-Id: Ie2c95d54d4ddf59cfc65d4b74cc4008ff4929218
Signed-off-by: Anil Belur <abelur@linuxfoundation.org>

Sign and stage artifacts in Maven Central

This patch turns on code signing and enables deployment to
Maven Central.

Change-Id: Iaf53984b05ff1848979d12ffe766534bb946b2ed
Signed-off-by: Thanh Ha <zxiiro@gmail.com>

Migrate Ubuntu 16.04 docker image to common-packer

Migrate Ubuntu 16.04 docker images for netconf to the
templates available in common-packer. We are using
Ubuntu 16.04 docker images specific to GPB project
that is not maintained.

Move to the templates which are already availble in
common-packer since this will minimize the jobs and the
number of image maintained on the infra.

Tested the image with netconf CSIT job successfully:
https://logs.opendaylight.org/sandbox/vex-yul-odl-jenkins-2/netconf-csit-1node-callhome-only-fluorine/2

Change-Id: Ic3c97f2911eccbe46d1ba0d6e7ea017ae92821ad
Signed-off-by: Anil Belur <abelur@linuxfoundation.org>

Update global-jjb version to v0.38.4

- Pull in lftools fix to handle dup patterns, files/paths

Change-Id: Ib9d4095b32ebc08a6621a8b95cb52560720b57df
Signed-off-by: Anil Belur <abelur@linuxfoundation.org>

Remove unused script to push a gerrit patch

This code has been ported to global-jjb and no
longer used.

https://gerrit.linuxfoundation.org/infra/#/c/releng/global-jjb/+/9878

Change-Id: I1f3bcbff6bbe07e10d986a8d1b07cd9f43cd0cd6
Signed-off-by: Anil Belur <abelur@linuxfoundation.org>

Define controller-core patch test

Aside from having netvirt/genius, also define native patch tests.

Change-Id: I55c47f5e519594fcc3031f96c4540094cec9ccbd
Signed-off-by: Robert Varga <robert.varga@pantheon.tech>

Merge changes I7b52aa72,I2a77a84a

* changes:
  Update CentOS 7 devstack-rocky image to latest
  Update Ubuntu 16.04 mininet-ovs-26 images

Update global-jjb to v0.38.3

- Pull in the latest version of lftools v0.24.0
- Pull in the fix for compressing .xml|.html logs
- Pull in the fix for openstack-cron-jobs failure
- Update jobs to pass submodule params

Change-Id: I3ed00357bb8901a95a98deb5fd9c84513e35ebf1
Signed-off-by: Anil Belur <abelur@linuxfoundation.org>

Merge "Add integration code for rocky"

Fix gclogs collection

Change-Id: I09ae33d8a9cc7dba61802c824e43301239922abc
Signed-off-by: Luis Gomez <ecelgp@gmail.com>

Add numpy to tox.ini

NLTK upstream library adds numpy as a dependency.

Change-Id: I1f4ae11d917a07701f11cd55f89e882571a77aef
Signed-off-by: Anil Belur <abelur@linuxfoundation.org>

Update CentOS 7 devstack-rocky image to latest

Some of the working images on prod were removed because
the openstack cron job did not run for a few weeks on
stack removal failures.

All new images are to be marked as protected, when we update
new images, if the cron job is not running then the imaege
might get removed on the infra.

https://logs.opendaylight.org/releng/vex-yul-odl-jenkins-1/builder-openstack-cron/19027/console.log.gz

Change-Id: I7b52aa722a24ba0efd61c8227e3797e1b176c65b
Signed-off-by: Anil Belur <abelur@linuxfoundation.org>

Update Ubuntu 16.04 mininet-ovs-26 images

Some of the working images on prod werer removed because
the openstack cron job did not run for a few weeks on
stack removal failures.

All new images are to be marked as protected, when we update
new images, if the cron job is not running then the imaege
might get removed on the infra.

https://logs.opendaylight.org/releng/vex-yul-odl-jenkins-1/builder-openstack-cron/19027/console.log.gz

Change-Id: I2a77a84a11c630274dd9cc2cabb76387878d79d6
Signed-off-by: Anil Belur <abelur@linuxfoundation.org>

Merge "Remove Ubuntu 14.04 templates and packer jobs"

Fix missing /tmp

Change-Id: I4af08748c0d46148c9ad03109e916195eef3c38a
Signed-off-by: Luis Gomez <ecelgp@gmail.com>

Merge changes from topic 'shellcheck'

* changes:
  Fix SC2086 Double quote variables
  Fix SC2086 for lines 300 until EOF
  Fix SC2086 for lines 490 until EOF
  Fix SC2086 for lines 575 until EOF
  Fix SC2086 for lines 700 until EOF
  Fix SC2086 for lines 940 until EOF
  Fix SC2004 $/${} unnecessary on arithmetic vars
  Fix SC2006 backtick syntax is legacy

Merge "Remove unused mdsal javadoc jobs"

Merge "Remove unused yangtools javadoc jobs"

Remove Ubuntu 14.04 templates and packer jobs

Ubuntu 14.04 is EOL-ed and no longer supported.

Change-Id: Ib85a6a76dc5acaa9a66b3b2d32d259cf89193949
Signed-off-by: Anil Belur <abelur@linuxfoundation.org>

Update to lastest Ubuntu 16.04 images

Ubuntu 14.04 is EOL-ed and no longer supported.

Change-Id: If78f90ae03ff58097d0b7d2bb23d5ebb2c794b3f
Signed-off-by: Anil Belur <abelur@linuxfoundation.org>

Add integration code for rocky

Change-Id: I4abe948f4334bc97f26bb57d9fd50ef7a233d43c
Signed-off-by: JayaPr <jaya.priyadarshini@ericsson.com>

Merge "Add views for mvn stage and verify deps jobs"

Merge "Update global-jjb to v0.37.6"

Merge "Disable packer jobs with Ubuntu 18.04"

Merge "Update Test jobs for ODL Neon SR1 Release"

Merge "Fix autorelease generated view file name"

Update global-jjb to v0.37.6

- Pull in the fix for deploy logs

Change-Id: I0e4f2dc0e8b91e2ca86adec966accae235dcf399
Signed-off-by: Anil Belur <abelur@linuxfoundation.org>

Remove unused mdsal javadoc jobs

Change-Id: I28f3af282e526b7263806eefbf8b0b1f615806a0
Signed-off-by: Thanh Ha <zxiiro@gmail.com>

Remove unused yangtools javadoc jobs

Change-Id: If55a9e18fa34ba72e81426254d160e1ac8ce874f
Signed-off-by: Thanh Ha <zxiiro@gmail.com>

Remove controller javadoc jobs

Controller has its own controller-docs.jar created as part
of the build process, which verifies javadoc consistency,
hence secondary javadoc jobs are unnecessary churn.

Change-Id: I6ad51215eed7e9a67978794f524963c1023a0ee9
Signed-off-by: Robert Varga <robert.varga@pantheon.tech>

Fix SC2086 Double quote variables

Double quote to prevent globbing and word splitting

Change-Id: Ieb057e388a4ae0dcf1237f395b1052dd2c23be9e
Signed-off-by: Thanh Ha <zxiiro@gmail.com>

Fix SC2086 for lines 300 until EOF

Double quote to prevent globbing and word splitting

Change-Id: I610b8ffe9a8140b1381a5ee6e16fbea96621b209
Signed-off-by: Thanh Ha <zxiiro@gmail.com>

Fix SC2086 for lines 490 until EOF

* Double quote to prevent globbing and word splitting
* SC2035: Use ./*glob* or -- *glob* so names with dashes
          won't become options

Change-Id: I118743d0f9f4e4a413cecd0234a9dff48ba993c2
Signed-off-by: Thanh Ha <zxiiro@gmail.com>

Fix SC2086 for lines 575 until EOF

Double quote to prevent globbing and word splitting

Change-Id: I245d01e71ce04bd968d7ad9a13589586ea30e53e
Signed-off-by: Thanh Ha <zxiiro@gmail.com>

Fix SC2086 for lines 700 until EOF

Double quote to prevent globbing and word splitting

Change-Id: Ic34ae97f05b8e6180d91ccd5479e1cd56ee52e44
Signed-off-by: Thanh Ha <zxiiro@gmail.com>

Fix SC2086 for lines 940 until EOF

Double quote to prevent globbing and word splitting

Change-Id: I5326e70fd7978f3971031656fbf5179929181410
Signed-off-by: Thanh Ha <zxiiro@gmail.com>

Fix SC2004 $/${} unnecessary on arithmetic vars

Change-Id: Id068d46b56d6c5c1555b2d95f04f39f465ff573c
Signed-off-by: Thanh Ha <zxiiro@gmail.com>

Fix SC2006 backtick syntax is legacy

Also resolve SC2086 Double quote to prevent globbing and word splitting
for backtick affected lines.

Change-Id: I00f3e2537e05da25996d913b80cd0b3d4d8d3c09
Signed-off-by: Thanh Ha <zxiiro@gmail.com>

Fix autorelease generated view file name

$WORKSPACE/archives is a dir which is created later in
the job, without the dir existing the .yaml file generated
gets created as an $WORKSPACE/archives file and
fails when running `lftools deploy logs`.

The correct way to handle this create a $WORKSPACE/archives
and add the file to the dir.

Change-Id: I313fed7d1ecfa8545ad6e8b59634c7f63d25e597
Signed-off-by: Anil Belur <abelur@linuxfoundation.org>

Update Test jobs for ODL Neon SR1 Release

Change-Id: Ie45499a34825d2d5c0bce2cb8bada593132a4723
Signed-off-by: Anil Belur <abelur@linuxfoundation.org>

Disable packer jobs with Ubuntu 18.04

None of the images are being used in the projects presently.
Also the packer images are failing with 18.04 due to incompatible
version of mininet and kubernetes. Specific jobs can be re-enabled
once we determine what is supported for the projects.

Change-Id: I06ebc076296e6faa1809b19d9b7ce9e5c3ab3e6b
Signed-off-by: Anil Belur <abelur@linuxfoundation.org>

Add views for mvn stage and verify deps jobs

Change-Id: Ia92e5f1d67fecae210088d03b82c0931d89832cf
Signed-off-by: Anil Belur <abelur@linuxfoundation.org>

Merge "Update common-packer to v0.3.0"

Merge "Migrate devstack images to Ansible provisioners"

Remove mvn-goals from telemetry project

Update job to address comment in Ibc1cb172a441f0.
mvn-goals is defined in global-jjb defaults and does
not need to be redefined here.

Also remove the openjdk and mvn-version since this
is defined in the defaults.

Change-Id: Ia5ca68c1141c200072b110e61fe0cc59d2693eb7
Signed-off-by: Anil Belur <abelur@linuxfoundation.org>

Merge "Add sodium jobs for detnet project"

Merge "Update mvn-goals for telemetry project"

Merge "Update RTD tokens and url for alt-datastore jobs"

Set nexus-iq namespace to odl-

Distribution is not pulling in the job-group for ODL so was missing this
configuration to properly work with LF Nexus IQ server.

Change-Id: Ie2c2136bb2e37937ba31aa0c8bf87e2967591a88
Signed-off-by: Thanh Ha <zxiiro@gmail.com>

Update mvn-goals for telemetry project

Fix the mvn-goals to deploy the artifacts to
'$WORKSPACE/$JOB-NAME/m2repo', since this is required by
`lftools deploy nexus-stage` CLI for the maven-stage
jobs.

Change-Id: Ibc1cb172a441f0f2cb64b97e54fa217acce1608d
Signed-off-by: Anil Belur <abelur@linuxfoundation.org>

Update RTD tokens and url for alt-datastore jobs

The previous webhooks have been setup pointing to lf RTD repos.
This should fix the issue.

Change-Id: I00ea3915cdc704161b36f7047f56c9bf9e2cc260
Signed-off-by: Anil Belur <abelur@linuxfoundation.org>

Add sodium jobs for detnet project

Change-Id: Icb1e46d5ce266f4ac273522941ed45f18a666906
Signed-off-by: Anil Belur <abelur@linuxfoundation.org>

Update common-packer to v0.3.0

Change-Id: I01c68b22c2bfa421f2bc399592cc6f545c9b9e73
Signed-off-by: Anil Belur <abelur@linuxfoundation.org>

Update global-jjb to 0.37.5

- This fixes the issue with surefire reports.

Change-Id: I2d306e53942fb83af8ba7d3d582205c457ace744
Signed-off-by: Anil Belur <abelur@linuxfoundation.org>

Revert "Update global-jjb to 0.37.4"

This reverts commit 5f45df3646f1593e48d5769a13d350807c393986.

Change-Id: I1709e40efb3a5fd2d1f8081c7137231943afb6c2
Signed-off-by: Anil Belur <abelur@linuxfoundation.org>

Merge "Update global-jjb to 0.37.4"

Merge "Replace pike with queens for group based policy"

Replace pike with queens for group based policy

Replace pike with queens for group based policy
jobs as pike is not supported in infra

Change-Id: Iff58c15590edbaca377aa976a72c98e2b956abbe
Signed-off-by: JayaPr <jaya.priyadarshini@ericsson.com>

Remove devstack pike image from defaults

stable/pike images are not longer supported
and images are not available on the infra hence
removing it from defaults

Change-Id: I5e1daad10291148c3454bc1b8bcff0352ed1a1f4
Signed-off-by: JayaPr <jaya.priyadarshini@ericsson.com>

Merge changes I05fc93ee,I702d6831

* changes:
  Resolve packaging ShellCheck errors
  Resolve OPFlex ShellCheck issues

Merge "Resolve yamllint issues"

Migrate devstack images to Ansible provisioners

Migrate the packer provisioners to use Ansible playbooks.
Remove the shell scripts used to provision custom devstack
{pre-pip-{queens,rocky}} images.

Change-Id: I42a114db01208b96a0fd9116a4404bdd61688376
Signed-off-by: Anil Belur <abelur@linuxfoundation.org>

Update global-jjb to 0.37.4

Change-Id: I27a591593671a6ecd0425ee21157f85c897e9286
Signed-off-by: Anil Belur <abelur@linuxfoundation.org>

Merge "Update Ubuntu 16.04 mininet 2.6 image to latest"

Resolve packaging ShellCheck errors

Change-Id: I05fc93ee5eaf84fc95ea28af1548074945cc4380
Signed-off-by: Thanh Ha <zxiiro@gmail.com>

Resolve OPFlex ShellCheck issues

Change-Id: I702d6831c2cc15ad3fa6451efd7d2ba90f2f55b7
Signed-off-by: Thanh Ha <zxiiro@gmail.com>

Resolve yamllint issues

* Truthiness values should be true|false
* Document start should being with '---'
* Improper indentation
* Ignore line-length for packer as URL gets can be long

Change-Id: I8375f8bbf486a22677e354189148786d7d5126be
Signed-off-by: Thanh Ha <zxiiro@gmail.com>

Fix Karaf log size adjustment for CSIT

There was recent change in odlparent to generate 64 MB log file.
After that, the CSIT script to adjust log size stopped working.

Change-Id: Ic8cb34d224a7b38c029f64e3bffe269ed4057882
Signed-off-by: Luis Gomez <ecelgp@gmail.com>

Pin pygments to 2.3.x

Pygments released 2.4.0 which added a python requires that excludes all
versions of Python < 3.5. The LFCI's default Python 3 version is 3.4 so
causes build failure.

Change-Id: If3e3687f1c269b6eebfb2f7919c0fcf7bbd4eac7
Signed-off-by: Thanh Ha <zxiiro@gmail.com>

Update Ubuntu 16.04 mininet 2.6 image to latest

Change-Id: Ifc1f5d857d3969142226d4ec1a030a85b33dbdae
Signed-off-by: Anil Belur <abelur@linuxfoundation.org>

Merge "Remove openstack high frequency jobs"

Install OpenVSwitch 2.6.1 into '/opt/ovs'

The source files are required by Netvirt CSIT tests
installing them into '/tmp' removes the src files.

Change-Id: I15fd77eb0ec232052b5bf9a04a24b8d618c54ccc
Signed-off-by: Anil Belur <abelur@linuxfoundation.org>

Merge "Add plots to netconf-scale-max-devices job"

Add plots to netconf-scale-max-devices job

Change-Id: I4ff142ff969217679e65aa88489c5376b256915d
Signed-off-by: jluhrsen <jluhrsen@gmail.com>

Merge "Add netconf scale job to find max devices"

Add netconf scale job to find max devices

Change-Id: I189e3616f898dd0b26219b8d692618938875e0d3
Signed-off-by: jluhrsen <jluhrsen@gmail.com>

Remove packer job and template for devstack pike

The pike images are no longer used with ODL CSIT jobs.

https://lists.opendaylight.org/pipermail/integration-dev/2019-May/013213.html

Change-Id: Icfeca67d57b85ece934f57f5cbd305213f2acf6f
Signed-off-by: Anil Belur <abelur@linuxfoundation.org>

Remove openstack high frequency jobs

Same jobs will run daily on AR creation.

Change-Id: I3f447f0dd3c083334bee3420da7173eb756ebfa0
Signed-off-by: Luis Gomez <ecelgp@gmail.com>

Merge "Update CentOS7 robot nodes to the latest"

Merge "Enable gre type driver for tdd wip jobs"

Enable gre type driver for tdd wip jobs

Change-Id: Ic9657f57f5c6593606b8aeecf0727ede4a1cccd5
Signed-off-by: JayaPr <jaya.priyadarshini@ericsson.com>

Merge "Do not use with_items for package installs"

Merge "Add rocky job for master[sodium]"

Add rocky job for master[sodium]

Change-Id: I6806dfc46e365aac1123e02009ce9365da715e06
Signed-off-by: JayaPr <jaya.priyadarshini@ericsson.com>

Do not use with_items for package installs

Ansible package roles support lists being passed to them. There is
no need to use a with_items loop. In addition to that with_items
makes multiple calls to the package manager rather than combining
them into a single call so performance is better when not using
with_items.

Change-Id: I20bb660c28dcdf95c9309f983e2fb724fab3af64
Signed-off-by: Thanh Ha <zxiiro@gmail.com>