Update releng/global-jjb repository information

Change-Id: I985d938da9ece7190eeb36489ac89088b4fa3f31
Signed-off-by: Anil Belur <abelur@linuxfoundation.org>

Update Ubuntu mininet image and labels

We are currently supporting the following:
- Ubuntu1404 with mininet default
- Ubuntu1604 with mininet-ovs-2.5

Change-Id: I550cbf436755ac2a9a2c1e104c6169383b5a6354
Signed-off-by: Anil Belur <abelur@linuxfoundation.org>

Update java-builder to use same image as verify

Change-Id: Ic1162d95c603656f09a282715d70c9234a7175b6
Signed-off-by: Thanh Ha <thanh.ha@linuxfoundation.org>

Revert "Reduce verbosity of wget command"

- wget options changed skips dist bundle download with usage
  causing some of the jobs to fail

This reverts commit 8cb455437ca3268b6b1a8ddcf5739c966a4cb2dc.

Change-Id: Ice28cde978931cd6b19b1629b5f310edc0c864d7
Signed-off-by: Anil Belur <abelur@linuxfoundation.org>

Fix typo in non-verbose parameter

Change-Id: I2157d7b5801649500748bf22ba381ebf108f8fb5
Also-by: Thanh Ha <thanh.ha@linuxfoundation.org>
Signed-off-by: Thanh Ha <thanh.ha@linuxfoundation.org>

Merge "Make tox/python jobs use 4g builder"

Merge "Enable batch mode and disable transfer logs"

Merge "Reduce verbosity of wget command"

Merge "Do not print stack list"

Make tox/python jobs use 4g builder

8G is way more than necessary for running tox builds so use a smaller
system.

Change-Id: I90abf9aa5483fdcf84b6199ef602972dd57dc8e6
Signed-off-by: Thanh Ha <thanh.ha@linuxfoundation.org>

Merge "Add $SILO to $STACK_NAME"

Correct local.conf copy for control node

Change-Id: Iad1ed545ea383ad22b0a873914ef68e10c57e9d3
Signed-off-by: Alon Kochba <alonko@hpe.com>

Add support for multi-site

Add support for multi-site netvirt for federation CSIT

Depends-On: https://git.opendaylight.org/gerrit/#/c/49146/
Change-Id: I9f7b66177eac7d237f8509828a45e3a012213d2a
Signed-off-by: Sandra Biton <sandra.biton@hpe.com>
Signed-off-by: Guy Belotzerkovsky <guy@hpe.com>
Signed-off-by: Alon Kochba <alonko@hpe.com>

Add $SILO to $STACK_NAME

This helps us differentiate which stacks were created in which silo when
looking at Orchestration view in the cloud.

Issue: RELENG-18
Change-Id: I8fcf799e435355e9a29e6aeea66f2a3494c43595
Signed-off-by: Thanh Ha <thanh.ha@linuxfoundation.org>

Do not print stack list

These stack lists were useful for debugging while creating the stack
retry script however is a bit too spammy in logs. Let's remove them
until we need them again.

Change-Id: I9f3c1da114ef42439622c0a81ff3fa3b50c501d7
Signed-off-by: Thanh Ha <thanh.ha@linuxfoundation.org>

Merge "Create integration sanity test"

Merge "Keep artifacts for 1 day"

Create integration sanity test

- This job will trigger from autorelrease.
- Same strategy as for the distribution test.
- List of sanity jobs is manual entry for now.

Change-Id: I1c718e16a6d0d42b8e6924bef58b58d93f593adf
Signed-off-by: Luis Gomez <ecelgp@gmail.com>

Merge "Add error handling to notify scripts"

Add error handling to notify scripts

Change-Id: I0813c12e4f00e00ebe2d243ae242bdb79a997a5c
Signed-off-by: Anil Belur <abelur@linuxfoundation.org>

Merge "Remove mininet-ovs-2.3 from packer"

Merge "Remove CPqD and dependencies for mininet"

Merge "Remove vpnservice carbon and boron jobs"

Remove CPqD and dependencies for mininet

- https://lists.opendaylight.org/pipermail/dev/2017-March/003474.html

Change-Id: I5c93f8cc55a6dbed360a6d3fdd3d6651c63ed535
Signed-off-by: Anil Belur <abelur@linuxfoundation.org>

Reduce verbosity of wget command

Use no-verbose to reduce wget command verbosity however keep the
progress indicator as it's useful to track download speed. Also switch
the progress indicator to use giga to cut down on verbosity of the
progress output.

Change-Id: I0ef035dd70e5e92336c6bc00e17941b45be401ef
Signed-off-by: Thanh Ha <thanh.ha@linuxfoundation.org>

Remove vpnservice carbon and boron jobs

vpnservice was ported to netvirt in boron so the
jobs are no longer needed in vpnservice.

Change-Id: I1bd2630f58d1b6dca877e9a1f4d4ebf57c18ffb0
Signed-off-by: Sam Hague <shague@redhat.com>

Remove mininet-ovs-2.3 from packer

- https://lists.opendaylight.org/pipermail/dev/2017-March/003495.html

Change-Id: I753abf1df3833d5a3e18de3101f902525a6de56d
Signed-off-by: Anil Belur <abelur@linuxfoundation.org>

Merge "Change l2switch max host test"

Merge "ipsec over vxlan tunnel support."

Merge "Distribution test optimization"

Change l2switch max host test

Add graph for host discovery time.

Change-Id: If2227b9aa23f24fe887fe1a3bcbf989fbc5a0fe3
Signed-off-by: Luis Gomez <ecelgp@gmail.com>

Use OS_CLOUD variable for openstackclient

Use the OS_CLOUD variable instead of passing --os-cloud to the openstack
client. This allows us to more easily define alternative clouds per job
if there is a need to use additional clouds for different jobs.

Change-Id: I565a04a4c70c06f5676a1f7d4c7a43e757f116a8
Signed-off-by: Guy Belotzerkovsky <guy@hpe.com>
Signed-off-by: Thanh Ha <thanh.ha@linuxfoundation.org>

Enable batch mode and disable transfer logs

Also ensure script fails when anything fails in the script.

Change-Id: Icbc0a80a6f6e6955925eedf20895f2b799ebc147
Signed-off-by: Thanh Ha <thanh.ha@linuxfoundation.org>

Do not display Maven download progress

Change-Id: I9bfdfcd6a0be2cc09dbf971826dadd7731ef48a5
Signed-off-by: Anil Belur <abelur@linuxfoundation.org>

Merge "Move genius and lacp to ovs 2.5 image"

Merge "Fix path issue with archive log message"

Merge "Do not display Maven download progress"

Move genius and lacp to ovs 2.5 image

Change-Id: I2f482e03d80d614297086065cd8f8ebd4e0fa3d0
Signed-off-by: Luis Gomez <ecelgp@gmail.com>

Merge "Make OF sanity check stable"

Make OF sanity check stable

Changing switches from default 10 to 3 will make sanity stable.
flow services suite still runs with 10 so we can track the bug.
This patch goes after:
https://git.opendaylight.org/gerrit/#/c/54010

Change-Id: Id305c3d079f473f12009c24ade90a65878b0b05b
Signed-off-by: Luis Gomez <ecelgp@gmail.com>

Distribution test optimization

Autorelease will trigger distribution test for autorelease distro
if the build does not fail. In case of failure, it will trigger
distribution test on latest snapshot (no parameters).

Change-Id: I55212207819753e293c9d64892972b5e54970115
Signed-off-by: Luis Gomez <ecelgp@gmail.com>

Fix path issue with archive log message

Since we pop the workspace in this instance we are not in the right
directory to be writing to the archives log file so we have to give the
full path.

Change-Id: Ie998a7f28d6720be237d7a0784a7a449e124395f
Signed-off-by: Thanh Ha <thanh.ha@linuxfoundation.org>

Auto Update CSIT Jobs to run

Change-Id: I3b85a51fee57733f00713a4c7e98721e9f4f0ab7
Signed-off-by: jenkins-releng <jenkins-releng@opendaylight.org>

Merge "New Job to run TLS tests in AAA project"

Archive control node nova.conf

Change-Id: Ic638f92f9ed0a8af0839f2c2123f445970f7c2f1
Signed-off-by: Sam Hague <shague@redhat.com>

Revert "Use OS_CLOUD variable for openstackclient"

This reverts commit c2f0ef0dfe76f143acdd25cedc91b07e0b362816.
This reverts commit 5043edcf621ddc51a2c134d2a8c880a1e2dfe677.

Change-Id: Ic126b2e84e3e6c5005bef3e763f5c8ebfb568aae
Signed-off-by: Thanh Ha <thanh.ha@linuxfoundation.org>

Merge "Refactor stats collection test"

Merge "Recursively clone submodules as well"

Fix missing os-cloud parameter

Change-Id: Ic51ee271c533fc3a744663e980fa8d97501773a7
Signed-off-by: Thanh Ha <thanh.ha@linuxfoundation.org>

Merge "Use OS_CLOUD variable for openstackclient"

Recursively clone submodules as well

Some projects like docs / autorelease need to clone submodules too. So
add the submodule recursive setting to ensure they get their
dependencies. Should be a NOOP for projects that don't have submodules.

Change-Id: I4c3cd5f9f149cea5c5992729b73aa0afda5c86f1
Signed-off-by: Thanh Ha <thanh.ha@linuxfoundation.org>

Update cloud image list docs

Change-Id: Ife2ee707c4dcd085a955cf599f8013c7c32c5b7e
Signed-off-by: jenkins-releng <jenkins-releng@opendaylight.org>

ipsec over vxlan tunnel support.

using ip xfrm and autogenerated simmetric keys between any two VTEPs

Change-Id: I94de7202c1616710882db3ded184ae0a56d9dad6
Signed-off-by: Ariel <ariel.waizel@hpe.com>

Merge "Disable shellcheck for specific scripts"

Refactor stats collection test

- Move to ovs 2.5 tools VM
- Make stats graph more clear
- Set 100K flows in all perf jobs (except Beryllium)

Change-Id: Ib56eb1aef0281db5c87846d3946788cac148be3f
Signed-off-by: Luis Gomez <ecelgp@gmail.com>

Merge "Add docs linting job"

Merge "Add Archiving... log message to archives.log"

Auto Update CSIT Jobs to run

Change-Id: I9dcc988c6b636b3b12d1fb07470237a84b4d18e2
Signed-off-by: jenkins-releng <jenkins-releng@opendaylight.org>

Merge "Add bier project system test job"

Merge "Auto Update CSIT Jobs to run"

Merge "Disable elasticsearch jobs for Boron and Beryllium"

Auto Update CSIT Jobs to run

Change-Id: I2714bdd634695e17d02c312b2b54579ab777c332
Signed-off-by: jenkins-releng <jenkins-releng@opendaylight.org>

Add SXP cluster-routing job

Adds JJB job for test suite https://git.opendaylight.org/gerrit/#/c/49334/

Change-Id: Ib6f599495b6cce52e80fb520ae88826d8a754cc3
Signed-off-by: Martin Mihálek <mamihale@cisco.com>

Disable elasticsearch jobs for Boron and Beryllium

Change-Id: I1523c9ffff4e6b95b75652945947691cc200518a
Signed-off-by: lbeles <lbeles@frinx.io>

Fix virtualenv should be python-virtualenv

Change-Id: Id86bc42f0697665e72e22b2eb649492b2e7d3a5d
Signed-off-by: Thanh Ha <thanh.ha@linuxfoundation.org>

Install python-netaddr with centos7 robot

Change-Id: Iddb99f171c949c8f4789335de35be97b3f5391d2
Signed-off-by: Anil Belur <abelur@linuxfoundation.org>
Signed-off-by: Thanh Ha <thanh.ha@linuxfoundation.org>

Add docs linting job

Use the tox job template to run docs linting.

Change-Id: I3ae6f9cdfcf5e3846b50f9fa5bbebb8792dd666a
Signed-off-by: Thanh Ha <thanh.ha@linuxfoundation.org>

Merge "Archive everything in the patches directory"

Disable shellcheck for specific scripts

This ensures new scripts going into integration pass shellcheck and we
can fix shellcheck issues with existing scripts as we go.

Also fix shellcheck linting when trivial.

Change-Id: Ia77a514ed90ed3685ef4d3dd8ea9548544ebc7c0
Signed-off-by: Thanh Ha <thanh.ha@linuxfoundation.org>

Do not display Maven download progress

Add configuration to only print Maven download information if something
goes wrong rather than printing the progress. Hopefully cuts down on
logs a little bit.

Also refactor Maven options that are in all the job templates into a
default variable that is passed in.

Change-Id: I09cbc43783ed3ade6b7da96bb575aba3e03c7b8d
Signed-off-by: Thanh Ha <thanh.ha@linuxfoundation.org>

Merge "Update docs with new Ubuntu 16.04 images"

Merge "Remove depricated flags and add fix missing"

Merge "Improve autorelease notify"

Remove npm install commands

- npm is no longer available as a part of the centos image
- update to commit 3102dbb45ebac66ba53c9b428982ccb3248e17e7

Change-Id: I287d406dd04e2ece458b7398a486167b8b050ef8
Signed-off-by: Anil Belur <abelur@linuxfoundation.org>

Improve autorelease notify

- Search console log for mvn goals to retrive failed ARTIFACT_ID
- Determine project mailing list with xmlstarlet using xpaths
- If ARTIFACT_ID is same across project groups, then determine
  all project groups into a list as follows:
  if project.groupId:
     project.groupId is set and is not inherited
  else if project.parent.groupId:
     project.groupId is not set but IS inherited from
     project.parent.groupId
  else
     exclude project mailing list

Change-Id: Id2b9f1abd08792cc772f2c375c21d0321de419ad
Signed-off-by: Anil Belur <abelur@linuxfoundation.org>

Merge "Revert "Install npm on java builder system""

Merge "Pip freeze after all pip installs"

Merge "Fix typo in find command"

Update docs with new Ubuntu 16.04 images

- Ubuntu 16.04 with ovs 2.5 and mininet 2.2.1-2
- Ubuntu 16.04 with gbp
- Update descriptions

Change-Id: I33ea79769762e9039da1ac1f2270f3dae182f8a9
Signed-off-by: Anil Belur <abelur@linuxfoundation.org>

Remove depricated flags and add fix missing

* Fix warning "W: --force-yes is deprecated, use one of the options
  starting with --allow instead."
* use -m to ignore missing packages
* get package policy information

Change-Id: Ibab58db7675864d882438ba04e4059002faf78e6
Signed-off-by: Anil Belur <abelur@linuxfoundation.org>

Merge "Remove email notifications in autorelease jobs"

Archive everything in the patches directory

Everything in the patches directory is useful so just archive it all.

Change-Id: Ib77ecad26121772786a0c6a011b49a3c377a327b
Signed-off-by: Thanh Ha <thanh.ha@linuxfoundation.org>

Remove email notifications in autorelease jobs

The email notifications send an email to the jenkins mailing list. We
don't really pay attention to these so remove them. We now have the
ar-notify scripts in place which provides sufficient notification for
these jobs anyway.

Change-Id: Ie9b06e99c3e92b4911b355524bb79b335c2505e3
Signed-off-by: Thanh Ha <thanh.ha@linuxfoundation.org>

Pip freeze after all pip installs

pip freeze allows us to confirm what version is finally installed on the
servers so it should be run after all the pip install commands are run
for it to be most useful.

Change-Id: Id54bdd4b25655e9f6fee3bf13d6edbae0a80767f
Signed-off-by: Thanh Ha <thanh.ha@linuxfoundation.org>

Add Archiving... log message to archives.log

Cut down on text spam at the end of the build. We can always investigate
the log file if necessary.

Change-Id: I58c97f34ef90f2b937a330f0faaf6ed3c22f68c8
Signed-off-by: Thanh Ha <thanh.ha@linuxfoundation.org>

Fix unintentional JJB escape

Change-Id: I4afea4116bea2cc8439c300cc0f203275b92b664
Signed-off-by: Thanh Ha <thanh.ha@linuxfoundation.org>

Fix typo in find command

Change-Id: I157cc5cb349f14a8955e3863361b84d2bb510e20
Signed-off-by: Thanh Ha <thanh.ha@linuxfoundation.org>

Revert "Install npm on java builder system"

Removing since we do not actually need this and would rather keep the
build system npm / node clean if we can.

This reverts commit 5eae3b1af01960854d2a4740928fc6b7d0735a88.

Change-Id: Ie8be4bb9434b83970acd8dabe4cda1474df5b99e
Signed-off-by: Thanh Ha <thanh.ha@linuxfoundation.org>

Merge "Add jenkins job to test deb"

Remove escape from \${FEATURESCONF}

Change-Id: Ib732b576c7294d95f7821ff7f8d49528892aa903
Signed-off-by: Jamo Luhrsen <jluhrsen@redhat.com>

Add jenkins job to test deb

Change-Id: I33896dc3cfae5a05733bb6adab85307f914f538a
Signed-off-by: Akshita Jha <zenith158@gmail.com>

Merge "Remove SYSD_COMMIT var"

Remove SYSD_COMMIT var

This is no longer needed as RPM logic now uses latest Int/Pack repo
commit hash as sysd_commit.

Change-Id: Ia11eb40437b48a9804c88775fe87536965f39345
Signed-off-by: Akshita Jha <zenith158@gmail.com>

Merge "Change featuresBoot sed to be multi-line"

Install npm on java builder system

Change-Id: I8ca44b729768017379273df1151484bc18055155
Signed-off-by: Jamo Luhrsen <jluhrsen@redhat.com>

Add Coala deps to java-builder, cleanup docs

Change-Id: Ic10d8c610f99a241b25d4e42c4e9e48a69f7dd00
Signed-off-by: Daniel Farrell <dfarrell@redhat.com>

Change featuresBoot sed to be multi-line

this is how karaf4 featuresBoot is by default instead
of older version that were on a single line.

Change-Id: Icbb6ddc070f8a37f60aad9f1392a293e568e9ade
Signed-off-by: Jamo Luhrsen <jluhrsen@redhat.com>

Merge "Disable ubuntu16.04 packer merge job for gpb"

Disable ubuntu16.04 packer merge job for gpb

Change-Id: Ic01a5c20bc76e534c88eae20fa0c08559b0443f5
Signed-off-by: Anil Belur <abelur@linuxfoundation.org>

Use OS_CLOUD variable for openstackclient

Use the OS_CLOUD variable instead of passing --os-cloud to the openstack
client. This allows us to more easily define alternative clouds per job
if there is a need to use additional clouds for different jobs.

Change-Id: I3cb41914b9886aefa98bf9684a5c09f8859f9c46
Signed-off-by: Guy Belotzerkovsky <guy@hpe.com>
Signed-off-by: Thanh Ha <thanh.ha@linuxfoundation.org>