Fix issue caused by process substitution on sh

The change fixes the issue 'syntax error near unexpected token `<''
which is caused because the while loop and find uses process
substitution feature which is not standard on all shells. The
default shell used to run a builder is 'sh'. To fix the issue
invoke the code from a script using bash.

Change-Id: Icac081a6ca1aa19cdcef8202cd943348e6dbc513
Signed-off-by: Anil Belur <abelur@linuxfoundation.org>

Merge "Update zrpcd repository to build latest changes"

Merge "Revert "Disable lacp validate autorelease job""

Merge "Archive all sar data on logs server"

Update zrpcd repository to build latest changes

https://lists.opendaylight.org/pipermail/dev/2017-May/003641.html
Change-Id: I362a03fa7b698b1fb96f022af69f0616238518ae
Signed-off-by: Anil Belur <abelur@linuxfoundation.org>

Archive all sar data on logs server

Its possible multiple sar data files could exist when
the autorelease job is completed, therefore copy and convert
all sar files into $WORKSPACE/archives and not just the recent
file.

Change-Id: I4490b8c28b3cd96c0d9566a951acddcf825310e6
Signed-off-by: Anil Belur <abelur@linuxfoundation.org>

Merge redundant build jobs into a single template

Not necessary to define multiple templates that differ only in 1 line of
the Maven Goals parameter. This patch removes the redundant job
templates and adds a new EXTRA_MVN_OPTS parameter that can optionally be
used to pass additional parameters if necessary both at runtime and per
stream by passing the {extra-mvn-opts} jjb parameter.

Additionally:

    - Removes archiving of sar data in Jenkins (we shouldn't be
      archiving anything in Jenkins).
    - Revert archiving of **.zip files as we are able to produce
      staging repos now.

Change-Id: Ifd164291d997f0bd59aa697ad456f64df93024a3
Signed-off-by: Thanh Ha <thanh.ha@linuxfoundation.org>

Revert "Disable lacp validate autorelease job"

This reverts commit 9d8b15f65026014c8ce8b659e3ca4963e2bdc45f.

Change-Id: I7b2c7e0c11567ef3c76b9bfc2a832655d45e0fac
Signed-off-by: Anil Belur <abelur@linuxfoundation.org>

Revert "Update CentOS7 images for change 56476"

Gerrit verify jobs are failing, such as
integration-csit-verify-1node-library starting with #2934.

This reverts commit 47bc89f98923695ccd8557b80f9820915ad5bfc5.

Change-Id: Iabbe798eccb1d1c354580f38dde915f3aac6899f
Signed-off-by: Peter Gubka <pgubka@cisco.com>

Merge "Job for 3 node in genius yaml"

Merge "Update CentOS7 images for change 56476"

Disable lacp validate autorelease job temporarily

Remove validate autorelease job for lacp to add lacp project back into
autorelease. This change should be reverted once lacp is merged in
autorelease.

Change-Id: I65c4ad619127fe7e23ac4a6f51411a5eb766491f
Signed-off-by: Anil Belur <abelur@linuxfoundation.org>

Update CentOS7 images for change 56476

Change-Id: Ib99b67e284004e98a29287bd91e8e632e41f682c
Signed-off-by: Anil Belur <abelur@linuxfoundation.org>

Merge "Fix iotdm.yaml for nitrogen and carbon"

Merge "Make failnever job skip SingleFeatureTests"

Merge "Add users email to auto-generated gerrit patches"

Fix iotdm.yaml for nitrogen and carbon

Autorelease was commented out for nitrogen by mistake.

Change-Id: I733827ae4a56218dae973cc0097741e06ff92e84
Signed-off-by: Tomas Janciga <tjanciga@cisco.com>

Make failnever job skip SingleFeatureTests

Change-Id: I770160d251b589c486ba5d577027625b63926e5c
Signed-off-by: Colin Dixon <colin@colindixon.com>

Archive zrpcd log from ODL

Change-Id: I92d5b8c474f501a4a4fbd47a7c2a75fc1c6dcc66
Signed-off-by: Suvitha.balu <suvitha.balu@tcs.com>

Merge "Fix distribution test trigger on failure"

Add users email to auto-generated gerrit patches

- the --reviewers option is not there in the current version of
  git-review (1.24) but is there with v1.25 which will be
  installed with the pip install command in this patch

- this would add me (jluhrsen@redhat.com) to all auto-gen
  gerrit patches, and I don't mind, but I need to get these
  reminders for the csit auto-gen gerrits at the least. Maybe
  there is a better way to do this?

Change-Id: I3bb9caa0ce4e7dcd045010dbb344cc696da77d1e
Signed-off-by: Jamo Luhrsen <jluhrsen@redhat.com>

Auto Update CSIT Jobs to run

Change-Id: I5b9c8725e4255ca135997ad169f8817079d17bb4
Signed-off-by: jenkins-releng <jenkins-releng@opendaylight.org>

Merge "Disable generating release notes for beryllium"

Temporarily remove validate-autorelease for IoTDM

Change-Id: I824fe474f7e80ce1986545fb915772756509eed0
Signed-off-by: Tomas Janciga <tjanciga@cisco.com>

Fix distribution test trigger on failure

We need either pass a paramter or a flag to triger
the build without a parameter with the latest updates to
Jenkins.

https://lists.opendaylight.org/pipermail/release/2017-May/010555.html
Change-Id: I7ebb6aa69b2fb1745132931092328046da674215
Signed-off-by: Anil Belur <abelur@linuxfoundation.org>

Merge "Use karaf3 for netvirt-sfc carbon csit"

Merge "Remove 2site netvirt jobs"

Fix distribution test trigger on failure

It looks like now we need to pass at least one parameter.

Change-Id: I12818d3f79fd20c77d2a4721b165a14a4d1fb46d
Signed-off-by: Luis Gomez <ecelgp@gmail.com>

Use karaf3 for netvirt-sfc carbon csit

Change-Id: Iaed9663829c5e6dbde95f38e0ab7d9fdfe956079
Signed-off-by: Jamo Luhrsen <jluhrsen@redhat.com>

Remove 2site netvirt jobs

these jobs do not work, currently, so no need to define them
and waste resources to queue them to just abort.

Change-Id: I5e657d6e7efa4587c405fd9fcbea825c905a0341
Signed-off-by: Jamo Luhrsen <jluhrsen@redhat.com>

Job for 3 node in genius yaml

Change-Id: I35200c926f0ce2ddc8d7d1854e377c8b5ce87e45
Signed-off-by: zsunsen <senthilk.sundaram@tcs.com>

Disable generating release notes for beryllium

Change-Id: I6401d9fff48e875df7f7ba97bfd29d86adc1b298
Signed-off-by: Anil Belur <abelur@linuxfoundation.org>

Fix pkg install in test-deb job

Change-Id: Icb8a0abe7137e747ad10155910efae10a0b2514e
Signed-off-by: Daniel Farrell <dfarrell@redhat.com>

Merge "Uncomment verify autorelease for IoTDM carbon"

Merge "Remove triggering downstream jobs for autorelease"

Merge "Archive error.log file generated by notify script"

Merge "Add job to generate release notes"

Merge "Remove devstack mitaka images"

Remove triggering downstream jobs for autorelease

Autorelease failnever and skiptests jobs added does not require
to trigger downstream jobs.

Change-Id: Ib016c8b2ac05e7a360330e917501f5ae064d0525
Signed-off-by: Anil Belur <abelur@linuxfoundation.org>

Archive error.log file generated by notify script

error.log should be archived and available if the size exceeds
the mailing list attachment size limits

Change-Id: I89aa9e7337b5c7b92230ee2e1f5e6dfe9e319d10
Signed-off-by: Anil Belur <abelur@linuxfoundation.org>

Change Cassandra download location

Apache moved HBase and Cassandra versions that are used by TSDR to
an archive site. Change java-builder.sh to point to the new archive
location.

Change-Id: Ia4b62d95eb43b34607c23114c6b5ea075569e98f
Signed-off-by: Scott Melton <smelton2@uccs.edu>
Signed-off-by: Anil Belur <abelur@linuxfoundation.org>
also-by: Anil Belur <abelur@linuxfoundation.org>

Merge "Fix download URL for Hbase server"

Merge "Revert "Add vlan interface to the gateway""

Merge "Add autorelease carbon job with fail never"

Revert "Add vlan interface to the gateway"

This reverts commit e81d21cc76b5bc90c7bab0c7f82a6fa16bbcf1bc.

Depends-On: https://git.opendaylight.org/gerrit/53688
Depends-On: https://git.opendaylight.org/gerrit/53861
Change-Id: I73473bba010218a2e6f3e77c17dacb1bdccd9bb9
Signed-off-by: Alon Kochba <alonko@hpe.com>

Merge "Fix apt concurrency failures"

Fix download URL for Hbase server

Fix the URL to get v0.94.27 from archives.

Change-Id: I9f39529e65c036b1f7bc3669157065b5de63b0b1
Signed-off-by: Anil Belur <abelur@linuxfoundation.org>

Fix apt concurrency failures

Wait until background apt process finishes before trying to install
anything and failing to get /var/lib/dpkg/lock lock.

https://lists.opendaylight.org/pipermail/integration-dev/2017-April/009485.html

Fixes both test-deb and test-ansible-deb jobs.

Change-Id: I5927b0f52d54cd7fd4332a43af5f630c12564ca5
Signed-off-by: Daniel Farrell <dfarrell@redhat.com>

Add snat conntrack netvirt patch test

Change-Id: Ica1f2b119a53de226daec7c524f282239dc9261b
Signed-off-by: Jamo Luhrsen <jluhrsen@redhat.com>

Remove closing fi from removed mitaka if block

this was missed in a previously merged patch [0] and things
are broken until we get this merged.

[0] https://git.opendaylight.org/gerrit/#/c/56104/

Change-Id: Iafa17733eb40daa3d0d7e585c72efe709a125b25
Signed-off-by: Jamo Luhrsen <jluhrsen@redhat.com>

Merge "Add bgp ingest 300k prefixes longevity job"

Merge "Make packer jobs build sequentially"

Merge "Remove path prefix with $ERROR_LOG"

Merge "Only run Carbon tests against pup-odl master"

Merge "Add Gerrit keyword trigger to run all Puppet tests"

Auto Update CSIT Jobs to run

Change-Id: Ie729f2103a25a50463bf63c0be006f11361a3000
Signed-off-by: jenkins-releng <jenkins-releng@opendaylight.org>

Merge "Remove mitaka logic from devstack deploy logic"

Merge "Fix builder-update-csit-tests trigger"

Merge "Remove mitaka jobs from vtn csit"

Fix builder-update-csit-tests trigger

The new name for the merge job is builder-jjb-merge.

Change-Id: I8f225ed6c06e6d6d531f4a07f776fb919bdbccae
Signed-off-by: Vratko Polak <vrpolak@cisco.com>

Uncomment verify autorelease for IoTDM carbon

Change-Id: I337f86c18b5dc46c12c7d35d5070f8c06498f41b
Signed-off-by: Tomas Janciga <tjanciga@cisco.com>

Add bgp ingest 300k prefixes longevity job

Change-Id: I4173ef267df007ff7fe2922121e9bc1a1d661e43
Signed-off-by: Peter Gubka <pgubka@cisco.com>

Merge "Add explicit leader movement longevity job"

Add autorelease carbon job with fail never

This jobs uses -fn (fail never) and is intended to run the build
until complition without being intruptted on test failures.

Change-Id: Ib48868baf5c7ebefe5e851ce15d266764b72d6ad
Signed-off-by: Anil Belur <abelur@linuxfoundation.org>

Remove path prefix with $ERROR_LOG

The path prefixed with error.log.gz in the notification message
is incorrect, this fixes it to return only the file name.

Change-Id: I336cf122cf70e4d572067075d7b7d511a12cdacc
Signed-off-by: Anil Belur <abelur@linuxfoundation.org>

Make packer jobs build sequentially

This unclutters the console logs and makes it easier to
read/parse the logs.

Change-Id: Ia8043efec15081af476de4721ffd9eb9c47d2889
Signed-off-by: Anil Belur <abelur@linuxfoundation.org>

Only run Carbon tests against pup-odl master

See https://git.opendaylight.org/gerrit/#/c/56223

Change-Id: I28cadc705580349e08782af857343d61c9be1b1d
Signed-off-by: Daniel Farrell <dfarrell@redhat.com>

Add Gerrit keyword trigger to run all Puppet tests

Change-Id: I0f0d86c1f3627ae69619d1ab5f2c9e78759bcf60
Signed-off-by: Daniel Farrell <dfarrell@redhat.com>

Add autorelease carbon job with skip tests enabled

This is temporary change introduced for carbon to ensure we
are staging the artifacts for integration testing. Once carbon
tests timeouts are resolved this change can be reverted.

BZ: https://bugs.opendaylight.org/show_bug.cgi?id=8323
Change-Id: Ibac54ee01afbe61a29078eed6cb7660076000785
Signed-off-by: Anil Belur <abelur@linuxfoundation.org>

Merge "Remove mitaka jobs from gbp csit"

Add explicit leader movement longevity job

Tests dom-data-broker explicit leader movement scenario for 24h

Change-Id: I903b0ca199e4922f044c137d8e3e571698009d39
Signed-off-by: Peter Gubka <pgubka@cisco.com>

Merge "Remove mitaka jobs from netvirt csit"

Merge "Add JJB project, tests for puppet-opendaylight"

Merge "Use new verify-tox job name, vs verify-python"

Add JJB project, tests for puppet-opendaylight

Add tox verify job, sanity job and acceptance test job.

Tox job does basic Coala linting. Sanity job does quick rspec tests and
a single Beaker test for main OS (CentOS) and latest-ODL. Acceptance
test does Beaker tests for all supported OSs and ODL versions.

Run tox and sanity tests on each change. Run acceptance tests daily.

Change-Id: I9223411c0a17170c02a5a8bf83cb3ab75dd089b5
Signed-off-by: Daniel Farrell <dfarrell@redhat.com>

Check if distribution came from jenkins

Change-Id: I5c4ff13fcce54a424b4ef40c328f088f875424b3
Signed-off-by: Jamo Luhrsen <jluhrsen@redhat.com>

Merge "Add carbon csit4 1node template"

Use new verify-tox job name, vs verify-python

Change-Id: I6b86c45a3c0e1960348748e45940aa063c4686db
Signed-off-by: Daniel Farrell <dfarrell@redhat.com>

Merge "Auto Update CSIT Jobs to run"

Remove devstack mitaka images

Change-Id: I8b00aef03a016155e123ab80c0edbcdaaa94ae00
Signed-off-by: Jamo Luhrsen <jluhrsen@redhat.com>

Remove mitaka logic from devstack deploy logic

Change-Id: I1bab2c940c6d1aed71c482ad269a19dc61d1d6bb
Signed-off-by: Jamo Luhrsen <jluhrsen@redhat.com>

Remove mitaka jobs from vtn csit

Change-Id: I7049c6df00c81001da7896487fad54333404408b
Signed-off-by: Jamo Luhrsen <jluhrsen@redhat.com>

Remove mitaka jobs from gbp csit

Change-Id: I2b6cd56c41f66268d13234f1a763852d359f677d
Signed-off-by: Jamo Luhrsen <jluhrsen@redhat.com>

Add carbon csit4 1node template

+ Add the new template to distribution-userfeatures job definition.

Change-Id: Ie3f6fe1fba7ce849ec32cf4a6a0595540c2571ca
Signed-off-by: Vratko Polak <vrpolak@cisco.com>

Remove mitaka jobs from netvirt csit

Change-Id: Ie4ef2ae890b9b0516a2bdad141d1bf44edae38c5
Signed-off-by: Jamo Luhrsen <jluhrsen@redhat.com>

Add job to generate release notes

- autorelease-generate-release-notes generates the release notes for
  every autorelease ${STREAM}
- trigger generate release notes job at the end of every autorelease
  build

Change-Id: Ie2ed6a0dec7c32e1505e429e16cb6bac34125373
Signed-off-by: Anil Belur <abelur@linuxfoundation.org>

Merge "Change variable name BUNDLE_URL->BUNDLE_PATH"

Fix iotdm.yaml for nitrogen and carbon

Change-Id: I1f4901712af7435176824eeaf34146787a6b78b0
Signed-off-by: Tomas Janciga <tjanciga@cisco.com>

Change variable name BUNDLE_URL->BUNDLE_PATH

This is to avoid confusion with global variable BUNDLE_URL.

Change-Id: I1a22f8e627424bb8d8f629f69bbefd9e1e5c1744
Signed-off-by: Luis Gomez <ecelgp@gmail.com>

Merge "Fix features for netconf userfeatures"

Merge "Temporarily remove validate-autorelease for IoTDM"

Temporarily remove validate-autorelease for IoTDM

Change-Id: I67389bb9999b9f4067325735de8d3db2addbbbf1
Signed-off-by: Tomas Janciga <tjanciga@cisco.com>

Fix features for netconf userfeatures

Change-Id: I8560fdf0cc995b8ffe619d1d87620b99e5293ce3
Signed-off-by: Vratko Polak <vrpolak@cisco.com>

Fix sar data report generation

Using sudo is not recommended for generating accounting summary
therefore generate reports with sar command

Change-Id: I4db36646afa8558ec7145906f8f9caaea727ac93
Signed-off-by: Anil Belur <abelur@linuxfoundation.org>

Merge "integration patch jobs use karaf3 for nitrogen"

Merge "Move sar stats to publishers"

integration patch jobs use karaf3 for nitrogen

Same as project patch-test, people will not understand
current behavior unless we explain it.

Note periodic distribution tests will still use karaf4
for nitrogen so they can be used to validate karaf4.

Change-Id: I7304d79a9f02e9cd65afeeea5b6ba152ff42cda1
Signed-off-by: Luis Gomez <ecelgp@gmail.com>

Merge "Add/cleanup inline docs for multipatch builder sh"

Move sar stats to publishers

- Move sar report generation to publisher
- remove builder autorelease-sys-stats since we are capturing system
  info in deploy archives scripts.

Change-Id: Ibccb0d6712f709ed5f75395a15c96a56047cb720
Signed-off-by: Anil Belur <abelur@linuxfoundation.org>

Merge "Enhance 6Wind quagga image on ubuntu16 & centos7"