Merge "Add users email to auto-generated gerrit patches"

Archive zrpcd log from ODL

Change-Id: I92d5b8c474f501a4a4fbd47a7c2a75fc1c6dcc66
Signed-off-by: Suvitha.balu <suvitha.balu@tcs.com>

Merge "Fix distribution test trigger on failure"

Add users email to auto-generated gerrit patches

- the --reviewers option is not there in the current version of
  git-review (1.24) but is there with v1.25 which will be
  installed with the pip install command in this patch

- this would add me (jluhrsen@redhat.com) to all auto-gen
  gerrit patches, and I don't mind, but I need to get these
  reminders for the csit auto-gen gerrits at the least. Maybe
  there is a better way to do this?

Change-Id: I3bb9caa0ce4e7dcd045010dbb344cc696da77d1e
Signed-off-by: Jamo Luhrsen <jluhrsen@redhat.com>

Auto Update CSIT Jobs to run

Change-Id: I5b9c8725e4255ca135997ad169f8817079d17bb4
Signed-off-by: jenkins-releng <jenkins-releng@opendaylight.org>

Merge "Disable generating release notes for beryllium"

Temporarily remove validate-autorelease for IoTDM

Change-Id: I824fe474f7e80ce1986545fb915772756509eed0
Signed-off-by: Tomas Janciga <tjanciga@cisco.com>

Fix distribution test trigger on failure

We need either pass a paramter or a flag to triger
the build without a parameter with the latest updates to
Jenkins.

https://lists.opendaylight.org/pipermail/release/2017-May/010555.html
Change-Id: I7ebb6aa69b2fb1745132931092328046da674215
Signed-off-by: Anil Belur <abelur@linuxfoundation.org>

Merge "Use karaf3 for netvirt-sfc carbon csit"

Merge "Remove 2site netvirt jobs"

Fix distribution test trigger on failure

It looks like now we need to pass at least one parameter.

Change-Id: I12818d3f79fd20c77d2a4721b165a14a4d1fb46d
Signed-off-by: Luis Gomez <ecelgp@gmail.com>

Use karaf3 for netvirt-sfc carbon csit

Change-Id: Iaed9663829c5e6dbde95f38e0ab7d9fdfe956079
Signed-off-by: Jamo Luhrsen <jluhrsen@redhat.com>

Remove 2site netvirt jobs

these jobs do not work, currently, so no need to define them
and waste resources to queue them to just abort.

Change-Id: I5e657d6e7efa4587c405fd9fcbea825c905a0341
Signed-off-by: Jamo Luhrsen <jluhrsen@redhat.com>

Disable generating release notes for beryllium

Change-Id: I6401d9fff48e875df7f7ba97bfd29d86adc1b298
Signed-off-by: Anil Belur <abelur@linuxfoundation.org>

Fix pkg install in test-deb job

Change-Id: Icb8a0abe7137e747ad10155910efae10a0b2514e
Signed-off-by: Daniel Farrell <dfarrell@redhat.com>

Merge "Uncomment verify autorelease for IoTDM carbon"

Merge "Remove triggering downstream jobs for autorelease"

Merge "Archive error.log file generated by notify script"

Merge "Add job to generate release notes"

Merge "Remove devstack mitaka images"

Remove triggering downstream jobs for autorelease

Autorelease failnever and skiptests jobs added does not require
to trigger downstream jobs.

Change-Id: Ib016c8b2ac05e7a360330e917501f5ae064d0525
Signed-off-by: Anil Belur <abelur@linuxfoundation.org>

Archive error.log file generated by notify script

error.log should be archived and available if the size exceeds
the mailing list attachment size limits

Change-Id: I89aa9e7337b5c7b92230ee2e1f5e6dfe9e319d10
Signed-off-by: Anil Belur <abelur@linuxfoundation.org>

Change Cassandra download location

Apache moved HBase and Cassandra versions that are used by TSDR to
an archive site. Change java-builder.sh to point to the new archive
location.

Change-Id: Ia4b62d95eb43b34607c23114c6b5ea075569e98f
Signed-off-by: Scott Melton <smelton2@uccs.edu>
Signed-off-by: Anil Belur <abelur@linuxfoundation.org>
also-by: Anil Belur <abelur@linuxfoundation.org>

Merge "Fix download URL for Hbase server"

Merge "Revert "Add vlan interface to the gateway""

Merge "Add autorelease carbon job with fail never"

Revert "Add vlan interface to the gateway"

This reverts commit e81d21cc76b5bc90c7bab0c7f82a6fa16bbcf1bc.

Depends-On: https://git.opendaylight.org/gerrit/53688
Depends-On: https://git.opendaylight.org/gerrit/53861
Change-Id: I73473bba010218a2e6f3e77c17dacb1bdccd9bb9
Signed-off-by: Alon Kochba <alonko@hpe.com>

Merge "Fix apt concurrency failures"

Fix download URL for Hbase server

Fix the URL to get v0.94.27 from archives.

Change-Id: I9f39529e65c036b1f7bc3669157065b5de63b0b1
Signed-off-by: Anil Belur <abelur@linuxfoundation.org>

Fix apt concurrency failures

Wait until background apt process finishes before trying to install
anything and failing to get /var/lib/dpkg/lock lock.

https://lists.opendaylight.org/pipermail/integration-dev/2017-April/009485.html

Fixes both test-deb and test-ansible-deb jobs.

Change-Id: I5927b0f52d54cd7fd4332a43af5f630c12564ca5
Signed-off-by: Daniel Farrell <dfarrell@redhat.com>

Add snat conntrack netvirt patch test

Change-Id: Ica1f2b119a53de226daec7c524f282239dc9261b
Signed-off-by: Jamo Luhrsen <jluhrsen@redhat.com>

Remove closing fi from removed mitaka if block

this was missed in a previously merged patch [0] and things
are broken until we get this merged.

[0] https://git.opendaylight.org/gerrit/#/c/56104/

Change-Id: Iafa17733eb40daa3d0d7e585c72efe709a125b25
Signed-off-by: Jamo Luhrsen <jluhrsen@redhat.com>

Merge "Add bgp ingest 300k prefixes longevity job"

Merge "Make packer jobs build sequentially"

Merge "Remove path prefix with $ERROR_LOG"

Merge "Only run Carbon tests against pup-odl master"

Merge "Add Gerrit keyword trigger to run all Puppet tests"

Auto Update CSIT Jobs to run

Change-Id: Ie729f2103a25a50463bf63c0be006f11361a3000
Signed-off-by: jenkins-releng <jenkins-releng@opendaylight.org>

Merge "Remove mitaka logic from devstack deploy logic"

Merge "Fix builder-update-csit-tests trigger"

Merge "Remove mitaka jobs from vtn csit"

Fix builder-update-csit-tests trigger

The new name for the merge job is builder-jjb-merge.

Change-Id: I8f225ed6c06e6d6d531f4a07f776fb919bdbccae
Signed-off-by: Vratko Polak <vrpolak@cisco.com>

Uncomment verify autorelease for IoTDM carbon

Change-Id: I337f86c18b5dc46c12c7d35d5070f8c06498f41b
Signed-off-by: Tomas Janciga <tjanciga@cisco.com>

Add bgp ingest 300k prefixes longevity job

Change-Id: I4173ef267df007ff7fe2922121e9bc1a1d661e43
Signed-off-by: Peter Gubka <pgubka@cisco.com>

Merge "Add explicit leader movement longevity job"

Add autorelease carbon job with fail never

This jobs uses -fn (fail never) and is intended to run the build
until complition without being intruptted on test failures.

Change-Id: Ib48868baf5c7ebefe5e851ce15d266764b72d6ad
Signed-off-by: Anil Belur <abelur@linuxfoundation.org>

Remove path prefix with $ERROR_LOG

The path prefixed with error.log.gz in the notification message
is incorrect, this fixes it to return only the file name.

Change-Id: I336cf122cf70e4d572067075d7b7d511a12cdacc
Signed-off-by: Anil Belur <abelur@linuxfoundation.org>

Make packer jobs build sequentially

This unclutters the console logs and makes it easier to
read/parse the logs.

Change-Id: Ia8043efec15081af476de4721ffd9eb9c47d2889
Signed-off-by: Anil Belur <abelur@linuxfoundation.org>

Only run Carbon tests against pup-odl master

See https://git.opendaylight.org/gerrit/#/c/56223

Change-Id: I28cadc705580349e08782af857343d61c9be1b1d
Signed-off-by: Daniel Farrell <dfarrell@redhat.com>

Add Gerrit keyword trigger to run all Puppet tests

Change-Id: I0f0d86c1f3627ae69619d1ab5f2c9e78759bcf60
Signed-off-by: Daniel Farrell <dfarrell@redhat.com>

Add autorelease carbon job with skip tests enabled

This is temporary change introduced for carbon to ensure we
are staging the artifacts for integration testing. Once carbon
tests timeouts are resolved this change can be reverted.

BZ: https://bugs.opendaylight.org/show_bug.cgi?id=8323
Change-Id: Ibac54ee01afbe61a29078eed6cb7660076000785
Signed-off-by: Anil Belur <abelur@linuxfoundation.org>

Merge "Remove mitaka jobs from gbp csit"

Add explicit leader movement longevity job

Tests dom-data-broker explicit leader movement scenario for 24h

Change-Id: I903b0ca199e4922f044c137d8e3e571698009d39
Signed-off-by: Peter Gubka <pgubka@cisco.com>

Merge "Remove mitaka jobs from netvirt csit"

Merge "Add JJB project, tests for puppet-opendaylight"

Merge "Use new verify-tox job name, vs verify-python"

Add JJB project, tests for puppet-opendaylight

Add tox verify job, sanity job and acceptance test job.

Tox job does basic Coala linting. Sanity job does quick rspec tests and
a single Beaker test for main OS (CentOS) and latest-ODL. Acceptance
test does Beaker tests for all supported OSs and ODL versions.

Run tox and sanity tests on each change. Run acceptance tests daily.

Change-Id: I9223411c0a17170c02a5a8bf83cb3ab75dd089b5
Signed-off-by: Daniel Farrell <dfarrell@redhat.com>

Check if distribution came from jenkins

Change-Id: I5c4ff13fcce54a424b4ef40c328f088f875424b3
Signed-off-by: Jamo Luhrsen <jluhrsen@redhat.com>

Merge "Add carbon csit4 1node template"

Use new verify-tox job name, vs verify-python

Change-Id: I6b86c45a3c0e1960348748e45940aa063c4686db
Signed-off-by: Daniel Farrell <dfarrell@redhat.com>

Merge "Auto Update CSIT Jobs to run"

Remove devstack mitaka images

Change-Id: I8b00aef03a016155e123ab80c0edbcdaaa94ae00
Signed-off-by: Jamo Luhrsen <jluhrsen@redhat.com>

Remove mitaka logic from devstack deploy logic

Change-Id: I1bab2c940c6d1aed71c482ad269a19dc61d1d6bb
Signed-off-by: Jamo Luhrsen <jluhrsen@redhat.com>

Remove mitaka jobs from vtn csit

Change-Id: I7049c6df00c81001da7896487fad54333404408b
Signed-off-by: Jamo Luhrsen <jluhrsen@redhat.com>

Remove mitaka jobs from gbp csit

Change-Id: I2b6cd56c41f66268d13234f1a763852d359f677d
Signed-off-by: Jamo Luhrsen <jluhrsen@redhat.com>

Add carbon csit4 1node template

+ Add the new template to distribution-userfeatures job definition.

Change-Id: Ie3f6fe1fba7ce849ec32cf4a6a0595540c2571ca
Signed-off-by: Vratko Polak <vrpolak@cisco.com>

Remove mitaka jobs from netvirt csit

Change-Id: Ie4ef2ae890b9b0516a2bdad141d1bf44edae38c5
Signed-off-by: Jamo Luhrsen <jluhrsen@redhat.com>

Add job to generate release notes

- autorelease-generate-release-notes generates the release notes for
  every autorelease ${STREAM}
- trigger generate release notes job at the end of every autorelease
  build

Change-Id: Ie2ed6a0dec7c32e1505e429e16cb6bac34125373
Signed-off-by: Anil Belur <abelur@linuxfoundation.org>

Merge "Change variable name BUNDLE_URL->BUNDLE_PATH"

Fix iotdm.yaml for nitrogen and carbon

Change-Id: I1f4901712af7435176824eeaf34146787a6b78b0
Signed-off-by: Tomas Janciga <tjanciga@cisco.com>

Change variable name BUNDLE_URL->BUNDLE_PATH

This is to avoid confusion with global variable BUNDLE_URL.

Change-Id: I1a22f8e627424bb8d8f629f69bbefd9e1e5c1744
Signed-off-by: Luis Gomez <ecelgp@gmail.com>

Merge "Fix features for netconf userfeatures"

Merge "Temporarily remove validate-autorelease for IoTDM"

Temporarily remove validate-autorelease for IoTDM

Change-Id: I67389bb9999b9f4067325735de8d3db2addbbbf1
Signed-off-by: Tomas Janciga <tjanciga@cisco.com>

Fix features for netconf userfeatures

Change-Id: I8560fdf0cc995b8ffe619d1d87620b99e5293ce3
Signed-off-by: Vratko Polak <vrpolak@cisco.com>

Fix sar data report generation

Using sudo is not recommended for generating accounting summary
therefore generate reports with sar command

Change-Id: I4db36646afa8558ec7145906f8f9caaea727ac93
Signed-off-by: Anil Belur <abelur@linuxfoundation.org>

Merge "integration patch jobs use karaf3 for nitrogen"

Merge "Move sar stats to publishers"

integration patch jobs use karaf3 for nitrogen

Same as project patch-test, people will not understand
current behavior unless we explain it.

Note periodic distribution tests will still use karaf4
for nitrogen so they can be used to validate karaf4.

Change-Id: I7304d79a9f02e9cd65afeeea5b6ba152ff42cda1
Signed-off-by: Luis Gomez <ecelgp@gmail.com>

Merge "Add/cleanup inline docs for multipatch builder sh"

Move sar stats to publishers

- Move sar report generation to publisher
- remove builder autorelease-sys-stats since we are capturing system
  info in deploy archives scripts.

Change-Id: Ibccb0d6712f709ed5f75395a15c96a56047cb720
Signed-off-by: Anil Belur <abelur@linuxfoundation.org>

Merge "Enhance 6Wind quagga image on ubuntu16 & centos7"

Add/cleanup inline docs for multipatch builder sh

Change-Id: I914ee444c2d7ebd5e5bfe2b5979ae87e956c6618
Signed-off-by: Daniel Farrell <dfarrell@redhat.com>

Merge "BUG-8266: Add apidocs feature to netconf test"

Merge "Delete broken netconf csit job"

Delete broken netconf csit job

Change-Id: I5481b8e118f0723ebe28939acc37e21de968166b
Signed-off-by: Vratko Polak <vrpolak@cisco.com>

Capture and archive sar data for autorelease jobs

Archive sar data for autorelease jobs to further analyse any memory
issues and print a summary memory stats at the end of the autorelease
build console logs. ksar can be used to generate relevent graphs
depending on the parameter analysed.

Change-Id: Ie93c954aebd7166befd7cb9d5abe10abf89df47c
Signed-off-by: Anil Belur <abelur@linuxfoundation.org>

Fix patch test job uses karaf3

Change-Id: Ia39fb51a64415826a677ccea9d6549e2584ddf39
Signed-off-by: Luis Gomez <ecelgp@gmail.com>

Fix BUNDLE_URL variable injection

Change-Id: I3d52c52066a1fdef9e57506946664ec23506816b
Signed-off-by: Luis Gomez <ecelgp@gmail.com>

Fix typo in the distro upload script

Change-Id: Ibd89268344c9dac4a1e86650c0ca5ce17cb435a9
Signed-off-by: Luis Gomez <ecelgp@gmail.com>

Add missing | in predefined-parameters definition

Change-Id: I0afeeac2040167216235c9f1bd99218588a0d14f
Signed-off-by: Luis Gomez <ecelgp@gmail.com>

BUG-8266: Add apidocs feature to netconf test

Change-Id: I90d80ef94db18c126be726a879c573f1263c69c0
Signed-off-by: Luis Gomez <ecelgp@gmail.com>

Patch test jobs will use karaf3 for now

Change-Id: I6e80a86e642a9e3298d14c8000b69f110c2daddc
Signed-off-by: Luis Gomez <ecelgp@gmail.com>

Add cluster singleton longevity jobs

Change-Id: I1bd4c4935f4ba7c62c2207d35e087d5caa30d186
Signed-off-by: Peter Gubka <pgubka@cisco.com>

Archive the last karaf distribution

Temporarily archive the last build karaf distribution to unblock devs
from testing Carbon until we figure out why staging repositories are not
being created for Autorelease Carbon.

Change-Id: I3a6e4ca6ac66d46f365f5fadd662cb2cc4f04c4d
Signed-off-by: Thanh Ha <thanh.ha@linuxfoundation.org>

Fix distribution-verify job back to freestyle

The big patch https://git.opendaylight.org/gerrit/53797 accidently
converted the distribution-verify job back to a Maven project type and
causes builder-jjb-merge to fail because it is not able to update a job
that's of a different type.

Since we don't want to be reverting jobs back to Maven project types
anyway this patch updates the job to use freestyle again.

Change-Id: I95f50ad683b6f2486b246b47e87f5f1f1305f005
Signed-off-by: Thanh Ha <thanh.ha@linuxfoundation.org>

Log files over 200 MB into archived file

We need to determine sizes of large files going into Nexus since there
is a 500 MB limit. Let's log all files larger than 200 MB into a file so
we can track them.

Change-Id: Ia38e81544f857785364b3c19a575dbd0aaa1735e
Signed-off-by: Thanh Ha <thanh.ha@linuxfoundation.org>

Merge "Make jobs karaf-version specific, some duplicities"

Make jobs karaf-version specific, some duplicities

+ Affected jobs: distribution-check, csit, *patch-test, deploy, offline.
+ Carbon: csit and *patch pick one version, other affected run both.
+ Introduced KARAF_VERSION bash variable.
+ Macro to set that variable.
+ Default value set to 'karaf4'.
+ Pre-carbon branches (and caron temporarily) use 'karaf3'.
+ Karaf version usually configurable per job definition and stream.
+ csit-verify jobs use {verify-karaf-version} from releng defaults.
+ Scripts -bundle-vars, -distribution-check, -deploy, -offline renamed.
+ Macros which include (some of) them also renamed to match.
+ The bundle script sets artifact name and path from karaf version.
+ KARAF_ARTIFACT computed and used instead of distribution-karaf.
+ The part detecting version from nexus moved to separate macro.
+ The nexus upload macro tolerates failures (for Sandbox).
+ The nexus upload macro cats log to console to see attempted URL is ok.
+ High level macros usually call dependent macros (unless duplication).
+ Also they inject their property file right away.
+ BUNDLE_URL and ACTUAL_BUNDLE_URL always with underscores.
- BUNDLEVERSION and BUNDLEFOLDER still without underscores, cause Robot.
+ On yaml side, bundle-url always with dash.
+ concurrent:false for distribution deploy and offline jobs.
+ distribution-jobs moved to jjb/integration/distribution/.
+ Separated distribution-templates (distribution-check moved there)..
+ Simple Yaml string without quotes, unless that looks ugly in lists.
+ Description comments moved inside to not repeat the name.
+ Used by field dropped, Argumens and Required added (TODOs left).
+ Some typos from previous changes corrected.
+ Random bash linting improvements.
- Two carbon distribution-check jobs is a waste, worth fixing?
- Karaf4 bin/client is failing, to be fixed later (affects offline job).
- No alternative to Nexus uploading for Sandbox.
- Releng/Integration/Distribution stuff to be named and placed better.
- Some jobs get KARAF_VERSION even if they do not need that (yet).
- Code de-duplication left for another time.

Change-Id: I85c71a7ea94b9383b932d65b496056865bcecf78
Signed-off-by: Vratko Polak <vrpolak@cisco.com>

Enhance 6Wind quagga image on ubuntu16 & centos7

This is to enhance 6Wind Quagga router images
with 6Wind Quagga check-in fix tag 20170418
and modify compilation mode as 'evpn mode'

Change-Id: I352931fcc6cb4baf23e5d758542f89b4779f2fe8
Signed-off-by: Dhevendran Kulandaibvel <dhevendran.k@tcs.com>