Merge "Migrate vtn matrix-verify jobs to freestyle-verify jobs"

Merge "Migrate yangide matrix-verify jobs to freestyle-verify jobs"

Migrate yangide matrix-verify jobs to freestyle-verify jobs

This patch will:

* Delete the existing {project-name}-verify-{stream} jobs
* Create new jobs {project-name}-verify-{stream}-{maven}-{jdk} jobs

This work is related to our infra changes mentioned on the mailing list
(see below for link). We'd like to migrate jobs away from using the
matrix type jobs and convert them to freestyle jobs as the matrix system
occassionally causes us build issues especially with larger queue sizes.

See:
https://lists.opendaylight.org/pipermail/release/2016-July/007288.html

Change-Id: I198a99ec5a74aa8b7b359f1eb86d4e10a3a49446
Signed-off-by: Anil Belur <abelur@linuxfoundation.org>

Merge "Keep plot records even for deleted builds"

Merge "Split OVSDB IT into separate mvn targets"

Fix capwap projects file duplicate variables

Change-Id: I8b00169f62c339d56a27a46f7263df4912d52e96
Signed-off-by: Thanh Ha <thanh.ha@linuxfoundation.org>

Migrate toolkit matrix-verify jobs to freestyle-verify jobs

This patch will:

* Delete the existing {project-name}-verify-{stream} jobs
* Create new jobs {project-name}-verify-{stream}-{maven}-{jdk} jobs

This work is related to our infra changes mentioned on the mailing list
(see below for link). We'd like to migrate jobs away from using the
matrix type jobs and convert them to freestyle jobs as the matrix system
occassionally causes us build issues especially with larger queue sizes.

See:
https://lists.opendaylight.org/pipermail/release/2016-July/007288.html

Change-Id: I84e825e414cc3b636b377895bdd8eb69dfc7311f
Signed-off-by: Anil Belur <abelur@linuxfoundation.org>

Split OVSDB IT into separate mvn targets

Previously there was only one maven target for OVSDB IT. This
would generate one large file, with the logs from all of the
tests.

This patch creates 4 separate maven targets for OVSDB IT:
  - build
  - library/it
  - southbound-it
  - hwvtepsouthbound-it

Each target will have  it's own log file. This should make
it a little easier to debug each particular IT test target.

Also, this patch adds a new file to config docker for hwvtep
emulation. This config will only occur for OVSDB IT tests
that need it, currently library/it and hwvtepsouthbound-it.

Change-Id: I49a85bf6055e3233747e822038a78b2261e8e24c
Signed-off-by: Victor Pickard <vpickard@redhat.com>

Keep plot records even for deleted builds

Change-Id: I7bf389dcbb8f561f032095dd6e0db720ec56ca75
Signed-off-by: Thanh Ha <thanh.ha@linuxfoundation.org>

Migrate vtn matrix-verify jobs to freestyle-verify jobs

This patch will:

    * Delete the existing {project-name}-verify-{stream} jobs
    * Create new jobs {project-name}-verify-{stream}-{maven}-{jdk} jobs

This work is related to our infra changes mentioned on the mailing list
(see below for link). We'd like to migrate jobs away from using the
matrix type jobs and convert them to freestyle jobs as the matrix system
occassionally causes us build issues especially with larger queue sizes.

See:
https://lists.opendaylight.org/pipermail/release/2016-July/007288.html

Change-Id: I7360936e59b30ef8dab55c4710cea708c32bbbfc
Signed-off-by: Anil Belur <abelur@linuxfoundation.org>

Switch to public cloud for all integration jobs

Change-Id: I7ea570628c86fd12eb199f7fc6ad5060e6ebbda3
Signed-off-by: Thanh Ha <thanh.ha@linuxfoundation.org>

Move 3node csit tests to public cloud

Change-Id: I28afba5dc9b7502bb8ae8d8fdf5b30dc915c26bc
Signed-off-by: Luis Gomez <ecelgp@gmail.com>

Merge "Run csit-1node-periodic jobs in public cloud"

Run csit-1node-periodic jobs in public cloud

We can now run jobs in the public cloud again. Lets move the
csit-1node-periodic jobs over and see how it works before moving more
jobs over.

Change-Id: If22ddaabeaa66774bc7d7224a3ab7e05eddc6e85
Signed-off-by: Thanh Ha <thanh.ha@linuxfoundation.org>

Merge "Remove jjb custom scripting"

Merge "Update controller image label to new format"

Migrate custom jjb jobs to logs.opendaylight.org for netvirt

Change-Id: I3722d816d648ba9bca5f635726def1fa8a0a254d
Signed-off-by: Anil Belur <abelur@linuxfoundation.org>

Bump autorelease to a 4 core system

Some project unit tests appear to require 4 cores to successfully pass.
We should bump autorelease to a 4 core system for this reason.

Change-Id: I55cb209ed2d3a417651ebecfd4a59389d57b2fd0
Signed-off-by: Thanh Ha <thanh.ha@linuxfoundation.org>

Merge "Migrate coretutorials matrix-verify jobs to freestyle-verify jobs"

Migrate armoury matrix-verify jobs to freestyle-verify jobs

This patch will:

    * Delete the existing {project-name}-verify-{stream} jobs
    * Create new jobs {project-name}-verify-{stream}-{maven}-{jdk} jobs

This work is related to our infra changes mentioned on the mailing list
(see below for link). We'd like to migrate jobs away from using the
matrix type jobs and convert them to freestyle jobs as the matrix system
occassionally causes us build issues especially with larger queue sizes.

See:
https://lists.opendaylight.org/pipermail/release/2016-July/007288.html

Change-Id: I1044a3ff0fd045cd8d95acd374ebae21ce76c619
Signed-off-by: Thanh Ha <thanh.ha@linuxfoundation.org>

Migrate coretutorials matrix-verify jobs to freestyle-verify jobs

This patch will:

    * Delete the existing {project-name}-verify-{stream} jobs
    * Create new jobs {project-name}-verify-{stream}-{maven}-{jdk} jobs

This work is related to our infra changes mentioned on the mailing list
(see below for link). We'd like to migrate jobs away from using the
matrix type jobs and convert them to freestyle jobs as the matrix system
occassionally causes us build issues especially with larger queue sizes.

See:
https://lists.opendaylight.org/pipermail/release/2016-July/007288.html

Change-Id: Id4761132b82e691b68af65ff6025349272abe035
Signed-off-by: Thanh Ha <thanh.ha@linuxfoundation.org>

YangTools lithium should test with jdk8

Change-Id: I8665f441ce8ec714fecfffc0c437e8b4a188d1f1
Signed-off-by: Thanh Ha <thanh.ha@linuxfoundation.org>

Fix templates around {jdk} / {jdks}

We need {jdk} for the regular jobs and {jdks} for verify job since the
regular jobs are not expecting a list of JDKs it causes issues with
configuration.

Change-Id: I2505207608e789c80fb59dbbd25a39e89165de43
Signed-off-by: Thanh Ha <thanh.ha@linuxfoundation.org>

Merge "Migrate yangtools matrix-verify jobs to freestyle-verify jobs"

Merge "Added Longevity testing specific karaf features"

Merge "Migrate bgpcep matrix-verify jobs to freestyle-verify jobs"

Merge "Migrate atrium matrix-verify jobs to freestyle-verify jobs"

Merge "Migrate capwap matrix-verify jobs to freestyle-verify jobs"

Merge "Migrate aaa matrix-verify jobs to freestyle-verify jobs"

Merge "Remove autoupdate script from jjb verify job"

Merge "Fix typo"

Migrate yangtools matrix-verify jobs to freestyle-verify jobs

This patch will:

    * Delete the existing yangtools verify jobs
    * Create new template {project-name}-verify-{stream}-{maven}-{jdk} jobs
    * Switch yangtools back to use a releng managed verify template

In the case of yangtools we are switching from the Maven project job
type to freestyle project type. It should also speed up builds a little
at the end as the freestyle jobs do not run the additional
fingerprinting.

This work is related to our infra changes mentioned on the mailing list
(see below for link). We'd like to migrate jobs away from using the
matrix type jobs and convert them to freestyle jobs as the matrix system
occassionally causes us build issues especially with larger queue sizes.

See:
https://lists.opendaylight.org/pipermail/release/2016-July/007288.html

Change-Id: I6a2fb2d7745a089f29106defd6e4fe4d59584c9c
Co-Authored-By: Thanh Ha <thanh.ha@linuxfoundation.org>
Signed-off-by: Anil Belur <abelur@linuxfoundation.org>

Migrate capwap matrix-verify jobs to freestyle-verify jobs

This patch will:

    * Delete the existing {project-name}-verify-{stream} jobs
    * Create new jobs {project-name}-verify-{stream}-{maven}-{jdk} jobs

This work is related to our infra changes mentioned on the mailing list
(see below for link). We'd like to migrate jobs away from using the
matrix type jobs and convert them to freestyle jobs as the matrix system
occassionally causes us build issues especially with larger queue sizes.

See:
https://lists.opendaylight.org/pipermail/release/2016-July/007288.html

Change-Id: I5bc9fd75d829a0d23a47fd13a5c12d06268f1795
Signed-off-by: Thanh Ha <thanh.ha@linuxfoundation.org>

Migrate bgpcep matrix-verify jobs to freestyle-verify jobs

This patch will:

    * Delete the existing {project-name}-verify-{stream} jobs
    * Create new jobs {project-name}-verify-{stream}-{maven}-{jdk} jobs

This work is related to our infra changes mentioned on the mailing list
(see below for link). We'd like to migrate jobs away from using the
matrix type jobs and convert them to freestyle jobs as the matrix system
occassionally causes us build issues especially with larger queue sizes.

See:
https://lists.opendaylight.org/pipermail/release/2016-July/007288.html

Change-Id: Ieed99d5495eb022e83cdf98616fa9669282918c4
Signed-off-by: Thanh Ha <thanh.ha@linuxfoundation.org>

Migrate atrium matrix-verify jobs to freestyle-verify jobs

This patch will:

    * Delete the existing {project-name}-verify-{stream} jobs
    * Create new jobs {project-name}-verify-{stream}-{maven}-{jdk} jobs

This work is related to our infra changes mentioned on the mailing list
(see below for link). We'd like to migrate jobs away from using the
matrix type jobs and convert them to freestyle jobs as the matrix system
occassionally causes us build issues especially with larger queue sizes.

See:
https://lists.opendaylight.org/pipermail/release/2016-July/007288.html

Change-Id: I3e8bdb5a59d7b4e46bbad83d128ac673d286b395
Signed-off-by: Thanh Ha <thanh.ha@linuxfoundation.org>

Update controller image label to new format

Change-Id: I13771a58acb7adc387e6d810915db800818745cd
Signed-off-by: Thanh Ha <thanh.ha@linuxfoundation.org>

Bake matplotlib into robot image

matplotlib takes at least 6 minutes to compile when running pip install.
Use packaged version of matplotlib instead and bake it into robot image.

Change-Id: I5035361da26aafe5f462e0be227df0300f558d96
Signed-off-by: Thanh Ha <thanh.ha@linuxfoundation.org>

Add additional public cloud network to ssh host list

Change-Id: If67f597d20d53c5175af6412c4864b63d842ba1e
Signed-off-by: Thanh Ha <thanh.ha@linuxfoundation.org>

Set JClouds to be single-use slaves

Change-Id: I946264302bec502b083c306f2e3339bb0822aafc
Signed-off-by: Thanh Ha <thanh.ha@linuxfoundation.org>

Merge "Add Jenkins job to build RPMs"

Merge "Simplify distribution-check to use -Pq profile"

Archive any heap dumps in distribution-related jobs

This is useful mainly for SingleFeatureTest on odl-integration-all feature.

Downside: This may fill logs.opendaylight.org quite quickly.
TODO: We may want to use gzip (or xz) on them as well.

Change-Id: I99326fd6957216a8f11e21f3418a7cc50bc21df1
Signed-off-by: Vratko Polak <vrpolak@cisco.com>

Fix typo

Change-Id: I9d3dc156dd3e1e2cadb8dd498c91e426a3446ab9
Signed-off-by: Thanh Ha <thanh.ha@linuxfoundation.org>

Remove jjb custom scripting

No longer used or necessary to manage releng/builder templates.

Change-Id: Ib6faaad9e734c8a46e018b71efa8763ac4ec45c6
Signed-off-by: Thanh Ha <thanh.ha@linuxfoundation.org>

Remove autoupdate script from jjb verify job

No longer necessary due to jjb restructuring.

Change-Id: I10011e639bd8e3abc0f3c9a31151b1c368321701
Signed-off-by: Thanh Ha <thanh.ha@linuxfoundation.org>

Merge "Add mvn option -B to not log download stats"

Add mvn option -B to not log download stats

Change-Id: I329e15c55343d60abb897198d92123ea3609733c
Signed-off-by: Sam Hague <shague@redhat.com>

Merge "Remove project cfg files as they are no longer used"

Merge "Simplify odlparent-sonar job configuration"

Merge "Remove old matrix type verify job"

Merge "Remove old matrix type verify jobs"

Merge "Run verify-jjb in DEBUG mode"

Simplify distribution-check to use -Pq profile

The -Pq profile disables many of the same things distribution-check
wants to disable to run a quick build and build a karaf bundle.

This is a 2nd attempt at this patch now that odlparent was updated to
not skip compiling tests via patch
https://git.opendaylight.org/gerrit/42106

Change-Id: I07e41cd0c5a854c7735951b70f3efe6ad5c97006
Signed-off-by: Thanh Ha <thanh.ha@linuxfoundation.org>
(cherry picked from commit e61f031a50900a8a2d1895b320806e14f623f408)

Merge "Move robot dependencies into packer provision script"

Move robot dependencies into packer provision script

Install robot dependencies during image provisioning to make the spinup
scripts portion run faster.

Change-Id: I6dd06ff5a044f3fc82d7fa55a1aeafbea0b9478f
Signed-off-by: Thanh Ha <thanh.ha@linuxfoundation.org>

Update gbp system_type to be more accurate

Change-Id: I2d4a9ffc3214b58d397d3f60d94ad680639e0bc0
Signed-off-by: Thanh Ha <thanh.ha@linuxfoundation.org>

Migrate aaa matrix-verify jobs to freestyle-verify jobs

This patch will:

    * Delete the existing {project-name}-verify-{stream} jobs
    * Create new jobs {project-name}-verify-{stream}-{maven}-{jdk} jobs

This work is related to our infra changes mentioned on the mailing list
(see below for link). We'd like to migrate jobs away from using the
matrix type jobs and convert them to freestyle jobs as the matrix system
occassionally causes us build issues especially with larger queue sizes.

See:
https://lists.opendaylight.org/pipermail/release/2016-July/007288.html

Change-Id: I1dcffb3cb47dfb40dfd8c0744a0c034108b76bd5
Signed-off-by: Thanh Ha <thanh.ha@linuxfoundation.org>

Run verify-jjb in DEBUG mode

Run with DEBUG mode enabled so that it can tell us which template file
it is parsing when there is a failure.

Change-Id: I0565f2135da1613047c1e759605f55494ca06061
Signed-off-by: Thanh Ha <thanh.ha@linuxfoundation.org>

Merge "Fix contributing docs links; README->readthedocs"

Merge "Convert Vagrant to Packer"

Convert Vagrant to Packer

Changes in the Rackspace Public cloud that came about because of the
private cloud creation and connection have made using Vagrant inside the
public cloud impossible now. This converts all of the in use Vagrant
definitions to Packer and allows us to build images at the same time in
both clouds so that they are identical as we can possibly make them.

Change-Id: I410ad83eaabddfe50447dbeefe7eb2d79660a06c
Signed-off-by: Andrew Grimberg <agrimberg@linuxfoundation.org>

Fix contributing docs links; README->readthedocs

Change-Id: I7f0ec2d0f9b488ece4901bbb0978784c49243078
Signed-off-by: Daniel Farrell <dfarrell@redhat.com>

Merge "Migrate custom jjb jobs to logs.opendaylight.org for ovsdb"

Add Jenkins job to build RPMs

Add job that accepts params that define an RPM build and uses
Int/Pack's build.py script to build an ODL RPM.

Change-Id: I51ee7db2f04a39a4bbc771a223cafced8446b5ca
Signed-off-by: Daniel Farrell <dfarrell@redhat.com>

Merge "use new netvirt-openstack feature instead of netvirt-vpnservice-openstack"

Merge "Revert "Simplify distribution-check to use -Pq profile""

Revert "Simplify distribution-check to use -Pq profile"

This reverts commit e61f031a50900a8a2d1895b320806e14f623f408.

Turns out this profile is too aggressive and causes build failures with
the distribution-check job.

Change-Id: I3e403c450c55ed78e96d582538a395cd007df745
Signed-off-by: Thanh Ha <thanh.ha@linuxfoundation.org>

Beep up lispflowmapping build VM to 4 CPUs

It is probably more efficient than having to run 'reverify' or 'recheck'
over again, hoping that all jobs will pass at the same time.

See https://git.opendaylight.org/gerrit/#/c/41662/

Change-Id: Ic65f7d3504c60ba6ad24a1227930b583d94843e1
Signed-off-by: Lorand Jakab <lojakab@cisco.com>

Migrate custom jjb jobs to logs.opendaylight.org for ovsdb

Change-Id: I7cc2e8b84d3b605fde6c4293204297c947b3b0af
Signed-off-by: Anil Belur <abelur@linuxfoundation.org>

Remove old matrix type verify jobs

With the new {project-name}-verify-{stream}-{maven}-{jdk} job type
working there is no longer a need to maintain the old matrix style
verify job.

Change-Id: I4bfb379e792ad5238f34eb463988283768144c3d
Signed-off-by: Thanh Ha <thanh.ha@linuxfoundation.org>

Remove old matrix type verify job

With job template {project-name}-verify-{stream}-{maven}-{jdk} working
there is no longer a need for the old matrix style verify job.

Change-Id: Ica9383a856584fa89350605486e7e06df40e301e
Signed-off-by: Thanh Ha <thanh.ha@linuxfoundation.org>

Added Longevity testing specific karaf features

Added longevity specific resource library to the controller-run script
and modified openflowplugin-scalability job to include the required
libraries.

Change-Id: I3aabd844ed3f6d4b5358dc5f8d30f230a799d42c
Signed-off-by: Kumar Rishabh <shailrishabh@gmail.com>

Simplify patch test jobs to use -Pq profile

Change-Id: I64b5a3c65690fe75128132b02769a0f035e369a3
Signed-off-by: Luis Gomez <ecelgp@gmail.com>

Merge "Simplify distribution-check to use -Pq profile"

Merge "Update ovsdb projects file"

use new netvirt-openstack feature instead of netvirt-vpnservice-openstack

Change-Id: Ib36170c901baf3569e0eb48e3510fb0e6d0bcbef
Signed-off-by: Jamo Luhrsen <jluhrsen@redhat.com>

Simplify distribution-check to use -Pq profile

The -Pq profile disables many of the same things distribution-check
wants to disable to run a quick build and build a karaf bundle.

Change-Id: I6e5fc821dfeabfec9583344375d9ec23198908b9
Signed-off-by: Thanh Ha <thanh.ha@linuxfoundation.org>

Fix jdk version in odlparent-verify job

Setting should have been openjdk8 for boron.

Change-Id: I72cd986116a12d8d2554f0dc8077ab08f669744c
Signed-off-by: Thanh Ha <thanh.ha@linuxfoundation.org>

Simplify odlparent-sonar job configuration

Change-Id: I601704c950ba88d7415a349b7bf9c3137f5670fa
Signed-off-by: Thanh Ha <thanh.ha@linuxfoundation.org>

Fix email prefix for project-name

Change https://git.opendaylight.org/gerrit/42019/ did not update the
email prefixes which could be a problem if name is not project-name.

Change-Id: I004149afd408bf5fe433fabfb27ecaf0e3f6555d
Signed-off-by: Thanh Ha <thanh.ha@linuxfoundation.org>

Add new freestyle verify job type to odlparent

Change-Id: Ia0e4f40c68c739cecb9fbfd96ef00c6d4f78a8c2
Signed-off-by: Thanh Ha <thanh.ha@linuxfoundation.org>

Update ovsdb projects file

Split projects file into 3 projects for each release. This way we can
test against multiple jdk versions with new jobs.

Change-Id: I7f7a734dbcf16a51370d6daeb58f94ee0038fb64
Signed-off-by: Thanh Ha <thanh.ha@linuxfoundation.org>

Change template {name} field into {project-name}

With the changes we want to do to the matrix job we need to add a
project-name field so that we can declare multiple jjb 'project'
sections that use the same name. This way job names won't be changed in
Jenkins if we create multiple project configurations.

Change-Id: Ic6829e67e1769c181d023aab43bb6e71452ec647
Signed-off-by: Thanh Ha <thanh.ha@linuxfoundation.org>

Remove project cfg files as they are no longer used

Change-Id: Ia086e13edc87d49ebdca63de670664f559f310ad
Signed-off-by: Thanh Ha <thanh.ha@linuxfoundation.org>

Move controller.sh into builder.sh

Change-Id: Id7220c311ca528faa395f9d686d7a218302f92b0
Signed-off-by: Thanh Ha <thanh.ha@linuxfoundation.org>

Update java templates with variable {build-node}

Change-Id: I9497d4fe3e4072fe12c82682356c61b7f32a7f08
Signed-off-by: Anil Belur <abelur@linuxfoundation.org>

Convert verify and merge nodes to use new build label

Change-Id: I330b15a390c729ec5b5128ad8fd8708376af398d
Signed-off-by: Thanh Ha <thanh.ha@linuxfoundation.org>

Update opflex to use new build labels

Change-Id: I643062510ec0642f82162fd4db75824ef9f5c577
Signed-off-by: Thanh Ha <thanh.ha@linuxfoundation.org>

Update devstack and docker to use new build labels

Change-Id: Ib7ddaa291a95752576bc318fa0fa73dde3f479d6
Signed-off-by: Thanh Ha <thanh.ha@linuxfoundation.org>

Update lacp to use new build labels

Change-Id: Ic8252c01871ed991a9c60b4218afb9c082a727e2
Signed-off-by: Thanh Ha <thanh.ha@linuxfoundation.org>

Update gbp to use new build labels

Change-Id: Ie6241e67a2c1ce665dae50647d44c6441714d551
Signed-off-by: Thanh Ha <thanh.ha@linuxfoundation.org>

Update integration jobs to use new build labels

Change-Id: I74b7791dc785168a9e90d782d33e37b0102c509c
Signed-off-by: Thanh Ha <thanh.ha@linuxfoundation.org>

Update autorelease jobs to use new build labels

Change-Id: I775bfe2143228c83c03495a7ebfebd6376f83602
Signed-off-by: Thanh Ha <thanh.ha@linuxfoundation.org>

Introduce bgpcep to use build-node for 4cpu system

Change-Id: I00d3c8bf408b304639d260bd3cfcd08bfcc9330e
Signed-off-by: Anil Belur <abelur@linuxfoundation.org>

Merge "Bump netvirt memory by 2x"

Merge "Added a CSIT of VTN project to csit-list."

Bump netvirt memory by 2x

Change-Id: Ib99b4c7de8f0747098ca70066d5c647f6e419af8
Signed-off-by: Thanh Ha <thanh.ha@linuxfoundation.org>

Restore integration job dependencies for OVSDB

OVSDB should be in offset 1, it is in offset 2 in this relase because
of the project split.

Change-Id: Ie989c458f502561034807e3c3fc176dc67ce0364
Signed-off-by: Luis Gomez <ecelgp@gmail.com>

Update project dependencies according to offset

- Offset-0 projects should depend only on offset-0
- Offset-1 projects should depend only on offset-0 and offset-1
- Offset-2 projects should depend only on offset-1 and offset-2
- Non-SimRel participating offsets depend on no offsets

Change-Id: I2b8bce76674405a98a528bf6f795744b99d28cca
Signed-off-by: Thanh Ha <thanh.ha@linuxfoundation.org>

remove offset 0 distribtion triggers for offset 2 CSIT

Change-Id: Ie1fd9b40959f63c68a3231e94c01fd93e76c8e8f
Signed-off-by: Jamo Luhrsen <jluhrsen@redhat.com>