New L2Switch suite to catch standing issues

Addressing Jamo's comments

Change-Id: Ida139aa9387e5c10b25ab912cfbc9d823d54b5cd
Signed-off-by: Luis Gomez <ecelgp@gmail.com>

Merge "Add cluster status monitor tool."

Merge "Suite basicpcep removed."

Merge "TSDR HBase and H2 DataStore Integrations Test suites and following review comments are addressed 1.Space on leading and trailing on script 2.Reusage KarafKeyword has been written 3.Utils.txt suiteSetup has been utilized 4.Seperated the Hbase Client installation to Controller.sh 5.Updated the Variable.py with common Karaf variables"

Merge "Adding a final suite teardown to scale tests"

Suite basicpcep removed.

Releng/builder jobs now use the new and improved pcepuser suite,
so the old basicpcep suite can be safely removed now.

The testplan and variables related to basicpcep are also removed.

Change-Id: Ia56d8b486e51df5e1a3b0a7d28505a56551cd634
Signed-off-by: Vratko Polak <vrpolak@cisco.com>

new testplan to be able to compare ofp after redesign

Change-Id: I6d722d9e8f6319591b8d8ef9080746ce31c2a21f
Signed-off-by: Peter Gubka <pgubka@cisco.com>

TSDR HBase and H2 DataStore Integrations Test suites and following review comments are addressed 1.Space on leading and trailing on script 2.Reusage KarafKeyword has been written 3.Utils.txt suiteSetup has been utilized 4.Seperated the Hbase Client installation to Controller.sh 5.Updated the Variable.py with common Karaf variables

Change-Id: I43ff56601c8031cf09360375965915466b00fd53
Signed-off-by: vasanthan_balasubram <vasanthan_balasubram@dell.com>

Adding a final suite teardown to scale tests

this makes it easier to run manually when the test VMs are
not dynamic and clean to start with.

-  will do a sudo mn -c to let mininet try to clean itself
-  will look for any left over mn processes and kill them at the OS level

Change-Id: Ib7577d00cea199c60e0c8c178b6131b2d898cacb
Signed-off-by: Jamo Luhrsen <james.luhrsen@hp.com>

Making cbench suite more friendly for Lithium OFP

-  there is a deadlock issue in the controller that causes
   cbench to hang.  This ends up in the keyword timing out.
   I added logic to catch that case and log the results as
   zero.

-  Also, moved the latency case to run first as that doesn't
   seem to hit the deadlock and will allow us to start tracking
   those numbers.  Once the deadlock is hit, the controller is
   *dead* for these tests so having throughput first made the
   working latency test worthless

Change-Id: I8c604cf5f3308035dc6de8c1e6aae849aba411c4
Signed-off-by: Jamo Luhrsen <james.luhrsen@hp.com>

Add cluster status monitor tool.

Change-Id: I46729dd780b041c5f1b5526866678d91038c20b1
Signed-off-by: Phillip Shea <phillip.shea@hp.com>

Merge "Reworked FlowConfigBlaster to be able to batch multiple flows in a single RESTCONF request. Batching yields 5-12x better performance than sending individual flows."

Reworked FlowConfigBlaster to be able to batch multiple flows in a single RESTCONF request. Batching yields 5-12x better performance than sending individual flows.

Change-Id: I14806d575581565533c65bb678a9930fcd995a40
Signed-off-by: Jan Medved <jmedved@cisco.com>

Merge "need a testplan file for Li-redesign cbench test"

Merge "Adding first test case for snmp project, for snmp-get operation"

need a testplan file for Li-redesign cbench test

Change-Id: I46f0d6611eb7ce5cf14aedc5376f861df74f17e5
Signed-off-by: Jamo Luhrsen <james.luhrsen@hp.com>

Adding first test case for snmp project, for snmp-get operation

Change-Id: I2c7dd9035b26567b99559f9693b6918ba8ae0f9e
Signed-off-by: Vaishali Mithbaokar <vmithbao@cisco.com>

Merge "Move cluster-deployer to a shared clustering directory."

Move cluster-deployer to a shared clustering directory.

Change-Id: I4aeaef2bc07ba14272c96c55e4c8d0ab5018eeb9
Signed-off-by: Phillip Shea <phillip.shea@hp.com>

Merge "Do not override odlparent properties."

Do not override odlparent properties.

Adding jackson version as this is not the jackson in odlparent

Change-Id: I7f30b847ee0cb7d12221e95a48efa7d9033cb2f4
Signed-off-by: Tony Tkacik <ttkacik@cisco.com>

Merge "Test Suite for VPN Service"

Merge "Adding nic features"

Adding nic features

1) Feature Tests Pass: https://jenkins.opendaylight.org/releng/view/nic/job/nic-merge-master/20/
2) Features Comply with Guidelines: https://git.opendaylight.org/gerrit/gitweb?p=nic.git;a=blob;f=features/src/main/resources/features.xml;h=66ab48c12a5dc6965aac2a26c8719a6e9261366b;hb=HEAD
a) Feature Names (prefixed with 'odl-'): odl-nic-core odl-nic-console
b) Features Descriptions: Present (check https://wiki.opendaylight.org/view/Runtime:Karaf_Features_Guidelines#Description)
c) Features Start-Levels: None
3) Features Tested: Features have been tested for functionality with
a) feature:install odl-nic-core
b) feature:install odl-nic-core odl-integration-compatible-with-all
4) Integration Test Impact: None

Change-Id: I68c251dfb62fcbf989ce1c0ea5f5f7c41ec8ad3c
Signed-off-by: Renato Aguiar <renato.aguiar@hp.com>

Test Suite for VPN Service

Signed-off-by: Sindhuri <sindhuri.b@ericsson.com>
Change-Id: I8484a62565ebf785de72f591e87661fd838624ff

Adding link/port bounce test to basic openflow suite

Adding switch capabilities and IP check

Also fixing some of the robot warnings

Creating variables for switch vendor

Change-Id: Ib373e8b236e65af0f5018237ba9e40959840f230
Signed-off-by: Luis Gomez <ecelgp@gmail.com>

Merge "Added Put file to put scripts onto the mininet vm & also added sudo command to handle root access on init robot file. Rephrased the 010__lacp_inventory.robot file into a keyword format. Rest the prompt to > on variables.py file."

Merge "new statistic manager tests"

Added Put file to put scripts onto the mininet vm & also added sudo command to handle root access on init robot file. Rephrased the 010__lacp_inventory.robot file into a keyword format. Rest the prompt to > on variables.py file.

Change-Id: I012ede4017783fe98d6f16c8c018cf0744182f17
Signed-off-by: mahesh.manivasagam <mahesh_manivasagam@dell.com>

LACP Integration suites

Change-Id: I5b082027d9a4d34b2e027ee9b9cb8d2e4829f29e
Signed-off-by: mahesh.manivasagam <mahesh_manivasagam@dell.com>

Merge "Remove opendaylight-karaf-empty from integration repo"

Merge "Restoring CPqD based test cases"

Merge "added lithium features of ofPlugin"

added lithium features of ofPlugin

Change-Id: Idc2730512172d8bcdc90e81c12c087b8a9613b81
Signed-off-by: Michal Rehak <mirehak@cisco.com>

Merge "Adding verify controller log to scalability test."

new statistic manager tests

The idea of these tests is that flows are spread over the switches and
their tables the way we want. Eighter we want to have corner cases (all
flows on one switch in one table) or we want to have flows spread over
switches and tables according some rules.

The library generates flow details (a list) which are then used for
(de)configuration and checking the operational inventory datastore.

Testplan is not created yet. I'll do it next week.

Change-Id: I9f0ffa6f05c22f2aa75fc2cc2120f0390086daa3
Signed-off-by: Peter Gubka <pgubka@cisco.com>

Remove opendaylight-karaf-empty from integration repo

Change-Id: I2eb7cb390323d5ddcd7216428f4786a0b43a63ae
Signed-off-by: Luis Gomez <ecelgp@gmail.com>

Adding verify controller log to scalability test.

Fixing some libraries to use right default ${WORKSPACE} and ${BUNDLEFOLDER}.

(We are passing these variables with the pybot command anyway)

Change-Id: Idd2cbb493a51b67af340c5d69edc0ce27554d84b
Signed-off-by: Luis Gomez <ecelgp@gmail.com>

Merge "Adding TSDR features to integration project."

Adding TSDR features to integration project.

1) Feature Tests Pass: https://jenkins.opendaylight.org/releng/job/tsdr-merge-master/org.opendaylight.tsdr$features-tsdr/19/testReport/
2) Features Comply with Guidelines: https://git.opendaylight.org/gerrit/gitweb?p=tsdr.git;a=blob;f=features/src/main/resources/features.xml;h=62febc1a6f0c10375d9ca61a913a787cc6491b7d;hb=6e434b6790b86ecf9ca685118a7f24ed33a42deb
   a) Feature Names (prefixed with 'odl-'): odl-tsdr-all, odl-tsdr-hbase (check https://wiki.opendaylight.org/view/Runtime:Karaf_Features_Guidelines#Feature_Naming)
   b) Features Descriptions: Present ( check https://wiki.opendaylight.org/view/Runtime:Karaf_Features_Guidelines#Description)
   c) Features Start-Levels: None
3) Features Tested: Features have been tested for functionality with
   a) feature:install odl-tsdr-all
   b) feature:install odl-tsdr-hbase
4) Integration Test Impact: None

Change-Id: I001595aa219d9889345b4a3dffe76ce17251460a
Signed-off-by: YuLing Chen <yuling_c@dell.com>

Restoring CPqD based test cases

Kicking OpenFlow test...

Change-Id: Ia14209a9e22170c8e6fd7895834e27fed0f2bb53
Signed-off-by: Luis Gomez <ecelgp@gmail.com>

Adjusting Scalability suite to not log too much to file

Change-Id: I8917afc2add16f1ed43e11b595bd752f3190eef2
Signed-off-by: Luis Gomez <ecelgp@gmail.com>

Adjusting wait time in scalability test

Change-Id: I1435bbbf2f7b6eec0d19c46ba736269bdc3a813c
Signed-off-by: Luis Gomez <ecelgp@gmail.com>

Merge "Scalability Test - To start Playing"

Merge "add timeout-ness to karaf console keyword"

Scalability Test - To start Playing

Change-Id: I87e1798abae93ee582032e2cc6a51107f16fdb07
Signed-off-by: Luis Gomez <ecelgp@gmail.com>

add timeout-ness to karaf console keyword

Change-Id: I0808cfcd4625214aafa4c6207aa989cefedf1e44
Signed-off-by: Jamo Luhrsen <james.luhrsen@hp.com>

Merge "Suite for TCPMD5 added, suite for PCEP expanded."

Merge "Utility function to isolate and rejoin a controller in a cluster."

Suite for TCPMD5 added, suite for PCEP expanded.

The TCPMD5 suite covers entirety of
https://wiki.opendaylight.org/view/TCPMD5:Lithium_Feature_Tests#How_to_test

Notable library (Robot Resource file in fact) is introduced:
ConfigViaRestconf, which simplifies the task of overriding
config-subsystem state at runtime using restconf, at least for XML data.
Tcpmd5-specific config data is present in variables file.

Testplan is included, which in future would run
all suites needed for testing user-facing karaf features
of BGPCEP and TCPMD5 projects.

Also, clone of basicpcep is added, named pcepuser.
The reason is that the new name is more natural
for the new testplan contents, but we do not want to break
existing jobs using basicpcep suite right now.

+ Pcep variables file contains comments, helpful and structured.
+ Resource (library) for PCEP operations added.
+ The pcepuser suite now covers the entire
https://wiki.opendaylight.org/view/BGP_LS_PCEP:Lithium_Feature_Tests#How_to_test

+ pep8 compliant
+ applied: python -m robot.tidy --inplace
+ ${RESTCONFPORT} and ${NEXUSURL_PREFIX} used
- ConfigViaRestconf keywords for JSON data are not implemented at all
- Quality of tcpmd5 variables file is somewhat lacking

Change-Id: I94e77d2effef77f7bf8c23d4bc61f2ceeeb3a034
Signed-off-by: Vratko Polak <vrpolak@cisco.com>

giving more flows to benchmark the rest api

adding 500 flows (100 fl x 5 threads) takes less than 3 seconds to
configure and 3 seconds is not enough to measure the real rate,
threfor i enlarged the mumber of flows to 10k (2k x 5 thr)

Change-Id: Iaf6e5d7cab62db0dfcb6347b4fffc50150f94d7e
Signed-off-by: Peter Gubka <pgubka@cisco.com>

cbench testplan modification based on the renaming of the robot files

Change-Id: I6304a1f3523c1ffbd54bc80db49a9142a2c4a26e
Signed-off-by: Peter Gubka <pgubka@cisco.com>

Utility function to isolate and rejoin a controller in a cluster.

Change-Id: I8b5af8077b9ba433ed30f9383845bed45eed162f
Signed-off-by: Phillip Shea <phillip.shea@hp.com>

Merge "Force RPM to use Java 1.7, not newer versions"

Delete useless rm options in Dockerfile

This patch deletes force and recursive options which are not required
to remove an existent file.

Change-Id: Ie8d6781437b33aef6bd832c89edc48a28ea1ffc9
Signed-off-by: Cédric Ollivier <ollivier.cedric@gmail.com>

Changing Execute Command by Write/Read as the first does not work after karaf upgrade

Change-Id: Ic641ba2d9968c1430dd021962ef669a74b466b0a
Signed-off-by: Luis Gomez <ecelgp@gmail.com>

Merge "Added karaf alias, greeting message and restored shell output (disabled pty)"

Merge "Do not override Karaf version"

new openflow rest api perf suite

changes needed to integrate already present robot and script files with a new tesplan file
it basically implements https://trello.com/c/nHYXeOYa/94-performance-prepare-e2e-flow-push-test-using-jan-s-scripts

Change-Id: I57e4082bd5e65f6314a3397839b05f4f2d53dd80
Signed-off-by: Peter Gubka <pgubka@cisco.com>

Do not override Karaf version

Change-Id: I7bae23b613b62ade6bec312c72fbddb1ae15a98a
Signed-off-by: Tony Tkacik <ttkacik@cisco.com>

Changing extension from .txt to .robot

if the team agrees on this change, this patch should
cover it.

Change-Id: I6ad000fa54560f23321f22a20f8f089fb2819cd8
Signed-off-by: Jamo Luhrsen <james.luhrsen@hp.com>

testplan for Lithium ofp redesign job

Change-Id: Ic372d54788f894e36082de1721a35afd895fe890
Signed-off-by: Jamo Luhrsen <james.luhrsen@hp.com>

Changing vpnservice feature to not-compatible feature

vpnservice feature breaks restconf so it does impact other people.
Once this issue gets addressed, it can be moved back to compatible.

Change-Id: I3a4216c779b9c96fb64ef4ca97d9bc58a274ae89
Signed-off-by: Luis Gomez <ecelgp@gmail.com>

Merge "Adding SFC-OVS and SFC-netconf to Integration"

Merge "Added Feature Test Template for Capwap project"

Force RPM to use Java 1.7, not newer versions

* CentOS now installs 1.8 by default, which breaks ODL
* Bumps RPM version to 0.2.3-2

Change-Id: If9bce5f5eb4a4d5cbfdf7e981a379ffdcb3acc89
Signed-off-by: Daniel Farrell <dfarrell@redhat.com>

Adding SFC-OVS and SFC-netconf to Integration

Change-Id: I286f32eeee999cf0cb26a67c5205a64bf4ce236e
Signed-off-by: Reinaldo Penno <rapenno@gmail.com>

Added "Wait Until Keyword" instead of sleep

Change-Id: Ia1be8bcaee9ef8bf171e3e6aba2a000131affcf4
Signed-off-by: senthil <senthil-b@hcl.com>

Properties in root pom.xml are sorted now.

Secondary objectives:
See that distribution-verify job gets triggered.
See the job pass, as part of examination
of mysterious failures on other submissions.

Change-Id: Ic5c032d6a70e274c379fe6ba69444b63d3245490
Signed-off-by: Vratko Polak <vrpolak@cisco.com>

Added karaf alias, greeting message and restored shell output (disabled pty)

Change-Id: Ib92d86ae2f9b972814b51fb29cf37a8662ba38dc
Signed-off-by: Patrick Laurin <plaurin@inocybe.com>

Merge "Initial keyword to check if controller is Dead"

Merge "Add basic RESTconf test to repo"

Initial keyword to check if controller is Dead

Change-Id: I6e347dca33ce833bdc73a1e32fbb46fb558ebae4
Signed-off-by: Jamo Luhrsen <james.luhrsen@hp.com>

Added Feature Test Template for Capwap project

Change-Id: I73703cf3e8375cae9a24cc088f15b5f6e254012d
Signed-off-by: Vaibhav Bhatnagar <vbhatnag@brocade.com>

Merge "Adding l2switch scalability"

Adding l2switch scalability

Change-Id: I331722e3face8acd2034efcb99b1a5088dd1e5da
Signed-off-by: Luis Gomez <ecelgp@gmail.com>

Testplan for cbench daily job

Change-Id: Ib1d48317d8f3acfeb6f9793717d24a6bf0b9b1c2
Signed-off-by: Jamo Luhrsen <james.luhrsen@hp.com>

Separating the scalability test

Change-Id: I375392e4b12a961da3cce2637316ae1c5cc3554b
Signed-off-by: Luis Gomez <ecelgp@gmail.com>

Add helper script to connect to Karaf shell

Change-Id: I170c85ea87fcdfe999c61759442bf17e24ad2775
Signed-off-by: Daniel Farrell <dfarrell@redhat.com>

Add basic RESTconf test to repo

Signed-off-by: Joseph Stewart <josstewa@cisco.com>

Merge "Fixing netconf test in master"

Merge "Added iotdm feature to integration"

Merge "Refactored test tools Vagrant docs for clarity"

Added iotdm feature to integration

1) Feature Tests Pass: https://jenkins.opendaylight.org/releng/view/iotdm/job/iotdm-merge-master/org.opendaylight.iotdm$onem2m-features/9/testReport/
2) Features Comply with Guidelines: https://git.opendaylight.org/gerrit/gitweb?p=iotdm.git;a=blob;f=onem2m/onem2m-features/src/main/features/features.xml;h=4d98920ad269afcdeb3d102a43b394d265508d36;hb=master
  a) Feature Names (prefixed with 'odl-'): odl-iotdm-onem2m (check https://wiki.opendaylight.org/view/Runtime:Karaf_Features_Guidelines#Feature_Naming)
  b) Features Descriptions: Present (check https://wiki.opendaylight.org/view/Runtime:Karaf_Features_Guidelines#Description)
  c) Features Start-Levels: None
3) Features Tested: Features have been tested for functionality with
  a) feature:install odl-iotdm-onem2m
  b) feature:install odl-iotdm-onem2m, odl-integration-compatible-with-all
4) Integration Test Impact: None

Change-Id: I6b13350b262a7c9387d05a93548af9cb51a94052
Signed-off-by: John Burns <johnburn@cisco.com>

Merge "Add Robot Framework and RIDE to fedora VM tool"

Refactored test tools Vagrant docs for clarity

* Cleaned up Markdown syntax issues
* Moved pre-installed tools docs to top of doc, important
* Provided better summaries of installed tools
* Linked to resources for installed tools

Change-Id: If9aad45859ee07265b9bc9c82b88e5b356caa35e
Signed-off-by: Daniel Farrell <dfarrell@redhat.com>

Add Robot Framework and RIDE to fedora VM tool

Change-Id: I460f646839c3bd3948bce1a823a193135f3b005f
Signed-off-by: Patrick Laurin <plaurin@inocybe.com>

Adding netconf test plan

Change-Id: I77b52420c4544da6105a8b592dc44522c233765e
Signed-off-by: Luis Gomez <ecelgp@gmail.com>

Merge "Adding back sfclisp to features index."

Adding back sfclisp to features index.

Sfclisp was removed in this change:
https://git.opendaylight.org/gerrit/#/c/17864/
to unblock distribution jobs.

Since then, SFC project has merged
https://git.opendaylight.org/gerrit/#/c/17725/
and there were many merges to other projects
which might have fixed sfclisp issues.

This patch tries to add sfclisp back to Integration
to see whether distribution-verify job succeeds.

Change-Id: I261dcd489675f64b3f140c95eeea5d5b4815e4f3
Signed-off-by: Vratko Polak <vrpolak@cisco.com>

Cleaning pom.xml file duplicate dependencies

Change-Id: Icd08f100609b0e09a2806e1c8bdaeec5a55db9ff
Signed-off-by: Luis Gomez <ecelgp@gmail.com>

Merge "Remove features-flow from dependencies."

Add lispflowmapping northbound API system tests

These system tests exercise the old AD-SAL based northbound API of LISP
Flow Mapping, by adding a key for a /24 EID prefix, adding a mapping for
that prefix, and then looking up a /32 EID within that prefix and
comparing the result to the expected value.

Change-Id: I1616dd24fbd964a45aa81343769d52130c85cae2
Signed-off-by: Lorand Jakab <lojakab@cisco.com>

Remove features-flow from dependencies.

Flow related stuff was moved from Controller to OpenFlowPlugin.
The features-flow atrifact itself was removed here:
https://git.opendaylight.org/gerrit/#/c/17978/

Integration project should stop depending on this artifact.

This is a verify-triggering version of
https://git.opendaylight.org/gerrit/#/c/18079/

Signed-off-by: Vratko Polak <vrpolak@cisco.com>
Change-Id: I790ff6c0a253bec73c10844fdec1d86aea94a878

Merge "Enable VTN Coordinator Integration Tests"

Enable VTN Coordinator Integration Tests

Change-Id: I2451d909f7730a095e3b74160d2a7c709aebad0b
Signed-off-by: senthil <senthil-b@hcl.com>

Merge "Next try for logging perf numbers correctly for jenkins plot plugin"

Next try for logging perf numbers correctly for jenkins plot plugin

Change-Id: If28f7945fada203af846040100cb2a8c4b55652f
Signed-off-by: Jamo Luhrsen <james.luhrsen@hp.com>

Merge "Cbench test enhancements"

Cbench test enhancements

-  logging average results to .csv file to hopefully use in jenkins plot plugin

-  SSHLibrary is now updated so "File Should Exist" keyword is now available

Change-Id: I4033f9ee58491b35160aff9292e12b3049ab79b4
Signed-off-by: Jamo Luhrsen <james.luhrsen@hp.com>