csit/suites/netvirt/vpnservice/vpn_basic.robot

   1 *** Settings ***
   2 Documentation     Test suite to validate vpnservice functionality in an openstack integrated environment.
   3 ...               The assumption of this suite is that the environment is already configured with the proper
   4 ...               integration bridges and vxlan tunnels.
   5 Suite Setup       Suite Setup
   6 Suite Teardown    Suite Teardown
   7 Test Setup        SetupUtils.Setup_Test_With_Logging_And_Without_Fast_Failing
   8 Test Teardown     OpenStackOperations.Get Test Teardown Debugs
   9 Library           OperatingSystem
  10 Library           RequestsLibrary
  11 Resource          ../../../libraries/CompareStream.robot
  12 Resource          ../../../libraries/Utils.robot
  13 Resource          ../../../libraries/OpenStackOperations.robot
  14 Resource          ../../../libraries/DevstackUtils.robot
  15 Resource          ../../../libraries/VpnOperations.robot
  16 Resource          ../../../libraries/OVSDB.robot
  17 Resource          ../../../libraries/SetupUtils.robot
  18 Resource          ../../../libraries/Tcpdump.robot
  19 Resource          ../../../variables/Variables.robot
  20 Resource          ../../../variables/netvirt/Variables.robot
  21
  22 *** Variables ***
  23 ${SECURITY_GROUP}    vpn_sg
  24 @{NETWORKS}       vpn_net_1    vpn_net_2
  25 @{SUBNETS}        vpn_sub_1    vpn_sub_2
  26 @{SUBNET_CIDRS}    10.1.1.0/24    20.1.1.0/24
  27 @{PORTS}          vpn_net_1_port_1    vpn_net_1_port_2    vpn_net_2_port_1    vpn_net_2_port_2
  28 @{NET_1_VMS}      vpn_net_1_vm_1    vpn_net_1_vm_2
  29 @{NET_2_VMS}      vpn_net_2_vm_1    vpn_net_2_vm_2
  30 ${ROUTER}         vpn_router
  31 @{EXTRA_NW_IP}    71.1.1.2    72.1.1.2
  32 @{EXTRA_NW_SUBNET}    71.1.1.0/24    72.1.1.0/24
  33 ${UPDATE_NETWORK}    UpdateNetwork
  34 ${UPDATE_SUBNET}    UpdateSubnet
  35 ${UPDATE_PORT}    UpdatePort
  36 @{VPN_INSTANCE_IDS}    4ae8cd92-48ca-49b5-94e1-b2921a261441    4ae8cd92-48ca-49b5-94e1-b2921a261442    4ae8cd92-48ca-49b5-94e1-b2921a261443
  37 @{VPN_NAMES}      vpn_1    vpn_2    vpn_3
  38 @{RDS}            ["2200:2"]    ["2300:2"]    ["2400:2"]
  39 ${PORT_NEW}       vpn_net_1_port_new
  40 ${VM_NAME_NEW}    vpn_net_1_vm_new
  41 ${INVALID_VPN_INSTANCE_ID}    AAAAAAAAAA-4848-4949-9494-666666666666
  42
  43 *** Test Cases ***
  44 Check ELAN Datapath Traffic Within The Networks
  45     [Documentation]    Checks datapath within the same network with different vlans.
  46     ${output} =    OpenStackOperations.Execute Command on VM Instance    @{NETWORKS}[0]    @{NET_1_VM_IPS}[0]    ping -c 3 @{NET_1_VM_IPS}[1]
  47     BuiltIn.Should Contain    ${output}    64 bytes
  48     ${output} =    OpenStackOperations.Execute Command on VM Instance    @{NETWORKS}[1]    @{NET_2_VM_IPS}[0]    ping -c 3 @{NET_2_VM_IPS}[1]
  49     BuiltIn.Should Contain    ${output}    64 bytes
  50
  51 Create Router
  52     OpenStackOperations.Create Router    ${ROUTER}
  53     ${router_list} =    BuiltIn.Create List    ${ROUTER}
  54     BuiltIn.Wait Until Keyword Succeeds    3s    1s    Utils.Check For Elements At URI    ${ROUTER_URL}    ${router_list}
  55
  56 Add Interfaces To Router
  57     FOR    ${interface}    IN    @{SUBNETS}
  58         OpenStackOperations.Add Router Interface    ${ROUTER}    ${interface}
  59     END
  60     ${interface_output} =    OpenStackOperations.Show Router Interface    ${ROUTER}
  61     ${GWMAC_ADDRS}    ${GWIP_ADDRS} =    VpnOperations.Get Gateway MAC And IP Address    ${ROUTER}
  62     BuiltIn.Set Suite Variable    ${GWMAC_ADDRS}
  63     BuiltIn.Set Suite Variable    ${GWIP_ADDRS}
  64
  65 Check L3_Datapath Traffic Across Networks With Router
  66     @{tcpdump_conn_ids} =    OpenStackOperations.Start Packet Capture On Nodes    tcpdump_vpn    ${EMPTY}    @{OS_ALL_IPS}
  67     ${vm_ips} =    BuiltIn.Create List    @{NET_1_VM_IPS}    @{NET_2_VM_IPS}
  68     BuiltIn.Wait Until Keyword Succeeds    30s    10s    Utils.Check For Elements At URI    ${FIB_ENTRY_URL}    ${vm_ips}
  69     Verify Flows Are Present For L3VPN On All Compute Nodes    ${vm_ips}
  70     BuiltIn.Wait Until Keyword Succeeds    30s    10s    VpnOperations.Verify GWMAC Entry On ODL    ${GWMAC_ADDRS}
  71     Verify GWMAC Flow Entry On Flow Table On All Compute Nodes
  72     ${dst_ip_list} =    BuiltIn.Create List    @{NET_1_VM_IPS}[1]    @{NET_2_VM_IPS}
  73     OpenStackOperations.Test Operations From Vm Instance    @{NETWORKS}[0]    @{NET_1_VM_IPS}[0]    ${dst_ip_list}
  74     ${dst_ip_list} =    BuiltIn.Create List    @{NET_2_VM_IPS}[1]    @{NET_1_VM_IPS}
  75     OpenStackOperations.Test Operations From Vm Instance    @{NETWORKS}[1]    @{NET_2_VM_IPS}[0]    ${dst_ip_list}
  76     [Teardown]    VpnOperations.Test Teardown With Tcpdump Stop    ${tcpdump_conn_ids}
  77
  78 Add Multiple Extra Routes And Check Datapath Before L3VPN Creation
  79     ${CONFIG_EXTRA_ROUTE_IP1} =    BuiltIn.Catenate    sudo ifconfig eth0:1 @{EXTRA_NW_IP}[0] netmask 255.255.255.0 up
  80     ${output} =    OpenStackOperations.Execute Command on VM Instance    @{NETWORKS}[0]    @{NET_1_VM_IPS}[0]    ${CONFIG_EXTRA_ROUTE_IP1}
  81     ${CONFIG_EXTRA_ROUTE_IP2} =    BuiltIn.Catenate    sudo ifconfig eth0:2 @{EXTRA_NW_IP}[1] netmask 255.255.255.0 up
  82     ${output} =    OpenStackOperations.Execute Command on VM Instance    @{NETWORKS}[0]    @{NET_1_VM_IPS}[0]    ${CONFIG_EXTRA_ROUTE_IP2}
  83     ${output} =    OpenStackOperations.Execute Command on VM Instance    @{NETWORKS}[0]    @{NET_1_VM_IPS}[0]    ifconfig
  84     ${ext_rt1} =    BuiltIn.Set Variable    destination=@{EXTRA_NW_SUBNET}[0],gateway=@{NET_1_VM_IPS}[0]
  85     ${ext_rt2} =    BuiltIn.Set Variable    destination=@{EXTRA_NW_SUBNET}[1],gateway=@{NET_1_VM_IPS}[0]
  86     ${cmd} =    BuiltIn.Catenate    ${RT_OPTIONS}    ${ext_rt1}    ${RT_OPTIONS}    ${ext_rt2}
  87     OpenStackOperations.Update Router    ${ROUTER}    ${cmd}
  88     OpenStackOperations.Show Router    ${ROUTER}
  89     ${vm_ips} =    BuiltIn.Create List    @{EXTRA_NW_SUBNET}
  90     BuiltIn.Wait Until Keyword Succeeds    30s    10s    Utils.Check For Elements At URI    ${FIB_ENTRY_URL}    ${vm_ips}
  91     ${output} =    OpenStackOperations.Execute Command on VM Instance    @{NETWORKS}[0]    @{NET_1_VM_IPS}[1]    ping -c 3 @{EXTRA_NW_IP}[1]
  92     BuiltIn.Should Contain    ${output}    64 bytes
  93     ${output} =    OpenStackOperations.Execute Command on VM Instance    @{NETWORKS}[1]    @{NET_2_VM_IPS}[1]    ping -c 3 @{EXTRA_NW_IP}[1]
  94     BuiltIn.Should Contain    ${output}    64 bytes
  95     ${output} =    OpenStackOperations.Execute Command on VM Instance    @{NETWORKS}[0]    @{NET_1_VM_IPS}[1]    ping -c 3 @{EXTRA_NW_IP}[0]
  96     BuiltIn.Should Contain    ${output}    64 bytes
  97
  98 Delete Extra Route
  99     OpenStackOperations.Update Router    ${ROUTER}    ${RT_CLEAR}
 100     OpenStackOperations.Show Router    ${ROUTER}
 101
 102 Delete And Recreate Extra Route
 103     [Documentation]    Recreate multiple extra route and check data path before L3VPN creation
 104     ${CONFIG_EXTRA_ROUTE_IP1} =    BuiltIn.Catenate    sudo ifconfig eth0:1 @{EXTRA_NW_IP}[0] netmask 255.255.255.0 up
 105     ${output} =    OpenStackOperations.Execute Command on VM Instance    @{NETWORKS}[0]    @{NET_1_VM_IPS}[0]    ${CONFIG_EXTRA_ROUTE_IP1}
 106     ${ext_rt1} =    BuiltIn.Set Variable    destination=@{EXTRA_NW_SUBNET}[0],gateway=@{NET_1_VM_IPS}[0]
 107     ${cmd} =    BuiltIn.Catenate    ${RT_OPTIONS}    ${ext_rt1}
 108     OpenStackOperations.Update Router    ${ROUTER}    ${cmd}
 109     OpenStackOperations.Show Router    ${ROUTER}
 110     ${output} =    OpenStackOperations.Execute Command on VM Instance    @{NETWORKS}[0]    @{NET_1_VM_IPS}[1]    ping -c 3 @{EXTRA_NW_IP}[0]
 111     BuiltIn.Should Contain    ${output}    64 bytes
 112     # clear off extra-routes before the next set of tests
 113     [Teardown]    BuiltIn.Run Keywords    OpenStackOperations.Update Router    ${ROUTER}    ${RT_CLEAR}
 114     ...    AND    OpenStackOperations.Show Router    ${ROUTER}
 115     ...    AND    OpenStackOperations.Get Test Teardown Debugs
 116
 117 Create L3VPN
 118     ${net_id} =    OpenStackOperations.Get Net Id    @{NETWORKS}[0]
 119     ${tenant_id} =    OpenStackOperations.Get Tenant ID From Network    ${net_id}
 120     BuiltIn.Log    @{RDS}[0]
 121     VpnOperations.VPN Create L3VPN    vpnid=@{VPN_INSTANCE_IDS}[0]    name=@{VPN_NAMES}[0]    rd=@{RDS}[0]    exportrt=@{RDS}[0]    importrt=@{RDS}[0]    tenantid=${tenant_id}
 122     ${resp} =    VpnOperations.VPN Get L3VPN    vpnid=@{VPN_INSTANCE_IDS}[0]
 123     BuiltIn.Should Contain    ${resp}    @{VPN_INSTANCE_IDS}[0]
 124
 125 Associate L3VPN To Routers
 126     ${router_id} =    OpenStackOperations.Get Router Id    ${ROUTER}
 127     VpnOperations.Associate VPN to Router    routerid=${router_id}    vpnid=@{VPN_INSTANCE_IDS}[0]
 128     ${resp} =    VpnOperations.VPN Get L3VPN    vpnid=@{VPN_INSTANCE_IDS}[0]
 129     BuiltIn.Should Contain    ${resp}    ${router_id}
 130
 131 Verify L3VPN Datapath With Router Association
 132     ${vm_ips} =    BuiltIn.Create List    @{NET_1_VM_IPS}    @{NET_2_VM_IPS}
 133     CompareStream.Run_Keyword_If_Less_Than_Magnesium    BuiltIn.Wait Until Keyword Succeeds    30s    10s    Utils.Check For Elements At URI    ${VPN_IFACES_URL}    ${vm_ips}
 134     CompareStream.Run_Keyword_If_At_Least_Magnesium    BuiltIn.Wait Until Keyword Succeeds    30s    10s    Utils.Check For Elements At URI    ${VPN_INST_IFACES_URL}    ${vm_ips}
 135     ${RD} =    Strip String    @{RDS}[0]    characters="[]
 136     BuiltIn.Wait Until Keyword Succeeds    60s    15s    Utils.Check For Elements At URI    ${CONFIG_API}/odl-fib:fibEntries/vrfTables/${RD}/    ${vm_ips}
 137     Verify Flows Are Present For L3VPN On All Compute Nodes    ${vm_ips}
 138     BuiltIn.Wait Until Keyword Succeeds    30s    15s    VpnOperations.Verify GWMAC Entry On ODL    ${GWMAC_ADDRS}
 139     Verify GWMAC Flow Entry On Flow Table On All Compute Nodes
 140     BuiltIn.Log    Check datapath from network1 to network2
 141     ${dst_ip_list} =    BuiltIn.Create List    @{NET_1_VM_IPS}[1]    @{NET_2_VM_IPS}
 142     OpenStackOperations.Test Operations From Vm Instance    @{NETWORKS}[0]    @{NET_1_VM_IPS}[0]    ${dst_ip_list}
 143     BuiltIn.Log    Check datapath from network2 to network1
 144     ${dst_ip_list} =    BuiltIn.Create List    @{NET_2_VM_IPS}[1]    @{NET_1_VM_IPS}
 145     OpenStackOperations.Test Operations From Vm Instance    @{NETWORKS}[1]    @{NET_2_VM_IPS}[0]    ${dst_ip_list}
 146
 147 Delete Router Failure When Associated With L3VPN
 148     ${router_id} =    OpenStackOperations.Get Router Id    ${ROUTER}
 149     ${rc}    ${output} =    Run And Return Rc And Output    openstack router delete ${ROUTER}
 150     BuiltIn.Should Match Regexp    ${output}    Failed to delete router.*${ROUTER}
 151     BuiltIn.Should Be True    '${rc}' == '1'
 152     ${router_output} =    OpenStackOperations.List Routers
 153     BuiltIn.Should Contain    ${router_output}    ${ROUTER}
 154     @{router_list} =    BuiltIn.Create List    ${ROUTER}
 155     BuiltIn.Wait Until Keyword Succeeds    3s    1s    Utils.Check For Elements At URI    ${ROUTER_URL}    ${router_list}
 156     ${resp} =    VpnOperations.VPN Get L3VPN    vpnid=@{VPN_INSTANCE_IDS}[0]
 157     BuiltIn.Should Contain    ${resp}    ${router_id}
 158     Verify GWMAC Flow Entry On Flow Table On All Compute Nodes
 159
 160 Verify Remove Interface From Router When Associated With L3VPN
 161     OpenStackOperations.Remove Interface    ${ROUTER}    @{SUBNETS}[0]
 162     OpenStackOperations.Test Operations From Vm Instance    @{NETWORKS}[0]    @{NET_1_VM_IPS}[0]    ${NET_1_VM_IPS}
 163     OpenStackOperations.Test Operations From Vm Instance    @{NETWORKS}[0]    @{NET_1_VM_IPS}[0]    ${NET_2_VM_IPS}    ping_should_succeed=False
 164
 165 Verify L3VPN Datapath With Router Dissociation When Interfaces are Added To Router
 166     OpenStackOperations.Add Router Interface    ${ROUTER}    @{SUBNETS}[0]
 167     ${vm_ips} =    BuiltIn.Create List    @{NET_1_VM_IPS}    @{NET_2_VM_IPS}
 168     ${router_id} =    OpenStackOperations.Get Router Id    ${ROUTER}
 169     VpnOperations.Dissociate VPN to Router    routerid=${router_id}    vpnid=@{VPN_INSTANCE_IDS}[0]
 170     ${resp} =    VpnOperations.VPN Get L3VPN    vpnid=@{VPN_INSTANCE_IDS}[0]
 171     BuiltIn.Should Not Contain    ${resp}    ${router_id}
 172     Verify Flows Are Present For L3VPN On All Compute Nodes    ${vm_ips}
 173     ${dst_ip_list} =    BuiltIn.Create List    @{NET_1_VM_IPS}[1]    @{NET_2_VM_IPS}
 174     OpenStackOperations.Test Operations From Vm Instance    @{NETWORKS}[0]    @{NET_1_VM_IPS}[0]    ${dst_ip_list}
 175     BuiltIn.Log    Check datapath from network2 to network1
 176     ${dst_ip_list} =    BuiltIn.Create List    @{NET_2_VM_IPS}[1]    @{NET_1_VM_IPS}
 177     BuiltIn.Wait Until Keyword Succeeds    60s    10s    OpenStackOperations.Test Operations From Vm Instance    @{NETWORKS}[1]    @{NET_2_VM_IPS}[0]    ${dst_ip_list}
 178
 179 Remove Router Interfaces And Check L3_Datapath Traffic Across Networks
 180     ${router_id} =    OpenStackOperations.Get Router Id    ${ROUTER}
 181     FOR    ${INTERFACE}    IN    @{SUBNETS}
 182         OpenStackOperations.Remove Interface    ${ROUTER}    ${INTERFACE}
 183         OpenStackOperations.Test Operations From Vm Instance    @{NETWORKS}[0]    @{NET_1_VM_IPS}[0]    ${NET_1_VM_IPS}
 184         OpenStackOperations.Test Operations From Vm Instance    @{NETWORKS}[0]    @{NET_1_VM_IPS}[0]    ${NET_2_VM_IPS}    ping_should_succeed=False
 185     END
 186     ${interface_output} =    OpenStackOperations.Show Router Interface    ${ROUTER}
 187     FOR    ${INTERFACE}    IN    @{SUBNETS}
 188         ${subnet_id} =    OpenStackOperations.Get Subnet Id    ${INTERFACE}
 189         BuiltIn.Should Not Contain    ${interface_output}    ${subnet_id}
 190     END
 191
 192 Delete Router
 193     Delete Router    ${ROUTER}
 194     ${router_output} =    OpenStackOperations.List Routers
 195     BuiltIn.Should Not Contain    ${router_output}    ${ROUTER}
 196     @{router_list} =    BuiltIn.Create List    ${ROUTER}
 197     BuiltIn.Wait Until Keyword Succeeds    3s    1s    Utils.Check For Elements Not At URI    ${ROUTER_URL}    ${router_list}    check_for_null=True
 198     ${resp} =    VpnOperations.VPN Get L3VPN    vpnid=@{VPN_INSTANCE_IDS}[0]
 199     BuiltIn.Should Not Contain    ${resp}    ${ROUTER}
 200     Verify GWMAC Flow Entry Removed From Flow Table On All Compute Nodes
 201
 202 Delete Router With NonExistentRouter Name
 203     [Documentation]    Delete router with nonExistentRouter name
 204     ${result} =    Process.Run Process    openstack router delete nonExistentRouter    shell=True
 205     BuiltIn.Log    ${result.stdout}
 206     BuiltIn.Log    ${result.stderr}
 207     BuiltIn.Should Be True    '${result.rc}' == '1'
 208     BuiltIn.Should Match Regexp    ${result.stderr}    Failed to delete router with name or ID 'nonExistentRouter': No Router found for nonExistentRouter
 209
 210 Associate Networks To L3VPN
 211     [Documentation]    Associates L3VPN to networks and verify
 212     ${network1_id} =    OpenStackOperations.Get Net Id    @{NETWORKS}[0]
 213     ${network2_id} =    OpenStackOperations.Get Net Id    @{NETWORKS}[1]
 214     VpnOperations.Associate L3VPN To Network    networkid=${network1_id}    vpnid=@{VPN_INSTANCE_IDS}[0]
 215     ${resp} =    VpnOperations.VPN Get L3VPN    vpnid=@{VPN_INSTANCE_IDS}[0]
 216     BuiltIn.Should Contain    ${resp}    ${network1_id}
 217     VpnOperations.Associate L3VPN To Network    networkid=${network2_id}    vpnid=@{VPN_INSTANCE_IDS}[0]
 218     ${resp} =    VpnOperations.VPN Get L3VPN    vpnid=@{VPN_INSTANCE_IDS}[0]
 219     BuiltIn.Should Contain    ${resp}    ${network2_id}
 220
 221 Check Datapath Traffic Across Networks With L3VPN
 222     [Documentation]    Datapath Test Across the networks with VPN.
 223     ${output} =    OpenStackOperations.Execute Command on VM Instance    @{NETWORKS}[0]    @{NET_1_VM_IPS}[0]    ping -c 20 @{NET_1_VM_IPS}[1]
 224     BuiltIn.Should Contain    ${output}    64 bytes
 225     ${output} =    OpenStackOperations.Execute Command on VM Instance    @{NETWORKS}[0]    @{NET_1_VM_IPS}[0]    ping -c 20 @{NET_2_VM_IPS}[1]
 226     BuiltIn.Should Contain    ${output}    64 bytes
 227     ${output} =    OpenStackOperations.Execute Command on VM Instance    @{NETWORKS}[0]    @{NET_1_VM_IPS}[0]    ping -c 20 @{NET_2_VM_IPS}[0]
 228     BuiltIn.Should Contain    ${output}    64 bytes
 229
 230 Verification of route update after VM port removed and re added to VPN
 231     [Documentation]    Verify route update after VM port removed and re added to VPN
 232     OpenStackOperations.Delete Port    @{PORTS}[0]
 233     ${net_list} =    BuiltIn.Create List    ${NET_1_VM_IPS[0]}
 234     BuiltIn.Wait Until Keyword Succeeds    30s    10s    Utils.Check For Elements Not At URI    ${FIB_ENTRY_URL}    ${net_list}
 235     OpenStackOperations.Delete Vm Instance    @{NET_1_VMS}[0]
 236     OpenStackOperations.Create Port    @{NETWORKS}[0]    @{PORTS}[0]    sg=${SECURITY_GROUP}
 237     BuiltIn.Wait Until Keyword Succeeds    3s    1s    Utils.Check For Elements At URI    ${PORT_URL}    ${PORTS}
 238     OpenStackOperations.Create Vm Instance With Port On Compute Node    @{PORTS}[0]    @{NET_1_VMS}[0]    ${OS_CMP1_HOSTNAME}    sg=${SECURITY_GROUP}
 239     OpenStackOperations.Poll VM Is ACTIVE    @{NET_1_VMS}[0]
 240     ${status}    ${ips_and_console_log} =    BuiltIn.Run Keyword And Ignore Error    BuiltIn.Wait Until Keyword Succeeds    360s    15s    OpenStackOperations.Get VM IP
 241     ...    true    @{NET_1_VMS}[0]
 242     @{NET_1_VM_IPS}    ${NET_1_DHCP_IP} =    OpenStackOperations.Get VM IPs    @{NET_1_VMS}
 243     BuiltIn.Set Suite Variable    @{NET_1_VM_IPS}
 244     BuiltIn.Wait Until Keyword Succeeds    30s    10s    Utils.Check For Elements At URI    ${FIB_ENTRY_URL}    ${NET_1_VM_IPS}
 245     ${output} =    OpenStackOperations.Execute Command on VM Instance    @{NETWORKS}[0]    @{NET_1_VM_IPS}[0]    ping -c 10 @{NET_1_VM_IPS}[1]
 246     BuiltIn.Should Contain    ${output}    64 bytes
 247     ${output} =    OpenStackOperations.Execute Command on VM Instance    @{NETWORKS}[0]    @{NET_1_VM_IPS}[0]    ping -c 10 @{NET_2_VM_IPS}[0]
 248     BuiltIn.Should Contain    ${output}    64 bytes
 249
 250 Verification of route update after reconfiguring vpn by adding new ports
 251     [Documentation]    Verify route update after reconfiguring vpn by creating new VM with new port on openvswitch1
 252     OpenStackOperations.Create Port    @{NETWORKS}[0]    ${PORT_NEW}    sg=${SECURITY_GROUP}
 253     OpenStackOperations.Create Vm Instance With Port On Compute Node    ${PORT_NEW}    ${VM_NAME_NEW}    ${OS_CMP1_HOSTNAME}    sg=${SECURITY_GROUP}
 254     OpenStackOperations.Poll VM Is ACTIVE    ${VM_NAME_NEW}
 255     ${status}    ${ips_and_console_log} =    BuiltIn.Run Keyword And Ignore Error    BuiltIn.Wait Until Keyword Succeeds    360s    15s    OpenStackOperations.Get VM IP
 256     ...    true    ${VM_NAME_NEW}
 257     ${output} =    VpnOperations.Get Fib Entries    session
 258     BuiltIn.Should Contain    ${output}    ${ips_and_console_log[0]}
 259     OpenStackOperations.Delete Vm Instance    ${VM_NAME_NEW}
 260     OpenStackOperations.Delete Port    ${PORT_NEW}
 261
 262 Dissociate L3VPN From Networks
 263     [Documentation]    Dissociate L3VPN from networks
 264     ${network1_id} =    OpenStackOperations.Get Net Id    @{NETWORKS}[0]
 265     ${network2_id} =    OpenStackOperations.Get Net Id    @{NETWORKS}[1]
 266     VpnOperations.Dissociate L3VPN From Networks    networkid=${network1_id}    vpnid=@{VPN_INSTANCE_IDS}[0]
 267     ${resp} =    VpnOperations.VPN Get L3VPN    vpnid=@{VPN_INSTANCE_IDS}[0]
 268     BuiltIn.Should Not Contain    ${resp}    ${network1_id}
 269     VpnOperations.Dissociate L3VPN From Networks    networkid=${network2_id}    vpnid=@{VPN_INSTANCE_IDS}[0]
 270     ${resp} =    VpnOperations.VPN Get L3VPN    vpnid=@{VPN_INSTANCE_IDS}[0]
 271     BuiltIn.Should Not Contain    ${resp}    ${network2_id}
 272
 273 Delete Unknown L3VPN
 274     [Documentation]    Verification of a failure response with deletion of an unknown L3VPN
 275     ${status}    ${message} =    BuiltIn.Run Keyword And Ignore Error    VpnOperations.VPN Delete L3VPN    vpnid=${INVALID_VPN_INSTANCE_ID}
 276     BuiltIn.Should Contain    ${status}    FAIL
 277
 278 Delete L3VPN
 279     [Documentation]    Delete L3VPN
 280     VpnOperations.VPN Delete L3VPN    vpnid=@{VPN_INSTANCE_IDS}[0]
 281
 282 Create Multiple L3VPN
 283     [Documentation]    Creates three L3VPNs and then verify the same
 284     ${net_id} =    OpenStackOperations.Get Net Id    @{NETWORKS}[0]
 285     ${tenant_id} =    OpenStackOperations.Get Tenant ID From Network    ${net_id}
 286     VpnOperations.VPN Create L3VPN    vpnid=@{VPN_INSTANCE_IDS}[0]    name=@{VPN_NAMES}[0]    rd=@{RDS}[0]    exportrt=@{RDS}[0]    importrt=@{RDS}[0]    tenantid=${tenant_id}
 287     VpnOperations.VPN Create L3VPN    vpnid=@{VPN_INSTANCE_IDS}[1]    name=@{VPN_NAMES}[1]    rd=@{RDS}[1]    exportrt=@{RDS}[1]    importrt=@{RDS}[1]    tenantid=${tenant_id}
 288     VpnOperations.VPN Create L3VPN    vpnid=@{VPN_INSTANCE_IDS}[2]    name=@{VPN_NAMES}[2]    rd=@{RDS}[2]    exportrt=@{RDS}[2]    importrt=@{RDS}[2]    tenantid=${tenant_id}
 289     ${resp} =    VpnOperations.VPN Get L3VPN    vpnid=@{VPN_INSTANCE_IDS}[0]
 290     BuiltIn.Should Contain    ${resp}    @{VPN_INSTANCE_IDS}[0]
 291     ${resp} =    VpnOperations.VPN Get L3VPN    vpnid=@{VPN_INSTANCE_IDS}[1]
 292     BuiltIn.Should Contain    ${resp}    @{VPN_INSTANCE_IDS}[1]
 293     ${resp} =    VpnOperations.VPN Get L3VPN    vpnid=@{VPN_INSTANCE_IDS}[2]
 294     BuiltIn.Should Contain    ${resp}    @{VPN_INSTANCE_IDS}[2]
 295
 296 *** Keywords ***
 297 Suite Setup
 298     VpnOperations.Basic Suite Setup
 299     OpenStackOperations.Create Network    @{NETWORKS}[0]
 300     OpenStackOperations.Create Network    @{NETWORKS}[1]
 301     BuiltIn.Wait Until Keyword Succeeds    3s    1s    Utils.Check For Elements At URI    ${NETWORK_URL}    ${NETWORKS}
 302     OpenStackOperations.Update Network    @{NETWORKS}[0]    additional_args=--description ${UPDATE_NETWORK}
 303     ${output} =    OpenStackOperations.Show Network    @{NETWORKS}[0]
 304     BuiltIn.Should Contain    ${output}    ${UPDATE_NETWORK}
 305     OpenStackOperations.Create SubNet    @{NETWORKS}[0]    @{SUBNETS}[0]    @{SUBNET_CIDRS}[0]
 306     OpenStackOperations.Create SubNet    @{NETWORKS}[1]    @{SUBNETS}[1]    @{SUBNET_CIDRS}[1]
 307     BuiltIn.Wait Until Keyword Succeeds    3s    1s    Utils.Check For Elements At URI    ${SUBNETWORK_URL}    ${SUBNETS}
 308     OpenStackOperations.Update SubNet    @{SUBNETS}[0]    additional_args=--description ${UPDATE_SUBNET}
 309     ${output} =    OpenStackOperations.Show SubNet    @{SUBNETS}[0]
 310     BuiltIn.Should Contain    ${output}    ${UPDATE_SUBNET}
 311     OpenStackOperations.Create Allow All SecurityGroup    ${SECURITY_GROUP}
 312     ${allowed_address_pairs_args} =    BuiltIn.Set Variable    --allowed-address ip-address=@{EXTRA_NW_SUBNET}[0] --allowed-address ip-address=@{EXTRA_NW_SUBNET}[1]
 313     Create Port    @{NETWORKS}[0]    @{PORTS}[0]    sg=${SECURITY_GROUP}    additional_args=${allowed_address_pairs_args}
 314     Create Port    @{NETWORKS}[0]    @{PORTS}[1]    sg=${SECURITY_GROUP}    additional_args=${allowed_address_pairs_args}
 315     Create Port    @{NETWORKS}[1]    @{PORTS}[2]    sg=${SECURITY_GROUP}    additional_args=${allowed_address_pairs_args}
 316     Create Port    @{NETWORKS}[1]    @{PORTS}[3]    sg=${SECURITY_GROUP}    additional_args=${allowed_address_pairs_args}
 317     Wait Until Keyword Succeeds    3s    1s    Check For Elements At URI    ${PORT_URL}    ${PORTS}
 318     ${PORTS_MACADDR} =    Get Ports MacAddr    ${PORTS}
 319     Set Suite Variable    ${PORTS_MACADDR}
 320     Update Port    @{PORTS}[0]    additional_args=--description ${UPDATE_PORT}
 321     ${output} =    Show Port    @{PORTS}[0]
 322     Should Contain    ${output}    ${UPDATE_PORT}
 323     OpenStackOperations.Create Vm Instance With Port On Compute Node    @{PORTS}[0]    @{NET_1_VMS}[0]    ${OS_CMP1_HOSTNAME}    sg=${SECURITY_GROUP}
 324     OpenStackOperations.Create Vm Instance With Port On Compute Node    @{PORTS}[1]    @{NET_1_VMS}[1]    ${OS_CMP2_HOSTNAME}    sg=${SECURITY_GROUP}
 325     OpenStackOperations.Create Vm Instance With Port On Compute Node    @{PORTS}[2]    @{NET_2_VMS}[0]    ${OS_CMP1_HOSTNAME}    sg=${SECURITY_GROUP}
 326     OpenStackOperations.Create Vm Instance With Port On Compute Node    @{PORTS}[3]    @{NET_2_VMS}[1]    ${OS_CMP2_HOSTNAME}    sg=${SECURITY_GROUP}
 327     @{NET_1_VM_IPS}    ${NET_1_DHCP_IP} =    OpenStackOperations.Get VM IPs    @{NET_1_VMS}
 328     @{NET_2_VM_IPS}    ${NET_2_DHCP_IP} =    OpenStackOperations.Get VM IPs    @{NET_2_VMS}
 329     BuiltIn.Set Suite Variable    @{NET_1_VM_IPS}
 330     BuiltIn.Set Suite Variable    @{NET_2_VM_IPS}
 331     BuiltIn.Should Not Contain    ${NET_1_VM_IPS}    None
 332     BuiltIn.Should Not Contain    ${NET_2_VM_IPS}    None
 333     BuiltIn.Should Not Contain    ${NET_1_DHCP_IP}    None
 334     BuiltIn.Should Not Contain    ${NET_2_DHCP_IP}    None
 335     BuiltIn.Wait Until Keyword Succeeds    30s    10s    Wait For Routes To Propogate    ${NETWORKS}    ${SUBNET_CIDRS}
 336     OpenStackOperations.Show Debugs    @{NET_1_VMS}    @{NET_2_VMS}
 337     OpenStackOperations.Get Suite Debugs
 338
 339 Suite Teardown
 340     [Documentation]    Delete the setup
 341     BuiltIn.Run Keyword And Ignore Error    VpnOperations.VPN Delete L3VPN    vpnid=@{VPN_INSTANCE_IDS}[0]
 342     BuiltIn.Run Keyword And Ignore Error    VpnOperations.VPN Delete L3VPN    vpnid=@{VPN_INSTANCE_IDS}[1]
 343     BuiltIn.Run Keyword And Ignore Error    VpnOperations.VPN Delete L3VPN    vpnid=@{VPN_INSTANCE_IDS}[2]
 344     OpenStackOperations.OpenStack Suite Teardown