Cluster Library consolidation 3
[integration/test.git] / csit / libraries / OpenStackOperations.robot
index fdc0dc1bae9524cdd0beea348319f69382707c71..67281ff7a1208720b67d1de1d14ed4372885ef66 100644 (file)
@@ -5,31 +5,79 @@ Resource          Utils.robot
 Variables         ../variables/Variables.py
 
 *** Keywords ***
+Source Password
+    [Arguments]    ${force}=no    ${source_pwd}=yes
+    [Documentation]    Sourcing the Openstack PAsswords for neutron configurations
+    Run Keyword If    '${source_pwd}' == 'yes' or '${force}' == 'yes'    Write Commands Until Prompt    cd ${DEVSTACK_DEPLOY_PATH}; source openrc admin admin
+
+Get Tenant ID From Security Group
+    [Documentation]    Returns tenant ID by reading it from existing default security-group.
+    ${devstack_conn_id}=       Get ControlNode Connection
+    Switch Connection    ${devstack_conn_id}
+    ${output}=    Write Commands Until Prompt
+    ...    neutron security-group-show default | grep "| tenant_id" | awk '{print $4}'
+    Log    ${output}
+    [Return]    ${output}
+
 Create Network
-    [Arguments]    ${network_name}     ${devstack_path}=/opt/stack/new/devstack
+    [Arguments]    ${network_name}    ${additional_args}=${EMPTY}    ${verbose}=TRUE
     [Documentation]    Create Network with neutron request.
-    ${output}=    Write Commands Until Prompt    cd ${devstack_path} && cat localrc
+    ${devstack_conn_id}=       Get ControlNode Connection
+    Switch Connection    ${devstack_conn_id}
+    ${command}    Set Variable If    "${verbose}" == "TRUE"    neutron -v net-create ${network_name} ${additional_args}
+    ...    neutron net-create ${network_name} ${additional_args} | grep -w id | awk '{print $4}'
+    ${output}=    Write Commands Until Prompt    ${command}    30s
     Log    ${output}
-    ${output}=    Write Commands Until Prompt    source openrc admin admin
+    [Return]    ${output}
+
+List Networks
+    [Documentation]    List networks and return output with neutron client.
+    ${devstack_conn_id}=       Get ControlNode Connection
+    Switch Connection    ${devstack_conn_id}
+    ${output}=    Write Commands Until Prompt    neutron net-list    30s
+    Close Connection
     Log    ${output}
-    ${output}=    Write Commands Until Prompt    neutron -v net-create ${network_name}
+    [Return]    ${output}
+
+List Subnets
+    [Documentation]    List subnets and return output with neutron client.
+    ${devstack_conn_id}=       Get ControlNode Connection
+    Switch Connection    ${devstack_conn_id}
+    ${output}=    Write Commands Until Prompt    neutron subnet-list    30s
+    Close Connection
     Log    ${output}
-    Should Contain    ${output}    Created a new network
+    [Return]    ${output}
 
 Delete Network
     [Arguments]    ${network_name}
     [Documentation]    Delete Network with neutron request.
-    ${output}=    Write Commands Until Prompt    neutron -v net-delete ${network_name}
+    ${devstack_conn_id}=       Get ControlNode Connection
+    Switch Connection    ${devstack_conn_id}
+    ${output}=    Write Commands Until Prompt    neutron -v net-delete ${network_name}     30s
+    Close Connection
     Log    ${output}
     Should Contain    ${output}    Deleted network: ${network_name}
 
 Create SubNet
     [Arguments]    ${network_name}    ${subnet}    ${range_ip}
     [Documentation]    Create SubNet for the Network with neutron request.
-    ${output}=    Write Commands Until Prompt    neutron -v subnet-create ${network_name} ${range_ip} --name ${subnet}
+    ${devstack_conn_id}=       Get ControlNode Connection
+    Switch Connection    ${devstack_conn_id}
+    ${output}=    Write Commands Until Prompt    neutron -v subnet-create ${network_name} ${range_ip} --name ${subnet}    30s
+    Close Connection
     Log    ${output}
     Should Contain    ${output}    Created a new subnet
 
+Create Port
+    [Arguments]    ${network_name}    ${port_name}
+    [Documentation]    Create Port with neutron request.
+    ${devstack_conn_id}=       Get ControlNode Connection
+    Switch Connection    ${devstack_conn_id}
+    ${output}=    Write Commands Until Prompt    neutron -v port-create ${network_name} --name ${port_name}    30s
+    Close Connection
+    Log    ${output}
+    Should Contain    ${output}    Created a new port
+
 Verify Gateway Ips
     [Documentation]    Verifies the Gateway Ips with dump flow.
     ${output}=    Write Commands Until Prompt    sudo ovs-ofctl -O OpenFlow13 dump-flows br-int
@@ -55,7 +103,10 @@ Delete SubNet
     [Arguments]    ${subnet}
     [Documentation]    Delete SubNet for the Network with neutron request.
     Log    ${subnet}
+    ${devstack_conn_id}=       Get ControlNode Connection
+    Switch Connection    ${devstack_conn_id}
     ${output}=    Write Commands Until Prompt    neutron -v subnet-delete ${subnet}
+    Close Connection
     Log    ${output}
     Should Contain    ${output}    Deleted subnet: ${subnet}
 
@@ -66,113 +117,243 @@ Verify No Gateway Ips
     : FOR    ${GatewayIpElement}    IN    @{GATEWAY_IPS}
     \    Should Not Contain    ${output}    ${GatewayIpElement}
 
-Create Vm Instance
-    [Arguments]    ${net_id}    ${network_name}
-    [Documentation]    Create Vm Instance with the net id of the Netowrk.
-    ${VmElement}=    Set Variable If    "${network_name}"=="net1_network"    MyFirstInstance    MySecondInstance
-    ${output}=    Write Commands Until Prompt    nova boot --image cirros-0.3.4-x86_64-uec --flavor m1.tiny --nic net-id=${net_id} ${VmElement}
-    Log    ${output}
-
 Delete Vm Instance
     [Arguments]    ${vm_name}
     [Documentation]    Delete Vm instances using instance names.
-    ${output}=    Write Commands Until Prompt    nova delete ${vm_name}
-    Log    ${output}
+    ${devstack_conn_id}=       Get ControlNode Connection
+    Switch Connection    ${devstack_conn_id}
+    ${output}=    Write Commands Until Prompt    nova force-delete ${vm_name}      40s
+    Close Connection
 
 Get Net Id
-    [Arguments]    ${network_name}
+    [Arguments]    ${network_name}      ${devstack_conn_id}
     [Documentation]    Retrieve the net id for the given network name to create specific vm instance
-    ${output}=    Write Commands Until Prompt    neutron net-list | grep "${network_name}" | get_field 1
+    Switch Connection    ${devstack_conn_id}
+    ${output}=    Write Commands Until Prompt    neutron net-list | grep "${network_name}" | get_field 1       30s
     Log    ${output}
     ${splitted_output}=    Split String    ${output}    ${EMPTY}
     ${net_id}=    Get from List    ${splitted_output}    0
     Log    ${net_id}
     [Return]    ${net_id}
 
+Get Port Id
+    [Arguments]    ${port_name}      ${devstack_conn_id}
+    [Documentation]    Retrieve the port id for the given port name to attach specific vm instance to a particular port
+    Switch Connection    ${devstack_conn_id}
+    ${port_id}=    Write Commands Until Prompt    neutron port-list | grep "${port_name} | awk '{print $2}'       30s
+    Log    ${port_id}
+    [Return]    ${port_id}
+
 Create Vm Instances
-    [Arguments]    ${net_id}    ${vm_instance_names}    ${image}=cirros-0.3.4-x86_64-uec    ${flavor}=m1.tiny
-    [Documentation]    Create Four Vm Instance with the net id of the Netowrk.
+    [Arguments]    ${net_name}    ${vm_instance_names}    ${image}=cirros-0.3.4-x86_64-uec    ${flavor}=m1.nano
+    [Documentation]    Create X Vm Instance with the net id of the Netowrk.
+    ${devstack_conn_id}=       Get ControlNode Connection
+    Switch Connection    ${devstack_conn_id}
+    ${net_id}=    Get Net Id    ${net_name}      ${devstack_conn_id}
     : FOR    ${VmElement}    IN    @{vm_instance_names}
-    \    ${output}=    Write Commands Until Prompt     nova boot --image ${image} --flavor ${flavor} --nic net-id=${net_id} ${VmElement}
+    \    ${output}=    Write Commands Until Prompt    nova boot --image ${image} --flavor ${flavor} --nic net-id=${net_id} ${VmElement}    30s
     \    Log    ${output}
+    \    Wait Until Keyword Succeeds    25s    5s    Verify VM Is ACTIVE    ${VmElement}
+
+Create Vm Instance With Port On Compute Node
+    [Arguments]    ${port_name}    ${vm_instance_name}    ${compute_node}    ${image}=cirros-0.3.4-x86_64-uec    ${flavor}=m1.nano
+    [Documentation]    Create One VM instance using given ${port_name} and for given ${compute_node}
+    ${devstack_conn_id}=       Get ControlNode Connection
+    Switch Connection    ${devstack_conn_id}
+    ${port_id}=    Get Port Id    ${port_name}      ${devstack_conn_id}
+    ${hostname_compute_node}=    Run Command On Remote System    ${compute_node}    hostname
+    ${output}=    Write Commands Until Prompt    nova boot --image ${image} --flavor ${flavor} --nic port-id=${port_id} ${vm_instance_name} --availability-zone nova:${hostname_compute_node}   30s
+    Log    ${output}
+    Wait Until Keyword Succeeds    25s    5s    Verify VM Is ACTIVE    ${vm_instance_name}
+
+Verify VM Is ACTIVE
+    [Arguments]    ${vm_name}
+    [Documentation]    Run these commands to check whether the created vm instance is active or not.
+    ${output}=    Write Commands Until Prompt    nova show ${vm_name} | grep OS-EXT-STS:vm_state      30s
+    Log    ${output}
+    Should Contain    ${output}    active
 
 View Vm Console
     [Arguments]    ${vm_instance_names}
     [Documentation]    View Console log of the created vm instances using nova show.
     : FOR    ${VmElement}    IN    @{vm_instance_names}
-    \    ${output}=   Write Commands Until Prompt     nova show ${VmElement}
+    \    ${output}=    Write Commands Until Prompt    nova show ${VmElement}
     \    Log    ${output}
-    \    ${output}=   Write Commands Until Prompt     nova console-log ${VmElement}
+    \    ${output}=    Write Commands Until Prompt    nova console-log ${VmElement}
     \    Log    ${output}
 
 Ping Vm From DHCP Namespace
-    [Arguments]    ${net_id}    ${vm_ip}
+    [Arguments]    ${net_name}    ${vm_ip}
     [Documentation]    Reach all Vm Instance with the net id of the Netowrk.
     Log    ${vm_ip}
-    ${output}=    Write Commands Until Prompt     sudo ip netns exec qdhcp-${net_id} ping -c 3 ${vm_ip}    20s
+    ${devstack_conn_id}=       Get ControlNode Connection
+    Switch Connection    ${devstack_conn_id}
+    ${net_id}=    Get Net Id    ${net_name}     ${devstack_conn_id}
+    Log    ${net_id}
+    ${output}=    Write Commands Until Prompt    sudo ip netns exec qdhcp-${net_id} ping -c 3 ${vm_ip}    20s
     Log    ${output}
-    [Return]    ${output}
+    Close Connection
+    Should Contain    ${output}    64 bytes
+
+Ping From DHCP Should Not Succeed
+    [Arguments]    ${net_name}    ${vm_ip}
+    [Documentation]    Should Not Reach Vm Instance with the net id of the Netowrk.
+    Log    ${vm_ip}
+    ${devstack_conn_id}=       Get ControlNode Connection
+    Switch Connection    ${devstack_conn_id}
+    ${net_id}=    Get Net Id    ${net_name}     ${devstack_conn_id}
+    Log    ${net_id}
+    ${output}=    Write Commands Until Prompt    sudo ip netns exec qdhcp-${net_id} ping -c 3 ${vm_ip}    20s
+    Close Connection
+    Log    ${output}
+    Should Not Contain    ${output}    64 bytes
 
 Ping From Instance
     [Arguments]    ${dest_vm}
     [Documentation]    Ping to the expected destination ip.
-    ${output}=   Write Commands Until Expected Prompt    ping -c 3 ${dest_vm}    $
+    ${output}=    Write Commands Until Expected Prompt    ping -c 3 ${dest_vm}    ${OS_SYSTEM_PROMPT}
     Log    ${output}
     [Return]    ${output}
 
 Curl Metadata Server
     [Documentation]    Ping to the expected destination ip.
-    ${output}=   Write Commands Until Expected Prompt    curl -i http://169.254.169.254    $
+    ${output}=    Write Commands Until Expected Prompt    curl -i http://169.254.169.254    ${OS_SYSTEM_PROMPT}
     Write Commands Until Prompt    exit
-    Should Contain     ${output}     200
+    Should Contain    ${output}    200
 
 Close Vm Instance
     [Documentation]    Exit the vm instance.
-    ${output}=   Write Commands Until Prompt    exit
+    ${output}=    Write Commands Until Prompt    exit
     Log    ${output}
 
-Ssh Vm Instance
-    [Arguments]    ${net_id}    ${vm_ip}    ${user}=cirros    ${password}=cubswin:)     ${key_file}=test.pem
+Check If Console Is VmInstance
+    [Arguments]    ${console}=cirros
+    [Documentation]    Check if the session has been able to login to the VM instance
+    ${output}=    Write Commands Until Expected Prompt    id    ${OS_SYSTEM_PROMPT}
+    Should Contain    ${output}    ${console}
+
+Exit From Vm Console
+    [Documentation]    Check if the session has been able to login to the VM instance and exit the instance
+    ${rcode}=    Run Keyword And Return Status    Check If Console Is VmInstance    cirros
+    Run Keyword If    ${rcode}    Write Commands Until Prompt    exit
+    Get OvsDebugInfo
+
+Check Ping
+    [Arguments]    ${ip_address}
+    [Documentation]    Run Ping command on the IP available as argument
+    ${output}=    Write Commands Until Expected Prompt    ping -c 3 ${ip_address}    ${OS_SYSTEM_PROMPT}
+    Should Contain    ${output}    64 bytes
+
+Check Metadata Access
+    [Documentation]    Try curl on the Metadataurl and check if it is okay
+    ${output}=    Write Commands Until Expected Prompt    curl -i http://169.254.169.254    ${OS_SYSTEM_PROMPT}
+    Should Contain    ${output}    200
+
+Test Operations From Vm Instance
+    [Arguments]    ${net_name}    ${src_ip}    ${list_of_local_dst_ips}    ${l2_or_l3}=l2    ${list_of_external_dst_ips}=${NONE}    ${user}=cirros
+    ...    ${password}=cubswin:)
     [Documentation]    Login to the vm instance using ssh in the network.
-    ${output}=   Write Commands Until Expected Prompt    sudo ip netns exec qdhcp-${net_id} ssh -i ${key_file} ${user}@${vm_ip}    (yes/no)?
-    Log    ${output}
-    ${output}=   Write Commands Until Expected Prompt    yes    d:
-    Log    ${output}
-    ${output}=   Write Commands Until Expected Prompt    ${password}    $
+    ${devstack_conn_id}=       Get ControlNode Connection
+    Switch Connection    ${devstack_conn_id}
+    ${net_id}=    Get Net Id    ${net_name}      ${devstack_conn_id}
+    ${output}=    Write Commands Until Expected Prompt    sudo ip netns exec qdhcp-${net_id} ssh ${user}@${src_ip} -o ConnectTimeout=10 -o StrictHostKeyChecking=no    d:
     Log    ${output}
-    ${output}=   Write Commands Until Expected Prompt    ifconfig    $
-    Log    ${output}
-    ${output}=   Write Commands Until Expected Prompt    route    $
+    ${output}=    Write Commands Until Expected Prompt    ${password}    ${OS_SYSTEM_PROMPT}
     Log    ${output}
+    ${rcode}=    Run Keyword And Return Status    Check If Console Is VmInstance
+    Run Keyword If    ${rcode}    Write Commands Until Expected Prompt    ifconfig    ${OS_SYSTEM_PROMPT}
+    Run Keyword If    ${rcode}    Write Commands Until Expected Prompt    route    ${OS_SYSTEM_PROMPT}
+    ${dest_vm}=    Get From List    ${list_of_local_dst_ips}    0
+    Log    ${dest_vm}
+    Run Keyword If    ${rcode}    Check Ping    ${dest_vm}
+    ${dest_dhcp}=    Get From List    ${list_of_local_dst_ips}    1
+    Log    ${dest_dhcp}
+    Run Keyword If    ${rcode}    Check Ping    ${dest_dhcp}
+    ${dest_vm}=    Get From List    ${list_of_local_dst_ips}    2
+    Log    ${dest_vm}
+    Run Keyword If    ${rcode}    Check Ping    ${dest_vm}
+    Run Keyword If    ${rcode}    Check Metadata Access
+    Run Keyword If    '${l2_or_l3}' == 'l3'    Ping Other Instances    ${list_of_external_dst_ips}
+    [Teardown]    Exit From Vm Console
+
+Ping Other Instances
+    [Arguments]    ${list_of_external_dst_ips}
+    [Documentation]    Check reachability with other network's instances.
+    ${rcode}=    Run Keyword And Return Status    Check If Console Is VmInstance
+    ${dest_vm}=    Get From List    ${list_of_external_dst_ips}    0
+    Log    ${dest_vm}
+    Run Keyword If    ${rcode}    Check Ping    ${dest_vm}
+    ${dest_dhcp}=    Get From List    ${list_of_external_dst_ips}    1
+    Log    ${dest_dhcp}
+    Run Keyword If    ${rcode}    Check Ping    ${dest_dhcp}
+    ${dest_vm}=    Get From List    ${list_of_external_dst_ips}    2
+    Log    ${dest_vm}
+    Run Keyword If    ${rcode}    Check Ping    ${dest_vm}
 
 Create Router
     [Arguments]    ${router_name}
     [Documentation]    Create Router and Add Interface to the subnets.
-    ${output}=    Write Commands Until Prompt    neutron -v router-create ${router_name}
-    Should Contain     ${output}     Created a new router
+    ${devstack_conn_id}=       Get ControlNode Connection
+    Switch Connection    ${devstack_conn_id}
+    ${output}=    Write Commands Until Prompt    neutron -v router-create ${router_name}    30s
+    Close Connection
+    Should Contain    ${output}    Created a new router
 
 Add Router Interface
-    [Arguments]    ${router_name}     ${interface_name}
+    [Arguments]    ${router_name}    ${interface_name}
+    ${devstack_conn_id}=       Get ControlNode Connection
+    Switch Connection    ${devstack_conn_id}
     ${output}=    Write Commands Until Prompt    neutron -v router-interface-add ${router_name} ${interface_name}
-    Should Contain     ${output}     Added interface
+    Close Connection
+    Should Contain    ${output}    Added interface
 
 Remove Interface
-    [Arguments]    ${router_name}     ${interface_name}
+    [Arguments]    ${router_name}    ${interface_name}
     [Documentation]    Remove Interface to the subnets.
+    ${devstack_conn_id}=       Get ControlNode Connection
+    Switch Connection    ${devstack_conn_id}
     ${output}=    Write Commands Until Prompt    neutron -v router-interface-delete ${router_name} ${interface_name}
-    Should Contain     ${output}     Removed interface from router
+    Close Connection
+    Should Contain    ${output}    Removed interface from router
 
 Delete Router
     [Arguments]    ${router_name}
     [Documentation]    Delete Router and Interface to the subnets.
-    ${output}=    Write Commands Until Prompt    neutron -v router-delete ${router_name}
-    Should Contain     ${output}     Deleted router:
+    ${devstack_conn_id}=       Get ControlNode Connection
+    Switch Connection    ${devstack_conn_id}
+    ${output}=    Write Commands Until Prompt    neutron -v router-delete ${router_name}       60s
+    Close Connection
+    Should Contain    ${output}    Deleted router:
+
+Get DumpFlows And Ovsconfig
+    [Arguments]    ${openstack_node_ip}
+    [Documentation]    Get the OvsConfig and Flow entries from OVS from the Openstack Node
+    Log    ${openstack_node_ip}
+    SSHLibrary.Open Connection    ${openstack_node_ip}    prompt=${DEFAULT_LINUX_PROMPT}
+    Utils.Flexible SSH Login    ${OS_USER}    ${DEVSTACK_SYSTEM_PASSWORD}
+    SSHLibrary.Set Client Configuration    timeout=${default_devstack_prompt_timeout}
+    Write Commands Until Expected Prompt    sudo ovs-vsctl show    ]>
+    Write Commands Until Expected Prompt    sudo ovs-ofctl dump-flows br-int -OOpenFlow13    ]>
+
+Get ControlNode Connection
+    ${control_conn_id}=    SSHLibrary.Open Connection    ${OS_CONTROL_NODE_IP}    prompt=${DEFAULT_LINUX_PROMPT_STRICT}
+    Utils.Flexible SSH Login    ${OS_USER}    ${DEVSTACK_SYSTEM_PASSWORD}
+    SSHLibrary.Set Client Configuration    timeout=30s
+    Source Password      force=yes
+    [Return]    ${control_conn_id}
+
+Get OvsDebugInfo
+    [Documentation]    Get the OvsConfig and Flow entries from all Openstack nodes
+    Run Keyword If    0 < ${NUM_OS_SYSTEM}    Get DumpFlows And Ovsconfig    ${OS_CONTROL_NODE_IP}
+    Run Keyword If    1 < ${NUM_OS_SYSTEM}    Get DumpFlows And Ovsconfig    ${OS_COMPUTE_1_IP}
+    Run Keyword If    2 < ${NUM_OS_SYSTEM}    Get DumpFlows And Ovsconfig    ${OS_COMPUTE_2_IP}
 
 Show Debugs
     [Arguments]    ${vm_indices}
-    [Documentation]   Run these commands for debugging, it can list state of VM instances and ip information in control node
-    ${output}=   Write Commands Until Prompt     sudo ip netns list
-    Log     ${output}
+    [Documentation]    Run these commands for debugging, it can list state of VM instances and ip information in control node
+    ${output}=    Write Commands Until Prompt    sudo ip netns list
+    Log    ${output}
     : FOR    ${index}    IN    @{vm_indices}
-    \     ${output}=   Write Commands Until Prompt     nova show ${index}
-    \     Log    ${output}
+    \    ${output}=    Write Commands Until Prompt    nova show ${index}     30s
+    \    Log    ${output}
+    Close Connection