Запуск NET-тестов на VM

1. Подготовьте VM со следующими параметрами:

CPU - 4
Память - 8GB
HDD - 100GB
Если есть дебажный макрос, используйте версию DEBUG

Процесс подготовки описан в этой инструкции.

Note : Если согласно инструкции Вы уже создали раньше на этой машине dilos_BASE, и не выходил ещё новый стабильный билд, то выполните команду:

beadm activate dilos_BASE

В противном случае если у Вас есть уже dilos_ISO_orig, то выполните команду:

beadm activate dilos_ISO_orig

Перезагрузитесь и начните выполнять инструкцию с пункта Шаг 6. Подготовка машины для запуска тестов:

reboot

Если же у Вас нет ни одного их этих двух BE, то инструкцию следует выполнять с самого начала.

Note : Если Вы забыли создать пользователя ztest согласно инструкции, создайте его сейчас:

sudo useradd -m -d /var/ztest -g staff -s /bin/bash ztest

sudo passwd ztest

echo "ztest ALL=(ALL:ALL) NOPASSWD: ALL" >> /etc/sudoers.d/ztest

2. Установите пакеты, необходимые для NET-тестов:

Note : Если Вы уже поставили их на предыдущем шаге в процессе подготовки машины к запуску, то можно перейти сразу к следующему шагу.

sudo apt update
sudo apt install system-test-nettest testrunner python3

3. Залогиньтесь под эккаунтом ztest и создайте тестовые зоны:

Тестовые зоны должны быть созданы в соответствии с конфигурацией, которая содержится в файле /opt/net-tests/config/ip_forwarding.config, а имена зон должны быть cz, sz и rz.

Важно! Зоны нужно создать в директории /zones так же, как Вы это сделали для зоны dhcp.

Для этого Вы можете просто запустить установочный скрипт или выполнить описанные ниже шаги.

Сначала сконфигурируйте и установите шаблонные зоны cz-orig, sz-orig и rz-orig, из которых потом будут создаваться тестовые зоны:

ztest@dilos:~# cat > cz-orig.cfg <<EOT
create
set zonepath=/zones/cz-orig
set autoboot=false
set ip-type=exclusive
add net
set physical=int1
set global-nic="vsw0"
add property (name="ip",value="dhcp")
add property (name="primary",value="true")
end
commit
exit
EOT
ztest@dilos:~# sudo zonecfg -z cz-orig -f cz-orig.cfg
sudo zoneadm -z cz-orig install 2>&1 | /usr/bin/tee -a /var/tmp/cz-orig-bts.log

ztest@dilos:~# cat > sz-orig.cfg <<EOT
create
set zonepath=/zones/sz-orig
set autoboot=false
set ip-type=exclusive
add net
set physical=int2
set global-nic="vsw0"
add property (name="ip",value="dhcp")
add property (name="primary",value="true")
end
commit
exit
EOT
ztest@dilos:~# sudo zonecfg -z sz-orig -f sz-orig.cfg && sudo zoneadm -z sz-orig install

ztest@dilos:~# cat > rz-orig.cfg <<EOT
create
set zonepath=/zones/rz-orig
set autoboot=false
set ip-type=exclusive
add net
set physical=int3
set global-nic="vsw0"
add property (name="ip",value="dhcp")
add property (name="primary",value="true")
end
commit
exit
EOT
ztest@dilos:~# sudo zonecfg -z rz-orig -f rz-orig.cfg && sudo zoneadm -z rz-orig install

Можно проверить, что установка зоны прошла успешно при помощи команды:

grep -e 'WARNING:' -e 'warning:' -e 'W:' -e 'error:' -e 'ERROR:' /var/tmp/cz-orig-bts.log | sort -u

Теперь сконфигурируйте тестовые зоны. Ниже приведена конфигурация для зоны cz:

ztest@dilos:~# cat > cz.cfg <<EOT
create
set zonepath=/zones/cz
set autoboot=false
set ip-type=exclusive
add net
set physical=int1
set global-nic="vsw0"
add property (name="ip",value="dhcp")
add property (name="primary",value="true")
end
commit
exit
EOT
ztest@dilos:~# sudo zonecfg -z cz -f cz.cfg

Для остальных зон настройки такие же. Для sz:

ztest@dilos:~# cat > sz.cfg <<EOT
create
set zonepath=/zones/sz
set autoboot=false
set ip-type=exclusive
add net
set physical=int2
set global-nic="vsw0"
add property (name="ip",value="dhcp")
add property (name="primary",value="true")
end
commit
exit
EOT
ztest@dilos:~# sudo zonecfg -z sz -f sz.cfg

и для rz:

ztest@dilos:~# cat > rz.cfg <<EOT
create
set zonepath=/zones/rz
set autoboot=false
set ip-type=exclusive
add net
set physical=int3
set global-nic="vsw0"
add property (name="ip",value="dhcp")
add property (name="primary",value="true")
end
commit
exit
EOT
ztest@dilos:~# sudo zonecfg -z rz -f rz.cfg

Установите в каждую шаблонную зону пакет socat:

Этот пакет можно установить из глобальной зоны. Для этого загрузите пакет:

apt download socat

Note: Имя загруженного пакета после загрузки можно узнать командой

ls -l | grep socat | sed 's/^.* //'

Установите его в каждую зону, после чего перезагрузитесь:

sudo apt -y -o Dir=/zones/cz-orig/root update
sudo apt -y -o Dir=/zones/cz-orig/root upgrade
sudo dpkg -i --root=/zones/cz-orig/root socat_*.deb

sudo apt -y -o Dir=/zones/sz-orig/root update
sudo apt -y -o Dir=/zones/sz-orig/root upgrade
sudo dpkg -i --root=/zones/sz-orig/root socat_*.deb

sudo apt -y -o Dir=/zones/rz-orig/root update
sudo apt -y -o Dir=/zones/rz-orig/root upgrade
sudo dpkg -i --root=/zones/rz-orig/root socat_*.deb

sudo reboot

4. Залогиньтесь под эккаунтом ztest и запустите тесты:

После перезагрузки проверьте, что сервер и зона dhcp запустились, запустите тестовые зоны и тесты:

sudo zoneadm -z cz halt
sudo zoneadm -z cz uninstall -F
sudo zfs destroy -fr rpool/zones/cz
sudo zoneadm -z cz clone \cz-orig && sudo zoneadm -z \cz boot
sudo zoneadm -z sz halt
sudo zoneadm -z sz uninstall -F
sudo zfs destroy -fr rpool/zones/sz
sudo zoneadm -z sz clone \sz-orig && sudo zoneadm -z \sz boot
sudo zoneadm -z rz halt
sudo zoneadm -z rz uninstall -F
sudo zfs destroy -fr rpool/zones/rz
sudo zoneadm -z rz clone \rz-orig && sudo zoneadm -z \rz boot

Дождитесь получения динамических адресов в каждой тестовой зоне и запустите тесты:

sudo /opt/net-tests/bin/nettest

Определить, что динамический адрес получен,

можно, например, для зоны cz с помощью команды:

sudo zlogin -l root cz ifconfig

В ответ Вы получите что-то типа:

lo0: flags=2001000849<UP,LOOPBACK,RUNNING,MULTICAST,IPv4,VIRTUAL> mtu 8232 index 1
        inet 127.0.0.1 netmask ff000000 
int0: flags=1000843<UP,BROADCAST,RUNNING,MULTICAST,IPv4> mtu 9000 index 2
        inet 192.168.0.100 netmask ffffff00 broadcast 192.168.0.255
        ether 2:8:20:f1:af:75 
lo0: flags=2002000849<UP,LOOPBACK,RUNNING,MULTICAST,IPv6,VIRTUAL> mtu 8252 index 1
        inet6 ::1/128

Сначала может возвращаться пустой вывод, потом с адресом inet 0.0.0.0 для интерфейса, в данном случае, int0, а при получении адреса Вы увидите реальный полученный адрес - здесь это inet 192.168.0.100.

Аналогично можно это проверить и для зон sz и rz.

Подождите несколько минут, пока тесты закончатся, и Вы найдёте логи здесь:

/var/tmp/test_results/<ISO TIME>

Note : Тесты можно запустить при помощи тестового скрипта. Его можно создать либо в текстовом редакторе, либо при помощи команды:

ztest@zone:~# cat > test-script.sh <<EOT

#!/bin/bash

boot_zone() {

echo "Shutting down zone \$1..." 2>&1 | /usr/bin/tee -a \${3}

sudo zoneadm -z \$1 halt 2>&1 | /usr/bin/tee -a \${3}

echo "Cleaning zone \$1 dataset..." 2>&1 | /usr/bin/tee -a \${3}

sudo zoneadm -z \$1 uninstall -F 2>&1 | /usr/bin/tee -a \${3}

sudo zfs destroy -fr rpool/zones/\$1 2>&1 | /usr/bin/tee -a \${3}

echo "Booting zone \$1..." 2>&1 | /usr/bin/tee -a \${3}

sudo zoneadm -z \$1 clone \$1-orig 2>&1 | /usr/bin/tee -a \${3}

sudo zoneadm -z \$1 boot 2>&1 | /usr/bin/tee -a \${3}

res=\$(sudo zoneadm list | grep \$1)

if [[ "\$res" == "" ]]; then

echo "Zone \$1 is not run. Test is aborted." 2>&1 | /usr/bin/tee -a \${3}

exit 1

fi

ip=""

while [ "\${ip}" == "" ] || [ "\${ip}" == "0.0.0.0" ]

do

ip=\$(sudo zlogin -l root \$1 ifconfig | grep -A 1 "\${2}" | sed "/\${2}/d; s/^[ \\t]*inet[ \\t]*//; s/[ \\t]*netmask.*\$//")

done

echo "Zone:\$1 ------> \$2:\$ip" 2>&1 | /usr/bin/tee -a \${3}

}

echo Starting tests...

ipa=\$(sudo ifconfig | grep -A 1 vmxnet3s0 | sed '1d; s/^[ \\t]*inet[ \\t]*//; s/[ \\t]*netmask.*\$//')

if [ -n "\$1" ]; then

CLOG="/var/tmp/net-stability.\$(date +%F-%T).txt"

echo "=== Stability net tests \$(date +%F-%T) ===" > \${CLOG}

for (( i=1; i<=\$1; i++ ))

do

echo "------------------ Pass \${i} ---------------------" 2>&1 | /usr/bin/tee -a \${CLOG}

uname -a > \${LOG}

echo "IP Address : \${ipa}" >> \${LOG}

echo "" >> \${LOG}

echo ----------------------------- Booting zones... ---------------------- 2>&1 | /usr/bin/tee -a \${LOG}

boot_zone cz int1 \${LOG}

boot_zone sz int2 \${LOG}

boot_zone rz int3 \${LOG}

echo "" >> \${LOG}

echo ----------------------------- IP Address ---------------------- 2>&1 | /usr/bin/tee -a \${LOG}

sudo ifconfig | grep -A 1 vmxnet3s0 2>&1 | /usr/bin/tee -a \${LOG}

echo ------------------------------- Zones ------------------------- 2>&1 | /usr/bin/tee -a \${LOG}

sudo zoneadm list -v 2>&1 | /usr/bin/tee -a \${LOG}

echo ---------------------------- DHCP Server ---------------------- 2>&1 | /usr/bin/tee -a \${LOG}

sudo svcs -z dhcp isc-dhcp-server 2>&1 | /usr/bin/tee -a \${LOG}

echo ------------------------------- Tests ------------------------- 2>&1 | /usr/bin/tee -a \${LOG}

sudo /opt/net-tests/bin/nettest /var/tmp 2>&1 | /usr/bin/tee -a /var/tmp/a.tmp

percent="\$(grep 'Percent passed:' /var/tmp/a.tmp | sed 's/Percent passed:[ \\t]*//; s/[ \\t]*\$//')"

folder="\$(grep 'Log directory:' /var/tmp/a.tmp | sed 's/Log directory:[ \\t]*//; s/[ \\t]*\$//')"

rt="\$(grep 'Running Time:' /var/tmp/a.tmp | sed 's/Running Time:[ \\t]*//; s/[ \\t]*\$//')"

echo " Percent passed: \${percent}" >> \${CLOG}

echo " Running Time: \${rt}" >> \${CLOG}

sed -n '/Results Summary/,/Log directory:/p' /var/tmp/a.tmp >> \${LOG}

echo "" >> \${LOG}

cat /var/tmp/a.tmp >> \${LOG}

rm -f /var/tmp/a.tmp

if [ "\${percent}" == "100.0%" ]; then

sudo rm -f \${LOG}

sudo rm -r -f \${folder}

else

echo " PASS \${i} IS FAILED! (See \${LOG})" >> \${CLOG}

echo "Fault on \${i} pass! Just \${percent} are successfull. You can find logs in \${folder}." 2>&1 | /usr/bin/tee -a \${LOG}

exit 1

fi

done

else

LOG="/var/tmp/nettest.\$(date +%F-%T).txt"

uname -a > \${LOG}

echo "IP Address : \${ipa}" >> \${LOG}

echo "" >> \${LOG}

echo ----------------------------- Booting zones... ---------------------- 2>&1 | /usr/bin/tee -a \${LOG}

boot_zone cz int1 \${LOG}

boot_zone sz int2 \${LOG}

boot_zone rz int3 \${LOG}

echo "" >> \${LOG}

echo ----------------------------- IP Address ---------------------- 2>&1 | /usr/bin/tee -a \${LOG}

sudo ifconfig | grep -A 1 vmxnet3s0 2>&1 | /usr/bin/tee -a \${LOG}

echo ------------------------------- Zones ------------------------- 2>&1 | /usr/bin/tee -a \${LOG}

sudo zoneadm list -v 2>&1 | /usr/bin/tee -a \${LOG}

echo ---------------------------- DHCP Server ---------------------- 2>&1 | /usr/bin/tee -a \${LOG}

sudo svcs -z dhcp isc-dhcp-server 2>&1 | /usr/bin/tee -a \${LOG}

echo ------------------------------- Tests ------------------------- 2>&1 | /usr/bin/tee -a \${LOG}

sudo /opt/net-tests/bin/nettest /var/tmp 2>&1 | /usr/bin/tee -a /var/tmp/a.tmp

sed -n '/Results Summary/,/Log directory:/p' /var/tmp/a.tmp >> \${LOG}

fail=\$(sed -n '/^FAIL[ \\t]*/p' /var/tmp/a.tmp | sed 's/^FAIL[ \\t]*//; s/[ \\t]*\$//')

pass=\$(sed -n '/^PASS[ \\t]*/p' /var/tmp/a.tmp | sed 's/^PASS[ \\t]*//; s/[ \\t]*\$//')

total=0

if [ "\${pass}" != "" ]; then

total=\$((\${total} + \${pass}))

fi

if [ "\${fail}" != "" ]; then

total=\$((\${total} + \${fail}))

fi

echo "TOTAL TESTS: \${total}" >> \${LOG}

echo "" >> \${LOG}

cat /var/tmp/a.tmp >> \${LOG}

rm -f /var/tmp/a.tmp

fi

EOT

ztest@zone:~# sed -i '/./!d' test-script.sh && chmod 777 test-script.sh

Тестовый скрипт можно запустить в одиночном режиме, т.е. когда все тесты выполняются один раз (./test-script.sh без параметров). Тогда после запуска этого скрипта в файле /var/tmp/nettest.<ISO TIME>.txt Вы найдёте лог в формате, в котором он публикуется в Test Results.

Второй вариант запуска - для проверки стабильности работы net. В этом случае нужно задать количество повторений (например, для запуска 1000 проходов - ./test-script.sh 1000). Теперь после запуска скрипта общий лог по всем проходам будет находиться в файле /var/tmp/net-stability.<ISO TIME>.txt, а в папке /var/tmp Вы найдёте логи по каждому проходу в виде net-test.<N>.txt, где <N> - номер прохода.

См. beadm