☰

Ошибки iperf3 и повторные передачи на ESXi

tag-icon • tag-icon networking vmware-esxi freebsd truenas iperf
Ошибки iperf3 и повторные передачи на ESXi

При запуске iperf3 для проверки соединения 100G между блоком VMware ESXi и блоком TrueNAS Core я вижу следующее на блоке ESXi:

  1. Сообщение «iperf3: getsockopt — Функция не реализована» на каждом интервале
  2. Большое количество повторных передач зафиксировано в первом и последнем интервалах, но не в сводной статистике.

Можно ли игнорировать оба этих фактора? Или они указывают на реальные проблемы?

Вот подробности...

Настройка сервера:

Supermicro H12SSL-NT, EPYC 7262, 128GB RAM
TrueNAS 13.0 U3
Mellanox ConnectX-5 100G
iperf3 v3.10.1

Настройка клиента:

Supermicro X9SRE-F, E5-1650 v2, 16GB RAM
ESXi 6.7.0 P08
Mellanox ConnectX-5 100G
iperf3 v3.1.6

Команда сервера:

iperf3 -s -B 192.168.25.5 -p 5101

Клиентская команда и вывод:

[root@esxi:/usr/lib/vmware/vsan/bin] ./iperf3.copy -B 192.168.25.6 -c 192.168.25.5 -i 1 -p 5101 -f g -t 10
Connecting to host 192.168.25.5, port 5101
[  4] local 192.168.25.6 port 27617 connected to 192.168.25.5 port 5101
iperf3: getsockopt - Function not implemented
[ ID] Interval           Transfer     Bandwidth       Retr  Cwnd
[  4]   0.00-1.00   sec  3.08 GBytes  26.4 Gbits/sec  8638800   0.00 Bytes       
iperf3: getsockopt - Function not implemented
[  4]   1.00-2.00   sec  3.03 GBytes  26.0 Gbits/sec    0   0.00 Bytes       
iperf3: getsockopt - Function not implemented
[  4]   2.00-3.00   sec  3.11 GBytes  26.7 Gbits/sec    0   0.00 Bytes       
iperf3: getsockopt - Function not implemented
[  4]   3.00-4.00   sec  2.91 GBytes  25.0 Gbits/sec    0   0.00 Bytes       
iperf3: getsockopt - Function not implemented
[  4]   4.00-5.00   sec  3.01 GBytes  25.9 Gbits/sec    0   0.00 Bytes       
iperf3: getsockopt - Function not implemented
[  4]   5.00-6.00   sec  3.04 GBytes  26.1 Gbits/sec    0   0.00 Bytes       
iperf3: getsockopt - Function not implemented
[  4]   6.00-7.00   sec   883 MBytes  7.41 Gbits/sec    0   0.00 Bytes       
iperf3: getsockopt - Function not implemented
[  4]   7.00-8.00   sec  2.99 GBytes  25.7 Gbits/sec    0   0.00 Bytes       
iperf3: getsockopt - Function not implemented
[  4]   8.00-9.00   sec  1.27 GBytes  10.9 Gbits/sec    0   0.00 Bytes       
iperf3: getsockopt - Function not implemented
[  4]   9.00-10.00  sec  2.75 GBytes  23.7 Gbits/sec  4286328496   0.00 Bytes       
- - - - - - - - - - - - - - - - - - - - - - - - -
[ ID] Interval           Transfer     Bandwidth       Retr
[  4]   0.00-10.00  sec  26.0 GBytes  22.4 Gbits/sec    0             sender
[  4]   0.00-10.00  sec  26.0 GBytes  22.4 Gbits/sec                  receiver

iperf Done.

решение1

Это сообщение об ошибке появляется из-за того, что статистика TCP не соответствует ожидаемой структуре в «ESXi's Linux».

Проверка функций в iperf — это просто «это Linux» (https://github.com/esnet/iperf/blob/a2ce47a97acfad3acee91a6cb4da28f9f50c19df/src/tcp_info.c#L63) и ожидает, что данные будут найдены с помощью вызова getsockopt для TCP_INFO в определенной структуре.

Общая статистика тестового прогона остается актуальной, поскольку она не зависит от функции сравнения интервалов.

Например, существуют различия для FreeBSD, в которой возвращается другая структура данных по сравнению с ядром Linux. См.https://github.com/esnet/iperf/pull/244для получения подробной информации.

save_tcpinfo вызывается для сохранения информации в каждом интервальном периоде, но, похоже, версия iperf и Linux ESXi не очень хорошо работают вместе для статистики интервалов.

Пример того, как Dell также столкнулась с этой проблемой в основном производстве, можно увидеть здесь: https://www.dell.com/support/kbdoc/en-uk/000187640/dell-emc-vxrail-vsan-hosts-network-performance-test-does-not-exceed-10-000mb-s-bandwidth-on-25gb-or-higher-network-infrastructure.

Вышеуказанная статья Dell также может дать вам некоторые указания о том, как манипулировать iperf, чтобы получить ожидаемую вами пропускную способность...

Связанный контент