Мы видим пакеты тайм-аута при запуске команды traceroute между двумя системами Linux в частной сети. Однако мы не видим таких симптомов при использовании TCP или ICMP через traceroute. Это частная сеть с прямым кабелем подключения, поэтому между ними нет коммутатора или маршрутизатора.
Каждый раз, если мы запускали менее двух команд в течение 1 мс, мы могли ясно видеть таймаут. Однако TCP/ICMP не имеет проблем.
Команды:
[root@sch024 opt]# traceroute -s 192.168.173.1 -r -F 192.168.173.2 1472
traceroute to 192.168.173.2 (192.168.173.2), 30 hops max, 1472 byte packets
1 192.168.173.2 (192.168.173.2) 0.251 ms 0.228 ms 0.211 ms
[root@sch024 opt]# traceroute -s 192.168.173.1 -r -F 192.168.173.2 1472
traceroute to 192.168.173.2 (192.168.173.2), 30 hops max, 1472 byte packets
1 * * *
2 * * *
3 * * *
4 * * *
5 * * *
6 * 192.168.173.2 (192.168.173.2) 0.219 ms 0.203 ms
Вывод TCPdump с отправляющей стороны: (задержка 5 с, когда возникла проблема)
11:31:25.921047 IP 192.168.173.1.46286 > 192.168.173.2.33437: UDP, length 1472
11:31:25.921072 IP 192.168.173.1.23033 > 192.168.173.2.33438: UDP, length 1472
11:31:25.921093 IP 192.168.173.1.34026 > 192.168.173.2.33439: UDP, length 1472
11:31:25.921115 IP 192.168.173.1.19438 > 192.168.173.2.33440: UDP, length 1472
11:31:25.921140 IP 192.168.173.1.13794 > 192.168.173.2.33441: UDP, length 1472
11:31:25.921162 IP 192.168.173.1.21963 > 192.168.173.2.33442: UDP, length 1472
11:31:25.921186 IP 192.168.173.1.63873 > 192.168.173.2.33443: UDP, length 1472
11:31:25.921208 IP 192.168.173.1.51599 > 192.168.173.2.33444: UDP, length 1472
11:31:25.921230 IP 192.168.173.1.48325 > 192.168.173.2.33445: UDP, length 1472
11:31:25.921253 IP 192.168.173.1.11303 > 192.168.173.2.33446: UDP, length 1472
11:31:25.921275 IP 192.168.173.1.18195 > 192.168.173.2.33447: UDP, length 1472
11:31:25.921298 IP 192.168.173.1.56580 > 192.168.173.2.33448: UDP, length 1472
11:31:25.921323 IP 192.168.173.1.9626 > 192.168.173.2.33449: UDP, length 1472
11:31:30.922509 IP 192.168.173.1.19061 > 192.168.173.2.33450: UDP, length 1472
11:31:30.922535 IP 192.168.173.1.29498 > 192.168.173.2.33451: UDP, length 1472
11:31:30.922555 IP 192.168.173.1.39393 > 192.168.173.2.33452: UDP, length 1472
11:31:30.922577 IP 192.168.173.1.24223 > 192.168.173.2.33453: UDP, length 1472
11:31:30.922596 IP 192.168.173.1.29305 > 192.168.173.2.33454: UDP, length 1472
11:31:30.922616 IP 192.168.173.1.45487 > 192.168.173.2.33455: UDP, length 1472
11:31:30.922635 IP 192.168.173.1.25939 > 192.168.173.2.33456: UDP, length 1472
11:31:30.922656 IP 192.168.173.1.50773 > 192.168.173.2.33457: UDP, length 1472
Аналогичный вывод tcpdump с принимающей стороны:
11:31:25.923657 IP 192.168.173.1.19438 > 192.168.173.2.33440: UDP, length 1472
11:31:25.923680 IP 192.168.173.1.13794 > 192.168.173.2.33441: UDP, length 1472
11:31:25.923703 IP 192.168.173.1.21963 > 192.168.173.2.33442: UDP, length 1472
11:31:25.923729 IP 192.168.173.1.63873 > 192.168.173.2.33443: UDP, length 1472
11:31:25.923747 IP 192.168.173.1.51599 > 192.168.173.2.33444: UDP, length 1472
11:31:25.923770 IP 192.168.173.1.48325 > 192.168.173.2.33445: UDP, length 1472
11:31:25.923793 IP 192.168.173.1.11303 > 192.168.173.2.33446: UDP, length 1472
11:31:25.923816 IP 192.168.173.1.18195 > 192.168.173.2.33447: UDP, length 1472
11:31:25.923841 IP 192.168.173.1.56580 > 192.168.173.2.33448: UDP, length 1472
11:31:25.923861 IP 192.168.173.1.9626 > 192.168.173.2.33449: UDP, length 1472
11:31:30.925070 IP 192.168.173.1.19061 > 192.168.173.2.33450: UDP, length 1472
11:31:30.925091 IP 192.168.173.2 > 192.168.173.1: ICMP 192.168.173.2 udp port 33450 unreachable, length 556
11:31:30.925095 IP 192.168.173.1.29498 > 192.168.173.2.33451: UDP, length 1472
11:31:30.925099 IP 192.168.173.2 > 192.168.173.1: ICMP 192.168.173.2 udp port 33451 unreachable, length 556
11:31:30.925102 IP 192.168.173.1.39393 > 192.168.173.2.33452: UDP, length 1472
11:31:30.925106 IP 192.168.173.2 > 192.168.173.1: ICMP 192.168.173.2 udp port 33452 unreachable, length 556
11:31:30.925127 IP 192.168.173.1.24223 > 192.168.173.2.33453: UDP, length 1472
11:31:30.925138 IP 192.168.173.2 > 192.168.173.1: ICMP 192.168.173.2 udp port 33453 unreachable, length 556
11:31:30.925142 IP 192.168.173.1.29305 > 192.168.173.2.33454: UDP, length 1472
Может кто-нибудь помочь диагностировать, в чем может быть проблема? Мы уже пробовали:
- Замена кабелей
- Обмен картой.
Прямо сейчас порт находится на отдельной сетевой карте, на которой не используются другие порты. Увеличил ниже параметров ядра, но все равно безуспешно
net.core.rmem_default = 8388608
net.core.rmem_max = 16777216
net.core.wmem_default = 8388608
net.core.wmem_max = 16777216
net.ipv4.ipfrag_high_thresh = 1310720
net.ipv4.udp_rmem_min = 16384
net.ipv4.udp_wmem_min = 16384
net.ipv4.udp_mem = 8388608 12582912 16777216
Мы также думали, что можем изменить трафик на TCP, но приложение не позволяет нам этого. Из-за этого производительность серьезно страдает. Любые советы и предложения были бы очень признательны.