Tengo 4 cajas CentOS 7 con NIC SuperMico 10000BaseT conectadas a un conmutador Netgear ProSafe XS712T con cables Cat8. Switch tiene todas las configuraciones predeterminadas, pero muestra las NIC a 10G completo. Las NIC están configuradas:
[root@VH11 ~]# ethtool ens1f0
Settings for ens1f0:
Supported ports: [ TP ]
Supported link modes: 100baseT/Full
1000baseT/Full
10000baseT/Full
Supported pause frame use: Symmetric
Supports auto-negotiation: Yes
Supported FEC modes: Not reported
Advertised link modes: 10000baseT/Full
Advertised pause frame use: Symmetric
Advertised auto-negotiation: Yes
Advertised FEC modes: Not reported
Speed: 10000Mb/s
Duplex: Full
Port: Twisted Pair
PHYAD: 0
Transceiver: internal
Auto-negotiation: on
MDI-X: Unknown
Supports Wake-on: d
Wake-on: d
Current message level: 0x00000007 (7)
drv probe link
Link detected: yes
SÓLO hay NIC de 10G conectadas al conmutador.
Solo puedo obtener velocidades de transferencia inferiores a 1G en transferencias de archivos según lo informado por rsync, scp e iftop al transferir 1 archivo de 20G. Cuando pruebo desde servidor > conmutador > servidor con iperf, me dice que obtiene 9,38 Gbits/seg, pero solo obtengo el 10% de eso en transferencias de archivos con rsync o scp.
¿Qué estoy haciendo mal aquí?
Gracias de antemano por tu tiempo.
Información agregada: para el segmento de red de 1 GB:
[root@VH14 ~]# time scp bigfile [email protected]:/home
[email protected]'s password:
bigfile 100% 4494MB 110.1MB/s 00:40
real 0m46.657s
user 0m18.975s
sys 0m4.646s
Para segmento de red de 10 GB:
[root@VH14 ~]# time scp bigfile [email protected]:/home/bf3
[email protected]'s password:
bigfile 100% 4494MB 112.3MB/s 00:40
real 0m45.693s
user 0m34.643s
sys 0m8.440s
El 172. y el 10. están en interruptores diferentes. El conmutador 10G no tiene enlace ascendente y solo se comunica con servidores. Entonces, aunque iperf dice que obtengo aproximadamente 10G, los resultados de la transferencia son esencialmente los mismos en ambas subredes.
No creo que la E/S de disco sea mi problema:
[root@VH14 ~]# hdparm -t /dev/md126 /dev/md126: Timing buffered disk reads: 4150 MB in 3.00 seconds = 1382.80 MB/sec [root@VH14 ~]# hdparm -T /dev/md126 /dev/md126: Timing cached reads: 19798 MB in 1.99 seconds = 9945.27 MB/sec
Más información: MTU en las NIC 10G es 9124. Las CPU son CPU Intel(R) Xeon(R) E5-2690 v4 a 2,60 GHz