Entonces quiero copiar una carpeta de 97,9 GB a otra carpeta y comencé con una velocidad de transferencia alta y un tiempo estimado de unos 30 minutos. A medida que el fdsr continúa copiando, la tasa de transferencia disminuye. Ahora está a aproximadamente 5 Mb/s y el tiempo estimado aumentó a 5 horas. La velocidad sigue bajando (mientras escribí esto, ya es de 4,3 Mb/s). ¿Cómo puedo evitar esto y copiar la carpeta a una velocidad de transferencia alta y constante? estoy usando ubuntu
Respuesta1
En general, es mucho más rápido copiar archivos más grandes que muchos archivos más pequeños. Al transferir un único archivo grande, el tiempo de copia está dominado por la velocidad de transferencia. Al copiar muchos archivos pequeños, su tiempo está dominado por la creación de archivos.
Probablemente podrías acelerar las cosas guardando tu carpeta de origen y transfiriendo el archivo tar, pero ten en cuenta que si tienes 500.000 archivos para transferir, tarde o temprano tendrás que pagar el costo de toda esa creación de metadatos.
También puede encontrar que diferentes sistemas de archivos son más o menos costosos.https://unix.stackexchange.com/questions/28756/cuál-es-el-sistema-de-archivos-linux-de-más-alto-rendimiento-para-almacenar-mucho-pequeño-fiYa es bastante antiguo, pero incluye una comparación. Además, puede elegir diferentes opciones de montaje para su sistema de archivos, ya que algunas de ellas pueden marcar una diferencia significativa. Por ejemplo, en ext4, es posible que desees investigarnoatime,nodiratime,relatime,barrier=0,commit=30