Então quero copiar uma pasta de 97,9GB para outra pasta e começar com uma alta taxa de transferência e um tempo estimado de cerca de 30 minutos. À medida que o fdsr continua a copiar, a taxa de transferência diminui. Está em cerca de 5Mb/seg agora e o tempo estimado aumentou para 5 horas. A taxa ainda está caindo (enquanto eu escrevi isso já está em 4,3Mb/s). Como posso evitar isso e copiar a pasta com uma taxa de transferência alta e consistente? estou usando o Ubuntu
Responder1
Em geral, é muito mais rápido copiar arquivos maiores do que muitos arquivos menores. Ao transferir um único arquivo grande, o tempo de cópia é dominado pela velocidade de transferência. Ao copiar muitos arquivos pequenos, seu tempo é dominado pela criação de arquivos.
Você provavelmente poderia acelerar as coisas compactando sua pasta de origem e transferindo o arquivo tar, mas observe que se você tiver 500.000 arquivos para transferir, terá que pagar o custo de toda a criação de metadados, mais cedo ou mais tarde.
Você também pode descobrir que diferentes sistemas de arquivos são mais ou menos caros.https://unix.stackexchange.com/questions/28756/what-is-the-most-high-performance-linux-filesystem-for-storing-a-lot-of-small-fié bastante antigo agora, mas inclui uma comparação. Além disso, você pode escolher diferentes opções de montagem para o seu sistema de arquivos, pois algumas delas podem fazer uma diferença significativa. Por exemplo, no ext4, você pode querer investigarnoatime,nodiratime,relatime,barrier=0,commit=30