Итак, я хочу скопировать папку размером 97,9 ГБ в другую папку и начать с высокой скорости передачи и предполагаемым временем около 30 минут. По мере того, как fdsr продолжает копировать, скорость передачи снижается. Сейчас она составляет около 5 Мбит/с, а предполагаемое время увеличилось до 5 часов. Скорость все еще падает (когда я писал это, она уже была 4,3 Мбит/с), как мне избежать этого и копировать папку с постоянной высокой скоростью передачи? Я использую Ubuntu
решение1
В общем, копировать большие файлы гораздо быстрее, чем много маленьких файлов. При передаче одного большого файла время копирования зависит от скорости передачи. При копировании множества маленьких файлов время копирования зависит от создания файла.
Вероятно, вы могли бы ускорить процесс, заархивировав исходную папку и перенеся tar-файл, но учтите, что если вам нужно перенести 500 000 файлов, рано или поздно вам придется заплатить за создание всех этих метаданных.
Вы также можете обнаружить, что разные файловые системы обходятся дороже или дешевле.https://unix.stackexchange.com/questions/28756/какая-самая-высокопроизводительная-файловая-система-linux-для-хранения-много-маленького-файладовольно старый сейчас, но включает сравнение. Кроме того, вы можете выбрать другие параметры монтирования для вашей файловой системы, так как некоторые из них могут иметь существенное значение. Например, на ext4 вы можете исследоватьnoatime,nodiratime,relatime,barrier=0,commit=30