Ich möchte also einen 97,9 GB großen Ordner in einen anderen Ordner kopieren und habe mit einer hohen Übertragungsrate und einer geschätzten Zeit von etwa 30 Minuten begonnen. Während der FDSR weiter kopiert, sinkt die Übertragungsrate. Sie liegt jetzt bei etwa 5 Mbit/s und die geschätzte Zeit ist auf 5 Stunden gestiegen. Die Rate sinkt immer noch (während ich dies schrieb, lag sie bereits bei 4,3 Mbit/s). Wie kann ich dies vermeiden und den Ordner mit einer konstant hohen Übertragungsrate kopieren? Ich verwende Ubuntu
Antwort1
Im Allgemeinen ist es viel schneller, große Dateien zu kopieren als viele kleine Dateien. Beim Übertragen einer einzelnen großen Datei wird Ihre Kopierzeit von der Übertragungsgeschwindigkeit bestimmt. Beim Kopieren vieler kleiner Dateien wird Ihre Zeit von der Dateierstellung bestimmt.
Sie könnten den Vorgang wahrscheinlich beschleunigen, indem Sie Ihren Quellordner tarnen und die TAR-Datei übertragen. Beachten Sie jedoch, dass Sie, wenn Sie 500.000 Dateien übertragen müssen, früher oder später die Kosten für die Erstellung aller Metadaten tragen müssen.
Sie werden möglicherweise auch feststellen, dass unterschiedliche Dateisysteme mehr oder weniger kosten.https://unix.stackexchange.com/questions/28756/was-ist-das-leistungsstärkste-linux-dateisystem-zum-speichern-einer-menge-kleiner-dateienist mittlerweile ziemlich alt, enthält aber einen Vergleich. Darüber hinaus können Sie verschiedene Mount-Optionen für Ihr Dateisystem wählen, da einige davon einen erheblichen Unterschied machen können. Auf ext4 möchten Sie beispielsweise untersuchennoatime,nodiratime,relatime,barrier=0,commit=30