Verzeichnisbaum mit Deduplizierung synchronisieren?

Verzeichnisbaum mit Deduplizierung synchronisieren?

Ich habe zwei Linux-Server mit großen Datenmengen (über 1 TB), die über eine langsame Verbindung (100 KB/s) synchronisiert werden müssen.

Viele Daten überschneiden sich, liegen aber an unterschiedlichen Standorten.

Ich hätte gerne eine Art Rsync-/Unison-Tool, mit dem ich die Server spiegeln kann.

Das System müsste intelligenter sein und feststellen, ob die Datei am Ziel vorhanden ist (möglicherweise an einem anderen Ort mit derselben Prüfsumme). Wenn dies der Fall ist, verschiebt es die Datei lokal auf den Zielserver, anstatt sie vom Quellserver neu zu kopieren.

Antwort1

Das ist vielleicht nicht die Antwort, die Sie suchen, aber die beste, die ich aus dem Gedächtnis finden kann.

-y, --fuzzy find similar file for basis if no dest file

(Entschuldigung, ich hätte erwähnen sollen, dass es sich um einen Rsync-Befehl/ein Rsync-Flag handelt)

(außerdem habe ich KEINE AHNUNG, wie es genau funktioniert)

verwandte Informationen