大量のデータ (1TB 以上) を持つ Linux サーバーが 2 台あり、低速接続 (100 KB/秒) で同期する必要があります。
多くのデータは重複していますが、場所が異なります。
サーバーをミラーリングできる rsync / unison ツールが欲しいです。
よりインテリジェントに、ファイルが宛先に存在するかどうか (同じチェックサムを持つ別の場所にある可能性もある) を識別する必要があります。存在する場合は、ソース サーバーからファイルを最初からコピーするのではなく、ファイルを宛先サーバーにローカルに移動します。
答え1
あなたが探している答えではないかもしれませんが、私が記憶している限りではこれが最善の答えです。
-y, --fuzzy find similar file for basis if no dest file
(申し訳ありませんが、これは rsync コマンド/フラグであることを言及すべきでした)
(さらに、それが具体的にどのように機能するかは全く分かりません)