ネットワーク共有から複数の 8TB 外付け HDD に 200TB のデータをバックアップする (Linux)

ネットワーク共有から複数の 8TB 外付け HDD に 200TB のデータをバックアップする (Linux)

私はテストドライブから大量のセンサーデータを収集する会社で働いています。現在、バックアップが必要なデータは 200 TB (1,638,400 Gbit) ほどあります。

年末にテープライブラリを設置する予定ですが、今のところはext4でフォーマットされた複数のHDDにデータをコピーする必要があります。

センサー データへの 10Gbit/s 接続を備えたサーバーがバックアップに利用できます。このサーバーには 2 つの UBS 3.0 ポートがあります。サーバーには現在 Debian がインストールされていますが、このタスク用に任意の Linux をインストールできます。

当社の外付け HDD は、8TB のストレージを備えた Western Digital MyBooks 3.0 で、書き込み速度は 180MB/秒 (1,440Mbit/秒) です。

したがって、2 つの USB 3.0 ポートを使用すると、理論的には 2.8Gbit/s の書き込みが可能になり、合計書き込み時間は約 162 時間 (6.8 日) になります。これは最適なケースであり、ドライブの交換にかかる時間は考慮されていないため、5 営業日ずつで少なくとも 2 週間かかると予想されます。間違っていたら訂正してください。

この状況はテープ ライブラリを必要としています。今のところは、UBS 3.0 の道を進む必要があります。

この問題を最も速く、最も簡単な方法で解決する方法について、皆さんの提案を聞きたいです。

どのような助けでも大歓迎です! ありがとうございます!

関連情報