네트워크 공유에서 여러 개의 8TB 외장 HDD(Linux)로 200TB의 데이터 백업

네트워크 공유에서 여러 개의 8TB 외장 HDD(Linux)로 200TB의 데이터 백업

저는 테스트 드라이브에서 수많은 센서 데이터를 수집하는 회사에서 일하고 있습니다. 현재 백업해야 할 데이터 용량은 약 200TB(1,638,400Gbit)입니다.

연말에 테이프 라이브러리를 설정할 계획이지만 지금은 ext4로 포맷된 여러 HDD에 데이터를 복사해야 합니다.

센서 데이터에 10Gbit/s로 연결된 서버를 백업에 사용할 수 있습니다. 이 서버에는 두 개의 UBS 3.0 포트가 있습니다. 서버에는 현재 데비안이 설치되어 있지만 이 작업을 위해 어떤 Linux도 설치할 수 있습니다.

당사의 외장 HDD는 8TB의 저장 용량을 갖춘 Western Digital MyBooks 3.0이며 쓰기 속도는 180MB/s(1,440Mbit/s)입니다.

따라서 2개의 USB 3.0 포트를 사용하면 이론적으로 2.8Gbit/s를 쓸 수 있으며, 총 쓰기 시간은 약 162시간(6.8일)이 됩니다. 이것이 최적의 경우이고 드라이브 교체 시간을 고려하지 않은 상황에서 각각 5일의 근무일을 포함해 최소 2주가 걸릴 것으로 예상됩니다. 내가 틀렸다면 정정해주세요.

이 상황은 TAPE LIBRARY를 비명을 지르고 있습니다! 지금은 UBS 3.0 방식으로 가야 합니다.

가장 빠르고 쉬운 방법으로 이 문제를 해결하는 방법에 대한 귀하의 제안을 듣고 싶습니다.

어떤 도움이라도 대단히 감사하겠습니다! 감사합니다!

관련 정보