모든 서버가 RHEL 7.2 버전을 사용하는 경우 DELL HW 물리적 시스템에 3개의 Hadoop HDFS 서버가 있습니다.
각 디스크가 1TB인 경우 각 서버에는 3개의 HDFS 디스크가 포함됩니다.
이제 머신당 3개의 디스크가 있는 또 다른 3개의 Hadoop 서버를 추가하려고 합니다.
문제는 우리가 1TB 디스크를 찾지 못하고, 우리가 살 수 있는 것은 2TB 디스크뿐이라는 점이다.
두 번째 문제는 HDFS 디스크를 다룰 때 모든 HDFS 디스크의 크기가 동일해야 한다는 것입니다.
기존 서버의 디스크는 100% 사용 공간에 도달할 수 있는 반면, 2TB 디스크 3개가 있는 새 서버는 사용 공간의 절반이 되기 때문입니다.
따라서 기본적으로 모든 HDFS 디스크는 동일한 크기를 가져야 합니다.
그래서 내 질문은 – Linux가 2TB를 1TB 디스크로 식별하는 방식으로 새 서버의 디스크를 RAID로 조작할 수 있습니까?
답변1
저는 Apache Hadoop에 대해 잘 모릅니다. 그리고 나는 그것에 대해 잘 모른다당신의RAID 설정. 하지만 2TB 디스크가 있더라도 LVM을 사용하거나 fdisk를 사용하는 간단한 파티션을 사용하여 Linux에서 직접 크기를 관리할 수 있습니다.
다른 컴퓨터를 모방할 수 있는 동일한 양의 공간이 있는지 확인하겠습니다. 필요한 경우 다른 디스크에 있는 것과 동일한 파티션당 블록 수를 설정할 수 있습니다.
LVM 디스크 관리 실습을 해보실 것을 제안합니다. LVM에 관한 많은 튜토리얼이 있습니다.
필요한 경우 시작하기에 좋은 문서는 다음과 같습니다. RedHat에서 가져온 것이며 버전 7.x용입니다.