저는 지상에서 소규모 데이터 센터를 구축하고 있으며 10GbE를 고려하고 있습니다. 저는 이 결정에 대한 몇 가지 조언을 구하고 있습니다.
Infiniband, FC, 10GbE, LACP를 GigE와 비교해 보았는데, 결국 현시점에서는 10GbE가 최고의 솔루션인 것 같습니다.
데이터 센터에 대해 말하자면, 1개 또는 2개의 스토리지(장애 조치 시나리오의 경우 2개)와 일부 하이퍼바이저(XenServer가 제가 가장 좋아하는 것)를 실행하는 3개의 1U 시스템이 있습니다. VM은 스토리지에 있으므로 하이퍼바이저는 스토리지에서 부팅하거나 하이퍼바이저를 로드하기 위해 1U 머신에 작은 SSD를 배치합니다.
따라서 여기서 문제는 네트워크를 만들기 위해 무엇을 구입해야 하는지에 대해 약간 혼란스럽다는 것입니다. 많은 기능을 갖춘 Cisco Nexus 5000/7000과 같은 값비싼 스위치를 본 적이 있지만 이 제품이 정말 필요한지는 잘 모르겠습니다.
FC가 없으므로 "통합 네트워킹" 기술 없이 단일 10GbE 스위치를 구입하는 것이 안전합니까? 아니면 FCoE를 실행하려면 그 중 하나를 선택해야 합니까?
또 다른 질문: 10GbE를 통한 iSCSI가 FCoE보다 낫습니까? (저는 FCoE에서 IP 스택을 사용하지 않기 때문에 FCoE가 더 좋다고 생각합니다.)
미리 감사드리며 여기에 대한 몇 가지 의견에 진심으로 감사드립니다.
답변1
나 여기 톰이랑 같이 있어! IB(오래된 것조차도)는 10GbE에 비해 저렴하고 빠릅니다.
사람들은 기본적으로 저렴한 장비에서 좋은 숫자를 얻습니다.
http://forums.servethehome.com/networking/1758-$67-ddr-infiniband-windows-1-920mb-s-43k-iops.html
문제는 TCP-over-IB가 형편없고(성능이 저하되어 엄청난 대기 시간이 추가됨) 기본 IB 지원이 매우 제한적이라는 것입니다. Windows Server 2012 R2의 SMB Direct는 훌륭합니다(작동할 경우).
답변2
기술 간의 결정은 귀하의 요구사항/예산/전문성이 무엇인지 평가하여 이루어져야 합니다. 분명히 선택은 네트워킹 인프라와 함께 보유하고 있거나 구매할 스토리지 하드웨어 유형에 따라 크게 달라집니다. 전통적으로 SAN은 빠른 속도로 인해 파이버 채널을 사용했지만 10GbE의 출현으로 이더넷이 유력한 경쟁자가 되었습니다. 데이터 센터의 활용도 수준에 따라 1GbE 및 MPIO를 사용하지 않고 나중에 확장할 수도 있습니다. 대부분의 주요 공급업체는 iSCSI, FCoE 및 FC 제품 중에서 선택할 수 있는 옵션을 제공하며, 이들 중에서 선택하려면 현재(또는 원하는) 인프라가 무엇인지에 따라 직원 전문성을 고려하여 선택해야 합니다.
저는 Infiniband를 직접 사용해 본 적이 없기 때문에 Infiniband의 사용에 대해 언급할 수 없습니다. 단, Infiniband의 사용은 다른 기술보다 널리 사용되지 않고 그에 따라 선택할 수 있는 공급업체도 적습니다. 부수적인 위험은 덜 일반적인 장비를 지원할 수 있는 직원을 찾는 것입니다.
개인적으로 귀하(및 귀하의 직원)가 파이버 채널에 대한 경험(또는 기존 인프라)이 없다면 학습 곡선(및 구현 비용)이 훨씬 낮을 것이므로 iSCSI 제품을 선택하는 것이 좋습니다. 대부분의 사람들은 하드웨어 비용이 인건비에 비해 아주 작다는 사실을 잊어버립니다. 나는 하드웨어 예산보다 인건비에 10배 더 많은 비용을 지출합니다. 따라서 어떤 유형의 하드웨어가 조금 더 비싸지만 직원이 잘 이해한다면(또는 해당 작업을 수행할 사람을 더 쉽게 찾을 수 있다면) 당연한 선택. 물론, 새로운 학습 기회를 찾고 있는 것이 아니라면 말이죠. :피
답변3
FCoE는 기존 FC 인프라가 있고 새 서버에 FC LUN을 공급해야 하는데 FC HBA가 없는 경우(또는 FC 스위치에 라이선스가 부여된 FC 포트가 부족한 경우에도 마찬가지)에 적합합니다. 따라서 10GbE를 사용하고 FCoE를 실행하여 FC 장비 비용을 절감할 수 있습니다. 처음부터 FCoE를 구축하는 것은 의미가 없습니다. 10GbE 이상으로 iSCSI(또는 "다크 사이드"에 있는 경우 RDMA를 사용하는 SMB Direct)를 실행하고 만족하세요. 최근 괜찮은 다중 GHz 및 다중 코어 CPU와 TCP 및 iSCSI가 모두 NIC ASIC에 적어도 부분적으로 오프로드되었으므로 TCP를 통한 스토리지와 원시 이더넷을 통한 스토리지 간에 차이가 없습니다. 행운을 빌어요 내 친구!
답변4
왜?
높은 가격과 낮은 대역폭을 고려하면 저는 항상 10g보다 Infiniband를 선호합니다. 또한 1g 기반 아웃링크 - 업링크 대역폭이 1g를 초과하지 않는 한.
다른 제약으로 인해 나는 일부 서버에서 10g를 사용하고 있으며(대부분 - 거의 모두 1g이고 우리가 백본으로 사용하는 Netgear TXS 752는 4x10g spf+를 가짐) 네트워크 카드의 가격 요소는 - 아야입니다. 훨씬 빠른 Infiniband와 비교됩니다.