Estou construindo um pequeno datacenter do zero e estou considerando 10GbE. Estou procurando alguns conselhos sobre esta decisão.
Comparei Infiniband, FC, 10GbE e LACP com GigE e no final 10GbE parece ser a melhor solução neste momento.
Falando em datacenter: ele terá um ou dois storages (dois em caso de cenário de failover) e três máquinas 1U rodando algum Hypervisor (XenServer é o meu preferido). As VM's ficarão no armazenamento, então os Hypervisors irão inicializar a partir do armazenamento ou colocarei alguns pequenos SSDs nas máquinas 1U apenas para carregar o Hypervisor.
Então, o problema aqui é: estou um pouco confuso com o que tenho que comprar para fazer a rede. Já vi alguns switches caros, como o Cisco Nexus 5000/7000 com muitos recursos, mas não sei se realmente preciso desses caras.
Não tenho FC, então é seguro comprar switches únicos de 10 GbE sem tecnologias de "rede convergente"? Ou devo pegar um desses para colocar o FCoE em funcionamento?
Outra pergunta: iSCSI acima de 10GbE seria melhor que FCoE? (Estou considerando que o FCoE é melhor porque não usamos a pilha IP no FCoE).
Agradecemos antecipadamente e realmente aprecio algumas opiniões aqui.
Responder1
Estou com o Tom aqui! IB (mesmo o antigo) é mais barato e mais rápido em comparação com 10 GbE.
As pessoas obtêm alguns bons números com o equipamento basicamente barato:
http://forums.servethehome.com/networking/1758-$ 67-ddr-infiniband-windows-1-920mb-s-43k-iops.html
O problema é que o TCP sobre IB é uma droga (mata o desempenho, adicionando enorme latência) e o suporte nativo ao IB é muito limitado. SMB Direct com Windows Server 2012 R2 é ótimo (quando funciona).
Responder2
A decisão entre tecnologias deve ser tomada com base em uma avaliação de quais são suas necessidades/orçamento/expertise. Obviamente, sua escolha depende muito do tipo de hardware de armazenamento que você possui ou irá adquirir, juntamente com sua infraestrutura de rede. Tradicionalmente, as SANs usam Fibre Channel devido à sua alta velocidade, mas com o advento do 10GbE, a Ethernet tornou-se um concorrente viável. Dependendo do nível de utilização do seu data center, você poderá até conseguir usar 1GbE e MPIO, com capacidade de expansão posterior. A maioria dos principais fornecedores oferece a opção entre ofertas de iSCSI, FCoE e FC, e a escolha entre elas deve ser baseada em qual é a sua infraestrutura atual (ou desejada), levando em consideração a experiência da sua equipe.
Não posso comentar sobre o uso do Infiniband, pois nunca o usei, a não ser que seu uso seja menos prevalente do que essas outras tecnologias, juntamente com correspondentemente menos fornecedores para escolher. O risco secundário é encontrar pessoal que possa dar suporte a equipamentos menos comuns.
Pessoalmente, se você (e sua equipe) não têm experiência (nem infraestrutura existente) com canal de fibra, minha recomendação seria escolher uma oferta iSCSI, pois sua curva de aprendizado (e possivelmente, seus custos de implementação) será muito menor. A maioria das pessoas esquece que os custos de hardware são minúsculos em comparação com a mão de obra. Eu gasto dez vezes mais em custos de pessoal do que em meu orçamento de hardware, então se algum tipo de hardware for um pouco mais caro, mas bem compreendido pela minha equipe (ou eu puder encontrar mais facilmente alguém para trabalhar nele), isso se torna o escolha óbvia. A menos, é claro, que você esteja procurando uma nova oportunidade de aprendizado. :P
Responder3
O FCoE faz sentido se você tiver uma infraestrutura FC existente e precisar alimentar LUNs FC para seus novos servidores e eles não tiverem HBAs FC (ou se você estiver ficando sem portas FC licenciadas em seus switches FC - é a mesma coisa). Então você pega 10 GbE e executa o FCoE para reduzir os custos com equipamentos FC. Construir do zero o FCoE é inútil, execute iSCSI (ou SMB Direct com RDMA se você estiver no "lado negro") acima de 10 GbE e fique feliz. Com CPUs multi-GHz e multi-core recentes e decentes e TCP e iSCSI pelo menos parcialmente descarregados para NIC ASICs, não há diferença entre armazenamento sobre TCP e armazenamento sobre Ethernet bruta. Boa sorte meu amigo!
Responder4
Por que?
Dados os preços elevados e a baixa largura de banda, preferiria sempre o Infiniband ao 10g. Além de um outlink baseado em 1g - a menos que você tenha mais de 1g de largura de banda de uplink.
Devido a outras restrições estou usando 10g em alguns servidores (a maioria - quase todos são 1g e o Netgear TXS 752 que usamos como backbone tem 4x10g spf+) e o fator preço das placas de rede é - ai. Comparado com o Infiniband muito mais rápido.