Soluções de adaptador Infiniband de alto desempenho para transferências de dados em alta velocidade: um guia abrangente

Nesta era movida pela informação, a necessidade de soluções de transferência de dados rápidas e confiáveis ​​nunca foi tão alta. Este manual completo se concentra nas soluções de adaptadores InfiniBand, que são de alto desempenho. Eles são feitos de tal forma que podem satisfazer as demandas extenuantes dos data centers contemporâneos, ambientes de computação de alto desempenho (HPC) e redes empresariais. A verdade é que esses adaptadores fornecem taxas rápidas de transferência de dados graças à sua tecnologia avançada; eles também têm períodos de latência baixos e oferecem excelente escalabilidade. Neste artigo, veremos as especificações técnicas, métricas de desempenho e recursos essenciais de alguns dos principais adaptadores Infiniband para que você possa tomar suas decisões com sabedoria quando se trata de otimizar sua infraestrutura para transferência de dados.

O que exatamente é um adaptador InfiniBand?

Compreendendo a tecnologia InfiniBand

Em computação de alto desempenho e data centers, a tecnologia InfiniBand é um protocolo de comunicação comumente usado de altíssima velocidade. Ela oferece melhor largura de banda do que os protocolos de rede convencionais, bem como latência reduzida, tornando-a perfeita para aplicativos que exigem taxas de transferência de dados rápidas. A topologia de malha comutada é utilizada pelo protocolo, permitindo assim que vários dispositivos sejam conectados de forma muito eficiente; o congestionamento é minimizado enquanto se maximiza a taxa de transferência. Nesse sentido, portanto, os adaptadores infiniband atuam como intermediários entre o hardware exigido por essa tecnologia para desempenho e confiabilidade ideais.

A parte dos data centers desempenhada pelos adaptadores InfiniBand

Os data centers não podem prescindir dos adaptadores infiniband, que fazem parte dos componentes vitais necessários para garantir que haja um fluxo contínuo de informações entre servidores, sistemas de armazenamento e dispositivos de rede em alta velocidade. seus recursos de alta largura de banda, facilitando assim a comunicação rápida e eficiente entre eles. Aplicativos com muitos dados, como análise de big data, inteligência artificial ou simulações científicas, podem ser executados sem gargalos de desempenho graças a esses adaptadores. infraestrutura por provedores de serviços sem interferir no desempenho da rede em suas instalações.

Adaptadores InfiniBand versus placas de rede Ethernet

Existem várias diferenças técnicas ao comparar adaptadores infiniband com placas Ethernet. Inicialmente em termos de largura de banda e métricas de desempenho de latência, onde o infiniband obteve valores mais altos em comparação com seu equivalente. Por exemplo, as taxas de transferência de dados podem chegar a 200 Gbps com latências tão baixas quanto 100 nanossegundos, o que pode ser conseguido usando este tipo de adaptador; tornando-o assim adequado para uso em computação de alto desempenho (HPC). Ao contrário, embora a Ethernet seja amplamente utilizada em diferentes plataformas devido à sua simplicidade durante a implementação, ela ainda fornece larguras de banda mais baixas juntamente com latências mais altas quando comparada à Ethernet de 100 Gigabit, que possui recursos avançados.

Outro fator distintivo está no protocolo de comunicação e na topologia entre essas duas tecnologias. A topologia de malha comutada empregada pela infiniband cria vários caminhos paralelos para transferência de dados, reduzindo assim o congestionamento nas redes. pode facilmente ficar congestionado. Além disso, o RDMA é suportado nativamente em todos os dispositivos pela Infiniband, otimizando assim a transmissão de dados através do desvio da CPU, reduzindo assim a latência envolvida; tal otimização pode não ser alcançada com RDMA habilitado em Ethernet usando protocolos como iWARP ou RoCE, pois eles exigem configuração extra e não fornecem níveis semelhantes de desempenho.

A decisão de usar adaptadores InfiniBand ou placas de rede Ethernet deve ser baseada em requisitos específicos da aplicação onde latência ultrabaixa e rendimento máximo são necessários, então o Infiniband se torna mais preferível.

Como você escolhe o adaptador Infiniband certo para você?

Vários tipos de adaptadores Infiniband

SDR ou Single Data Rate, DDR ou Double Data Rate, QDR ou Quad Data Rate, FDR ou Fourteen Data Rate, EDR ou Enhanced Data Rate e HDR ou High Data Rate são os diferentes tipos de adaptadores Infiniband. Eles oferecem uma variedade de opções para configuração de adaptador de rede. Enquanto SDR fornece até 2.5 Gbps por faixa; DDR dobra isso para 5 Gbps por faixa. Ainda mais faz QDR com sua taxa de 10 Gbps por faixa. Ele atinge um máximo eficiente de 14 Gbps por FDR que em troca é dobrado por EDR (25 Gbps por faixa). Os adaptadores HDR mais recentes fornecem até 50 Gbps a cada segundo através de cada canal! Requisitos de desempenho e orçamento são os principais fatores quando se trata de escolher um adaptador Infiniband, mas lembre-se de que os mais caros oferecem maior rendimento em latências mais baixas.

Recursos críticos para um adaptador Infiniband

Existem vários recursos que devem ser levados em consideração ao selecionar qualquer um desses dispositivos, não apenas para obter o máximo rendimento deles, mas também para garantir que funcionem bem em conjunto com outros componentes que compõem os sistemas de computador onde coisas como essas serão usadas. na maioria das vezes por várias pessoas em diferentes lugares do planeta, dependendo do que cada pessoa precisa de sua máquina. Isso inclui largura de banda – taxas de dados mais altas, como EDR (25 Gbps/via) e HDR (50 Gbps/via) são mais adequadas para ultra-altas. aplicações de desempenho; Latência – a baixa latência deve ser considerada especialmente quando se trata de processos em tempo real que exigem tempos de resposta muito rápidos; Suporte RDMA – Procure especificamente aqueles InfiniBand com recursos RDMA porque esse recurso ajuda a reduzir a sobrecarga da CPU durante grandes transferências de arquivos em redes locais, melhorando consideravelmente a eficiência geral em tais cenários. suporte do fabricante além de atualizações frequentes de firmware. A contagem de portas, bem como os recursos de gerenciamento de cabos, também não devem ser deixados de lado, especialmente se estiver trabalhando em ambientes de rede densos, onde muitas conexões precisam ser feitas em espaços limitados, exigindo assim uma organização adequada dos cabos que conectam esses diferentes dispositivos localizados próximos uns dos outros. em consideração o custo em relação aos recursos disponíveis, para que não se acabe gastando mais do que se pode pagar em algo que pode não necessariamente agregar valor além do que as opções mais baratas poderiam ter proporcionado de qualquer maneira.

Adaptadores de porta única versus porta dupla: uma comparação

Considerações sobre desempenho, redundância e custo são os principais fatores ao comparar adaptadores infiniband de porta única e de porta dupla. Adaptadores de porta única são mais baratos e podem ser suficientes para projetos de pequena escala, onde altas taxas de transferência de dados não são críticas. Eles consomem menos energia e ocupam menos espaço físico, o que os torna ideais para aplicativos com orçamento limitado. No entanto, adaptadores de porta dupla fornecem melhor desempenho por meio de larguras de banda agregadas, suportando, assim, aplicativos mais exigentes, ao mesmo tempo em que oferecem recursos de failover, de modo que, em um evento em que um link falha, outro assume, mantendo-se conectado, reduzindo assim o tempo de inatividade e aumentando a confiabilidade, mas a um custo mais alto em comparação com seus equivalentes únicos. Portanto, escolha com base nas necessidades da rede, níveis de desempenho necessários e restrições orçamentárias.

Quais são os melhores adaptadores Infiniband disponíveis no mercado?

Principais escolhas: NVIDIA Mellanox ConnectX-6 VPI

Os adaptadores NVIDIA Mellanox ConnectX-6 VPI têm uma classificação de alto desempenho, redundância e custo-benefício. Eles suportam configurações de porta única e dupla, o que os torna flexíveis o suficiente para atender a diferentes redes. Com uma largura de banda de até 200 Gb/s, eles podem lidar efetivamente com aplicativos exigentes. Além desse recurso, esses adaptadores também vêm com outros aprimoramentos, como virtualização de E/S baseada em hardware e controle de congestionamento, entre outros, que oferecem fortes medidas de segurança para proteger dados em trânsito ou em repouso. A compatibilidade testada com diversos hardwares e atualizações frequentes de firmware garantem sua usabilidade a longo prazo. Ter um preço razoável em relação às suas funcionalidades avançadas os torna adequados para implementações.

Melhor opção de orçamento: adaptador ConnectX-5

O adaptador ConnectX-5 oferece grandes velocidades pelo seu preço, tornando-o a melhor escolha para projetos com orçamento limitado. Ele suporta configurações de porta única e dupla de até 100 Gb/s, fornecendo largura de banda suficiente para diversas aplicações. Este adaptador possui recursos como suporte avançado à virtualização de funções de rede (NFV), melhor ritmo de pacotes e roteamento eficiente de dados, garantindo assim um desempenho confiável durante toda a sua vida útil, sempre que aplicável. Além disso, é compatível com a maioria dos principais sistemas operacionais e plataformas de hardware, enquanto opera com baixo consumo de energia, economizando energia, tornando este dispositivo muito flexível, considerando as diferentes necessidades de rede.

Desempenho de ponta: adaptadores QSFP56 de porta dupla

Porta dupla QSFP56 Os adaptadores oferecem capacidades inigualáveis ​​de até 200 Gb/s por porta, onde desempenho de ponta é necessário para qualquer projeto de carga de trabalho envolvendo processamento de grande volume de dados ou transferência de arquivos enormes de um ponto para outro no menor tempo possível, devendo ser feito usando adaptadores que podem transmitir tais quantidades de informações com rapidez suficiente sem sofrer atrasos devido a níveis de velocidade insuficientes causados ​​pela conexão entre computadores envolvidos na execução dessas tarefas, para que os usuários possam concluí-las a tempo sem esperar por eras. Esses tipos também funcionam bem com redes existentes porque são projetados de tal maneira que se encaixam perfeitamente nelas sem causar qualquer tipo de interrupção. Além disso, esses dispositivos têm suporte para recursos avançados de rede como RDMA, que é Remote Direct Memory Access, bem como baixa latência que garante que taxas de processamento de dados mais rápidas sejam alcançadas sempre que surgir a necessidade de fazê-lo. Além disso, eles vêm com mais recursos de segurança do que outros produtos em sua categoria, juntamente com energia otimizada, tornando-os escolhas ideais, especialmente onde soluções de tecnologia de ponta são necessárias em ambientes com altos níveis de demanda.

Qual é o processo de instalação e configuração de um adaptador Infiniband?

Procedimento de instalação

Desembale e verifique o adaptador:

• Retire o adaptador Infiniband da embalagem com cuidado, certificando-se de ter recebido todos os componentes, incluindo documentos. Inspecione a condição física do cartão quanto a danos.

Desligue e abra o sistema:

• Desligue seu PC/servidor seguindo as etapas de segurança adequadas. Desconecte todos os cabos e abra a caixa para acessar o(s) slot(s) PCIe.

Insira o adaptador Infiniband:

• Encontre um slot PCIe vazio na placa-mãe; insira o cartão suavemente nele. Fixe a placa firmemente usando os parafusos ou o mecanismo de trava fornecido junto com a placa-mãe.

Reconecte e inicie o sistema:

• Feche novamente a caixa do sistema, reconecte todos os cabos e ligue a alimentação.

Instale drivers e software:

• Após inicializar o sistema, instale os drivers/software necessários fornecidos pelo fabricante deste adaptador InfiniBand específico. Na maioria das vezes, será necessário baixar o driver mais recente do site do fabricante, que deve ser seguido pelas instruções de instalação fornecidas nele.

Definir configurações de rede para adaptadores de rede compatíveis com 100 GbE

• Acesse as configurações de rede do sistema operacional para configurar o adaptador Infiniband de acordo com a necessidade. Atribua um endereço IP além de outras configurações adicionais, se houver.

Verifique se o adaptador de barramento host (HBA) foi instalado com sucesso ou não (InfiniBand):

• Para verificar se o adaptador de barramento de host (HBA) foi instalado corretamente ou não, siga estas etapas: Primeiro teste seu adaptador de rede para verificar se está funcionando corretamente. Em seguida, certifique-se de que o status da conexão entre dois dispositivos conectados por meio desta porta exiba “Link Up”. Por fim, execute os testes de velocidade/conectividade necessários que podem ser feitos posteriormente.

Configurações de ajuste/ajuste:

• Para um melhor desempenho, pode-se querer ajustar diferentes parâmetros, como ajuste de ritmo de pacote de ativação de RDMA, etc., dependendo de necessidades/preferências/condições específicas.

Solução de problemas gerais

Adaptador não reconhecido:

• – Em primeiro lugar, é necessário verificar se o adaptador está encaixado corretamente no slot PCIe ou não.
• – É importante que você garanta a instalação dos drivers mais recentes.
• – Além disso, procure quaisquer configurações do BIOS que possam exigir ajustes.

Sem conectividade de rede:

• – Certifique-se de que os cabos de rede estejam conectados corretamente.
• – Verifique se o endereço IP junto com as configurações de rede foram configurados corretamente.
• – Reinicie também o sistema e o switch de rede.

Desempenho lento da rede:

• – Você deve verificar a configuração habilitada para RDMA.
• – Procure congestionamento de rede ou cabos defeituosos que estejam causando esse problema.
• – Otimize as configurações avançadas com base no seu cenário de uso.

Problemas de conectividade intermitente:

• -Atualizações de firmware/driver devem ser inspecionadas
• -Teste com um slot PCIe diferente ou outro sistema para ter certeza de que reconhece o adaptador de rede

O que os aplicativos ganham com os adaptadores Infiniband?

Computação de alto desempenho (HPC)

Os adaptadores InfiniBand são particularmente benéficos para aplicativos de computação de alto desempenho (HPC), pois exigem rápida transferência de dados e comunicação de baixa latência. A movimentação rápida de dados sem muita interferência é o lado forte da tecnologia InfiniBand; portanto, é usado principalmente em simulações científicas, modelagem financeira e análise de dados em larga escala usando adaptadores ConnectX-7, entre outros. A eficiência e o desempenho geral das tarefas de HPC são significativamente melhorados pela largura de banda adicional proporcionada por esses dispositivos, o que também diminui os atrasos, tornando-se assim obrigatório para qualquer infraestrutura de computação avançada.

Análise de dados e cargas de trabalho de IA

A análise de dados, bem como as cargas de trabalho de inteligência artificial, ganham com o acesso a taxas de transferência de informações mais rápidas, o que pode ajudá-los a lidar com conjuntos maiores com cálculos mais complicados com rapidez suficiente, graças aos adaptadores InfiniBand. Ele garante que haja um processamento eficiente durante o estágio de treinamento do modelo e, ao mesmo tempo, garante que a análise em tempo real seja realizada facilmente devido à sua característica de ser uma tecnologia de alto rendimento e baixa latência, o que contribui muito para a otimização da escalabilidade para tais tipos de cargas. diferentes nós dentro de um cluster, levando assim a insights mais rápidos feitos com base em decisões tomadas em torno de recursos onde muitos dados estão envolvidos, especialmente quando a infiniband cuida deles.

Centros de Dados Corporativos

Agilizar o gerenciamento de recursos em data centers de nível empresarial para que as otimizações da carga de trabalho se tornem mais fáceis sempre foi uma área-chave onde esses tipos de dispositivos mais se destacam, oferecendo velocidades mais rápidas e minimizando latências – isso só pode ser alcançado por meio da implantação de adaptadores InfiniBand em tal ambiente. As transações tendem a desacelerar as aplicações, mas quando implementadas de forma adequada, garantirão acesso rápido às informações, o que nos leva a reduzir gargalos, melhorando assim o desempenho das aplicações, especialmente em ambientes com muitas transações.

Como você pode manter e atualizar seu adaptador InfiniBand?

Dicas para manutenção regular

1. Atualizações regulares de firmware: Verifique com frequência com o fabricante atualizações de firmware para garantir desempenho e proteção máximos.
2. Verificação física: Examine o adaptador de rede e as conexões em busca de sinais de danos, poeira ou desgaste. Limpe-os se necessário e aperte-os bem.
3. Controle de temperatura: Verifique frequentemente a temperatura do dispositivo e certifique-se de que ele seja mantido dentro da faixa recomendada por meio do resfriamento adequado no data center.
4. Gerenciamento de cabos: Organize os cabos adequadamente para evitar danos físicos e interferência de sinal.
5. Atualize os drivers: A atualização dos drivers ajudará você a acompanhar a evolução dos padrões, o que, por sua vez, melhora a compatibilidade e adiciona funcionalidade ao seu adaptador de rede.
6. Monitore o desempenho: Você deve ser capaz de usar ferramentas de monitoramento de rede que permitirão rastrear métricas relacionadas ao desempenho deste adaptador, falha na qual uma ação imediata pode não ser tomada em caso de qualquer anormalidade detectada.
7. Configuração de backup: É sempre uma boa prática fazer backup regularmente de nossas configurações de adaptadores de rede para restaurar rapidamente as configurações caso ocorra uma situação em que esses dispositivos falhem ou sejam substituídos.

Quando e como atualizar um adaptador

1. Declínio de desempenho: atualize se você observar uma queda constante no desempenho ou maior latência.
2. Avanços tecnológicos em adaptadores Ethernet e Infiniband: instalar para utilização de novas tecnologias ou recursos que melhorem significativamente as operações.
3. A incompatibilidade com os padrões EDR Infiniband e 100GbE pode causar problemas de rede: atualize quando software ou hardware mais recente se tornar incompatível com o adaptador existente.
4. Fim do suporte: atualize antes que o fabricante pare de oferecer suporte ao modelo de adaptador atual.
5. Aumento da demanda: atualize para lidar efetivamente com maior taxa de transferência de dados ou maiores cargas de trabalho.

Como fazer o upgrade

1. Verifique a compatibilidade – certifique-se de que o novo adaptador seja compatível com o restante da sua infraestrutura e software.
2. Configurações de backup – faça backup de todas as definições e configurações atualmente aplicadas nesta placa (adaptador).
3. Planejamento de tempo de inatividade – programe-o para horários de baixo uso para evitar ao máximo interrupções.
4. Instalação de firmware e driver – instale a versão atualizada do firmware junto com os drivers apropriados para este tipo/marca/número de modelo específico; geralmente pode ser baixado gratuitamente do site do fornecedor.
5. Teste pós-atualização – realizar vários testes para que possamos ter certeza de que a placa atualizada funciona bem o suficiente, tanto em termos técnicos como também em termos práticos (por exemplo, sem lentidão experimentada pelos usuários finais).
6. Atualizar documentação — Atualizar a documentação do sistema relacionada às alterações de hardware feitas durante essas etapas.

Fontes de Referência

InfiniBand

Controlador de interface de rede

Ethernet

Perguntas Frequentes (FAQs)

P: O que é uma placa adaptadora Infiniband e por que ela é importante para transferências de dados em alta velocidade?

R: Uma placa adaptadora InfiniBand é um componente de hardware que conecta um computador a uma rede InfiniBand. É significativo para acelerar as transferências de dados, pois permite a transmissão em alta largura de banda com baixa latência, o que o torna ideal para ambientes com uso intensivo de dados ou que exigem processamento rápido de informações, como instituições de serviços financeiros ou organizações de pesquisa científica.

P: Qual a diferença entre uma placa HDR100 Infiniband e uma placa FDR Infiniband?

R: Para começar, a principal diferença entre esses dois cartões está nas taxas de dados, onde o HDR100 suporta até 100 Gbps, enquanto o FDR só pode lidar com até 56 Gbps. Em segundo lugar, em comparação com outros tipos de cartões destinados a aplicações menos exigentes, o primeiro oferece melhor eficiência e desempenho, pois foi projetado para usos mais intensivos em recursos. Portanto, se você precisa de velocidades de transferência mais rápidas durante cargas de trabalho pesadas, o HDR pode ser sua melhor aposta!

P: Posso usar uma placa adaptadora Infiniband em um slot PCI Express?

R: Definitivamente! Você certamente pode utilizar esse tipo de placa em qualquer slot de expansão PCIe disponível na placa-mãe do seu computador. No entanto, certifique-se de que tais slots atendam aos requisitos mínimos especificados pelo modelo específico que está sendo usado, por exemplo, largura de banda x16, etc., para que todas as funcionalidades fornecidas pelo dispositivo sejam totalmente utilizadas.

P: Qual é a vantagem de usar uma placa adaptadora ConnectX-6 VPI da Mellanox Technologies?

R: A principal vantagem proporcionada pela implantação de adaptadores ConnectX -6 VPI fabricados pela Mellanox Technologies reside em sua capacidade de facilitar a conectividade Ethernet, bem como o suporte a várias redes infiniband, permitindo, portanto, opções mais amplas ao escolher entre diferentes tipos de redes que devem ser implantadas em diversas seções dentro da organização. Além disso, este dispositivo possui alto rendimento junto com baixa latência, tornando-os candidatos adequados para implantação em ambientes como clusters de computação de alto desempenho ou data centers de grande escala, onde milhares, senão milhões de servidores podem precisar se comunicar simultaneamente.

P: Qual é a diferença entre uma placa de interface de rede (NIC) e uma placa de rede Infiniband?

Uma NIC (placa de interface de rede) geralmente se refere a uma placa adaptadora Ethernet usada para comunicação de rede típica. Por outro lado, uma placa de rede Infiniband é projetada especificamente para a arquitetura Infiniband que possui velocidades mais altas, menor latência e melhor desempenho para determinados aplicativos de alta demanda.

P: Quais são alguns dos benefícios de usar uma placa adaptadora combinada Infiniband e Ethernet?

Uma combinação de placa adaptadora Infiniband e Ethernet permite compatibilidade com ambos os tipos de redes, oferecendo assim a capacidade de usar o mesmo adaptador em diferentes cenários de rede, o que pode simplificar a infraestrutura de rede, bem como economizar custos por meio do suporte a vários protocolos com uma placa.

P: Onde posso comprar placas adaptadoras HPE Infiniband e produtos relacionados?

Os cartões adaptadores HPE InfiniBand e outros produtos relevantes estão disponíveis no site oficial da HPE Store US, revendedores autorizados ou FS.com Europe, entre outros mercados online. Certifique-se de comprar de fontes confiáveis ​​para garantir a autenticidade do produto, bem como a garantia.

P: O que as portas QSFP fazem em uma placa InfiniBand?

As portas QSFP (Quad Small Form-factor Pluggable) em uma placa de banda infinita são usadas para conexões de dados rápidas. Eles suportam faixas multidados, que aumentam a largura de banda e podem se conectar a switches InfiniBand, garantindo assim uma transmissão de dados suave e de alto desempenho em uma rede.

P: Por que um suporte alto aparece frequentemente em conversas sobre placas adaptadoras InfiniBand?

Um suporte alto refere-se ao suporte de altura padrão que fixa a placa adaptadora de banda infinita em um gabinete de desktop ou servidor. Ele garante a instalação correta da placa conectando-a ao slot PCI Express, proporcionando estabilidade e mantendo o fluxo de ar adequado dentro do gabinete.

P: Quais vantagens um slot PCIe 5.0 x16 oferece quando usado com uma placa adaptadora InfiniBand?

Se você usar o slot PCIe 5.0 x16 e a placa adaptadora de banda infinita juntos, ele maximizará o desempenho dessa placa, fornecendo a maior largura de banda e taxas de transferência de dados possíveis. Isso significa que o PCIe 5.0 tem o dobro da largura de banda do PCIe 4.0, o que permite que a placa adaptadora funcione na capacidade ideal necessária para processamento de dados em alta velocidade, bem como transferência em alguns aplicativos.