56G FDR InfiniBand : options de câble, d’émetteur-récepteur et de commutateur AOC
En matière de transfert de données fluide et de performances de calcul à haute vitesse, le protocole InfiniBand 56G FDR est la technologie de pointe qui promet une vitesse et une efficacité inégalées. Cependant, le véritable potentiel de cette vitesse dépendra du choix judicieux des autres éléments essentiels : câbles AOC, émetteurs-récepteurs et commutateurs.
Introduction à FDR InfiniBand
Qu'est-ce que l'InfiniBand 56G FDR ?
La technologie InfiniBand 56G FDR (Fourteen Data Rate) offre des performances accrues en optimisant la vitesse des applications gourmandes en données, permettant ainsi un accès rapide et sans latence à de gros volumes de données. Grâce aux composants de l'architecture InfiniBand FDR, 56 ports à 56 gigabits par seconde (Gbps) sont activés, assurant une communication plus sécurisée et plus rapide entre les serveurs, les périphériques de stockage et autres éléments au sein des systèmes de calcul haute performance (HPC) et des centres de données.
Des performances exceptionnelles sont obtenues grâce à une technologie entièrement nouvelle : un excellent encodage des données transmises ! Ceci est dû à l’utilisation du schéma d’encodage avancé 64/66 bits, qui améliore considérablement l’efficacité de la transmission de données par rapport aux technologies précédentes comme le QDR (Quad Data Rate). Axée sur un accès et un transfert de données rapides, la technologie FDR offre une surcharge minimale et une capacité de charge utile supérieure pour la transmission de données.
Importance dans le calcul haute performance (HPC)
Le système FDR InfiniBand joue un rôle crucial dans le développement du calcul haute performance (HPC) grâce à sa latence extrêmement faible et à sa bande passante élevée, indispensables aux tâches de calcul les plus complexes. La communication entre les nœuds devient une condition essentielle des applications HPC lors de simulations à grande échelle, d'analyses de données en temps réel ou de modélisations météorologiques. InfiniBand offre une solution particulièrement adaptée à ces besoins, puisqu'il prend en charge des débits de données jusqu'à 56 Gbit/s et permet de réduire la latence jusqu'à 500 nanosecondes.
Les données de pointe suffisent à démontrer le besoin crucial des clusters HPC. InfiniBand est devenu un élément central de la technologie de supercalcul de la génération actuelle ; de ce fait, il domine depuis un certain temps la catégorie des systèmes les plus performants, selon le classement TOP500. Le système HDR InfiniBand, contrairement aux conceptions de commutateurs classiques, est relativement rare, mais offre un débit de transfert de données maximal allant jusqu'à 200 Gbit/s pour des systèmes de pointe comme ceux du Laboratoire national d'Oak Ridge.
Spécifications techniques du FDR 56G
Tests de débit et de latence
Lors des tests de la technologie FDR InfiniBand 56G, le débit et la latence doivent être évalués afin de démontrer les performances optimales en environnement de calcul haute performance (HPC), grâce à la capacité de transmettre des données à 56 Gbit/s par liaison et d'assurer le transfert de données vers d'autres nœuds, même dans des conditions de charge de travail multiples moins complexes. Le débit ainsi obtenu permet de réaliser des simulations à grande échelle, l'entraînement de modèles d'apprentissage profond et des analyses financières en temps réel.
L'InfiniBand FDR offre une latence d'environ 0.7 microseconde, garantissant ainsi un flux de données rapide et constant, même en cas de simple interruption. Ce système est particulièrement avantageux lorsque des systèmes synchronisant des charges de travail doivent estimer le temps de traitement des données.
normes d'encodage 64b/66b
La norme de codage 64b/66b est essentielle pour les systèmes de transmission réseau à haut débit, notamment dans les environnements mixtes utilisant les technologies InfiniBand et Ethernet. Outre son objectif principal d'améliorer la détection des erreurs, cette norme de codage garantit également une efficacité de transmission des données optimale.
Le schéma 64b/66b fonctionne en convertissant 64 bits de données d'entrée en 66 bits de sortie respectifs, grâce à deux bits supplémentaires Cr appelés « délimiteurs de blocs ». Cette conception facilite la synchronisation des systèmes matériels de traitement des données, permettant ainsi de réduire la consommation de ressources système pour le décodage par rapport au schéma 8b/10b qui exigeait une surcharge de 25 %. En pratique, le système utilise le schéma 64b/66b avec une surcharge de seulement 3 % pour la transmission des données sur les liaisons de communication.
Principaux avantages et cas d'utilisation
Évolutivité dans les centres de données
L'une des caractéristiques les plus déterminantes des centres de données modernes est leur capacité d'adaptation, leur permettant de gérer les variations de performance et de fiabilité. Les centres de données doivent être évolutifs verticalement et horizontalement, selon les besoins spécifiques auxquels ils doivent faire face pour répondre à la demande croissante de données engendrée par le cloud computing, l'IA et l'IoT.
La scalabilité peut être horizontale, c'est-à-dire l'ajout de serveurs et de nœuds au réseau, ou verticale, c'est-à-dire l'augmentation de la puissance du matériel existant. Les grands centres de données hyperscale exploités par Google, Amazon, Microsoft, etc., mettent en œuvre des systèmes de refroidissement avancés, des architectures logicielles et des outils d'automatisation qui leur confèrent un avantage certain en matière de scalabilité.
Applications concrètes de la technologie InfiniBand 56G FDR
Calcul haute performance (HPC)
Là où les coûts de communication sont prohibitifs, la technologie 56G est privilégiée dans diverses applications de monétisation et d'analyse. InfiniBand tire pleinement parti de la faible latence requise. Lors de transferts rapides de données entre nœuds par des puces de traitement de données volumineuses pour des tâches de calcul intensives, des transferts de données continus à 56 Gbit/s sont fréquemment mis en œuvre. La création d'enregistrements, l'augmentation de la vitesse et la réduction significative du débit de transfert de données à 56 Gbit/s sont des représentations simplifiées de la réalité.
Charges de travail d'IA et d'apprentissage automatique
L'apprentissage et la mise en œuvre de l'IA impliquent d'importants échanges de données entre les GPU, les CPU et les systèmes de stockage. La technologie InfiniBand 56G FDR optimise ces échanges de données en éliminant les goulots d'étranglement, accélérant ainsi les flux de travail d'IA. Imaginez un gain de vitesse allant jusqu'à 40 % lors de l'entraînement des IA grâce à l'utilisation d'InfiniBand par rapport aux liaisons traditionnelles.
Principaux fournisseurs de services cloud
De plus en plus, les infrastructures cloud critiques s'appuient sur les réseaux InfiniBand 56G FDR pour des services de données performants et fiables, avec une latence ultra-faible. Les fonctionnalités RDMA d'InfiniBand permettent un partage efficace des ressources entre les machines virtuelles et le stockage distribué. De grandes entreprises comme Microsoft et Oracle, entre autres, déploient la technologie InfiniBand dans leurs infrastructures cloud hyperscale afin de garantir la continuité de leurs opérations sur leurs plateformes.
Compatibilité et intégration
Compatibilité ascendante et descendante dans l'écosystème InfiniBand
La technologie InfiniBand est conçue pour être compatible avec les générations futures de matériel. Par conséquent, la rétrocompatibilité est essentielle pour permettre à plusieurs générations de matériel de répondre à ses critères d'utilisation. Lors de la mise à niveau d'un système InfiniBand intégré, que ce soit par l'ajout d'extensions ou le remplacement d'un ancien appareil, une véritable rétrocompatibilité doit éviter d'avoir à effectuer une mise à niveau simultanément avec le matériel déjà installé.
En complément de la rétrocompatibilité architecturale, InfiniBand propose des normes basées sur des protocoles plus flexibles, garantissant ainsi la compatibilité avec tout futur matériel. Ces normes technologiques assurent la compatibilité lors de l'adoption de nouveaux débits tels que HDR (200 Gbit/s) ou NDR (400 Gbit/s). Une telle configuration garantit que même les nouveaux câbles et appareils fonctionnent avec les anciens modèles (à débits inférieurs).
Les bons composants pour des performances optimales
Le développement des activités liées à la production et leurs projets de recherche scientifique de pointe et de calcul haute performance imposent des exigences très élevées en matière de performances, considérées comme parmi les meilleures au monde. Par conséquent, le choix des composants adéquats est essentiel pour optimiser les performances de toute configuration. Ces composants comprennent généralement les processeurs, les interfaces d'interconnexion réseau, ainsi que les solutions de mémoire et de stockage.
D'après les analyses sectorielles les plus récentes, les systèmes InfiniBand HDR affichent des débits de transfert de données jusqu'à 200 % supérieurs aux autres solutions, ce qui les rend bien plus performants pour les applications gourmandes en données. Les technologies de mémoire progressent également, avec la HBM3 atteignant une bande passante de 819 Go/s. Elles trouveront leur place dans les charges de travail d'IA et d'apprentissage automatique, où la rapidité des transferts de données est essentielle pour garantir des performances optimales, même en temps réel et dans des délais très courts.
Analyse comparative avec d'autres normes
56G FDR vs. EDR InfiniBand
1. Bande passante et débit
La technologie InfiniBand 56G FDR est capable de transmettre des données à un débit maximal de 56 Gbit/s par voie, ce qui la rend parfaitement adaptée à de nombreuses charges de travail d'entreprise et de calcul haute performance (HPC). L'InfiniBand EDR a ensuite marqué un bond en avant significatif en termes de performances, offrant un débit de pointe de 100 Gbit/s par voie, soit le double du débit réel de l'InfiniBand FDR.
2. Amélioration de la latence :
La technologie EDR InfiniBand repousse encore les limites de la technologie FDR InfiniBand en réduisant la latence. Alors que la technologie FDR fonctionne avec une latence de 0.7 à 1 microseconde, la technologie EDR InfiniBand la diminue de plus de 100 nanosecondes, garantissant ainsi des temps de réponse ultrarapides, indispensables aux opérations de traitement rapides telles que les applications en temps réel et les simulations à très grande échelle.
3. Évolutivité et efficacité.
L'InfiniBand EDR est une autre solution pour connecter un ensemble plus vaste d'appareils au sein d'un module de communication nœud à nœud extrêmement étendu, offrant une bande passante exceptionnelle pour les réseaux haut de gamme, contrairement au système ED. Cette évolutivité vise principalement à gérer la charge croissante du système lors du déploiement de l'EDR, tout en garantissant des performances constantes.
Foire Aux Questions (FAQ)
Quelles sont les options disponibles pour les émetteurs-récepteurs QSFP InfiniBand FDR 56 Go ?
Les émetteurs-récepteurs Mellanox de grandes marques et les modules QSFP compatibles MSA de tiers garantissent une large gamme d'émetteurs-récepteurs QSFP InfiniBand 56G FDR. Les liaisons cuivre à connexion directe (DAC) sur de courtes distances (3 m, 5 m et 10 m) sont parfaitement adaptées aux architectures de type « chip-to-chip »/Top-of-Rack, tandis que les câbles optiques actifs (AOC) [pour des distances] allant jusqu'à 30 m (98 pieds) et leurs propres émetteurs-récepteurs optiques permettent un branchement direct sur le commutateur compatible et le port QSFP.
Quel est le meilleur choix : un DAC ou un câble optique actif pour les câbles Infiniband 56 GHz ?
Bien que les convertisseurs numérique-analogique (CNA) puissent être économiques pour les très courtes distances (généralement de 1 à 10 m, avec une excellente faible latence pour les modules QSFP FDR), les câbles optiques actifs (COA) et les émetteurs-récepteurs optiques permettent d'étendre considérablement cette portée (3 m, 5 m, 10 m, 30 m, 60 m, 98 pieds) et d'offrir une meilleure isolation contre les interférences électromagnétiques. Pour la bande InfiniBand 56G, les COA sont particulièrement adaptés aux déploiements où les connexions entre commutateurs ou entre commutateurs et clusters hyperconvergés dépassent la distance maximale autorisée pour le cuivre.
Jusqu'à quels modèles de commutateurs les modules QSFP Infiniband 56G FDR peuvent-ils être utilisés ?
Par exemple, Mellanox (désormais intégrée à NVIDIA) utilise fréquemment des modules QSFP InfiniBand 56G FDR avec ses commutateurs, mais les commutateurs Cisco et d'autres fournisseurs sont souvent compatibles avec les modules QSFP FDR. Lors de la consultation d'une matrice de compatibilité des commutateurs, les références QSFP d'un fournisseur agréé confirment que le firmware du commutateur prend en charge les débits 56G FDR.
Une liaison optique active peut-elle prétendre à un débit binaire complet de 56G, suffisant pour InfiniBand FDR ?
Oui, les ports InfiniBand FDR QSFP permettent l'agrégation de voies à 56 Gbit/s pour les protocoles FDR, via un câble optique actif certifié. Ce câble doit être conforme aux normes MSA et testé en usine sur les équipements Mellanox ou Cisco. Il est disponible en longueurs de 3 m, 5 m, 10 m, 30 m et 98 pieds, selon vos besoins.
