Самая совершенная высокоскоростная сетевая технология – это Высокая скорость передачи данных (HDR) InfiniBand, который имеет несравненную скорость передачи данных и самую низкую задержку. В этом руководстве подробно рассматривается, как работает HDR Infiniband, чтобы читатели могли иметь четкое представление о его структуре, характеристиках производительности и практическом использовании. Благодаря подробному рассмотрению деталей и преимуществ, наблюдаемых на практике, этот документ предоставит достаточно информации, необходимой для использования HDR Infiniband в вашей сетевой инфраструктуре, чтобы обеспечить ее наилучшую производительность и правильное масштабирование. Если вы ИТ-специалист, сетевой инженер или просто человек, интересующийся технологиями – обязательно продолжайте читать! Мы собираемся рассказать все, что нужно знать о самых сложных современных сетевых решениях.
Что такое HDR Infiniband и как он работает?

Основы HDR Infiniband
HDR Infiniband, или Infiniband с высокой скоростью передачи данных, — это обновленная сетевая технология, которая может обеспечить скорость передачи данных до 200 Гбит/с на канал. Это достигается за счет быстрой передачи сигналов в сочетании с эффективным кодированием информации и методами переключения с малой задержкой. За основами InfiniBand следует HDR InfiniBand, который представляет собой архитектуру двунаправленного последовательного канала связи «точка-точка», использующую в качестве многоуровневой структуры физический уровень, транспортный уровень канальной сети и уровень приложений. Это также гарантирует безопасность передаваемых пакетов на более высоких скоростях за счет внедрения в систему более сложных возможностей обнаружения и исправления ошибок. Такое сочетание позволяет сетям хорошо работать при высоких нагрузках и при этом легко расширяться, что делает их идеальными для использования в корпоративных средах, где требуется большая вычислительная мощность, или в центрах обработки данных, работающих с большими объемами информации.
Роль Mellanox и NVIDIA в HDR Infiniband
В настоящее время Mellanox Technologies, подразделение NVIDIA, вносит существенный вклад в область технологии HDR Infiniband, что означает ее разработку и внедрение. Mellanox остается изобретательным под руководством NVIDIA, создавая суперсети, которые используют высокую производительность за счет использования возможностей HDR Infiniband. Например, они могут поддерживать передачу данных со скоростью до 200 Гбит/с на канал только с помощью специально разработанных для этой цели адаптеров и коммутаторов, при этом задержка сводится к минимуму, а пропускная способность оптимизируется на максимальных уровнях.
Некоторые ключевые технические параметры решений Mellanox HDR InfiniBand следующие:
- Скорость передачи данных: Методы сигнализации позволяют достичь скорости до 200 Гбит/с на канал.
- Задержка: Сквозная задержка очень мала, что необходимо для высокопроизводительных вычислений и приложений центров обработки данных.
- Коммутационная способность: Масштабируемые конфигурации сети требуют поддержки высокой пропускной способности, обеспечиваемой исключительной коммутационной способностью коммутаторов Mellanox HDR.
- Обнаружение и исправление ошибок: Передовые алгоритмы, используемые во время передачи, повышают надежность передачи данных, обеспечивая целостность.
- Энергоэффективность: Крупномасштабные сетевые операции выигрывают от устройств, оптимизирующих энергопотребление, например устройств Mellanox HDR InfiniBand.
Эти технологии важны для удовлетворения потребностей современных сред с интенсивным использованием данных, где надежность и высокая производительность имеют наибольшее значение. Благодаря поддержке ресурсов NVIDIA и опыту Mellanox оно каждый раз устанавливает новые рекорды, оставаясь при этом признанным среди других передовых сетевых решений.
Чем HDR Infiniband отличается от других версий
Предыдущие версии Infiniband, EDR (Enhanced Data Rate) и FDR (Fourteen Data Rate), существенно улучшены HDR (High Data Rate) Infiniband. Они отличаются по скорости передачи данных, задержке и общей эффективности сети. На канал HDR Infiniband поддерживает скорость передачи данных до 200 Гбит/с, что вдвое быстрее 100 Гбит/с, предлагаемых EDR, и намного выше 56 Гбит/с, предоставляемых FDR. Это увеличение скорости было достигнуто за счет более совершенных методов сигнализации, которые обеспечивают большую пропускную способность, сохраняя при этом целостность сигнала.
Еще одним важным отличием является задержка. Уже по этой причине HDR Infiniband идеально подойдет для высокопроизводительных вычислительных систем (HPC) или центров обработки данных, где даже малейшая задержка может привести к значительному снижению операционной эффективности. Сложная аппаратная конструкция в сочетании с оптимизированными протоколами обработки информации отвечают за столь низкие задержки, продемонстрированные этой технологией.
Более того, по сравнению со своими предшественниками, HDR Infiniband обеспечивает лучшее обнаружение ошибок, а также алгоритмы коррекции. Эти улучшения гарантируют отсутствие потерь или искажений во время передачи, что очень важно для приложений, требующих точной доставки информации.
Энергоэффективность вместе с повышенной коммутационной способностью — это еще две области, в которых HDR превосходит предыдущие версии. Коммутаторы, производимые Mellanox под названием «HDR», обладают огромными возможностями коммутации, позволяя легко масштабировать сети и, следовательно, поддерживать высокую пропускную способность, необходимую для растущих операций центров обработки данных; более того, устройства этого поколения были разработаны таким образом, чтобы не только оптимизировать энергопотребление, но и снизить его, что способствует созданию более устойчивых и дешевых сетевых структур.
Короче говоря: по сравнению с EDR или FDR – его предшественниками – мы видим, что HDR превосходит такие показатели, как скорость передачи информации, сокращение времени ожидания между различными этапами обработки пакетов или кадров, передаваемых по каналам, исправление ошибок, допущенных во время передача при меньшем потреблении электроэнергии, что делает его лучшим выбором для современных сред с интенсивным использованием данных.
Каковы преимущества HDR Infiniband?

Преимущества скорости и пропускной способности
HDR Infiniband имеет потрясающую скорость передачи данных 200 Гбит/с, что в два раза выше, чем у EDR Infiniband (100 Гбит/с), и почти в четыре раза быстрее, чем у FDR Infiniband (56 Гбит/с). Такое значительное увеличение скорости делает возможным быстрое перемещение и обработку фактов, что важно в высокопроизводительных вычислительных средах. Большая пропускная способность без ущерба для качества сигнала достигается за счет более совершенных методов передачи сигналов, используемых HDR Infiniband, что делает передачу данных более быстрой и надежной. В результате это позволяет более эффективно строить более крупные сети, а также повышает производительность приложений, требующих быстрой обработки больших объемов данных.
Низкая задержка и высокая пропускная способность
HDR InfiniBand — это подходящая технология для интенсивных вычислительных операций благодаря низкой задержке и высокой пропускной способности. Задержка может достигать всего 90 наносекунд, что важно для приложений реального времени, таких как научные исследования, финансовые услуги или машинное обучение. Вышеупомянутые могут обрабатывать до 200 миллионов сообщений в секунду (Mmsgs/s) за счет использования сложных структур, что позволяет передавать большие объемы информации без каких-либо существенных задержек.
Технические Характеристики:
- Задержка: ~90 наносекунд.
- Пропускная способность: До 200 ммс/с.
- Скорость передачи данных: 200 Гбит / с
Новые конструкции буферов, улучшенные алгоритмы маршрутизации и более быстрые пути передачи данных — вот некоторые архитектурные усовершенствования, стоящие за этими цифрами, оправданные их цифрами. Благодаря этой функции они не только сокращают время, затрачиваемое на перемещение из одного места в другое, но также сглаживают процесс транзита, предотвращая прерывания, тем самым удовлетворяя спрос на современную высокопроизводительную инфраструктуру центров обработки данных.
Надежная передача данных
HDR Infiniband обеспечивает надежную доставку данных благодаря использованию передовых методов поиска и исправления ошибок. Используя прямое исправление ошибок (FEC) и надежную тактику повторной передачи пакетов, он обеспечивает правильность информации, несмотря на шум и помехи. Кроме того, HDR Infiniband реализует сквозные правила качества обслуживания (QoS), которые определяют приоритет критически важных потоков данных, чтобы уменьшить потерю пакетов и гарантировать стабильную производительность. Эти функции совместно повышают надежность и эффективность передачи фактов, тем самым делая HDR InfiniBand самый надежный вариант для критически важных приложений в высокоскоростных вычислительных средах.
Чем HDR Infiniband отличается от Ethernet?

Infiniband против Ethernet: ключевые различия
При сравнении Ethernet и HDR Infiniband возникает ряд важных различий, которые делают HDR Infiniband лучшим выбором для сред высокопроизводительных вычислений (HPC):
- Задержка: Задержка в Ethernet измеряется в микросекундах, тогда как HDR Infiniband имеет значительно меньшую задержку (~ 90 наносекунд).
- Пропускная способность: Ethernet обеспечивает более низкую пропускную способность по сравнению с Infiniband, скорость передачи данных составляет 200 Гбит/с, а возможности — до 200 миллионов сообщений в секунду (Mmsgs/s).
- Эффективность: Несмотря на то, что InfiniBand предназначен для сетей более общего назначения, он оптимизирован для минимальной задержки, а также для эффективной связи.
- Качество обслуживания (QoS): Надежность или детализация могут отсутствовать при реализации QoS Ethernet, где необходима надежная приоритетная передача, что очень важно в среде HPC; поэтому эта функция использует расширенные протоколы, подобные тем, которые содержатся в стандарте HDR.
- Обработка ошибок: Целостность данных может поддерживаться Infiniband посредством прямого исправления ошибок (FEC), стратегий повторной передачи пакетов и других механизмов, но Ethernet также включает обработку ошибок, хотя она может быть недостаточно сложной.
- Стоимость и сложность: Для общих сетевых нужд Ethernet дешевле и проще в развертывании, чем Infinibands, стоимость которых выше из-за их специализированных функций, обеспечивающих высокую производительность; Кроме того, развертывание этих функций требует повышенной сложности процедур настройки, применимых в критически важных и научных вычислительных приложениях.
Практические примеры: когда следует выбирать Infiniband Over Ethernet
Кластеры высокопроизводительных вычислений
В средах высокопроизводительных вычислений (HPC) ключевыми факторами являются производительность и низкая задержка. Например, исследовательский центр может использовать климатические модели, требующие сложного моделирования. Чтобы обеспечить это, заведение остановилось на HDR Infiniband, который имеет сверхнизкую задержку (чуть выше 100 наносекунд) и высокую скорость (до 200 Гбит/с). Эти цифры сыграли важную роль в сокращении времени моделирования, тем самым уменьшив вероятность повреждения данных во время передачи, что необходимо для точных прогнозов глобального потепления.
Дата-центры для финансовой торговли
Финансовым учреждениям, участвующим в высокочастотной торговле, необходима практически мгновенная передача данных. Infiniband заменил Ethernet в модернизированных центрах обработки данных одной из ведущих финансовых компаний. Цифры меньше микросекунды, используемые Ethernet, не могут конкурировать с показателями чуть более 100 наносекунд, достигнутыми с помощью InfiniBand, когда дело касается скорости; следовательно, это нововведение позволило сократить время транзакций, тем самым давая им преимущество перед конкурентами на рынках.
Научные исследования и разработки
Геномные институты, а также те, кто занимается молекулярно-динамическим моделированием, обрабатывают большие объемы информации, требующей эффективной вычислительной мощности. Примером может служить случай, когда научно-исследовательский институт геномики перешел на Infiniband с Ethernet, поскольку посчитал протоколы QoS и механизмы обработки ошибок в Infiniband достаточно продвинутыми по сравнению с его аналогом, который, следовательно, считался лишенным таких возможностей, необходимых для поддержания целостности данных во время обширных упражнений по секвенированию генома.
Искусственный интеллект и машинное обучение
Обучающие кластеры искусственного интеллекта (ИИ) в значительной степени полагаются на использование полосы пропускания между узлами во время рабочих нагрузок машинного обучения; Таким образом, другая компания, занимающаяся этой областью, внедрила HDR Infiniband на базе Spock после перехода со своего предыдущего кластера обучения искусственного интеллекта. Это ускорило процесс, поскольку более высокая пропускная способность, связанная со скоростью 200 Гбит/с, означала более быстрое время завершения, а превосходная способность исправления ошибок сокращала общую продолжительность, затрачиваемую большими нейронными сетями на обучение, тем самым повышая уровень эффективности при разработке моделей в различных областях, где такие технологии применяются сегодня, например виртуальная частная сеть. сетевые сайты среди других.
Виртуализированные центры обработки данных
Инфраструктуры виртуализации часто испытывают трудности с постоянными уровнями производительности, но поставщик облачных услуг, работающий с такими средами, нашел ответ в HDR InfiniBand, который он включил в свою сетевую магистраль. Они сделали это, потому что Infiniband предлагает им то, что им нужно, а именно постоянную высокую пропускную способность наряду с сильными мерами QoS, которые имеют решающее значение для выполнения обязательств SLA, требуемых клиентами, доверившими им критически важные задачи хранения и обработки данных на общих серверах.
Эти примеры показывают, как организации решают, использовать ли Ethernet или Infiniband, исходя из требований к производительности, надежности и эффективности для конкретных приложений. Для критически важных систем, где важна каждая секунда, таких как системы, используемые в кластерах высокопроизводительных вычислений (HPC), низкая задержка становится существенной; таким образом, infinband становится лучшим вариантом, чем его аналог, поскольку последний не может достичь результатов ниже микросекунд.
Какие продукты и адаптеры доступны для HDR Infiniband?

Обзор продуктов Mellanox HDR Infiniband
NVIDIA теперь владеет компанией Mellanox, которая предоставляет различные продукты HDR Infiniband для высокопроизводительных вычислительных сред. Наиболее важными среди них являются:
- Адаптеры ConnectX-6: Эти карты обеспечивают скорость до 200 Гбит/с за счет расширенного контроля перегрузки, а также функций масштабируемости, подходящих для рабочих нагрузок искусственного интеллекта и машинного обучения.
- Квантовые переключатели: Коммутаторы Quantum HDR Infiniband способны обеспечить производительность, никогда ранее не встречавшуюся в этой отрасли; они делают это, предоставляя либо 40 портов по 200 Гбит/с каждый, либо 80 портов по 100 Гбит/с каждый, тем самым обеспечивая низкую задержку и огромную пропускную способность для приложений с интенсивным использованием данных.
- Кабели и трансиверы LinkX: LinkX предлагает как медные, так и оптические решения, позволяющие оптимизировать целостность сигнала, а также передачу данных на различные расстояния, что упрощает масштабирование соединений в центрах обработки данных.
Эти продукты в совокупности улучшают производительность сети, тем самым гарантируя надежную и эффективную передачу информации, необходимой для таких областей, как искусственный интеллект, машинное обучение и виртуализированные среды.
Популярные адаптеры и сетевые карты для HDR Infiniband
Адаптеры HDR InfiniBand и сетевые карты (NIC) необходимы для достижения максимальной производительности вычислений с высокой пропускной способностью и низкой задержкой. Вот некоторые из вариантов, которые вы можете выбрать:
Адаптер Mellanox ConnectX-6 HDR100
- Пропускная способность: 100 Гбит / с
- Задержка: Меньше 600 наносекунд.
Ключевые особенности:
- Разгрузка сетевых вычислений.
- Адаптивная маршрутизация для контроля перегрузок.
- Аппаратные функции безопасности.
Адаптер Mellanox ConnectX-6 HDR200
- Пропускная способность: 200 Гбит / с
- Задержка: Меньше 600 наносекунд.
Ключевые особенности:
- Расширенные возможности ускорения виртуализации.
- Мультихост и SR-IOV для эффективного использования ресурсов.
- Высокая масштабируемость, адаптированная для рабочих нагрузок искусственного интеллекта и машинного обучения.
Mellanox BlueField SmartNIC:
- Пропускная способность: 200 Гбит / с
- Задержка: Меньше 600 наносекунд.
Ключевые особенности:
- Интегрированные ядра Arm для гибкого программирования программного обеспечения.
- Идеально подходит для обеспечения безопасности, хранения и сетевых функций центра обработки данных.
- Внутрисетевые вычисления для сокращения времени выполнения приложений.
Техническое обоснование
Эти сетевые карты были выбраны, поскольку они обеспечивают большую пропускную способность и малые задержки, которые необходимы для рабочих нагрузок HPC (высокопроизводительные вычисления), характеризующихся огромными объемами данных. ConnectX-6 предлагает сильный контроль перегрузки, а также расширенную виртуализацию, что делает его очень универсальным в различных настройках. BlueField SmartNIC, с другой стороны, интегрирует больше процессорных ядер, тем самым обеспечивая большую гибкость и программируемость, необходимые для обработки сложных задач в среде центра обработки данных, одновременно повышая безопасность вокруг таких областей.
Это основано на их важности для обеспечения более быстрой обработки данных, высокой скорости передачи данных между системами, а также сокращения вычислительных задержек, что делает их идеальными для критически важных приложений.
Варианты кабелей QSFP56 и HDR
QSFP56 Опто-волоконный кабель
- Резюме: Небольшой высокоскоростной инструмент передачи данных с возможностью горячей замены называется QSFP56. Он был разработан для обеспечения большей пропускной способности за счет поддержки скорости до 200 Гбит/с.
Существо дела:
- Низкие вносимые потери, высокие обратные потери.
- Превосходная целостность сигнала для передачи данных на большие расстояния.
- Идеально подходит для центров обработки данных и высокопроизводительных вычислительных сред.
Применение:
- Идеально подходит для соединений Ethernet 200G и соединений InfiniBand HDR.
- Используется в местах, где требуется низкая задержка при высокой скорости передачи данных.
Медный кабель HDR
- Резюме: Высокоскоростные медные кабели (HDR) созданы для поддержки скоростных сетевых систем и при этом остаются экономически эффективными, поскольку предлагают решения для подключения на коротких расстояниях.
Бенефиты:
- Это дешево по сравнению с оптическими кабелями.
- Он потребляет меньше энергии.
- Прочный и надежный на коротких дистанциях передачи.
Применение:
- Оптимизирован для соединений между стойками в центрах обработки данных.
- Там, где высокая производительность зависит от низкой задержки и большой пропускной способности, необходимой для эффективной работы.
Активные оптические кабели (АОК)
- Резюме: Активные оптические кабели (АОК) преобразуют электрические сигналы в оптические с использованием активных электронных компонентов, а затем обратно, таким образом, они расширяют диапазон покрытия без ухудшения качества сигналов, как это происходит с медными проводами, поскольку по всей их длине расположены усилители.
Преимущества:
- Гораздо легче и меньшего размера.
- Лучшие характеристики затухания сигнала.
- Повышенная надежность на больших расстояниях.
Применение:
- Подходит для HPC и DCI — высокопроизводительных вычислений и соединений центров обработки данных.
- Чаще всего встречается в легких и гибких сценариях прокладки кабелей.
Кроме того, эти варианты работают с решениями Mellanox ConnectX-6 и BlueField SmartNIC, обеспечивая максимальную эффективность производительности в средах, где требуется передача данных с высокой пропускной способностью по широким сетям.
Как настроить HDR Infiniband в своей сети?

Действия по установке адаптеров HDR Infiniband
Подтвердите совместимость:
- Проверьте, может ли сервер и оборудование коммутатора работать с адаптерами HDR Infiniband.
Подтверждение прошивки и драйверов:
- Перекрестной проверкой убедитесь, что версия прошивки и драйвера подходят.
Установка адаптера:
- Выключите сервер.
- Вставьте адаптер HDR Infiniband в свободный слот PCIe.
- Закрепите адаптер с помощью винтов.
Кабельное соединение:
- Подключитесь через подходящий медный кабель HDR или AOC.
- Подключите кабель к адаптеру, а затем к соответствующему порту коммутатора.
Включение и загрузка сервера:
- Включите компьютер и войдите в настройки BIOS/UEFI.
- Убедитесь, что ваш новый адаптер обнаружен этим хост-компьютером (сервером).
Установка драйвера/прошивки:
- Включать; загрузиться в ОС (операционную систему).
- Подключитесь к Интернету и посетите веб-сайт производителя, чтобы загрузить и установить последние версии драйверов и встроенного ПО.
Конфигурация сети:
- Используйте инструменты управления сетью для настройки IP-адресов, а также других связанных параметров в сетевой среде.
- Оптимальная производительность также должна быть достигнута за счет правильного разбиения на подсети наряду с реализацией настройки VLAN.
Тестовое подключение:
- Запустите диагностику, чтобы убедиться, что адаптер работает правильно или нет.
- Проведите тесты пропускной способности и задержки, чтобы подтвердить достигнутые уровни производительности.
Эти рекомендации призваны помочь вам успешно установить адаптеры HDR Infiniband. Они обеспечивают высокопроизводительные сети, обеспечивающие высокую скорость при сохранении низких задержек.
Настройка коммутаторов и маршрутизаторов HDR
Подтвердите совместимость оборудования и прошивки
- Модель переключателя: Убедитесь, что переключатель HDR совместим с технологией Infiniband.
- Версия прошивки: Проверьте, обновлены ли коммутатор и маршрутизаторы для работы с рекомендуемыми версиями прошивки для поддержки HDR.
Первоначальная настройка и подключение
- Начальная конфигурация: Используйте интерфейс командной строки (CLI) коммутатора через его консольный порт.
- Прокладка кабеля: Установите соединения между соответствующими портами коммутаторов и маршрутизаторов с помощью кабелей HDR Infiniband.
Настройка сетевых параметров
- Назначение IP-адреса: Назначьте IP-адреса в подсети управления.
- Подсети и VLAN: Убедитесь, что каждый порт на каждом коммутаторе или маршрутизаторе имеет правильные настройки для подсетей, а также настроены VLAN.
Включить функции HDR
- Конфигурация скорости соединения: Установите скорость соединения Infiniband на 200 Гбит/с (HDR).
- Конфигурация порта: Настройте порты для режима HDR с помощью интерфейса командной строки или программного обеспечения для управления сетью.
Внедрение качества обслуживания (QoS)
- Настройки приоритета: Определите уровни приоритета для различных типов трафика, чтобы они получали адекватную поддержку соглашения об уровне обслуживания (SLA) на всех путях передачи в вашей сетевой инфраструктуре, тем самым обеспечивая постоянную максимальную производительность.
- Распределение пропускной способности: Выделите достаточные объемы/пропускную способность для потоков/потоков данных с минимальной задержкой, где это необходимо или применимо, принимая во внимание другие конкурирующие требования, такие как голосовые вызовы, которым могут потребоваться более высокие приоритеты, чем фоновые задачи, такие как резервное копирование данных, чтобы уменьшить потенциальные задержки, вызванные точками перегрузки. по этому пути соединения.
Мониторинг и диагностика
- Показатели эффективности: Постоянно отслеживайте такие показатели, как использование полосы пропускания, изменения задержки, а также потери пакетов из-за сбоев механизма контроля перегрузки и т. д. Все это ключевые показатели, необходимые при развертывании любых высокоскоростных сетевых каналов, таких как InfiniBand, чтобы вы могли отслеживать, все ли работает нормально. от начала до конца.
- Диагностические инструменты : В полной мере используйте встроенные диагностические инструменты, предназначенные для устранения неполадок, что повысит эффективность с точки зрения устранения проблемных областей, связанных с подключением, и в то же время проверит состояние работоспособности различных ссылок, участвующих в этой настройке.
Конфигурации безопасности
- Контроль доступа: Внедрите списки контроля доступа (ACL), чтобы разрешить доступ к вашим сетям только авторизованным пользователям или группам.
- Шифрование: Зашифруйте все данные, передаваемые по сети Infiniband, используя соответствующие протоколы шифрования.
Обоснование технических параметров
- Скорость соединения: Для высокопроизводительных приложений требуется HDR InfiniBand, поддерживающий скорость до 200 Гбит/с.
- Версия прошивки: Совместимость с последней прошивкой гарантирует поддержку и стабильность функций HDR.
- Тесты пропускной способности и задержки: Они используются для подтверждения того, соответствует ли данная сеть требуемым стандартам производительности, необходимым для технологии InfiniBand, с точки зрения пропускной способности и задержек.
Следуя этим подробным настройкам, вы оптимизируете свои коммутаторы и маршрутизаторы HDR для высокопроизводительной сети, что обеспечивает соединения с малой задержкой и высокую пропускную способность, подходящую даже для ресурсоемких приложений.
Устранение распространенных проблем с HDR Infiniband
Сбои в связи
- Проверьте физические соединения: убедитесь, что все кабели подключены правильно и нет видимых признаков повреждений.
- Обновления прошивки и драйверов: Убедитесь, что у вас установлены последние версии прошивки и драйверов для всех устройств Infiniband с веб-сайта производителя.
- Настройки для конфигурации: Убедитесь, что настройки переключателя HDR соответствуют указанным производителем, а также конфигурациям маршрутизатора, включая конфигурацию IP и настройку порта.
Проблемы с производительностью и задержкой
- Настройки качества обслуживания (QoS): Проверьте, нужно ли настроить параметры QoS, чтобы важные потоки данных имели приоритет над другими; неправильная конфигурация приведет к снижению производительности.
- Перегрузка сети: Определите, произошла ли перегрузка в вашей сети, проверив, демонстрируют ли некоторые ее части высокий уровень использования; перераспределять трафик или модернизировать инфраструктуру по мере необходимости.
- Диагностические инструменты: Используйте инструменты, встроенные в утилиты диагностики системы, для проверки пропускной способности и задержки; это помогает выявить узкие места, тем самым улучшая оптимизацию производительности.
Непрерывная связь
- Помехи и физическая среда: Убедитесь, что электромагнитные помехи вокруг кабелей, которые также должны быть правильно экранированы, сведены к минимуму.
- Совместимость оборудования: Убедитесь, что какое-либо устройство, используемое с HDR Infiniband, совместимо с ним, поскольку невыполнение этого требования может привести к периодическим ошибкам подключения.
- Журналы ошибок: Изучите журналы ошибок на предмет закономерностей или повторяющихся проблем, показанных в них, поскольку такие записи могут указывать на аппаратные сбои или ошибки настройки, которые следует немедленно исправить.
Систематически выполняя эти шаги один за другим, можно устранить большинство проблем, обычно возникающих в сети HDR InfiniBand, что обеспечит более высокую надежность в сочетании с максимальной производительностью на каждом уровне.
Справочные источники
Часто задаваемые вопросы (FAQ)
Вопрос: Какие преимущества имеет InfiniBand HDR по сравнению с другими сетевыми технологиями?
A: Более высокая скорость передачи данных, чем у традиционных решений Ethernet, меньшая задержка и лучшая масштабируемость — вот некоторые из основных преимуществ, предоставляемых InfiniBand HDR. Кроме того, он поддерживает как медные, так и оптические кабели, что обеспечивает гибкость в зависимости от конкретных сетевых потребностей.
Вопрос: Что могут коммутаторы Mellanox InfiniBand HDR Quantum QM87XX сделать для моей сети?
О: Оснащение вашей сети коммутаторами Mellanox InfiniBand HDR Quantum QM87XX обеспечивает возможности коммутации со сверхнизкой задержкой и высокой пропускной способностью. Эти коммутаторы предназначены для использования в крупномасштабных кластерных вычислительных системах и центрах обработки данных, где они повышают общую эффективность и производительность вашей сети.
Вопрос: Насколько быстрее InfiniBand HDR по сравнению с Gigabit Ethernet?
О: Когда дело касается скорости и задержки, Gigabit Ethernet отстает от InfiniBand HDR — и вот почему. В то время как Gigabit Ethernet достигает максимума в 1 Гбит/с (Гигабит в секунду), последний может достигать скорости до 200 Гбит/с (Гигабит в секунду). Помимо этой значительной разницы в скорости пропускной способности между ними, еще одним важным фактором, который стоит учитывать, является то, что при использовании hdr задержка гораздо меньше, чем при использовании ge; поэтому hdr более подходит для высокопроизводительных вычислительных систем, чем ge.
Вопрос: Может ли InfiniBand HDR работать с существующими сетями Ethernet?
О: Хотя в одном центре обработки данных можно использовать и InfiniBand HDR, и Ethernet, это разные технологии. Иногда вы можете без проблем использовать сетевые адаптеры и коммутаторы, поддерживающие как Ethernet, так и InfiniBand. Однако для достижения максимальной производительности в нормальных условиях следует использовать специальные продукты InfiniBand HDR.
Вопрос: Какова цель модулей 200G QSFP56 в сетях InfiniBand HDR?
О: Модули 200G QSFP56 помогают передавать данные на очень высоких скоростях в сетях InfiniBand HDR. Эти модули имеют пропускную способность до 200 Гбит/с и обычно используются в активных оптических кабелях вместе с другими оптическими решениями для повышения эффективности и надежности сети.
Вопрос: Как торговая ассоциация InfiniBand способствует развитию технологии InfiniBand HDR?
A: Обязанность разработки и продвижения стандартов для использования в отрасли находится в юрисдикции органа, известного как Infiniband Trade Association (IBTA). Этот орган играет важную роль в продвижении перспективных инноваций в этой области, таких как Infiband HDR, обеспечивая при этом совместимость продуктов между предложениями различных поставщиков, тем самым создавая благоприятную среду, которая поддерживает быстрый рост за счет расширенных возможностей подключения для предприятий, вовлеченных в сетевое взаимодействие с использованием таких систем.
Вопрос: Что вы понимаете под активными оптическими кабелями и как они функционируют при включении в сеть InfiniBand HDR?
О: Активные оптические кабели (АОК) представляют собой один тип среди нескольких других, которые составляют те быстрые типы, которые способны передавать на большие расстояния в сетях Infinband HDR; они используются там, где электрические сигналы сначала должны быть преобразованы в световые лучи, чтобы они могли распространяться дальше, прежде чем снова преобразовываться в точках назначения из света обратно в электрическую форму, что дает нам все преимущества, связанные с наличием уровней производительности оптического кабеля, но при этом сохраняя простоту использования традиционного медного кабеля.
Вопрос: Где можно купить продукты InfiniBand HDR?
О: Есть много мест, где можно приобрести продукты InfiniBand HDR. Одним из примеров является HPE Store US среди других поставщиков и интернет-магазинов. Такие компании, как Mellanox и HPE, производят различные типы коммутаторов, сетевых карт, а также кабели для Infiniband hdr для удовлетворения различных сетевых потребностей.
Вопрос: Чем InfiniBand HDR отличается от Omni-Path с точки зрения производительности?
О: Хотя Omni-Path и infiniband hdr являются высокопроизводительными сетями, infiniband hdr имеет более высокую скорость передачи данных, которая может достигать 200 Гбит/с с меньшими задержками, чем сети, связанные с omni path. Кроме того, Infiniband HDR также пользуется более широким распространением у многих поставщиков, что делает его более универсальным в средах многих центров обработки данных.
рекомендую прочитать:https://www.fibermall.com/blog/what-is-infiniband-network-and-difference-with-ethernet.htm
Сопутствующие товары:
-
Совместимый с NVIDIA MMA4Z00-NS400 400G OSFP SR4 Flat Top PAM4 850 нм 30 м на OM3/50 м на OM4 MTP/MPO-12 Многомодовый модуль оптического трансивера FEC $650.00
-
NVIDIA MMA4Z00-NS-FLT Совместимый двухпортовый OSFP 800 Гбит/с 2x400G SR8 PAM4 850 нм 100 м DOM Двойной модуль оптического трансивера MPO-12 MMF $850.00
-
NVIDIA MMA4Z00-NS Совместимый двухпортовый OSFP 800 Гбит/с 2x400G SR8 PAM4 850 нм 100 м DOM Двойной модуль оптического трансивера MPO-12 MMF $750.00
-
NVIDIA MMS4X00-NM Совместимый двухпортовый OSFP 800 Гбит/с 2x400G PAM4 1310nm 500m DOM Dual MTP/MPO-12 SMF Модуль оптического трансивера $1100.00
-
Совместимый с NVIDIA MMS4X00-NM-FLT 800G Twin-port OSFP 2x400G Flat Top PAM4 1310nm 500m DOM Dual MTP/MPO-12 SMF Модуль оптического трансивера $1200.00
-
Совместимый с NVIDIA MMS4X00-NS400 400G OSFP DR4 Flat Top PAM4 1310nm MTP/MPO-12 500m SMF FEC Модуль оптического трансивера $800.00
-
Mellanox MMA1T00-HS, совместимый с 200G Infiniband HDR QSFP56 SR4, 850 нм, 100 м, MPO-12, модуль оптического приемопередатчика APC OM3/OM4 FEC PAM4 $200.00
-
NVIDIA MCA7J60-N004 Совместимый кабель длиной 4 м (13 футов) 800G с двумя портами OSFP для 2x400G OSFP InfiniBand NDR Breakout Active Copper Cable $800.00
-
NVIDIA MCP7Y60-H01A Совместимый пассивный кабель прямого подключения 1.5 м (5 футов) 400G OSFP к 2x200G QSFP56 $116.00
-
Mellanox MCP1600-E00AE30 Совместимый 0.5-метровый InfiniBand EDR 100G медный кабель прямого подключения QSFP28-QSFP28 $25.00
-
Плата адаптера NVIDIA Mellanox MCX653106A-ECAT-SP ConnectX-6 InfiniBand/VPI, HDR100/EDR/100G, двухпортовый QSFP56, PCIe3.0/4.0 x16, высокий кронштейн $828.00
-
Плата адаптера NVIDIA Mellanox MCX653105A-ECAT-SP ConnectX-6 InfiniBand/VPI, HDR100/EDR/100G, однопортовый QSFP56, PCIe3.0/4.0 x16, высокий кронштейн $965.00