0%
Оптические технологии
Оставить
заявку
Дистрибьютер и интегратор технологических решений
Меню

Оптическая инфраструктура 400G/800G для ЦОД и AI-кластеров

Оптическая инфраструктура 400G/800G в ЦОД: MPO/MTP-коммутация и приёмка канала OLTS
SEO-позиционирование: Эта страница должна дополнять общую посадочную страницу «Инфраструктура ЦОД и ИИ», а не заменять её. Основной поисковый кластер статьи - высокоскоростная оптика, 400G/800G, MPO/MTP, бюджет потерь и измерительная приёмка.

Оптическая сеть как основа производительности AI-инфраструктуры

В современном центре обработки данных производительность вычислительной платформы зависит не только от серверов, GPU и систем хранения. Критическим элементом становится сеть, через которую перемещаются обучающие выборки, параметры моделей, результаты коллективных операций, резервные копии и пользовательский трафик. Чем больше вычислительных узлов объединено в кластер, тем выше требования к пропускной способности, задержке, стабильности и предсказуемости каждого оптического соединения.

Переход от 100G к 400G и 800G нельзя сводить к простой замене трансиверов. Необходимо заранее согласовать топологию фабрики, типы портов, варианты breakout, волоконную среду, разъёмы, полярность, допустимый бюджет потерь, плотность кроссов и методику приёмки. Ошибка в одном из этих элементов способна ограничить скорость дорогого оборудования, усложнить масштабирование или вызвать нестабильные ошибки, которые трудно локализовать после запуска.

OPTECH помогает заказчикам в Казахстане формировать оптическую инфраструктуру для корпоративных ЦОД, colocation-площадок, облачных платформ, высокопроизводительных вычислительных систем и AI-кластеров. В проект могут входить пассивные компоненты, претерминированные сборки, ODF и высокоплотные панели, тестовые приборы, измерительная приёмка, маркировка, документация, обучение и дальнейшее сервисное сопровождение.

Почему 400G/800G требуют другого подхода к проектированию

На скоростях 400G и 800G возрастает чувствительность к качеству всей линии. При использовании многоканальной передачи, PAM4, параллельной оптики и высокоплотных разъёмов значение имеют не только длина и тип волокна, но и число соединений, отражения, точность полярности, состояние торцов, качество кабельной сборки и соответствие реальной схемы выбранному трансиверу.

Для AI-кластера характерен интенсивный трафик east-west между вычислительными узлами. Сеть должна обеспечивать масштабирование без резкого роста числа уровней и без перегрузки отдельных участков. Поэтому оптическая архитектура рассматривается совместно с leaf-spine фабрикой, сетями front-end и back-end, подключением систем хранения, резервированием и планом расширения.

  • больше портов высокой скорости в ограниченном пространстве стойки и кроссовой зоны;
  • повышенные требования к потере и отражению на каждом соединении;
  • необходимость поддерживать breakout - например, деление одного высокоскоростного порта на несколько портов меньшей скорости;
  • сложные схемы полярности MPO/MTP и риск несовместимости сборок разных типов;
  • обязательная инспекция и очистка каждого торца перед соединением;
  • потребность в документированной приёмке пассивного тракта и активного интерфейса.

Сначала архитектура и сценарии, затем кабель

Проектирование начинается с карты потоков и портов. Для каждой связи фиксируются начальная и конечная точки, требуемая скорость, тип интерфейса, длина, резервирование и допустимое время простоя. После этого выбираются трансиверы, способ подключения и пассивная инфраструктура. Обратный подход - сначала купить кабель, а затем пытаться согласовать его с оборудованием - часто приводит к переходникам, лишним соединениям и потере запаса по бюджету.

Основные сетевые контуры ЦОД и AI-кластера

  • Back-end или compute fabric - высокопроизводительная сеть между GPU/CPU-узлами, где особенно важны пропускная способность и стабильная задержка.
  • Front-end сеть - доступ приложений, пользователей и внешних сервисов к вычислительной платформе.
  • Storage fabric - обмен с системами хранения, загрузка данных и запись результатов.
  • Management и out-of-band - управление оборудованием, мониторинг и аварийный доступ.
  • DCI - соединение между залами, зданиями или отдельными площадками ЦОД.

Для каждого контура могут применяться разные скорости и среды. Короткое соединение внутри стойки может быть реализовано DAC или AOC, межстоечный тракт - претерминированной оптикой, а DCI - одномодовой линией с серийной или когерентной передачей. Единая спецификация должна показывать, где заканчивается активное оборудование и начинается зона ответственности пассивной инфраструктуры.

Как построить план миграции 100G → 400G → 800G

Инфраструктуру ЦОД обычно используют дольше, чем одно поколение коммутаторов. Поэтому при новом строительстве или модернизации важно оценивать не только текущую скорость, но и следующий этап. Правильно выбранные магистральные кабели, модульные кассеты и высокоплотные панели позволяют менять интерфейсные модули и схемы подключения без полной замены кабельных трасс.

1. Зафиксировать текущие и перспективные скорости. Определяются порты серверов, leaf- и spine-коммутаторов, системы хранения и DCI, а также срок предполагаемой миграции.

2. Проверить варианты breakout. Некоторые 800G-модули и порты поддерживают разбиение на 2×400G, 4×200G или 8×100G. Конкретная схема зависит от платформы, трансивера и кабельной сборки и должна быть подтверждена по документации производителя.

3. Выбрать базовую структуру волокон. Для параллельных интерфейсов критичны количество волокон, тип MPO/MTP, полярность и возможность повторного использования магистрали при следующей скорости.

4. Заложить резерв портов и волокон. Резерв должен быть физически организован, промаркирован и отражён в документации, а не оставлен в виде неучтённого кабеля.

5. Определить правила приёмки. Для каждого типа линии задаются допустимые потери, методы OLTS/OTDR, контроль полярности, инспекция торцов и активные тесты.

DAC, AOC, OM4/OM5 или OS2: какую среду выбрать

Универсального варианта для всех расстояний и плотностей не существует. Выбор среды зависит от длины, скорости, энергопотребления трансиверов, возможности замены кабеля, требований к обслуживанию и будущего роста. Внутри одного AI-кластера могут одновременно применяться DAC, AOC, многомодовое и одномодовое волокно.

СредаГде применятьПреимуществаОграничения
DACКороткие соединения внутри стойки или между соседними устройствамиНизкая задержка, нет отдельных оптических модулей, экономичностьОграниченная длина, масса и радиус изгиба, зависимость от совместимости портов
AOCКороткие и средние соединения в стойке или рядуЛегче меди, удобная готовая сборка, стабильные заводские параметрыАктивная сборка меняется целиком, ограниченная ремонтопригодность
OM4/OM5Внутризальные и межстоечные связи с многомодовыми трансиверамиВысокая плотность, удобство параллельной оптики, распространённость OM4Дальность зависит от стандарта интерфейса, больше требований к launch condition и тестированию
OS2Межстоечные, межзальные, кампусные и DCI-соединенияБольшой запас по расстоянию, широкая совместимость с серийной оптикой, удобная миграция скоростейСтоимость трансиверов и требования к чистоте/отражению
Гибридная схемаКрупные ЦОД и AI-кластеры с разными зонамиОптимизация стоимости и энергии по каждому участкуТребует строгой документации и унификации компонентов

Для нового высокоплотного ЦОД одномодовая OS2 часто рассматривается как стратегическая магистраль благодаря запасу по расстоянию и поддержке последовательных интерфейсов. Многомодовая OM4 остаётся практичным вариантом для определённых коротких связей и параллельной оптики. OM5 имеет смысл только при подтверждённом сценарии и совместимых трансиверах: сама маркировка OM5 не делает линию автоматически быстрее.

LC и MPO/MTP: разъёмы, базовая ёмкость и полярность

LC duplex используется в последовательных оптических интерфейсах и удобен там, где один передающий и один принимающий канал обслуживают порт. MPO/MTP объединяет несколько волокон в одной ферруле и применяется для параллельной передачи, высокоплотных магистралей и breakout-сборок. Выбор зависит не от эстетики кросса, а от оптического интерфейса и плана миграции.

Что необходимо закрепить в проекте MPO/MTP

  • количество волокон в разъёме: 8, 12, 16, 24 или другая конфигурация;
  • тип феррулы, ключа и полировки - UPC или APC;
  • male/female и наличие направляющих штифтов;
  • метод полярности A, B или C и правила для кассет, trunk и harness;
  • назначение каждого волокна Tx/Rx для конкретного трансивера;
  • совместимость Base-8, Base-12 и Base-16 внутри всей линии;
  • схема breakout и маркировка каждого ответвления.

Смешивание компонентов с разной логикой полярности может дать физически собранную, но неработающую линию. Поэтому OPTECH рекомендует фиксировать полярность не только в спецификации, но и на маркировке кассет, trunk-кабелей и fan-out сборок. После монтажа полярность проверяется прибором, а не только визуально.

Трансиверы и интерфейсы: SR, DR, FR, LR, ZR

Обозначение трансивера определяет среду, количество оптических каналов, рабочую длину волны, дальность и разъём. Интерфейсы класса SR обычно ориентированы на короткие внутридатацентровые соединения, DR и FR - на одномодовые линии разной дальности, LR - на более протяжённые участки, а ZR/ZR+ - на когерентное межсоединение площадок. Конкретные параметры необходимо брать из документации выбранного оборудования и стандарта интерфейса.

Для 800G широко используются форм-факторы OSFP и QSFP-DD800. Часть модулей поддерживает breakout на несколько портов меньшей скорости. Это влияет на количество волокон, тип коннектора и кабельную сборку. Нельзя выбирать trunk только по надписи «800G»: два модуля одинаковой скорости могут иметь разные оптические интерфейсы и требовать принципиально разных кабелей.

Проверка совместимости перед закупкой

  • поддерживается ли модуль конкретной моделью коммутатора и версией ПО;
  • какой форм-фактор и тепловой режим требуется порту;
  • какой тип волокна, разъём и полировка используются;
  • какая дальность и максимальный бюджет канала допустимы;
  • какие breakout-режимы доступны и нужен ли специальный harness;
  • какие показатели DOM/DDM и FEC доступны для диагностики.

Бюджет оптических потерь и инженерный запас

Бюджет канала рассчитывается до закупки компонентов. В него входят потери в волокне, коннекторах, кассетах, сварных соединениях, адаптерах и других пассивных элементах. Из допустимого бюджета трансивера вычитаются расчётные потери и эксплуатационный запас. Если проект существует только «на границе», загрязнение одного торца или добавление временного соединения может вывести канал за пределы нормы.

Для высокоскоростных одномодовых интерфейсов важно учитывать не только суммарные потери, но и отражение отдельных событий. Короткая линия с небольшим общим IL может работать нестабильно из-за плохого коннектора с высокой рефлектансностью. Поэтому приёмка должна сочетать OLTS, OTDR и инспекцию торцов.

Что включить в расчёт

  • максимальную длину и затухание выбранного типа волокна;
  • все соединённые пары, кассеты и переходы;
  • потери на сварках и возможных ремонтных участках;
  • разброс параметров компонентов и температурные условия;
  • резерв на эксплуатационные изменения и старение;
  • ограничения конкретного трансивера по мощности и отражению.
Практическое правило: Чем выше скорость и плотность, тем опаснее использовать «средние» паспортные значения. В проекте применяются гарантированные максимальные параметры компонентов, а фактическая линия подтверждается измерениями PASS/FAIL.

Высокоплотные ODF, кассеты и кабель-менеджмент

В AI-кластере количество оптических соединений быстро растёт. Плотность нельзя увеличивать за счёт ухудшения доступа к портам, перегибов шнуров и перекрытия воздушного потока. Кроссовая система должна поддерживать обслуживание одного канала без воздействия на соседние, понятный маршрут патч-корда и возможность заменить кассету или добавить trunk без остановки всей зоны.

  • модульные ODF и кассеты с понятной нумерацией портов;
  • фронтальный и боковой кабель-менеджмент с контролем радиуса изгиба;
  • патч-корды точной длины, чтобы исключить бухты перед оборудованием;
  • разделение рабочих и резервных трасс;
  • цветовая и текстовая маркировка по единому стандарту;
  • резерв портов, но без неучтённых свободных соединений;
  • исполнительная схема, связанная с идентификаторами результатов тестирования.

Претерминированные сборки сокращают время монтажа и дают заводскую повторяемость параметров, но требуют точного планирования длины, направления протяжки, полярности и запаса. Для сложных маршрутов иногда оправдано сочетание trunk-сборок и сварных участков.

Гигиена коннекторов: инспектировать, очищать, снова инспектировать

Загрязнение торца остаётся одной из самых частых причин проблем в оптических сетях. Пыль, следы касания или остатки чистящего материала увеличивают потери и отражения, а при соединении могут повредить оба коннектора. На MPO/MTP риск особенно высок из-за большой площади феррулы и нескольких волокон.

Рабочий регламент должен включать принцип inspect-before-connect: каждый торец проверяется видеомикроскопом, при необходимости очищается и проверяется повторно. Используются подходящие one-click инструменты, безворсовые материалы и адаптеры под конкретный тип разъёма. Результат инспекции желательно сохранять вместе с протоколом линии.

  • не подключать новый патч-корд без инспекции обоих концов;
  • не считать защитный колпачок гарантией чистоты;
  • не использовать один и тот же очиститель для несовместимых феррул;
  • не повторять сухую чистку бесконечно - при сложном загрязнении применять согласованную влажно-сухую процедуру;
  • не подключать повреждённый торец к дорогому трансиверу.

Измерительная приёмка пассивной инфраструктуры

Приёмка должна отвечать на два вопроса: соответствует ли вся линия допустимому бюджету и где находятся отдельные события, которые могут стать источником проблем. Для этого применяются взаимодополняющие методы.

ЭтапИнструментЧто проверяетсяРезультат
ИнспекцияВидеомикроскоп и средства очисткиЧистота и состояние торцов LC/MPO/MTPИзображение и PASS/FAIL по принятому критерию
Tier 1 / BasicOLTS или измеритель потерь и источникСуммарные вносимые потери, длина и полярностьПротокол соответствия бюджету приложения
Tier 2 / ExtendedOTDR с корректными launch/receive кабелямиПотери и отражение отдельных событий, трасса, длинаКарта событий и локализация дефектов
Активный тестEthernet/OTN/BER-тестер и совместимые модулиBER/FER, FEC, потеря кадров, задержка, устойчивость под нагрузкойПодтверждение готовности сервиса 100/400G и поддерживаемых режимов

OLTS является базовым инструментом для подтверждения суммарных потерь и длины. OTDR не заменяет OLTS, а дополняет его: показывает расположение соединений, сварок, изгибов и отражающих событий. Для коротких одномодовых линий с жёстким бюджетом особенно важно корректно настроить диапазон, импульс и референсные кабели, иначе прибор может скрыть близко расположенные события.

Для MPO/MTP необходимо проверить каждое волокно, полярность и соответствие каналов. Автоматические многофибровые системы ускоряют измерение и снижают риск перепутать номера волокон. Все результаты должны иметь идентификатор, совпадающий с маркировкой на обоих концах линии.

Тестирование активных каналов 400G и 800G

Сертифицированный пассивный тракт ещё не гарантирует работу сервиса, если трансиверы, FEC, настройки порта или прошивка несовместимы. Перед вводом критичных соединений выполняется активный тест с реальными модулями или специализированным тестером. Для 400G и 800G проверяются поддерживаемые режимы, стабильность линка, счётчики FEC, ошибки, потеря кадров и поведение под длительной нагрузкой.

  • считывание параметров DOM/DDM: мощность Tx/Rx, температура, напряжение и ток;
  • проверка BER/FER и динамики corrected/uncorrected FEC;
  • генерация трафика на требуемой скорости и размере кадров;
  • измерение задержки, потери и устойчивости в течение заданного времени;
  • проверка breakout-ветвей и соответствия портов;
  • в лаборатории или производстве - анализ качества сигнала, джиттера, eye diagram и TDECQ, если это входит в задачу.

Для 800G необходимо заранее проверить наличие у тестовой платформы соответствующих портов, form factor, режимов PAM4 и программных опций. Если полноценный 800G-тестер пока не входит в комплект эксплуатации, проект должен предусматривать процедуру заводской или выездной приёмки и понятный набор критериев для поставщика.

Межсоединение ЦОД: 400ZR/ZR+ и переход к 800G

Для DCI применяются одномодовые линии и когерентные pluggable-модули. 400ZR ориентирован на стандартизированные сценарии межсоединения ЦОД, а ZR+ расширяет доступные дальности и режимы. Появление 800ZR/800G coherent увеличивает пропускную способность одного порта, но одновременно повышает требования к оптическому тракту, спектральному плану, совместимости модулей и процедуре тестирования.

На DCI-линии недостаточно измерить только мощность. В зависимости от архитектуры проверяются длина волны, спектр, OSNR, BER/FEC, параметры Ethernet/OTN и стабильность под нагрузкой. OPTECH может комплектовать проект пассивными компонентами, оптическими анализаторами, измерителями мощности, BER- и Ethernet/OTN-тестерами, а также методиками приёмки.

Как OPTECH реализует проект высокоскоростной оптики

1. Сбор исходных данных. Планы залов и стоек, модели активного оборудования, матрица портов, расстояния, требования SLA, этапы роста и сроки запуска.

2. Проектирование архитектуры. Выбор OS2/OM4, LC или MPO/MTP, Base-8/Base-12/Base-16, модульных ODF, trunk и breakout-сборок, резервных трасс и маркировки.

3. Расчёт бюджета. Проверка каждого типа канала по максимальным потерям и отражениям с эксплуатационным запасом.

4. Комплектация. Кроссы, кассеты, адаптеры, патч-корды, претерминированные кабели, средства очистки, инспекции и измерительные приборы.

5. Монтаж и документирование. Прокладка, укладка, маркировка, контроль радиусов, актуализация схем и портовой матрицы.

6. Приёмка. Инспекция, OLTS, OTDR, проверка полярности, активные Ethernet/OTN/BER-тесты и формирование отчётов.

7. Обучение и сервис. Передача регламентов, обучение персонала, калибровка приборов, расширение инфраструктуры и поддержка после запуска.

Частые ошибки при построении 400G/800G-инфраструктуры

1. Выбор кабеля без привязки к трансиверу. Одинаковая скорость не означает одинаковый оптический интерфейс. Необходимо проверять разъём, число каналов и тип волокна.

2. Смешивание полярностей MPO/MTP. Компоненты могут физически соединиться, но каналы Tx/Rx не совпадут или breakout будет работать частично.

3. Отсутствие запаса по потерям. Линия проходит расчёт только по типичным значениям, но не выдерживает реальные максимальные потери и эксплуатационные изменения.

4. Слишком много соединений. Лишние кассеты, адаптеры и временные патч-панели уменьшают бюджет и повышают риск загрязнения.

5. Игнорирование отражения. Суммарный IL может быть допустимым, но один плохой коннектор вызывает нестабильность высокоскоростного интерфейса.

6. Проверка только индикатором Link Up. Ссылка может подняться, но работать с высоким уровнем corrected FEC, ошибками или потерей производительности.

7. Неполная исполнительная документация. Без точной карты портов и результатов измерений поиск дефекта превращается в перебор кабелей.

8. Кросс высокой плотности без удобства обслуживания. Слишком плотная укладка ухудшает доступ, нарушает радиусы изгиба и увеличивает вероятность случайного отключения.

Таблица подбора решения по сценарию

СценарийРекомендуемая средаКлючевые компонентыОбязательная приёмка
Внутри стойкиDAC или AOC, иногда короткая оптикаСовместимые кабели, фиксация и управление радиусом изгибаПроверка совместимости, DOM/FEC и тест под нагрузкой
Сервер - leafAOC, OM4 или OS2 по интерфейсу и расстояниюLC или MPO/MTP, breakout, точная длина патч-кордовИнспекция, полярность, OLTS; активный тест критичных портов
Leaf - spineOM4 для выбранных коротких интерфейсов или OS2 для универсальной магистралиВысокоплотные ODF, претерминированные trunk, резервные волокнаOLTS + OTDR, проверка всех волокон и активный BER/Ethernet-тест
400G/800G AI fabricOS2 или OM4 в зависимости от модулей и архитектурыOSFP/QSFP-DD, MPO/MTP или LC, breakout-сборки, ultra-low-loss компонентыИнспекция, бюджет потерь, Tier 1/2, FEC/BER и длительный нагрузочный тест
Межзальное соединениеПреимущественно OS2ODF, LC/MPO, защищённые маршруты, резервированиеДвунаправленный OLTS/OTDR и активный тест сервиса
DCI 400ZR/ZR+ и 800G coherentOS2, при необходимости DWDM-трактКогерентные модули, ODF, WDM-компоненты, мониторинг мощности и спектраМощность, длина волны, спектр/OSNR, BER/FEC, Ethernet/OTN

Чек-лист перед закупкой

  • Получены точные модели коммутаторов, сетевых адаптеров и поддерживаемых трансиверов.
  • Для каждого порта определены скорость, расстояние, резервирование и breakout.
  • Выбраны OS2/OM4/OM5, LC или MPO/MTP и единая схема полярности.
  • Рассчитан бюджет потерь по максимальным значениям компонентов.
  • Согласованы форм-факторы OSFP/QSFP-DD и тепловые ограничения оборудования.
  • Определены ODF, кассеты, trunk, harness, патч-корды и маркировка.
  • Заложен физический резерв портов и волокон под следующий этап.
  • Подготовлены методики инспекции, OLTS, OTDR и активного тестирования.
  • Формат протоколов связан с идентификаторами линии и исполнительной схемой.
  • Назначены ответственные за чистку, обслуживание и контроль изменений после запуска.

Полезные ссылки

Нужна оптическая инфраструктура 400G/800G для ЦОД или AI-кластера? Отправьте матрицу портов, план стоек или перечень оборудования. Инженеры OPTECH подготовят архитектуру, спецификацию компонентов, расчёт бюджета потерь, программу приёмки и коммерческое предложение по Казахстану.

Частые вопросы

Нужно ли сразу строить всю сеть на 800G?
Нет. Скорость выбирается по реальной архитектуре и плану роста. Важно, чтобы магистраль, панели и схема волокон позволяли перейти на 800G без полной переделки трасс.
Что лучше для ЦОД - OM4 или OS2?
OM4 эффективна для ряда коротких внутридатацентровых интерфейсов. OS2 обеспечивает больший запас по расстоянию и широкую совместимость с последовательной оптикой. Решение принимается по трансиверам, длинам и стоимости жизненного цикла.
OM5 обязательна для 400G и 800G?
Нет. Поддержка скорости зависит от конкретного стандарта и трансивера. OM5 оправдана только при подтверждённом сценарии, а не как универсальная замена OM4.
Можно ли использовать MPO-12 для Base-8?
Можно применять переходные кассеты и harness, но часть волокон может оставаться неиспользованной. Для нового проекта следует сравнить Base-8, Base-12 и Base-16 по текущей и будущей архитектуре.
Почему линия проходит OLTS, но порт показывает ошибки?
OLTS подтверждает суммарные потери, но проблема может быть связана с отражением отдельного события, загрязнением, трансивером, FEC, несовместимостью или настройками порта. Нужны OTDR и активный тест.
Достаточно ли проверить канал одним OTDR?
Нет. OTDR характеризует события и трассу, но не заменяет двунаправленное измерение суммарных потерь OLTS. Для полной приёмки методы применяются совместно.
Как проверять MPO/MTP?
Необходимо инспектировать феррулу, измерить каждое волокно, подтвердить полярность и сопоставить номера каналов с трансивером. Удобнее использовать многофибровую автоматизированную систему.
Что означает высокий corrected FEC?
Коррекция FEC исправляет часть ошибок, но рост corrected FEC может указывать на уменьшение запаса канала. Важно анализировать динамику, оптическую мощность, загрязнение, соединения и качество трансиверов.
Можно ли повторно использовать существующую оптику при миграции на 400G?
Да, если тип волокна, длина, потери, отражения, полярность и разъёмы соответствуют новому интерфейсу. Существующую линию необходимо повторно сертифицировать.
Что передать OPTECH для расчёта?
Матрицу портов или список оборудования, планы стоек, расстояния, текущие и будущие скорости, требования к резервированию, предполагаемые трансиверы и сроки запуска. При отсутствии данных специалисты помогут сформировать опросный лист.

Мы используем файлы cookie, чтобы сайт работал быстрее и был удобнее для вас. Продолжая пользоваться сайтом, вы соглашаетесь с их использованием.