Центры обработки данных для ИИ и волоконно-оптическая инфраструктура

В связи с широкомасштабным коммерческим внедрением базовых моделей генеративного ИИ, структура сетевого трафика в современных центрах обработки данных для ИИ претерпела фундаментальные изменения. Традиционные архитектуры центров обработки данных, ориентированные на трафик «север-юг», больше не могут удовлетворять требованиям к производительности высокоплотных вычислительных нагрузок ИИ. Массивный трафик «восток-запад», генерируемый параллельными вычислениями между графическими процессорами, выявляет критические ограничения медных кабелей, включая ограниченную пропускную способность, высокую задержку и чрезмерное энергопотребление, что является узким местом для крупномасштабных задач обучения и вывода ИИ. Оптоволоконная инфраструктура эволюционировала из базовой среды передачи сигналов в традиционных облачных центрах обработки данных в основной компонент, определяющий общую вычислительную эффективность кластеров графических процессоров. В данной статье рассматриваются тенденции роста трафика ИИ за последнее десятилетие, анализируются три поколения модернизаций сетевой архитектуры центров обработки данных, адаптированных для рабочих нагрузок ИИ, и приводятся практические спецификации оптоволоконных кабелей для основных развертываний Ethernet 400G, 800G и следующего поколения 1.6T. Подтвержденные полевыми данными из четырех глобальных регионов, эти документы количественно оценивают повышение производительности, включая снижение PUE, оптимизацию задержки и сокращение операционных расходов, достигаемое благодаря полностью оптическим кабельным решениям, и предоставляют исчерпывающие инженерные рекомендации по планированию, развертыванию и будущему расширению сети центров обработки данных для ИИ.

Архитектура сети оптических волоконно-оптических сетей для вычислений с использованием искусственного интеллекта

К 2026 году задачи искусственного интеллекта достигли зрелости, выйдя за рамки лабораторной проверки, и стали основным двигателем глобальной модернизации инфраструктуры центров обработки данных. В отличие от традиционных задач в публичных облаках, где преобладают запросы на доступ пользователей, обучение и вывод данных в рамках ИИ имеют две отличительные характеристики сети. Во-первых, для работы одного кластера графических процессоров требуются тысячи вычислительных узлов для выполнения параллельных синхронных вычислений со сверхчастым обменом данными между узлами. Во-вторых, межузловой трафик данных экспоненциально возрастает во время обновления параметров больших моделей. Статистика отраслевого мониторинга подтверждает, что каждая полная итерация больших базовых моделей удваивает трафик межсетевой сети и общие вычислительные потребности кластера.

Традиционные медные кабели не обеспечивают синхронизацию тактовой частоты в наносекундном масштабе, необходимую для синхронизированных вычислений на графических процессорах, из-за присущего им затухания электрического сигнала и дрожания синхронизации. Сегодня все гипермасштабные суперкомпьютерные центры искусственного интеллекта по всему миру придерживаются философии проектирования сетей, ориентированной на оптические технологии. Основное узкое место в производительности современных кластеров ИИ больше не заключается в возможностях аппаратного обеспечения графических процессоров или коммутационных чипов, а в плотности полосы пропускания оптического канала, стабильности сквозной задержки и равномерных оптических потерях по всей сети. Для сетевых инженеров и системных интеграторов центров обработки данных выбор научно обоснованных волоконно-оптических кабелей и иерархически структурированное развертывание оптических сетей имеют решающее значение для раскрытия всей вычислительной мощности кластеров графических процессоров.

Первопричины взрыва трафика ИИ

Десять лет назад ежедневный трафик внешнего доступа между центрами обработки данных предприятий в направлении «север-юг» составлял десятки терабайт. В 2026 году полная задача автономного обучения для моделей, эквивалентных триллиону параметров GPT-5, генерирует до 2-3 петабайт внутренних интерактивных данных между чипами GPU в день. Непрерывное взаимодействие параметров градиента и синхронизация тензорных данных в реальном времени предъявляют жесткие и не подлежащие обсуждению технические требования к пропускной способности сети и стабильности задержки.

Традиционные архитектуры Ethernet в сочетании с медными кабелями не могут поддерживать высокоскоростную передачу сигналов со скоростью выше 400 Гбит/с. Присущее им затухание сигнала и дрожание тактовой частоты напрямую приводят к рассинхронизации тактовой частоты в кластерах с несколькими графическими процессорами, что приводит к эффективному снижению вычислительной мощности более чем на 20%. В таблице ниже приведены данные о масштабе параметров, вариациях трафика и поддерживающих решениях на основе оптоволоконных магистральных сетей для основных моделей ИИ с 2015 по 2026 год, демонстрирующие неизбежную тенденцию замены электрических сетей полностью оптическими сетями в отрасли.

Приведенные выше статистические данные о трафике ясно доказывают, что пропускная способность сети стала решающим узким местом, ограничивающим производительность кластеров с графическими процессорами. В соответствии с действующими коммерческими техническими спецификациями, только оптоволоконные среды могут удовлетворить трем непреложным требованиям для гипермасштабных кластеров ИИ: сверхвысокая пропускная способность, стабильная задержка менее наносекунды и стабильно низкое оптическое затухание по всей коммутационной матрице.

Итерации трех поколений сетевых архитектур центров обработки данных

Традиционные сетевые архитектуры центров обработки данных разработаны для внешнего доступа в направлении «север-юг», что не позволяет адаптироваться к потребностям в передаче больших объемов данных по сети «восток-запад» между узлами с графическими процессорами в кластерах искусственного интеллекта. Глобальная индустрия центров обработки данных прошла три полных этапа итерации сетевой архитектуры, и каждое обновление архитектуры требует соответствующей модернизации базовых систем оптоволоконной кабельной сети.

● Трехуровневая архитектура «ядро-агрегация-доступ» (традиционный этап центра обработки данных) : Эта архитектура использует многоуровневую логику пересылки с многочисленными сетевыми переходами и низкой общей плотностью оптоволоконных кабелей. Она не поддерживает горизонтальное соединение крупномасштабных вычислительных узлов и полностью выведена из эксплуатации во всех вновь строящихся центрах обработки данных для ИИ;

● Распределенная архитектура Leaf-Spine (этап публичного облачного центра обработки данных) : Все коммутаторы Leaf и Spine полностью взаимосвязаны для решения масштабных задач переадресации трафика между облачными сервисами. Эта архитектура требует большого количества магистральных оптоволоконных линий связи большой протяженности и служит переходной формой сети от традиционных облачных центров обработки данных к центрам обработки данных с мощными вычислительными мощностями для искусственного интеллекта;

● Архитектура суперкластера AI Mesh (этап внедрения в центры обработки данных для вычислений с использованием ИИ в 2025 году) : Все узлы с графическими процессорами используют прямое соединение по принципу полной сетки без коммутаторов, чтобы минимизировать количество промежуточных узлов пересылки данных в сети, при этом в качестве основного стандарта проектирования используется сквозная задержка на уровне наносекунд. Обязательными являются модульные системы оптоволоконной кабельной разводки MTP/MPO высокой плотности, и эта архитектура стала единым стандартом сетевой архитектуры, принятым ведущими мировыми кластерами для обучения ИИ.

В бесперебойной полносетчатой ​​архитектуре для ИИ незначительные отклонения задержки, вызванные непостоянной длиной волоконно-оптических кабелей и потерями при подключении разъемов, напрямую снижают эффективность синхронных вычислений на массивах графических процессоров. Соответственно, прокладка волоконно-оптических кабелей одинаковой длины по всей сети и использование пассивных компонентов с низкими потерями являются обязательными требованиями к проектированию кабельных систем для центров обработки данных, работающих с ИИ, а не дополнительными мерами по оптимизации производительности.

Оптическое волокно в центрах обработки данных с использованием ИИ: классификация, применение и выбор.

В сочетании с новейшими стандартами высокоскоростного Ethernet IEEE 802.3df и 802.3dj, выпущенными в 2025 году, и опытом строительства передовых глобальных центров обработки данных для ИИ, в этой главе классифицируются четыре наиболее широко используемых оптоволоконных кабеля в современных центрах обработки данных для ИИ. Она предоставляет инженерам стандарты выбора, применимые в различных условиях, включая дальность передачи, совместимость скоростей, место развертывания и стоимость всего жизненного цикла, что позволяет избежать распространенных ошибок при выборе кабелей в проектах по прокладке на месте.

Многомодовое оптическое волокно OM4

● Основные оптические и электрические параметры : Поддерживает стабильную передачу параллельных оптических сигналов 400 Гбит/с на расстоянии до 100 метров, имеет более низкую общую стоимость сырья и совместим с оптическими модулями VCSEL;

● Фиксированные сценарии применения : соединение на коротких расстояниях между серверами с графическими процессорами и коммутаторами доступа TOR внутри шкафов, прямые каналы связи на коротких расстояниях внутри вычислительных модулей ИИ;

●  Примечания инженера по выбору : Использование устаревшего многомодового оптического волокна OM3 запрещено для всех высокоскоростных линий связи малой дальности со скоростью выше 400 Гбит/с; широкополосное многомодовое оптическое волокно OM5 не обеспечивает повышения производительности в сценариях параллельной оптической передачи с использованием искусственного интеллекта на одной длине волны, поэтому крупномасштабное развертывание не рекомендуется для контроля общих капитальных затрат;

● Объективные инженерные ограничения : Невозможно обеспечить передачу сигнала на средние и большие расстояния между шкафами и модулями; затухание оптического сигнала резко возрастает, когда расстояние передачи превышает 100 метров.

Одномодовое оптическое волокно стандарта OS2

●  Основные оптические и электрические параметры : Соответствует международным стандартам ITU-T G.652.D, обеспечивает стабильную передачу высокоскоростного оптического сигнала 800G на расстояние до 2 километров с крайне малыми колебаниями потерь в линии связи;

● Стационарные сценарии применения : горизонтальное соединение между шкафами в архитектуре «лист-магистраль», магистральные каналы связи средней и большой протяженности внутри суперкомпьютерных модулей для ИИ;

● Примечания инженера по выбору : Для всех межблочных соединений длиной более 100 метров следует повсеместно использовать одномодовое оптическое волокно OS2; это волокно обратно совместимо со всеми коммерческими оптическими модулями от 100G до 800G и обладает отличной совместимостью для расширения сети.

G.654.E Сверхнизкопотерное одномодовое оптическое волокно

● Основные оптические и электрические параметры : Затухание в линии составляет всего 0,17 дБ/км, что снижает потери в линии на 30% по сравнению с обычным одномодовым оптическим волокном OS2 и обеспечивает стабильную передачу сверхскоростных оптических сигналов следующего поколения со скоростью 1,6 Тл на большие расстояния;

● Фиксированные сценарии применения : каналы межцентрового соединения (DCI), магистральные каналы межзданий кластеров вычислений ИИ, каналы агрегации на большие расстояния между коммутаторами магистрали;

●  Примечания по отбору инженеров : Обязательно для пилотных центров обработки данных мощностью 1,6 Тл и крупных кластеров ИИ, охватывающих несколько зданий; несмотря на более высокую себестоимость закупки, это значительно сокращает количество развертываемых оптических усилителей и существенно снижает долгосрочные эксплуатационные расходы и затраты на техническое обслуживание.

Высокоплотный параллельный оптоволоконный магистральный кабель MTP/MPO

● Основные оптические и электрические параметры : Интегрированные кабели с заводской предварительной обработкой, имеющие 12, 16 и 24 жилы, поддерживают многоканальную параллельную передачу оптического сигнала 100G; унифицированная заводская шлифовка торцов обеспечивает контролируемую стабильность потерь в сети;

● Стационарные сценарии применения : прямые каналы связи между серверами с графическими процессорами, полномасштабные оптические сети для ИИ, зоны с высокой плотностью кабельной разводки в суперкомпьютерных модулях;

●  Примечания инженера по выбору : Кабели MTP-16 предпочтительны для прямых соединений 400G/800G с графическими процессорами; во время строительства необходимо использовать кабели одинаковой длины по всей сети, чтобы исключить отклонения задержки соединения; гибридные разветвительные кабели MTP-LC имеют приоритет в проектах гибридных сетей при реконструкции устаревших центров обработки данных.

Единые глобальные принципы выбора оптического волокна

● Внутрикабинные каналы связи 0–100 м : Использование многомодового оптического волокна OM4 для баланса между стоимостью закупки оборудования и производительностью передачи;

● Межблочные каналы связи 100–2000 м : повсеместно используется одномодовое оптическое волокно стандарта OS2 для обеспечения полной совместимости с сетевым оборудованием;

● Для линий связи длиной более 2000 м между центрами обработки данных : в обязательном порядке использовать одномодовое оптическое волокно G.654.E со сверхнизкими потерями;

● Крупномасштабные кластеры GPU с полной топологией : оптические кабели MTP/MPO с высокой плотностью предварительной обвязки — единственное решение, отвечающее требованиям как к высокой плотности кабельной разводки, так и к стабильности задержки во всей сети.

Количественное сравнение производительности

В устаревших центрах обработки данных все еще используется небольшое количество медных кабелей DAC для передачи данных на короткие расстояния, однако такие электрические среды передачи больше не могут удовлетворить требованиям высокоскоростных сетей с высокой плотностью и сверхнизкой задержкой, предъявляемым центрами обработки данных для ИИ. На основе наиболее распространенной сетевой среды 400G в таблице ниже приведено количественное сравнение четырех основных показателей, включая дальность передачи, энергопотребление в рабочем режиме, теплоотвод и дрожание задержки, между медными и волоконно-оптическими кабелями, объективно демонстрирующее незаменимую ценность полностью оптических кабелей в сценариях ИИ.

Измерения, проведенные в глобальных сверхкрупномасштабных вычислительных парках, показывают, что замена всех медных линий связи на оптоволоконные снижает общий показатель PUE (эффективность использования энергии) центра обработки данных на 0,07–0,10. Для вычислительного парка искусственного интеллекта с установленной мощностью 100 МВт это позволит ежегодно сокращать выбросы углекислого газа на сотни тонн. Оптоволоконные кабельные системы стали основной инфраструктурой для центров обработки данных в сфере ИИ, обеспечивая баланс между высокой производительностью вычислений и требованиями к энергосбережению с низким уровнем выбросов углерода.

Оптоволоконная связь при работе кластера графических процессоров

● Смещение синхронизации тактовой частоты узлов GPU : Несогласованные значения потерь между каналами связи вызывают смещение времени приема пакетов каждым узлом GPU, что приводит к общему снижению эффективной вычислительной мощности на 10–15%;

● Ускоренное старение коммерческих оптических модулей : Оптические модули должны активно увеличивать мощность лазерного излучения для компенсации дополнительных потерь в линии, что приводит к постоянному увеличению тепловыделения оборудования и сокращению общего срока службы оборудования на 30%;

● Недостаточный запас коррекции ошибок в сети : Избыточные потери в канале связи занимают собственный запас FEC сетевого оборудования, резко увеличивая вероятность случайной потери сетевых пакетов во время пиковой нагрузки сервиса искусственного интеллекта.

Ввиду вышеуказанных рисков, предварительно проверенные на заводе пассивные оптические волоконно-оптические компоненты с низкими потерями и планирование унифицированной прокладки оптических волокон одинаковой длины по всей сети являются обязательными стандартами строительства кабельных систем центров обработки данных для искусственного интеллекта, а не дополнительными мерами по оптимизации.

Решения FiberMart для центров обработки данных с поддержкой ИИ

Компания FiberMart предлагает стандартизированные и специализированные оптоволоконные кабели, охватывающие все сценарии межсоединений на разных уровнях, от серверных портов с графическими процессорами до магистральных сетей парков, адаптированные для сценариев с полной скоростью передачи данных 400G, 800G и 1,6T. Все оборудование перед поставкой проходит 100% тестирование на точность интерферометрического оптического контроля, при этом геометрический допуск наконечников контролируется в пределах ±0,5 мкм, что соответствует требованиям высокоточной сетевой инфраструктуры кластеров искусственного интеллекта.

● Предварительно оконечные магистральные оптические кабели MTP/MPO : совместимы с тремя стандартными полярностями A/B/C, типичные вносимые потери менее 0,20 дБ, подходят для кабельной разводки кластеров графических процессоров высокой плотности;

● Дуплексные перемычки LC с низкими потерями : потери на отражение на торце превышают 55 дБ, доступны перемычки одинаковой длины по индивидуальному заказу для оптимизации стабильности задержки во всей сети;

● Кабель MMC/MDC : Сверхкомпактные двухжильные оптические соединительные кабели высокой плотности, занимающие минимальное пространство в шкафу для проводки, с типичными потерями на входе менее 0,18 дБ, идеально совместимые с высокоскоростными оптическими модулями 800G/1.6T для внутренней межсоединительной связи на коротких расстояниях в шкафах для ИИ-вычислений;

● Кабель Fiber Shuffle : Специально разработанные оптические кабели с неупорядоченной перестройкой волокон, обеспечивающие нулевые дополнительные потери в линии связи, поддерживают гибкую реконструкцию топологии портов и идеально подходят для быстрой настройки сетевой архитектуры и развертывания полномасштабных линий связи в кластерах суперкомпьютеров на графических процессорах без вторичной перекладки проводов;

●  FAU (Fiber Array Unit) : отличается сверхнизким уровнем перекрестных помех и стабильной оптической связью, разработан для бортовых оптических соединений и интегрированной оптики, удовлетворяя требованиям высокоскоростной оптической передачи данных для ИИ следующего поколения;

● Полные комплекты инструментов для очистки и тестирования оптического волокна : соответствуют международным стандартам эксплуатации и технического обслуживания IEC 61300, обеспечивая ежедневную точную проверку высокопроизводительных оптических линий связи с искусственным интеллектом.

Все оптоволоконные компоненты FiberMart поддерживают систему отслеживания жизненного цикла с помощью QR-кодов, что отвечает требованиям унифицированной эксплуатации и технического обслуживания, а также быстрой локализации неисправностей для сотен тысяч оптоволоконных линий в крупных центрах обработки данных для искусственного интеллекта.

Заключение

Графические процессоры (GPU) служат вычислительным ядром центров обработки данных для ИИ, а полнодиапазонная оптоволоконная инфраструктура образует нерв передачи сигнала всей вычислительной сети ИИ. Фактический предел вычислительной мощности крупномасштабных кластеров GPU определяется не производительностью аппаратного обеспечения, а общим качеством передачи данных по нижележащим оптоволоконным каналам связи. С постепенным внедрением высокоскоростного Ethernet 1,6T и технологий CPO (Combined Optics) оптоволоконная инфраструктура охватит все каналы передачи данных в вычислительной сети ИИ.

Для операторов центров обработки данных и инженеров полевых сетей стандартизированный выбор волоконно-оптических кабелей, единообразная конструкция каналов связи с низкими потерями и модульная полностью оптическая коммутационная сеть являются незаменимыми для максимизации производительности аппаратного обеспечения графических процессоров. FiberMart продолжит разработку высокоточных, с низкими потерями и обратно совместимых оптических межсоединительных устройств, обеспечивая надежную комплексную оптическую сетевую инфраструктуру для создания и развития глобальных центров вычислений в области искусственного интеллекта.

Часто задаваемые вопросы

Почему нельзя использовать медные кабели для организации сети кластера графических процессоров на больших расстояниях?

A: Медная электрическая передача имеет присущие ей ограничения по пропускной способности и расстоянию, сопровождающиеся высокой задержкой и чрезмерным выделением тепла, что не позволяет удовлетворить требованиям синхронизации тактовой частоты на наносекундном уровне и требованиям высокоскоростной передачи данных со скоростью выше 400 Гбит/с для кластеров графических процессоров.

Как быстро выбрать многомодовые или одномодовые оптические волокна для центров обработки данных, использующих искусственный интеллект?

A: Для внутрикабинных коротких линий связи на расстояние до 100 метров использовать многомодовые оптические волокна OM4; для межкабинных линий связи средней протяженности от 100 метров до 2 километров использовать одномодовые оптические волокна OS2; для магистральных линий связи на большие расстояния более 2 километров использовать одномодовые оптические волокна G.654.E со сверхнизкими потерями.

Каков средний цикл окупаемости инвестиций при модернизации медных сетей до полностью оптических?

А: Средний статический период окупаемости для проектов полной модернизации оптических систем составляет 18 месяцев, что обусловлено снижением энергопотребления при передаче электроэнергии и сокращением времени простоя при эксплуатации и техническом обслуживании. Цикл окупаемости инвестиций еще больше сократится с ростом мировых цен на электроэнергию.

Можно ли напрямую модернизировать устаревшую оптоволоконную кабельную сеть для работы в сетях 800G и 1,6T?

A: Модульные оптоволоконные магистральные системы MTP/MPO со стандартизированным управлением полярностью поддерживают повышение скорости сети только за счет замены активных устройств на входе без изменения базового кабельного оборудования, что обеспечивает однократное развертывание кабельной сети и плавную итерацию сети в течение нескольких поколений.

Опубликовано 27 мая 2026 г. Франсиско,  Fibermart . Все права защищены.