Cisco готовит ИИ-стойки с жидкостным охлаждением. Зачем оно нужно и серверам, и сети

25 августа Cisco объявила о расширении Secure AI Factory с NVIDIA: в предложение добавляются серверы Supermicro и сквозное жидкостное охлаждение вычислительного и сетевого оборудования. Cisco планирует включить эти системы в свою линейку в октябре 2026 года.

Стойка — шкаф, в котором закреплены серверы, сетевые устройства и распределители питания. В ИИ-системе несколько серверов могут совместно обучать модель или обрабатывать запросы. Чем больше мощных компонентов помещают в один шкаф, тем больше тепла нужно отвести с небольшой площади.

В разборе SiliconANGLE обсуждаются плотные конфигурации с потреблением свыше 200 кВт на стойку. Фактическая мощность зависит от состава оборудования и нагрузки; это не общая характеристика всей линейки Cisco.

Для масштаба возьмём ровно 200 кВт: столько потребляют сто чайников по 2 кВт, включённых одновременно. Если такая мощность сохраняется круглые сутки в течение 30 дней, расход составит 144 МВт·ч. Это расчёт для заданной постоянной нагрузки, без энергии на внешнее охлаждение и прочие системы площадки.

Почти вся энергия, потребляемая вычислительным оборудованием, превращается в тепло. Поэтому к стойке недостаточно подвести подходящий кабель: тепло нужно непрерывно отводить. Доступная электрическая мощность и охлаждение площадки определяют, можно ли установить эту конфигурацию вообще.

В воздушной системе вентиляторы прогоняют воздух через горячие компоненты. При высокой плотности оборудования становится труднее подвести достаточно холодного воздуха к каждому из них и удалить нагретый. Жидкость позволяет забирать тепло непосредственно рядом с компонентом.

К процессору или другому горячему узлу прижимается металлическая пластина с каналами для охлаждающей жидкости. Насос обеспечивает движение жидкости, теплообменник передаёт собранное тепло дальше — в систему охлаждения площадки. Тип жидкости и устройство внешнего контура зависят от проекта.

Внутренний контур стойки поэтому не заменяет систему отвода тепла из здания. Помещению также может требоваться воздушное охлаждение для компонентов, которые не подключены к жидкости.

Когда модель работает на нескольких серверах, они постоянно передают друг другу промежуточные данные. Коммутаторы — устройства, соединяющие серверы в сеть, — тоже потребляют электричество и выделяют тепло. Их охлаждение становится частью проекта всей стойки.

В пояснениях Cisco к анонсу описан общий подход к вычислениям, сети, питанию и жидкостному охлаждению. Серверы Supermicro и сетевое оборудование подбираются как части одной системы.

Вместе с оборудованием Cisco анонсировала Validated Infrastructure Services — услугу проверки установленной инфраструктуры. Специалисты должны подтвердить, что система собрана по проекту и соответствует эталонной архитектуре NVIDIA. Компания также планирует использовать собственную крупную ИИ-лабораторию для разработки инструментов и программ такой проверки.

Cisco включает в общие средства наблюдения показатели вычислений, сетевых карт, оптики и сети. Инженер сможет сопоставлять их с состоянием выполняемого задания и искать, в какой части системы возникла задержка. При распределении модели между многими ускорителями это позволяет разбирать работу всей установки, а не только отдельных серверов.