Состав инфраструктуры

Как строится ИИ-дата-центр

Допустим, вы строите кампус на базе GPU NVIDIA. Вот все компоненты, которые вам придётся приобрести, их производители и программное обеспечение, которое вы установите до выхода первого токена — каждое название ведёт на соответствующую запись.

Прочитайте эту страницу сверху донизу — и вы проследите реальную цепочку поставок: кремний → платы → стойки → кабели → охлаждение → питание → программное обеспечение → модель. Та же логика работает для любого ускорителя: замените первое звено, и остальная цепочка почти не меняется.

1 GPU — это целая цепочка поставок

«GPU от NVIDIA» — это, по сути, набор компонентов из пяти стран. NVIDIA разрабатывает чип и пишет программное обеспечение; почти всё физическое производство осуществляется другими компаниями.

Логические чиплеты (вычисления) TSMC 4NP process производится на Тайване на оборудовании, которое выпускает только ASML — ASML EUV Есть ли альтернативы TSMC? На передовом технологическом уровне — фактически нет: все флагманские AI-чипы сегодня производятся именно там. Два ближайших претендента: Samsung Foundry · Intel Foundry

Память (стеки HBM) SK hynix Micron Samsung восемь стеков на B200; распроданы примерно на год вперёд — HBM3E

Корпусирование (кристалл + память в одном модуле) TSMC CoWoS Amkor ASE этап, лимитировавший мировые поставки GPU в 2023–2024 годах

Сборка плат Foxconn Quanta модули SXM и платы суперчипов производятся тайваньскими производителями, а не NVIDIA

Подача питания на плате Monolithic Power Infineon Delta понижение напряжения стойки до ~1 В при токе свыше тысячи ампер на кристалл

Сетевые интерфейсы NVIDIA BlueField / ConnectX один NIC 400–800G на GPU — стандартная комплектация

Полные спецификации: B200 · GB200 · или проследить цепочку любого чипа на его странице записи.

2 Серверы и стойки

GPU поставляются в составе инженерных систем. На масштабе Blackwell стойка сама по себе является продуктом: 18 вычислительных модулей, 9 коммутационных модулей, один медный магистральный блок.

Система уровня стойки GB200 NVL72 HGX baseboards ~120 кВт на стойку — потребление сотни домов в габаритах шкафа

Кто производит Foxconn Quanta Wiwynn ODM для гипермасштабируемых облачных провайдеров…

…и кто их брендирует Supermicro Dell HPE Lenovo корпоративный канал с прилагаемыми сервисными контрактами

Коннекторы и ретаймеры Amphenol TE Connectivity Astera Labs тысячи высокоскоростных контактов на стойку; ретаймеры поддерживают сигналы PCIe на всём протяжении шасси

3 Кабельная инфраструктура

Вопрос, который все забывают задать. Три типа кабеля, три экосистемы поставщиков — и на уровне кластера стоимость кабельной инфраструктуры исчисляется сотнями миллионов.

Внутри стойки: медь Amphenol TE Connectivity Credo DAC и активные электрические кабели; только шина NVLink стойки NVL72 включает ~5 000 медных кабелей — свыше трёх километров на стойку

Между стойками: оптика 800G optics Coherent Lumentum Fabrinet разъёмные трансиверы — сотни тысяч на кластер; лазеры от производителей фотоники, сборка преимущественно в Таиланде

Само стекло Corning протяжённость волоконно-оптических кабелей в кампусах сегодня составляет миллионы километров

Коммутаторы, к которым всё подключается NVIDIA InfiniBand Spectrum-X Arista Broadcom silicon выбор между InfiniBand и Ethernet — главное архитектурное решение после самого GPU

Обучение: как 100 000 GPU становятся одним компьютером →

4 Охлаждение — и почему оно определяет всю карту

Вкратце

На чипе: холодные пластины Direct-to-chip CoolIT Boyd медные микроканальные пластины, закреплённые на каждом GPU, CPU и коммутаторном ASIC

В ряду стоек: CDU Coolant distribution units Vertiv Schneider (Motivair) Delta Насосно-теплообменные установки мощностью 2 МВт — категория оборудования, которой едва существовала в 2022 году

Отвод тепла Rear-door HX Immersion Munters сухие охладители, градирни или чиллеры снаружи; замкнутые контуры заполняются один раз и почти не расходуют воду

Сигнал о размещении: именно поэтому дата-центры исторически строились вблизи рек и озёр (испарительное охлаждение), а новое поколение с замкнутым контуром может размещаться в засушливых районах с дешёвой электроэнергией. Специалисты по подбору площадок определяют кампусы на картах именно по этим признакам — правам водопользования, высоковольтным коридорам, волоконно-оптическим трассам, прохладному климату. Обучение: куда идут дата-центры и почему →

5 Энергетический узел

Между электросетью и стойками — здание, полное оборудования с многолетними сроками поставки: как правило, именно оно определяет критический путь проекта.

Трансформеры и подключение к сети Hitachi Energy Siemens Energy Interconnection Сроки поставки 3–5 лет сделали эти устройства самым дефицитным оборудованием в отрасли

Распределительное оборудование, ИБП, шинопровод Eaton Schneider ABB Vertiv электрический хребет системы; стойки следующего поколения переходят к распределению постоянного тока 800 В

Резервное и транзитное электропитание Cummins Caterpillar Gas turbines Bloom fuel cells генераторы на случай отключений; целые турбинные установки там, где подключение к сети слишком долго ждать

Сами мегаватты Энергетические проекты Перезапуски АЭС Солнечная энергия + накопители сделки, питающие кампусы, — отображены в разделе «Электроэнергия»

Произведите расчёты самостоятельно: калькулятор мощности кластера →

6 Программное обеспечение, которое вы устанавливаете

Стойки поступают как металлические конструкции. Это стек в порядке сборки — и да, он начинается с Linux.

Операционная система Linux практически каждый AI-сервер в мире работает на нём — Ubuntu, RHEL или собственная сборка гипермасштабировщика

Драйверы и вычислительная платформа CUDA ROCm (AMD) XLA (TPU) слой, делающий кремний программируемым, — и самый глубокий ров в отрасли

Коммуникационная инфраструктура кластера NCCL Kubernetes Slurm Ray коллективные операции для синхронизации GPU; планировщики для совместного использования машины

Фреймворки для обучения PyTorch JAX Megatron DeepSpeed где фактически хранится код модели

Далее: установите свою модель Обучить одну или загрузить открытые веса vLLM TensorRT-LLM механизмы обслуживания превращают веса в токены в секунду — ради этого и строилось всё здание

Обучение: как обучают frontier-модель → · что происходит, когда вы нажимаете Enter →

Внутри гигантов: одна проблема, шесть решений

Все участники верхних уровней продают всем участникам нижних — но каждый крупный игрок по-своему интегрирует стек. Вот реальные конфигурации, собранные из тех же записей, что и весь остальной материал базы данных.

The vertical integrator

Google

The only player integrated from self-designed silicon to frontier model — no NVIDIA required anywhere in Gemini's path.

Вычисления TPU v7 Ironwood Trillium Its own TPUs — Ironwood for the inference era, Trillium in volume — plus NVIDIA GPUs rented out to Cloud customers.

Фабрика TPU pods Optics 3D-torus inter-chip links reconfigured by in-house optical circuit switches; the Jupiter network carries the data center.

Стойки и системы TPU pods Self-designed: the 9,216-chip pod, not the server, is the unit of hardware.

Охлаждение Direct-to-chip Direct liquid cooling on TPU pods since 2018 — the earliest big liquid fleet.

Электропотребление Kairos fleet Nuclear A giant renewables book, the first corporate SMR fleet order, and restart interest.

Программное обеспечение JAX XLA Linux + Borg orchestration underneath; JAX and XLA compile straight to TPU.

Модель и площадка Gemini 3 Council Bluffs Gemini 3 trained and served on TPUs end to end.

The alliance at NVIDIA scale

Microsoft + OpenAI

The biggest NVIDIA buyer builds 'AI factories' for its partner's models — with its own silicon waiting in the wings.

Вычисления GB200 H100 Maia 100 Frontier NVIDIA fleets — GB200 today atop huge H100 estates — with in-house Maia 100 in supporting roles.

Фабрика InfiniBand The world's largest InfiniBand deployments, flat networks spanning whole sites.

Стойки и системы GB200 NVL72 Foxconn Quanta ODM-built NVL72 racks and HGX servers from the Taiwanese manufacturers.

Охлаждение Fairwater Direct-to-chip Closed-loop direct liquid at Fairwater — fill once, near-zero water after.

Электропотребление Crane restart Constellation The Three Mile Island restart PPA (835 MW, 20 years) plus a 10.5 GW renewables framework.

Программное обеспечение DeepSpeed ONNX Runtime Linux + Azure's stack; DeepSpeed for training scale; ONNX for deployment.

Модель и площадка GPT-5 Fairwater Stargate GPT-5 trains and serves on this estate; Stargate adds OpenAI's own campuses.

The open-everything builder

xAI

The existence proof that a frontier cluster can be improvised in months — factory shell, gas turbines, batteries and all.

Вычисления H100 H200 ~100,000 H100s in 122 days, doubled since; GB200-class capacity at Colossus 2.

Фабрика Spectrum-X The flagship Spectrum-X Ethernet deployment — NVIDIA networking without InfiniBand.

Стойки и системы Supermicro Dell Supermicro and Dell liquid-cooled systems, delivered at sprint pace.

Охлаждение Direct-to-chip Direct liquid throughout — the density made air a non-starter on day one.

Электропотребление Gas turbines Colossus On-site gas turbines bridging the grid queue, Tesla Megapacks smoothing training spikes.

Программное обеспечение CUDA A lean in-house training stack on Linux and CUDA — small team, big machine.

Модель и площадка Grok 4 Colossus Grok 3 and 4 trained at Colossus; Grok ships inside X.

The custom-silicon bet

AWS + Anthropic

The clearest test of whether a hyperscaler's own chips can carry a frontier lab — half a million Trainiums and counting.

Вычисления Trainium2 UltraServer Trainium2 UltraServers at Project Rainier scale, beside NVIDIA fleets for customers.

Фабрика UltraServer NeuronLink inside the UltraServer; AWS's own EFA networking and Nitro offload beyond it.

Стойки и системы Annapurna/AWS Annapurna-designed, self-integrated — the cloud primitive as the building block.

Охлаждение Direct-to-chip Liquid-and-air mix tuned per hall across the Rainier sites.

Электропотребление Susquehanna X-energy Nuclear at Susquehanna, X-energy SMR backing, and the largest corporate renewables book.

Программное обеспечение PyTorch vLLM The Neuron SDK is the whole ballgame — porting the open stack to its own silicon.

Модель и площадка Claude 4.5 Project Rainier Claude trains at New Carlisle — and, uniquely, also runs on TPUs and GPUs elsewhere.

The embodied-AI factory

Tesla

Trains on video from millions of cars, ships the result back to them — with its own batteries steadying its own cluster.

Вычисления H100 Cortex The ~50,000-GPU Cortex cluster at Giga Texas; Dojo wound down for AI5/AI6 chips.

Фабрика 800G optics Ethernet-fabric clusters sized for video-scale data ingest.

Стойки и системы Supermicro Supermicro and Dell systems, plus purpose-built data-hall extensions of the factory.

Охлаждение Direct-to-chip A dedicated liquid-cooling plant built alongside the cluster.

Электропотребление Gas turbines Grid supply buffered by its own Megapacks — the manufacturer as its own customer.

Программное обеспечение PyTorch Vision-only training pipeline on PyTorch; models compile down to the car's FSD computer.

Модель и площадка Tesla FSD Samsung FSD v13+ ships over the air; AI5/AI6 silicon comes from Samsung and TSMC.

Разработка Annapurna, собственная интеграция — облачный примитив как базовый строительный блок.

Полный список наблюдений →

Конкурирующий чипы, платформенное поколение 2026–27, фотонные интерконнекты, ядерная волна и архитектурные ставки за пределами трансформера — отслеживаются с метками статуса в Watchlist.

Etched Sohu Lightmatter UALink HBM4 Rubin MI400 SMRs Список наблюдения →