Meta рассказала, как охлаждает ИИ-серверы одной и той же водой по десять лет
В новых ИИ-дата-центрах Meta охлаждающая жидкость ходит по замкнутому контуру, и её рассчитывают не менять до десяти лет. В пилоте обучение с подкреплением сократило расход энергии вентиляторами охлаждения на 20%.
В большинстве новых дата-центров Meta для ИИ серверы охлаждает жидкость, которая ходит по замкнутому контуру. По оценке компании, смесь воды и гликоля в такой системе можно не менять до десяти лет. Об устройстве системы рассказал Том Шоу (Tom Shaw), который побывал на ИИ-площадке Meta в Техасе.
Схема простая. Жидкость проходит через серверное оборудование и забирает тепло у чипов. Потом она идёт через теплообменники, остывает и возвращается к стойкам. Наружу её не сбрасывают. Там, где в здании нет встроенной инфраструктуры для жидкостного охлаждения, Meta ставит стойки с собственными насосами и теплообменниками. Это тот же замкнутый контур, только уменьшенный и распределённый по залу.
Ещё недавно ИИ-оборудование хватало охлаждать воздухом. Шоу вспоминает дата-центр в Алтуне (Айова): там стойки с 16 видеокартами Nvidia H100 охлаждались воздухом, а вода шла только на охлаждение самого воздуха в жаркие месяцы. Новое железо греется сильнее, и продувать стойки становится невыгодно. По словам Meta, типичный ИИ-дата-центр с замкнутым контуром и сухими градирнями тратит за год меньше воды, чем пара ресторанов полного цикла. Выигрывают и в месте: при воздушном охлаждении серверный лоток пришлось бы увеличить почти вдвое. С жидкостным в стойку помещается больше GPU.
Второй рычаг — обучение с подкреплением. Экспериментировать на работающем дата-центре рискованно, поэтому инженеры Meta построили физический симулятор. Он учитывает погоду, нагрузку на серверы и поведение охлаждающего оборудования. В нём модель учится охлаждать ровно столько, сколько нужно, чтобы серверы оставались в рабочем режиме. В пилоте на одной из площадок такой подход в среднем на 20% сократил энергию, которую тратят вентиляторы воздушного охлаждения, и на 4% — расход воды. Сейчас его распространили на дата-центры Meta с воздушным охлаждением.
Свои разработки для дата-центров Meta выкладывает через Open Compute Project. Так в 2025 году компания бесплатно открыла IcePack — сетевую стойку с жидкостным охлаждением. Сколько всего воды и энергии тратит её сеть дата-центров, в материале не сказано: он опирается на сравнения, а не на общие цифры.
Meta Platforms Inc. признана в России экстремистской организацией, её деятельность запрещена.