Водяное охлаждение майнинг-ферм: теплообменники для ASIC, расчёт, схемы
100 майнеров Antminer S21 генерируют 350 кВт тепла в пространстве размером с небольшую комнату. Воздушное охлаждение при такой плотности — громкий, дорогой и ненадёжный вариант. Водяное охлаждение с теплообменниками: PUE = 1.03–1.05, тишина, стабильная температура чипов, возможность утилизации тепла на отопление. Разберём схемы, расчёт мощности теплообменника и выбор оборудования.
Тепловыделение современных ASIC-майнеров
Вся электрическая мощность майнера переходит в тепло (KPD процессора ≈ 100% как тепловыделение, согласно первому закону термодинамики). Нет никаких «потерь» в пустоту — всё становится теплом.
| Модель | Хешрейт | Мощность, Вт | Тепло 100 шт., кВт | Тепло 1000 шт., кВт |
|---|---|---|---|---|
| Antminer S19 XP | 140 TH/s | 3010 | 301 | 3010 |
| Antminer S21 | 200 TH/s | 3500 | 350 | 3500 |
| Antminer S21 Pro | 234 TH/s | 3510 | 351 | 3510 |
| WhatsMiner M60S | 186 TH/s | 3441 | 344 | 3441 |
| WhatsMiner M66S | 298 TH/s | 5576 | 558 | 5576 |
| Antminer S21 XP | 270 TH/s | 3645 | 365 | 3645 |
Тепловая мощность vs электрическая
Типичный дата-центр для майнинга 10 МВт установленной мощности = 10 МВт тепла, которое нужно отводить. Для сравнения: мощность котельной микрорайона — 10–30 МВт. То есть крупная майнинговая ферма — это полноценный промышленный объект по объёму тепловыделения, требующий инженерной тепловой инфраструктуры.
Виды охлаждения майнинг-ферм: сравнение
| Метод | PUE | Сложность | Шум | Утилизация тепла | CAPEX |
|---|---|---|---|---|---|
| Воздушное (штатные вентиляторы) | 1.3–1.5 | Низкая | 80–90 дБА | Сложно | Минимальный |
| Воздушное контейнерное (CRAC) | 1.2–1.4 | Средняя | 70–85 дБА | Сложно | Средний |
| Жидкостное прямое (cold plate) | 1.05–1.15 | Высокая | 50–65 дБА | Возможно | Высокий |
| Иммерсионное (минеральное масло) | 1.03–1.08 | Высокая | 35–50 дБА | Оптимально | Высокий |
| Иммерсионное двухфазное (3M Novec) | 1.02–1.05 | Очень высокая | Менее 40 дБА | Возможно | Очень высокий |
PUE (Power Usage Effectiveness) = общая потребляемая мощность / мощность IT-оборудования. PUE = 1.0 — идеальный дата-центр, всё электричество уходит на вычисления. При PUE = 1.3 на каждые 1000 Вт IT-мощности тратится дополнительно 300 Вт на охлаждение.
Иммерсионное охлаждение: принцип и схема
При иммерсионном охлаждении майнеры погружены в бак с диэлектрической жидкостью. Жидкость поглощает тепло от чипов, нагревается, поднимается к верхней части бака (конвекция), проходит через теплообменник, охлаждается и возвращается вниз.
Бак иммерсии
Герметичный стальной или пластиковый бак с майнерами. Диэлектрическая жидкость: минеральное масло, синтетическая жидкость. T на выходе 45–55°C.
Насос первичного контура
Циркуляционный насос перекачивает нагретую жидкость из верхней части бака к теплообменнику. Расход определяется по тепловому балансу.
Теплообменник
Пластинчатый теплообменник: масло / вода. Масло охлаждается с 50°C до 35°C. Вода нагревается с 25°C до 40°C. Разделяет контуры масла и воды.
Охладитель воды
Сухой градирня, чиллер или геотермальный контур. Охлаждает воду с 40°C до 25°C для повторного использования.
Преимущества двухконтурной схемы с теплообменником
- Разделение контуров: чистое диэлектрическое масло не смешивается с водой системы охлаждения здания
- Защита от замерзания: водяной контур можно защитить гликолем, не загрязняя масло
- Масштабируемость: несколько иммерсионных баков подключаются к одному водяному контуру через отдельные теплообменники
- Теплоутилизация: вода 35–45°C легко используется для отопления зданий
Расчёт теплообменника для иммерсионного охлаждения
Пример: ферма 200 × Antminer S19 XP (3010 Вт каждый), иммерсионное охлаждение, одноконтурный бак.
Шаг 1: Тепловая нагрузка
- Суммарная мощность: P = 200 × 3010 = 602 000 Вт = 602 кВт
- Запас 20%: Q_ТО = 602 × 1.2 = 722 кВт
- Температура масла на входе ТО (из бака): T1_вход = 50°C
- Температура масла на выходе ТО (возврат в бак): T1_выход = 35°C
- Температура воды на входе ТО (из охладителя): T2_вход = 25°C
- Температура воды на выходе ТО (к охладителю): T2_выход = 40°C
Шаг 2: Расходы жидкостей
- Расход масла: Q_масло = P / (Cp_масло × ρ_масло × ΔT) = 722000 / (1.9 × 870 × 15) = 29.1 л/с = 104 760 л/ч
- Cp минерального масла = 1.9 кДж/(кг·K), ρ = 870 кг/м³
- Расход воды: Q_вода = P / (Cp_вода × ρ_вода × ΔT) = 722000 / (4.18 × 1000 × 15) = 11.5 л/с = 41 400 л/ч
Шаг 3: Площадь теплообмена
- LMTD = [(50-40) - (35-25)] / ln[(50-40)/(35-25)] = [10-10] / ln(1) = 0/0 → симметричный перепад
- При равном ΔT = 10°C с обеих сторон: LMTD = 10°C
- K = 2500 Вт/(м²·K) для масло-вода (масло имеет более высокую вязкость, ниже K)
- F = Q / (K × LMTD) = 722 000 / (2500 × 10) = 28.9 м² → принять 30 м² с запасом
- Типовая пластина 0.15 м²: N_пластин = 30 / 0.15 + 2 = 202 пластины
Итог: теплообменник для 200 × Antminer S19 XP
Диэлектрические жидкости для иммерсионного охлаждения
| Жидкость | Теплоёмкость Cp | Вязкость при 40°C | Температура вспышки | Стоимость |
|---|---|---|---|---|
| Минеральное трансформаторное масло | 1.8–2.0 кДж/(кг·K) | 5–10 мПа·с | 140–160°C | Низкая |
| Синтетическое масло (PAO) | 2.0–2.2 кДж/(кг·K) | 8–15 мПа·с | 240–270°C | Средняя |
| 3M Novec 7100 (двухфазное) | 1.17 кДж/(кг·K) | 0.6 мПа·с | Нет (не горючее) | Очень высокая |
| Engineered Fluids EC-100 | 1.6–1.8 кДж/(кг·K) | 4–8 мПа·с | Нет (не горючее) | Высокая |
Минеральное масло: стандарт малого бюджета
Трансформаторное масло (ТМ-5, ГК, Нафтен) — дёшево, доступно, хорошо зарекомендовало себя. Недостатки: горючесть (t_вспышки 140°C), необходимость пожарной защиты, сложность утилизации, запах. Для небольших ферм 10–50 устройств — оптимально по бюджету.
Синтетическое масло PAO: промышленный выбор
Polyalphaolefin — синтетическое масло с высокой температурой вспышки и стабильностью. Не загрязняет окружающую среду, не пахнет. Дороже минерального в 3–5 раз. Для ферм 100–1000+ устройств где пожарная безопасность критична.
3M Novec: двухфазное охлаждение
Жидкость кипит при 49°C — майнеры погружены в кипящий хладагент. Охлаждение за счёт скрытой теплоты испарения. PUE = 1.02. Огромный начальный расход (жидкость дорогая), требует герметичной ёмкости. Для сверхплотных установок и R&D.
Теплоутилизация: майнинг-ферма как источник тепла
Тепло, выделяемое майнерами, имеет температуру 35–55°C — это низкопотенциальное тепло, пригодное для ряда задач без дополнительного нагрева:
| Применение | Требуемая T теплоносителя | Температура от майнинга | Схема |
|---|---|---|---|
| Низкотемпературное отопление (тёплые полы) | 35–45°C | 40–50°C ✓ | Прямое подключение через ТО |
| Горячее водоснабжение (ГВС) | 55–60°C | 40–50°C ✗ (недостаточно) | Нужен подогрев или тепловой насос |
| Тепличное хозяйство | 30–40°C | 40–50°C ✓ | Прямое подключение через ТО |
| Бассейн открытый | 28–32°C | 40–50°C ✓ | Через ТО с регулировкой температуры |
| Сушка зерна/дерева | 40–60°C | 40–50°C (частично) | Воздушный теплообменник с водяным нагревом |
Экономика теплоутилизации
Ферма 1000 × Antminer S21 = 3.5 МВт тепла. При работе 8640 ч/год: 30 240 МВт·ч тепла = 26 000 Гкал. При стоимости тепла 1500 руб./Гкал — потенциальная выручка от продажи тепла: 39 млн руб./год. Реализация: подключение к тепловым сетям посёлка или своё отопление складских площадей. Срок окупаемости системы теплоутилизации — 6–18 месяцев.
Выбор материалов теплообменника для майнинга
| Элемент | Рекомендуемый материал | Обоснование |
|---|---|---|
| Пластины (сторона масла) | AISI 304 или AISI 316L | Масло нейтральное, pH близкий к 7, коррозии нет. Достаточно 304. |
| Пластины (сторона воды) | AISI 304 или AISI 316L | При использовании антифриза с хлоридами — 316L предпочтительнее |
| Прокладки (сторона масла) | NBR (нитриловый каучук) | NBR — стойкость к нефтепродуктам. EPDM набухает в нефтяных маслах! |
| Прокладки (сторона воды) | NBR или EPDM | Оба подходят для воды/гликоля |
| Трубопроводы масла | Сталь, ПВХ, HDPE | Масло не агрессивное, подходит широкий выбор |
| Трубопроводы воды | ПП-р, HDPE, медь, нержавейка | Стандартный выбор по давлению и температуре |
КРИТИЧНО: прокладки NBR, не EPDM
EPDM — отличный материал для воды и кислот, но набухает в минеральных нефтяных маслах на 15–40%. Это приводит к закупорке каналов теплообменника и потере работоспособности. Для контакта с нефтяными маслами — всегда NBR (нитрил-бутадиен). Проверяйте маркировку прокладок при замене!
Схемы водяного охлаждения майнинг-фермы
Схема 1: Иммерсия + сухая градирня
Бак с маслом → насос → ТО масло/вода → насос воды → сухая градирня (воздушный охладитель) → насос → ТО. Преимущество: не нужен чиллер, работает при наружной T < 30°C. Ограничение: при T воздуха > 30°C эффективность падает.
Схема 2: Иммерсия + чиллер
Бак с маслом → ТО масло/гликоль (ПХВ теплообменник) → чиллер → насос. Чиллер охлаждает воду до 10–15°C независимо от наружной температуры. Работает круглогодично в любом климате. Выше CAPEX и OPEX (чиллер потребляет 30–35% от IT-мощности).
Схема 3: Иммерсия + теплоутилизация + подпитка от чиллера
Масло → ТО → вторичный контур → здание (отопление/ГВС) → при необходимости доохлаждение чиллером. Оптимальная схема: использует тепло 8–9 месяцев для отопления, летом — чиллер. Лучший TCO (совокупная стоимость владения).
Схема 4: Жидкостное охлаждение (cold plate) без иммерсии
На платы майнеров устанавливаются кастомные медные или алюминиевые радиаторы с водяными каналами (cold plate). Вода циркулирует через радиаторы, забирая тепло. ТО вода/вода → градирня. Дешевле иммерсии, но сложнее монтаж. PUE = 1.05–1.15.
Поставщики оборудования для водяного охлаждения майнинга
DCX (Китай) / MinerCool
Специализированные иммерсионные системы для ASIC. Готовые баки, теплообменники, насосы. Поставки в Россию.
Применение: 10–1000+ устройств. Типовые баки на 12 и 24 майнера.
Liquidstack (США)
Однофазное и двухфазное иммерсионное охлаждение. Системы под ключ для ЦОД. Международный стандарт для крупных ферм.
Мощность: 100 кВт – 10 МВт на систему.
S22 — теплообменники для майнинга
Пластинчатые теплообменники масло/вода для иммерсионного охлаждения. AISI 316L пластины, NBR прокладки. Мощность 50–1000+ кВт. Подбор по расчёту, доставка по РФ.
Преимущество: готовые расчёты для типовых конфигураций ASIC-ферм.
Alfa Laval M-серия
Промышленные пластинчатые теплообменники для охладительных контуров. Высокоэффективные для больших ферм от 500 кВт.
Плюс: высокий K, минимальная площадь теплообмена.
Кейсы внедрения водяного охлаждения
Кейс 1: Ферма 500 × Antminer S19 XP, Сибирь
Задача: Снизить шум (ферма в жилой зоне) и повысить надёжность охлаждения при экстремальных морозах -40°C.
Решение: Иммерсия в синтетическое масло PAO, ТО масло/гликоль 350 кВт, сухая градирня с этиленгликолем -45°C. Теплоутилизация для отопления склада 800 м².
Результат: Шум снижен с 85 дБА до 42 дБА. PUE = 1.04. Экономия на отоплении 1.8 млн руб./год. Отказов по перегреву — 0 за 2 года.
Кейс 2: Ферма 100 × WhatsMiner M66S, ЦФО
Задача: Быстрое масштабирование воздушной фермы до водяного охлаждения при минимальных вложениях.
Решение: Cold plate радиаторы (штатные вентиляторы сняты), водяной контур с пластинчатым ТО вода/вода 600 кВт, чиллер 180 кВт (Carrier).
Результат: Переход занял 3 недели. Температура чипов снизилась с 72°C до 58°C — хешрейт вырос на 8%. Срок окупаемости системы водяного охлаждения 11 месяцев за счёт прироста добычи.
Частые вопросы
Аннулирует ли иммерсионное охлаждение гарантию на майнеры?
У большинства производителей — да, стандартная гарантия не распространяется на устройства, эксплуатируемые в иммерсионном охлаждении. Bitmain (Antminer) и MicroBT (WhatsMiner) предлагают специальные версии устройств для иммерсии с гарантией. При переводе стандартных устройств в иммерсию рекомендуется снять гарантийные наклейки самостоятельно и оценить риски. На практике иммерсия продлевает срок службы устройств за счёт более равномерного и низкого температурного профиля.
Нужен ли антифриз в водяном контуре майнинг-охлаждения?
Для регионов с наружной температурой ниже 0°C — обязательно для контура, проходящего через улицу (градирня, наружные трубопроводы). Этиленгликоль 30% защищает до -15°C, 50% — до -35°C, 60% — до -52°C. Для закрытых помещений без выхода на улицу — чистая вода допустима. При использовании гликоля K теплообменника снижается на 10–15% — это учитывается в расчёте.
Как часто нужно менять масло в иммерсионной системе?
Минеральное трансформаторное масло: контроль раз в 6 месяцев (анализ кислотного числа, вязкости, диэлектрической прочности). Замена при ухудшении параметров или раз в 3–5 лет. Синтетическое PAO: более стабильное, контроль раз в год, замена раз в 5–7 лет. При загрязнении паяльным флюсом или другими веществами от плат — замена по факту загрязнения.
Можно ли разгонять майнеры при иммерсионном охлаждении?
Да — это одно из ключевых преимуществ иммерсии. Пределом производительности ASIC является температура чипа. При воздушном охлаждении T_чип = 65–75°C, при иммерсии T_чип = 45–55°C. Снижение температуры позволяет повысить частоту и напряжение (overclocking) с ростом хешрейта на 15–30% от базового. Antminer S19 XP 140 TH/s при иммерсионном разгоне — 160–175 TH/s при той же надёжности.
Какой насос нужен для перекачки масла в иммерсионной системе?
Для минерального масла: центробежный или шестерёнчатый насос из нержавеющей стали или чугуна с NBR уплотнениями. Манометрическое давление 2–4 бар достаточно для большинства систем. Важно: насос должен работать с вязкостью масла 5–20 мПа·с при рабочей температуре — проверить характеристику насоса при этой вязкости (центробежные насосы теряют производительность при вязкости выше 20 мПа·с). Для холодного старта при зимнем запуске — насос с частотным преобразователем (постепенный разгон).
Расчёт системы охлаждения по PUE: полный пример
Рассмотрим детальный расчёт системы охлаждения майнинговой фермы 1 МВт с иммерсионным охлаждением и теплоутилизацией для отопления здания.
Исходные данные
- IT-нагрузка: 1000 кВт (суммарная мощность майнеров)
- Тип майнеров: Antminer S21 (3500 Вт × 286 шт. = 1001 кВт)
- Иммерсия: минеральное масло ТМ-5, T_масло_вых = 50°C, T_масло_вх = 35°C
- Вторичный контур: этиленгликоль 30%, T_гликоль_вх = 25°C, T_гликоль_вых = 40°C
- Теплоутилизация: отопление склада 2000 м² при T = -20°C снаружи
Расчёт теплообменников масло/гликоль
- Тепловая нагрузка Q = 1000 кВт (+ 20% запас = 1200 кВт)
- LMTD = [(50-40)-(35-25)] / ln(10/10) = неопределённость → симметр., LMTD = 10°C
- K масло/гликоль = 2000 Вт/(м²·K)
- F = 1 200 000 / (2000 × 10) = 60 м² — пластинчатый ТО AISI 316L, NBR прокладки
- Число ТО: 2 × 30 м² параллельно (один в резерве при техобслуживании)
Теплоутилизация на отопление
- Отопительная нагрузка склада 2000 м²: 100 Вт/м² × 2000 = 200 кВт
- Температура теплоносителя отопления: 45°C (тёплый пол + радиаторы)
- Гликоль 40°C → ТО гликоль/вода → вода 40°C → отопление → возврат 35°C
- Использованная тепловая мощность: 200 кВт / 1000 кВт = 20% от IT-нагрузки
- Остаток 800 кВт → сухая градирня для сброса в атмосферу
- PUE = (1000 + 30_насосы + 50_градирня) / 1000 = 1.08
Итоговые характеристики системы охлаждения 1 МВт
Техническое обслуживание системы водяного охлаждения майнинга
| Периодичность | Элемент | Операция | Параметр контроля |
|---|---|---|---|
| Ежедневно | Масляный контур | Проверка уровня масла в баке, T масла, давления насоса | T_масла_вых ≤ 55°C, уровень масла в норме |
| Еженедельно | Теплообменник | Контроль ΔP (перепада давления) на ТО | ΔP не более 130% от начального (fouling) |
| Ежемесячно | Гликолевый контур | Проверка концентрации гликоля рефрактометром | Концентрация 30–35%, pH 7.5–9.5 |
| Раз в 6 месяцев | Масло (минеральное) | Анализ масла: кислотное число, вязкость, цвет | КЧ ≤ 0.3 мг KOH/г, вязкость ±15% от нормы |
| Раз в год | Теплообменник | Разборка, чистка пластин, замена прокладок NBR | Ra пластин ≤ 0.8 мкм после чистки |
| По состоянию | Масло | Замена масла при ухудшении показателей | Утилизация согласно экологическим нормам |
Дополнительные вопросы о водяном охлаждении майнинга
Можно ли использовать автомобильное моторное масло для иммерсионного охлаждения?
Нет. Моторное масло содержит присадки (антиокислительные, антикоррозионные, моющие), которые: 1) проводят электрический ток после нагрева (нарушение диэлектрических свойств); 2) повреждают пластиковые компоненты плат (разъёмы, конденсаторы); 3) образуют углеродистый осадок при нагреве. Используйте только трансформаторное масло (ТМ-5, ГК) или специальные диэлектрические жидкости (Engineered Fluids, Petrofer).
Как утилизировать отработанное масло с иммерсионной фермы?
Отработанное трансформаторное масло относится к отходам 3–4 класса опасности. Утилизация: через лицензированные компании по переработке нефтепродуктов (регенерация масла, сжигание в котельных). Слив в канализацию или на грунт запрещён (штраф до 200 000 руб. для ИП, до 1 млн для юрлиц). Сертифицированные синтетические жидкости типа Engineered Fluids биоразлагаемы — утилизация проще.
Нужна ли система пожаротушения при использовании минерального масла?
Да, обязательна по нормам пожарной безопасности. Трансформаторное масло: температура вспышки 140–160°C. При правильной эксплуатации (T_масла ≤ 60°C) риск возгорания минимален, но при аварии (насос остановился, майнеры продолжают работать) T может достичь точки вспышки. Требования: системы автоматического газового пожаротушения (CO₂, Novec 1230), датчики дыма и T, огнестойкие поддоны под баками. Синтетические негорючие жидкости (Novec) этого требования не создают.
Подобрать теплообменник для майнинг-фермы
Укажите количество и тип устройств — рассчитаем теплообменник масло/вода или вода/вода для вашей схемы охлаждения.
Получить расчёт