Инженерия ЦОД (Tier, фрикулинг)

Что такое инженерия ЦОД (Tier, фрикулинг)

Инженерия — это всё, что в ЦОД окружает серверы и заставляет их работать годами: питание, холод, пожаротушение, безопасность. Два слова из этой области попадаются чаще остальных: Tier — уровень резервирования площадки, фрикулинг — способ охлаждать её дёшево.

Tier: что это на самом деле

Tier (англ. «уровень», «ярус») — классификация ЦОД по надёжности инженерной инфраструктуры, разработанная Uptime Institute. Уровней четыре, от Tier I до Tier IV, и они описывают топологию резервирования: сколько путей подачи питания и холода есть у оборудования и что произойдёт, если один из элементов вывести из работы.

Важно понимать, что именно измеряет Tier. Это не «скорость», не «качество поддержки» и не размер площадки. Это ответ на два конкретных вопроса: можно ли обслуживать инфраструктуру, не выключая серверы, и переживёт ли площадка отказ, который случился сам, без предупреждения.

Про проценты доступности. Цифры 99,671% / 99,741% / 99,982% / 99,995%, которые кочуют по сайтам провайдеров и привязываются к четырём уровням, — исторические, из ранних материалов. Сам стандарт описывает топологию и способность обслуживаться и переживать отказы, а не гарантирует аптайм. Причина простая: большинство реальных аварий — операционные (ошибка персонала, неотработанная процедура), а не топологические, поэтому одинаково сертифицированные площадки показывают разные результаты. Ориентируйтесь на топологию и на цифры в SLA договора, а не на процент из рекламы.

Tier 3: почему берут именно его

Tier III — рыночный компромисс и самый частый выбор коммерческих ЦОД. Ключевое свойство в его названии: Concurrently Maintainable, то есть «обслуживаемый параллельно». Любой элемент — ИБП, кондиционер, участок кабеля — можно вывести в ремонт или на плановое ТО, не выключая ни одного сервера. Для этого каждое устройство питается по двум путям и имеет два блока питания.

Чего Tier III не даёт: устойчивости к внезапному отказу. Пока один путь выведен на обслуживание, второй остаётся единственным, и авария в этот момент дойдёт до стоек. Именно это отличает его от Tier IV, где активных путей несколько одновременно и зоны физически разделены. Tier IV дороже в разы, поэтому его строят под задачи, где простой стоит больше стройки.

Сертификация: «соответствует Tier III» ≠ Tier III

Uptime Institute выдаёт сертификаты трёх видов: на проектную документацию, на построенный объект и на эксплуатацию. Это разные документы: сертифицированный проект говорит лишь о том, что на бумаге всё правильно — построить могли иначе.

Поэтому формулировки в рекламе вроде «построен в соответствии с уровнем Tier III» или «отвечает требованиям Tier III» означают ровно одно: сертификата нет, это самооценка. Она может быть честной, а может не быть — проверить нельзя. Спрашивайте номер сертификата и его тип.

Отдельная путаница: у стандарта TIA-942 тоже есть уровни (Rated 1–4), похожие по смыслу, но это другой стандарт и другая система оценки. «Tier» без указания, чей он, — повод уточнить.

Фрикулинг

Фрикулинг (free cooling, естественное охлаждение) — использование холодного наружного воздуха для отвода тепла из зала вместо работы компрессоров холодильных машин. Смысл в экономике: компрессор — самый прожорливый элемент системы холода, и каждый час, когда его можно не включать, напрямую снижает PUE площадки.

Три способа:

• Прямой (direct air-side) — наружный воздух фильтруется и подаётся прямо в зал. Максимальная экономия, но нужна многоступенчатая фильтрация и контроль влажности: в зал попадает улица со всем, что в ней летает.
• Косвенный (indirect) — наружный воздух идёт через теплообменник (роторный или пластинчатый) и в зал не попадает, забирая тепло через стенку. Дороже, экономия меньше, зато контур герметичен.
• Водяной (water-side economizer) — при низкой уличной температуре контур охлаждается драйкулерами, а компрессоры чиллера простаивают. Проще всего внедряется в существующую схему.

Режимы обычно ступенчатые: полный фрикулинг (компрессоры выключены), частичный (компрессоры догоняют разницу), механическое охлаждение (жара, работает всё). Чем выше допустимая температура в холодном коридоре, тем больше часов в году доступен фрикулинг — рекомендованный ASHRAE диапазон для машзалов составляет 18–27 °C, и его верхняя граница выбрана не из любви к теплу. В российском климате фрикулинг работает значительную часть года, поэтому в новых ЦОД его закладывают по умолчанию.

Остальная инженерка

• Питание. Городские вводы → АВР → ИБП → ДГУ. ИБП закрывают те десятки секунд, пока запускается и принимает нагрузку дизель; у дизеля должен быть запас топлива и контракт на подвоз. В Tier IV пути питания дублируются целиком (2N).
• Коридоры. Изоляция холодного или горячего коридора — самое дешёвое, что можно сделать с PUE: без неё кондиционеры охлаждают собственный выхлоп.
• Пожаротушение. Газовое: вода и порошок уничтожат оборудование надёжнее огня.
• Мониторинг. Датчики BMC и инженерных систем сводятся в единый мониторинг — авария начинается с роста температуры, а не с падения сервера.

Плотность стоек под датацентровые GPU ломает старые проекты: TDP ускорителей таков, что воздуха перестаёт хватать, и залы переводят на жидкостное охлаждение.

Связанные термины

• ЦОД — что представляет собой площадка целиком
• SLA и отказоустойчивость — как надёжность попадает в договор
• IPMI / DCIM — мониторинг железа и учёт мощности по стойкам
• Disaster Recovery — план на случай отказа всей площадки
• Хостинг — услуги, которые продают с этой инфраструктуры