Аномальная жара сама по себе не должна приводить к массовым сбоям банковских приложений, маркетплейсов и государственных онлайн-сервисов. Для крупных сервисов такой сбой возможен при сочетании нескольких отказов, тогда как существенно выше риск для небольших корпоративных серверных, сообщил Кирилл Сольев, руководитель Центра компетенций инженерной инфраструктуры «Софтлайн Решения» (ГК Softline).
В конце июля средняя температура на Урале и западе Западной Сибири превышала климатическую норму на 6–9 градусов. В Екатеринбурге 26 и 27 июля были обновлены суточные рекорды: воздух прогрелся до +33,8 и +35 °C соответственно. К 11 августа жара на Урале сменилась сильными дождями и грозами, однако сохранилась на юге европейской части России. Одновременно новая волна жары пришла на юг Сибири: по данным Росгидромета, 11–13 августа в Алтайском крае ожидается до +35 °C и выше.
По словам Сольева, во время жары нагрузка на кондиционеры возрастает. Остановка системы охлаждения возможна, если оборудование устарело или фактическая нагрузка в ЦОД превышает заложенную проектом. К тому же результату могут привести ошибки при проектировании и монтаже либо несвоевременное обслуживание оборудования.
«Чтобы представить масштаб, возьмем одну серверную стойку мощностью 10 кВт. С точки зрения тепловыделения это примерно пять бытовых обогревателей по 2 кВт, которые работают круглосуточно. Стойка мощностью 30 кВт — уже эквивалент 15 таких обогревателей. В дата-центре их могут быть десятки или сотни. Когда на улице +33…+35 °C, эту тепловую нагрузку приходится отводить в менее благоприятных условиях, поэтому системы охлаждения потребляют больше электроэнергии, а доступный запас мощности сокращается», — объяснил Сольев.
Профессиональные дата-центры проектируются с учетом температурных максимумов региона. На таких объектах резервируются системы охлаждения и электроснабжения, а нагрузка может распределяться между несколькими площадками. Поэтому один жаркий день не должен отражаться на работе крупных онлайн-сервисов.
«Жара сама по себе не выключает банковское приложение или маркетплейс. Заметный для пользователя сбой возникает, когда совпадают несколько событий. Для крупных сервисов это уже сценарий множественного отказа.
Например, в одном из высоконагруженных ЦОД с резервированием по схеме N+1 из-за каскадной аварии отключилась половина дата-центра. В пик жары ветер направлял раскаленный воздух от черного покрытия крыши прямо на внешние блоки. Один из них остановился из-за высокого давления фреона. Обычно дежурная смена перезапускала блок за 5–10 минут, но в этот момент система мониторинга была отключена на ремонт, а инженеры отсутствовали.
Из-за дефицита холодного воздуха серверы начали затягивать раскаленный поток из горячего коридора. Температура на входе соседних межрядных кондиционеров превысила +40 °C: первый отключился через 30 минут, следующий — еще через 15. В результате каскадно вышла из строя система охлаждения всего зала», — рассказал Сольев.
Существенно выше риск для небольших корпоративных серверных, расположенных в офисах, магазинах и на производственных площадках. Охлаждение в них часто обеспечивают один или два кондиционера, а отдельный источник резервного питания для климатического оборудования может отсутствовать. Кроме того, могут использоваться бытовые или полупромышленные кондиционеры, при подборе которых не всегда учитываются температура воздуха на входе и выходе, его объем и фактическое тепловыделение оборудования.
«В небольшой плотно заполненной серверной после остановки охлаждения температура способна расти на несколько градусов в минуту. В отдельных конфигурациях речь может идти примерно о 5 °C за минуту. То есть запас между нормальными +24…+25 °C и критическими значениями иногда исчисляется не часами, а минутами. Сначала процессоры снижают производительность, чтобы уменьшить тепловыделение, затем оборудование может уйти в защитное отключение. Для пользователей это уже выглядит как зависшая корпоративная система, недоступный сайт или невозможность провести операцию», — отметил эксперт.
Во время продолжительной жары компаниям, по сути, нужно переводить службу эксплуатации в боевой режим и организовывать дежурство в самые жаркие часы. В критических случаях может помочь мелкодисперсное распыление воды перед наружными блоками. Важно также убедиться, что источники бесперебойного питания поддерживают работу климатического оборудования, а не только самих серверов.
