Дата-центры, не гарантирующие устойчивую работу при энергетических локаутах, больше не интересуют клиентов. В России большинство потребителей услуг ЦОД выбирают площадки, энергетическое хозяйство которых соответствует жестким американским стандартам Tier 3 и Tier 3+. На требования клиентов строители ЦОД отвечают увеличением расходов на системы энергоснабжения и бесперебойного электропитания - инвестиции в такую инфраструктуру в размере 45-50% от стоимости дата-центра уже считаются нормой.
Времена, когда ЦОД собирались "на коленке", а организация их энергоснабжения и резервирование силовых линий было второстепенным вопросом для строителей ЦОД, прошли. Львиная доля инвестиций при строительстве ЦОД теперь приходится именно на энергосистемы, включая системы бесперебойного питания. По оценкам ИК "Финам", в прошлом году в строительство дата-центров их российские операторы связи вложили 750-870 млн руб. Почти половина этой суммы - инвестиции в энергетическую инфраструктуру.
Энергетика ЦОД становится не только более капиталоемкой, но и более стандартизованной. Строители ЦОД ориентируются на американский стандарт TIA/EIA-942, детально описывающий принципы создания дата-центров и системы. Согласно этому стандарту, ЦОД делятся на уровни Tier 1, Tier 2 и т.д. Tier 1 гарантирует клиентам минимальные энергетические "удобства" - во всяком случае, то, что его оборудование не отключится сразу же после сбоя в энергосети. ЦОД высшего класса Tier 4 могут работать в автономном режиме едва ли не неделями - энергетические проблемы не должны волновать их клиентов.
ЦОД первого класса
Наиболее заметным событием "летнего сезона" на московском рынке ЦОД стало открытие нового дата-центра ОАО "Комкор" (торговая марка "Акадо Телеком"). В новом комплексе "Акадо Телеком" разместился, помимо всего прочего, ЦОД класса Tier 3+ на 140 серверных стоек (мощность от 5 кВт до 15 кВт). В комплекс "Акадо Телеком" вложил около 260 млн руб. Здание ЦОД запитано от двух независимых линий высокого напряжения (по 10 кВт каждая) и четырех трансформаторных подстанций суммарной мощностью 5 МВт. В случае аварийного отключения электроэнергии через 30 секунд после прекращения основного электроснабжения начинают работу дизельные генераторы, способные обеспечить неограниченное по времени автономное функционирование ЦОД. Общая мощность двух дизель-генераторных установок - 3,5 МВт.
"Наш дата-центр удовлетворяет практически всем требованиям стандарта Tier 4. Однако он не вынесен как отдельное здание, поэтому мы говорим, что ЦОД построен в соответствии с классом "3+". При этом все системы жизнеобеспечения, помимо двойного резервирования, имеют 20%-ное резервирование по мощности", - говорит директор по сетевым технологиям "Акадо Телеком" Сергей Епифанов. В соответствии с требованиями стандарта все инженерные и телекоммуникационные системы ЦОД полностью зарезервированы по схеме N+1 (где N - количество источников бесперебойного питания (ИБП), способных обслужить максимальную нагрузку всех систем дата-центра). Для сравнения, в ЦОД уровня 4 система бесперебойного питания должна быть зарезервирована по схеме 2(N+1).
По словам заместителя генерального директора телекоммуникационной компании "Караван-Телеком" Андрея Касьяненко, системы бесперебойного питания для ЦОД категории 4, как минимум, в три раза дороже систем, соответствующих Tier 2. "В дублирующей системе ЦОД высшей категории надежности львиная доля затрат приходится на системы управления, обвязки и резервирования маршрутов системы питания", - говорит Андрей Касьяненко. Однако, как отмечает представитель компании "Караван-Телеком", в России спрос на категорию Tier 4 ограничен. По его словам, пока большинство отечественных дата-центров соответствует 2-й категории энергозащищенности. "Выбор в пользу третьей категории делают операторы, которые рассматривают в будущем возможность повышения категории надежности до Tier 4. Дата-центры Tier 2 не пригодны для модернизации без длительных перерывов в работе и предоставления сервисов", - добавляет Андрей Касьяненко.
За дешевыми киловаттами
Надо сказать, что дорогостоящим мероприятием является не только строительство ЦОД, но и его обслуживание. Подключить в Москве дата-центр к электросети - отдельная проблема. По информации ComNews Research, 9 из 10 компаний, желающих подключиться к электросетям, получают либо отказ, либо не получают запрашиваемой мощности. А требования к энерговооружению дата-центров довольно высоки - в зависимости от установленных технических решений это от 7,5 кВт до 20 кВт на стойку. Как отмечает менеджер по продуктам электроснабжения и кондиционирования компании "РК-Телеком" Илья Кузьменко, доля затрат на электроэнергию, потребляемую оборудованием ЦОД, составляет до 50% общих расходов при эксплуатации ЦОД и постоянно увеличивается.
Дефицит электроэнергии и дороговизна площадей вынудили многих операторов отказаться от идеи создавать площадки в Москве. Например, в рамках программы по развитию инфокоммуникационных технологий в регионах "Ростелеком" запустил дата-центры в Новосибирске, Екатеринбурге и Хабаровске. Региональную сеть ЦОД решил создать сотовый оператор "МегаФон". В ноябре 2007 года компания "Синтерра" презентовала программу "40х40", в рамках которой анонсировала строительство 40 дата-центров в крупнейших городах России. По словам Тимофея Беляева, генерального директора ООО "ТК "Комет" (входит в "Синтерру" и отвечает за строительство и эксплуатацию всех объектов недвижимости группы, в том числе ЦОД), программа выполнена на 20%. ЦОД уже работают в Москве, Томске, Новосибирске, Ставрополе, Краснодаре, Мурманске, в ближайшее время будет запущен дата-центр в Казани. Для оптимизации расходов на проект все региональные ЦОД однотипны (в том числе с точки зрения энергообеспечения и систем бесперебойного питания).
Впрочем, экспансия в регионы - не панацея для строителей ЦОД. Во-первых, тарифы на электроэнергию за пределами МКАД тоже растут. Во-вторых, качество услуг региональных энергетиков оставляет желать лучшего. Например, в Томске в 2008-2009 годах "Комет" столкнулся с регулярными перебоями подачи электроэнергии - система электроснабжения переключалась в аварийный режим. Такие скачки, по словам директора департамента интеллектуальных зданий компании "Крок" Александра Ласого, ведут к преждевременной амортизации оборудования ЦОД. Срок службы аккумуляторных батарей в устройстве бесперебойного питания - 5-10 лет, но при регулярных аварийных запусках он может сократиться вдвое.
Регулярные отключения питания, перепады напряжения и другие проблемы в регионах вынуждают операторов более тщательно выбирать системы бесперебойного питания дата-центров - ИБП и генераторы. По данным представителя "КРОК", в общей цене инженерных систем дата-центра уровня Tier 3 система бесперебойного питания составляет 35-40%. "В условиях кризиса все участники рынка хотели бы сократить инвестиции, но сэкономить на системах бесперебойного питания вряд ли получится. Снизить стоимость систем бесперебойного питания можно только за счет перехода на более низкий уровень гарантированной отказоустойчивости", - говорит Александр Ласый.
"Аварии - это неотъемлемая часть жизни любой техники, потому не стоит экономить на безопасности даже в кризис. Не стоит сокращать расходы на системы электропитания и кондиционирования за счет снижения отказоустойчивости всей системы", - говорит Сергей Епифанов из "Акадо Телеком". Более того, операторы в кризис наоборот предпочитают приобретать более надежные, а потому, чаще всего, более дорогие аварийные системы, чтобы затем экономить на эксплуатации. Например, компания "Акадо Телеком" построила системы энергообеспечения и климатики на оборудовании Emerson. Монобрендовое исполнение, по словам Сергея Епифанова, сильно упрощает эксплуатацию и обслуживание.
Коммерческий директор российского представительства Socomec-Sicon UPS Наталья Маркина убеждена, что, приобретая пусть и более дорогое, но более совершенное оборудование, в дальнейшем можно сэкономить на электроэнергии. Причем, как за счет более низкого потребления, так и за счет более высокого КПД, а значит, более низкого тепловыделения (чем оно меньше, тем ниже уровень энергопотребления систем климатики). "Кроме того, современные ИБП позволяют более эффективно использовать полезную площадь ЦОД, так как занимают меньше места", - отмечает Наталья Маркина.

