Экскурсия по SuperNAP 8 — новому технологичному ЦОДу Switch

Надо сказать, что российскому рынку ЦОДов есть чем гордиться. По классификации Uptime Institute, в нашей стране есть 10 дата-центров уровня TIER III и один уровня TIER IV, высшего с точки зрения сертифицирующей организации. Более того, в России есть свое подразделение и представитель Uptime Institute, что само по себе говорит не только о доверии, но и о возросшей необходимости в сертификации отечественных проектов. 

О том, что в России построен ЦОД высшего уровня надежности мы уже писали, проведя небольшой тур по объекту. А сегодня у нас экскурсия на один из самых технологически совершенных и крупных ЦОДов на сегодняшний день. Это новый проект SuperNAP 8 от компании Switch. Эта компания, как вы знаете, постоянно попадает в новостные сводки за счёт того, что строит какие-то невообразимые проекты. А CEO и основатель компании, Роб Рой (Rob Roy) знаменит тем, что запатентовал 218 изобретений для дата-центров, включая решения в области охлаждения, ЦОДов повышенной плотности, сетевого оборудования, борьбы с последствиями для окружающей среды.

Собственно, в 2009 году Switch обосновались на рынке, построив первый SuperNAP – технологичный ЦОД, с почти 40 000 квадратных метров полезной площади. Он до сих пор сдаётся в аренду крупнейшим технологическим компаниям мира и более чем 40 облачным провайдерам. А сегодня мы говорим о SuperNAP 8, поскольку это очередной уникальный проект компании, напичканный всевозможными технологическими новшествами и, к тому же, получивший сертификат уровня TIER IV от Uptime Institute. Надо ли говорить, что это знак отличия, фактически позволяющий рассматривать каждый такой ЦОД отдельно?

SuperNAP 8 – это кульминация всех исследований, находок, изобретений и попыток Роба Роя переосмыслить дата-центр как таковой. Проект построен таким образом, что ЦОД может работать в любом климате, что, конечно, является претензией на глобальную экспансию. Об этом намерении компании говорит и тот факт, что Switch сделали из своего нового ЦОДа своеобразный эффективный шаблон для строительства и распространения дата-центров.

«Мы были серьёзно сфокусированы на том, чтобы создать лучший в мире дата-центр. SuperNAP 8 – это конечная точка наших усилий. Мне просто хотелось понять, сможем ли мы разработать глобальный стандарт для наших дата-центров», – говорит Роб Рой.

Как я уже говорил, у нас действительно есть повод для гордости, поскольку далеко не каждый регион на карте может отметиться наличием ЦОДа высшего уровня надежности и таким количеством ЦОДов уровня TIER III. И статистика это только подчёркивает, поскольку на рынке США, традиционно считающимся развитым, всего четыре дата-центра уровня TIER IV. Но все они, как и наш, построены с учетом требований одного заказчика и, соответственно, там располагаются мощности только одной компании. Стоит заметить, что SuperNAP 8 стал первым в истории Uptime Institute ЦОДом, который получил пресловутый «четвертый уровень», будучи колокейшен-центром. То есть, у этого ЦОДа будет множество клиентов, со своими предпочтениями и запросами, но все они уложатся в рамки требований TIER IV. 

SuperNAP 8 построен с использованием модульных компонентов, произведённых все той же Switch. Основной блок, известный как MacroMOD, вмещает в себя два коридора со стойками – именно здесь будут размещаться клиентские сервера. Для собственного пользования Switch предусмотрели ещё один такой же блок. MacroMOD позволил добиться значительного прогресса в значении весьма важного для ЦОДов параметра PUE (эффективность использования электроэнергии), который у SuperNAP 8 составляет 1,18, в то время как средняя эффективность дата-центров Google колеблется на уровне 1,12. При том, что Google использует свои ЦОДы единолично, не сдавая в аренду. А колокейшен-центры менее гибкие в энергопотреблении, поэтому такой уровень PUE о многом говорит. SuperNAP 8 работает при температуре 69 градусов по Цельсию и влажности 40%. ЦОДы масштабных игроков ИТ-рынка, таких как Google и Facebook, находятся ближе к отметке в 80 градусов.

С точки зрения дизайна, со времен первого SuperNAP (теперь известного как SuperNAP 7) поменялась внутренняя структура ЦОДа. В предыдущей версии ЦОДа энергоблоки размещались в центре зала с рядами стоек и щитовыми по бокам. Теперь все энергоблоки и щитовые находятся в одной части здания, вдоль внешней стены, а ряды серверных стоек расположены на всей остальной территории. Охлаждающие модули, о которых стоит поговорить отдельно, расположены снаружи здания. Инфографика внизу показывает как расположены генераторы, щитовые, энергоблоки, охлаждение. Разделение электрооборудования и серверов с охлаждающими системами позволяет достичь высокой надежности, даже в случае проблем с электроснабжением.

Для нового ЦОДа, Switch разработали специальную, увеличенную версию своих кастомных модулей охлаждения, каждый из которых способен кондиционировать до 1000 тонн воздуха (в предыдущей версии было всего 600 тонн). Модули интересны тем, что они поддерживают шесть различных режимов охлаждения. Специальная софтверная платформа управляет системой, выбирая метод охлаждения в соответствии с температурой снаружи и внутри помещения. Нехарактерные для подобных модулей выступы в верхней части предназначены для того, чтобы отводить горячий воздух и, при необходимости, разогревать за счет этого наледь и снег, что актуально для холодного климата. Ещё одной отличительной особенностью охлаждающих модулей является система Rotofly. Это ротационные маховики, встроенные в каждый HVAC-модуль. В случае отказа системы электроснабжения они ещё долгое время будут охлаждать серверное помещение, прокачивая холодный воздух сквозь коридоры с оборудованием.

Ещё одним пунктом нашей экскурсии станет изобретение CEO Роба Роя – архитектура Black Iron Forest. Это система распределения пространства внутри дата-центра, построенная на специальных стальных стойках, и впрямь напоминающих лес. У этого «леса» есть две функции – физически поддерживать модули ЦОДа (как на сваях) и охлаждать их, поскольку сплав хорошо поддерживает заданную температуру, выполняя функцию радиатора.

Другой элемент ЦОДа, о котором обычно не говорят – это... крыша! Дело в том, что 99% дата-центров сталкиваются с необходимостью менять крышу в течение срока службы, а во время демонтажа ЦОД оказывается весьма уязвимым. Поэтому в SuperNAP8 применили технологию SwitchSHIELD – по сути это двойная укрепленная крыша, спокойно выдерживающая ветер вплоть до 90 м/c. Ну и, конечно, если крышу придется менять, то это не создаст угрозу работе дата-центра.

Таким образом, Switch прямо на наших глазах устанавливает новые индустриальные стандарты для глобального рынка ЦОДов. Поскольку в том, что рынок будет развиваться в сторону большей отказоустойчивости, нет никаких сомнений. И здесь важна будет каждая деталь – от материала контейнеров модульных ЦОД, до крыш и маховиков в системе охлаждения. Самое время озадачиться вопросом надежности для операторов дата-центров. А Switch, тем временем, планирует строить SuperNAP 9 – дата-центр на 56000 квадратных метров.