Роль Quality Assurance, или Шпионские страсти ЦОДостроения

В такой ситуации весьма актуальной становится консультационная услуга, состоящая в контроле качества построения Центра обработки данных. Она подразумевает, что в процессе создания ЦОД участвуют уже не две, а три стороны. К классическим участникам – заказчику и подрядчику – присоединяется новый игрок – Quality Assurance-консультант (консультант по качеству). Его роль заключается в контроле качества всех выполняемых подрядчиком работ на каждом этапе строительства – от проектирования и выбора технических решений до сдачи дата-центра в промышленную эксплуатацию. И подобно Джеймсу Бонду от ЦОДостроения, он минимизирует риски и спасает бизнес от лишних затрат.

Откуда ЦОДы растут…

Что же сделало услугу Quality Assurance актуальной для рынка? Прежде всего появление стандартов, формализующих правила построения ЦОД. Так, в 2005 году появился стандарт TIA-942, ставший первым с 70–80 годов прошлого века нормативным документом, регулирующим подходы к созданию дата-центров. Uptime Institute (разработчик TIА-942) выделил 4 уровня надежности, определил подходы, правила и требования, в соответствии с которыми рекомендовано строить ЦОДы. И, несмотря на все это, стандарт так и не стал обязательным. Дело в том, что его принятие влечет за собой значительные инвестиции на реструктуризацию существующих дата-центров. В результате на требования стандарта обычно ориентируются при построении новых ЦОД, а уже существующие стараются модернизировать по минимуму.

Тем не менее появление TIA-942 в свое время привело к образованию значительного числа компаний, готовых проводить определенный набор аудиторских проверок, направленных на упрощение сертификации в Uptime Institute, без каких-либо гарантий получения заказчиком сертификата соответствия. Сегодня их количество на рынке, несмотря на рекомендательный статус стандарта и угасающий спрос на подобные услуги, осталось прежним.

Не так давно появился второй критерий для оценки эффективности дата-центров. Он существует параллельно с TIA-942, не исключая его параметров и не противореча им. Это коэффициент Power Usage Effectiveness (PUE). Он официально признан мировым сообществом, базируется на оценке энергоэффективности дата-центра и позволяет перевести ее измерение в четкие числовые показатели. PUE также оставляет владельцам ЦОД некоторую свободу действий: сам по себе коэффициент измеряется конкретными цифрами, но рекомендованных способов его достижения нет. В итоге сегодня мы имеем массовый всплеск интереса заказчиков к энергоэффективным технологиям, которые могут способствовать снижению PUE. А это, в свою очередь, увеличивает потребность компаний в услугах квалифицированного Quality Assurance-консультанта.

Высокотехнологичный обман

Так что же, «золотая пуля» ЦОДостроения найдена? Отчасти да, но лишь отчасти: дело в том, что не все Quality Assurance-консультанты одинаково полезны.

На сегодняшний день российский рынок перенасыщен компаниями, позиционирующими себя в качестве квалифицированных консультантов на проектных стадиях. Причина такого изобилия состоит в том, что игра в проект на бумаге ничего им не стоит (особенно материальных затрат в случае возникновения проблем на последующих этапах строительства ЦОД). Компаний, предлагающих свои услуги в том числе на стадиях приемки оборудования, внедрения, тестирования и т.д., несколько меньше. Обычно они могут подтвердить свою квалификацию соответствующими сертификатами – так называемым бумажным опытом. Но он совершенно не гарантирует их умение эффективно действовать в «боевых» условиях – на реальной площадке заказчика. В итоге вместо опытного «разведчика», обладающего практическими знаниями и контролирующего ситуацию на местах, мы получаем теоретика, вводящего в заблуждение показателями на бумаге.

Выбирая компанию-консультанта, важно не ошибиться и остановить свой выбор на организации, которая сможет оказать услугу «сквозной» оценки качества. Полагаться при этом только на наличие сертификатов и иных документов, подтверждающих ее знания, – не самый правильный ход. Прежде всего следует оценивать успешный опыт выполнения аналогичных работ и наличие действующих контрактов. Отметим, что Quality Аssurance-консультантов, действительно компетентных на всех этапах создания дата-центра – от написания технического задания на построение ЦОД до его тестирования и ввода в эксплуатацию, – в прямом смысле слова единицы.

Как лучше контролировать

Предположим, что процесс выбора конкретной компании-консультанта успешно завершился. В этом случае возникает целый ряд вопросов. Например, как оптимально организовать его работу? Какие документальные подтверждения о выполненных работах следует ожидать? Как оценить количество затраченных консультантом усилий? Как оптимизировать расходы на консультанта без ущерба для качества работ?

Здесь нужно понимать, что существуют три способа проведения работ по Quality Аssurance: Full Time, этапный и этапный с промежуточными отчетами. Самый простой вариант работ – этапный. Для него характерно участие консультанта на каждой стадии создания ЦОД. Основной минус этого варианта состоит в том, что выявление допущенных подрядчиком ошибок происходит только в конце каждой стадии. С одной стороны, этот подход наиболее дешев, так как затрат со стороны консультанта относительно немного. С другой – он может повлечь за собой существенные работы по устранению ошибок и, соответственно, дополнительные расходы заказчика.

Второй вариант – когда консультант глубоко погружен в специфику создания ЦОД и сотрудничает с исполнителем в формате Full Time: разрабатывает документацию, сотрудничает с инженерами-разработчиками, принимает участие в рабочем процессе. Фактически это можно считать «продажей» консультантов на полный аутсорсинг. Поэтому эта схема оказывается самой дорогостоящей.

Наиболее удачен, на наш взгляд, третий вариант, при котором за экспертом Quality Аssurance остаются финальный контроль этапов построения ЦОД и написание промежуточных отчетов в процессе выполнения каждого из них. На каждой стадии создания дата-центра должны быть определены реперные точки, в которых принимаются принципиальные решения и разрабатываются промежуточные отчеты. Таким образом, этот подход включает полномасштабные финальные заключения и 5–6 промежуточных актов, соответствующих определенным точкам создания ЦОД, и позволяет избежать позднего выявления ошибок и увеличения объема работ.

Будни Quality Аssurance-консультанта

Контроль выполняется на всех стадиях создания ЦОД, и можно выделить несколько его этапов. В частности, проектный контроль, который осуществляется в ходе выполнения одноименных работ. Он нацелен на своевременное выявление ошибок в проектной документации. При проектном контроле проверяется соблюдение полноты документации, её непротиворечивости и соответствия техническим требованиям заказчика и существующим стандартам.

Основная проблема, возникающая еще на стадии проектирования, – это «междувластие» нескольких подрядчиков на границах зон их ответственности. Нередко компания, стремясь сэкономить на строительстве ЦОД, приглашает разных исполнителей на реализацию отдельных компонентов дата-центра. В результате может не учитываться необходимость некоторых подсистем (в том числе и критических). Например, мы были консультантами в проекте строительства достаточно крупного ЦОД. Один исполнитель отвечал за построение инженерной инфраструктуры, второй – за разработку системы бесперебойного электроснабжения, третий – за общестроительные решения. При этом источники бесперебойного питания по проекту размещались в отдельном здании. И мы установили, что это помещение не было оснащено системой кондиционирования – критичная система стоимостью в несколько сотен тысяч долларов выпала из рассмотрения компании и оказалась в «серой зоне» безответственности.

 Второй этап – так называемый входной контроль. Под ним подразумевается контроль поставляемых материалов и оборудования для создания ЦОД. Он заключается во внешнем осмотре оборудования и материалов на их соответствие требованиям проекта (комплектность, сертифицированность, наличие сопроводительных документов). Входной контроль позволяет исключить возможные ошибки поставок, которые впоследствии могут повлечь за собой, к примеру, остановку работ по монтажу.

Например, если один из компонентов «тяжелой» подсистемы ЦОД (кондиционирования, пожарной сигнализации и т.д.) оказывается бракованным, его замена может достигать нескольких месяцев. Это очень большой срок относительно общего времени проекта, поэтому чем раньше дефект будет обнаружен, тем меньше временных и материальных затрат понесет компания.

В нашей практике Quality Аssurance-консультирования был случай, когда своевременное выявление неисправности сэкономило заказчику недели ожидания. При входной проверке оборудования зарубежного вендора выяснилось, что из строя вышел ряд интерфейсных карт. Мы нашли им функциональную замену – аналог у российского производителя, что позволило быстрее запустить оборудование.

Третий этап – операционный контроль. Он позволяет оценить соблюдение технологии выполнения монтажных работ, выявить как явные, так и скрытые дефекты монтажа, своевременно разработать комплекс мер и рекомендаций по их устранению и значительно сэкономить затрачиваемое на это время. Вторая составляющая операционного контроля – оценка соответствия стандартам и нормам, принятым для построения ЦОДов. Операционный контроль длится на протяжении всех монтажных, инсталляционных и пусконаладочных работ и именно для его осуществления чаще всего необходимо присутствие консультанта, работающего на площадке в формате Full Time.

Здесь можно вспомнить наглядный пример нарушения технологического цикла монтажных работ. Специалисты подрядчика установили в дата-центре заказчика монтажные шкафы, при этом в тех местах, где их разместили, не были закончены потолочные работы. В результате монтажникам для их завершения пришлось вставать на шкафы. Эта простая, казалось бы, ситуация обернулась значительной потерей средств заказчика: пластиковые крышки шкафов не выдерживали нагрузки и проламывались. Потребовалась замена оборудования.

Можно вспомнить и другой случай. Мы выступали в качестве Quality Аssurance-консультанта в проекте строительства ЦОД для одного из заказчиков. На одном из его этапов монтажники начали выполнять расключение кабеля не специализированным прибором, а буквально с помощью обычного молотка и деревянных колышков. Наши специалисты заметили и остановили этот процесс, но результатом такого «профессионализма» исполнителя все же стала потеря части кроссовых панелей.

После того как монтаж закончен, приходит очередь приемочного контроля, направленного на оценку качества выполненных работ по тестированию комплексных инженерных систем ЦОД, их соответствие проектной документации. Во время приемочного контроля также проверяется, ликвидированы ли те недостатки, которые Quality Аssurance-специалисты выявили и рекомендовали к устранению на этапе операционного контроля.

Так, один из наших заказчиков не планировал полностью заполнять ЦОД оборудованием сразу после его сдачи в промышленную эксплуатацию. Это предполагалось сделать значительно позже – через несколько лет. На этапе ввода в эксплуатацию система кондиционирования дата-центра работала исправно. Но возник логичный вопрос – выдержит ли она 100%-ную загрузку ЦОД? Заказчик не мог ответить на него самостоятельно. Мы смоделировали эту ситуацию с помощью установки дополнительных тепловых агрегатов и проверили на деле, возникнут ли зоны перегрева.

Мы как Quality Аssurance-консультанты также проверяем в дата-центрах срабатывание автоматики при возникновении аварийных ситуаций. В первую очередь это касается пропадания городского электропитания или выхода из строя критичных компонентов комплекса – кондиционеров, ИБП. В результате компания получает ответы на вопросы: как быстро заработает дизельный двигатель, насколько система электроснабжения отказоустойчива при переходе ИБП в режим by-pass, выдержит ли система кондиционирования «падение» одного-двух кондиционеров и т.д.

В заключение отметим, что главная цель услуги Quality Аssurance – качественное построение дата-центра в соответствии с заявленными требованиями компании (в том числе в части стандарта TIA-942 и коэффициента энергоэффективности). Квалифицированные консультанты никогда не ставят во главу угла формальную подготовку ЦОД к сертификации.