Экспресс-диагностика ЦОДа: как за 2 часа проверить эффективность службы эксплуатации

Вместо того чтобы сразу заказывать дорогостоящий глубокий аудит при первых признаках беспокойства, мы предлагаем Вам предварительно выполнить быструю самопроверку. Это «тест-драйв» вашей службы эксплуатации, который займет пару часов, не потребует бюджета и даст предварительное понимание: где у системы слабое звено.

Полагаться на авось в вопросах эксплуатации ЦОДа — рискованно. Последствия халатности могут быть катастрофическими: от потери данных до аварий вплоть до возгорания.
Полноценный аудит с привлечением сторонних экспертов — это серьезный проект, требующий времени и денег. Его стоит выполнять регулярно, однако периодически самопроверки помогут Вам выявить проблему в самом начале. Предлагаемая ниже методика — это «первичный осмотр», который позволяет оценить ситуацию без погружения в детали.

Результаты такого теста просты:

• Есть ответы (даже с оговорками) — можно «шлифовать» процесс с помощью углубленного аудита.
• Нет ответов или документов — это сигнал о необходимости срочной разработки полного комплекта эксплуатационной документации и системной перестройке всей службы эксплуатации.

Самое ценное: Вам не нужно быть техническим специалистом. Ответы на многие вопросы лежат в плоскости организации процессов, а не технических спецификаций.

В основе нашего чек-листа — реальные инциденты, которые мы видели и устраняли на различных объектах. Эти пункты универсальны: они работают как для ЦОДа на 10 стоек, так и для крупной площадки на тысячи стоек.

Шаг 1. Документация: фундамент безопасности
Это самый быстрый и показательный этап. Если документация в порядке, служба работает. Если нет — есть над чем задуматься.

а. Наличие документации по всем системам
Проверьте наличие исполнительной документации по всем инженерным системам как в бумажном, так и в электронном виде.
Отсутствие каких-либо томов или их наличие только в электронном или бумажном варианте – повод для тревоги. Любая случайность оставит вас без жизненно необходимой информации, которую зачастую невозможно восстановить.

б. Актуальность проектной документации (Схемы)
Запросите общую однолинейную схему и попросите инженера показать на ней конкретное оборудование (например, ИБП), а затем — указать на него пальцем в помещении.
Лакмусовая бумажка: Совпадают ли модель оборудования на схеме и на устройстве? Если оборудование заменяли, но в документацию изменения не внесли — это «красный флаг». При плановых переключениях такая халатность может привести к обесточиванию всей площадки.

в. Проверьте маркировку оборудования
Возьмите в руки ту же самую схему и проверьте, совпадает ли маркировка оборудования на схеме и в реальности.
Например, если на схеме источник бесперебойного питания имеет маркировку UPS.3.15, а на оборудовании нанесена маркировка UPS-15 – вы видите огромную проблему, так как любой новый сотрудник просто не найдет указанное оборудование на площадке или найдет, но не то, что может впоследствии привести к фатальным последствиям для вашего бизнеса.

г. Регламентные процедуры
Любое обслуживание (замена батарей, замена фильтров систем охлаждения и любые другие операции) должно выполняться по жесткому алгоритму. Эти алгоритмы называются MOP (Method of Procedure - методика подготовки) и SOP (Standard Operating Procedure - методика выполнения).
Укажите на любой инженерный шкаф и спросите: «Где инструкция по его обслуживанию?». Если бумаги нет — процессов нет. А значит, любое вмешательство в систему будет «хирургией вслепую».

д. Графики обслуживания
Обслуживание инженерных систем ЦОД выполняется не по желанию или только в случае получения сигнала тревоги в системе мониторинга, а по строго соблюдаемому графику. Выберите несколько конкретных устройств или разных инженерных систем на площадке (кондиционер, ИБП, щит и т.п.) и попросите показать их графики планового обслуживания (а если захотите проверить глубже – не только график обслуживания, но и требования производителя по периодичности обслуживания).
Нет графика, или график не соответствует требованиям производителя – вы в «красной» зоне риска.

е. Отчетность о выполненных работах
Мало иметь инструкцию и график. Нужно подтверждение, что работы выполняются фактически и проводятся именно согласно графику. Попросите показать технические акты (отчеты) за прошлый месяц по тем регламентам, которые вы видели в пунктах «г» и «д». Отсутствие отчетов означает, что оборудование работает на износ без должного контроля.

ж. План действий при авариях
Что делать при задымлении, отказе кондиционеров или остановке ДГУ? В стрессовой ситуации человек не может импровизировать. Должен существовать четкий письменный регламент – EOP (Emergency Operating Procedure - инструкция по действиям в аварийных ситуациях), доведенный до каждого сотрудника. Если его нет, даже мелкий сбой грозит перерасти в катастрофу..


Шаг 2. Организационная структура и компетенции
После «бумажной» части переходим к «человеческой».

з. Зоны ответственности. В ЦОДах должны быть четко назначены ответственные за электрохозяйство, вентиляцию, пожарную безопасность и охрану труда. Даже если один сотрудник совмещает функции, важно, чтобы все эти зоны были «закрыты» и закреплены соответствующими приказами, должностными инструкциями и прочими документами.

и. Обучение и учения. Спросите инженеров, когда они проходили последнее обучение. Если ответ «при приеме на работу 3 года назад» — это плохо. Знания устаревают, а навыки действий в нештатных ситуациях теряются.

• Важно: Спросите не только о лекциях, но и об учениях. Отработка навыков так же важна, как и теория.

Шаг 3. Бюджетирование: экономия на спичках
Эксплуатация — это постоянные затраты. Попросите ответственного показать бюджет на текущий год.

к. Планирование крупных трат. Замена аккумуляторных батарей происходит раз в 5-7-10 лет, но стоит дорого. Эти деньги должны быть заложены в бюджет заранее. Если их нет, ЦОД может оказаться в ситуации, когда ресурс батарей исчерпан, а взять средства неоткуда.

л. Расходники. Попытка сэкономить на масле для генераторов или фильтрах для кондиционеров — это путь к аварии. Спросите, сколько средств заложено на текущее обслуживание и сколько уже потрачено. Отсутствие финансового плана — верный признак бессистемного управления.


Шаг 4. Вердикт и действия
После выполнения этих шагов у вас сложится объективная картина.

Если вы нашли единичные пробелы, это повод заказать углубленный аудит, чтобы «закрыть» конкретные дыры: доработать регламенты, обучить персонал или внедрить специализированное ПО для учета.

Если вы обнаружили, что документов нет, бюджета нет, а обучение не проводится, ситуация требует полной реорганизации службы эксплуатации «с нуля». Откладывать решения нельзя — риск аварии крайне высок.

Если у вас нет времени на самостоятельную проверку или вы хотите получить профессиональное заключение, наши эксперты готовы провести тот же экспресс-аудит за несколько часов. Мы предоставим отчет с «красными» и «зелеными» зонами вашей инфраструктуры.
На основе полученных данных мы либо проведем точечную «санацию» проблемных участков (разработаем недостающие процедуры, обучим персонал), либо возьмем на себя полное построение службы эксплуатации под ключ: от разработки штатного расписания и документации до запуска системы регулярного контроля.
Простой аудит — это возможность заглянуть в «подкапотное пространство» вашего ЦОДа. Вы получите карту болевых точек и поймете, в каком направлении двигаться, чтобы обеспечить максимальную надежность вашего бизнеса.

Инструкция: Пройдите по каждому пункту. Отмечайте результат галочкой, если есть/выполняется, восклицательным знаком если выполняется частично или с замечаниями или крестом, если отсутствует/не выполняется. В колонке «Комментарий» фиксируйте наблюдения.

1. ПРОВЕРКА ДОКУМЕНТАЦИИ