Проблемы энергоснабжения в ЦОД в 2011 году

Согласно статистике, накопленной Uptime Institute, большинство отключений энергии в дата-центрах связано с человеческим фактором. Однако в 2011 году был зафиксирован ряд случаев обесточивания крупных ЦОД по вине автоматике или других инженерных систем.

При этом отметим, что по статистике ЦОД от Ponemon Institute стоимость простоя дата-центра из-за аварии энергоснабжения оценивается в 1.2млн.долл. (оценка основана на данных от 41 ЦОД в США).

Ниже приведены наиболее громкие отказы в энергоснабжении ЦОД.

Глобальное отключение энергии в RIM

В октябре 2011 года компания RIM (Research In Motion), производитель смартфонов BlackBerry, испытала проблемы энергоснабжения своей инфраструктуры в результате отказа основного вводного автомата.

"Несмотря на то, что в системе энергоснабжения был запроектирован резервный автомат, переключения, как это происходило при тестировании системы, не произошло" - заявляет представитель RIM, - "В результате была сгенерирована точка отката с целью последующего восстановления сервисов".

В общей сложности проблемы продолжались порядка трёх дней, вызвав многочисленные задержки в предоставлении сервисов для многих заказчиков. Для их компенсации RIM предложила бесплатную скачку платного приложения BlackBerry App World premium.

Обесточивание облаков Google

Сервис App Engine Datastore от Google упал из-за обесточивания в Августе 2011 года из-за проблем с энергоснабжением ЦОД Google на западе США. Источник проблемы - несработавший АВР для переброса нагрузки на генератор.

Компания Google написала письмо "Оборудование энергоснабжения ЦОД вышло из строя вслед за потерей второго источника энергии, что вызвало отключение ИТ-оборудования ЦОД".

Отключение питания вызвало снижение вычислительной мощности и объёма хранилища данных, что привело к большой задержке, ошибкам серверов и даже полному падению сервиса App Engine.

Для решения проблемы был предпринят перенос данных на резервный ЦОД. При этом многие приложения появились в режиме отката во времени.

Фиаско ЦОД Amazon в Дублине

Энергоснабжение ЦОД Amazon в Дублине (Исландия) было нарушено природой: трансформатор мощностью 10МВт был сражён молнией. Согласно данным Amazon, нагрузка была переброшена на резервный источник питания, но при этом некорректно отработала система согласования фазы электрического тока, в чем были обвинены программируемые логические контроллеры (ПЛК).

ПЛК обнаружили ошибку в заземлении и "решили" не выполнять переключение на генераторы. Обесточивание охватило множество сервисов Amazon: Infrastructure-as-a-Service, Elastic Compute Cloud, Elastic Block Store, и другие облачные сервисы (Relational Database Service).

Amazon Web Services обещала внести несколько  изменений в инфрастуктуру ЦОД во избежание подобные аварий впредь. Также планируется повысить избыточность ПЛК и изолировать их от проблем с другим оборудованием.

Страдания ЦОД Telecity

В июле 2011 года произошло отключение энергии в ЦОД Telecity в Лондоне, что вызвало проблемы в сервисах компаний-клиентов коммерческого ЦОД. Точкой отказа явился выключатель в системе распределения электроэнергии, согласно письму, разосланному Telecity одному из своих клиентов. При этом все клиенты оказались в оффлайне, кольцо 10Гб было разорвано.

Длительность аварии составила 20 минут, после чего Telecity разослала сообщение, что «Проблема вызвана сегодняшним отключением энергии в ЦОД Meridian DataCenter. Наши инженеры быстро справились с проблемой и восстановили электроснабжение в течение 20 минут. Мы держали клиентов в известности о ходе работ в течение всего времени проведения работ и приносим свои извинения за аварию».

Теги:
#Электроснабжение (ИБП, ДГУ)
#Опыт ЦОД

Оставить комментарий

Ваше имя:
E-mail:
(Не обязательно)
Текст комментария:
Введите код с картинки:  

Дополнительные материалы

Можно ли зимой включать кондиционер на обогрев

Вытяжка в стену: как подобрать и правильно сделать своими руками

3 способа сделать увлажнитель воздуха для квартиры и дома своими руками

Всё самое важное про турбодефлекторы: что такое, принцип работы, внешний вид, как подобрать

Вентиляция в квартире: самое полное руководство простым языком

Встраиваемая вытяжка на кухне: важные нюансы по устройству и подключению

Вытяжка в дачном туалете: как сделать правильно своими руками

Вентиляция гаража: как сделать правильно своими руками