Утром в четверг, 7 мая, приблизительно в 08:45 по местному времени, в дата-центре NorthC AMS3, расположенном в городе Алмере неподалеку от Амстердама (Нидерланды), вспыхнул пожар. К настоящему моменту возгорание удалось взять под контроль. Как сообщили представители NorthC, очаг возгорания находился в тыльной части строения, где размещены технические помещения. На протяжении дня пламя не удавалось ликвидировать, несмотря на то что для тушения были задействованы три пожарные машины. В результате инцидента пострадали как государственные, так и частные компании региона, а также облачный сегмент IBM Cloud Amsterdam 03.
Пожару, которому изначально присвоили уровень опасности GRIP 2, к вечеру удалось локализовать. Степень угрозы была понижена до GRIP 1, а оповещение NL-Alert отменили. «Это свидетельствует о том, что огонь находится под контролем», — отметили на веб-сайте NorthC. В 0:35 8 мая по местному времени компания заявила, что пожарные службы уменьшили уровень опасности до GRIP 0. Данный статус указывает на то, что аварийные службы полностью управляют обстановкой, и здание частично снова доступно. В 10:00 NorthC проинформировала, что в ночные часы было проведено обследование строения после возгорания, подчеркнув, что противопожарная изоляция не позволила огню и дыму распространиться дальше по сооружению.
Источник изображения: NorthC
«Наши бригады в полном составе трудятся на площадке, занимаясь восстановлением подачи электричества и связи. В рамках этих мероприятий готовятся внешние аварийные источники энергии, чтобы как можно быстрее и безопасно включить оборудование клиентов», — заявили в компании.
Согласно информации ресурса The Next Web, пожар спровоцировал неполадки в работе информационных систем Утрехтского университета, чьи серверы размещены в ЦОД NorthC. Сбои также затронули функционирование общественного транспорта провинции Утрехт, так как в дата-центре находятся серверы компании Transdev, управляющей автобусными и трамвайными маршрутами в данной местности. Кроме того, с трудностями столкнулись фирма Infomedics, занимающаяся обработкой счетов от имени медицинских учреждений, и местное управление водоснабжения Hoogheemraadschap De Stichtse Rijnlanden.
Помимо этого, проблемы затронули и облачную платформу IBM Cloud, причём внутренние системы мониторинга IBM долгое время ошибочно сигнализировали о её нормальной работе. В комментарии для издания The Register компания заявила: «IBM проинформирована о возгорании в дата-центре Амстердама, который обеспечивает работу не только IBM, но и ряда других организаций. Персонал эвакуирован, никто не пострадал. Мы активно взаимодействуем с аварийными службами, оцениваем влияние на нашу деятельность и напрямую связываемся с затронутыми клиентами для минимизации последствий».
Источник изображения: IBM Cloud
На момент 14:48 по московскому времени IBM (INC11282490) сообщает о полном отключении дата-центра — все сервисы и каналы связи недоступны. Специалисты компании уже провели осмотр объекта и сейчас анализируют обстановку, в то время как NorthC пытается возобновить подачу электричества. IBM советует клиентам перейти на другие облачные регионы и задействовать собственные планы аварийного восстановления (DR). В пострадавшем регионе остановлены базовые вычислительные мощности, средства связи и хранения данных, включая сервис IBM Cloud Backup. Годом ранее IBM Cloud уже сталкивалась с инцидентом первой степени серьёзности, когда пользователи потеряли доступ к своим ресурсам.
Осмотр, выполненный специалистами IBM в 17:11 по МСК, показал, что все три серверных зала в ЦОД остались неповреждёнными и не имеют следов воздействия дыма или воды. Главная сложность по-прежнему связана с отключением электропитания в серверном зале №1, так как прилегающее здание с инженерными системами и охлаждением, обеспечивающее его работу, вышло из строя. При этом инфраструктура и системы охлаждения, обслуживающие залы №2 и №3, визуально не пострадали.
Первоочередная задача по восстановлению сервисов — вернуть клиентам доступ к ресурсам, расположенным в залах №2 и №3. Одновременно компания намерена перенести оборудование и рабочие нагрузки из серверного зала №1 в зал №3, что займёт несколько суток. На текущий момент ЦОД полностью недоступен. Все коммуникации и сервисы отключены. «Мы настоятельно рекомендуем клиентам по возможности переключиться на резервный ЦОД», — отметили в IBM.
В минувшем году в Южной Корее произошёл крупный пожар в центре обработки данных, который привёл к сбоям в работе почти 700 государственных сервисов и потере 858 терабайт правительственной информации. В текущем году небольшое возгорание случилось в лондонском дата-центре Global Switch. В марте из-за физического нападения загорелся ЦОД AWS в Объединённых Арабских Эмиратах, что практически полностью уничтожило облачный регион.
Источники:
