Google Cloud не работал 6 часов из-за сбоя «бесперебойного» электроснабжения

Google в своём блоге сообщила о сбое «бесперебойной» системы электроснабжения, питающей платформу Google Cloud, из-за чего возникли проблемы в работе облака в зоне доступности «us-east5-c», расположенной в Колумбусе, штат Огайо. В этой зоне находились системы, построенные на процессорах AMD EPYC и Intel Xeon.

Сбой электропитания привёл к почти 6-часовому отключению платформы и повлиял на качество обслуживания и доступность некоторых облачных служб Google. В блоге Google сказано, что причина заключается в критическом сбое батареи, которая используется для поддержания питания в зоне до включения генератора при потере коммунального электроснабжения.

Google детально объяснила эту проблему в своей статье на странице службы поддержки. Также компания сообщила, что проблема устранена.

«Инженеры Google перенаправили трафик в сторону от места, подвергшегося воздействию, чтобы частично смягчить последствия для некоторых служб, которые не имели зональной зависимости от ресурсов. Инженеры обошли отказавшую систему и восстановили питание через генератор к 14:49 по тихоокеанскому времени в субботу, 29 марта. Большинство сервисов Google Cloud восстановились вскоре после этого. В некоторых службах восстановление заняло больше времени, так как в некоторых случаях для полного восстановления потребовались ручные действия», — сказано в блоге компании.