Одно отключение питания в одной зоне Лондона положило HSBC, Revolut и Lloyds

Что сказал Google

Отчёт Neowin среди пострадавших называет HSBC, Revolut, Bank of Scotland, Lloyds и Equifax. В ветке nickcw процитировал страницу статуса: несколько сервисов в europe-west2 пострадали с 23:08 PDT 19 октября «из-за события с питанием» в europe-west2-b, частичное восстановление ожидалось в течение 30 минут. Он добавил, что указывать время в PDT бесполезно для пользователей из Великобритании.

Почему несколько зон не помогли

«Везде, где я работал, была мультизонная инфраструктура. Я нигде не видел, чтобы отказ зоны регулярно моделировали и прорабатывали вторичные эффекты.» — комментатор, который запускал мультизонные системы в нескольких компаниях

Другой возразил, что зона Google — это не зона доступности AWS и что некоторые регионы делят одни и те же объекты. Третий сказал, что определённое железо есть только в некоторых зонах, так что размещение виртуальных машин означает компромисс с распределением по зонам. Комментатор указал на юридические ограничения, касающиеся того, где могут храниться облачные данные страны, из-за чего данные остаются рядом с домом.

Один читатель защитил банки: план, возможно, был простым — «восстановить бэкапы в другой зоне», если зона потеряна, а ожидание нескольких часов принималось как более дешёвый риск.

Если ваш план отказоустойчивости никогда не выполнялся, считайте его непроверенным.