День, когда Земля остановилась
Давно ли вам приходилось перезапускать стейджинговую систему, на которой развернута масса приложений и работает не одна сотня команд? Мы частенько издевались над стейджем, но никогда не выключали его целиком. И в процессе плановой замены сетевого стека в кластере k8s stage решили сделать масштабную проверку возврата системы и всех запущенных на ней приложений в работоспособное состояние после «внезапного отключения питания в локальном ЦОД».
Кабели никто перерезать не собирался, но идея «выключить и включить» традиционно выглядела как «приключение на 20 минут». Именно так всё и случилось: кластер k8s не смог вернуться в рабочий режим, приложения не запускались, и причины тому крылись не внутри, а снаружи.
Под катом хронология двухдневных драматических событий, варианты действий и некоторые размышления после проведённых «учений».
Читать далее
Новости России
Москва В Московской области завершился первый этап кинофестиваля «Движение по вертикали», посвященный памяти Станислава Говорухина
Moscow.media Частные объявления сегодня
Coach, коллекция resort 2026
Врач-гигиенист клиники «Мегастом» Инна Гришина: как выбрать зубную щетку
Модель Хейли Бибер высмеяла праздник День отца
«Сама она не пройдет»: депрессия – душевное расстройство, которое нужно лечить
Israel’s attacks on Iran may keep Fed rate cuts on hold, just as inflation was looking better
Coinbase faces crypto backlash over sponsoring military parade in D.C.
USDOT wants more self-driving cars without pedals or steering wheels
Do you have buyer’s remorse about your new degree? It’s OK, these CEOs studied subjects that aren’t related to their industries
«Я карбоновый! Я чеченец!»: В Мытищах простой русский парень «навалял» двум чеченцам, которые ломились к нему в квартиру в 3 часа ночи
В Орловской области есть повреждения в результате массированной атаки
НПС начал гидроизоляцию пролетного строения моста имени Королева
BeringPro и Axenix объявляют о партнерстве для реализации проектов на платформе интегрированного планирования In.Plan
Somebody actually bought that $3,000 Steam Deck prototype off eBay, then they let a YouTuber crack it open to see what's inside
Oil rig horror game Still Wakes the Deep is going underwater in a surprise story expansion that arrives next week
Playdigious портирует лингвистическую головоломку Chants of Sennaar
A rumor that Nier: Automata's character designs were censored for Western audiences came from a mistranslation, creators say
Возобновление маршрута: Пхеньян и Москва снова связаны поездом
Лавров и Сугионо обсудят расширение политических контактов в Москве 17 июня
В Московской области завершился первый этап кинофестиваля «Движение по вертикали», посвященный памяти Станислава Говорухина
Революция в бизнес-регистрации: GLOBAL TAX ASSISTANT, Mastercard и IFZA запускают AI-решение для предпринимателей ОАЭ
Возобновление маршрута: Пхеньян и Москва снова связаны поездом
Лавров и Сугионо обсудят расширение политических контактов в Москве 17 июня
В Московской области завершился первый этап кинофестиваля «Движение по вертикали», посвященный памяти Станислава Говорухина
Примерная работа. Как Москва создаёт уникальные сервисы
На юге Москвы за день выпало 33% осадков от июньской нормы
Венецианские протесты могут омрачить свадьбу миллиардера Джеффа Безоса
Требование капитуляции Ирана и закон о защите русского языка – главное
Карапетян заявил, что власти Армении хотели его задержать, но люди дали отпор
Татьяна Мария победила Анисимову в финале турнира в Лондоне
Зверев пробился в финал соревнования в Штутгарте
Синнер прокомментировал свою победу в первом круге турнира в Галле
WTA предупредила о грубых интернет-угрозах в адрес теннисисток
Освещение всех платформ в Брянской области железнодорожники заменили на светодиодное
В Думу внесли законопроект о новой памятной дате
Россия и Грузия: отношения без дипломатии, что дальше?
Уроженец Владимирской области избран член-корреспондентом Российской академии наук
Музыкальные новости
Дочь уральского миллиардера вернулась к Шнурову — публично проявили чувства
Юрий Лоза высказался о творчестве Николая Баскова: «Убрать невозможно»
От Вагнера до Шостаковича: как прошел гала-концерт музыкального фестиваля «Зарядье»
Певица Нюша выложила фото в крошечном бикини
Лавров и Сугионо обсудят расширение политических контактов в Москве 17 июня
Возобновление маршрута: Пхеньян и Москва снова связаны поездом
Революция в бизнес-регистрации: GLOBAL TAX ASSISTANT, Mastercard и IFZA запускают AI-решение для предпринимателей ОАЭ
Эвакуация из Ирана: более 200 русских добирались в Россию полтора суток
«Кубок Сибири» в Абакане собрал рекордное количество участников
Появилось видео с места аварии с двумя грузовиками и Infiniti на востоке Москвы
Серьёзное ДТП в Москве: Infiniti зажат между двумя грузовыми фурами
Пять рейсов из Пулково задержали утром в субботу
В России выросли продажи новых люксовых автомобилей
Столичные росгвардейцы помогли автоледи поменять пробитое колесо
Ущерб на миллион: иностранец на каршеринге протаранил авто и сбежал за границу
ООО "Грин-Тех" - Российский производитель оборудования для испытаний грунтов и асфальтобетона
Путин проведет переговоры со сыном бригадира короля Бахрейна по поводу ситуации на Ближнем Востоке
Путин проведет переговоры о развитии глобального нефтяного рынка с генеральным секретарем ОПЕК
Путин в Петербурге проведет встречу с вице-президентом ЮАР в этот четверг
Путин и Роуссеф проведут переговоры на ПМЭФ о стратегии Нового банка развития
В Москве доминирует штамм омикрон, но у большинства тяжелых больных выявлен дельта штамм
В столичном главке Росгвардии отметили всемирный День донора крови
Душевное здоровье на пьедестале: Аделина Панина удостоилась звания «Лучший клинический психолог»
Новый вирус SuperCard: как мошенники крадут деньги при бесконтактной оплате
Как подготовиться к приему врача-уролога?
«Детонировало до утра»: Зеленский назвал ночной удар по Киеву одним из самых страшных за время СВО
"Детонировало до утра": Зеленский запаниковал после ночного удара по Киеву
Оттава выделит Киеву новый пакет военной помощи
Борисова выиграла многоборье на этапе Кубка сильнейших в Сочи
«585*ЗОЛОТОЙ» в День России преподнесла оригинальные подарки знаковым личностям в области культуры и спорта
По сообщениям СМИ, форвард турецкого клуба отверг предложение «Зенита»
В МФТИ стартовала первая смена летнего сезона Олимпиадных школ
Лукашенко выдвинул идею установки памятника корове
«Нутром чую: кинем работать — будем воевать»: Лукашенко сделал неожиданное заявление
Лукашенко: молодежь должна понимать, что картофель растет в поле, а не в интернете
Лукашенко заявил о проблеме, которая может довести Белоруссию до голода
Собянин рассказал о модернизации системы энергоснабжения столицы
Сергей Собянин рассказал о планах модернизации системы энергоснабжения Москвы
Собянин: Утвердили проект развития улично-дорожной сети рядом с метро «Теплый Стан»
Сергей Собянин раскрыл планы по модернизации энергосистемы Москвы
Освещение всех платформ в Брянской области железнодорожники заменили на светодиодное
«Ростех» приостановит строительство трех мусороперерабатывающих заводов
По следам природы. Топ-5 самых интересных экологических троп Москвы
Участница экологической премии приняла участие в выпуске спасенных тюленей
В ВШЭ назвали «разумными» зарплаты курьеров
В Думу внесли законопроект о новой памятной дате
Известные музыканты отметили фестивалем в Питере юбилей Майка Науменко
Дать форум: объем контрактов на ПМЭФ-2025 достигнет 7,5 трлн
Отделочные работы начались на станции «Народное Ополчение»
Вечная теплота: интерес туристов к северным регионам вырос в полтора раза
"ЭкоИнтегратор" запаздывает с ликвидацией стихийной свалки мусора в Архангельске
Амурская область вошла в список регионов, которые могут соответствовать зарплатным ожиданиям
Дожди отступают: погода в Крыму на вторник
Партенит частично останется без электричества: в Симферополе, Евпатории, Алуште, Керчи, Джанкое, Феодосии и Севастополе отключат свет 17 июня
Требование капитуляции Ирана и закон о защите русского языка – главное
Поезда из Москвы в Феодосию будут ходить чаще
Дать форум: объем контрактов на ПМЭФ-2025 достигнет 7,5 трлн
Карапетян заявил, что власти Армении хотели его задержать, но люди дали отпор
Почему в православных церквях торгуют? Простые объяснение от РПЦ
По следам природы. Топ-5 самых интересных экологических троп Москвы
