→
Падение фейсбука
Публичный пост
5 октября 2021
1154
Cloudflare написал отличную техническую статью о том, что произошло, и это событие безусловно не осталось незамеченным никем.
В одном из чатиков обсуждали, как восстанавливать из бекапа данные, когда у тебя их петабайты (а точнее, почему это невозможно), в ФинансовойНезависимости обсуждали, при какой цене пора выкупать акции фейсбука, а у меня жена говорила что у неё на телефоне совсем интернет не работает (как оказалось, вотсап да инстаграм).
Предлагаю обсудить ситуацию, <sarcasm>мы же эксперты во всех областях!</sarcasm>, поделиться эпичными историями падений крупных систем из своей жизни, и обсудить нашу веру в то, что фейсбук не может упасть, поэтому почему бы не завязать инфраструктуру бейджиков входа в здание на тот же самый фейсбук.
Оказалось что настолько редко пользуюсь сервисами фейсбука, что заметил падение только от этого поста
У нас там был крупный проект одного из клиентов. Бэкапы были, но хранились они в том же дата-центре 😆 Причем, некоторые бэкапы OVH хранил в другом дата-центре в Нидерландах (но не наши 🙃).
П - профессионализм.
Причем я периодически предлагал делать бэкапы хотя бы базы (а там было ещё много картинок) ещё куда-нибудь. Но tech guy из компании клиента сказал, что всё ОК.
В итоге собирал бэкапы где мог. Из 4-х баз исчезли навсегда две. Один бэкап нашел на Dropbox, второй на своем ноуте. Знали бы они, что актуальность их базы зависит от того, очистил ли папку Downloads какой то чувак из Питера :D
Всего то пару недель работы нескольких десятков человек для наполнения сайтов. Ещё 100-200 человек снова создали себе аккаунты, заполнили инфу. Ну ниче, справились.
Однажды весною 2020 года один мой хороший знакомый не смог больше зайти в чятик Вастрик.Финансовая Независимость.
Сначала он подумал, что у провайдера проблемы с интернетом.
Но как оказалось позже аккаунт там забанили за вопрос, стоит ли покупать акции тогда почти никому не известной компании BioNTech из Германии.
Через несколько недель BioNTech и Pfizer объявили, что они подали на регистрацию вакцины от коронавируса.
Их акции повзлетали почти в 2 раза примерно за полчаса.
А перед моим другом никто не извинился.
Бывает же такое!
Уже видимо никто не помнит, но аналогичный случай был у яндекса. Правда там инфраструктуру уронили более оригинальным способом. Просто проанонсировали внутрь всю таблицу интернета. А она была слегка больше чем память на маршрутизаторах внутри. В итоге яндекс лежал, а бравые сетевики ехали к маршрутизаторам и физически тыкали в них консольный провод.
Интересно, что в Праге вчера в это же время падал интернет от Водафона