Падение фейсбука

 Публичный пост

Cloudflare написал отличную техническую статью о том, что произошло, и это событие безусловно не осталось незамеченным никем.

В одном из чатиков обсуждали, как восстанавливать из бекапа данные, когда у тебя их петабайты (а точнее, почему это невозможно), в ФинансовойНезависимости обсуждали, при какой цене пора выкупать акции фейсбука, а у меня жена говорила что у неё на телефоне совсем интернет не работает (как оказалось, вотсап да инстаграм).

Предлагаю обсудить ситуацию, <sarcasm>мы же эксперты во всех областях!</sarcasm>, поделиться эпичными историями падений крупных систем из своей жизни, и обсудить нашу веру в то, что фейсбук не может упасть, поэтому почему бы не завязать инфраструктуру бейджиков входа в здание на тот же самый фейсбук.

Связанные посты
35 комментариев 👇

Оказалось что настолько редко пользуюсь сервисами фейсбука, что заметил падение только от этого поста

  Развернуть 1 комментарий

@anatolt, насколько я понимаю, из-за каскадной нагрузки досталось всем - и Твиттеру, и Телеграму, и Ютубу, и даже условным Одноклассникам. Хотя лично я тоже не заметил никаких проблем вчера.

  Развернуть 1 комментарий

@anatolt, узнал после того, как сосед пришел отвертку занести и сказал, что че то наш соседский чатик в вацапе не работает.

  Развернуть 1 комментарий

Да вот недавно дата-центр OVH перешел в облако
Да вот недавно дата-центр OVH перешел в облако

У нас там был крупный проект одного из клиентов. Бэкапы были, но хранились они в том же дата-центре 😆 Причем, некоторые бэкапы OVH хранил в другом дата-центре в Нидерландах (но не наши 🙃).

П - профессионализм.

Причем я периодически предлагал делать бэкапы хотя бы базы (а там было ещё много картинок) ещё куда-нибудь. Но tech guy из компании клиента сказал, что всё ОК.

В итоге собирал бэкапы где мог. Из 4-х баз исчезли навсегда две. Один бэкап нашел на Dropbox, второй на своем ноуте. Знали бы они, что актуальность их базы зависит от того, очистил ли папку Downloads какой то чувак из Питера :D

Всего то пару недель работы нескольких десятков человек для наполнения сайтов. Ещё 100-200 человек снова создали себе аккаунты, заполнили инфу. Ну ниче, справились.

  Развернуть 1 комментарий

@MaxLipsky,

Но tech guy из компании клиента сказал, что всё ОК.

что ему в итоге было?

  Развернуть 1 комментарий

@TiraelSedai, подозреваю, что ничего. Виноват же OVH!

  Развернуть 1 комментарий

@MaxLipsky, или пожарники - недостаточно быстро тушили!

  Развернуть 1 комментарий

@TiraelSedai, к ним, кстати тоже вопросы :) Там 4 корпуса рядом стояли, сгорело 2 из них полностью и третий наполовину. И ещё вопросы к пожарной безопасности, которая не сработала. Ещё в инете ходили фотки, что там перекрытия из досок делали (или настил на пол?).

  Развернуть 1 комментарий

@MaxLipsky, у фланта была интересная статья как они спасались
https://habr.com/ru/company/flant/blog/561854/

  Развернуть 1 комментарий
Maximus Электрический инженер 5 октября 2021

Однажды весною 2020 года один мой хороший знакомый не смог больше зайти в чятик Вастрик.Финансовая Независимость.

Сначала он подумал, что у провайдера проблемы с интернетом.

Но как оказалось позже аккаунт там забанили за вопрос, стоит ли покупать акции тогда почти никому не известной компании BioNTech из Германии.

Через несколько недель BioNTech и Pfizer объявили, что они подали на регистрацию вакцины от коронавируса.

Их акции повзлетали почти в 2 раза примерно за полчаса.

А перед моим другом никто не извинился.

Бывает же такое!

  Развернуть 1 комментарий

@Maximus, заговор масонов, не иначе!

  Развернуть 1 комментарий

@Maximus, вот так взяли и за простой вопрос забанили? Orly?

  Развернуть 1 комментарий

@Maximus, дед ты чо опять нажрался?

  Развернуть 1 комментарий

@Maximus, под этим постом было бы актуальнее спросить «Кто же такие все-таки эти айтишники?»

  Развернуть 1 комментарий
Anatoly Shipitsin Специалист по НЕХ 6 октября 2021

Уже видимо никто не помнит, но аналогичный случай был у яндекса. Правда там инфраструктуру уронили более оригинальным способом. Просто проанонсировали внутрь всю таблицу интернета. А она была слегка больше чем память на маршрутизаторах внутри. В итоге яндекс лежал, а бравые сетевики ехали к маршрутизаторам и физически тыкали в них консольный провод.

  Развернуть 1 комментарий

Некоторые подробности подобного (февраль 2020, причина не в памяти на маршрутизаторах) есть здесь https://status.cloud.yandex.ru/incidents/8
Два часа полного или частичного даунтайма у многих сервисов.
Двери работали.

  Развернуть 1 комментарий
  Развернуть 1 комментарий
Programistich Mobile Developer Команда Клуба 5 октября 2021

  Развернуть 1 комментарий

@Programistich, We’re checking your browser

  Развернуть 1 комментарий

@Programistich, кстати интересно, как много хитов теряют сайты из-за этого. Я частенько забиваю на ожидание и просто открываю другой сайт, если это возможно.

  Развернуть 1 комментарий

@kitsu, радикально) меня из вещей которые могут заставить уйти на другой сайт осталась разве что hCapture, вот уж действительно творение дьявола

  Развернуть 1 комментарий

@kitsu, нам нужно удостовериться, что Вы не робот

  Развернуть 1 комментарий

@kitsu, можно здесь посмотреть кое-что: https://www.gigaspaces.com/blog/amazon-found-every-100ms-of-latency-cost-them-1-in-sales

Наивная оценка из выручки по публичным данным, 6 часов простоя должно было обойтись ФБ в моменте примерно в 50 - 150 миллионов долларов выручки.

В плане эффекта на MAU/DAU, не очень понятно. ФБ не одноразовый сайт. Туда идут за обновлениями, все же.

  Развернуть 1 комментарий

@smileijp, не учитывается дроп цены акций.

  Развернуть 1 комментарий

@TiraelSedai, не очень понятно, на что это влияет. ФБ - не Тесла. Чистая прибыль составляет чуть меньше 40% от выручки. Так что у них еще огромный запас финансировать внутренние инициативы.

  Развернуть 1 комментарий

@smileijp, зарплаты сотрудников и всё такое. Cost of capital у них и так небольшой, да, если бы они захотели взять в долг.

Марк Цукерберг потерял $6,6 млрд из-за сбоев Facebook, Instagram и WhatsApp, опустился на 6 место в списке миллиардеров, свидетельствуют данные Forbes

  Развернуть 1 комментарий

@TiraelSedai, вкратце, в плане компенсации, стоимость акций - это в первую очередь проблема сотрудников:

In your offer letter, you’ll see it as a Facebook equity grant. This grant is denominated in dollars. Once you start, your grant is converted into RSUs based on the corresponding dollar amount.

https://blog.myrawealth.com/insights/how-to-interpret-your-facebook-benefits

  Развернуть 1 комментарий

@smileijp, не очень понимаю какая из этого мысль следует.
Естественно, это "проблема" сотрудников, что значит, что им стали платить меньше, чем вчера \ в соседнем аанге \ другие последствия. То, на что влияет твоя зарплата в компании довольно очевидно :)

  Развернуть 1 комментарий

@TiraelSedai, в том смысле, что на зарплатный фонд это не сильно влияет. А с точки зрения падения акций, так ведь все сейчас падают. Тех много где раздут. И фб в этом смысле скорее наиболее безопасное место.

  Развернуть 1 комментарий

Интересно, что в Праге вчера в это же время падал интернет от Водафона

  Развернуть 1 комментарий
  Развернуть 1 комментарий

@TiraelSedai, про "совпадение" веселее смотреть вот на эту новость: https://www.vedomosti.ru/media/articles/2021/10/04/889666-facebook-trebovaniya

Фейсбук выполнил требования властей, и прилёг на 6 часиков 😂

  Развернуть 1 комментарий

@emocoder, для водафона это нормально в принципе каждый вечер :D

  Развернуть 1 комментарий

@vas3k, ну это в Берлинах ваших может и нормально!

  Развернуть 1 комментарий

@emocoder, в Будапеште тоже, я когда маме по вотсапу не смог позвонить, полез проверять баланс интернета в приложение, и подумал, что все полимеры действительно пропавшие

  Развернуть 1 комментарий

😎

Автор поста открыл его для большого интернета, но комментирование и движухи доступны только участникам Клуба

Что вообще здесь происходит?


Войти  или  Вступить в Клуб