Команда инженеров «Яндекса» поделилась результатами расследования инцидента недельной давности, нарушившего функционирование многочисленных интернет-сервисов компании.

Источник изображения: company.yandex.ru

Напомним, что масштабный сбой в работе облачных площадок «Яндекса» произошёл 6 февраля. Недоступными оказались «Почта», «Диск», «Маркет», «Карты», «Музыка» и другие сервисы. Основной пик пришёлся на период с 17:03 до 17:50 по московскому времени, при этом полностью устранить проблемы и восстановить функционирование всех ресурсов удалось только к 21:30.

Выяснилось, что главной причиной недоступности сервисов стал каскадный сбой в работе сетевого оборудования, спровоцированный выходом из строя одного из сетевых устройств — граничного маршрутизатора. Специалисты «Яндекса» воспроизвели сбой в лабораторных условиях и выявили в ОС маршрутизатора баг, оказавший ключевое влияние на развитие событий. Компания приняла меры, чтобы исключить подобные инциденты в будущем, и сообщила о проблеме в ПО производителю сетевого оборудования.

«Мы приняли ряд мер, которые не позволят подобному инциденту произойти вновь. Заменили отказавший маршрутизатор на полностью рабочий. Научились воспроизводить аварийную ситуацию в нашей лаборатории. В будущем она будет исправлена на уровне операционной системы производителя сетевого оборудования», — говорится в заявлении «Яндекса». Афишировать вендора проблемного сетевого оборудования в компании не стали.

Минувшей ночью в работе Twitter произошёл масштабный сбой — платформа оставалась доступной, но не работали некоторые базовые функции: не отправлялись твиты и личные сообщения, ленты наводнили старые публикации, и было невозможно на кого-то подписаться.

Источник изображения: Photo Mix / pixabay.com

В ответ на попытку опубликовать твит платформа выводила сообщение странного содержания: «Вы превысили дневной лимит на отправку твитов». Сбой продолжался более часа, но ещё до того, как инженеры соцсети с ним справились, пользователи нашли обходной способ делать публикации — использовать планировщик. Администрация Twitter признала наличие проблемы, заявив, что система «может работать не так, как ожидается», и заверила, что работает над восстановлением работоспособности ресурса.

Источник изображения: twitter.com/TwitterSupport

Некоторые пользователи сообщали о некорректной работе прочих функций: не отправлялись личные сообщения, невозможно было подписываться на другие учётные записи, не обновлялась лента подписок. Отдельные сообщения о продолжающихся сбоях поступали какое-то время после того, как корректная работа платформы была преимущественно восстановлена.

После покупки Twitter Илоном Маском (Elon Musk) в компании начались массовые увольнения сотрудников, и в какой-то момент в штате не осталось ключевых технических работников, что вызвало опасения за будущее соцсети. Однако новый владелец и глава компании отрицает, что ситуация дошла до критической — сейчас в компании, по его словам, 2300 активных работников. При этом сегодняшний сбой стал первым с момента перехода Twitter новому владельцу.

В работе социальной сети «ВКонтакте» произошёл сбой — многие пользователи из России и других стран ближнего и дальнего зарубежья столкнулись с тем, что как настольная, так и мобильная версия соцсети не загружаются.

О массовом характере проблем свидетельствуют данные ресурса Brand Analytics — он зафиксировал резкий скачок числа жалоб на проблемы с работой «ВКонтакте». По состоянию на 20:00 по московскому времени было зафиксировано 303 сообщения о сбоях при базовом уровне в 9 сообщений.

В компании VK Group уже прокомментировали ресурсу Lenta.ru ситуацию: «Пользователи в некоторых регионах могут испытывать краткосрочные затруднения с загрузкой социальной сети. Сейчас мы завершаем работы по восстановлению доступа в полном объёме».

О причинах проблем пока ничего не сообщается.

Заметим, что вчера с массовым сбоем в работе свои веб-страниц и сервисов столкнулся «Яндекс». Это отразилось в том числе на работе портала dzen.ru, который принадлежит VK Group.

Обновлено:

В 23:06 по московскому времени команда «ВКонтакте» сообщила о восстановлении работы платформы: «"ВКонтакте" работает в обычном режиме. Добро пожаловать обратно».

Различные страницы сервисов «Яндекса» стали работать с перебоями или вовсе перестали открываться у некоторых пользователей в России и других странах. Также проблемы наблюдаются у платформы «Дзен» — она перестала открываться как минимум у части пользователей. Об этом сообщают как различные источники, так и подтверждают сотрудники 3DNews.

По состоянию на 17:40 по московскому времени, главная страница «Яндекса» (ya.ru), а также ряда его сервисов, включая «Маркет» (market.yandex.ru), «Карты», «Музыка» и других, открываются либо очень медленно, либо не с первого раза. Проблема наблюдается при попытках открыть страницы с мобильных устройств и настольных компьютеров. А у отдельных пользователей и вовсе данные страницы отказываются загружаться. Также у многих пользователей не открывается ни один из разделов платформы «Дзен» по адресу dzen.ru.

Специалисты «Яндекса» уже работают над устранением проблем. Например, в Telegram-канале «Яндекс Музыки» сообщается следующее: «К сожалению, "Яндекс Музыка" и другие наши сервисы сейчас работают нестабильно. Уже подняли все службы и побежали разбираться. Обязательно вернёмся с хорошими новостями как можно скорее!»

В пресс-службе «Яндекса» изданию «Ведомости» дали следующий комментарий: «У ряда пользователей возникают временные трудности с доступом к некоторым сервисам Яндекса. Наши специалисты работают над устранением сложностей». О причинах сбоев пока ничего не сообщается.

А вот в пресс-службе VK, которой после прошлогодней сделки с «Яндексом» принадлежит «Дзен», сообщили что платформа работает в штатом режиме.

Напомним, что после перехода под управление VK сервисы «Дзен» и «Новости» стали доступны на едином портале dzen.ru совместно с другими службами, а также поисковой строкой «Яндекса». При этом с адреса yandex.ru начала работать переадресация на dzen.ru, а главной страницей самого «Яндекса» стала ya.ru.

По сведениям Центра мониторинга и управления сетью связи общего пользования (ЦМУ ССОП), сбой в работе иностранного CDN стал причиной недоступности ряда онлайн-сервисов в России в среду. Об этом со ссылкой на данные пресс-службы Роскомнадзора сообщает ТАСС.

Источник изображения: Apple

«По информации ЦМУ ССОП, недоступность ряда зарубежных интернет-сервисов вызвана временным сбоем в работе иностранного CDN. В настоящее время упомянутый узел CDN работает стабильно», — говорится в сообщении.

CDN (Content Delivery Network) представляет собой сетевую инфраструктуру доставки контента.

Ранее сообщалось, что некоторые российские пользователи пожаловались на отсутствие доступа к магазину цифрового контента App Store от Apple. Он не открывался без использования VPN. Кроме того, пользователи отметили недоступность других интернет-ресурсов, включая сайт Microsoft, почтовый сервис Outlook, игровые сервисы Xbox Live, Steam, EA и другие площадки. Также отмечалось, что сбой затронул не только российский сегмент глобальной сети.

От тысяч пользователей по всему миру начали массово поступать сообщения о недоступности сервисов Microsoft, в том числе Teams, Xbox Live, Outlook и пакета Microsoft 365. Проблемы могут затронуть сотни тысяч, если не миллионы пользователей. Компания признала факт наличия проблем и сообщила о расследовании их причин, а также о прогрессе в восстановлении работоспособности служб.

Источник изображения: efes / pixabay.com

На сайте DownDetector стали появляться сообщения о проблемах с доступностью нескольких служб компании: Microsoft 365, Outlook, Teams Azure, GitHub, Microsoft Store и даже Minecraft. На технической странице статуса Office 365 говорится, что «пользователи могут лишиться возможности открывать некоторые службы Microsoft 365» — сбои, заявили в компании, коснулись также сервисов SharePoint Online, OneDrive для бизнеса и Microsoft Graph. Проблемы подтвердили подразделения Microsoft 365 и Azure. Сообщается также, что потенциальная причина сбоя выявлена, и сейчас проводится проверка телеметрии для определения дальнейших шагов по устранению неполадок.

Общее число пользователей, которых мог затронуть сбой, компания не огласила, но сообщения поступают из России, Австралии, Великобритании, ОАЭ, Индии и Японии. Пользователи корпоративного мессенджера Teams, с которым работают 280 млн человек по всему миру, лишились возможности отправлять сообщения — в итоге хештег «#MicrosoftTeams» оказался в мировых трендах Twitter.

Сегодня ранним утром по московскому времени многочисленные подписчики музыкальной потоковой службы Spotify начали жаловаться на отказы в её работе. Вышедшие из системы пользователи сообщали о невозможности повторно войти в свои учётные записи. Два часа спустя работа платформы была полностью восстановлена.

Источник изображения: spotify.com

На сбой в работе Spotify на сайте DownDetector.com поступило 44 460 жалоб. Техническая страница Web API службы указывала на «небольшое» частичное отключение, затронувшее только сам плеер — это согласовывалось с тем, что видели пользователи службы, и это, конечно, самая важная часть системы Spotify. В 4:52 мск аккаунт Spotify Status в Twitter подтвердил наличие проблем, заверив, что команда «изучает» их причину. В 7:16 тот же источник доложил: «Теперь всё выглядит намного лучше!»

В последний раз сбои в работе музыкального сервиса наблюдались в ноябре 2021 года, но тогда их причиной стали проблемы в инфраструктуре Google Cloud, а вместе со Spotify в офлайн ушли и другие крупные службы, включая мессенджеры Discord и Snapchat, а также торговую площадку Etsy. На сей раз причиной сбоя, по всей вероятности, стали технические проблемы самого Spotify. Подробностей администрация платформы не предоставила.

Виновниками имевшего место 11 января инцидента, в результате которого в США были отменены все авиарейсы, являются сотрудники компании-подрядчика, обслуживающей программную платформу Федерального управления гражданской авиации США (FAA). Об этом сообщило NBC News со ссылкой на два источника в правительстве.

Источник изображения: Ashim D’Silva / unsplash.com

Система уведомлений FAA Notice to Air Mission Systems (NOTAM), была запущена в 1993 году, 30 лет назад, и она продолжит работать ещё шесть лет. Программа отвечает за отправку пилотам критически важной информации, необходимой для полёта. Причиной сбоя стал повреждённый файл, из-за которого произошёл сбой в работе как основной, так и резервной систем NOTAM.

Сейчас эксперты проводят расследование инцидента, пытаясь выявить характер причины сбоя: человеческий фактор или злой умысел. Доступ к системе имели восемь сотрудников компании-подрядчика, а изменения в ключевой файл внёс один или двое из них. Министр транспорта США Пит Буттиджич (Pete Buttigieg) обратился к FAA с просьбой «убедиться, что система располагает достаточными средствами защиты, чтобы сбои такого уровня не могли происходить из-за решения, действия или ошибки отдельного человека». Расследование инцидента проводится по распоряжению президента США.

11 января в 7:20 по Североамериканскому восточному времени (15:20 мск) FAA опубликовало сообщение, в котором предписало авиакомпаниям приостановить все внутренние вылеты до 9:00. Работа NOTAM была восстановлена в 8:50 — с этого времени постепенно начало возобновляться воздушное сообщение.

Федеральное управление гражданской авиации США (FAA) опубликовало заявление о предварительных результатах расследования компьютерного сбоя, который 11 января заставил отменить практически все вылеты гражданской авиации в стране. В сбое обвинили двух людей, действия которых умышленно или нет привели к повреждению файла с данными.

Источник изображения: Pixabay

Ранее мы сообщали, что утром 11 января в США отказала система уведомлений FAA Notice to Air Mission Systems (NOTAM). По сети NOTAM пилотам коммерческих авиалиний рассылаются служебные сообщения, включая актуальные и критически важные данные о безопасности воздушной обстановки в аэропортах и на воздушных коридорах. Без этой информации пилоты рисковали попасть в аварийные ситуации, что могло повлечь за собой многочисленные жертвы.

Интересно, что FAA использовала все необходимые протоколы и правила, чтобы гарантировать надёжную работу системы. Тем не менее, два человека из службы подрядчика нарушили протокол для работы с файлом данных NOTAM, что привело к сбою в работе всей системы. Восстановление данных из резервной копии также не помогло, поскольку система сразу пыталась обновить данные и обращалась к повреждённому файлу. Для решения проблемы пришлось всё остановить и поднимать платформу с нуля.

На время восстановления NOTAM вылеты гражданской авиации в США были практически полностью остановлены, что на несколько часов парализовало работу этого сектора перевозок. К счастью, уже находящиеся в воздухе суда завершили рейсы без аварий. По заявлению «Росавиации», российские диспетчеры пришли на помощь американским пилотам в соседних зонах ответственности. В частности, помогли на транзитных линиях, направляющихся в США и Канаду и в районе Аляски.

Система NOTAM была восстановлена в тот же день и сейчас нормально работает. Следствие продолжается, чтобы установить степень вины причастных к сбою. В то же время отмечается, что отдельным узлам NOTAM более 30 лет и это тоже не повышает надёжность её работы.

14 декабря 2022 года во время 47-го сближения с Юпитером бортовое оборудование зонда NASA «Юнона» (Juno) получило заряд высокоэнергетических частиц в магнитосфере планеты и частично отказало. Сбой выразился в срыве передачи данных, собранных о луне Юпитера Ио. Команда NASA перевела зонд в безопасный режим 17 декабря и начала восстанавливать его, с чем в итоге успешно справилась.

Источник изображения: NASA

В NASA сообщили, что зонд возвращён к работе в штатном режиме. Почти все собранные при сближении с Юпитером данные по Ио сохранены и будут приняты на Земле в течение этой и следующей недели. Незначительная часть информации потеряна и восстановлению не подлежит. Память зонда надо очистить перед следующим пролётом мимо Юпитера и Ио, который состоится уже 22 января.

Основную научную программу зонд завершил в июле 2021 года после пяти лет пребывания на орбите Юпитера. Дополнительной миссией зонда стало изучение лун планеты-гиганта: Ганимеда, Европы, Каллисто и Ио. Ожидается, что аппарат будет собирать по ним информацию до 2025 года как минимум. В настоящее время зонд изучает Ио — самое вулканически активное небесное тело в нашей Солнечной системе. Некоторые извержения на Ио видны даже в земные телескопы. Ранее учёные получали снимки Ио с дистанций в десятки тысяч километров, но «Юнона» пройдёт мимо этой луны на удалении до 1500 км и получит картинку в самом высоком разрешении.

Полученные в последний проход мимо Юпитера и Ио фотографии последнего учёные сейчас принимают и вскоре обработают для публикации. Ждём их через неделю-другую. Это будут первые более или менее высококачественные снимки Ио в истории земной космонавтики.

Две недели назад зонд NASA Juno («Юнона») совершил 47-е сближение с Юпитером. В этот проход помимо данных о газовом гиганте «Юнона» также собирала информацию о его спутнике Ио, известном своей сильной вулканической активностью. Но к огорчению команды учёных зонд не смог завершить передачу собранных научных данных из-за сбоя.

Зонд «Юнона» на фоне Юпитера в представлении художника. Источник изображения: NASA

После перезагрузки бортового компьютера «Юноны» 17 декабря зонд был переведён в безопасный режим. Собранные аппаратом данные полностью сохранились, и с 22 декабря команда NASA понемногу вытягивает с зонда эту информацию. Сегодня или завтра этот процесс будет завершён, и зонд попытаются перевести из безопасного режима в режим нормальной работы.

В NASA пока не могут со 100-процентной уверенностью назвать причину сбоя. Скорее всего, бортовое оборудование подверглось бомбардировке заряжёнными частицами, когда в процессе сближения «Юнона» проходила через магнитосферу Юпитера. Возможно, позже учёные дадут развёрнутое описание события.

Фото Ио, сделанное в 2022 году с расстояния 82 тыс. км. Источник изображения: NASA

Следующий пролет «Юноны» мимо Юпитера состоится 22 января 2023 года. Зонд находится на орбите газового гиганта с 2016 года. После завершения основной программы исследования этой планеты он занялся более плотным изучением его спутников. Ганимед и Европа уже исследовались приборами «Юноны». Теперь пришёл черёд Ио. Ждём интересных подробностей. В NASA подтверждают, что собранные 14 декабря данные по Ио, включая мониторинг поверхности с высоким разрешением, во время сбоя не пострадали.

В среду не менее 15 тысяч пользователей Twitter по всему миру не могли воспользоваться социальной сетью из-за масштабного сбоя, не позволявшего зайти на популярную медиаплатформу или воспользоваться её ключевыми функциями.

Источник изображения: Twitter

Статистика известного сайта Downdetector, отслеживающего сбои интернет-сервисов и отдельных ресурсов, в том числе — на основе обращений пользователей, показала, что жалобы оставили более 10 тыс. пользователей из США и около 2,5 тыс. из Японии, ещё 2,5 тыс. — из Великобритании. Число жалоб значительно упало к вечеру. В Twitter пока не ответили на запросы журналистов.

Во время сбоев многие пользователи вообще не могли войти в аккаунт с настольных компьютеров и ноутбуков. Кроме того, пострадали и пользователи мобильного приложения. В некоторых случаях при попытке войти пользователи получали оповещение о том, что имеется проблема, но это не их вина и стоит попробовать ещё. В социальной сети уже появились многочисленные слухи и мемы с хештегом #TwitterDown.

«У меня работает», — лаконично отозвался Илон Маск (Elon Musk) в ответ на жалобу одного из пользователей. Впрочем, сам Маск в последнее время охотнее ввязывается в политические дебаты и, отчасти, демонстрирует отдельными постами признаки мании величия.

Источник изображения: Илон Маск

Сбой произошёл через два месяца после покупки Twitter Маском за $44 млрд — после чего миллиардер предпринял ряд хаотичных организационных и кадровых мер, внеся сумятицу в работу сервиса. Известно, что в ноябре компанию покинули тысячи человек, включая многих специалистов, ответственных за устранение сбоев и предотвращение отключений Twitter. Впрочем, от нарушений работы в уходящем году страдал не только Twitter, но и другие технологические компании. Например, в июле на 19 часов прекратил предоставлять доступ миллионам людей к банковским, транспортными и правительственным IT-сервисам телеком-оператор Rogers Telecommunications.

Сообщается, что 7 декабря космическая обсерватория James Webb («Джеймс Уэбб») испытала программный сбой и перешла в безопасный режим. Сбой проявился в невозможности управлять ориентацией телескопа в пространстве. Подобная неисправность потенциально грозила самому существованию телескопа, поскольку его постоянно необходимо держать тепловым экраном к Солнцу. Также потеря ориентации вела к прерыванию канала связи с Землёй.

Источник изображения: NASA

Безопасный режим переводит практически всё научное оборудование и ряд вспомогательных устройств обсерватории в определённое стабильное состояние, которое облегчает анализ проблемы. С начала работы обсерватории, которой на днях исполнится год пребывания в космосе, это первый уход в безопасный режим, когда научная работа инструмента фактически была остановлена на несколько дней. За это время ряд научных наблюдений были отменены и будут возвращены в программу наблюдений позже.

За две недели с начала сбоя телескоп несколько раз переходил в безопасный режим и выходил из него. В конце концов, команда инженеров отрегулировала систему управления ориентацией, и 20 декабря телескоп вернулся к научной работе. Все системы обсерватории, как утверждают в NASA, находятся в отличном состоянии.

За свою недолгую историю в космосе телескоп «Джеймс Уэбб» уже испытал две неприятности. В мае в один из сегментов главного зеркала врезался микрометеороид, который нанёс повреждение более сильное, чем ожидалось. В августе обнаружился сбой в приборе MIRI (Mid-Infrared Instrument) — в камере среднего инфракрасного телескопа. Колесо с фильтрами изображения начало заедать при переключении, но эту проблему тоже решили.

В течение нескольких часов накануне были недоступны мобильные приложения и сервисы нескольких российских банков, в том числе «Тинькофф-банка», «Альфа-банка», «Райффайзенбанка» и «Сбербанка». Сами кредитные организации не признали факта наличия проблем, но у экспертов другое мнение.

Источник изображения: Shamin Haky / unsplash.com

Сообщения о сбоях в работе некоторых российских банков начали накануне распространяться в соцсетях — отдельные сервисы были недоступны несколько часов. В «Райффайзенбанке» и «Сбербанке», однако, заявили, что приложения работают в штатном режиме — при этом в последнем отметили, что переводы в другие банки могут быть ограничены. В «Альфа-банке» сообщили о временных трудностях «у небольшой части клиентов» из-за технических работ. В течение дня работа служб действительно была восстановлена.

Вероятной причиной неполадок мог стать сбой в работе одного из провайдеров ЦОД, предоставляющих услуги нескольким банкам: не исключена целенаправленная атака на шлюз оператора или на ресурсы одного из банков, что могло повлиять на других клиентов, предположил собеседник «Коммерсанта». Это также мог быть сбой в работе оборудования, которое используют все банки — например, прекращение обновления маршрутизаторов. Подобные проблемы решаются оперативно, но носят непредсказуемый характер.

Исходя из нормативных требований, предъявляемых к банкам в ФСТЭК России и ЦБ, кредитные организации самостоятельно определяют риски для работы своих служб и выстраивают систему защиты, устанавливая необходимое для решения подобных проблем время, и временные сбои не считаются нарушениями, заявил бизнес-консультант по информационной безопасности Positive Technologies Алексей Лукацкий.

Стало известно, что в работе мобильных приложений «Тинькофф», «Альфа-банка» и «Сбера» произошёл сбой. Пользователи не могут авторизоваться в приложениях и использовать сервисы. В интернете пользователи также сообщают о проблемах в работе и других банков, но данных сообщений куда меньше.

Источник изображения: fontanka.ru

Данные детектора сбоев компании Brand Analytics говорят о наличии проблем в работе сервисов «Тинькофф», на что указывают многочисленные обращения пользователей. В комментариях клиенты банка сообщают о массовых сбоях. «Пока приложение не работает. Скоро починим», — сказано в сообщении, которое появляется при запуске приложения «Тинькофф».

На момент публикации «Тинькофф» продолжает работать нестабильно: у некоторых пользователей по-прежнему есть проблемы со входом в приложение, другим необходима повторная авторизация, некоторым не отображаются в приложении используемые ими продукты банка.

При этом в «Альфа-банке» к настоящему моменту сообщили, что приложение «Альфа-Онлайн» функционирует штатно, но из-за проведения технических работ незначительная часть пользователей может столкнуться с трудностями при авторизации в приложении. «В банке регулярно проводятся технические работы — это часть ежедневной деятельности банка», — приводит источник слова представителя пресс-службы «Альфа-банка».

Сбои начали фиксировать также в приложении «Сбербанк Онлайн», которое отображает следующее сообщение: «Сбербанк Онлайн временно недоступен. Мы уже восстанавливаем его — пожалуйста, попробуйте войти через 15 минут. Расплачиваться картами в магазинах можно без ограничений».