Timeweb Cloud Alerts

описание

Краткие оповещения о работе сервисов Клауда в реалтайме ⚡️ Новости: @timewebru Медиа: @twc_media Ченжлог: @twc_changelog

← к каналу @timewebcloud_alerts

31 665

подписчиков

Охват к подписчикам

85,6%

ERR

Реакции к просмотрам

1,55%

13,1 тыс на 30 постов

Пересылки к просмотрам

1,56%

13,2 тыс

Постов в день

1,4

всего 30

Где отзываются чаще

доля реакций к просмотрам

30 июн.⚠️ Обновление по инциденту Зона: ams-1 Тип: ❗️ Major Подрядчик получил новые запчасти для чиллера. После этого планируется его повторный запуск. Следующее обновление в 17:00 МСК или раньше при поступлении новой информации.4,72%
30 июн.⚠️ Обновление по инциденту Зоны: ams-1 Тип: ❗️ Major В дата-центре Qupra продолжаются восстановительные работы на системе кондиционирования. Инженеры занимаются установкой и подключением оборудования.3,88%
30 июн.⚠️ Обновление по инциденту Зона: ams-1 Тип: ❗️ Major В дата-центре Qupra продолжаются аварийно-восстановительные работы на системе кондиционирования. Для устранения неисправности привлечены сторонние специалисты, их прибытие ожидается к утру. Наши инженеры…3,25%
1 июл.⚠️ Обновление по инциденту Зона: ams-1 Тип: ❗️ Major На объекте продолжаются восстановительные работы на стационарных чиллерах. Для ускорения восстановления к ЦОД доставлен мобильный чиллер. В настоящее время ведутся работы по его подключению.2,68%
30 июн.⚠️ Обновление по инциденту Зона: ams-1 Тип: ❗️ Major Инженеры продолжают заниматься системой кондиционирования. Ожидаем информации по срокам окончательного запуска. Следующее обновление в 14:00 МСК.2,43%
1 июл.⚠️ Обновление по инциденту Зона: ams-1 Тип:❗️Major Начали постепенный запуск серверов. Оборудование вводится в эксплуатацию поэтапно, проводится проверка работоспособности и готовности к запуску сервисов.1,78%
1 июл.⚠️ Обновление по инциденту Зона: ams-1 Тип:❗️Major Идет поэтапный запуск виртуальных серверов.1,66%
1 июл.⚠️ Обновление по инциденту Зона: ams-1 Тип:❗️Major В ЦОДе Qupra продолжаются восстановительные работы системы охлаждения. Информация от ЦОД: вчера получили внешний чиллер, однако для его подключения потребовались дополнительные силовые кабели — их поставку…1,66%
1 июл.✅ Инцидент закрыт Зона: ams-1 Тип: ❗️ Major Восстановление завершено. Сервисы в ams-1 работают в штатном режиме.1,62%
15 авг.⚠️ Авария во Франкфурте: что известно на данный момент Зоны: de-1 Тип:❗️Major Рассказываем подробно, что происходит и почему. Что произошло Авария случилась не на нашей площадке, а на промежуточном узле — в дата-центре Equinix FR5 во Франкфурте. Это один из крупнейших телеком-хабов Европы, и через него проходят все наши каналы связи до площадки, где размещены серверы de-1. Само оборудование с вашими данными не пострадало — потеряна сетевая связность. По информации от площадки, в FR5 дала течь труба системы охлаждения машинных залов. Протечка затронула все системы охлаждения здания, температура поднялась выше 50 °C, сработала система пожаротушения, и сетевое оборудование начало массово отключаться. Дополнительно мы фиксируем множественные аварии на каналах и магистралях в регионе. Таймлайн по мск 05:33 — AWS фиксирует первые потери пакетов на линках через FR5 05:41 — в FR5 обнаружена протечка трубы системы охлаждения 06:32 — магистральный оператор Core-Backbone фиксирует рост температуры в залах 07:25 — критическая температура, массовые обрывы связи по всему ДЦ 07:26 — утечка локализована, начата заправка контура охлаждения 08:09 — значительная часть оборудования в ДЦ отключилась 09:38 — в залах работают осушители, идёт откачка воды 10:30 — на площадку прибыли инженеры вендоров чиллеров и противопожарной системы Сейчас план у Equinix такой: продуть контур охлаждения от воздуха и по одному тестово запускать чиллеры. Доступ к оборудованию в пострадавших залах пока закрыт — там вода и оборудование под напряжением. Это глобальный сбой, не только у нас FR5 — точка присутствия десятков операторов, и авария ударила по многим: • AWS официально подтверждает деградацию Direct Connect в eu-central-1 из-за «инфраструктурной проблемы на площадке Equinix FR5» и оценивает восстановление в «multiple hours»: health.aws.amazon.com/health/status • Core-Backbone потерял в FR5 четыре узла, публикует детальный отчёт: status.core-backbone.com/index.php?id=6709 • SMARTNET подтверждает недоступность ряда операторов в FR5, включая магистрального RETN: status.as203446.net/item.php?id=10 • На allestörungen.de (немецкий Downdetector) — всплеск жалоб на провайдеров по всей Германии. Когда всё заработает Точного ETR у поставщиков пока нет — он появится после того, как ДЦ восстановит охлаждение и откроет доступ к оборудованию. Наши инженеры на связи с партнёрами и готовы приступить к проверке связности сразу после восстановления узла. Будем публиковать апдейты по мере поступления информации.1,50%
1 июл.⚠️ Обновление по инциденту Зона: ams-1 Тип:❗️Major Новости от ЦОДа: на данный момент удалось запустить фрикулинг, специалисты следят за температурами в машзалах. Инженеры уже на месте и в течение часа ожидают включения резервного чиллера на охлаждение. Биллинг managed-сервисов остановлен, на очереди бэкапы.1,49%
1 июл.⚠️ Обновление по инциденту Зона: ams-1 Тип:❗️Major Коммутаторы успешно запущены и переведены в рабочий режим. Выполняется проверка линков и состояния портов, идет восстановление сетевой связности между стойками.1,46%