2 ноября вы перестали получать уведомления от Tracker.ru, а сайт и личный кабинет не открывались. 4 ноября в 10:23 по Москве сервис снова заработал. Рассказываем, что случилось, что пропало и что делать вам.
Что случилось
2 ноября наш хостинг-провайдер Beget сообщил о кибератаке. Злоумышленники получили доступ к его системе управления облачными серверами и запустили скрипты, которые стёрли данные. Пострадали все облачные серверы, файловое хранилище и резервные копии, которые хранились у провайдера. Серверы Tracker.ru работали в этом облаке и пропали вместе с ним.
Сроков восстановления провайдер не назвал. Ждать мы не стали и собрали сервис заново на новом хостинге в Москве.
Как мы восстанавливали сервис
Пришлось собирать всё с нуля: новый сервер, база данных, фоновые службы проверки, точки мониторинга в других странах. Базу мы восстановили из своей резервной копии. Она хранится у другого облачного провайдера, поэтому атака её не задела. Потом перенесли домен на новые DNS-серверы и выпустили новые сертификаты безопасности.
Заодно сменили все пароли и ключи доступа к внешним сервисам: платёжной системе, ботам в Telegram и MAX, входу через VK ID и Яндекс. Провайдер прямо рекомендовал это сделать.
Что сохранилось
- Ваш аккаунт, тарифы и оплаченные подписки.
- Все мониторы сайтов и heartbeat-мониторы с настройками.
- Каналы уведомлений: Telegram, email, MAX, webhook.
- Статус-страницы.
- История проверок по 1 ноября включительно.
Что потеряно
Изменения за 1–2 ноября. Свежая резервная копия базы снята 1 ноября в 05:00 по Москве. Всё, что вы сделали после этого, до нас не дошло. Это новые мониторы, изменённые настройки, подключённые Telegram-чаты и регистрации. Если вы что-то меняли в эти дни, проверьте список мониторов и настройки уведомлений.
История проверок с 1 по 4 ноября. Пока наши серверы не работали, мы не проверяли ваши сайты. На графиках доступности за эти дни будет пробел. Это не падение вашего сайта, а время, когда Tracker.ru не вёл наблюдение.
Скриншоты сайтов. Картинки скриншот-мониторинга хранились в облачном S3-хранилище провайдера и сейчас недоступны. Провайдер сообщил, что файловые резервные копии у него сохранились, поэтому есть надежда их вернуть. Если старые скриншоты удастся восстановить, они снова появятся в кабинете, и мы сообщим об этом в канале в Telegram. Новые скриншоты уже снимаются по вашему расписанию.
Проверки из Алматы. Наш сервер в Казахстане тоже стоял у этого провайдера, и он недоступен до сих пор. Проверки из Москвы, Франкфурта и Минска работают. Казахстан вернём, как только поднимем новую точку проверки.
Если вы оплатили подписку 1–2 ноября
Платёж сохранился в платёжной системе, даже если в кабинете его не видно. Напишите на support@tracker.ru, и мы активируем подписку вручную.
Что мы меняем
- Резервная копия базы и раньше хранилась у другого провайдера, именно она нас спасла. Теперь туда же будем копировать настройки серверов и ключи доступа. Это ускорит следующее восстановление.
- Скриншоты будут храниться не только в одном месте.
- DNS домена теперь обслуживает отдельный провайдер, а не хостинг, на котором работает сайт. Если хостинг снова пропадёт, сайт можно будет перенести за минуты.
Нам жаль, что эти два дня вы оставались без мониторинга. Если что-то в кабинете выглядит не так, напишите на support@tracker.ru или нашему боту в Telegram.