Vizvi снова работает. С 7 ноября открыты вход, регистрация, оплата, мультиссылки и AI-сайты. Пять дней мы собирали сервис заново на новых серверах, и теперь можем спокойно рассказать, что произошло.
Что случилось
В ночь на 2 ноября хакеры атаковали хостинг-провайдера Beget. Наши серверы и хранилище файлов находились у него в облаке.
Атака была направлена не на Vizvi. По сообщению Beget, злоумышленники проникли в систему управления серверами и запустили скрипты, которые уничтожают данные. Компания сообщила о полной потере данных в облаке: виртуальные серверы, хранилище файлов S3, Kubernetes. Резервные копии целых серверов тоже были утеряны.
Мы оказались далеко не одни. CNews со ссылкой на отраслевые оценки пишет о более чем 200 тысячах клиентов Beget и более чем 334 тысячах сайтов в зонах .ru, .рф и .su. В эти дни такие же проблемы решали магазины, сервисы и компании по всей стране.
Как это было
2 ноября. Ночью vizvi.ru перестал открываться. Серверы, файлы и почта сервиса пропали, сервис полностью остановился.
3 ноября. Стало ясно, что облако уничтожено и быстрого возврата не будет. Мы написали в Beget, предупредили людей на МультиСсылка.рф и начали собирать Vizvi на другом хостинге.
4 ноября. vizvi.ru заработал на новом сервере в режиме просмотра: снова открылись мультиссылки, блог и страницы сервиса. Вход и оплату мы пока не открывали.
6 ноября. Beget сообщил, что копии файлов серверов сохранились примерно у половины клиентов, и точных сроков назвать не смог. Мы решили не ждать и запускаться на своей копии базы от 6 октября. Вручную восстановили всех, кто платил после этой даты, по списку платежей из ЮKassa.
7 ноября. Проверили безопасность кода, сменили все ключи доступа, настроили ежедневные копии, подняли отдельный сервер для AI-сайтов. Открыли вход, регистрацию и оплату для всех.
Что мы потеряли
Скажем прямо, потери есть.
Всё, что появилось после 6 октября. Это последняя копия базы, которая хранилась вне Beget. Новые аккаунты, мультиссылки, AI-сайты и правки, сделанные с 6 октября по 2 ноября, не сохранились.
Загруженные фотографии и файлы. Они лежали в том же облаке, поэтому пропали и на старых страницах. Вместо фото там сейчас аккуратный фон или заглушка, а текст, кнопки и ссылки на месте.
Переписка и статистика за октябрь. Обращения в поддержку, заявки и статистика посещений после 6 октября тоже не сохранились. Письма с адреса сервиса, отправленные до сбоя, потеряны вместе с сервером.
Что сохранилось
- Аккаунты и мультиссылки, созданные до 6 октября. Адреса не изменились, поэтому напечатанные QR-коды продолжают работать.
- AI-сайты, созданные до 6 октября, вернулись на свои адреса. Пробные сайты, у которых закончился срок, показывают страницу-заглушку, как и раньше.
- Шаблоны и все функции сервиса.
- Адреса потерянных страниц, которые нам известны: мы их закрепили, и никто другой их не займёт.
Что мы сделали для вас
- Месяц в подарок. Всем, у кого на момент сбоя был оплаченный тариф, мы вернули дни простоя и добавили 30 дней.
- Оплаты после 6 октября. Мы нашли платежи в ЮKassa, вручную вернули аккаунты, тарифы и токены. Каждому напишем на почту.
- Помощь со страницами. Если ваша мультиссылка или AI-сайт пропали, оставьте обращение на vizvi.ru/vosstanovlenie, и мы поможем собрать всё заново.
Что нужно сделать вам
- Проверьте свою страницу и загрузите фото заново.
- Если страницы нет, заполните форму vizvi.ru/vosstanovlenie.
- Если к странице был подключён свой домен, укажите его в обращении, поможем подключить заново.
- На всякий случай смените пароль через «Забыли пароль» на странице входа. Пароли у нас не хранятся в открытом виде, а Beget не нашёл признаков скачивания данных, но сам рекомендовал клиентам сменить доступы.
Что мы изменили, чтобы это не повторилось
- Копии базы и файлов теперь делаются каждый день и хранятся вне сервера, минимум в двух независимых местах.
- Основной сайт и AI-сайты теперь работают на разных серверах.
- Мы заново проверили безопасность кода, закрыли найденные уязвимости и сменили все ключи.
Если Beget вернёт наши данные, мы сверим их с текущей базой и восстановим всё, что получится.
Спасибо
Спасибо всем, кто писал, ждал и поддерживал нас эти дни. Такие истории проверяют сервис на прочность, и мы рады, что можем снова быть с вами.
Если что-то работает не так, напишите нам в поддержку или в группу vk.ru/multissylka. Ответим и поможем.
Об атаке на Beget: CNews, Skillbox Media.