Новости
UPD 23.10
Что сейчас с серверами и панелями
Серверы клиентов работают. Но всё, что связано с управлением, может проворачиваться медленнее чем обычно: выдача новых серверов, перезагрузка, смена тарифа и другие действия из личного кабинета. Причин три:
- после обновлений безопасности системе виртуализации нужно больше времени на каждую операцию;
- после закрытия доступа к панелям, накопилась большая очередь задач, и мы её разгребаем;
- мы дополнительно ограничили внутренние сетевые доступы между системами. Это тоже замедляет работу, но так безопаснее.
- пока что большинство операций с VMmanager и DNSmanager доступны только через поддержку.
Поддержка
Техническая поддержка работает 24/7. Обращения принимаются, смены усилены, блок на тикеты стараемся больше не вешать, но в очереди всё еще огромное количество обращений. Писать повторно в тот же тикет не нужно: каждый новый ответ поднимает тикет в очереди заново, и он ждёт дольше.
Что дальше
В начале следующей недели опубликуем совместный пресс-релиз с ISPsystem (понедельник) и подробный постмортем FirstVDS (вторник). Только после этого займёмся компенсациями и отдельно расскажем, что и как будем компенсировать.
UPD 21.10, 15:00 МСК
Коротко, с тем, что появилось за сутки.
1. Мы завершили собственный технический разбор инцидента, не дожидаясь результатов расследования вендора. Это позволило уточнить масштаб инцидента и действия злоумышленников. Клиентам, чьи виртуальные машины были определены как затронутые в ходе дополнительной проверки, мы направили уведомления. Уведомления отправлялись в три этапа: на разных узлах вредоносное ПО находилось в разном состоянии и оставило разные следы, поэтому выявить весь охват одновременно не удалось. Дополнительная проверка завершена; по её результатам выявления новых затронутых узлов не ожидаем.
2. В ходе разбора мы нашли на части узлов следы закрепления — скрытые сервисы, замаскированные под служебные процессы, которые могли вернуть злоумышленнику доступ. Мы устраняем закрепление и проверяем каждый затронутый узел, возвращая его в работу только после подтверждения, что следов злоумышленника на нём не осталось.
3. Доступ к панели виртуализации останется закрытым — возможно насовсем или как минимум пока мы не восстановим все затронутые узлы. Управление серверами переносим в личный кабинет. Сроки переноса функций пока уточняются. То, чего ещё нет в личном кабинете, временно решаем через обращения в техподдержку.
4. Полный объём выгруженных данных подтвердить мы не можем, поэтому исходим из худшего: если вы получили уведомление — считайте скопированными все данные с сервера и меняйте доступы, если ещё не сделали. Сейчас это главное, что вас защищает.
5. За последние сутки вендор активно работал с инфраструктурой и сообщил, что уязвимость закрыта. Несмотря на это, открывать доступ мы пока не будем: до полного восстановления и проверки затронутых узлов инфраструктура остаётся в изоляции.
Отдельно про заказ: обновления вендора также позволили нам возобновить выдачу новых серверов. Поэтому заказ работает, хотя обработка пока идёт медленнее обычного.
Поддержка перегружена из-за большого числа обращений: общие вопросы по инциденту — в нашем Telegram-чате; через тикеты пишите только по конкретным услугам и не дублируйте уже созданные.
