Информация о глобальных неполадках в сети, 18-20 августа 2019



Уважаемый клиент.
Как вы, вероятно, уже знаете, наша площадка в Амстердаме подверглась беспрецедентной DDoS-атаке. Атака была нейтрализована. Я хотел бы принести извинения всем и каждому из наших клиентов, пострадавших в ходе инцидента. Мы знаем, что вы полагаетесь на Servers.com как на профессионалов, обеспечивающих бесперебойную работу и высокое качество обслуживания. Хотя мы, наряду с нашими клиентами, стали жертвой этого нападения, мы принимаем на себя ответственность за то, что не смогли подготовиться лучше. Поверьте, мы уже приняли серьезные меры для защиты вас и вашего бизнеса от подобных атак в будущем, и не остановимся на этих мерах.

По ссылке, приведенной ниже, вы найдете RCA — документ, содержащий анализ причин произошедшего, описание мер, предпринятых нами для предотвращения повторения ситуации в будущем, а также хронологию и анализ атаки.

Ссылка на RCA:
hostsuki.abcdusercontent.com/hosting.kitchen/19/2019-08-24_155543.png
hosting.kitchen/servers-com/obnovlenie-ataka-zavershena-pozhaluysta-naydite-polnyy-rca-zdes.html

Как я сказал в RCA, мы планируем инвестировать 6 миллионов долларов США в модернизацию нашей сети и инфраструктуры, чтобы лучше справляться с изощренными атаками большого масштаба. Мы будем информировать вас о наших действиях в дальнейшем, но краткий обзор готов уже сейчас:

Servers.com заключил партнерское соглашение и подключился к провайдеру услуг по защите от DDoS-атак — Qrator Labs, чьи усилия внесли огромный вклад в нейтрализацию атаки;

Поскольку часть трудностей в отражении атаки была вызвана тем, что из-за характера атаки, внутрисетевая система защиты от DDoS-атак Servers.com оказалась неспособна ей противостоять, Servers.com работает вместе с поставщиком системы над ее обновлением;

Servers.com уже сейчас инвестирует в увеличение пропускной способности своей сети, чтобы лучше справляться с атаками на пропускную способность.

Мы стремимся обеспечить бесперебойную работу инфраструктуры наших клиентов, и уверены, что возмещение за время простоя полагается всем пострадавшим в ходе инцидента. Для того чтобы получить возмещение, пожалуйста, создайте отдельный тикет в службе поддержки, и предоставьте как можно более подробную информацию о том, какие из предоставляемых вам услуг были недоступны и как долго. Это позволит нам обработать запросы на возмещение в кратчайшие сроки.

В заключение я хотел бы поблагодарить вас за доверие Servers.ru. Мы прикладываем все возможные усилия, чтобы наши клиенты были защищены от киберпреступлений, подобных случившемуся, в будущем.

Большое спасибо,
Николай Двас,
CEO Servers.com

Обновление - атака завершена, пожалуйста, найдите полный RCA здесь



Совместный анализ Qrator Labs и Servers.com первой значимой атаки DDoS в дикой природе с использованием определенного вектора усиления TCP

AMSTERDAM и PRAGUE, 21 августа 2019 г. / PRNewswire / — Servers.com и Qrator Labs делятся информацией о недавних атаках, чтобы другие могли подготовиться и быть готовыми к этому в будущем. Обе компании предоставляют подробную информацию и анализ первой значимой атаки DDoS в дикой природе с использованием одного из векторов усиления TCP. Ниже приводятся временные рамки, анализ и выводы, а также ряд шагов, предпринимаемых для значительного снижения вероятности того, что любой новый вид атаки существенно повлияет на доступность серверов клиентов.

Временное ограничение
Воскресенье, 18 августа 2019 г.
  • 07:00 UTC: злоумышленники начали атаковать сетевую инфраструктуру Servers.com, создавая регулярные всплески трафика с высокой скоростью передачи пакетов. Доступность услуг в сети Servers.com не изменяется.
  • 07:10 UTC: Servers.com обратился к Qrator Labs, намереваясь защитить определенные IP-префиксы с помощью службы Qrator Ingress, управляемой посредством объявлений BGP.
  • 13:07 UTC: изменение в атаке: система мониторинга Servers.com сообщает о комбинации UDP-потока и TCP-SYN / ACK-атаки. Некоторые сети Servers.com подвержены атакам.
  • 13:20 UTC: Servers.com реализует инструмент, который изолирует сети, затронутые атакой, от сетей, которые не были затронуты, чтобы ограничить влияние атаки на клиентов внутри атакуемых сетей. Клиентам внутри затронутых сетей рекомендуется перейти на незатронутые. С этого момента и до смягчения атаки злоумышленники периодически меняли список целевых и нецелевых сетей, поэтому процесс миграции изоляции повторялся.

Понедельник, 19 августа 2019 г.
  • 15:08 UTC: Первоначальное объявление затронутых префиксов IP-адресов Servers.com через все входящие потоки сети Qrator MSSP, кроме CenturyLink / Level3 (подробнее об этом ниже).
  • 17:48 UTC: первое появление атаки через сеть Qrator распознается как атака со смешанным усилением UDP с преобладанием трафика LDAP. Атака успешно смягчается и продолжается до 18:54 UTC.
  • 19:01 UTC: Первый тактический своп: усиление UDP заменяется на усиление SYN / ACK. Атака успешно смягчается, и стабильно продолжается до 20 августа 2019 года в 06:33 по Гринвичу в общей сложности 11,5 часов.

Вторник, 20 августа 2019 г.
  • 06:35 UTC: Второе изменение тактики: усиление SYN / ACK заменяется смешанным усилением TCP + UDP. Атака успешно смягчается и продолжается до 07:11 UTC.
  • 07:53 UTC: Третий обмен тактикой: атака с использованием ковровой бомбардировки нацелена на большее количество IP-сетей Servers.com.
  • 08:27 UTC: остальные префиксы Servers.com подвержены переадресации через Ingress. Атака успешно смягчается.
  • 10:45 UTC: связь CenturyLink / Level3 становится полностью работоспособной (см. Ниже).

Детали атаки
  • Атака в основном состояла из усиления LDAP (со значительной частью фрагментированных дейтаграмм UDP) и трафика усиления SYN / ACK, при этом периодически присутствовали другие виды усиления UDP.
  • Трафик усиления SYN / ACK достиг своего пика около 208 миллионов пакетов в секунду, возможно, исключая значительную часть трафика, исходящего из клиентского конуса уровня 3, из-за статических петель, предполагаемых перегрузок транзитной линии и других проблем маршрутизации (см. Ниже).

Основные проблемы, стоящие за усилением SYN / ACK (и потоками пакетов на основе TCP в целом):
  • Этот вид DDoS-атаки практически не поддается отслеживанию из-за низкого уровня применения методов противодействия спуфингу (таких как BCP 38). Поскольку предполагается, что эти подходы требуют существенного изменения сети при определенных обстоятельствах, колларально ломая вещи, которые являются более важными для сети, ожидается, что принятие этих подходов останется на низком уровне в обозримом будущем, если IETF не примет другое прочная конструкция против спуфинга;
  • Способность интернет-провайдера или центра обработки данных обрабатывать такого рода DDoS-атаки с помощью BGP Flow Spec (или аналогичных методов) зависит от того, какое конкретное оборудование используется в их сети;
  • Для значительной части клиентов критически важна возможность подключения к внешней службе или шлюзу API через TCP. Сканеры, такие технологии, как OAuth или CDN, или такие предприятия, как системы кредитного скоринга или страховые компании, сильно зависят от внешних баз данных (или источников данных в целом);
  • Чтобы обеспечить надлежащую обработку поддельных SYN / ACK при сохранении возможности подключения к внешней службе, атакующей хостинговой компании придется отслеживать все исходящие SYN, чтобы позже сопоставить их с полученными SYN / ACK.
  • Последнее может быть выполнено различными способами, каждый из которых считается либо сложным для проектирования и развертывания, либо оказывает серьезное влияние на задержку сети и RTT, либо и то и другое;
  • Коэффициент усиления для усиления SYN / ACK, отсутствующий в относительно редких угловых случаях, предполагается между 1x и 5x. Это не является значительным показателем по сравнению с NTP 500+ или Memcached '9000+. Однако, принимая во внимание остальную часть проблем и сложные меры по смягчению, пятикратная скорость передачи пакетов DDoS может стать поворотным моментом.

Ряд неудачных событий еще больше повлиял на график смягчения последствий атаки:
Сеть Qrator Labs работает через множество восходящих интернет-провайдеров Tier-1 (или региональных Tier-1), одним из которых является AS3356 CenturyLink (ранее Level3).
Автономные системы Qrator (в основном, AS200449) являются полностью многосетевыми и основаны на любых вещах и предназначены для работы с одной или несколькими вышестоящими сетями, имеющими TITSUP или перегруженными в любое время. Сказав это, 2019 год знаменует собой один год для Qrator как гордого клиента CenturyLink. CenturyLink предоставляет Qrator отличный сервис связи как в Соединенных Штатах, так и в Европе.

Что сильно повлияло на сроки смягчения, так это политика обновления фильтра префиксов CenturyLink на 48 часов. И Qrator, и Servers.com обратились к своим соответствующим контактным точкам на уровне 3, пытаясь сократить это время ожидания, однако (учитывая, что настройка службы смягчения для производственной сети началась в воскресенье в UTC), мы были невозможно значительно сократить время ожидания.

Глобальные неполадки в публичной сети, 18-20 августа 2019



Уважаемый клиент, как вы уже знаете, наш дата-центр AMS1 подвергся DDoS-атаке. На данный момент нам удалось полностью снизить ее влияние на наши сети.

Однако, нам необходимо сообщить вам об особенностях, которые сейчас могут влиять на ваши серверы. Если вы наблюдаете неполадки в подключении к каким-либо внешним сервисам в сети Интернет, пожалуйста измените значение TCP MSS на 1480. Это необходимо из-за технических особенностей работающей системы подавления DDoS.

На серверах с операционной системой Linux значение можно изменить так (инструкции могут отличаться в разных операционных системах, так что свяжитесь с нами, если у вас есть какие-либо вопросы, через онлайн чат или написав нам на support@servers.ru):
  • Шаг 1: определите на каком интерфейсе настроен IP адрес публичной сети используя команду 'ip address show PUBLIC_IP', 'PUBLIC_IP' замените на IP адрес публичной сети;
  • Шаг 2: используйте команду 'sudo ifconfig INTERFACE mtu 1480', где 'INTERFACE' замените на имя интерфейса, полученное в шаге 1.

Пожалуйста, примите наши искренние извинения за доставленные неудобства. Мы собираем информацию об аварии и сообщим статус технического расследования позже.

Глобальные неполадки в публичной сети, 18 августа 2019



Уважаемый клиент
Мы фиксируем глобальные сетевые неполадки в публичной сети в облачных локациях Амстердама. Они связаны с массированной и рапределенной DDoS-атакой.

Мы работаем над восстановлением нормальной работы сети с максимальным приоритетом.

С уважением,
команда поддержки Servers.ru

Давайте поговорим о хостинге инфраструктуры, адаптированной для игорного бизнеса

Два десятилетия расширения, и онлайн-индустрии азартных игр по-прежнему быстро растет.


Хотя имеющие в 10 раз меньше доходов, чем в автономном режиме промышленности, онлайн растет в два раза быстрее, чем традиционные азартные игры. По оценкам CAGR онлайн-азартная игра в 2017-2023 годах составляет 10%


Онлайн Азартные игры прогнозируется 74 миллиардов доходов к 2023 году


Легализация в странах с развитой экономикой, таких как США, Великобритания и Япония, делает азартные игры более привлекательными для капиталовложений, что означает усиление конкуренции.

Чтобы обеспечить быстрое и привлекательное взаимодействие с игроками, вам нужна инфраструктура хостинга, обеспечивающая производительность, масштабируемость и глобальное присутствие.

Серверы bare-metal обеспечивают самые сложные рабочие нагрузки, требующие экономически эффективных решений


Облако обеспечивает масштабируемость на лету и высочайший уровень автоматизации. Гибридная инфраструктура сочетает в себе рентабельность голого металла с масштабируемостью clou d


Присутствие в центрах обработки данных по всему миру является обязательным для последовательно низкой задержки. Низкая задержка не только требуется игроками, но и подчиняется правилам азартных игр.


www.servers.ru/

Servers.com растет в Лондоне

Наш новый объект, расположенный в кампусе Центра обработки данных Slough, обеспечивает доступ с низкой задержкой к крупнейшей в мире финансовой экосистеме. Наша бесплатная частная сеть и доступ к европейской основе 100G также на месте


www.servers.com/dedicated_servers?location_id=23