Рейтинг
0.00

TimeWeb Хостинг

1 читатель, 31 топик

Причины пятничного сбоя



11.12.20 в 16:02 МСК мы столкнулись с аппаратной проблемой в работе системы маршрутизации. Серверы продолжали работать, но прекратили быть доступны извне. Сегодня мы расскажем, что произошло, что мы уже сделали и что еще предстоит сделать.

Что случилось
Проблема возникла на корневом маршрутизаторе, через который идет весь трафик. Он имеет собственное резервирование большинства функций на случай поломки. А то, что невозможно продублировать — зарезервировано вторым маршрутизатором, подключенным и готовым к работе.

Это значит, что если какой-то элемент корневого маршрутизатора выходит из строя, второй роутер незамедлительно подключится к работе. И, в целом, такая внештатная ситуация не раз проигрывалась на тестовых испытаниях. Но не всё так просто.

На момент выхода из строя основного маршрутизатора мы применили свежую конфигурацию сетевых настроек на резервном роутере, но столкнулись с отказом работы устройства.

Что происходило дальше
В период сбоя телефония была недоступна. Ребята из поддержек, из офиса и дома, не имея доступов к тикетам и телефону, переключились на сообщества в VK и Telegram.

В этот момент инженеры находились в поиске временного решения, которое позволит вернуться сервису в строй. К 18:55 МСК мы восстановили доступность сети.

На этом работы не закончились: уже ночью вместе с поставщиком оборудования мы доставили, установили и запустили абсолютно новый маршрутизатор, чтобы исключить любые просадки.

Сейчас работаем в штатном режиме: ловим и фильтруем атаки типа DDoS в адрес клиентских сайтов, следим и балансируем нагрузку на серверах. Помогаем в тикетах, по телефону, отвечаем в мессенджерах и соцсетях.

Что нам предстоит
Несмотря на то, что мы резервируем каждый участок как минимум в двукратном размере, жизнь преподносит сюрпризы. Мы как хостинг-провайдер обязаны просчитывать даже такие ситуации и исключать их.

В настоящий момент мы находимся на связи с поставщиками оборудования: проводим аудит, проверяем совместимость версий ПО, выясняем наличие возможных незадокументированных проблем и уязвимостей в оборудовании, чтобы обеспечить заявленную стабильность.

Продолжаем поддерживать двойной резерв ядра сети и проводим дополнительные тесты бесшовного перехода между вариантами в случае возникновения любых нештатных ситуаций. Важно: такие тесты не затронут текущую работу сайтов клиентов.

Мы обеспечены всем необходимым запасом оборудования, вплоть до резерва кабелей. Более того, точка маршрутизатора стала нашим самым зарезервированным и безопасным участком.

Мы приносим извинения каждому, кто испытал сложности с доступом или понес финансовые/репутационные потери из-за аварии. И благодарны вам за взвешенную позицию и слова поддержки, которые вы писали, пока мы в поте лица занимались решением проблемы. Спасибо вам за доверие.

timeweb.com/ru/

Изменение стоимости виртуального хостинга с 14 декабря

С 14 декабря 2020 года начнут действовать новые цены на тарифные планы виртуального хостинга.
Ваш текущий оплаченный период не изменится, новая цена применится только при продлении хостинга в будущем.



Вы можете сэкономить при оплате услуги до 14 декабря, пока изменения тарифов не вступили в силу. Если деньги придут позднее, напишите нам об этом, и мы оставим вам старую цену. Всё честно.
Стоимость двухгодовых тарифов не меняется.
Они по-прежнему выгоднее остальных, и вы получаете в подарок два домена :)

timeweb.com/ru/services/hosting/

Апгрейд VDS: новое железо, новые серверы и HighCPU VDS

Перезапуск услуги VDS: новая линейка VDS-тарифов на новом железе и быстрых NVMe дисках, а также совершенно новые HighCPU-серверы для тех, кому недостаточно мощности базовых решений.

Обновленная линейка VDS: новые тарифы без повышения стоимости.

Под капотом:
  • Процессоры линейки Intel Gold: +25% к производительности ядра.
  • Свежие диски NVMe: +150% к скорости диска в сравнении с SSD.

Нужно больше? Держите HighCPU-серверы:
  • 5.0 ГГц на процессорах i9-9900k и 2288g. Вместе с NVMe-дисками они дают, пожалуй, максимальную производительность, которую можно получить на VDS сегодня.
  • Идеально подходят под Битрикс и игровые серверы.

Протестируйте и расскажите о своих впечатлениях: дарим 6 месяцев VDS за обзор.


timeweb.com

Публикуйся в Timeweb Community и стань известным!



Публикуйся в Timeweb Community и стань известным!

Наш клиент Эмиль принял участие в акции «Платим за знания» и написал статью об SSL-сертификатах, которую за неделю прочитали 500 человек.

Безопасность, которую дарит https, сложно переоценить, но как выбрать SSL-сертификат? Статья Эмиля поможет вам в этом: в ней автор сравнил сертификаты от Let's Encrypt, Cloudflare и Free SSL Space и описал их преимущества и недостатки. Прочитать статью вы можете в нашем Community.

Вы тоже можете поделиться своими знаниями с другими пользователями! Станьте автором и заявите о себе на аудиторию в 150000 человек.
Условия нашей акции — на сайте.
timeweb.com/ru/services/bonuses/2852/

Впереди майские праздники — время отдыха, поездок и солнечных дней

Мы не будем блокировать аккаунты виртуального хостинга за неоплату с 1 по 5 мая. Оплатить сможете потом.

Хороших вам праздников! А мы проследим за стабильной работой ваших сайтов.

В новый год без забот: дарим месяц хостинга!


До 31.12.2018 всем новым клиентам на тарифах Виртуального Хостинга, Хостинга для 1С-Битрикс и Хостинга для CMS подарим дополнительный месяц на выбранном тарифе при оплате услуги за год по промокоду GODBEZZABOT.

Ввести промокод вы можете в разделе «Бонусы и промокоды» после оплаты хостинга.
timeweb.com/ru/services/hosting/

Под контролем: инструмент для мониторинга диска VDS сервера

Мы в Timeweb продолжаем развивать виртуальные серверы и рассказывать об этом.

В сентябре клиентам VDS Evo мы предоставили возможность мониторинга занятости дискового пространства. Теперь клиент может получить информацию по занятости дискового пространства, используя виджет на странице сервера или из уведомлений по почте и SMS.


Зачем?
Наверное, каждый сталкивался с ситуацией, когда место на диске подходило к концу. Разросшийся лог, устаревшие резервные копии или логическая ошибка в скрипте приводили к некорректной работе сайта или всего сервера.

Виртуальные серверы — продукт, где хостинг-провайдер сознательно не погружается в клиентские файлы. Вы выбираете нужную ОС (Ubuntu, Debian, CentOS, Windows Server, др), получаете root-доступ и приступаете к работе. А хостинг поддерживает работоспособность всей системы (виртуализация, сеть, интерфейсы), не вдаваясь в детали проекта клиента.

Однако раз за разом, получая заявки с претензией на недоступность сайта из-за того, что диск виртуального сервера переполнен, возникла мысль дополнить инструменты панели тем, что, как теперь кажется, должно быть в продукте по умолчанию — мониторингом диска.

Вам не нужно ставить дополнительные серверные панели, чтобы оценить внедренный инструмент. Всё доступно сразу после создания своего первого сервера.

Как это работает


Вы всегда будете знать, когда место на диске подойдёт к концу. Для этого мы сделали возможность получать оповещения на почту и по SMS.



По мере роста собственного веб-проекта он неизбежно начинает занимать больше места из-за наполнения его контентом. Также формируются логи, резервные копии, разрастается база данных, поэтому важно своевременно узнать, когда место на диске приблизится к окончанию.



Зайдите в раздел «Уведомления» и укажите, хотели бы вы получать сообщения круглосуточно при переполнении диска или в определённое время. Вы сами выбираете, стоит ли отправлять такую информацию на e-mail или SMS.



Как шла разработка
Для сбора метрик решили использовать готовую библиотеку libguestfs, так как она хороша в плане безопасности и поддержки разнообразных файловых систем. Поддерживаются буквально все файловые системы наших клиентов, кроме ReFS на некоторых VDS на ОС Windows.

Сложностей по внедрению как таковых не было, так как мы заранее планировали фичу и очень подробно расписали реализацию. Но это нас не спасло.

На первом командном собрании, когда казалось, что все тонкости учтены, от разработчиков поступило достаточно много корректировок и идей. В итоге это вылилось в длинный трактат из 13 пунктов, которые мы обдумывали и после внедряли.

Релиз инструмента прошёл в 2 этапа. В начале мы раскатали его на 10% клиентов, а через неделю открыли его всем. В 1 партии нам пришло всего 3 обращения, где были подозрения, что наш инструмент не работает, но при индивидуальном разборе мы выяснили — ошибок нет, сбор данных работает верно.

Подводим итоги
Сейчас инструмент внедрён и доступен всем клиентам, наряду с привычным инструментарием. Мы уже получили первые отзывы, однако планируем и дальше собирать обратную связь, которая позволит дополнить виджет новыми функциями или добавить совершенно новый элемент для большего удобства клиентов.

timeweb.com/ru/services/vds/

Консоль, свитчи и много кофе: один день из жизни VDS хостинга

Улица Заставская. Входим в бизнес-центр “МегаПарк”, охрана, лифт, жмем на кнопку — 8 этаж. Первое, что нас встречает каждое утро, — ярко-зеленый мох и внушительных размеров логотип хостинга. На часах 8:45, скоро начнется новый рабочий день офиса, на кухне шумно, коллеги спешат на свои места.

1500 квадратных метров, 153 человека внедряют фичи, разрабатывают, администрируют, рекламируют и совершенствуют продукт, который Timeweb выбрал стратегическим приоритетом в этом году — виртуальные выделенные серверы.

В офисе нет табличек на кабинетах, но каждому и без них ясно — самое большое помещение, сразу за стеной с мхом и логотипом — опенспейс, в котором работает одновременно 80 человек — Поддержка клиентов. В Timeweb она делится на 2 направления — информационная и техническая.

С ростом количества клиентов компании растет и численность сотрудников. Мы шутим, что поддержки захватывают компанию, потому что еще видны следы недавно снесенной стены между и так большим их собственным кабинетом и бывшим помещением HR-отдела (который в итоге переехал в соседний кабинет).

Информационная поддержка
Сюда звонят, пишут заявки из панели хостинга, обращаются через онлайн-чат на сайте. Пока один специалист проверяет статус продления домена по заявке от клиента из Telegram, другой рассказывает об особенностях панели VestaCP клиенту из ВКонтакте.

Коллеги из поддержки — немного переводчики любых словосочетаний с “технического” на “человеческий”. Они и психологи тоже. В тайниках отдела есть анекдоты для поднятия настроения клиентам и пара мемасов с котиками.

Команда из 50 человек ежедневно берет на себя все задачи, связанные с финансовым сопровождением: консультации о деталях списания по услуге за каждый период времени, помощь с документами, тем более если нужна оплата от юрлица.

Именно информационка следит за правильностью подписания договоров с вебмастерами — теми, кто предлагает наши услуги своим друзьям и клиентам, чтобы заработать 20% от каждого проданного VDS. Сейчас это направление “в огне” — начинается сезон, большое количество новых партнеров.


Отвлекаем от руководства отделом Владимира Тычину. Задаем очевидный вопрос:
Зачем разделена поддержка, ведь со стороны кажется, что все вопросы решают технари?
“На хостинге и VDS мы используем панель собственной разработки. Задача моих специалистов — сориентировать клиентов в панели. В том числе по доменам — это регистрация/продление/настройка DNS. Если нужно изменить А-запись, перенести домен для продления через нас, установить PTR или DKIM/SPF — просто напишите. При необходимости специалисты подскажут нужные утилиты при работе по SSH, подберут подходящую конфигурацию под задачи вашего проекта”.

Техническая поддержка
У техподов кипит жизнь и стоит запах крепкого кофе. На одном мониторе идёт анализ логов клиентского Exim-сервера, на соседнем тянется десяток сайтов через tmux. На одном из пуфов идёт кодинг инструмента для автоматической диагностики кода ответа сайтов. Вдалеке слышны удары шарика для пинг-понга из комнаты отдыха.


Из соседнего кабинета доносится голос лектора, который рассказывает будущим специалистам про возможные источники возникновения HTTP 500, 502. Подсматриваем — молодой человек делится секретами работы почтового кластера и работы storage-серверов, на которых хранятся резервные копии.

Сменить обстановку, отвлечься и объединить ребят помогает запах пиццы на кухне. Иногда дважды в день. Дни рождения, памятные дни, свадьбы, пропатченный KDE2 под FreeBSD… поводов достаточно. (Наверное, чтобы мы не перестали помещаться в кресла — компания оплачивает всем спорт).

Удалось поймать специалистов второй линии поддержки VDS, которые ежедневно решают технические задачи, поступившие от клиентов. Останавливаем и просим рассказать, что за техподдержка VDS появилась в компании, ведь еще год назад мы официально отвечали клиентам, что это “вне нашей зоны ответственности”.

Сергей Наумов, руководит технической поддержкой:
“На старте мы провели исследование конкурентов и взяли за цель обеспечить в бесплатной поддержке тот объем задач, который у других хостеров выполняется платно.
Далее собрали самых сильных спецов и углубились в администрирование клиентских VDS, наработали опыт и пополнили базу знаний. Это позволило сделать уникальные задачи типовыми. После этого масштабировали поддержку на всех старших специалистов, чтобы клиенты круглосуточно могли рассчитывать на нашу помощь”.

Двигаемся дальше. Прямо при нас выполняется перенос сайта. Помимо заявок по диагностике, установке дополнительного ПО, самая запрашиваемая опция — перенос сайтов со сторонних хостингов и VDS/VPS к нам. Достаточно прислать список сайтов, данные для подключения по SSH — и можете идти пить кофе с печеньками. В зависимости от загруженности, объема сайта и скорости канала проекты будут перенесены в срок от нескольких часов до суток. Ребята до сих пор нежно вспоминают заявку на перенос 120 сайтов на один VDS с разных хостингов.

Вторая по популярности задача — установка или перенос SSL-сертификата для уверенной работы сайта по HTTPS.

Выходя из кабинета поддержек, встречаем тимлида системных инженеров, который зовет нас послушать лекцию об администрировании для сотрудников компании.

Отдел системного администрирования
В самой уютной части офиса расположилась большая команда, которая состоит из системных инженеров, администраторов и инженеров ЦОД. Первые занимаются обеспечением стабильной работы технической площадки, её сетевых каналов и безопасности.

Администраторы продумывают и формируют архитектуру площадки, а инженеры ЦОД по фэншую устанавливают оборудование в дата-центре.


Алексей Семёнов, тимлид группы системных инженеров в Timeweb:
Мы работаем над ростом uptime по виртуальным выделенным серверам. Текущее значение uptime приближается к 99,99%, однако для его сохранения требуется целый пласт работ.

Виртуальные серверы традиционно пользуются популярностью у злоумышленников, поэтому специалисты следят за возникновением как входящих, так и исходящих атак типа DoS/DDoS на VDS и применяют меры, пресекая атаку, чтобы от такой активности не страдали клиенты услуги.

Важной задачей является безопасность: мы своевременно обновляем ПО, к примеру, библиотеки Ubuntu. Оперативно устраняем критические уязвимости.
Недавно коллеги внедрили OpenVSwitch на VDS. Результатом стало снижение времени вынужденной перезагрузки libvirtd (не влияющей на работу клиентских VDS) при плановых работах на виртуальных серверах с KVM с 40 до 2-3 минут.

К примеру, на фото сервер, который вскоре будет собран и размещён в дата-центре:


Глеб Шаповал, руководитель группы инженеров центра обработки данных:
Сейчас мы продолжаем тестировать новые процессоры Intel Xeon Purley. По итогу выполненных тестов мы хотим быть уверены, что площадка полностью готова к переходу на новый тип производительных процессоров.

Серверы с Intel Xeon Purley поддерживают большие объемы памяти, и в них может быть установлена более быстрая память. Такие изменения положительно скажутся на производительности сайтов и других проектов наших клиентов VDS.

Полезным шагом стала замена SSD-дисков Intel на новое поколение. Это дало прирост производительности на 10% для наших клиентов.


Отдел программных разработок
Перед нами большое пространство, в котором разработчики и тестировщики сидят группами по направлениям. Ребята программируют интерфейсы, через которые пользователь взаимодействует с услугой VDS — панель управления, мобильные приложения, биллинг. Прямо сейчас пилят новую фичу в панели — совсем скоро там появится график занятости диска.



Константин Попов, руководитель отдела программных разработок:
График занятости диска VDS — это одна из популярнейших идей в нашем краудсорсинге, и очень скоро мы представим клиентам такую функциональность.

Любой клиент может оставить в разделе “Есть идея” панели управления информацию о том, чего ему не хватает в наших продуктах, написать про это тикет или рассказать поддержке в чате о какой-либо проблеме.

Эта информация обязательно попадет в разработку и будет передана разработчикам, дизайнерам и тестировщикам для реализации новой функциональности или исправления проблемы.
Каждую неделю мы релизим для клиентов десятки обновлений в наших продуктах, которые улучшают пользовательский опыт наших клиентов, саму услугу и её стабильность.



Между двумя группами, улыбаясь и подшучивая, перемещается руководитель проектов — Наташа Гудырева, которая работает с командой для того, чтобы любой проект увидел релиз именно в заданный срок:
За месяц мы встречаем несколько сотен заявок, когда работа сайтов клиентов была затруднена из-за нехватки места на диске VDS. Пускай контроль за заполненностью выбранного объема диска традиционно находится в зоне ответственности клиента, мы хотим облегчить им пользование панелью, а также реализовать систему оповещений о приближении к заполнению диска. Но после этого проекта задачи уже расписаны на ближайший спринт — отделы просят внедрить новые доработки, маркетингу нужна интеграция с новыми CPA-сетями, есть идея по внедрению отложенного платежа для клиентов VDS.

Отдел маркетинга
Тем временем за дверью, на которой висит надпись BDSM…
(Сотрудники отдела маркетинга настаивают на том, что аббревиатура расшифровывается как Business Development, Sales & Marketing.)


На стенах, между пиратским флагом, иллюстрацией “How to build a MVP” и плакатом с Мохаммедом Али (“Невозможное возможно” от Адидас), висят графики роста клиентских баз, роадмапы по продуктам, воронки конверсий, и пара цепочек писем визуализирована на ватманах формата А0. На маркерной доске принимаются ставки от сотрудников на проценты перевыполнения целей по выручке и по приросту аккаунтов VDS за текущий месяц.

Здесь тестируют гипотезы роста, анализируют рынок и клиентские пути, придумывают дополнительные сервисы. Отвечают за коммерческую составляющую бизнеса, поиск партнеров, рекламу и продажи.
Подглядываем, как директор по маркетингу Аурика Виларди формирует (внимание, спойлер!) новые тарифы для VDS с большими SSD-дисками и снижает на них цены.

Параллельно ребята внедряют новые доменные зоны, ищут контент для соцсетей и снимают видео для YouTube с участием коллег из HR-отдела.

Как-то само собой сложилось, что девушки в компании представлены в отделах, обеспечивающих спокойную жизнь нашей VDS. Юристы, финансисты и эйчары — наша любимая женская половина компании.

Нам кажется, что быть ближе к клиентам — это не только отвечать быстро на тикеты и помогать вашим виртуальным машинам по первому требованию. В том числе это — рассказывать о том, как мы развиваем наши продукты, показывать, как проходят наши рабочие будни.

На сегодня рабочий день закончен, а завтра наступит


Вы узнали больше о нашем продукте VDS и задачах, которые мы ставим перед собой.
Возможно, у вас остались вопросы к нашей команде?
Или идеи как улучшить продукт? Пишите в комментариях.
А лучше — приходите в гости в питерский офис увидеть всё своими глазами.