Рейтинг
0.00

Yandex Cloud

5 читателей, 245 топиков

Как сократить расходы в Облаке: 9 советов



По внутренней статистике Яндекс.Облака до 35% расходов (!) на облачные сервисы можно оптимизировать. Мы подготовили для вас 9 советов, как это сделать.

1. Планируйте по-новому
Особенности планирования ресурсов в облаке достаточно сильно отличаются от стандартной инфраструктуры. Уже на этапе тестирования (пробного периода) внимательно сравните информацию о загрузке ресурсов, которая предоставляется бесплатно из сервиса мониторинга, с данными Биллинга в денежном выражении. Это поможет определить, когда были запущены и оплачены лишние виртуальные машины (ВМ), как запускаются сервисы, на какие дни приходятся пики и плато нагрузки.

2. Анализируйте аномалии
Используя выгрузку в CSV и возможности сервисов анализа и визуализации данных, посмотрите, на что именно ушли деньги. На графиках хорошо видны всплески потребления баз данных. Задайтесь вопросом, какой продукт в это время тестировался, в рамках какого проекта случился всплеск, насколько это необходимо, успешен проект или нет. Мы рекомендуем для этой задачи сервис Yandex DataLens, но вы можете использовать любой привычный инструмент.

3. Исключите случайности
Глубокий анализ информации из сервиса мониторинга и оценка потребления сервиса Compute Cloud позволяет отслеживать расходы, чтобы они не выходили за пределы. У наших клиентов был случай, когда сотрудники забыли отключить дорогостоящую GPU-карту. В другом кейсе потребление ядер платформы Intel Cascade Lake резко подскочило и указало на то, что запущен какой-то проект, после чего потребовался анализ его успешности и целесообразности.

4. Прерывайте ВМ
Используйте прерываемые ВМ, которые будут принудительно остановлены в течение 24 часов. Данные при этом сохраняются. Они оптимально подходят для тестовых задач или для обсчёта большого количества данных за короткое время. При этом скидка может достигать 70%. Сервис Instance Groups позволяет автоматизировать запуск прерываемых ВМ, и таким образом экономить. Если в проекте заняты 100 ВМ, их можно запускать не все сразу, а периодически (например, блок машин через каждые 15 минут). Вероятность того, что 100 машин будут остановлены сервисом одновременно, практически стремится к нулю.

5. Используйте ядра частично
Если для проекта критически важна постоянная работа инфраструктуры и прерываемая ВМ не подходит, подумайте о ВМ с частичным использованием ядра. Скидка на виртуальные ядра составит до 65%, при этом вы гарантированно получите ту долю ядра, которую купите. Есть вероятность получить и до 100% ядра, если ваши соседи в этот момент не будут им пользоваться. Вариант подходит для пилота или демостенда.

6. Готовьтесь к пиковой нагрузке с автоскейлингом
Автоматизация масштабирования в Instance Groups помогает при волатильном спросе на ВМ. Вы просто настраиваете правила и задаёте условия, и сервис автоматически включает или выключает машины. Снижается риск человеческой ошибки, вероятность что-либо недоглядеть или забыть запустить.

7. Доверьтесь Managed Services
Использование наших управляемых сервисов позволяет оптимизировать расходы скорее на инфраструктуру в целом, чем именно на облачные ресурсы. Причём итоговая экономия может составлять от 20 до 80% для баз данных и достигать 150% для Managed Service for Kubernetes. Используя наши managed-сервисы, вы освобождаете сотрудников от рутинных задач. Яндекс.Облако отказоустойчиво, отвечает за обновление, техподдержку, мониторинг всего, что происходит. А ваши специалисты могут потратить время на продукты компании, что более ценно для развития бизнеса, чем администрирование базы данных.

8. Храните данные в Object Storage
Когда приходится записывать терабайты данных, один из вариантов оптимизировать расходы — использовать объектное хранилище Object Storage для определённых типов данных вместо хранения на дисках ВМ. В частности, сервис позволяет сократить затраты на хранение бэкапов, видео- и аудиофайлов. С Object Storage вам не нужно самостоятельно разворачивать отказоустойчивую систему через дублирование ВМ.

9. Считайте с Cloud Functions
На конференции Yandex Scale был представлен новый способ оптимизировать расходы: это сервис Cloud Functions, который позволяет решать задачи и платить только за вычисления. Например, для автоматизации системы учёта транзакций это самый дешёвый вариант эксплуатации. При этом затраты на надёжность также достаточно низкие, поскольку Cloud Functions при необходимости автоматически масштабируется.

Планы
Сервисы Яндекс.Облака постоянно совершенствуются, раздел Биллинг меняется, и в ближайшее время планируется запустить четыре интересные опции. Это:
  • Автоматизированная выгрузка данных из Биллинга в Yandex DataLens (сейчас для настройки необходимо обратиться в техподдержку).
  • Дополнительный инструмент анализа labels. Если ваши 10 ВМ заняты в разных проектах, полезно понимать, сколько одна ВМ потратила денег за отчётный период. Если присвоить ВМ лейбл, станет доступна информация о машине. Также появятся гибкие возможности получить целостную картину затрат на проект, что достаточно сложно на собственной инфраструктуре.
  • Функция бюджеты (предоплатное потребление) поможет гарантировать, что за месяц компания не потратит больше определённой суммы. Когда предел будет достигнут — придёт уведомление от службы поддержки, а потом виртуальные ресурсы приостановятся.
  • Прогнозирование затрат за любой отчётный период на основе истории потребления упростит управление расходами в Яндекс.Облаке, а также позволит избежать проблем с нулевым лицевым счётом.
Также рекомендуем посмотреть подробный доклад об экономике Облака с конференции Yandex Scale: за что снимаются деньги со счёта, как происходит переход из триала в платное пользование, чем полезны детализация и анализ и не только.

Новое в документации за ноябрь



Сценарии использования
Новое:
Веб-сайт на базе 1С-Битрикс.
Высокопроизводительные вычисления (HPC) на прерываемых виртуальных машинах.
Тестирование приложений с помощью GitLab.
Установка виртуального роутера Cisco CSR 1000v.
CLI
Новое:
Добавлены пошаговые инструкции про аутентификацию в CLI и работу с профилями.

Compute Cloud
Новое:
Теперь можно создавать прерываемые ВМ с GPU. Про стоимость читайте в правилах тарификации.
Добавили пошаговые инструкции для API (см. вкладку API):
Создать ВМ Linux.
Создать ВМ Windows.
Получить список публичных образов.
Улучшения:
Описаны особенности сетевых дисков.
Переписали концепции про метаданные. Описали, как передавать их на виртуальную машину и какие ключи обрабатываются в публичных образах Яндекс.Облака.

Identity and Access Management
Новое:
Список ресурсов Яндекс.Облака, на которые можно назначать роли.
Инструкция, как посмотреть назначенные роли.

Instance Groups
Новое:
В автоматическом масштабировании добавлена поддержка пользовательских метрик Yandex Monitoring. Раздел про автоматическое масштабирование переписали и сделали подробнее.
Добавлены инструкции про запуск и остановку группы.
Описаны статусы группы. Про статусы виртуальных машин в группе написали подробнее.

Managed Service for Kubernetes
Новое:
Добавлена инструкция про создание файла конфигурации.

Managed Service for MongoDB
Новое:
Поддержка MongoDB 4.2.

Managed Service for PostgreSQL
Новое:
Поддержка PostgreSQL 12 и PostgreSQL 10 для 1С.

Yandex Database
Новое:
Добавлен раздел с публичными материалами о YDB.

Три факта и девять тезисов про интернет вещей в Яндекс.Облаке



Мы пересмотрели еще раз выступления с Yandex Scale и подготовили для вас девять главных тезисов про интернет вещей (internet of things, IoT) в Яндекс.Облаке.

Три факта о нашем IoT:
  • 72 рубля стоит 1 ГБ или 1 млн сообщений, отправленных в облако с помощью сервиса Yandex IoT Core, следующие гигабайты еще дешевле.
  • Миллионы устройств — масштаб работы наших надёжных и безопасных, отказоустойчивых и масштабируемых сервисов.
  • Экономия ресурсов за счет использования интегрированных между собой платформенных сервисов — вы решаете свою бизнес-задачу и платите только за то, что действительно вам нужно.

Основные тезисы
  • Масштабный сценарий. Платформа Яндекс.Облако запускает свой сценарий интернета вещей. Почему сценарий? Потому что интернет вещей — всегда интеграция, а не отдельное решение. С Яндекс.Облаком в рамках проектов интернета вещей вы можете использовать больше разнообразных сервисов, которые отлично взаимодействуют между собой и позволяют эффективнее, дешевле и надёжнее реализовывать ваши сценарии для работы с устройствами.
  • Удобный сервис. В основе нашего сценария лежит новый сервис Yandex IoT Core, который выполняет роль универсального инструмента для создания решений в области интернета вещей. Сервис позволяет надёжно и безопасно передавать данные между облаками и устройствами по протоколу MQTT. Обеспечивает безопасную авторизацию и управление доступом. Обмен данными между устройствами происходит только после аутентификации, обеспечивается шифрование данных по всем точкам подключения.
  • Экономия на вычислениях. В рамках сценария интернета вещей представлена интеграция с новым сервисом функций Yandex Cloud Functions. Настроенная функция вызывается каждый раз, когда к вам попадает пакет с данными. Тем самым вы решаете две задачи. С одной стороны, обеспечиваете отказоустойчивость системы, потому что сервисы Яндекса гарантируют надёжность и автоматическое масштабирование. С другой стороны, эта связка позволяет существенно экономить, так как в данном случае вы платите только за объем данных, которые потребили. Использование функций полезно как на ранних этапах, когда устройств мало и система будет стоить очень дешёво, так и на этапе масштабирования, когда нужно будет поддерживать постоянно растущее количество устройств.
  • Интеграция и обработка. Сервис Yandex IoT Core умеет автоматически масштабироваться и обеспечивает обработку огромного количества данных, в том числе с помощью Yandex Cloud Functions. Кроме того, вы можете не только отправлять телеметрию в Yandex IoT Core, но еще отправлять команды из облака к устройствам. А данные, которые были приняты, вы можете обрабатывать всеми существующими сервисами платформы, в частности, собирать в хранилищах, использовать управляемые базы данных, ВМ, сети-балансировщики, а также визуализацию, например DataLens.
  • Технологии Moxa. Сценарии интернета вещей требуют сложных многослойных решений, поэтому к анонсу Yandex IoT Core было заключено несколько партнёрских соглашений. Первое — с компанией Moxa, производителем промышленного оборудования для интернета вещей. Интеграция с сервисами платформы Яндекс.Облако теперь реализована на уровне прошивки устройств Moxa.
  • Возможности KasperskyOS. Все устройства интернета вещей с установленной микроядерной операционной системой KasperskyOS автоматически совместимы с Yandex IoT Core. Операционную систему можно поставить на шлюз, который работает «в поле», и использовать для того, чтобы анализировать трафик и защищать от возможных атак или аномалий.
  • Оборудование RedBees. Для задач, предполагающих передачу данных по беспроводным сетям, например по 4G или по NB-IoT, мы рекомендуем оборудование от компании RedBees. Его отличает пониженное энергопотребление и расширенное покрытие, благодаря чему даже в труднодоступных местах устройство гарантированно будет связываться с сетью.
  • ПО SAYMON. Для расширения возможностей в области мониторинга данных, аналитики потребления и ее визуализации мы предлагаем программные решения от компании SAYMON, российского ISV-партнера платформы Яндекс.Облако.
  • Реализованные пилоты. Еще до публичного запуска Yandex IoT Core, некоторые партнёры активно проводили тестирование сервиса. На конференции своим опытом поделились компания MultiSoft, производящая кассовую технику, а также участники проекта по созданию системы автоматизированного сбора данных со счетчиков на базе сетей NB-IoT (реализован совместно SAYMON и RedBees). Развитие партнёрских отношений будет способствовать расширению предложений в формате «IoT из коробки».

Посмотреть запись сессии про интернет вещей можно по ссылке.
www.youtube.com/watch?v=A9ORCdSHv4Q

Новая версия PostgreSQL доступна в Яндекс.Облаке



Теперь в Managed Service for PostgreSQL вы можете выбрать новую версию PostgreSQL 12 при создании нового кластера.
cloud.yandex.ru/services/managed-postgresql
cloud.yandex.ru/docs/managed-postgresql/operations/cluster-create

Что нового в PostgreSQL 12
Улучшена производительность индексирования и выполнения запросов c использованием JIT-компилятора (Just-in-Time).
Улучшения SQL:
  • добавлена команда REINDEX CONCURRENTLY, позволяющая произвести переиндексирование, не блокируя запись;
  • поддержка стандарта SQL/JSON;
  • встраиваемые обобщённые табличные выражения (Common Table Expression, CTE);
  • поддержка генерируемых столбцов.
Улучшения секционирования — теперь можно использовать уникальные индексы и внешние ключи с секционированными таблицами.
Поддержка PostGIS 3.0.

Больше о новой версии PostgreSQL 12 читайте на официальном сайте postgis.net/2019/10/20/postgis-3.0.0/

Доступность обновления
Обновление существующих кластеров PostgreSQL до 12 версии будет доступно в ближайшее время — следите за новостями в Блоге и телеграм-канале Яндекс.Облака.

Яндекс.Облако и MongoDB договорились о партнёрстве



Разработчик ведущей системы управления базами данных общего назначения MongoDB, Inc. (NASDAQ: $MDB) и российская платформа Яндекс.Облако 14 ноября объявили об официальном партнёрстве. Платформа Яндекс.Облако стала первым официальным партнёром MongoDB в России и представила удобный сервис Managed Service for MongoDB на основе актуальной версии 4.2, поддерживающей ACID-транзакции на уровне шардированного кластера и другие возможности.

Теперь клиенты Яндекс.Облака смогут использовать MongoDB как управляемый сервис на основе актуальной версии 4.2, ранее недоступной в России. Обслуживание СУБД, включая своевременные обновления, автоматизировано на стороне платформы Яндекс.Облако, и пользователь получает готовую к эксплуатации базу данных. Кроме того, Яндекс.Облако как официальный партнёр имеет прямой доступ к технической поддержке MongoDB и будет оказывать техподдержку клиентам в России.

Основные преимущества Managed Service for MongoDB
  • официальные новые релизы СУБД (MongoDB 4.2) и патчи для младших версий (3.6, 4.0);
  • новые функции MongoDB, недоступные в более ранних версиях, в том числе поддержка ACID-транзакций с несколькими документами, а также улучшение поддержки существующих опций и расширение их функциональности;
  • 100%-я совместимость с оригинальным софтом разработчика;
  • официальный канал обратной связи с MongoDB, Inc.;
  • инфраструктура Яндекс.Облака защищена в соответствии с ФЗ-152.

Комментарии представителей компаний
Официальное партнёрство с разработчиком MongoDB помогает нам предоставлять более надёжный и функциональный сервис для компаний, которые развивают и создают новые цифровые продукты в сферах розничной торговли, электронной коммерции и финансов
прокомментировал новость Олег Коверзнев, директор по развитию бизнеса Яндекс.Облака.

Мы стремимся к тому, чтобы у наших клиентов была возможность работать с MongoDB на любой платформе, в том числе в Яндекс.Облаке. Мы очень рады, что у нас появился новый стратегический партнёр и что теперь у Яндекса есть лицензия и возможность предлагать MongoDB как услугу с полной поддержкой. Партнёрство с Яндексом поможет нам повысить качество обслуживания клиентов в Восточной Европе
сказал вице-президент по работе с партнёрами MongoDB Алан Чхабра

Программа Девятой Вебмастерской открыта! Присоединитесь?

Приглашаем вас на Девятую Вебмастерскую — конференцию для маркетологов, аналитиков и владельцев сайтов.

Наши эксперты расскажут о том, как бизнесу анализировать клиентский опыт и находить точки роста, как эффективно решать задачи маркетинга и продукта. Представители сервисов Яндекса расскажут о практическом опыте взаимодействия с пользователями на различных этапах customer journey.
events.yandex.ru/events/devyataya_vebmasterskaya

В этом году вас также ждет небольшая развлекательная программа с подарками и фуршетом, ведь 22 ноября Турбо исполняется 2 года!

Подробная программа мероприятия доступна здесь.
events.yandex.ru/events/devyataya_vebmasterskaya

Конференция пройдёт 22 ноября в московском офисе Яндекса по адресу улица Льва Толстого, 16. Для тех, кто не сможет посетить Вебмастерскую, Яндекс организует онлайн-трансляцию!

Если вы планируете прийти или посмотреть трансляцию, обязательно зарегистрируйтесь на странице мероприятия.
events.yandex.ru/events/devyataya_vebmasterskaya

Мероприятия и вебинары в ноябре



Здравствуйте!
Мы собрали все ноябрьские встречи и вебинары в одно письмо. Выбирайте мероприятие по душе.

Тренинг от Intel Software Solutions в офисе Яндекса
7 ноября

Вы научитесь использовать CI и программные инструменты Intel в Облаке, узнаете, как анализировать производительность приложений и познакомитесь с CatBoost — библиотекой градиентного бустинга с открытым исходным кодом.
events.yandex.ru/events/nov-11

Вебинар: Возможности сервиса обмена сообщениями между приложениями
14 ноября

Обсудим Yandex Message Queue — сервис, который позволяет быстро и надёжно передавать сообщения между приложениями или их компонентами.
cloud.yandex.ru/events/34

Совместный митап MongoDB и Облака
14 ноября

Команда MongoDB представит новые возможности СУБД и поделится планами на будущее, а разработчики управляемых БД в Облаке расскажут о сервисе Yandex Managed Service for MongoDB.
cloud.yandex.ru/events/38

Вебинар: Новые возможности Yandex DataLens
21 ноября

Руководитель Yandex DataLens Роман Колеченков расскажет, что нового появилось в сервисе с момента запуска, и покажет, как создать аналитический дашборд с диаграммами, таблицами и графиками.
cloud.yandex.ru/events/40

Cloud Lab. 5 практических кейсов от партнеров Облака
26 ноября

Пять партнёров Яндекс.Облака соберутся, чтобы рассказать о сложных проектах, в которых они задействовали облачные сервисы.
events.yandex.ru/events/nov-26

Подробнее о встречах и вебинарах Облака читайте на нашем сайте.
cloud.yandex.ru/events

Выбирайте новые процессоры для экономии



В этом письме мы хотим рассказать вам, как работать в Яндекс.Облаке выгоднее и эффективнее.
Секрет в процессорах новой линейки Intel Xeon Gold (Cascade Lake): их производительность выше, чем у процессоров предыдущего поколения, а стоимость ниже.
Мы провели тесты: процессоры Intel Xeon Gold стабильно показывают ускорение от 10% до 90%, а пропускная способность оперативной памяти выросла на 20% по сравнению с предыдущим поколением процессоров.
Кроме того, виртуальные машины на базе новых процессоров дешевле: например, наша самая популярная конфигурация с 2 vCPU, 4 RAM и диском 13 ГБ обойдётся в 1673.88 ₽ в месяц. Такая же конфигурация на процессорах предыдущей линейки стоит 1740.56 ₽.



Вы сможете сэкономить ещё больше, если выберете виртуальную машину с частичной загрузкой ядра — 5%, 20%, или 50% vCPU. Та же конфигурация ВМ с 2 vCPU, 4 RAM и диском 13 ГБ, но с гарантированной долей 20% vCPU будет стоить 1037.98 ₽.



cloud.yandex.ru/docs/compute/quickstart/quick-create-linux

Новое в документации c августа по октябрь



Обзор платформы
Улучшения:

Описание технической поддержки
Новое:

Сценарии использования

Compute Cloud
Новое:
Улучшения:

DataLens
Новое:

Identity and Access Management
Новое:
Улучшения:

Managed Service for ClickHouse
Новое:

Managed Service for Redis
Новое:

Message Queue
Новое:

Resource Manager
Новое:

SpeechKit
Новое:
Синтез речи:

Virtual Private Cloud
Новое:
Улучшения:

Vision
Новое:

Изменения в предоставлении сервисов Облака



Спасибо за работу с сервисами платформы Яндекс.Облако!
Мы повышаем меры по защите информационной безопасности и персональных данных наших клиентов. В связи с чем вносятся правки в Соглашение об обработке данных и Правила допустимого использования Сервисов. Правки вступят в силу с 11 ноября 2019 года и включают в себя следующее:
  • Уточнения в положении о разграничении ответственности между сторонами по обработке персональных данных (п. 2.1.14.).
  • Уточнения процедуры уведомления клиента Яндексом в случае обнаружения несанкционированного доступа к персональным данным, обрабатываемых Яндексом (п. 3.9.).
  • Положения о технических и организационных мерах, реализуемых Яндексом для защиты данных клиентов на Платформе «Яндекс.Облако» (п. 11.1.).