Рейтинг
0.00

Yandex Cloud

5 читателей, 242 топика

Яндекс.Облако и NVIDIA делают внедрение искусственного интеллекта более доступным для российских компаний



Облачная платформа Яндекс.Облако в партнёрстве с американской технологической компанией NVIDIA открывают для российских компаний библиотеку приложений для работы с искусственным интеллектом (ИИ) и машинным обучением — NVIDIA GPU Cloud (NGC).

NVIDIA GPU Cloud (NGC) — это библиотека специализированного ПО, сейчас в ней доступно более 80 оптимизированных приложений для работы с искусственным интеллектом, машинным обучением, нейронными сетями и высокопроизводительными вычислениями (HPC). В библиотеку постоянно добавляются новые приложения. Доступ к NGC бесплатный. Все приложения оптимизированы для максимальной производительности при работе с графическими процессорами NVIDIA и упакованы в контейнеры.

NGC повышает эффективность облачных вычислений на графических процессорах (GPU), обеспечивает значительный рост производительности работы разработчиков моделей машинного обучения, позволяет получить экономию затрат до 30% на разработку решений по искусственному интеллекту, сокращая время их внедрения от недель и дней до часов. Сами графические процессоры NVIDIA TESLA V100 доступны пользователям Яндекс.Облака с конца 2019 года.

Благодаря совместной работе компаний, платформа Яндекс.Облака стала первым публичным облаком в России, получившим статус официального партнера c NGC-сертификацией от NVIDIA.


Российские компании могут применять приложения NGС для решения прикладных бизнес-задач: построения рекомендательных систем, оптимизированного управления запасами, оптического контроля на производстве, организации дорожного движения в умных городах, разработки различных приложений и систем на основе компьютерного зрения.

Готовые приложения для работы с ИИ и машинным обучением также помогут в создании принципиально новых продуктов и сервисов «завтрашнего дня»: в сфере беспилотного транспорта, генного анализа и медицинских исследований, дополненной и виртуальной реальности. Например, среди приложений есть программное обеспечение Parabricks, которое применяется исследователями Covid-19. ПО Parabricks для геномного анализа основано на популярном наборе инструментов Genome Analysis и работает на GPU, ускоряя анализ данных до 50 раз. NVIDIA бесплатно предоставляет 90-дневную лицензию на Parabricks всем исследователям нового коронавируса. Среди других популярных фреймворков: Tensorflow и TensorRT.

По данным исследования Headhunter, за два года спрос на специалистов в сфере Data Science вырос на 234%, кроме того, они входят в число наиболее высокооплачиваемых специалистов. Использование приложений NGC сэкономит до 30% времени команд по анализу данных: вместо настроек узкоспециализированного ПО, разработчики моделей машинного обучения могут сразу перейти к обучению и тренировке алгоритмов.

По данным IDC, инвестиции на российском рынке искусственного интеллекта могут увеличиться вдвое к 2023 году. 70% опрошенных компаний из различных секторов экономики готовы приступить к внедрению ИИ-решений в течение двух лет, более 80% участников исследования планируют снизить затраты и увеличить производительность в бизнес-процессах за счет когнитивных технологий и AI-систем. Доступ к приложениям NGC в Яндекс.Облаке поможет этим компаниям начать использование этой технологии с меньшими затратами: за счет экономии на приобретении и настройке необходимой ИТ-инфраструктуры.

Яндекс.Облако и Hystax запускают сервис автоматической миграции



Яндекс.Облако и производитель программного обеспечения Hystax договорились о партнёрстве. Впервые в России миграция в Облако с других платформ предоставляется в формате SaaS по максимально доступной цене. Специальное приложение Hystax Acura уже есть в маркетплейсе Яндекс.Облака.

Именно процесс миграции сдерживает большинство российских компаний при переходе в облака, особенно на публичные платформы. Дело в том, что миграция требует значительного времени, а стоимость перехода рассчитывается провайдерами как отдельная услуга.

Теперь все основные этапы миграции в Яндекс.Облако: создание виртуальных машин, подбор конфигураций, контроль переноса данных — полностью автоматизированы через приложение Hystax Acura, которое можно запустить непосредственно из маркетплейса Яндекс.Облака. Приложение позволяет перенести и запустить в Яндекс.Облаке инфраструктуру с платформ любых мировых облачных провайдеров, платформ виртуализации VMware и OpenStack и собственного «железа». Миграция происходит без простоев и остановки бизнес-процессов, а также позволяет осуществить гарантированный перенос без потери данных. Стоимость миграции можно рассчитать самостоятельно заранее — цена составляет 1500 рублей за одну виртуальную машину.
cloud.yandex.ru/marketplace/products/f2e5v3tinjs71lu4biq2

Применение Hystax ускоряет процесс миграции в среднем в 8 раз. Например, перенос инфраструктуры на 100 виртуальных машин занимает в «ручном режиме» 30 дней, а с помощью Hystax его можно сделать за 2-3 дня с возможностью тестирования перед переключением. Также приложение Hystax поддерживает сценарий аварийного восстановления — если по какой-то причине на платформе, которую использует заказчик, происходит сбой, то работа автоматически продолжается в Яндекс.Облаке.

О мерах обеспечения непрерывности работы Облака в условиях COVID-19



В этой статье мы расскажем, какие меры приняли, чтобы защитить здоровье наших сотрудников и обеспечить бесперебойную работу сервисов платформы в ситуации ограничений, связанных с профилактикой COVID-19. Мы также собрали несколько советов, которые помогут поддержать ваш бизнес в этот неспокойный период.

Какие меры мы приняли, чтобы поддержать работу Облака
Наш приоритет — сохранить здоровье сотрудников. С середины марта 90% команды Облака переведены на удалённый режим работы. Все сотрудники в дата-центрах (ДЦ), отвечающие за работоспособность платформы, работают в условиях усиленного санитарного контроля: обеспечены необходимые средства профилактики, максимально ограничены визиты других сотрудников и гостей в ДЦ.

Эти меры распространяются на все ДЦ. Напомним, что дата-центры Яндекс.Облака созданы и эксплуатируются под руководством наших специалистов, мы полностью контролируем все процессы: от электроснабжения до мониторинга работы всех систем. Мы также обеспечили необходимые резервы мощностей и комплектующих для серверов — их хватит, чтобы поддержать текущих и новых пользователей, выдержав рост нагрузки в 2,5 раза. Все наши дата-центры соединены в единую сеть с пропускной способностью в сотни Гбит/сек, оснащены системами контроля и бесперебойной работы.

Сотрудники технической поддержки работают удалённо. Для вас ничего не изменится — команда отвечает на все обращения, как раньше. А если количество запросов превысит возможности команды поддержки, специалисты второй линии или команда разработки оперативно подключатся к их решению.

Мы уже провели учения: на день закрыли все офисы, и сотрудники Облака работали удалённо. Все системы и процессы налажены для эффективной работы, а скорость реакции на события и запросы пользователей остается на гарантированном уровне.

Мероприятия для пользователей Облака будут проводиться онлайн. Посмотрите расписание.

Какие меры мы рекомендуем принять вам
Обеспечьте удалённую работу ваших сотрудников.
  • Проверьте, что ваши облачные сервисы доступны из дома. В Яндекс.Облаке можно настроить:
  • Организуйте полноценный доступ к сервисам компании в удалённом режиме. Воспользуйтесь пакетами RDP (Microsoft Remote Desktop Services) для удалённого подключения к Windows Server. Вот инструкция для настройки терминальной фермы.
  • Проведите пробный день — пусть сотрудники, чья работа может быть переведена в онлайн, выполняют её удалённо. Убедитесь, что у вас есть средства для онлайн-общения и совместной работы, у сотрудников есть ноутбуки, а ИТ-системы и каналы готовы к росту нагрузки.

Обеспечьте отказоустойчивость
При удалённой работе доступ к оборудованию может быть затруднён: размещение сервисов в Облаке поможет с аварийным восстановлением и масштабированием. Ваша инфраструктура будет готова к выросшей нагрузке, а риски ошибок из-за ручной настройки станут ниже.

Стабильное использование Облака с экономией до 49%


Мы снижаем цены на резервируемый объём ресурсов (Committed Volume of Services, СVoS) — зарезервируйте определённый объём облачных сервисов на один год или на три года и платите меньше.

Скидка доступна всем пользователям — а экономия достигает 49 %. Стоимость ресурсов не изменится на протяжении всего срока действия скидки.

Подробнее об условиях
Вы получите скидку, если зарезервируете определённое количество CPU и RAM на один год или на три года. Мы даём скидку на суммарное потребление CPU и RAM, это позволит вам гибко управлять вычислительными ресурсами. Конфигурация хостов и распределение по зонам доступности не имеют значения. Вы будете ежемесячно получать фиксированный счёт, независимо от того, пользовались вы всеми ресурсами или нет.

Скидка предоставляется на сервисы управляемых баз данных:
  • Managed Service for PostgreSQL
  • Managed Service for MySQL
  • Managed Service for ClickHouse
  • Managed Service for MongoDB
использующие платформу с процессорами Intel Cascade Lake

Не все ресурсы можно зарезервировать. В правилах тарификации сервисов рядом с ресурсами, недоступными для резервирования, стоят прочерки.

Услуги сервисов Яндекс.Облака, на которые не распространяются условия CVoS, оплачиваются по стандартным тарифам. Например, вы используете хост s2.medium и зарезервировали 8 CPU и 32 ГБ RAM, и теперь вам необходимо увеличить его до m2.xlarge с конфигурацией 12 CPU и 96 ГБ RAM. Вы можете:
  • увеличить его в консоли управления и тогда на 8 CPU и 32 ГБ RAM и дальше будет работать скидка, а остальные 4 CPU и 64 ГБ RAM оплачивать по стандартным тарифам;
или
  • зарезервировать дополнительно 4 CPU и 64 ГБ RAM и получить скидку на все необходимые мощности.
Как получить скидку
В разделе Биллинг вы увидите, сколько сэкономите, если подключите CVoS на те ресурсы, которые используете сейчас. Там же вы сможете рассчитать ежемесячные платежи для разного количества CPU и RAM, чтобы выбрать наиболее выгодный план.


Подключить CVoS можно в консоли управления. Для этого:
  • Перейдите в раздел Биллинг и выберите платёжный аккаунт.
  • Перейдите в раздел Специальные предложения.
  • Укажите нужное количество ядер, объем памяти и срок резервирования.
  • Нажмите кнопку Подключить CVoS.


Подробнее о подключении CVoS читайте в документации.
cloud.yandex.ru/docs/billing/concepts/cvos
Стоимость хостов со скидкой можно найти в действующих правилах тарификации для каждого из сервисов.
cloud.yandex.ru/prices#services

Алертинг в Yandex Monitoring



В Yandex Monitoring появилась возможность настраивать алерты и уведомления об изменении метрик. Теперь вы можете настроить пороговые значения для метрик, по достижении которых будут отправлены письмо или SMS через каналы уведомлений.
cloud.yandex.ru/services/monitoring

Алерты дают возможность оперативно узнавать об изменениях в вашей облачной инфраструктуре. Например, вы можете настроить алерт на оставшееся свободное место на хостах вашей управляемой базы данных или на суммарное количество запусков облачной функции за последний час. Настраиваемые каналы уведомлений позволяют легко управлять группами получателей.

Чтобы создать алерт, перейдите в интерфейс Yandex Monitoring.
monitoring.cloud.yandex.ru/

Создать новый алерт можно со страницы дашборда. Выберите график и нажмите •••

Также можно создать алерт на основе графика. Откройте график и нажмите значок алерта.

Проверить статус созданных алертов или внести изменения можно в разделе Алерты. На странице алерта в интерфейсе мониторинга отображается график метрики, на которую настроен алерт, Alarm и Warning пороги, а цвет подложки графика показывает историю срабатывания алерта.


На момент публикации создание алертов и отправка уведомлений не тарифицируются. Количество созданных алертов квотируется: в одном облаке можно создать до 10 алертов. Количество каналов уведомлений неограничено.

Вы можете узнать больше о работе алертов и настройке уведомлений на страницах:

Новое в документации за январь



Добавлены справочники gRPC API во всех сервисах, кроме DataLens, Message Queue, Monitoring, Object Storage, SpeechKit и Yandex Database.

С 1 февраля следующие сервисы переходят на новую схему ценообразования:
  • Managed Service for MongoDB
  • Managed Service for MySQL
  • Managed Service for Redis
  • Managed Service for PostgreSQL

Помимо этого обновились документы:
  • Cloud Functions
  • Compute Cloud
  • Data Proc
  • Managed ClickHouse
  • Managed Service for Kubernetes
  • Cloud Functions

Подробнее
cloud.yandex.ru/blog/posts/2020/01/docs-digest

С 1 марта 2020 года в Яндекс.Облаке появится платная техническая поддержка



Мы вводим расширенную техническую поддержку, чтобы предоставить дополнительные возможности и улучшить условия технической поддержки для ваших проектов.

Будут доступны 4 тарифа:
Базовый
  • предоставляется всем пользователям Яндекс.Облака бесплатно.

Стандарт
  • возможность задать вопрос поддержке через чат;
  • тариф позволяет запрашивать у технической поддержки базовые рекомендации по архитектуре вашего решения в Яндекс.Облаке.

Бизнес
  • возможность задать вопрос поддержке через чат или по телефону;
  • по запросу техническая поддержка даёт базовые рекомендации по архитектуре вашего решения в Яндекс.Облаке;
  • консультации и рекомендации по настройке стороннего ПО, а также по решению проблем совместимости с Яндекс.Облаком;
  • рекомендации по устранению проблем с операционными системами и их компонентами.

Премиум
  • включает в себя все услуги остальных тарифных планов;
  • SLA с высокой скоростью ответа на запросы по всем каналам обращений;
  • может быть дополнен, чтобы лучшим образом отвечать вашим потребностям.


Максимальное время ответа инженера для Базового тарифа — 24 часа. Скорость ответа увеличивается в зависимости от тарифного плана:

Все условия предоставления технической поддержки и SLA читайте в документации.
cloud.yandex.ru/docs/support/overview

Что изменится?
С 1 марта будет подключена тарификация, которая соответствует вашему текущему тарифу.
Если вы получаете услуги по тарифу Стандарт или Бизнес, с 1 марта в разделе Детализация вы увидите расход на свой тарифный план. Если вы используете тариф Базовый, вы продолжите получать бесплатную поддержку.

С 1 марта вы сможете изменить тариф в консоли управления в разделе Поддержка.
Если вы хотите изменить тарифный план до 1 марта, отправьте запрос вашему менеджеру или напишите нашей команде: cloud-sales@yandex-team.ru.

Повышать тарифный план можно так часто, как хочется. Понижать — 1 раз в месяц. Чтобы получать бесплатную техническую поддержку, перейдите на Базовый тариф.

Стоимость технической поддержки
Стоимость поддержки по тарифным планам Стандарт и Бизнес складывается из фиксированной суммы в месяц и дополнительной суммы, которая рассчитывается как доля от стоимости потребленных ресурсов за текущий месяц. Стоимость технической поддержки по тарифу Премиум рассчитывается по запросу.

Пример расчёта стоимости технической поддержки:
  • Вы потребляете ресурсы Облака на сумму 70 000 ₽/мес.
  • Стоимость поддержки по тарифу Стандарт будет равна: 900 ₽ + 12% от 10 000 ₽ = 900 ₽ + 1200 ₽ = 2100 ₽/мес.
  • Стоимость поддержки по тарифу Бизнес будет равна: 6 000 ₽ + 7% от 10 000 ₽ = 6000 ₽ + 700 ₽ = 6700 ₽/мес.

Детальную информацию о стоимости расширенной технической поддержки читайте в правилах тарификации.
cloud.yandex.ru/docs/support/pricing

Установка SAP в Яндекс.Облаке



Программное обеспечение компании SAP используется в основном в крупных компаниях, но установить SAP и написать свою первую программу может абсолютно каждый. Разберём это на примере пошаговой установки SAP в Яндекс.Облаке.

SAP в компании X
Представьте себе большую производственную компанию. Назовём эту абстрактную компанию как «X».

SAP EWM
Как театр начинается с вешалки, так и производство в компании X начинается с её склада. Чтобы быть сильным и конкурентным игроком на рынке, этой компании нужен современный, а это значит автоматизированный склад. Сырьё должно бесперебойно поставляться на производство, а готовая продукция отгружаться дистрибьюторам. Подбор сырья и готовой продукции должен вестись с соблюдением сложной бизнес-логики, например, в производство должно отправляться сырье с более ранним сроком годности. За всё это на складе отвечает SAP EWM.

SAP ERP
Как и в любой компании, которая следит за качеством своей продукции, в компании X реализован входной контроль сырья и выходной контроль готовой продукции. За это отвечает модуль QM.

Компании X нужны инструменты для планирования производства, инструменты которые позволят вовремя сделать закупки сырья и оптимально загрузить работу оборудования. За это отвечает модуль PP/DS. Само же оборудование должно сообщать о необходимости ремонта и планового обслуживания. За это отвечает SAP MII.

За входящие и исходящие поставки, всевозможные накладные и выстраивание сложных логистических цепочек внутри компании и с внешними контрагентами в компании X отвечают модули MM и SD. Выпускаемая в компании X продукция подлежит маркировке. За получение у государства QR-кодов, а также за отправку в государственные органы сведений о том какая продукция была с этими QR кодами выпущена отвечает SAP ATTP.

Как и положено каждой крупной компании в X есть свой отдел кадров, который отвечает за приём сотрудников на работу, предоставляет справки и ведёт личное дело работника. За это отвечает модуль HCM-HR. Также работникам в компании X необходимо производить начисление и выплату заработной платы, премий, декретных пособий. За это отвечает SAP ERP — модуль HCM-Payroll.

Как и в других крупных компаниях, в Х широко используются возможности корпоративного портала, сотрудники получают доступ к новостям, форумам, контактной и справочной информации. За это отвечает SAP Enterprise Portal. Невозможно представить и компанию без бухгалтерии, где за кассовые и банковские операции, предоставление отчётности и закрытие финансового периода отвечает модуль FI, а за различные виды учётов затрат и расчёт себестоимости продукции отвечает SAP ERP — модуль CO.

SAP OpenText
Масштаб компании не позволяет X обойтись без системы электронного документооборота (СЭД), различные цепочки согласования проходит и заявка на отпуск рядового сотрудника и многомиллионный договор на закупку нового оборудования. За это отвечает SAP OpenText.

Для заказов от дистрибьюторов в компании X используется B2B решение на базе SAP Hybris. Полученные через веб-витрину заказы загружаются в ERP-систему через единую шину данных компании на базе SAP PO. Через эту шину проходят и все другие информационные потоки, связывающие SAP-системы с системами других производителей, например, системой бюджетирования Infor, и с внешними сервисами, например, с системой юридически значимого электронного документооборота СБИС. Для принятия решений, руководящим сотрудникам компании X постоянно требуется аналитическая отчётность, в которой за консолидацию, хранение и подготовку данных отвечает SAP BW.

За мониторинг систем, репозиторий кода, прослеживаемость изменений и другие аспекты жизненного цикла SAP-систем в компании X отвечает SAP Solution Manager.

Подробнее как установить
cloud.yandex.ru/blog/posts/2020/01/sap

В сервисе Data Proc появилась возможность создавать задачи при помощи CLI и API



Data Proc Jobs — это способ удаленного запуска задач (jobs) на кластерах Yandex Data Proc. Запускать задачи можно с использованием HTTP или gRPC Data Proc API, а так же через Yandex Cloud SDK или YC CLI.
cloud.yandex.ru/services/data-proc
cloud.yandex.ru/docs/data-proc/api-ref/Job/
cloud.yandex.ru/docs/ydb/sdk/index
cloud.yandex.ru/docs/cli/operations/install-cli

Data Proc поддерживает четыре типа задач:
  • sparkJob — Apache Spark
  • pysparkJob — Python API для Apache Spark
  • mapreduceJob — Apache Hadoop
  • hiveJob — Apache Hive

Зачем нужны задачи Data Proc Jobs?
Задачи позволяют упростить использование Hadoop-стека технологий. Data Proc Jobs разделяет процесс обработки данных на задачи и позволяет запускать их без непосредственного доступа на хосты в Облаке. Data Proc Jobs подходит как для выполнения разовых операций, так и для построения ETL-процессов и запуска регулярных аналитических расчётов.

Для каких версий поддерживается создание задач?
Запуск заданий доступен для кластеров, созданных с версией образа v1.1 и выше. Всю диагностическую информацию о запущенных и выполненных задачах можно найти в истории операций над кластером, а также в бакете сервиса Object Storage, который был указан при создании кластера.
cloud.yandex.ru/services/storage

В версии образа 1.1 компоненты обновились до следующих версий:
  • Hadoop 2.10.0
  • Tez 0.9.2
  • Hive 2.3.6
  • Zookeeper 3.4.14
  • HBase 1.3.5
  • Sqoop 1.4.7
  • Oozie 4.3.1
  • Spark 2.4.4
  • Flume 1.8.0
  • Zeppelin 0.8.2
Подробнее об использовании задач Spark и PySpark читайте в документации.
cloud.yandex.ru/docs/data-proc/solutions/run-spark-job

Создание снимков дисков по расписанию с Yandex Cloud Functions



Так как пока что в Облаке отсутсвует нативная возможность настроить создание снимков дисков по расписанию, можно сделать эту функциональность из подручных средств.

Для начала нужно разметить диски, для которых мы создаем бэкапы. Для этого при помощи интерфейса командной строки YC CLI назначим ему значение атрибута labels.
yc compute disk update --id ef34spdueq1ps7b37m51 --labels snapshot=1


cloud.yandex.ru/blog/posts/2020/01/snapshot-triggers