Рішення для створення гібридних хмар даних
Компанія «Газпром нафта» та платформа Yandex.Cloud представили
- Як це буде працювати?
Користувач ІТ-рішення отримує повністюготовий до роботи програмно-апаратний комплекс, створений на базі обладнання та технологій Yandex.Cloud. Комплекс встановлюється в дата-центрі замовника і стає частиною його платформи для роботи з даними. Подальший сервіс - профілактика, налаштування, оновлення та інші регламентні роботи - проводяться за стандартами Yandex.Cloud.
- Як «залізо» компанії працюватиме з новим продуктом?
Новий ІТ-продукт інтегрується з локальнимикорпоративними системами зберігання і обробки даних і публічними хмарними сервісами. В результаті виходить гібридне хмара, яке розширює можливості цифрової інфраструктури компанії, дозволяє встановлювати підвищені стандарти безпеки і враховувати іншу специфіку діяльності конкретного користувача.
В ході апробації фахівці компанії «Газпромнафту »взяли участь у виробленні вимог до гібридного рішення і фактично стали партнером по дизайну його архітектури. Тому наші клієнти отримають не тільки повністю готовий до роботи програмно-апаратний комплекс на базі технологій Yandex.Cloud, але і сервіс з підтримки і регулярного оновлення продукту з урахуванням розвитку нашої публічної платформи.
Олег Коверзнев, операційний директор Yandex.Cloud
- Що планується далі?
Подальший розвиток технологічного партнерстваміж компанією «Газпром нафта» і платформою Yandex.Cloud дозволить випробувати нове цифрове рішення при різних сценаріях промислової експлуатації. «Газпром нафта» розглядає можливість застосування гібридного хмари для розвитку свого обчислювального кластера і розробок в області штучного інтелекту, які використовуються для пошуку нових запасів нафти і дистанційного керування технологічними операціями по її видобутку. Також додаткові потужності можуть бути задіяні для підвищення ефективності балансування навантажень на виробничу ІТ-інфраструктуру.
Щороку наші заводи і нафтопромисли створюютьблизько 5 ПБ нових даних. Ми не просто зберігаємо цю інформацію, а щодня приймаємо рішення на основі її аналізу, використовуємо при моделюванні технологічних процесів і навчанні нейромереж. Особливість роботи у віддалених регіонах Сибіру і Арктики вимагає великих розподілених обчислювальних потужностей, які б регулювалися з одного місця. Створення гібридного хмари вирішує цю задачу і забезпечує інформаційну безпеку. Продукт стане зручним сервісом для промислових підприємств і інших представників ринку.
Андрій Бєлєвцев, директор із цифрової трансформації компанії «Газпром нафта»
Чотири нових сервісу для зберігання і управління даними
Категорія сервісів для зберігання та управлінняданими стала одним із найшвидше зростаючих напрямків платформи Yandex.Cloud в 2020 році, випередивши за динамікою зростання сервіси традиційного лідера - оренду віртуальних машин. За допомогою хмарних сервісів управління даними компанії, незалежно від розміру та сфери діяльності, вирішують такі завдання, як зберігання та обробка даних, їх аналітика та візуалізація.
Найбільшим попитом користуються сервіси керованихбаз даних (Managed Databases) - з початку 2020 року споживання цих сервісів на платформі Yandex.Cloud виросло в три рази, а кількість створених користувачами баз даних перевищило 10 000.
- Що було раніше?
В нашій платформі Yandex.Cloud вже були доступні по кнопці практично всі найпопулярніші на ринку рішення в області зберігання і обробки даних. В цьому році ми суттєво поліпшили сценарії міграції даних. Для цього ми додали два нових сервіси, які спрощують перенесення даних між будь-якими джерелами, - Managed Service for Kafka, і спеціалізоване рішення для перенесення даних між базами даних - Data Transfer. У сегменті баз даних загального призначення хмара стало ще доступнішим для Enterprise-користувачів - з'явився новий сервіс Managed Service for SQL Server. У сімействі аналітичних рішень з'явився Managed Service for Elastic Search - популярне рішення, що підтримує сценарії повнотекстового пошуку і ad hoc аналітики.
Олексій Башкеев, керівник платформи Yandex.Cloud
- Що з'явиться зараз?
З 23 вересня користувачам Yandex.Cloud відкритий доступ до нового сервісу Data Transfer, який дозволяє без зупинки додатків переносити дані між СУБД незалежно від того, де вони розгорнуті. Data Transfer допомагає швидко та безпечно виконати міграцію баз даних з інших хмарних платформ або локальних баз даних до сервісів керованих баз даних Yandex.Cloud. Також за допомогою Data Transfer можна переміщувати дані між різними базами даних на платформі та настроювати резервне копіювання.
Також у відкритий доступ вийшов сервіс ManagedKafka - система потокової передачі даних в аналітичні системи. Додані сервіс пошуку і аналізу даних ElasticSearch і одна з найбільш популярних в світі комерційних систем управління базами даних для роботи в екосистемі продуктів Microsoft SQL Server. Всього на платформі Yandex.Cloud тепер є 9 сервісів керованих баз даних, що закривають більшість сценаріїв зберігання і обробки даних.
Новий розділ маркетплейсу з даними для бізнес-аналітики
У маркетплейсе Yandex.Cloud з'явився розділ «Геослоі», в якому зібрані знеособлені геоінформаційні дані від партнерів сервісу. Вони можуть розміщувати свій контент на безоплатній або платній основі. Клієнти Yandex.Cloud отримуватимуть доступ до необхідних даних в інтерфейсі сервісу, аналізувати їх за допомогою Yandex DataLens і використовувати для бізнес-цілей. Наприклад, користувачі можуть оцінювати потенційний попит на продукти або перспективи відкриття торгових точок, планувати розширення зон поставок або маркетингові кампанії.
У розділі вже доступний контент двох партнерів.«Центру просторових досліджень» на комерційній основі та Росстату на безоплатній, а також два приклади геоаналітики від Яндекса — «Аудиторія: інтереси та соцдем» та «Організації: попит та пропозиція». За допомогою DataLens користувачі можуть комбінувати та аналізувати всі пресети даних для прийняття бізнес-рішень.
Ми прагнемо дати партнерам не просто технології,а інструменти для монетизації будь-якого інтелектуального продукту, який може бути зроблений або поліпшений за допомогою хмари. Окремо відзначу, що всі весь контент розділу «Геослоі» - це виключно агреговані і знеособлені дані, за якими неможливо отримати деталізацію по конкретному пристрою чи користувача.
Олег Коверзнев, операційний директор Yandex.Cloud
Хто виступив партнером Yandex.Cloud?
Аналітика створюється при співпраці зРосстатом. Угода про співробітництво передбачає спільну роботу з підготовки пакетів різних відкритих даних. Вже є показники природного руху населення, а також інша демографічна інформація.
Росстат розміщує у відкритому доступі великімасиви даних, доступних будь-яким користувачам. Завдяки співпраці з Yandex.Cloud вони придбають додаткову цінність для дослідників, аналітиків і бізнесу. Інструменти платформи дозволяють об'єднувати джерела, робити швидкий аналіз, будувати наочну візуалізацію і в результаті оперативно приймати стратегічні рішення.
Павло Смелов, заступник керівника Росстату
Центр просторових досліджень надавгеоінформаційні дані щодо населення, домогосподарств у новобудовах, а також індексів бізнес-потенціалу для різних сфер. Крім того, на безкоштовній основі доступний дашборд з моніторингу мережевої торгівлі РФ, який ведеться з 2015 року та містить індекс розвиненості регіону з погляду федеральних гравців рітейлу.
За словами гендиректора Центру просторовихдосліджень Дениса Струкова, аналітичні інструменти, індекси і експертиза в поєднанні з можливостями DataLens - це своєчасний відповідь на запит B2B- і B2C-ринків. Це, за його словами, хмарний варіант location intelligence, який останнім часом розвивається за кордоном, а тепер і в Росії.
Загальний доступ до маркетплейс Yandex.Cloud відкрито у 2019 році. Це майданчик, на якому клієнти Хмари можуть безпосередньо отримувати від розробників та видавців доступ до бізнес-додатків. Сьогодні доступні 47 програм та сервісів: від операційних систем до інструментів захисту інформації генетичного аналізу.
Yandex.Cloud відкриває загальний доступ до нового сервісу для розробки на основі машинного навчання DataSphere
Платформа Yandex.Cloud відкриває загальний доступ до сервісу для розробників машинного навчання Yandex DataSphere. Сервіс допомагає компаніям та індивідуальним розробникам знизити вартість створення і експлуатації моделей машинного навчання, автоматично управляти об'ємом і типом обчислювальних ресурсів, скоротити втрату часу на створення і організацію середовища розробки. У відкритому доступі Yandex DataSphere буде з 1 жовтня.
Чому це актуально?
Глобальні витрати компаній на штучнийінтелект за прогнозами IDC подвояться протягом наступних чотирьох років з 50 млрд доларів в 2020 році до 110 млрд в 2024 році. Витрати російських компаній на ІІ склали за підсумками 2019 року 172 млн доларів з прогнозом зростання на 30% щорічно. Розробки на базі машинного навчання вже активно застосовують багато російських компаній. Наприклад, в медицині для створення рішень аналізу знімків, в ритейлі для розробки рекомендаційних систем.
Методи машинного навчання стають все більшпопулярним інструментом для бізнесу в усьому світі. Але для багатьох компаній він все ще недоступний через високий поріг входу і вартості необхідних обчислювальних ресурсів. Для вирішення цих завдань ми створили DataSphere, де ви можете отримати готову ML-середу одним натисканням кнопки. У ньому доступні різні види обчислювальних ресурсів - від класичних потужностей до GPU і розподілених обчислень, а тарифікація відбувається тільки за фактично спожиті серверні потужності під час виконання ваших завдань.
Олексій Башкеев, керівник платформи Yandex.Cloud
Що нового з'явиться у Yandex.Cloud?
- Технологія безсерверних обчислень розробки моделей машинного навчання.
Технологія автоматизує управління ресурсами тадозволяє досягти значної економії. У DataSphere під час редагування та перегляду коду не використовуються обчислювальні ресурси CPU або GPU, віртуальна машина потрібного типу підключається тільки на час безпосередніх розрахунків (навчання моделей, запуск, інші обчислення).
В результаті користувач платить лише зареально спожитий обчислювальний ресурс. Час редагування та перегляду коду робота випадково не вимкненої віртуальної машини не тарифікується. За результатами тестування DataSphere, в якому взяли участь 200 користувачів з різних галузей, час простою обчислювальних потужностей при розробці машинного навчання становить 50-70%. При використанні продукту цей час не тарифікуватиметься.
- Реалізовано безшовне перемикання між різними типами обчислювальних ресурсів.
Це означає, що в рамках одного сценарію навчаннямоделі користувач може застосовувати різні типи віртуальних машин - економічні зі звичайними процесорами (CPU) і швидше з GPU (графічні прискорювачі). Прогрес навчання моделі у своїй збережеться. У більшості хмарних середовищ розробки машинного навчання розрахунок моделі навчання може проводитися тільки на машині одного типу.
- Збереження версій розрахунків моделі, включаючи дані, код та стан.
Ця функція робить процес розробки машинного навчання вигіднішим для бізнесу: досягнутий прогрес у навчанні не втрачається, його можна відтворити за необхідності.
Yandex SpeechKit Pro допоможе зробити голосових роботів розумнішими і людянішими
Платформа Yandex.Cloud представила спеціалізацію сервісу SpeechKit – Yandex SpeechKit Pro. Це програма для компаній-розробників, учасники якої отримають доступ до нових інструментів для створення роботів та голосових помічників, орієнтованих на роботу в конкретній галузі або компанії.
Такі роботи зможуть розпізнавати слова і командина певну тему з максимальним рівнем точності. Нові інструменти допоможуть істотно поліпшити сценарії обслуговування в банку, в медицині або в доставці. Також SpeechKit Pro дозволяє створювати індивідуальні риси голосового робота: інтонації і манеру спілкування.
Чому це актуально?
До 2020 року синтез та розпізнавання мови сталинайпопулярнішим ML-сервісом на платформі Yandex.Cloud. З початку року обсяг споживання SpeechKit збільшився на 120%. Кількість активних проектів перевищила 500. У Росії вже сформувалася екосистема розробників та інтеграторів рішень, які на замовлення компаній з різних сфер створюють та впроваджують голосових роботів для допомоги в обробці вхідних та вихідних дзвінків, системи голосового управління у додатках та терміналах обслуговування клієнтів, рішення щодо аналізу ефективності бізнес-комунікацій
Сьогодні це більше 20 компаній, більшість ізяких – постійні партнери платформи Yandex.Cloud. За даними партнерів, за останні два роки основними мотивами впровадження голосових роботів у російських компаніях стали скорочення витрат та швидке масштабування рішень.
Разом з нашими партнерами ми пройшли великийшлях, за два роки зробивши мовні технології з екзотичного сервісу прикладним інструментом бізнесу. Тепер ми робимо наступний крок і відкриваємо новий рівень мовних технологій Яндекса для партнерів. Компанії-розробники отримають доступ до розширених можливостей SpeechKit, а замовники рішень зможуть вибрати постачальника з найбільш підходящою експертизою.
Олексій Башкеев, керівник платформи Yandex.Cloud
Як рішення буде адаптуватися під різні завдання бізнесу?
Разом з інтересом бізнесу до можливостей мовнихтехнологій, виросли і вимоги до точності розпізнавання в конкретних сценаріях взаємодії голосових роботів і людини, можливості швидко адаптувати розробки під нові завдання.
Наприклад, для компанії зі сфери доставкипринципово важливо, щоб робот не плутався в оцінці значень фраз «Перенесіть замовлення» або «Внесіть замовлення», а для телекомунікаційних компаній - щоб без помилок відрізняв фрази «Включити послугу» і «Відключити послугу». Пріоритет бізнесу - точність саме в його сфері, можливість розвивати досвід застосування в конкретному бізнес-сценарії на основі об'єктивних показників.
Для вирішення цих завдань Yandex.Cloud надає партнерам додаткові інструменти розробки у рамках спеціалізації SpeechKit Pro. Тепер компанії-партнери зможуть користуватися розміткою аудіоданих, навчати індивідуальні моделі розпізнавання мови на даних замовників, контролювати метрики якості розпізнавання мови та адаптувати моделі розпізнавання до конкретного потоку даних.
спеціалізацію SpeechKit Pro вже отримали компанії Neuro.net, Just.ai, «Авіаційні технології зв'язку», Naumen, Robovoice і Voximplant.
Платформа Yandex.Cloud розширила екосистему сервісів з технологіями бессерверной обчислень
Платформа Yandex.Cloud розширила екосистему сервісів з технологіями бессерверной (serverless) обчислень власної розробки. До чотирьох сервісів, анонсованим в 2019 році, додалися ще два - Yandex API Gateway і база даних Yandex Database в режимі Serverless.
Що це означає?
Безсерверні обчислення позбавляють компанії відвитрат на вирішення завдань щодо виділення та налаштування хмарної інфраструктури: віртуальних машин, серверів хмарних баз даних та додатків. Ці завдання виконуються на стороні платформи Yandex.Cloud автоматично.
При використанні технологій безсервернихобчислень платформа автоматично визначає, наприклад, збільшення кількості звернень користувачів до додатку компанії та виділяє необхідні для стабільної роботи ресурси. Як тільки навантаження на додаток знижується, зменшується кількість задіяних для його роботи потужностей. Це дозволяє користувачам перейти на новий для російських хмар принцип оплати - тільки за фактичним споживанням сервісів - і досягти значної економії.
Yandex.Cloud - перша хмарна платформа в Росії, яка пропонує повноцінну екосистему бессерверной обчислень. Ми зібрали найнеобхідніші технології зберігання і обробки даних для вирішення актуальних завдань бізнесу і зробили їх доступними в бессерверной режимі. Бессерверной обчислення - це новий етап розвитку хмарних технологій у всьому світі. Це можливість знизити витрати до 90%, прискорити час створення і впровадження нових рішень, підвищити стійкість додатків в періоди пікових навантажень, звільнити компанії від завдань по масштабування сервісу.
Олексій Башкеев, керівник платформи Yandex.Cloud
Як це буде працювати?
Екосистема бессерверной технологій Yandex.Cloud тепер включає в себе шість сервісів: Yandex Object Storage-універсальне масштабоване рішення длязберігання даних; API Gateway - сервіс для створення та управління API; запуск коду у вигляді функцій - Yandex Cloud Functions; відмовостійку систему управління базами даних - Yandex Database;універсальне масштабоване рішення для обміну повідомленнями між програмами - Yandex Message Queue та сервіс інтернету речей Yandex IoT Core.
На всі послуги екосистеми безсерверних обчисленьYandex.Cloud протягом першого року (до жовтня 2021-го) діють спеціальні тарифи, які дозволяють користувачам безкоштовно створювати та розміщувати свої сервіси, що не перевищують певного рівня навантаження.
Читати також
В епоху екосистем: як ІТ-гіганти перетворюються в інтерфейси нашого побуту
Льодовик «Судного дня» виявився небезпечніше, ніж думали вчені. розповідаємо головне
GitHub замінив термін «майстер» на нейтральний аналог