Yandex Scale 2020: от пазара за данни до хибридни облаци

Решение за създаване на хибридни облаци с данни

Представени са компанията Газпром Нефт и платформата Yandex.Cloud

решение за създаване на хибридни облаци от данни.С негова помощ държавните организации и частните компании ще могат да внедряват технологиите Yandex.Cloud, дори ако са обект на технически или регулаторни ограничения за използването на публични услуги за съхранение и обработка на данни.

  • Как ще работи?

Потребителят на ИТ решението получава пълноготов за използване хардуерен и софтуерен комплекс, създаден на базата на оборудване и технологии Yandex.Cloud. Комплексът се инсталира в центъра за данни на клиента и става част от неговата собствена платформа за работа с данни. Допълнителни услуги — профилактика, конфигуриране, актуализиране и друга рутинна поддръжка— се извършват съгласно стандартите на Yandex.Cloud.

  • Как ще работи хардуерът на компанията с новия продукт?

Новият ИТ продукт се интегрира с местнитекорпоративни системи за съхранение и обработка на данни и обществени облачни услуги. Резултатът е хибриден облак, който разширява възможностите на дигиталната инфраструктура на компанията, позволява ви да зададете повишени стандарти за сигурност и да вземете предвид други специфики на конкретен потребител.

По време на апробацията, специалисти от Газпромнефт ”участва в разработването на изискванията за хибридното решение и всъщност стана партньор при проектирането на неговата архитектура. Следователно нашите клиенти ще получат не само напълно готов за използване хардуерен и софтуерен комплекс, базиран на технологиите Yandex.Cloud, но и услуга за поддръжка и редовно актуализиране на продукта, като се вземе предвид развитието на нашата публична платформа.

Олег Коверзнев, главен оперативен директор, Yandex.Cloud

  • Какво следва?

По-нататъшно развитие на технологичното партньорствомежду Gazprom Neft и платформата Yandex.Cloud ще позволи тестване на ново цифрово решение в различни сценарии на промишлена експлоатация. "Газпром нефть" обмисля възможността да използва хибриден облак за разработване на своя изчислителен клъстер и разработки в областта на изкуствения интелект, които се използват за търсене на нови запаси от нефт и дистанционно управление на технологични операции за неговото производство. Също така, допълнителен капацитет може да се използва за подобряване на ефективността на балансиране на натоварванията в производствената ИТ инфраструктура.

Всяка година нашите фабрики и петролни полета създаватоколо 5 PB нови данни. Ние не само съхраняваме тази информация, но ежедневно вземаме решения въз основа на нейния анализ, използваме я при моделиране на технологични процеси и обучение на невронни мрежи. Особеността на работата в отдалечени региони на Сибир и Арктика изисква голяма разпределена изчислителна мощност, която ще се регулира от едно място. Създаването на хибриден облак решава този проблем и осигурява информационна сигурност. Продуктът ще се превърне в удобна услуга за индустриални компании и други представители на пазара.

Андрей Белевцев, директор дигитална трансформация в Газпром Нефт

Четири нови услуги за съхранение и управление на данни

Категория услуги за съхранение и управлениеданните се превърнаха в една от най-бързо развиващите се области на платформата Yandex.Cloud през 2020 г., изпреварвайки динамиката на растеж на услугите на традиционния лидер - наемането на виртуална машина. С помощта на облачните услуги за управление на данни компаниите, независимо от размера и сферата на дейност, решават проблеми като съхранение и обработка на данни, анализи и визуализация.

Услугите на управляванибази данни (Managed Databases) - от началото на 2020 г. потреблението на тези услуги в платформата Yandex.Cloud се е утроило и броят на базите данни, създадени от потребителите, е надхвърлил 10 000.

  • Какво се е случило преди?

В нашата платформа Yandex.Cloud вече беше достъпен, като щракна върху почти всички най-популярни решения за съхранение и обработка на данни на пазара. Тази година направихме значителни подобрения в нашите сценарии за миграция на данни. За тази цел добавихме две нови услуги, които опростяват прехвърлянето на данни между всякакви източници - управлявана услуга за Kafka, и специализирано решение за прехвърляне на данни между базите данни - трансфер на данни. В сегмента на базите данни с общо предназначение облакът стана още по-достъпен за корпоративни потребители - появи се нова управлявана услуга за SQL Server. Управлявана услуга за еластично търсене, популярно решение, което поддържа сценарии за пълнотекстово търсене и ad hoc анализи, се появи в семейството аналитични решения.

Алексей Башкеев, ръководител на платформата Yandex.Cloud

  • Какво предстои сега?

От 23 септември за потребителите на Yandex.Cloud вече има достъп до новата услуга за пренос на данни, която ви позволява да прехвърляте данни между СУБД, без да спирате приложения, независимо къде са разположени. Прехвърлянето на данни ви помага бързо и безопасно да мигрирате бази данни от други облачни платформи или локални бази данни към управлявани услуги за бази данни Yandex.Cloud. Можете също така да използвате Data Transfer, за да премествате данни между различни бази данни на платформата и да настройвате резервни копия.

Също така беше пусната услугата Managed.Kafka е система за поточно предаване на данни към аналитични системи. Добавена е услугата за търсене и анализ на данни ElasticSearch и една от най-популярните търговски системи за управление на бази данни в света за работа в екосистемата на продуктите на Microsoft SQL Server. Общо на платформата Yandex.Cloud вече са достъпни 9 услуги за управлявана база данни, обхващащи повечето сценарии за съхранение и обработка на данни.

Нов пазарен раздел с данни за бизнес анализи

В Yandex.Cloud вече има раздел, наречен „Геослоеве“, който съдържа анонимизирани геоинформационни данни от сервизни партньори. Те могат да публикуват съдържанието си безплатно или срещу заплащане. Клиентите на Yandex.Cloud ще получат достъп до необходимите данни в интерфейса на услугата, ще ги анализират с помощта на Yandex DataLens и ще ги използват за бизнес цели. Например потребителите могат да оценят потенциалното търсене на продукти или перспективи за отваряне на търговски обекти, да планират разширяване на веригата на доставки или да планират маркетингови кампании.

В раздела вече е налично съдържание от двама партньори -„Център за пространствени изследвания“ на търговска основа и Росстат на безплатна основа, както и два примера за геоаналитика от Yandex - „Аудитория: интереси и социална демография“ и „Организации: търсене и предлагане“. С DataLens потребителите могат да комбинират и анализират всички предварително зададени данни, за да вземат бизнес решения.

Стремим се да дадем на партньорите не само технологии,и инструменти за осигуряване на приходи от всеки интелектуален продукт, който може да бъде направен или подобрен с помощта на облака. Отделно бих искал да отбележа, че цялото съдържание на раздела "Геослоеве" е изключително обобщени и анонимни данни, за които е невъзможно да се получат подробности за конкретно устройство или потребител.

Олег Коверзнев, главен оперативен директор Yandex.Cloud

Кой действа като партньор на Yandex.Cloud?

Анализът е създаден в сътрудничество сРосстат. Споразумението за сътрудничество включва съвместна работа по изготвяне на пакети от различни отворени данни. Жизненоважните статистики и друга демографска информация вече са налични.

Росстат публикува големимасиви от данни, достъпни за всеки потребител. Благодарение на сътрудничеството с Yandex.Cloud, те ще придобият допълнителна стойност за изследователи, анализатори и фирми. Инструментите на платформата ви позволяват да комбинирате източници, да правите бърз анализ, да изграждате визуални визуализации и в резултат да вземате бързи стратегически решения.

Павел Смелов, заместник-ръководител на Росстат

Осигурен Център за пространствени изследваниягеографски информационни данни за населението, домакинствата в новопостроени сгради, както и показатели за бизнес потенциал за различни области. Освен това е достъпно безплатно табло за наблюдение на мрежовата търговия в Руската федерация, което работи от 2015 г. и съдържа индекс на развитието на региона от гледна точка на федералните играчи на дребно.

Според генералния директор на Центъра за пространственоИзследванията, аналитичните инструменти, индекси и експертиза на Денис Струков, съчетани с възможностите на DataLens, са своевременен отговор на заявката на B2B и B2C пазарите. Това, каза той, е облачна версия на разузнаването за местоположение, която наскоро се развива в чужбина и сега в Русия.

Общ достъп до пазара на Yandex.Cloud отвори врати през 2019 г. Това е платформа, където облачните клиенти могат директно да получават достъп до бизнес приложения от разработчици и издатели. Днес са налични 47 приложения и услуги: от операционни системи до инструменти за информационна сигурност за генетичен анализ.

Yandex.Cloud отваря публичен достъп до нова услуга за разработка, базирана на машинно обучение DataSphere

Yandex.Cloud предоставя общ достъп до услугата за разработчиците на машинно обучение Yandex DataSphere. Услугата помага на компаниите и индивидуалните разработчици да намалят разходите за създаване и експлоатация на модели за машинно обучение, автоматично да управляват количеството и вида на изчислителните ресурси и да намалят загубеното време за създаване и организиране на среда за разработка. Yandex DataSphere ще бъде открито достъпен от 1 октомври.

Защо това е от значение?

Глобалните разходи на компаниите за изкуствениинтелигентността се очаква да се удвои през следващите четири години от 50 млрд. долара през 2020 г. на 110 млрд. долара през 2024 г. В края на 2019 г. разходите на руските компании за AI възлизат на 172 милиона долара с прогноза за 30% ръст годишно. Много руски компании вече активно използват решения за машинно обучение. Например в медицината за създаване на решения за анализ на изображения, в търговията на дребно за разработване на препоръчителни системи.

Техниките за машинно обучение стават все повече и повечепопулярен бизнес инструмент по целия свят. Но за много компании той все още не е достъпен поради високия праг на влизане и цената на необходимите изчислителни ресурси. За да разрешим тези проблеми, създадохме DataSphere, където можете да получите готова ML среда с едно щракване на бутон. В него са налични различни видове изчислителни ресурси - от класически капацитети до графични процесори и разпределени изчисления, а таксуването се извършва само за реално консумираната мощност на сървъра при изпълнение на вашите задачи.

Алексей Башкеев, гл Yandex.Cloud платформи

Какво е новото с Yandex.Cloud?

  • Компютърна технология без сървър за разработване на модели за машинно обучение.

Технологията автоматизира управлението на ресурсите ипозволява значителни спестявания. В DataSphere, когато редактирате и преглеждате код, изчислителните ресурси на CPU или GPU не се използват; виртуална машина от необходимия тип е свързана само за времетраенето на действителните изчисления (обучение на модела, стартиране, други изчисления).

В резултат на това потребителят плаща само задействително изразходван изчислителен ресурс. Времето за редактиране и преглед на кода, работата на виртуална машина, която не е изключена случайно, не се таксува. Според тестването на DataSphere, което включва 200 потребители от различни области, времето на престой на изчислителната мощност при разработване на машинно обучение е 50-70%. При използване на продукта това време не се таксува.

  • Реализирано безпроблемно превключване между различни типове изчислителни ресурси.

Това означава, че в рамките на един сценарий на обучениемодел, потребителят може да използва различни видове виртуални машини - икономични с конвенционалните процесори (CPU) и по-бързи с GPU (графични ускорители). Напредъкът в обучението на модела ще остане същият. В повечето облачно базирани среди за разработка на машинно обучение моделът на обучение може да бъде изчислен само на един тип машина.

  • Запазете версии на моделни изчисления, включително данни, код и състояния.

Тази функция прави процеса на разработване на машинно обучение по-изгоден за бизнеса: напредъкът, постигнат в обучението, не се губи, той може да бъде възпроизведен, ако е необходимо.

Yandex SpeechKit Pro ще ви помогне да направите гласовите роботи по-умни и по-човешки

Яндекс платформа.Cloud представи специализация на услугата SpeechKit - Yandex SpeechKit Pro. Това е програма за компании за развитие, чиито участници ще имат достъп до нови инструменти за създаване на роботи и гласови асистенти, фокусирани върху работата в конкретна индустрия или компания.

Такива роботи ще могат да разпознават думи и командипо конкретна тема с най-високо ниво на точност. Новите инструменти ще помогнат драстично да подобрят сценариите за услуги в секторите на банките, здравеопазването и доставките. SpeechKit Pro също ви позволява да създавате индивидуални функции на гласов робот: интонация и начин на комуникация.

Защо това е от значение?

До 2020 г. синтезът и разпознаването на речта станаханай-популярната ML услуга на платформата Yandex.Cloud. От началото на годината потреблението на SpeechKit е нараснало със 120%. Броят на активните проекти надхвърли 500. В Русия вече се формира екосистема от разработчици и интегратори на решения, които по искане на компании от различни области създават и внедряват гласови роботи, за да помогнат за обработката на входящи и изходящи повиквания, гласов контрол системи в приложенията и терминалите за обслужване на клиенти и решения за анализ на ефективността на бизнес комуникациите.

Днес има повече от 20 компании, повечето от коитоот които са редовни партньори на платформата Yandex.Cloud. Според партньорите през последните две години основните мотиви за въвеждането на гласови роботи в руските компании са били намаляването на разходите и бързото мащабиране на решенията.

Заедно с нашите партньори преминахме страхотноначин, като превърнете речевите технологии от екзотична услуга в приложен бизнес инструмент за две години. Сега правим следващата стъпка и отваряме ново ниво на речевите технологии на Yandex за партньори. Компаниите за разработки ще имат достъп до усъвършенстваните функции на SpeechKit, а клиентите на решения ще могат да избират доставчика с най-подходящия опит.

Алексей Башкеев, ръководител на платформата Yandex.Cloud

Как ще се адаптира решението към различни бизнес задачи?

Заедно с интереса на бизнеса към възможностите на речтатехнологии, изискванията за точност на разпознаване в специфични сценарии на взаимодействие между гласовите роботи и хората също са нараснали, способността за бързо адаптиране на разработките към нови задачи.

Например за корабоплавателна компанияфундаментално е важно роботът да не се бърка при оценяването на значението на фразите „Прехвърляне на поръчката“ или „Въвеждане на поръчката“, а за телекомуникационните компании - че прави разлика между фразите „Активиране на услугата“ и „Деактивиране на услугата“ без грешки. Приоритет на даден бизнес е точността в неговата област, способността да се развие опитът на приложение в конкретен бизнес сценарий, базиран на обективни показатели.

За да разреши тези проблеми, Yandex.Cloud предоставя на партньорите допълнителни инструменти за разработка в рамките на специализацията SpeechKit Pro. Сега партньорските компании ще могат да използват маркиране на аудио данни, да обучават индивидуални модели за разпознаване на реч, използвайки клиентски данни, да наблюдават показателите за качество на разпознаването на реч и да адаптират моделите за разпознаване към конкретен поток от данни.

Специализация SpeechKit Pro вече е получен от Neuro.net, Just.ai, Aviation Communication Technologies, Naumen, Robovoice и Voximplant.

Платформата Yandex.Cloud разшири екосистемата на услугите с безсървърни изчислителни технологии

Yandex.Cloud разшири своята екосистема за услуги с патентовани безсървърни изчислителни технологии. Към четирите услуги, обявени през 2019 г., бяха добавени още две - Yandex API Gateway и Yandex Database в безсървърен режим.

Какво означава това?

Компютрите без сървър освобождават компаниите отразходи за решаване на проблеми с разпределяне и конфигуриране на облачна инфраструктура: виртуални машини, сървъри на облачни бази данни и приложения. Тези задачи вече се изпълняват автоматично от страна на платформата Yandex.Cloud.

При използване на безсървърни технологииКомпютърната платформа автоматично открива, например, увеличаване на броя на потребителските заявки към приложението на компанията и разпределя ресурсите, необходими за стабилна работа. Веднага след като натоварването на приложението намалее, количеството енергия, използвано за работата му, намалява. Това позволява на потребителите да преминат към нов принцип на плащане за руски облаци - само въз основа на действителното потребление на услуги - и да постигнат значителни спестявания.

Yandex.Cloud е първата облачна платформа в Русия, която предлага цялостна безсървърна изчислителна екосистема. Събрахме най-необходимите технологии за съхранение и обработка на данни за решаване на неотложни бизнес проблеми и ги предоставихме в безсървърен режим. Безсървърните изчисления са следващият етап в изчисленията в облак по целия свят. Това е възможност за намаляване на разходите с до 90%, ускоряване на времето за създаване и внедряване на нови решения, повишаване на устойчивостта на приложенията в периоди на пикови натоварвания, освобождаване на фирмите от задачите за мащабиране на услугата.

Алексей Башкеев, ръководител на платформата Yandex.Cloud

Как ще работи?

Безсървърната технологична екосистема Yandex.Cloud вече включва шест услуги: Yandex Object Storageуниверсално мащабируемо решение захранилище за данни; API Gateway – услуга за създаване и управление на API; работещ код под формата на функции - Yandex Cloud Functions; отказоустойчива система за управление на бази данни - Yandex Database;универсално мащабируемо решение за обмен на съобщения между приложения - Yandex Message Queue и услугата Internet of Things Yandex IoT Core.

За всички услуги на компютърна екосистема без сървърПрез първата година (до октомври 2021 г.) Yandex.Cloud има специални тарифи, които позволяват на потребителите да създават и хостват своите услуги безплатно, без да надвишават определено ниво на натоварване.

Прочетете също

В ерата на екосистемите: как ИТ гигантите се превръщат в интерфейси на нашето ежедневие

Ледникът на Страшния съд се оказа по-опасен, отколкото учените смятаха. Казваме основното

GitHub замени термина "master" с неутрален еквивалент