Řešení pro vytváření hybridních cloudů dat
Představena společnost Gazprom Neft a platforma Yandex.Cloud
- Jak to bude fungovat?
Uživatel IT řešení dostává plnouhardwarový a softwarový komplex připravený k použití vytvořený na základě zařízení a technologií Yandex.Cloud. Komplex je instalován v datovém centru zákazníka a stává se součástí jeho vlastní platformy pro práci s daty. Další služby — prevence, konfigurace, aktualizace a další běžná údržba — jsou prováděny podle standardů Yandex.Cloud.
- Jak bude s novým produktem fungovat hardware společnosti?
Nový produkt IT se integruje s místnímisystémy pro ukládání a zpracování podnikových dat a veřejné cloudové služby. Výsledkem je hybridní cloud, který rozšiřuje možnosti digitální infrastruktury společnosti, umožňuje nastavit vyšší bezpečnostní standardy a zohlednit další specifika konkrétního uživatele.
Během kolaudace specialisté z GazpromuSpolečnost Neft ”se podílela na vývoji požadavků na hybridní řešení a ve skutečnosti se stala partnerem při navrhování své architektury. Naši klienti proto obdrží nejen kompletně hotový hardwarový a softwarový komplex založený na technologiích Yandex.Cloud, ale také službu na podporu a pravidelnou aktualizaci produktu s ohledem na vývoj naší veřejné platformy.
Oleg Koverznev, provozní ředitel Yandex.Cloud
- Co se plánuje dál?
Další rozvoj technologického partnerstvímezi platformou Gazprom Neft a Yandex.Cloud umožní testování nového digitálního řešení v různých scénářích průmyslového provozu. Gazprom Neft zvažuje možnost využití hybridního cloudu k vývoji svého výpočetního klastru a vývoj v oblasti umělé inteligence, které se používají k hledání nových zásob ropy a dálkovému řízení technologických operací pro jeho výrobu. Další kapacitu lze také použít ke zlepšení efektivity vyvažování zátěže na produkční IT infrastruktuře.
Každý rok se vytvářejí naše továrny a ropná poleasi 5 PB nových dat. Tyto informace nejen ukládáme, ale také se na základě jejich analýzy denně rozhodujeme, používáme je při modelování technologických procesů a trénování neuronových sítí. Zvláštnost práce ve vzdálených oblastech Sibiře a Arktidy vyžaduje velký distribuovaný výpočetní výkon, který by byl regulován z jednoho místa. Vytvoření hybridního cloudu tento problém řeší a poskytuje informační bezpečnost. Produkt se stane pohodlnou službou pro průmyslové společnosti a další zástupce trhu.
Andrey Belevtsev, ředitel digitální transformace ve společnosti Gazprom Neft
Čtyři nové služby pro ukládání a správu dat
Kategorie služeb pro skladování a správudata se v roce 2020 stala jednou z nejrychleji rostoucích oblastí platformy Yandex.Cloud a předstihla dynamiku růstu služeb tradičního lídra – pronájmu virtuálních strojů. Pomocí cloudových služeb správy dat řeší společnosti bez ohledu na velikost a oblast činnosti problémy, jako je ukládání a zpracování dat, analytika a vizualizace.
Největší poptávka je po službách spravovanýchdatabáze (Managed Databases) - od začátku roku 2020 se spotřeba těchto služeb na platformě Yandex.Cloud ztrojnásobila a počet databází vytvořených uživateli přesáhl 10 000.
- Co se stalo předtím?
Na naší platformě Yandex.Cloud byl již k dispozici kliknutím na téměř všechna nejoblíbenější řešení pro ukládání a zpracování dat na trhu. Letos jsme významně vylepšili scénáře migrace dat. K tomu jsme přidali dvě nové služby, které zjednodušují přenos dat mezi libovolnými zdroji - Managed Service for Kafka, a specializované řešení pro přenos dat mezi databázemi - Data Transfer. V segmentu univerzálních databází se cloud stal ještě dostupnějším pro podnikové uživatele - objevila se nová Managed Service pro SQL Server. Managed Service for Elastic Search, populární řešení, které podporuje scénáře fulltextového vyhledávání a analytické scénáře ad hoc, se objevilo v rodině analytických řešení.
Alexey Bashkeev, vedoucí platformy Yandex.Cloud
- Co přijde teď?
Od 23. září uživatelům Yandexu.Cloud má nyní přístup k nové službě Data Transfer, která umožňuje přenášet data mezi DBMS bez zastavení aplikací, bez ohledu na to, kde jsou nasazeny. Přenos dat vám pomůže rychle a bezpečně migrovat databáze z jiných cloudových platforem nebo místních databází do spravovaných databázových služeb Yandex.Cloud. Přenos dat můžete také použít k přesunu dat mezi různými databázemi na platformě a nastavení záloh.
Byla vydána také spravovaná služba.Kafka je systém pro streamování dat do analytických systémů. Byla přidána služba vyhledávání a analýzy dat ElasticSearch a jeden z nejpopulárnějších komerčních systémů správy databází na světě pro práci v ekosystému produktů Microsoft SQL Server. Na platformě Yandex.Cloud je nyní k dispozici 9 spravovaných databázových služeb, které pokrývají většinu scénářů pro ukládání a zpracování dat.
Nová sekce tržiště s daty pro obchodní analýzy
V Yandexu.Cloud má nyní sekci nazvanou „Geolayers“, která obsahuje anonymizovaná geoinformační data od servisních partnerů. Mohou zveřejňovat svůj obsah zdarma nebo za poplatek. Klienti Yandex.Cloud budou přistupovat k potřebným datům v rozhraní služby, analyzovat je pomocí Yandex DataLens a používat je pro obchodní účely. Uživatelé mohou například posoudit potenciální poptávku po produktech nebo vyhlídky na otevření prodejen, plán na rozšíření zásobovacích oblastí nebo marketingové kampaně.
Obsah od dvou partnerů je již dostupný v sekci -„Centrum pro prostorový výzkum“ na komerční bázi a Rosstat na bezplatném základě, stejně jako dva příklady geoanalytik od Yandex – „Publikum: zájmy a sociální demografie“ a „Organizace: nabídka a poptávka“. S DataLens mohou uživatelé kombinovat a analyzovat všechna přednastavení dat a přijímat obchodní rozhodnutí.
Snažíme se dát partnerům nejen technologii,a nástroje ke zpeněžení jakéhokoli intelektuálního produktu, který lze pomocí cloudu vyrobit nebo vylepšit. Samostatně bych chtěl poznamenat, že veškerý obsah sekce „Geolayers“ jsou výhradně agregovaná a anonymizovaná data, pro která není možné získat podrobnosti pro konkrétní zařízení nebo uživatele.
Oleg Koverznev, provozní ředitel Yandex.Cloud
Kdo vystupoval jako partner Yandex.Cloud?
Analytics vzniká ve spolupráci sRosstat. Dohoda o spolupráci zahrnuje společnou práci na přípravě různých balíčků otevřených dat. Důležité statistiky a další demografické informace jsou již k dispozici.
Rosstat vydává velképole dat dostupných každému uživateli. Díky spolupráci s Yandex.Cloud získají další hodnotu pro výzkumníky, analytiky a podniky. Nástroje platformy umožňují kombinovat zdroje, provádět rychlou analýzu, vytvářet vizuální vizualizace a ve výsledku provádět rychlá strategická rozhodnutí.
Pavel Smelov, zástupce vedoucího Rosstatu
Centrum pro prostorový výzkum zajišťovalogeografické informační údaje o obyvatelstvu, domácnostech v novostavbách a také indexy podnikatelského potenciálu pro různé oblasti. Kromě toho je zdarma k dispozici dashboard pro sledování síťového obchodu v Ruské federaci, který běží od roku 2015 a obsahuje index vývoje regionu z pohledu federálních maloobchodních hráčů.
Podle generálního ředitele Centra pro prostorVýzkum, analytické nástroje, indexy a odborné znalosti Denise Strukova v kombinaci s možnostmi DataLens jsou včasnou reakcí na požadavek trhů B2B a B2C. Jedná se o cloudovou verzi lokalizačních informací, která se v poslední době vyvíjí v zahraničí a nyní v Rusku.
Obecný přístup na tržiště Yandex.Cloud byl otevřen v roce 2019. Jedná se o platformu, kde mohou cloudoví klienti přímo získat přístup k podnikovým aplikacím od vývojářů a vydavatelů. Dnes je k dispozici 47 aplikací a služeb: od operačních systémů po nástroje pro zabezpečení informací pro genetickou analýzu.
Yandex.Cloud otevírá veřejný přístup k nové službě pro vývoj založený na strojovém učení DataSphere
Yandex.Cloud poskytuje obecný přístup ke službě pro vývojáře strojového učení Yandex DataSphere. Tato služba pomáhá společnostem a jednotlivým vývojářům snížit náklady na vytváření a provozování modelů strojového učení, automaticky spravovat množství a typ výpočetních zdrojů a omezit zbytečný čas vytvářením a organizováním vývojového prostředí. Yandex DataSphere bude otevřeně dostupný od 1. října.
Proč je to relevantní?
Globální výdaje společností na uměléPředpokládá se, že inteligence se v příštích čtyřech letech zdvojnásobí z 50 miliard USD v roce 2020 na 110 miliard USD v roce 2024. Na konci roku 2019 dosáhly výdaje ruských společností na umělou inteligenci 172 milionů USD s předpovědí 30% růstu ročně. Vývoj založený na strojovém učení již mnoho ruských společností aktivně využívá. Například v medicíně vytvářet řešení pro analýzu obrazů, v maloobchodě pro vývoj doporučovacích systémů.
Techniky strojového učení jsou stále více a vícepopulární obchodní nástroj po celém světě. Ale pro mnoho společností stále není k dispozici kvůli vysoké vstupní hranici a nákladům na požadované výpočetní zdroje. Abychom tyto problémy vyřešili, vytvořili jsme DataSphere, kde můžete jediným kliknutím získat hotové prostředí ML. K dispozici jsou různé typy výpočetních zdrojů - od klasických kapacit až po GPU a distribuované výpočty a fakturace probíhá pouze za skutečně spotřebovaný výkon serveru během provádění vašich úkolů.
Alexey Bashkeev, manažer Platformy Yandex.Cloud
Co je nového na Yandex.Cloud?
- Bezserverová výpočetní technologie pro vývoj modelů strojového učení.
Technologie automatizuje správu zdrojů aumožňuje výrazné úspory. V DataSphere se při editaci a prohlížení kódu nevyužívají výpočetní prostředky CPU nebo GPU, virtuální stroj požadovaného typu je připojen pouze po dobu samotných výpočtů (trénování modelu, spuštění, další výpočty).
Výsledkem je, že uživatel platí pouze zaskutečně spotřebované výpočetní zdroje. Čas na úpravu a kontrolu kódu, práce virtuálního stroje, který není náhodně vypnutý, není zpoplatněn. Podle testování DataSphere, do kterého se zapojilo 200 uživatelů z různých oborů, je výpadek výpočetního výkonu při vývoji strojového učení 50–70 %. Při používání produktu nebude tato doba účtována.
- Implementováno bezproblémové přepínání mezi různými typy výpočetních zdrojů.
To znamená, že v rámci jednoho tréninkového scénářemodel může uživatel používat různé typy virtuálních strojů – ekonomické s konvenčními procesory (CPU) a rychlejší s GPU (grafické akcelerátory). Průběh tréninku modelu zůstane stejný. Ve většině cloudových vývojových prostředí pro strojové učení lze model školení vypočítat pouze na jednom typu stroje.
- Uložte verze výpočtů modelu, včetně dat, kódu a stavů.
Tato funkce činí proces vývoje strojového učení ziskovějším pro podnikání: pokrok dosažený při školení se neztratí, v případě potřeby jej lze reprodukovat.
Yandex SpeechKit Pro pomůže, aby hlasové roboty byly chytřejší a lidštější
Platforma Yandex.Cloud představil specializaci služby SpeechKit – Yandex SpeechKit Pro. Jedná se o program pro vývojářské společnosti, jehož účastníci získají přístup k novým nástrojům pro tvorbu robotů a hlasových asistentů zaměřených na práci v konkrétním odvětví či firmě.
Tito roboti budou schopni rozpoznat slova a příkazy.na konkrétní téma s nejvyšší úrovní přesnosti. Nové nástroje pomohou dramaticky zlepšit scénáře služeb v bankovnictví, zdravotnictví a doručování. SpeechKit Pro vám také umožňuje vytvářet jednotlivé funkce hlasového robota: intonaci a způsob komunikace.
Proč je to relevantní?
Do roku 2020 se stala syntéza a rozpoznávání řečinejoblíbenější služba ML na platformě Yandex.Cloud. Od začátku roku vzrostla spotřeba SpeechKit o 120 %. Počet aktivních projektů přesáhl 500. V Rusku se již zformoval ekosystém vývojářů a integrátorů řešení, kteří na přání firem z různých oborů vytvářejí a implementují hlasové roboty pomáhající zpracovávat příchozí a odchozí hovory, hlasové ovládání systémy v aplikacích a terminálech zákaznických služeb a analytická řešení efektivnosti obchodní komunikace.
Dnes existuje více než 20 společností, většina z nichz nichž jsou pravidelnými partnery platformy Yandex.Cloud. Podle partnerů bylo v posledních dvou letech hlavními motivy pro zavádění hlasových robotů v ruských společnostech snižování nákladů a rychlé škálování řešení.
Spolu s našimi partnery jsme prošli skvělýmtak, že se z řečových technologií z exotické služby stal aplikovaný obchodní nástroj za dva roky. Nyní přijímáme další krok a otevíráme novou úroveň řečových technologií Yandex pro partnery. Vývojové společnosti budou mít přístup k pokročilým funkcím SpeechKit a zákazníci řešení si budou moci vybrat dodavatele s nejvhodnější odborností.
Alexey Bashkeev, vedoucí platformy Yandex.Cloud
Jak se řešení přizpůsobí různým obchodním úkolům?
Spolu s obchodním zájmem o možnosti řečitechnologie, požadavky na přesnost rozpoznávání ve specifických scénářích interakce mezi hlasovými roboty a lidmi také vzrostly, schopnost rychle přizpůsobit vývoj novým úkolům.
Například pro přepravní společnostje zásadně důležité, aby se robot nenechal zmást při hodnocení významu frází „Převést objednávku“ nebo „Zadejte objednávku“ a pro telekomunikační společnosti - aby bez chyb rozlišoval fráze „Povolit službu“ a „Zakázat službu“. Prioritou podnikání je přesnost v jeho oblasti, schopnost rozvíjet zkušenosti s aplikací v konkrétním obchodním scénáři na základě objektivních ukazatelů.
Chcete-li tyto problémy vyřešit, Yandex.Cloud poskytuje partnerům další vývojové nástroje v rámci specializace SpeechKit Pro. Nyní budou partnerské společnosti moci používat značkování zvukových dat, trénovat jednotlivé modely rozpoznávání řeči pomocí zákaznických dat, sledovat metriky kvality rozpoznávání řeči a přizpůsobovat modely rozpoznávání konkrétnímu datovému toku.
Specializace SpeechKit Pro již obdrželi společnosti Neuro.net, Just.ai, Aviation Communication Technologies, Naumen, Robovoice a Voximplant.
Platforma Yandex.Cloud rozšířila ekosystém služeb o výpočetní technologie bez serveru
Yandex.Cloud rozšířil svůj ekosystém služeb o proprietární výpočetní technologie bez serveru. Ke čtyřem službám oznámeným v roce 2019 byly přidány další dvě služby - Yandex API Gateway a Yandex Database v režimu bez serveru.
Co to znamená?
Bezserverové výpočty osvobozují společnosti odnáklady na řešení problémů s alokací a konfigurací cloudové infrastruktury: virtuální stroje, cloudové databázové servery a aplikace. Tyto úlohy se nyní provádějí automaticky na straně platformy Yandex.Cloud.
Při použití bezserverových technologiíVýpočetní platforma automaticky detekuje například nárůst počtu uživatelských požadavků na firemní aplikaci a alokuje zdroje nutné pro stabilní provoz. Jakmile se zatížení aplikace sníží, sníží se množství energie použité k jejímu provozu. Uživatelé tak mohou přejít na nový platební princip pro ruské cloudy – pouze na základě skutečné spotřeby služeb – a dosáhnout tak výrazných úspor.
Yandex.Cloud je první cloudová platforma v Rusku, která nabízí kompletní výpočetní ekosystém bez serveru. Shromáždili jsme nejdůležitější technologie pro ukládání a zpracování dat pro řešení naléhavých obchodních problémů a zpřístupnili je v režimu bez serveru. Výpočty bez serveru jsou novou etapou ve vývoji cloudových technologií po celém světě. Toto je příležitost snížit náklady až o 90%, zrychlit čas na vytváření a implementaci nových řešení, zvýšit odolnost aplikací během období špičkového zatížení, osvobodit společnosti od úkolů škálovat službu.
Alexey Bashkeev, vedoucí platformy Yandex.Cloud
Jak to bude fungovat?
Ekologický technologický ekosystém Yandex.Cloud nyní zahrnuje šest služeb: Yandex Object Storage—univerzální škálovatelné řešení prodatové úložiště; API Gateway - služba pro vytváření a správu API; běžící kód ve formě funkcí - Yandex Cloud Functions; systém správy databází odolný proti chybám - databáze Yandex;univerzální škálovatelné řešení pro výměnu zpráv mezi aplikacemi – Yandex Message Queue a služba internetu věcí Yandex IoT Core.
Pro všechny služby bezserverového výpočetního ekosystémuBěhem prvního roku (do října 2021) má Yandex.Cloud speciální tarify, které uživatelům umožňují vytvářet a hostovat své služby zdarma, nepřesahující určitou úroveň zatížení.
Přečtěte si také
V éře ekosystémů: jak se obři IT mění v rozhraní našeho každodenního života
Ledovec Doomsday se ukázal být nebezpečnějším, než si vědci mysleli. Říkáme hlavní věc
GitHub nahradil termín „master“ neutrálním ekvivalentem