Yandex Scale 2020: dal mercato dei dati ai cloud ibridi

Soluzione per la creazione di cloud di dati ibridi

Presentata la società Gazprom Neft e la piattaforma Yandex.Cloud

soluzione per la creazione di cloud di dati ibridi.Con il suo aiuto, le organizzazioni governative e le aziende private saranno in grado di implementare le tecnologie Yandex.Cloud, anche se sono soggette a restrizioni tecniche o normative sull'uso dei servizi pubblici di archiviazione ed elaborazione dei dati.

  • Come funzionerà?

L'utente della soluzione IT riceve l'intero importoun complesso hardware e software pronto all'uso creato sulla base delle apparecchiature e delle tecnologie Yandex.Cloud. Il complesso viene installato nel data center del cliente e diventa parte della sua piattaforma per lavorare con i dati. Ulteriori servizi (prevenzione, configurazione, aggiornamento e altra manutenzione ordinaria) vengono eseguiti secondo gli standard Yandex.Cloud.

  • Come funzionerà l'hardware dell'azienda con il nuovo prodotto?

Il nuovo prodotto IT si integra con il localesistemi di archiviazione ed elaborazione dati aziendali e servizi di cloud pubblico. Il risultato è un cloud ibrido che espande le capacità dell'infrastruttura digitale dell'azienda, consente di impostare standard di sicurezza più elevati e tenere conto di altre specificità di uno specifico utente.

Durante l'approvazione, specialisti di Gazpromoil "ha partecipato allo sviluppo dei requisiti per la soluzione ibrida ed è diventato di fatto un partner nella progettazione della sua architettura. Pertanto, i nostri clienti riceveranno non solo un complesso hardware e software completamente pronto per l'uso basato sulle tecnologie Yandex.Cloud, ma anche un servizio per supportare e aggiornare regolarmente il prodotto, tenendo conto dello sviluppo della nostra piattaforma pubblica.

Oleg Koverznev, Chief Operating Officer, Yandex.Cloud

  • Qual è il prossimo?

Ulteriore sviluppo della partnership tecnologicatra Gazprom Neft e la piattaforma Yandex.Cloud consentirà di testare una nuova soluzione digitale in vari scenari operativi industriali. Gazprom Neft sta valutando la possibilità di utilizzare un cloud ibrido per sviluppare il proprio cluster di calcolo e gli sviluppi nel campo dell'intelligenza artificiale, che vengono utilizzati per la ricerca di nuove riserve petrolifere e il controllo remoto delle operazioni tecnologiche per la sua produzione. Inoltre, è possibile utilizzare capacità aggiuntiva per migliorare l'efficienza del bilanciamento dei carichi di lavoro sull'infrastruttura IT di produzione.

Ogni anno le nostre fabbriche e i nostri giacimenti petroliferi creanocirca 5 PB di nuovi dati. Non solo archiviamo queste informazioni, ma prendiamo decisioni quotidianamente sulla base della loro analisi, le usiamo per modellare processi tecnologici e addestrare reti neurali. La particolarità di lavorare nelle regioni remote della Siberia e dell'Artico richiede una grande potenza di calcolo distribuita, che sarebbe regolata da un unico luogo. La creazione di un cloud ibrido risolve questo problema e fornisce la sicurezza delle informazioni. Il prodotto diventerà un comodo servizio per le aziende industriali e altri rappresentanti del mercato.

Andrey Belevtsev, direttore della trasformazione digitale di Gazprom Neft

Quattro nuovi servizi per l'archiviazione e la gestione dei dati

Categoria di servizi di stoccaggio e gestionei dati sono diventati una delle aree in più rapida crescita della piattaforma Yandex.Cloud nel 2020, superando le dinamiche di crescita dei servizi del leader tradizionale: il noleggio di macchine virtuali. Con l'aiuto dei servizi di gestione dei dati nel cloud, le aziende, indipendentemente dalle dimensioni e dal campo di attività, risolvono problemi come l'archiviazione e l'elaborazione dei dati, l'analisi e la visualizzazione.

La maggiore richiesta è per i servizi di manageddatabase (database gestiti): dall'inizio del 2020, il consumo di questi servizi sulla piattaforma Yandex.Cloud è triplicato e il numero di database creati dagli utenti ha superato 10.000.

  • Cosa è successo prima?

Nella nostra piattaforma Yandex.Il cloud era già disponibile facendo clic su quasi tutte le soluzioni di archiviazione ed elaborazione dati più diffuse sul mercato. Quest'anno abbiamo apportato miglioramenti significativi ai nostri scenari di migrazione dei dati. Per fare ciò, abbiamo aggiunto due nuovi servizi che semplificano il trasferimento di dati tra qualsiasi origine - Managed Service for Kafka, e una soluzione specializzata per il trasferimento di dati tra database - Data Transfer. Nel segmento dei database generici, il cloud è diventato ancora più accessibile per gli utenti aziendali: è apparso un nuovo servizio, Managed Service for SQL Server. Managed Service for Elastic Search, una soluzione popolare che supporta la ricerca full-text e scenari di analisi ad hoc, è apparso nella famiglia di soluzioni di analisi.

Alexey Bashkeev, capo della piattaforma Yandex.Cloud

  • Cosa sta succedendo adesso?

Dal 23 settembre agli utenti Yandex.Cloud ha ora accesso al nuovo servizio Data Transfer, che consente di trasferire dati tra DBMS senza interrompere le applicazioni, indipendentemente da dove siano distribuite. Data Transfer ti aiuta a migrare in modo rapido e sicuro i database da altre piattaforme cloud o database locali ai servizi di database gestiti Yandex.Cloud. Puoi anche utilizzare Data Transfer per spostare i dati tra diversi database sulla piattaforma e impostare backup.

Inoltre, è stato rilasciato il servizio gestito.Kafka è un sistema per lo streaming di dati a sistemi analitici. Si aggiungono il servizio di ricerca e analisi dati ElasticSearch e uno dei più diffusi sistemi di gestione di database commerciali al mondo per lavorare nell'ecosistema dei prodotti Microsoft SQL Server. In totale, sono ora disponibili 9 servizi di database gestiti sulla piattaforma Yandex.Cloud, che coprono la maggior parte degli scenari per l'archiviazione e l'elaborazione dei dati.

Nuova sezione del marketplace con dati per l'analisi aziendale

Nel file Yandex.Cloud ha ora una sezione chiamata "Geolayers", che contiene dati di geoinformazione anonimizzati dai partner di servizio. Possono pubblicare i loro contenuti gratuitamente oa pagamento. I client Yandex.Cloud avranno accesso ai dati necessari nell'interfaccia del servizio, li analizzeranno utilizzando Yandex DataLens e li utilizzeranno per scopi aziendali. Ad esempio, gli utenti possono valutare la potenziale domanda di prodotti o le prospettive di apertura di punti vendita, pianificare l'espansione delle aree di fornitura o campagne di marketing.

I contenuti di due partner sono già disponibili nella sezione -"Centro per la ricerca spaziale" su base commerciale e Rosstat su base gratuita, oltre a due esempi di geoanalitica di Yandex: "Pubblico: interessi e dati demografici sociali" e "Organizzazioni: domanda e offerta". Con DataLens, gli utenti possono combinare e analizzare tutti i dati preimpostati per prendere decisioni aziendali.

Ci sforziamo di offrire ai partner non solo tecnologia,e strumenti per monetizzare qualsiasi prodotto intellettuale che può essere realizzato o migliorato utilizzando il cloud. Separatamente, noto che tutto il contenuto della sezione "Geolayers" è esclusivamente dati aggregati e anonimizzati, per i quali è impossibile ottenere dettagli per uno specifico dispositivo o utente.

Oleg Koverznev, Direttore operativo Yandex.Cloud

Chi ha agito come partner di Yandex.Cloud?

Analytics è creato in collaborazione conRosstat. L'accordo di cooperazione prevede un lavoro congiunto sulla preparazione di diversi pacchetti di dati aperti. Le statistiche vitali e altre informazioni demografiche sono già disponibili.

Rosstat pubblica in grandematrici di dati disponibili a qualsiasi utente. Grazie alla collaborazione con Yandex.Cloud, guadagneranno ulteriore valore per ricercatori, analisti e aziende. Gli strumenti della piattaforma consentono di combinare fonti, effettuare analisi rapide, creare visualizzazioni visive e, di conseguenza, prendere decisioni strategiche rapide.

Pavel Smelov, vicedirettore di Rosstat

Centro per la ricerca spaziale fornitodati di informazione geografica sulla popolazione, sulle famiglie nelle nuove costruzioni, nonché indici di potenziale commerciale per varie aree. Inoltre, è disponibile gratuitamente un dashboard per il monitoraggio del commercio di rete nella Federazione Russa, attivo dal 2015, che contiene un indice dello sviluppo della regione dal punto di vista degli operatori federali del commercio al dettaglio.

Secondo il direttore generale del Center for SpatialLa ricerca, gli strumenti analitici, gli indici e le competenze di Denis Strukov, combinati con le capacità di DataLens, è una risposta tempestiva alla richiesta dei mercati B2B e B2C. Questa, secondo lui, è una versione cloud dell'intelligence sulla posizione, che si è sviluppata di recente all'estero e ora in Russia.

Accesso generale al mercato Yandex.Cloud è stato aperto nel 2019. Si tratta di una piattaforma in cui i clienti Cloud possono ricevere direttamente l'accesso alle applicazioni aziendali da sviluppatori ed editori. Oggi sono disponibili 47 applicazioni e servizi: dai sistemi operativi agli strumenti di sicurezza informatica per l'analisi genetica.

Yandex.Cloud apre l'accesso pubblico a un nuovo servizio per lo sviluppo basato sull'apprendimento automatico DataSphere

Yandex.Cloud fornisce l'accesso generale al servizio per gli sviluppatori di machine learning Yandex DataSphere. Il servizio aiuta le aziende e i singoli sviluppatori a ridurre i costi di creazione e gestione di modelli di apprendimento automatico, gestire automaticamente la quantità e il tipo di risorse di elaborazione e ridurre il tempo sprecato nella creazione e nell'organizzazione di un ambiente di sviluppo. Yandex DataSphere sarà apertamente disponibile dal 1 ° ottobre.

Perché è rilevante?

Spesa globale delle aziende per l'artificialesi prevede che l'intelligence raddoppierà nei prossimi quattro anni da 50 miliardi di dollari nel 2020 a 110 miliardi di dollari nel 2024. Alla fine del 2019, la spesa delle aziende russe per l'IA ammontava a 172 milioni di dollari con una previsione di crescita del 30% all'anno. Gli sviluppi basati sull'apprendimento automatico sono già utilizzati attivamente da molte aziende russe. Ad esempio, in medicina per creare soluzioni per l'analisi di immagini, nella vendita al dettaglio per lo sviluppo di sistemi di raccomandazione.

Le tecniche di apprendimento automatico stanno diventando sempre di piùstrumento di business popolare in tutto il mondo. Ma per molte aziende non è ancora disponibile a causa dell'elevata soglia di ingresso e del costo delle risorse di elaborazione richieste. Per risolvere questi problemi, abbiamo creato DataSphere, in cui è possibile ottenere un ambiente ML già pronto con un clic di un pulsante. Sono disponibili diversi tipi di risorse di elaborazione: dalle capacità classiche alle GPU e al calcolo distribuito, e la fatturazione avviene solo per la potenza del server effettivamente consumata durante l'esecuzione delle attività.

Alexey Bashkeev, manager Piattaforme Yandex.Cloud

Cosa c'è di nuovo in Yandex.Cloud?

  • Tecnologia serverless computing per lo sviluppo di modelli di machine learning.

La tecnologia automatizza la gestione delle risorse econsente un notevole risparmio. In DataSphere, durante la modifica e la visualizzazione del codice, non vengono utilizzate le risorse di calcolo della CPU o della GPU; una macchina virtuale del tipo richiesto è collegata solo per la durata dei calcoli effettivi (addestramento del modello, lancio, altri calcoli).

Di conseguenza, l'utente paga solorisorse informatiche effettivamente consumate. Il tempo per la modifica e la revisione del codice, il lavoro di una macchina virtuale che non viene spenta accidentalmente non viene addebitato. Secondo i test di DataSphere, che hanno coinvolto 200 utenti di vari settori, il tempo di inattività della potenza di calcolo durante lo sviluppo del machine learning è del 50-70%. Quando si utilizza il prodotto, questa volta non verrà addebitato.

  • Implementato il passaggio continuo tra diversi tipi di risorse di elaborazione.

Ciò significa che all'interno di uno scenario di formazionemodello, l'utente può utilizzare diversi tipi di macchine virtuali: economiche con processori convenzionali (CPU) e più veloci con GPU (acceleratori grafici). L'avanzamento dell'addestramento del modello rimarrà lo stesso. Nella maggior parte degli ambienti di sviluppo di machine learning basati su cloud, il modello di training può essere calcolato solo su un tipo di macchina.

  • Salva le versioni dei calcoli del modello, inclusi dati, codice e stati.

Questa caratteristica rende il processo di sviluppo del machine learning più proficuo per le imprese: i progressi ottenuti nella formazione non vanno perduti, possono essere riprodotti se necessario.

Yandex SpeechKit Pro contribuirà a rendere i robot vocali più intelligenti e più umani

Piattaforma Yandex.Cloud ha introdotto una specializzazione del servizio SpeechKit: Yandex SpeechKit Pro. Si tratta di un programma per aziende di sviluppo, i cui partecipanti avranno accesso a nuovi strumenti per la creazione di robot e assistenti vocali focalizzati sul lavoro in un settore o azienda specifica.

Tali robot saranno in grado di riconoscere parole e comandi.su un argomento specifico con il massimo livello di accuratezza. I nuovi strumenti aiuteranno a migliorare notevolmente gli scenari dei servizi nei settori bancario, sanitario e delle consegne. SpeechKit Pro consente inoltre di creare singole funzionalità di un robot vocale: intonazione e modalità di comunicazione.

Perché è rilevante?

Entro il 2020, la sintesi vocale e il riconoscimento saranno diventatiil servizio ML più popolare sulla piattaforma Yandex.Cloud. Dall'inizio dell'anno il consumo di SpeechKit è cresciuto del 120%. Il numero di progetti attivi ha superato i 500. In Russia si è già formato un ecosistema di sviluppatori e integratori di soluzioni che, su richiesta di aziende di vari settori, creano e implementano robot vocali per aiutare a elaborare le chiamate in entrata e in uscita, il controllo vocale sistemi in applicazioni e terminali di servizio clienti e soluzioni di analisi dell'efficienza delle comunicazioni aziendali.

Oggi ci sono più di 20 aziende, la maggior partedi cui sono partner abituali della piattaforma Yandex.Cloud. Secondo i partner, negli ultimi due anni, i motivi principali per introdurre i robot vocali nelle aziende russe sono stati la riduzione dei costi e il rapido ampliamento delle soluzioni.

Insieme ai nostri partner, abbiamo vissuto una grande esperienzamodo, avendo reso le tecnologie vocali da un servizio esotico uno strumento commerciale applicato in due anni. Ora stiamo facendo il passo successivo e stiamo aprendo un nuovo livello di tecnologie vocali Yandex per i partner. Le società di sviluppo avranno accesso alle funzionalità avanzate di SpeechKit ei clienti della soluzione potranno selezionare il fornitore con le competenze più appropriate.

Alexey Bashkeev, capo della piattaforma Yandex.Cloud

In che modo la soluzione si adatterà alle diverse attività aziendali?

Insieme all'interesse aziendale per le possibilità di parolasono cresciute anche le tecnologie, i requisiti per l'accuratezza del riconoscimento in specifici scenari di interazione tra i robot vocali e gli esseri umani, la capacità di adattare rapidamente gli sviluppi per nuovi compiti.

Ad esempio, per una compagnia di spedizioniÈ di fondamentale importanza che il robot non si confonda nel valutare il significato delle frasi "Trasferisci l'ordine" o "Inserisci l'ordine", e per le società di telecomunicazioni - che distingua tra le frasi "Abilita servizio" e "Disabilita servizio" senza errori. La priorità di un'azienda è l'accuratezza nel proprio ambito, la capacità di sviluppare esperienza applicativa in uno specifico scenario aziendale sulla base di indicatori oggettivi.

Per risolvere questi problemi, Yandex.Cloud fornisce ai partner strumenti di sviluppo aggiuntivi nell'ambito della specializzazione SpeechKit Pro. Ora le aziende partner saranno in grado di utilizzare il tagging dei dati audio, addestrare modelli di riconoscimento vocale individuali utilizzando i dati dei clienti, monitorare i parametri di qualità del riconoscimento vocale e adattare i modelli di riconoscimento a un flusso di dati specifico.

Specializzazione SpeechKit Pro è già stato ricevuto da Neuro.net, Just.ai, Aviation Communication Technologies, Naumen, Robovoice e Voximplant.

La piattaforma Yandex.Cloud ha ampliato l'ecosistema di servizi con tecnologie di elaborazione serverless

Yandex.Cloud ha ampliato il proprio ecosistema di servizi con tecnologie di elaborazione serverless proprietarie. Altri due servizi sono stati aggiunti ai quattro servizi annunciati nel 2019: Yandex API Gateway e Yandex Database in modalità Serverless.

Cosa significa?

Il serverless computing libera le aziende dacosti per la risoluzione dei problemi di allocazione e configurazione dell'infrastruttura cloud: macchine virtuali, server database cloud e applicazioni. Queste attività vengono ora eseguite automaticamente sul lato della piattaforma Yandex.Cloud.

Quando si utilizzano tecnologie serverlessLa piattaforma informatica rileva automaticamente, ad esempio, un aumento del numero di richieste degli utenti all'applicazione aziendale e alloca le risorse necessarie per un funzionamento stabile. Non appena il carico sull'applicazione diminuisce, la quantità di energia utilizzata per farla funzionare diminuisce. Ciò consente agli utenti di passare a un nuovo principio di pagamento per i cloud russi, basato solo sul consumo effettivo dei servizi, e ottenere risparmi significativi.

Yandex.Cloud è la prima piattaforma cloud in Russia a offrire un ecosistema di elaborazione serverless completo. Abbiamo raccolto le tecnologie di elaborazione e archiviazione dei dati più necessarie per risolvere problemi aziendali urgenti e le abbiamo rese disponibili in modalità serverless. Il serverless computing è una nuova fase nello sviluppo delle tecnologie cloud in tutto il mondo. Questa è un'opportunità per ridurre i costi fino al 90%, accelerare i tempi per creare e implementare nuove soluzioni, aumentare la resilienza delle applicazioni durante i periodi di picchi di carico, liberare le aziende dalle attività di ridimensionamento del servizio.

Alexey Bashkeev, capo della piattaforma Yandex.Cloud

Come funzionerà?

L'ecosistema tecnologico serverless di Yandex.Cloud ora include sei servizi: Yandex Object Storage—soluzione scalabile universale perarchivio dati; API Gateway: un servizio per la creazione e la gestione delle API; codice in esecuzione sotto forma di funzioni - Yandex Cloud Functions; sistema di gestione del database tollerante agli errori - Database Yandex;una soluzione scalabile universale per lo scambio di messaggi tra applicazioni: Yandex Message Queue e il servizio Internet of Things Yandex IoT Core.

Per tutti i servizi dell'ecosistema informatico serverlessDurante il primo anno (fino a ottobre 2021), Yandex.Cloud prevede tariffe speciali che consentono agli utenti di creare e ospitare i propri servizi gratuitamente, senza superare un determinato livello di carico.

Leggi anche

Nell'era degli ecosistemi: come i giganti IT si stanno trasformando nelle interfacce della nostra vita quotidiana

Il ghiacciaio Doomsday si è rivelato più pericoloso di quanto pensassero gli scienziati. Diciamo la cosa principale

GitHub ha sostituito il termine "master" con un equivalente neutro