פתרון ליצירת ענני נתונים היברידיים
הציגו חברת גזפרום נפט ופלטפורמת Yandex.Cloud
- איך זה יעבוד?
המשתמש בפתרון ה-IT מקבל מלאמתחם חומרה ותוכנה מוכן לשימוש שנוצר על בסיס ציוד וטכנולוגיות Yandex.Cloud. המתחם מותקן במרכז הנתונים של הלקוח והופך לחלק מהפלטפורמה שלו לעבודה עם נתונים. שירותים נוספים - מניעה, תצורה, עדכון ותחזוקה שוטפת אחרת - מתבצעים על פי תקני Yandex.Cloud.
- איך תעבוד החומרה של החברה עם המוצר החדש?
מוצר ה- IT החדש משתלב עם מקומימערכות אחסון ועיבוד נתונים ארגוניות ושירותי ענן ציבוריים. התוצאה היא ענן היברידי המרחיב את יכולות התשתית הדיגיטלית של החברה, מאפשר להגדיר תקני אבטחה מוגברים ולקחת בחשבון פרטים נוספים של משתמש ספציפי.
במהלך האישור, מומחים מגזפרוםשמן ”לקח חלק בפיתוח הדרישות לפיתרון ההיברידי והפך למעשה לשותף בתכנון הארכיטקטורה שלו. לכן, הלקוחות שלנו יקבלו לא רק מתחם חומרה ותוכנה מוכן לחלוטין המבוסס על טכנולוגיות Yandex.Cloud, אלא גם שירות לתמיכה ולעדכון שוטף של המוצר, תוך התחשבות בפיתוח הפלטפורמה הציבורית שלנו.
אולג קובזרנב, מנהל התפעול הראשי של Yandex.Cloud
- מה מתוכנן בהמשך?
פיתוח נוסף של שותפות טכנולוגיתבין גזפרום נפט לפלטפורמת Yandex.Cloud תאפשר בדיקה של פתרון דיגיטלי חדש בתרחישים שונים של תפעול תעשייתי. גזפרום נפט שוקלת אפשרות להשתמש בענן היברידי לפיתוח אשכול המחשוב שלה והתפתחויות בתחום הבינה המלאכותית, המשמשות לחיפוש עתודות נפט חדשות ולשליטה מרחוק על פעולות טכנולוגיות לייצורו. כמו כן, ניתן להשתמש בקיבולת נוספת לשיפור היעילות של איזון עומסי העבודה בתשתית ה- IT הייצורית.
מדי שנה נוצרים המפעלים ושדות הנפט שלנובערך 5 PB של נתונים חדשים. אנו לא רק מאחסנים מידע זה, אלא מקבלים החלטות על בסיס יומי על סמך הניתוח שלו, משתמשים בו למידול תהליכים טכנולוגיים ואימון רשתות עצביות. הייחודיות בעבודה באזורים מרוחקים בסיביר ובקוטב הצפוני דורשת כוח מחשוב מבוזר גדול, אשר יוסדר ממקום אחד. יצירת ענן היברידי פותרת בעיה זו ומספקת אבטחת מידע. המוצר יהפוך לשירות נוח עבור חברות תעשייתיות ונציגי שוק אחרים.
אנדריי בלבצב, מנהל הטרנספורמציה הדיגיטלית בגזפרום נפט
ארבעה שירותים חדשים לאחסון וניהול נתונים
קטגוריית שירותים לאחסון וניהולנתונים הפכו לאחד התחומים הצומחים ביותר של פלטפורמת Yandex.Cloud בשנת 2020, עברו את דינמיקת הצמיחה של שירותיו של המוביל המסורתי - השכרת מכונות וירטואליות. בעזרת שירותי ניהול נתונים בענן, חברות, ללא קשר לגודל ותחום פעילות, פותרות בעיות כמו אחסון ועיבוד נתונים, אנליטיקה והדמיה.
השירותים של מנוהליםמאגרי מידע (מאגרים מנוהלים) - מתחילת שנת 2020 צריכת השירותים הללו בפלטפורמת Yandex.Cloud גדלה פי שלושה ומספר מאגרי המידע שיצרו המשתמשים עלה על 10,000.
- מה קרה קודם?
בפלטפורמה שלנו Yandex.ענן כבר היה זמין על ידי לחיצה על כמעט כל פתרונות האחסון והעיבוד הפופולריים ביותר בשוק. ביצענו שיפורים משמעותיים בתרחישים של העברת הנתונים השנה. לשם כך הוספנו שני שירותים חדשים המפשטים את העברת הנתונים בין מקורות כלשהם - שירות מנוהל עבור קפקא, ופתרון מיוחד להעברת נתונים בין בסיסי נתונים - העברת נתונים. בגזרת בסיסי הנתונים הכלליים הענן הפך נגיש עוד יותר עבור משתמשי Enterprise - הופיע שירות מנוהל חדש עבור שרת SQL. שירות מנוהל לחיפוש אלסטי, פיתרון פופולרי התומך בחיפוש טקסט מלא ותרחישי ניתוח אד-הוק, הופיע במשפחת הפתרונות האנליטיים.
אלכסיי בשקייב, ראש פלטפורמת Yandex.Cloud
- מה מגיע עכשיו?
מ-23 בספטמבר למשתמשי Yandex.לענן יש כעת גישה לשירות העברת הנתונים החדש, המאפשר לך להעביר נתונים בין DBMSs מבלי לעצור יישומים, ללא קשר למקום שבו הם פרוסים. העברת נתונים עוזרת לך להעביר במהירות ובבטחה מסדי נתונים מפלטפורמות ענן אחרות או מסדי נתונים מקומיים לשירותי מסד נתונים מנוהלים של Yandex.Cloud. אתה יכול גם להשתמש בהעברת נתונים כדי להעביר נתונים בין מסדי נתונים שונים בפלטפורמה ולהגדיר גיבויים.
כמו כן, השירות המנוהל שוחרר.קפקא היא מערכת להזרים נתונים למערכות אנליטיות. שירות הניתוח של חיפוש ונתוני ElasticSearch ואחת ממערכות ניהול מסדי הנתונים הפופולריות בעולם לעבודה במערכת האקולוגית של מוצרי Microsoft SQL Server נוספו. בסך הכל, 9 שירותי מסד נתונים מנוהלים זמינים כעת בפלטפורמת Yandex.Cloud, המכסים את מרבית התרחישים לאחסון ועיבוד נתונים.
מדור שוק חדש עם נתונים לניתוח עסקי
ביאנדקס.כעת יש לענן קטע בשם "Geolayers", המכיל נתוני מידע גיאוגרפי אנונימי של שותפי שירות. הם יכולים לפרסם את התוכן שלהם בחינם או בתשלום. לקוחות Yandex.Cloud ייגשו לנתונים הדרושים בממשק השירות, ינתחו אותם באמצעות Yandex DataLens וישתמשו בהם למטרות עסקיות. לדוגמה, משתמשים יכולים להעריך את הביקוש הפוטנציאלי למוצרים או את הסיכויים לפתיחת סניפים, לתכנן הרחבה של אזורי ההיצע או קמפיינים שיווקיים.
תוכן משני שותפים כבר זמין במדור -"מרכז למחקר מרחבי" על בסיס מסחרי ו-Rosstat על בסיס חופשי, וכן שתי דוגמאות לגיאואנליטיקה מבית Yandex - "קהל: תחומי עניין ודמוגרפיה חברתית" ו"ארגונים: היצע וביקוש". עם DataLens, משתמשים יכולים לשלב ולנתח את כל הנתונים הקבועים מראש כדי לקבל החלטות עסקיות.
אנו שואפים לתת לשותפים לא רק טכנולוגיה,וכלים לייצור רווחים מכל מוצר אינטלקטואלי שניתן לייצר או לשפר באמצעות הענן. בנפרד, אני מציין כי כל התוכן בסעיף "שכבות גיאולוגיות" הוא נתונים מצטברים ואנונימיים באופן בלעדי, שעבורם אי אפשר להשיג פרטים עבור מכשיר או משתמש ספציפיים.
אולג קובזרנב, מנהל התפעול הראשי Yandex.Cloud
מי פעל כשותף של Yandex.Cloud?
אנליטיקס נוצר בשיתוף עםרוסטט. הסכם שיתוף הפעולה כולל עבודה משותפת על הכנת חבילות של נתונים פתוחים שונים. נתונים סטטיסטיים חיוניים ומידע דמוגרפי אחר כבר זמינים.
Rosstat מפרסמת גדולמערכי נתונים הזמינים לכל משתמש. הודות לשיתוף פעולה עם Yandex.Cloud, הם יקבלו ערך נוסף לחוקרים, אנליסטים ועסקים. הכלים של הפלטפורמה מאפשרים לך לשלב מקורות, לבצע ניתוח מהיר, לבנות ויזואליות חזותית וכתוצאה מכך לקבל החלטות אסטרטגיות מהירות.
פאבל סמלב, סגן ראש רוסטסט
המרכז למחקר מרחבי מסופקנתוני מידע גיאוגרפי על האוכלוסייה, משקי בית בבניינים חדשים וכן מדדי פוטנציאל עסקי לתחומים שונים. בנוסף, לוח מחוונים לניטור הסחר ברשת בפדרציה הרוסית זמין ללא תשלום, שפועל מאז 2015 ומכיל מדד של התפתחות האזור מנקודת מבטם של שחקנים קמעונאיים פדרליים.
לדברי המנכ"ל של המרכז למרחבהמחקר, הכלים האנליטיים, המדדים והמומחיות של דניס סטרוקוב, בשילוב עם היכולות של DataLens, הם מענה בזמן לבקשה משווקי B2B ו- B2C. זו, לדבריו, גרסת ענן של מודיעין מיקום, שהתפתח לאחרונה בחו"ל, וכעת ברוסיה.
גישה כללית לשוק Yandex.הענן נפתח בשנת 2019. זוהי פלטפורמה שבה לקוחות ענן יכולים לקבל גישה ישירה ליישומים עסקיים ממפתחים ומפרסמים. כיום זמינים 47 אפליקציות ושירותים: ממערכות הפעלה ועד כלי אבטחת מידע לניתוח גנטי.
Yandex.Cloud פותח גישה ציבורית לשירות חדש לפיתוח המבוסס על למידת מכונה DataSphere
יאנדקס.ענן מספק גישה כללית לשירות עבור מפתחי למידת מכונה Yandex DataSphere. השירות מסייע לחברות ומפתחים בודדים להוזיל את עלות היצירה וההפעלה של מודלים של למידת מכונה, לנהל באופן אוטומטי את כמות וסוג משאבי המחשוב ולהפחית את הזמן המבוזבז ליצירת וארגון סביבת פיתוח. Yandex DataSphere יהיה זמין באופן פתוח החל מה -1 באוקטובר.
מדוע זה רלוונטי?
ההוצאות העולמיות של חברות על מלאכותיותמודיעין צפוי להכפיל את עצמו בארבע השנים הקרובות מ- 50 מיליארד דולר בשנת 2020 ל- 110 מיליארד דולר בשנת 2024. בסוף 2019 ההוצאות של חברות רוסיות על AI הסתכמו ב -172 מיליון דולר עם תחזית של צמיחה של 30% בשנה. פיתוחים מבוססי למידה ממוחשבת כבר נמצאים בשימוש פעיל על ידי חברות רוסיות רבות. לדוגמא, ברפואה ליצירת פתרונות לניתוח תמונות, בקמעונאות לפיתוח מערכות המלצה.
טכניקות לימוד מכונה הופכות ליותר ויותרכלי עסקי פופולרי ברחבי העולם. אך עבור חברות רבות הוא עדיין לא זמין בגלל סף הכניסה הגבוה ועלות משאבי המחשוב הנדרשים. כדי לפתור בעיות אלה, יצרנו את DataSphere, שם תוכלו להשיג סביבת ML מוכנה בלחיצת כפתור. קיימים בו סוגים שונים של משאבי מחשוב - מיכולות קלאסיות ועד מחשבי GPU ומחשוב מבוזר, וחיוב מתבצע רק עבור כוח השרת הנצרך בפועל בזמן ביצוע המשימות שלך.
אלכסיי בשקייב, ראש פלטפורמות Yandex.Cloud
מה חדש ב-Yandex.Cloud?
- טכנולוגיית מחשוב ללא שרת לפיתוח מודלים של למידת מכונה.
הטכנולוגיה עושה אוטומציה של ניהול משאבים ומאפשר חיסכון משמעותי. ב-DataSphere, בעת עריכה וצפייה בקוד, לא נעשה שימוש במשאבי המחשוב של ה-CPU או ה-GPU; מכונה וירטואלית מהסוג הנדרש מחוברת רק למשך החישובים בפועל (אימון מודל, השקה, חישובים אחרים).
כתוצאה מכך, המשתמש משלם רק עבורמשאב מחשוב שנצרך בפועל. זמן לעריכה ועיון בקוד, עבודה של מכונה וירטואלית שלא כבויה בטעות אינה מחויבת. על פי בדיקות DataSphere, שכללו 200 משתמשים מתחומים שונים, זמן ההשבתה של כוח המחשוב בעת פיתוח למידת מכונה הוא 50-70%. בעת שימוש במוצר, זמן זה לא יחויב.
- הטמעת מעבר חלק בין סוגים שונים של משאבי מחשוב.
זה אומר שבתרחיש אימון אחדמודל, המשתמש יכול להשתמש בסוגים שונים של מכונות וירטואליות - חסכוניות עם מעבדים קונבנציונליים (CPUs) ומהירים יותר עם GPUs (מאיצים גרפיים). התקדמות האימון של הדגם תישאר זהה. ברוב סביבות הפיתוח של למידת מכונה מבוססות ענן, ניתן לחשב את מודל ההדרכה רק על סוג אחד של מכונה.
- שמור גרסאות של חישובי מודל, כולל נתונים, קוד ומצבים.
תכונה זו הופכת את תהליך פיתוח המכונה לרווחי יותר עבור העסק: ההתקדמות שהושגה בהדרכה אינה אובדת, ניתן לשחזר אותה במידת הצורך.
Yandex SpeechKit Pro יעזור להפוך את הרובוטים הקוליים לחכמים יותר ואנושיים יותר
פלטפורמת Yandex.Cloud הציגה התמחות של שירות SpeechKit - Yandex SpeechKit Pro. מדובר בתוכנית לחברות פיתוח, שלמשתתפים בה תהיה גישה לכלים חדשים ליצירת רובוטים ועוזרים קוליים המתמקדים בעבודה בתעשייה או חברה ספציפית.
רובוטים כאלה יוכלו לזהות מילים ופקודותבנושא ספציפי ברמת הדיוק הגבוהה ביותר. הכלים החדשים יסייעו בשיפור דרמטי של תרחישי השירות במגזר הבנק, הבריאות והאספקה. SpeechKit Pro מאפשר לך גם ליצור תכונות אישיות של רובוט קולי: אינטונציה ואופן תקשורת.
מדוע זה רלוונטי?
עד 2020, סינתזה וזיהוי דיבור הפכושירות ה-ML הפופולרי ביותר בפלטפורמת Yandex.Cloud. מתחילת השנה, צריכת SpeechKit גדלה ב-120%. מספר הפרויקטים הפעילים עלה על 500. ברוסיה כבר נוצרה אקו-סיסטם של מפתחים ואינטגרטורים של פתרונות, אשר לבקשת חברות מתחומים שונים יוצרים ומטמיעים רובוטים קוליים שיסייעו בעיבוד שיחות נכנסות ויוצאות, שליטה קולית מערכות ביישומים ומסופי שירות לקוחות, ופתרונות ניתוח יעילות של תקשורת עסקית.
כיום יש יותר מ-20 חברות, רובןמהם שותפים קבועים לפלטפורמת Yandex.Cloud. לדברי שותפים, במהלך השנתיים האחרונות, המניעים העיקריים להכנסת רובוטים קוליים בחברות רוסיות היו הפחתת עלויות והרחבה מהירה של פתרונות.
יחד עם השותפים שלנו עברנו מעולהדרך, לאחר שהפכה את טכנולוגיות הדיבור משירות אקזוטי לכלי עסקי יישומי בשנתיים. כעת אנו עושים את הצעד הבא ופותחים רמה חדשה של טכנולוגיות דיבור Yandex עבור שותפים. לחברות פיתוח תהיה גישה לתכונות המתקדמות של SpeechKit, ולקוחות הפתרונות יוכלו לבחור את הספק בעל המומחיות המתאימה ביותר.
אלכסיי בשקייב, ראש פלטפורמת Yandex.Cloud
כיצד יתאים הפיתרון למשימות עסקיות שונות?
יחד עם העניין העסקי באפשרויות הדיבורטכנולוגיות, הדרישות לדיוק זיהוי בתרחישים ספציפיים של אינטראקציה בין רובוטים קוליים לבני אדם גדלו גם כן, היכולת להתאים במהירות פיתוחים למשימות חדשות.
לדוגמא, עבור חברת שילוחחשוב מהותית שהרובוט לא יתבלבל בהערכת משמעות הביטויים "העבר את ההזמנה" או "הזן את ההזמנה", ולחברות טלקומוניקציה - שהוא יבדיל בין הביטויים "אפשר שירות" ו"השבית שירות "ללא טעויות. העדיפות של עסק היא דיוק בתחומו, היכולת לפתח חווית יישום בתרחיש עסקי ספציפי המבוסס על אינדיקטורים אובייקטיביים.
כדי לפתור בעיות אלה, Yandex.Cloud מספק לשותפים כלי פיתוח נוספים במסגרת ההתמחות של SpeechKit Pro. כעת חברות שותפות יוכלו להשתמש בתיוג נתוני אודיו, לאמן מודלים בודדים של זיהוי דיבור באמצעות נתוני לקוחות, לנטר מדדי איכות זיהוי דיבור ולהתאים מודלים של זיהוי לזרם נתונים ספציפי.
התמחות SpeechKit Pro כבר התקבל על ידי Neuro.net, Just.ai, טכנולוגיות תקשורת תעופה, Naumen, Robovoice ו- Voximplant.
פלטפורמת Yandex.Cloud הרחיבה מערכת אקולוגית שירותית עם טכנולוגיות מחשוב ללא שרתים
יאנדקס.ענן הרחיבה את המערכת האקולוגית שלה עם טכנולוגיות מחשוב ללא שרתים. שני שירותים נוספים נוספו לארבעת השירותים שהוכרזו בשנת 2019 - Yandex API Gateway ו- Yandex Database במצב Serverless.
מה זה אומר?
מחשוב ללא שרת משחרר חברותעלויות לפתרון בעיות של הקצאה ותצורה של תשתית ענן: מכונות וירטואליות, שרתי מסדי נתונים ואפליקציות בענן. משימות אלו מבוצעות כעת באופן אוטומטי בצד פלטפורמת Yandex.Cloud.
בעת שימוש בטכנולוגיות ללא שרתפלטפורמת המחשוב מזהה אוטומטית, למשל, עלייה במספר בקשות המשתמשים לאפליקציה של החברה ומקצה את המשאבים הדרושים לתפעול יציב. ברגע שהעומס על האפליקציה יורד, כמות הכוח המשמשת להפעלתה פוחתת. זה מאפשר למשתמשים לעבור לעקרון תשלום חדש עבור עננים רוסיים - רק על בסיס צריכה בפועל של שירותים - ולהשיג חיסכון משמעותי.
יאנדקס.ענן היא פלטפורמת הענן הראשונה ברוסיה שמציעה מערכת אקולוגית מחשוב מלאה ללא שרתים. אספנו את טכנולוגיות אחסון ועיבוד הנתונים הדרושות ביותר לפיתרון בעיות עסקיות דחופות והפכנו אותן לזמין במצב ללא שרת. מחשוב ללא שרתים הוא השלב הבא במחשוב ענן ברחבי העולם. זו הזדמנות להפחית עלויות בשיעור של עד 90%, להאיץ את הזמן ליצור וליישם פתרונות חדשים, להגדיל את חוסן היישומים בתקופות של עומסי שיא, לשחרר חברות ממשימות קנה המידה של השירות.
אלכסיי בשקייב, ראש פלטפורמת Yandex.Cloud
איך זה יעבוד?
המערכת האקולוגית הטכנולוגית ללא שרתים של Yandex.Cloud כוללת כעת שישה שירותים: אחסון אובייקטים של Yandex—פתרון אוניברסלי להרחבה עבוראחסון נתונים; API Gateway - שירות ליצירה וניהול של ממשקי API; קוד ריצה בצורת פונקציות - Yandex Cloud Functions; מערכת ניהול מסדי נתונים חסינת תקלות - Yandex Database;פתרון מדרגיות אוניברסלי להחלפת הודעות בין יישומים - Yandex Message Queue ושירות האינטרנט של הדברים Yandex IoT Core.
לכל שירותי המחשוב האקולוגיים ללא שרתבמהלך השנה הראשונה (עד אוקטובר 2021), ל-Yandex.Cloud יש תעריפים מיוחדים המאפשרים למשתמשים ליצור ולארח את השירותים שלהם בחינם, שלא יחרוג מרמת עומס מסוימת.
קרא גם
בעידן המערכות האקולוגיות: כיצד ענקיות ה- IT הופכות לממשקים של חיי היומיום שלנו
קרחון יום הדין התגלה כמסוכן יותר ממה שחשבו המדענים. אנחנו מספרים את העיקר
GitHub החליף את המונח "מאסטר" במקבילה ניטרלית