חוקרים חשפו מערכת זיהוי שפת סימנים בזמן אמת.להבחין מתי
פיתוח חדש של חוקרי גוגל מסוגלעשו זאת ביעילות רבה ובאיחור נמוך. בעוד החוקרים מציינים כי זיהוי שפת הסימנים מוביל לעיכוב או איכות וידיאו מושפלת, ניתן לפתור בעיה זו, והמודל עצמו נשאר קל ואמין.
המערכת מריצה את הווידאו תחילה באמצעות המודל תחתנקרא PoseNet, שמעריך את מיקום הגוף והגפיים בכל פריים. מידע חזותי פשוט נשלח למודל שהוכשר למיקום נתונים מסרטונים של אנשים המשתמשים בשפת הסימנים ומשווה את התמונה לאופן שבו אנשים בדרך כלל מציגים מילים מסוימות.
המודל מזהה נכון מילים וביטויים עםדיוק של 80%, ועם אופטימיזציה נוספת הוא יכול להגיע ל -91.5%. בהתחשב בכך שגילוי של "דובר פעיל" ברוב השירותים עובד עם עיכובים, החוקרים סבורים שמדובר במספרים גדולים מאוד.
ראה גם:
אפשר ליצור כור תרמו-גרעיני בכדור הארץ. מה יהיו ההשלכות?
קרחון יום הדין התגלה כמסוכן יותר ממה שחשבו המדענים. אנחנו מספרים את העיקר
ביום המחלה השלישי, רוב החולים ב- COVID-19 מאבדים את חוש הריח שלהם ולעיתים קרובות סובלים מנזלת