Un nouveau réseau neuronal peut faire la distinction entre les personnes et les objets individuels dans une vidéo, ainsi que les accélérer ou les ralentir
Pour cela, l'équipe Google et OxfordL'université a divisé chaque image de la vidéo en couches séparées et a appris à l'IA à identifier les personnes ou les objets qu'elles contiennent. Ce réseau de neurones se concentre sur les choses sur chaque couche, se concentrant sur leurs mouvements, puis il peut séparer chaque objet et changer leur mouvement.
Les scientifiques ont déterminé la limite supérieure de la vitesse du son
Auparavant, Google avait proposé un modèle qui pourraitlire la langue des signes pendant les appels vidéo. L'IA peut détecter qui parle activement, mais ignore l'autre personne si elle bouge simplement les mains ou la tête. Un nouveau développement des chercheurs de Google peut le faire avec une grande efficacité et une faible latence. Jusqu'à présent, les chercheurs notent que la détection de la langue des signes entraîne des retards ou une détérioration de la qualité vidéo, mais ce problème peut être résolu et le modèle lui-même reste léger et fiable.
Le système exécute d'abord la vidéo à travers le modèle sousappelé PoseNet, qui évalue la position du corps et des membres dans chaque cadre. Des informations visuelles simplifiées sont envoyées à un modèle formé pour positionner les données de vidéos de personnes utilisant la langue des signes et comparent l'image à la façon dont les gens affichent habituellement certains mots.
Lisez aussi
Au jour 3 de la maladie, la plupart des patients atteints de COVID-19 perdent leur odorat et souffrent souvent d'un nez qui coule
Voir les clichés les plus proches de la surface du Soleil
Le glacier Doomsday s'est avéré plus dangereux que les scientifiques ne le pensaient. Nous disons l'essentiel