La nouvelle technologie détecte 99% des deepfakes : le système remarque même la substitution des émotions

Des chercheurs de l’Université de Californie à Riverside ont introduit une nouvelle technologie permettant de détecter les changements.

expressions faciales dans les enregistrements vidéo. La méthode développée divise le problème en deux composants, qui sont résolus à l'aide d'un réseau neuronal entraîné.

La première branche distingue les expressions faciales (émotion) ettransmet des informations sur les zones qui forment cette expression à la deuxième branche - l'encodeur-décodeur. L'architecture codeur-décodeur est chargée de détecter et de localiser les manipulations. Comme le notent les auteurs du travail, la solution qu'ils ont créée détecte non seulement les interférences, mais détermine également les zones de l'image qui ont été corrigées.

"L'apprentissage en profondeur utilise des traits,détecté par les systèmes de reconnaissance d'expressions faciales pour améliorer les performances des systèmes de détection de changement conventionnels. Cette approche fournit des résultats impressionnants dans la détection de la manipulation faciale », explique Ghazal Mazaheri, responsable de l'étude.

Image : Mazaheri & Roy-Chowdhury, le bord de la rivière UC

Les chercheurs avaient l'habitude d'évaluerl'efficacité de son modèle, deux séries de vidéos, dans l'une desquelles seules les émotions ont subi des changements, dans l'autre, le personnage d'acteur a changé. Des expériences ont montré que le système développé est beaucoup plus efficace que les analogues existants en termes de recherche de changements dans les émotions et en même temps n'est pas inférieur aux systèmes les plus efficaces pour détecter la substitution de l'identité de l'acteur. Lors des tests, le système a détecté 99% de fausses vidéos.

Les scientifiques pensent que leur développement aidera au développement d'outils automatisés pour détecter les fausses vidéos contenant de la propagande ou de la désinformation.

Lire la suite:

Regardez le drone "silencieux" avec une nouvelle génération de propulsion ionique

Des scientifiques ont découvert comment trouver de la matière noire à l'aide d'une usine conventionnelle

Des astronomes ont étudié 4 amas d'étoiles dans la Voie lactée : l'un d'eux se comporte étrangement