Nieuwe technologie detecteert 99% van de deepfakes: het systeem merkt zelfs de vervanging van emoties op

Onderzoekers van de Universiteit van Californië, Riverside hebben een nieuwe technologie geïntroduceerd voor het detecteren van veranderingen.

gezichtsuitdrukkingen in video-opnamen. De ontwikkelde methode verdeelt het probleem in twee componenten, die worden opgelost met behulp van een getraind neuraal netwerk.

De eerste tak onderscheidt gezichtsuitdrukkingen (emotie) engeeft informatie over de gebieden die deze uitdrukking vormen door aan de tweede tak - de encoder-decoder. De encoder-decoderarchitectuur is verantwoordelijk voor het detecteren en lokaliseren van manipulaties. Zoals de auteurs van het werk opmerken, detecteert de oplossing die ze hebben gemaakt niet alleen interferentie, maar bepaalt ook de delen van het beeld die zijn gecorrigeerd.

“Deep learning maakt gebruik van eigenschappen,gedetecteerd door gezichtsuitdrukkingsherkenningssystemen om de prestaties van conventionele veranderingsdetectiesystemen te verbeteren. Deze aanpak levert indrukwekkende resultaten op bij de detectie van gezichtsmanipulatie”, zegt onderzoeksleider Ghazal Mazaheri.

Afbeelding: Mazaheri & Roy-Chowdhury, De UC-rivieroever

De onderzoekers evalueerdende effectiviteit van het model, twee sets video's, in een waarvan alleen emoties zijn veranderd, in de andere is het acteerkarakter veranderd. Experimenten hebben aangetoond dat het ontwikkelde systeem veel efficiënter is dan bestaande analogen als het gaat om het zoeken naar veranderingen in emoties en tegelijkertijd niet onderdoet voor de meest effectieve systemen voor het detecteren van de vervanging van de identiteit van de acteur. Tijdens het testen heeft het systeem 99% van de nepvideo's gedetecteerd.

Wetenschappers geloven dat hun ontwikkeling zal helpen bij de ontwikkeling van geautomatiseerde tools voor het detecteren van nepvideo's die propaganda of desinformatie bevatten.

Lees verder:

Kijk naar de "stille" drone met een nieuwe generatie ionenaandrijving

Wetenschappers hebben ontdekt hoe ze donkere materie kunnen vinden met behulp van een conventionele fabriek

Astronomen hebben 4 sterrenhopen in de Melkweg bestudeerd: een van hen gedraagt ​​zich vreemd