Nova tehnologija otkriva 99% deepfakesa: sustav čak primjećuje zamjenu emocija

Istraživači sa Sveučilišta Kalifornija, Riverside predstavili su novu tehnologiju za otkrivanje promjena.

izrazi lica na video snimkama. Razvijena metoda dijeli problem na dvije komponente koje se rješavaju uvježbanom neuronskom mrežom. 

Prva grana razlikuje izraze lica (emociju) iprosljeđuje informacije o područjima koja tvore ovaj izraz u drugu granu - koder-dekoder. Arhitektura koder-dekoder odgovorna je za otkrivanje i lokaliziranje manipulacija. Kako napominju autori rada, rješenje koje su stvorili ne samo da detektira smetnje, već i određuje područja slike koja su ispravljena.

„Duboko učenje koristi osobine,detektiraju sustavi za prepoznavanje izraza lica radi poboljšanja performansi konvencionalnih sustava za otkrivanje promjena. Ovaj pristup daje impresivne rezultate u otkrivanju manipulacije licem”, kaže Ghazal Mazaheri, voditelj studije.

Slika: Mazaheri & Roy-Chowdhury, The UC Riverside

Istraživači su ocjenjivaliučinkovitost njegovog modela, dva seta videa, u jednom od kojih su samo emocije doživjele promjene, u drugom se promijenio glumački lik. Eksperimenti su pokazali da je razvijeni sustav mnogo učinkovitiji od postojećih analoga u smislu traženja promjena u emocijama, a pritom nije inferioran u odnosu na najučinkovitije sustave za otkrivanje zamjene identiteta glumca. Tijekom testiranja, sustav je otkrio 99% lažnih videozapisa.

Znanstvenici vjeruju da će njihov razvoj pomoći u razvoju automatiziranih alata za otkrivanje lažnih videa koji sadrže propagandu ili dezinformacije.

Čitaj više:

Pogledajte "tihi" dron s novom generacijom ionskog pogona

Znanstvenici su shvatili kako pronaći tamnu tvar koristeći konvencionalnu tvornicu

Astronomi su proučavali 4 skupa zvijezda u Mliječnom putu: jedna od njih se čudno ponaša