AI determină genul filmului din coloana sonoră

În studiul lor, echipa a examinat un set de date de 110 filme populare lansate între 2014 și 2019.

Ei au folosit clasificarea genurilor listată în Internet Movie Database (IMDb) pentru a eticheta fiecare film ca acțiune, comedie, dramă, groază sau romantism.

Apoi au aplicat o rețea de învățare profundă,care a extras informații auditive precum timbru, armonie, melodie, ritm și ton din muzica și partitura fiecărui film. Ea a folosit învățarea automată pentru a analiza aceste caracteristici muzicale și a reușit să clasifice cu exactitate genurile fiecărui film numai pe baza acelor caracteristici.

Oamenii de știință au interpretat, de asemenea, aceste modeledeterminați ce caracteristici muzicale indică cel mai mult diferențele dintre genuri. Modelele nu au indicat ce tipuri de note sau instrumente erau asociate cu fiecare gen, dar au constatat că caracteristicile tonale și timbrale sunt cele mai importante în prezicerea unui gen de film.

Este intuitiv clar că coloanele sonore ale diferitelorgenurile de filme folosesc anumite elemente muzicale. Rom-com-urile prezintă corzi bogate și melodii lirice, în timp ce filmele de groază sunt pline de frecvențe tulburătoare, stridente și note înfricoșător de discordante.

Cu toate acestea, oamenii de știință au decis să găsească cantitativdovezi că elementele coloanei sonore ale unui film pot fi utilizate pentru a caracteriza genul unui film. Au fost primii care au aplicat modele de învățare profundă pe o coloană sonoră pentru a vedea dacă un computer ar putea prezice un gen de film bazat doar pe muzică. S-a dovedit că AI poate într-adevăr clasifica cu exactitate genul unui film folosind învățarea automată. Studiul a confirmat presupunerea oamenilor de știință că coloana sonoră a filmului influențează puternic modul în care oamenii percep diferite imagini.

A citi Mai departe

O barcă unică se transformă într-un submarin în două minute și este invizibilă pentru inamic

Fizicienii au răcit atomii la cea mai scăzută temperatură din lume

Cel mai detaliat model al Universului a fost publicat online. Oricine îl poate studia