Ve své studii tým zkoumal datový soubor 110 populárních filmů vydaných v letech 2014 až 2019.
Poté použili síť hlubokého učení,který extrahoval sluchové informace, jako je zabarvení, harmonie, melodie, rytmus a tón z hudby a partitury každého filmu. K analýze těchto hudebních charakteristik použila strojové učení a dokázala přesně klasifikovat žánry každého filmu pouze na základě těchto charakteristik.
Vědci tyto modely také interpretovaliurčit, které hudební charakteristiky nejvíce indikují rozdíly mezi žánry. Modely neuvedly, které typy not nebo nástrojů byly spojeny s každým žánrem, ale zjistily, že při předpovídání filmového žánru jsou nejdůležitější tonální a timbrové charakteristiky.
Je intuitivně jasné, že zvukové stopy různýchžánry filmů používají určité hudební prvky. Romské komiksy se vyznačují bohatými strunami a lyrickými melodiemi, zatímco hororové filmy jsou plné rušivých, pronikavých frekvencí a děsivě nesouhlasných not.
Vědci se však rozhodli najít kvantitativnídůkaz, že prvky filmového soundtracku lze použít k charakterizaci žánru filmu. Byli první, kdo aplikoval modely hlubokého učení na soundtrack, aby zjistil, zda počítač dokáže předpovídat filmový žánr pouze na základě hudby. Ukázalo se, že AI skutečně dokáže přesně zařadit žánr filmu pomocí strojového učení. Studie potvrdila předpoklad vědců, že zvukový doprovod filmu silně ovlivňuje způsob, jakým lidé vnímají různé obrázky.
Číst Dále
Unikátní loď se během dvou minut promění v ponorku a je pro nepřítele neviditelná
Fyzici ochladili atomy na nejnižší teplotu na světě
Nejpodrobnější model vesmíru byl publikován online. Každý to může studovat