In hun onderzoek onderzocht het team een dataset van 110 populaire films die tussen 2014 en 2019 zijn uitgebracht.
Vervolgens pasten ze een deep learning-netwerk toe,die auditieve informatie zoals timbre, harmonie, melodie, ritme en toon uit de muziek en score van elke film haalde. Ze gebruikte machine learning om deze muzikale kenmerken te analyseren en was in staat om de genres van elke film nauwkeurig te classificeren op basis van alleen die kenmerken.
Wetenschappers hebben deze modellen ook geïnterpreteerd als:identificeren welke muzikale kenmerken het meest duiden op verschillen tussen genres. De modellen gaven niet aan welke soorten noten of instrumenten bij elk genre horen, maar ze vonden dat toon- en timbrekenmerken het belangrijkst zijn bij het voorspellen van een filmgenre.
Het is intuïtief duidelijk dat de soundtracks van verschillendefilmgenres gebruiken bepaalde muzikale elementen. Rom-coms bevatten rijke strijkers en lyrische melodieën, terwijl horrorfilms vol verontrustende, schrille frequenties en angstaanjagend dissonante tonen zijn.
Wetenschappers besloten echter om kwantitatievebewijs dat elementen van de soundtrack van een film kunnen worden gebruikt om het genre van een film te karakteriseren. Zij waren de eersten die deep learning-modellen toepasten op een soundtrack om te zien of een computer een filmgenre kon voorspellen op basis van alleen muziek. Het bleek dat AI inderdaad het genre van een film nauwkeurig kan classificeren met behulp van machine learning. De studie bevestigde de aanname van de wetenschappers dat de soundtrack van de film de manier waarop mensen verschillende foto's waarnemen sterk beïnvloedt.
Lezen Verder
Een unieke boot verandert in twee minuten in een onderzeeër en is onzichtbaar voor de vijand
Natuurkundigen hebben atomen afgekoeld tot de laagste temperatuur ter wereld
Het meest gedetailleerde model van het heelal is online gepubliceerd. Iedereen kan het bestuderen