В своето проучване екипът изследва набор от данни от 110 популярни филма, пуснати между 2014 и 2019 г.
След това приложиха мрежа за дълбоко обучение,която извлича слухова информация като тембър, хармония, мелодия, ритъм и тон от музиката и партитурата на всеки филм. Тя използва машинно обучение, за да анализира тези музикални характеристики и успя да класифицира точно жанровете на всеки филм въз основа само на тези характеристики.
Учените също са интерпретирали тези моделиопределят кои музикални характеристики най -много показват разлики между жанровете. Моделите не посочват кои видове ноти или инструменти са свързани с всеки жанр, но установяват, че характеристиките на тона и тембра са най -важни при прогнозирането на филмов жанр.
Интуитивно е ясно, че саундтраците са различнижанровете на филмите използват определени музикални елементи. Rom-coms представят богати струни и лирични мелодии, докато филмите на ужасите са пълни с тревожни, пронизителни честоти и плашещо противоречиви нотки.
Учените обаче решиха да намерят количественодоказателства, че елементи от саундтрака на филм могат да се използват за характеризиране на жанра на филма. Те бяха първите, които приложиха модели за дълбоко обучение към саундтрак, за да видят дали компютърът може да предвиди филмов жанр въз основа само на музика. Оказа се, че AI наистина може точно да класифицира жанра на филм, използвайки машинно обучение. Изследването потвърди предположението на учените, че саундтракът на филма оказва силно влияние върху начина, по който хората възприемат различни картини.
Чета По -нататък
Уникална лодка се превръща в подводница за две минути и е невидима за врага
Физиците са охладили атомите до най -ниската температура в света
Най -подробният модел на Вселената е публикуван онлайн. Всеки може да го изучава