W swoim badaniu zespół przeanalizował zestaw danych 110 popularnych filmów wydanych w latach 2014-2019.
Następnie zastosowali sieć głębokiego uczenia się,który wydobył informacje słuchowe, takie jak barwa, harmonia, melodia, rytm i ton z muzyki i partytury każdego filmu. Wykorzystała uczenie maszynowe do analizy tych cech muzycznych i była w stanie dokładnie sklasyfikować gatunki każdego filmu na podstawie samych tych cech.
Naukowcy również zinterpretowali te modele, aby:określić, które cechy muzyczne najbardziej wskazują na różnice między gatunkami. Modele nie wskazywały, jakie rodzaje nut lub instrumentów były związane z każdym gatunkiem, ale okazało się, że cechy tonalne i barwy są najważniejsze w przewidywaniu gatunku filmowego.
Intuicyjnie jest jasne, że ścieżki dźwiękowe różnychgatunki filmów wykorzystują pewne elementy muzyczne. Rom-comy zawierają bogate smyczki i liryczne melodie, podczas gdy horrory pełne są niepokojących, przenikliwych częstotliwości i przerażająco sprzecznych nut.
Jednak naukowcy postanowili znaleźć ilościowedowód na to, że elementy ścieżki dźwiękowej filmu można wykorzystać do scharakteryzowania gatunku filmu. Jako pierwsi zastosowali modele głębokiego uczenia do ścieżki dźwiękowej, aby sprawdzić, czy komputer może przewidzieć gatunek filmowy na podstawie samej muzyki. Okazało się, że sztuczna inteligencja rzeczywiście potrafi precyzyjnie klasyfikować gatunek filmu za pomocą uczenia maszynowego. Badanie potwierdziło założenie naukowców, że ścieżka dźwiękowa filmu silnie wpływa na sposób, w jaki ludzie postrzegają różne obrazy.
Czytać Dalej
Unikalna łódź zamienia się w łódź podwodną w ciągu dwóch minut i jest niewidoczna dla wroga
Fizycy schłodzili atomy do najniższej temperatury na świecie
Najbardziej szczegółowy model Wszechświata został opublikowany w Internecie. Każdy może to studiować