AI determina o gênero do filme a partir da trilha sonora

No seu estudo, a equipa examinou um conjunto de dados de 110 filmes populares lançados entre 2014 e 2019.

Eles usaram a classificação de gênero do Internet Movie Database (IMDb) para rotular cada filme como ação, comédia, drama, terror ou romance.

Em seguida, eles aplicaram uma rede de aprendizagem profunda,que extraiu informações auditivas como timbre, harmonia, melodia, ritmo e tom da música e partitura de cada filme. Ela usou o aprendizado de máquina para analisar essas características musicais e foi capaz de classificar com precisão os gêneros de cada filme apenas com base nessas características.

Os cientistas também interpretaram esses modelos paraidentificar quais características musicais mais indicam diferenças entre os gêneros. Os modelos não indicaram quais tipos de notas ou instrumentos estavam associados a cada gênero, mas descobriram que as características tonais e de timbre são mais importantes na previsão de um gênero de filme.

É intuitivamente claro que as trilhas sonoras de diferentesgêneros de filmes usam certos elementos musicais. Rom-coms apresentam cordas ricas e melodias líricas, enquanto filmes de terror são cheios de frequências perturbadoras e estridentes e notas assustadoramente discordantes.

No entanto, os cientistas decidiram encontrarevidências de que elementos da trilha sonora de um filme podem ser usados ​​para caracterizar o gênero de um filme. Eles foram os primeiros a aplicar modelos de aprendizado profundo a uma trilha sonora para ver se um computador pode prever um gênero de filme baseado apenas na música. Descobriu-se que a IA pode, de fato, classificar com precisão o gênero de um filme usando o aprendizado de máquina. O estudo confirmou a suposição dos cientistas de que a trilha sonora do filme influencia fortemente a maneira como as pessoas percebem as diferentes imagens.

Ler Avançar

Um barco único se transforma em um submarino em dois minutos e é invisível para o inimigo

Os físicos resfriaram átomos à temperatura mais baixa do mundo

O modelo mais detalhado do Universo foi publicado online. Qualquer um pode estudar isso