PG nustato filmo žanrą iš garso takelio

Savo tyrime komanda išnagrinėjo 110 populiarių filmų, išleistų 2014–2019 m., duomenų rinkinį.

Jie naudojo internetinių filmų duomenų bazės (IMDb) žanrų klasifikaciją, kad kiekvieną filmą apibūdintų kaip veiksmo, komedijos, dramos, siaubo ar romantikos.

Tada jie pritaikė gilaus mokymosi tinklą,kuri iš kiekvieno filmo muzikos ir partitūros išgavo klausos informaciją, tokią kaip tembras, harmonija, melodija, ritmas ir tonas. Ji naudojo mašininį mokymąsi analizuodama šias muzikines savybes ir sugebėjo tiksliai klasifikuoti kiekvieno filmo žanrus, remdamasi vien šiomis savybėmis.

Mokslininkai taip pat aiškino šiuos modeliusnustatyti, kurios muzikinės savybės labiausiai rodo žanrų skirtumus. Modeliai nenurodė, kokio tipo natos ar instrumentai buvo susieti su kiekvienu žanru, tačiau jie nustatė, kad toninės ir tembrinės savybės yra svarbiausios prognozuojant kino žanrą.

Intuityviai aišku, kad garso takeliai yra skirtingifilmų žanrai naudoja tam tikrus muzikinius elementus. „Rom-com“ skamba gausios stygos ir lyriškos melodijos, o siaubo filmuose gausu nerimą keliančių, aštrių dažnių ir bauginančių nesutarimų.

Tačiau mokslininkai nusprendė rasti kiekybinįįrodymai, kad filmo garso takelio elementai gali būti naudojami filmo žanrui apibūdinti. Jie pirmieji garso takeliui pritaikė gilaus mokymosi modelius, norėdami išsiaiškinti, ar kompiuteris gali nuspėti filmo žanrą vien pagal muziką. Paaiškėjo, kad dirbtinis intelektas tikrai gali tiksliai klasifikuoti filmo žanrą, naudodamas mašininį mokymąsi. Tyrimas patvirtino mokslininkų prielaidą, kad filmo garso takelis daro didelę įtaką tam, kaip žmonės suvokia skirtingas nuotraukas.

Skaityti Toliau

Unikalus laivas per dvi minutes virsta povandeniniu laivu ir yra nematomas priešui

Fizikai atšaldė atomus iki žemiausios temperatūros pasaulyje

Išsamiausias Visatos modelis buvo paskelbtas internete. Kiekvienas gali tai studijuoti