Научници са МИТ-а представили су систем вештачке интелигенције (АИ) Фолеи Мусиц, који генерише музику на основу
Истраживачи верују да АИ модел којиствара музику засновану на људским покретима, може постати основа за неколико апликација - од аутоматског додавања звучних ефеката видео записима до стварања импресивних искустава у виртуелној стварности. Истраживачи примећују да људи имају и ову вештину - на пример, када разумеју говор особе кроз усне.
Фолеи Мусиц скреће пажњу на кључне тачкетело (25 поена) и прсти (20 поена) као посредне визуелне тачке сидрења, које користи за моделирање покрета тела и руку. Систем затим те покрете преводи у музичке ноте, узимајући у обзир јачину звука. Тако да може свирати хармонику, бас гитару, фагот, виолончело, гитару, клавир, укулелеле и друге инструменте.
Током експеримената, истраживачи су обучавали ФолеијаМузика до три скупа података који садрже 1.000 музичких видео записа у 11 категорија. Тако су успели да саставе корпус видео записа различите сложености - упутства са веб странице АтинПиано, аматерске видео записе са ИоуТубе канала, одломке са концерата и друге податке.
Истраживачи су поставили Фолеи Мусиц 450видео. Затим су насталу музику дали научницима, који су оценили резултат. У неким случајевима су приметили да је „музика попут обраде квалитетног бенда“.
Стручњаци су открили да се музика коју производи Фолеи Мусиц тешко разликује од стварних снимака. Штавише, АИ може побољшати квалитет звука, семантичко поравнање и време.
Погледајте и:
—&нбсп;Погледајте 3Д мапу Универзума: требало је 20 година да се састави и већ је изненадила научнике
—&нбсп;Комета НЕОВИСЕ је видљива у Русији. Где то видети, где погледати и како снимити фотографију
—&нбсп;Три астероида лете ка Земљи, а један од њих је потенцијално опасан. Постоји ли претња?