במחקר שלהם, הצוות בחן מערך נתונים של 110 סרטים פופולריים שיצאו בין 2014 ל-2019.
ואז הם יישמו רשת למידה עמוקה,שחילץ מידע שמיעתי כגון גוון, הרמוניה, מנגינה, קצב וטון מהמוזיקה ומהניקוד של כל סרט. היא השתמשה בלמידת מכונה כדי לנתח את המאפיינים המוסיקליים הללו והצליחה לסווג במדויק את הז'אנרים של כל סרט על סמך מאפיינים אלה בלבד.
מדענים פירשו גם מודלים אלהלקבוע אילו מאפיינים מוזיקליים מצביעים ביותר על הבדלים בין הז'אנרים. המודלים לא ציינו אילו סוגי תווים או מכשירים קשורים לכל ז'אנר, אך הם מצאו כי מאפייני טון וטמבר הם החשובים ביותר בניבוי ז'אנר קולנוע.
ברור באופן אינטואיטיבי שפסי הקול של שוניםז'אנרים של סרטים משתמשים באלמנטים מוזיקליים מסוימים. Rom-coms כוללים מיתרים עשירים ומנגינות ליריות, בעוד שסרטי אימה מלאים בתדרים מטרידים וצווחניים ותווים מפחידים להפליא.
עם זאת, המדענים החליטו למצוא כמותיעדות לכך שניתן להשתמש באלמנטים של פס הקול של סרט לאפיון הז'אנר של סרט. הם היו הראשונים ליישם מודלים של למידה עמוקה על פסקול כדי לראות אם מחשב יכול לחזות ז'אנר סרטים המבוסס על מוזיקה בלבד. התברר כי AI אכן יכול לסווג במדויק את ז'אנר הסרט באמצעות למידת מכונה. המחקר אישר את הנחת המדענים כי פסקול הסרט משפיע רבות על האופן שבו אנשים תופסים תמונות שונות.
לקרוא נוסף
סירה ייחודית הופכת לצוללת תוך שתי דקות ואינה נראית לאויב
פיזיקאים קיררו אטומים לטמפרטורה הנמוכה ביותר בעולם
המודל המפורט ביותר של היקום פורסם באינטרנט. כל אחד יכול ללמוד את זה