基於使用者興趣量表與節奏控制的家庭音樂影片剪輯系統

Abstract

本論文目的是讓一般家庭使用者在最輕鬆的情況下，輸入他所拍攝的家庭影片以及一段他喜歡的音樂，系統就會自動結合此段影片與音樂並生成一段有節奏性的MV(Music Video)。與以往的自動生成影片系統相比，本系統的特色在於使用一些剪接理論與美學的觀念，並且將其轉化成可行之演算法。此外，我們也加入心理學方面的研究，嚐試從使用者在觀賞影片時的生理反應，包括眼睛運動與表情，作為我們標記每段影片重要性的依據，並將其分析的數據轉成影片摘要的結果。最後將系統進一步用UI來呈現，嚐試讓使用者可以參與修改電腦最後分析的結果。也加入與以往商用剪接軟體不同的操作想法，企圖在剪接表現上創造不同的可能。

In this dissertation, we propose a novel home video editing system for generating music videos (MV) based on rhythmic control and the user interests. With the aid of rhythmic control from editing theories, the developed system is able to generate appealing and rhythmic music videos. We construct a module called “Interest Meter” to analyze variations of viewer’s blink rate, eye movement and facial expression when s/he watches unorganized raw home videos. This system transforms user’s behaviors into clues for determining important parts of video shots. Moreover, the friendly user interface allows novices to efficiently edit videos without difficulty. Experimental results show that this new editing mechanism can effectively generate music video summaries and can greatly reduce efforts of manual editing.