互動式視訊多媒體拼貼

Abstract

隨著人們普遍的使用照相機與攝影機以及網路的普及化，人們自製和分享多媒體影音也更加的容易。由於每個人所擁有以及觀看的多媒體影音內容數量越來越多，種類也越來越複雜，如何有效率地觀看這些多媒體內容也成了一個需要解決的課題。在本論文中，我們基於兩個目的提出了一種以拼貼和互動的方式呈現多媒體影音內容的方法。第一個目的是，由於希望多個視訊多媒體能在同一個畫面呈現，我們希望能更有效的利用畫面的空間，此即每個視訊多媒體不重要的區域可被遮蓋住。第二，我們希望在視訊多媒體播放的同時，可以提供一些互動功能讓使用者在觀看的時候更有參與感。此拼貼和互動的方法分為三個步驟： 一、我們首先對單個影片做分鏡偵測（shot detection）：由於我們希望畫面上每一個影片都以一個分鏡為單位，以利拼貼的空間利用和視覺效果，此部份我們採用顏色統計差異（color histogram difference）的方法來把每個影片分成多個分鏡。 二、找出每個分鏡中的顯著區域（saliency region）：為了拼貼空間的有效利用，我們對每個影片做一些事前處理，希望保留影片中物體的移動並使重要內容盡量在分鏡的中心播放以利拼貼空間的使用效率。 三、設計互動式隨機拼貼的演算法，使得使用者在觀看多個影片拼貼結果的時候，能夠任意添加、刪除和移動這些影片分鏡。