請用此 Handle URI 來引用此文件:
http://tdr.lib.ntu.edu.tw/jspui/handle/123456789/53708
標題: | 利用同步低幀率彩色資料之高幀率單色視訊彩色化技術 Colorization of High-Frame-Rate Monochrome Videos Using Synchronized Low-Frame-Rate Color Data |
作者: | Ching-Fan Chiang 江擎帆 |
指導教授: | 盧奕璋(Yi-Chang Lu) |
關鍵字: | 高幀率影像,多相機系統,彩色化,立體視覺,運動估測, High-frame rate video,multiple camera system,colorization,stereo matching,motion estimation, |
出版年 : | 2015 |
學位: | 碩士 |
摘要: | 彩色高幀率攝影機的價格相對昂貴,且需要大量記憶空間儲存每秒所得的資訊,而單色之高幀率攝影機價格較低,又只有單色的資料需要儲存。如果可以將灰階之高幀率影像進行塗色,如此便可得到彩色高幀率視訊之效果,同時減少影像系統的資料傳輸量。而灰階影像著色一直是一門很重要的領域,改善影像著色品質的方法不斷被提出,但是其往往有所限制,例如是否可自動化,顏色是否準確等等的問題。 我們提出一個單色高幀率攝影彩色化系統,在單色高幀率攝影機之兩側各加上一部低幀率彩色攝影機,透過外部觸發控制三部攝影機的取像時間。低幀率彩色攝影機雖然每秒張數少,但是毎固定間隔時間可以提供單色高幀率攝影機色彩的資訊,再利用立體視覺比對,以及運動估測演算法,提出的系統可以將單色高幀率影像彩色化予以實現,這個過程是完全自動化的,而且保留了原本顏色的真實性。 最後,由於立體視覺上色與運動估測上色是相當耗時的演算法,再加上一次處理非常多的影像,整體運算量相當大,因此我們實作於硬體,硬體部分分成兩個部分,第一個部分是立體視覺比對上色硬體,上色一張影像可於22.5 ms完成,與軟體相比,加速可達 105 倍,以 TSMC90 nm製程實現,晶片尺寸為4.73 mm2 ,核心尺寸為2.94 mm2,運作頻率設計最高為100 MHz,功率消耗為327.6 mW 。第二部分是運動估測上色硬體,上色一張影像可於130ms完成,以 TSMC90 nm製程實現,晶片尺寸為1.18 mm2,核心尺寸為0.43mm2,運作頻率設計最高為100 MHz,功率消耗為13.45 mW 。 The price of high-frame rate color cameras is relatively expensive, and it needs plenty of memory space to store captured video information. If we can generate highframe rate color video by colorizing high-frame rate monochrome video, the total cost can be greatly reduced. We propose a high-frame rate monochrome video colorization system which is composed of one high-frame rate monochrome camera and two low-frame rate color cameras, and these three cameras are synchronized by a common external trigger signal. Although low-frame rate cameras have less information per second, it provides the color clue for the high-frame rate monochrome camera. With stereo matching and motion estimation algorithms, colorization of high-frame rate monochrome video can be realized using the proposed system. This process can be fully automated and the color quality is high. In this thesis, we implement the hardware of a stereo matching algorithm and a motion estimation algorithm to reduce the processing time. The entire process of stereo matching can be completed in 22.5 ms. Compared to software results, 105X speed-up can be achieved.The chip is implemented using TSMC 90 nm cell library.The chip area is 4.73 mm2 , and the core area is 2.94 mm2. The chip consumes 327.6 mW when operating at 100 MHz. On the other hand, the entire process of a motion estimation algorithm can be completed in 130 ms. The chip is implemented using TSMC90 nm cell library. The chip area is 1.18 mm2, and the core area is 0.43 mm. The chip consumes 13.45 mW when operating at 100 MHz. |
URI: | http://tdr.lib.ntu.edu.tw/jspui/handle/123456789/53708 |
全文授權: | 有償授權 |
顯示於系所單位: | 電子工程學研究所 |
文件中的檔案:
檔案 | 大小 | 格式 | |
---|---|---|---|
ntu-104-1.pdf 目前未授權公開取用 | 9.12 MB | Adobe PDF |
系統中的文件,除了特別指名其著作權條款之外,均受到著作權保護,並且保留所有的權利。