利用最佳化方法於紅藍立體影像全彩化

Abstract

紅藍立體影像是一個廣泛用來觀看立體影像的方法之一，它可以簡 單地使用紅藍眼鏡就能看到立體效果，優點在於便宜跟方便取得；然 而，它卻不能完整呈現出原本圖片中該有的顏色，也就是有所謂的顏 色失真；再者，它在觀看時也常會造成鬼影的效果，也就是顏色時而 紅時而藍，取決於你用哪隻眼睛觀看。本論文提出了改善觀看紅藍立 體影像的方法，藉由把紅藍立體影像全彩化且藉由較好的觀看裝置來 達到較佳的觀看感覺。本篇論文的想法是利用紅藍立體影像顏色是互 補的特性，也就是在某一眼影像遺失的顏色資訊可以在另一眼影像中 補回，藉由利用這個特性來把左右兩眼影像缺失的顏色通道補回來。 本篇論文把這個問題設定成標籤問題(labeling problem)，藉由標記顏色 資訊來回復左右眼影像。本篇利用了像素比對、顏色關聯性及影像空 間上的平滑度當作是標記顏色的考量，並且利用了最佳化圖形切割方 法(graph cut) 來解決這個問題。此外，也提出了漸進式回復左右眼影 像的方式，利用左右眼缺少顏色資訊的不同及其回復的難易度來做漸 進式的回復，先回復缺少顏色少的影像，再利用其重建的結果來回復 另一張的影像以增強回復的效果。同時，本篇提出的作法與原本未處 理的紅藍影像以及用直覺的顏色傳遞方法(深度圖方法)給使用者觀看並 做比較。結果顯示我們受測者訪談跟回復結果都比其他兩者還要好， 因為我們我有較少的鬼影以及能夠呈現的色彩其真實性較高。

The anaglyph image, primarily used for red-cyan eyeglasses, has the following flaws: it only reproduces partial colors, often brings retinal rivalry and ghosting to viewers. In this work, we propose a method for anaglyph image re-coloring to enhance the color perception and reduce the visual fatigue. When an anaglyph image is given, a corresponding stereo pair can be derived. The goal of this work is to restore lost colors of the stereo pair and thus convert the anaglyph into full-color 3D contents. Our main idea is to transfer existing information of the images to each other and we formulate this problem as a labeling problem. We integrate terms of pixel matching, color correlation, and spatial smoothness into the proposed cost function. Graph cuts algorithm is also utilized to solve for the local minimum. We also proposed a progressive restoration scheme due to the restoration difficulty of right and left eye image. Finally, we compare our results with the input anaglyph and the results of a disparity-based (na‥ıve color transfer method) color restoration. Our user study shows that the results from our method improve the viewing experience for anaglyph contents.