基於影像集之照片重構

Abstract

本論文提出一由影像集之照片重構之系統。傳統上如果想對一張已存在的照片，重拍出另一張相同場景、角度，甚至建築物之立體透視角度也完全一樣，所必需要包含的條件有照相的位置、角度以及鏡頭種類等。然而，這對於一位專業攝影師來說，是非常困難的一件事情，更何況是業餘攝影師。我們提供一種讓使用者能夠較容易重構照片之系統。使用者只需要到已存在之相片場景中，隨意在該相片之相機角度附近拍幾張照片，本系統利用Structure from motion (SfM)分析該照片集之相對關係，估算每張照片的相機參數以及場景的3D資訊。接著，藉由使用者給的對應資訊，本系統可以自動估算出老照片之相機參數並且產生初始的照片重構結果，接著利用Inpainting以及Content-preserving warping產生出最後的結果，達到照片重構之目標。此外，若使用者無法重回現場拍照，本系統還提供使用者可以收集網路上的照片，達成相同的目的。

This thesis proposes a novel system that ``rephotographs' a historical photograph with a collection of images. Rather than finding the accurate viewpoint of the historical photo, users only need to take a number of photographs around the target scene. We adopt the structure from motion technique to estimate the spatial relationship among these photographs, and construct a 3D point cloud. Based on the user-specified correspondences between the projected 3D point cloud and historical photograph, the camera parameters of the historical photograph can be estimated. We then combine forwarding and backward warping images to render an initial result. Finally, inpainting and content-preserving warping are used to refine it, and the photograph at the same viewpoint of the historical one can be produced by this photo collection.