跳到主要內容

臺灣博碩士論文加值系統

(100.28.0.143) 您好!臺灣時間:2024/07/18 08:17
字體大小: 字級放大   字級縮小   預設字形  
回查詢結果 :::

詳目顯示

: 
twitterline
研究生:許紹唐
論文名稱:使用多重攝影機影像的立體視差估算
論文名稱(外文):Disparity Estimation Using Multiple Images
指導教授:杭學鳴杭學鳴引用關係
學位類別:碩士
校院名稱:國立交通大學
系所名稱:電子工程系所
學門:工程學門
學類:電資工程學類
論文種類:學術論文
論文出版年:2008
畢業學年度:96
語文別:中文
論文頁數:59
中文關鍵詞:視差
外文關鍵詞:image-based renderingdisparity
相關次數:
  • 被引用被引用:0
  • 點閱點閱:398
  • 評分評分:
  • 下載下載:73
  • 收藏至我的研究室書目清單書目收藏:1
Free viewpoint TV (FTV) 是一個很新的立體影像技術,它可以由已知的multiple images合成虛擬視點的影像。藉著校準過的攝影機陣列所截取到的空間中景物的影像,FTV系統幾乎能夠合成任何位置所能拍攝到的影像,因此它可以讓觀眾自由的選擇自己所喜歡的視角去欣賞影片。而在FTV系統的實務上,一種快速的方式是以ray-space representation來當做image-based rendering技術的基礎。
FTV系統一個很重要的基本原素就是估算multiple images中物體的視差值,而這也就是本論文所探討的焦點。在本論文中,我們的目標是發展準確的視差估算技術以增加image-based rendering的可靠度。我們發現,四台攝影機的架構比起傳統立體影像研究中常見的兩台攝影機架構,在視差估算以及image-based rendering方面提供了較多有用的資訊,因此我們將兩台攝影機的架構推廣為四台攝影機。
為了增進遮蔽區域以及無紋理區域的視差估算的準確度,我們提出了單邊視窗對立體匹配方法。以及採用了動態規劃演算法求得整體上較佳的視差值。我們在Middlebury College提供的包含了擁有視差圖的ground truth的立體影像資料上測試我們的演算法的視差估算能力。並且以blender合成的虛擬場景的multi-camera影像來實驗我們的四台攝影機架構的image-based rendering演算法,結果顯示這樣的做法有不錯的成效,值得進一步發展。
Free-viewpoint TV (FTV) is a novel technique that can render a virtual scene based on the given multiple images and thus it allows people to choose their favorite viewpoint freely. The 3-D objects are captured by a calibrated camera array. The suggested FTV system can synthesize the projected images of these 3-D objects from nearly any virtual camera position. In practical implementation, researchers use the image-based rendering technique based on the ray-space representation.
One essential element in the FTV synthesis procedure is to identify the object disparity information, which is the focus of this thesis. We adopt the ray-space representation and develop accurate matching techniques to increase the reliability of image-based rendering. We find that, comparing to the traditional 2-carmea stereo set-up, a 4-camera structure provides a much better results on disparity estimation and thus image rendering.
To improve the accuracy on estimating the correct disparity values in the occluded and non-textured regions, we propose the single-sided window pair method. Also, we employ the dynamic programming algorithm to find the global optimal disparity estimate. We test our algorithms on the Middlebury College stereo image data sets with ground-truth disparity values. Also, we examine the 4-camera algorithm on the synthesized multi-camera scenes. The results are very encouraging.
中文提要 …………………………………………………… i
英文提要 …………………………………………………… iii
誌謝 …………………………………………………… iv
目錄 …………………………………………………… v
表目錄 …………………………………………………… vii
圖目錄 …………………………………………………… viii
第一章 緒論……………………………………………… 1
第二章 背景資料………………………………………… 4
2.1 基於圖像的繪製………………………………… 4
2.2 針孔成像與相機校準…………………………… 5
2.2.1 針孔成像與透鏡成像…………………………… 5
2.2.2 針孔成像的公式………………………………… 6
2.3 光線空間表示法………………………………… 8
2.4 立體匹配………………………………………… 10
2.4.1 基於像素的立體匹配…………………………… 10
2.4.2 基於視窗的立體匹配…………………………… 11
2.4.3 動態規劃………………………………………… 11
2.5 Imagemagick 與PNG …………………………… 12
2.6 Blender………………………………………… 13
第三章 遮蔽對視差估算的影響………………………… 14
3.1 遮蔽區域產生的問題…………………………… 14
3.2 推廣至多張輸入影像的架構…………………… 17
3.3 單邊視窗對立體匹配…………………………… 19
第四章 動態規劃與總體最佳化………………………… 23
4.1 動態規劃的基本想法與流程…………………… 25
4.2 基本的總體最佳化概念………………………… 25
4.3 對稱立體演算法………………………………… 29
4.3.1 對稱立體演算法的基本限制…………………… 29
4.3.2 以動態規劃實現對稱立體演算法……………… 30
4.3.3 以四張輸入影像的架構修補對稱立體演算法… 32
第五章 實驗結果………………………………………… 34
5.1 實驗架構………………………………………… 34
5.1.1 實驗用的影像…………………………………… 34
5.1.2 實驗流程與變因………………………………… 36
5.2 視差估算的實驗結果…………………………… 38
5.2.1 由兩張輸入影像推廣至四張輸入影像的架構… 38
5.2.2 以總體最佳化取代WTA ………………………… 41
5.3 Image-based rendering 的實驗結果 ………… 44
5.3.1 場景一的實驗結果……………………………… 45
5.3.2 場景二的實驗結果……………………………… 47
5.3.3 場景三的實驗結果……………………………… 51
第六章 結論與未來工作………………………………… 55
參考文獻 …………………………………………………… 58
[1] T. Fujii and M. Tanimoto, Furo-Cho and Chikusa-ku, "Free-Viewpoint TV System
Based on Ray-Space Representation", Proceedings of SPIE Vol. 4864(2002) , pp
175-189
[2] Liang-Zhong Fan, Mei Yu, Gang-yi Jiang, Rang-ding Wang and Yong-deak Kim,
"New Ray-Space Interpolation Method For Free Viewpoint Video System", Sixth
International Conference on Parallel and Distributed Computing Applications and
Technologies (PDCAT'05) 2005, pp 684-688
[3] T. Kanade and M. Okutomi, “A Stereo Matching Algorithm with an Adaptive
Window: Theory and Experiment”, IEEE Trans. PAMI, vo1.16, no. 9(1989), pp
920-932
[4] G. Van Meerbergen, M. Vergauwen, M. Pollefeys and L. Van Gool, “A
Hierarchical Symmetric Stereo Algorithm Using Dynamic Programming”,
International Journal of Computer Vision 47(2002), pp 275–285
[5] N. Anantrasirichai, C. Nishan Canagarajah , David W. Redmill and David R. Bull,
“Dynamic Programming for Multi-View Disparity/Depth Estimation”, ICASSP 2006
pp II-269-272
[6] Ruigang Y. and Marc P., “Multi-Resolution Real-Time Stereo on Commodity
Graphics Hardware”, Proceedings of the 2003 IEEE Computer Society Conference on
Computer Vision and Pattern Recognition (CVPR’03), pp I-211-217
[7] Daniel S. and Richard S., “A Taxonomy and Evaluation of Dense Two-Frame
Stereo Correspondence Algorithms”, International Journal of Computer Vision (2001),
pp 7-42
[8] F. Shao., G. Jiang, K. Chen, M. Yu and T. Choi, “Ray-Space Data Compression
Based on Prediction Technique”, International Conference on Computer Graphics,
Imaging and Visualization (2005), pp 347-350
[9] T. Kobayashi, T. Fujii, T. Kimoto and M. Tanimoto, “Interpolation of Ray-Space
Data by Adaptive Filtering” In Three-Dimensional Image Capture and Applications
III, Brian D. Corner, Joseph H. Nurre, Editors, Proceedings of SPIE Vol. 3958 (2000)
pp 252-259
[10] O. Faugeras, “Three-Dimensional Computer Vision a geometric viewpoint”,
1993
[11] D. Scharstein and C. Pal. “Learning conditional random fields for stereo”, In
IEEE Computer Society Conference on Computer Vision and Pattern Recognition
(2007), pp 1-8
[12] D. Scharstein and R. Szeliski. “High-accuracy stereo depth maps using structured
light.” In IEEE Computer Society Conference on Computer Vision and Pattern
Recognition (2003), volume 1, pp 195-202
QRCODE
 
 
 
 
 
                                                                                                                                                                                                                                                                                                                                                                                                               
第一頁 上一頁 下一頁 最後一頁 top