跳到主要內容

臺灣博碩士論文加值系統

(44.222.64.76) 您好!臺灣時間:2024/06/14 09:02
字體大小: 字級放大   字級縮小   預設字形  
回查詢結果 :::

詳目顯示

: 
twitterline
研究生:謝家勇
研究生(外文):Hsieh, Chia-Yung
論文名稱:基於長時間背景模型產生之深度繪圖法去遮蔽區域補洞技術
論文名稱(外文):Depth Image-Based Rendering Based on Temporal Hole Filling with Background Sprite Generation
指導教授:賴文能賴文能引用關係林國祥林國祥引用關係
指導教授(外文):Wen-Nung LieGuo-Shiang Lin
口試委員:楊家輝郭景明鍾國亮
口試委員(外文):Jar-Ferr YangJing-Ming GuoKuo-Liang Chung
口試日期:2013-07-26
學位類別:碩士
校院名稱:國立中正大學
系所名稱:電機工程研究所
學門:工程學門
學類:電資工程學類
論文種類:學術論文
論文出版年:2013
畢業學年度:101
語文別:中文
論文頁數:68
中文關鍵詞:Sprite關鍵畫面深度繪圖法補洞技術
外文關鍵詞:SpritekeyframeDIBRhole filling
相關次數:
  • 被引用被引用:1
  • 點閱點閱:374
  • 評分評分:
  • 下載下載:21
  • 收藏至我的研究室書目清單書目收藏:0
2009年隨著阿凡達 3D 電影的熱賣,帶起 3D TV的風潮,許多廠商紛紛投入。然而,以 3D 攝影機所拍攝的 3D 影片內容缺乏、成本昂貴、傳輸不易,需要更多的頻寬來接收多視角視訊。於是,比較可行的是接收端接收彩色影像與對應的深度影像,再利用深度繪圖法 (Depth Image-Based Rendering)來產生數個 (可多達42個) 新視角影像。深度繪圖法仍有一個關鍵問題需要克服: 在前景與背景的交界邊緣,由於背景在新視角被掀開 (dis-occlusion) 產生了空洞,傳統上採用空間內插法,但空洞的區域越大修補的品質就會大幅降低。
有鑑於此,本論文提出一種尋找真正背景的技術。首先利用時間資訊建立背景模型,提出基於適應性關鍵畫面的方式來建立背景Sprite,有效的將背景資訊整合在一起,以便於提供真正的背景資訊去填補空洞,因此相較於傳統內插無中生有的方式,能得到更好的新視角影像合成品質。
本論文的研究重點主要探討 : 將 Sprite 技術應用於 3D 顯示,並利用深度資訊來輔助建立背景 Sprite,並且使用適應性關鍵畫面的方式,增進背景 Sprite 建立的正確性與穩定性。實驗結果顯示,本論文提出的基於長時間背景模型產生之深度繪圖法去遮蔽區域補洞技術,能夠有效的改善以往補洞所造成的幾何失真,並且在視覺品質與客觀評估都優於傳統方法。

致謝 i
摘要 ii
目錄 iii
圖目錄 v
表目錄 vii
第一章 簡介 1
1.1 研究動機與背景 1
1.2 去遮蔽區域補洞技術相關文獻回顧 3
1.2.1 利用空間資訊的補洞技術 3
1.2.2 利用時間資訊的補洞技術 5
1.3 本論文架構說明 10
第二章 長時間之背景模型產生 13
2.1 Sprite技術介紹 13
2.2 全域移動估測 15
2.3 Sprite模型 23
2.3.1 前景切割 23
2.3.2 Sprite模型建立與更新 27
2.3.3 關鍵畫面選擇 33
第三章 基於長時間背景模型之深度繪圖法補洞技術 36
3.1 深度繪圖法 38
3.2 基於長時間之背景模型補洞技術 39
3.2.1 新視角影像合成 39
3.2.2 新視角背景影像合成 41
3.2.3 結合 41
第四章 實驗結果與分析 42
4.1 Sprite背景模型結果分析 42
4.1.1 不同對象之全域移動估測效能評估 43
4.1.2 固定關鍵畫面與適應性關鍵畫面效能評估 46
4.1.3 適應性關鍵畫面挑選 48
4.1.4 不合適MV移除效能評估 48
4.1.5 Sprite背景模型結果 50
4.2 補洞技術效能分析與比較 50
4.2.1 視覺品質分析 51
4.2.2 客觀品質評估分析 56
4.3 程式處理速度分析 60
4.4 本文方法須改進之處 61
第五章 結論與未來工作 64
5.1 結論 64
5.2 未來工作 64

[1]Christoph Fehn, Rene De La Barre, and Siegmund Pastoor, “Interactive 3D-TV-concepts and key technologies,” Proc. of the IEEE, vol. 94, pp. 524-538, 2006.
[2]Carlos Vazquez, Wa James Tam, and Filippo Speranza, “Stereoscopic Imaging: Filling Disoccluded Areas in Depth Image-Based Rendering,” Proc. of SPIE Three-Dimensional TV, Video, and Display (ITCOM), vol.6392, Boston, MA, Oct. 2006.
[3]Alexandru Telea, “An Image Inpainting Technique Based on the Fast Marching Method,” Journal Graphics Tools, vol. 9, pp. 25-36, May 2004.
[4]L. Zhang and W. J. Tam, “Stereoscopic image generation based on depth images for 3D TV,” IEEE Trans. on Broadcasting, vol. 51, pp. 191- 199, 2005.
[5]M. Schmeing, and X. Jiang, “Depth Image Based Rendering: a Faithful Approach for The Disocclusion Problem,” Proc. 3DTV-Conference: The True Vision – Capture, Transmission and Display of 3D Video (3DTV-CON), pp. 1-4, Tampere, Finland, Jun. 7-9, 2010.
[6]Wenxiu Sun, Oscar C. Au, Lingfeng Xu, Yujun Li and Wei Hu, “Novel Temporal Domain Hole Filling Based On Background Modeling For View Synthesis,” Proc. of IEEE Int’l Conf. on Image Processing (ICIP), Orlando, FL, Oct. 2012.
[7]Y. Huang, and C. Zhang, “A Layered Method of Visibility Resolving in Depth Image-Based Rendering,” Proc. of IEEE. Conf. on Pattern Recognition, pp. 1-4, Tampa, FL, Dec. 2008
[8]P. Ndjiki-Nya, M. Koppel, D. Doshkov, and H. Lakshman, “Depth Image-Based Rendering With Advanced Texture Synthesis for 3-D Video,” IEEE Trans. on Multimedia, vol. 13, No. 3, pp. 453-465, June 2011.
[9]Haixu Liu, Xueming Li, and Kunbin Chen, “Global-background based view synthesis approach for multi-view video,” Proc. of 3DTV-Conference: The True Vision – Capture, Transmission and Display of 3D Video (3DTV-CON), pp. 1-4, Zurich, Switzerland, Oct. 2012.
[10]M. Solh, and G. AlRegib, “Hierarchical Hole-Filling for Depth-Based View Synthesis in FTV and 3D Video,” IEEE Journal of Selected Topics in Signal Processing, vol. 6, No. 5, pp. 495-504, Sept. 2012.
[11]Jae-Il Jung, and Yo-Sung Ho, “Virtual view synthesis using temporal hole filling with bilateral coefficients,” Proc. of IEEE Conf. on Computing and Communication Technologies, Research, Innovation, and Vision for the Future (RIVF), pp. 1-4, Ho Chi Minch City, Vietnam, Feb. 2012.
[12]K.Y. Chen, P.K. Tsung, P.C. Lin, H.J. Yang, and L.G. Chen, “Hybrid motion/depth-oriented inpainting for virtual view synthesis in multiview applications,” Proc. 3DTV-Conference: The True Vision – Capture, Transmission and Display of 3D Video (3DTV-CON), pp. 1-4, Tampere, Finland, June 2010.
[13]C.M. Cheng, S.J. Lin, and S.H. Lai, “Spatio-Temporally Consistent Novel View Synthesis Algorithm From Video-Plus-Depth Sequences for Autostereoscopic Displays,” IEEE Trans. on Broadcasting, Vol. 57, No. 2, pp. 523-532, June 2011.
[14]M. Schumeing, and Xiaoyi Jiang, “Faithful Spatio-Temporal Disocclusion Filling using local optimization,” Proc. of IEEE Conf. on Pattern Recognition (ICPR), pp. 3799-3802, Tsukuba, Japan. Nov. 2012.
[15]M. Koppel, X. Wang, D. Doshkov, T. Wiegand, and P. Ndjiki-Nya, “Consistent Spatio-Temporal Filling of Disocclusions in the Multiview-Video-Plus-Depth Format,” Proc. of IEEE Int’l Workshop on Mutimedia Signal Processing (MMSP), pp. 25-30, Banff, Canada, Sept. 2012.
[16]Y. Lu, W. Gao, and F. Wu, “Sprite generation for frame-based video coding,” Proc. of IEEE Int’l Conf. on Image Processing (ICIP), pp. 473-476, Thessaloniki, Greece, Oct. 2001.
[17]C.T. Hsu, and Y. C. Tsan, “mosaics of video sequences with moving objects,” Signal Processing: Image Communication, Vol. 19, No. 1, pp. 81-98, Jan. 2004.
[18]http://www-sipl.technion.ac.il/Info/News&Events_1_e.php?id=373
[19]Yeping Su, Ming-Ting Sun, and Vincent Hsu, “Global motion estimation from coarsely sampled motion vector field and the applications,” IEEE Trans. on Circuits and Systems for Video Technology, Vol. 15, No. 2, pp.232-242, Feb. 2005.
[20]H.K. Cheung, W.C. Siu, “Robust global motion estimation and novel updating strategy for sprite generation,” IET Image Processing, vol. 1, no. 1, pp. 13-20, Mar. 2007.
[21]Liang Zhang, and Wa James Tam, “Stereoscopic Image Generation based on Depth Images for 3D TV,” IEEE Trans. On Broadcasting, Vol.51, Issue 2, pp.191-199, June, 2005.
[22]“Methodology for the Subjective Assessment of the Quality of Television Pictures,” Int. Telecomm. Union/ITU Radio Communication Sector, ITU-R BT.500-11, Jan. 2002.
[23]http://3dtv.h.baike.com/article-127433.html

QRCODE
 
 
 
 
 
                                                                                                                                                                                                                                                                                                                                                                                                               
第一頁 上一頁 下一頁 最後一頁 top
無相關期刊