臺灣博碩士論文加值系統

　　動作捕捉技術的發展在各種領域已廣泛被使用，而且結合越來越多元的媒材一起做呈現，進而改變了參與者對互動藝術作品的認知與體驗。互動藝術的發展特色從接觸式物理性介面轉向感應式自然互動介面為走向，強調以自然互動介面作引發，使參與者的身體感知能主動地與作品互動。本論文乃探討「Kinect 動作捕捉技術在文字與語言認知之實現」，本人提出兩件與語言文字有關之作品〈交“心”〉與〈轉譯‧遲疑〉來實現動作捕捉技術在語言文字上的創作，並強調自然互動介面的重要性。
　　第一件作品〈交“心”〉是透過中國傳統象形文字與人體肢體動作結合的一種體感互動作品，主要互動模式建構在人的空間與動作的知覺特性上，觀者把文字當作仿生物看待，進而會產生好奇心以體感與之互動，之後文字開始演變，而在這演變的過程中，參與者會了解到文字演變的成因，並產生共鳴，這是本作品想要傳達的理念。
　　第二件作品〈轉譯‧遲疑〉在於分析人在言語轉譯過程中所產生的遲疑表情，是ㄧ個觀察他人並檢視自己的作品，目的希望觀者能從互動過程中去理解與認知他人與自身表情因語言轉譯所產生遲疑的真實美感。作品引導觀者唸台語，由國語轉台語的轉譯中，觀者的臉部可能會在非自主的狀態下反射出現遲疑表情，而作品系統將遲疑文字以漂浮呈現方式分離出來，此象徵人的思想游移不定。作品是由Kinect互動裝置來偵測與記錄參與者唸台語的反應與遲疑文字，最後以行為錄像藝術方式做展示呈現。
　　本論文目的希望以上兩件作品能帶給觀者新的自然互動感知，並在已有的技術做創新應用，同時強調讓人們以肢體做最自然的互動參與。

　Motion capture technology have been fundamentally and popularly used in interactive artworks. For motion capture technology, evolving from works integrating physical touch sensors to contactless sensor interactions, interactive art now emphasizes using naturally interactive interfaces, which allow the participants to naturally use their bodys'' motion to engage with the artwork. This thesis discusses“Kinect motion capture technology for text and language cognition” based on two pieces of artwork: “Make ''Heart''” and “Hesitation in Translation”. The purposes of the artworks focus on the advantages of human natural interactive motion.
　The first artwork, “Make ''Heart''”, is an interactive artwork through Chinese traditional hieroglyphs and human body action. It is based on our perception of space and body motion sensory and the words are wiewed as biomimetics. When the participants squat down and interact with the words projected on the floor, the words start to change shape. Through this deform, the causes and effects of the process begin to resonate with the participants.
　The second artwork, “Hesitation in Translation”, explores the hesitation when people get through the reasoning of the translation into different languages in Chinese poets. The artwork asks the participants to translate Chinese poets from Mandarin into Taiwanese, and speak out. The goal of the artwork is to let participants to realize and comprehend the beauty of the reality in hesitation when they learn the result from other people interacting with the artwork. The artwork dissociates the expressions from the translation and presents them separately to represent the instability of the thought processes associated with translation. The artwork is detected and recorded by Kinec. It records the reactions of participants who speak Taiwanese for the Chinese poets. This work is presented by performance video art.
　This thesis aims to use these two artworks to bring a new level of interactive experience to its participants. By using existing technology in creative ways, it make people use the most natural action to interact with the artworks.

摘要 i
Abstract ii
致謝 iii
目錄 iv
圖次 vi
表次 ix
第一章 緒論 1
第二章 文獻探討 4
第一節 認知的定義與互動藝術之自然介面 4
第二節 動作捕捉技術之互動藝術相關應用實例 8
第三節 動作捕捉技術在文字與語言相關應用實例 14
第三章 創作論述 18
第一節〈交“心”〉作品論述與執行方法 18
一、創作動機與理念 18
二、執行方法 20
三、呈現與記錄 28
第二節〈轉譯‧遲疑〉作品論述與執行方法 29
一、創作動機與理念 29
二、執行方法 31
三、呈現與記錄 43
第四章 結論 44
第一節 〈交“心”〉與〈轉譯‧遲疑〉兩件作品比較 44
第二節 〈交“心”〉與〈轉譯‧遲疑〉兩件作品檢討 46
參考文獻 47
附錄一：作品〈轉譯．遲疑〉樣本分析 51
附錄二：遲疑文字顏色分配表　56

[1]　Buckwald,M & Holz, D. (2010). Leap Motion. America: Leap Motion Company, Retrieved October 8, 2014 from https://www.leapmotion.com/.
[2]　Microsoft (2005). Kinect-Xbox. America: Microsoft, Retrieved October 8, 2014 from http://www.xbox.com/en-US/xbox-one/accessories/kinect-for-xbox-one.
[3]　Bollen, J.B. (2014). Sculpting Hands. Retrieved October 8, 2014 from http://jbali.home.xs4all.nl/JBPERFORMANCE.html.
[4]　Milk, C. (2010). The Treachery of Sanctuary. Retrieved October 3, 2014 from http://milk.co/treachery#/id/i4207763.
[5]　黃文叡(2002)。《現代藝術啟示錄》。台北市：藝術家出版社，頁122。
[6]　曾鈺涓(2010)。當代數位互動藝術之特質(博士論文)。臺灣博碩士論文系統 (系統編號098NCTU5509019)，頁4。
[7]　Microsoft(2014). NUI: Natural User Interface. Retrieved October 8, 2014 from http://research.microsoft.com/en-us/collaboration/focus/nui/.
[8]　Neisser, U. (1967). Cognitive psychology. New York: Appleton-Century-Crofts.
[9]　Norman, D. A. (1993). Things that make us smart : defending human attributes in the age of the machine. Reading, Massachusetts: Addison-Wesley publishing company.
[10]　駱麗真(2003)。〈科技藝術的發展脈絡─由國際經驗到台灣現況〉。台灣美術第52 期，台中市：國立台灣美術館，頁12-24。
[11]　天下雜誌(2008)。〈下個數位十年的三大趨勢〉。取自 http://www.cw.com.tw/article/article.action?id=5003137&page=5（2015年5月25日瀏覽）。
[12]　Krueger, Myron (2004). Videoplace. Retrieved October 8, 2014 from http://eyebeam.org/people/myron-krueger.
[13]　Krueger, Myron (1991). Artificial Reality 2. Addison-Wesley Professional, USA.
[14]　Oviatt, S. (2002). Multimodal Interfaces. Retrieved October 8, 2014 from http://www.cogsci.msu.edu/DSS/2004-2005/Oviatt/Multimodel%20Interfaces.pdf.
[15]　Jeng, T.S., Lee, C.H., Chen, C., and Ma, Y.P. (2002). Interaction and Social Issues in a Human-Centered Reactive Environment. CAADRIA 2002, Malaysia, PP.3-4.
[16]　魏德樂、袁廣鳴(2004)。〈鏡花水月〉。取自: http://2012fmf.cat.tnua.edu.tw/?page_id=779 （2015年5月25日瀏覽）。
[17]　曾鈺涓(2006)。控制幻影—談林珮淳之〈創造的虛擬〉作品中之科技警訊。中壢： 中央大學藝文中心，取自http://www.tyuchuan.com/doc/tseng_lin.pdf（2015年5月25日瀏覽）。
[18]　許素朱(2013)。數位迎媽祖-台灣鄉土民俗文化藝術創意加值研究。國科會NSC102-2420-H-119-003-MY2。
[19]　戴嘉明（2014）。迎媽祖數位賦權-從靜態版畫轉變成動態藝術。國科會NSC 102-2420-H-119 -004 -MY2。
[20]　Worthington, P. (2004). Shadow Monsters. Retrieved October 17, 2014 from http://www.dreamtheend.com/#/?cat=684.
[21]　Levin, G. & Lieberman, Z. (2007). Portrait Sequencer. Retrieved October 17, 2014 from http://flong.com/projects/reface/.
[22]　Ebeling, Mick et al(2010). The EyeWriter. Retrieved October 17, 2014 from 　http://www.eyewriter.org/.
[23]　Ambrosio, M. (2007). Oups!. Retrieved October 17, 2014 from http://file.org.br/artist/marcio-ambrosio-2/.
[24]　Obermaier, K.(2004). Apparition. Retrieved October 17, 2014 from 　http://www.exile.at/apparition/index.html.
[25]　詹嘉華(2011)。〈身體構圖〉。取自2012第七屆臺北數位藝術節　http://digitalartfestival.tw/daf12/c3.html（2015年5月25日瀏覽）。
[26]　大寶科技(2013)。大寶腦波。取自: http://www.alchemytech.com.tw/news/news-32.html （2015年5月25日瀏覽）。
[27]　梅林的鬍子(2015)。〈空氣書法〉。取自: 　　　　　　　　　http://www.ohohohohohohohohohohoh-my-god-lab.com/#air_calligraphy_detail （2015年5月25日瀏覽）。
[28]　林豪鏘(2013) 。〈於是你的思緒不斷行走〉。取自: https://www.youtube.com/watch?v=PM_DTYWUXzk （2015年5月25日瀏覽）。
[29]　廖文豪(2013)。《漢字樹2：人體器官所衍生的漢字地圖》。台北市：遠流，頁282。
[30]　Visual Studio 2010 C#[Computer software] (2014). America: Microsoft. Retrieved October 17, 2014 from http://www.visualstudio.com/zh-tw/products/visual-studio-express-vs.
[31]　Flash Professional CS6[Computer software] (2014). America: Adobe. Retrieved October 17, 2014 from http://www.adobe.com/tw/.
[32]　ActionScript3.0[Computer software] (2014). America: Adobe. Retrieved October 17, 2014 from http://en.wikipedia.org/wiki/ActionScript.
[33]　Skeletal Tracking[Computer software] (2014). America: Microsoft. Retrieved October 9, 2014 from http://en.wikipedia.org/wiki/ActionScript.
[34]　裘鍚圭(1993)。《文字學概要》。台北市：萬卷樓，頁56-85。
[35]　象形字典(2014)。取自http://vividict.com/Default.aspx（2015年5月25日瀏覽）。
[36]　游惠喻、許素朱（2015）。“動作捕捉技術在文創作品〈交“心”〉之應用。文化創意跨界亮點學術研討會暨經營實務座談會，台灣，彰化（明道大學），2015 年3 月。
[37]　Goodman, Nelson(1987). Of Mind and Other Matters. Harvard Univ Pr, USA, PP.21-23.
[38]　J. B. Watson(1928). Psychological Care of Infant and Child. New York: W. W. Norton,USA, P.480.
[39]　鄭昭明(1993)。《認知心理學:理論與實踐》。台北市：桂冠，頁158-181。
[40]　Schachter, Christenfeld, Ravina and Bilous(1991). Speech Disfluency and the Structure of Knowledge (Doctoral dissertation or master’s thesis, Columbia University, American). Retrieved from http://www.columbia.edu/~rmk7/HC/HC_Readings/Schachter.pdf.
[41]　Face Tracking[Computer software] (2014). America: Microsoft. Retrieved October 9, 2014 from http://msdn.microsoft.com/en-us/library/jj130970.aspx.
[42]　Kinect for Windows Developer Toolkit[Computer software] (2014). America: Microsoft. Retrieved October 9, 2014 from http://www.microsoft.com/en-us/download/details.aspx?id=40276.
[43]　Face Tracking SDK[Computer software] (2014). America: Microsoft. Retrieved October 9, 2014 from http://msdn.microsoft.com/en-us/library/jj130970.aspx.
[44]　Ahlberg, Jorgen (2001). CANDIDE-3-AN UPDATED PARAMETERISED FACE (Doctoral dissertation or master’s thesis, Linkoping University, Sweden) . Retrieved October 9, 2014 from http://www.bk.isy.liu.se/publications/LiTH-ISY-R-2326.pdf.