元智大學資工系葉奕成教授帶領學生張羿翔、莊芷涵,組成「苗栗小五郎與台南糖老鴨」團隊,參加文化部與財團法人資訊工業策進會首度舉辦的「文化科技黑客松」提案競賽,於35支隊伍中,榮獲季軍殊榮,獲得獎金新臺幣2萬元,成果將有機會應用在文化展覽中。
文化部與財團法人資訊工業策進會首度舉辦「文化科技黑客松」提案競賽。以文化場館的「展演應用」、「營運服務」為主題,透過文化內容及科技產品的結合,向全台灣新創公司與團隊徵件,鼓勵文化人與科技人聯手提出新一代的創新構想。
葉奕成表示,團隊以「布知布覺袋你去看戲」為主題,結合5G網路、4D體積捕捉技術、VR/AR沈浸式設備以及虛擬直播技術,打造與操偶師即時連線的環境,實現人與戲偶共同演出。團隊所提出「布知布覺袋你去看戲」,基於成員對於布袋戲的熱情並結合老師對於動態捕捉與幾何建模的背景知識,使得專案能夠採用更具互動性、且動態的方式典藏布袋戲的文化資訊。並利用符合時代潮流的方式,將內容傳遞給觀眾。
葉奕成說,本次提案首先採用4D動態捕捉操偶模型,建立可從任意角度觀看戲偶的視角。再搭配3D掃描建模劇中的場景以及配件,並加入經典配音,增加使用者真實感受。利用5G高速率以及低延遲的網路特性,將遠端即時捕捉的操偶動態與現場的遊客同時登台,體驗者透過AR/VR沈浸式設備變為劇中的主角進行互動式劇情的演出,結合手部辨識動作導向不同的故事結局,並透過虛擬直播機搭配3D場景、物件結合演出,打造虛實結合的互動舞台,以吸引更多民眾前來了解,達到良好的推廣效果。
葉奕成提到,相較於傳統的靜態典藏與平面影片,在提案規劃的過程中,團隊致力於讓新興科技來協助使用者獲取更深刻的體驗,基於科技所提供的現場還原力使更多人能了解台灣本土文化。◇