By accepting you will be accessing a service provided by a third-party external to https://www.incgmedia.com/
IP 轉譯延伸,布局 5G 時代的 AR、VR 創作!一窺台灣 4DViews 技術的創意開發應用
隨著 5G 時代的到來,文化與科技的結合將更將緊密,國際文化創意與科技品牌也紛紛投入容積擷取技術的開發,布局 XR 領域的應用發展。因此由文化部指導,文策院主辦,工研院執行的「IP 內容實驗室」,於 4 日舉辦成果發展暨媒合會,展出9 件以高端容積擷取技術 4DViews 攝影棚,進行的原創內容產製,內容跨足了音樂展演、IP 轉譯延伸、XR 等領域,吸引全台多家文化科技內容業者與學界共同參與。而文策院與工研院將持續推廣高端前瞻的產製技術,更同步評估未來虛擬攝影棚商業營運機制,帶動整個文創科技市場的發展,持續為台灣文化作品注入川流不息的動力。
音樂展演再進化,影視 MV 新製程
「IP 內容實驗室成果發表暨媒合會」上半場,邀請了曾在必應創造,擔任羅大佑演唱會創意形象總監,人稱二馬哥的馮建彰總監,以及仙草影像資深動畫師陳慈仁先生,與我們分享 4DViews 技術於音樂展演、影視 MV 之應用。馮建彰總監提到,技術與文化是相互對應的,新科技能開創新體驗,而文化內容則將體驗深化進每個體驗者的心中。因此必應創造從去年就開始運用 4DViews,應用於文化數位典藏、IP 主題展演、音樂表演等場合,包含去年金音獎頒獎典禮,找來了承襲臺灣傳統文化的九天民俗技藝團,結合虛擬角色、Motion capture 製作,打造《末世重生》跨域原創表演。而今年則是應用在羅大佑演唱會 Live 影音上,透過 4D 影像的方式,讓粉絲跟著虛擬角色羅大佑,沉浸於時空長廊中,回顧近 40 年來羅大佑的歌唱生涯。未來必應創造還想運用 4DViews 技術打造沉浸式劇場、IP 主題電影製作及 VR 電競體驗上,帶給觀眾更多新型態的沉浸式文化展演,進而將台灣文化帶往世界科技的舞台。。
田馥甄新歌 MV《一一》在七月中釋出,隨即引發歌迷的關注與討論,點擊數更是突破 150 萬。MV 不僅採用全新的 4DViews 技術,打造精緻畫面,其故事隱含的人生哲理,更是引起不少人的共鳴。仙草影像資深動畫師陳慈仁先生,也在講座上分享《一一》的動畫製程。他提到:「故事修改很多版本,最後採用了西洋鏡 「生命之輪」(zoetrope)的概念,不只象徵人生的進展,與歌曲表達的核心心境貼合,西洋鏡更是動畫源頭概念,作為以動畫技術開展內容的創意工作者來說,能將這樣的概念融入創作中,向『動畫』這門藝術致敬,非常具有意義。」在製程上,他也感謝文策院與工研院的協助,讓他們能在預覽階段,就進到 4DViews 攝影棚預演,深入了解畫面效果是否能被執行,也由於有了 2019 年《太空人》MV 的經驗,所以更能發揮 4DViews 的特色,讓畫面變得更精緻、有趣。陳慈仁也詳細分享 4DViews 的後製經驗談,包含在 CG 環境下預演 BOLT 的鏡頭走位、開發西洋鏡固定格律動態的工具、如何進行材質與燈光處理等等。
跨域結合九大案例,為產業帶來最新穎的體驗
在成果發表區中,展示了《IP 內容實驗室》109 年度七組入選作品成果以及兩組示範案例之作,橫跨音樂展演、影視 MV、IP 轉譯延伸等領域。在音樂展演領域上,包含必應創造為羅大佑演唱會打造的 4D 開場影音《當年離家的年輕人》。在影視 MV 領域上,則有霹靂國際多媒體攜手方文山、李芷婷兩位知名音樂人,結合自家知名 IP《霹靂英雄之英雄戰記》創造的偶動畫 MV《遠走他鄉》、親子天下改編旗下知名 IP 而打造的 2D 與 VR 兩個版本的《小行星》MV、仙草影像為田馥甄打造的新歌 MV《一一》。在 IP 內容轉譯上,則展出未來式互動改編懷觀筆下的奇幻小說《劍魂如初》,創作 AR 互動劇場《尋找蕭練》、銘傳大學改編鄭星惠的繪本《兩扇門》製作的 AR 立體插畫繪本。
其中, 中國科技大學製作的 VR 舞蹈表演《將 Fusion》,讓人感到耳目一新。在文化上融合了家將陣頭與潮流街舞,將兩大表演藝術碰撞出全新的花火;在技術上,將 4DViews 攝影棚結合光學動捕設備,開創了動畫產製的新製程,除了將表演者的舞蹈呈現在 VR 影像上,還能挪用其動作在虛擬角色上,製作出壯闊、具有爆發力且整齊劃一的群舞畫面,非常適合應用在音樂展演、沉浸式劇場表演中。另外《復刻中華商場》VR 體驗,改編吳明益小說《天橋上的魔術師》,帶領觀者穿梭時空,回到 1980 年代的台北,在天橋上觀看魔術師 360 度無死角的魔術表演,與周遭香腸攤、路邊攤互動搏感情,體驗 80 年代中華商場的熱鬧懷舊氣氛,是 IP 內容轉譯上沉浸感最強的一次娛樂體驗。最後 AR 遊戲《茶迷大稻埕》,以新奇有趣的互動玩法,讓玩家能夠在遊戲裡,深入了解大稻埕的歷史文化,其加入 4DViews 捕捉的繪師畫面,給人一種身歷其境,穿越時空的錯覺,開創新穎的觀光遊玩體驗。
成果發表區展示與體驗 (映CG媒體攝)
從創意、製作與產業面,一窺國外 4DViews 的發展
除了國內案例的展出與分享外,主辦方還邀請三位國外講者,以影片的方式與現場的業者分享國外的應用趨勢潮流。 日本 CRESCENT 新月映像小谷創社長提到,日本已應用 4DViews 於表演、體育產業上,例如東京奧運的 VR、AR 體驗或是明星的舞蹈表演上,然而他也說明,並不是所有體育項目都能依靠容積擷取技術,像是高爾夫等快速動作的運動,現階段還無法成功捕捉。在技術搭配上,日本廠商也結合 light stage 等光學技術,在電腦生成擬真的臉部表現,製作出更加沉浸的娛樂體驗。最後他也提及,隨著新冠肺炎的影響,許多服飾品牌開始從實體轉而走向電商,因此也有人開始詢問是否能用 4DViews 技術,製作出讓人在網路上能 360 度觀看的體驗。這也表示 4DViews 不只能應用於文化內容創意上,更是能廣泛應用於銷售產業上。
而來自美國 Arcturus studio 的創意總監 Ewan Johnson,則與我們分享其公司開發的剪輯平台 Holoedit,如何幫助 4DViews 使用者以非線性體驗處理容積擷取影片。他也提到交互式敘事已是現今創作的潮流,去年瑪丹娜演唱會上的虛擬製作 + 即時轉播,以及今年在社群媒體上為 BTS 打造 AR 互動體驗,都是透過交互式敘事,創造全新的娛樂內容,帶給觀者視覺與體驗上的衝擊。最後也邀請打造 MV 導演田向潤,聊聊 chelmico《Easy Breezy》是如何被打造的。田向潤表示,當初刻意用 4DViews 為 MV 創造許多扭曲、到處穿幫的視覺畫面,以暴露缺點的方式形塑了歌曲與 MV 的怪奇風格,反而創造了話題。 他認為:「CG 的魅力是無限的,比起綁手綁腳地去符合主流畫面,還不如讓觀者知道這就是 CG,進而去欣賞它的無限可能。幸好歌手本身也覺得這樣很酷,才能一同打造出如此驚艷的作品!」最後他也期待拍攝台灣特色街景,再利用 4DViews 捕捉日本明星,創作出台日友好的有趣作品。