By accepting you will be accessing a service provided by a third-party external to https://www.incgmedia.com/

IP 轉譯延伸,布局 5G 時代的 AR、VR 創作!一窺台灣 4DViews 技術的創意開發應用

隨著 5G 時代的到來,文化與科技的結合將更將緊密,國際文化創意與科技品牌也紛紛投入容積擷取技術的開發,布局 XR 領域的應用發展。因此由文化部指導,文策院主辦,工研院執行的「IP 內容實驗室」,於 4 日舉辦成果發展暨媒合會,展出9 件以高端容積擷取技術 4DViews 攝影棚,進行的原創內容產製,內容跨足了音樂展演、IP 轉譯延伸、XR 等領域,吸引全台多家文化科技內容業者與學界共同參與。而文策院與工研院將持續推廣高端前瞻的產製技術,更同步評估未來虛擬攝影棚商業營運機制,帶動整個文創科技市場的發展,持續為台灣文化作品注入川流不息的動力。

「IP內容實驗室成果發展暨媒合會」開幕,吸引產官學業者參與。文化部簡志維科長 (第二排左3)、文策院張文櫻副院長 (第二排左5)、工研院服科中心張傳育副執行長 (第二排右3)與今年獲得獎補助七家業者合影。(映CG媒體攝)

音樂展演再進化,影視 MV 新製程  

「IP 內容實驗室成果發表暨媒合會」上半場,邀請了曾在必應創造,擔任羅大佑演唱會創意形象總監,人稱二馬哥的馮建彰總監,以及仙草影像資深動畫師陳慈仁先生,與我們分享 4DViews 技術於音樂展演、影視 MV 之應用。馮建彰總監提到,技術與文化是相互對應的,新科技能開創新體驗,而文化內容則將體驗深化進每個體驗者的心中。因此必應創造從去年就開始運用 4DViews,應用於文化數位典藏、IP 主題展演、音樂表演等場合,包含去年金音獎頒獎典禮,找來了承襲臺灣傳統文化的九天民俗技藝團,結合虛擬角色、Motion capture 製作,打造《末世重生》跨域原創表演。而今年則是應用在羅大佑演唱會 Live 影音上,透過 4D 影像的方式,讓粉絲跟著虛擬角色羅大佑,沉浸於時空長廊中,回顧近 40 年來羅大佑的歌唱生涯。未來必應創造還想運用 4DViews 技術打造沉浸式劇場、IP 主題電影製作及 VR 電競體驗上,帶給觀眾更多新型態的沉浸式文化展演,進而將台灣文化帶往世界科技的舞台。。

田馥甄新歌 MV《一一》在七月中釋出,隨即引發歌迷的關注與討論,點擊數更是突破 150 萬。MV 不僅採用全新的 4DViews 技術,打造精緻畫面,其故事隱含的人生哲理,更是引起不少人的共鳴。仙草影像資深動畫師陳慈仁先生,也在講座上分享《一一》的動畫製程。他提到:「故事修改很多版本,最後採用了西洋鏡 「生命之輪」(zoetrope)的概念,不只象徵人生的進展,與歌曲表達的核心心境貼合,西洋鏡更是動畫源頭概念,作為以動畫技術開展內容的創意工作者來說,能將這樣的概念融入創作中,向『動畫』這門藝術致敬,非常具有意義。」在製程上,他也感謝文策院與工研院的協助,讓他們能在預覽階段,就進到 4DViews 攝影棚預演,深入了解畫面效果是否能被執行,也由於有了 2019 年《太空人》MV 的經驗,所以更能發揮 4DViews 的特色,讓畫面變得更精緻、有趣。陳慈仁也詳細分享 4DViews 的後製經驗談,包含在 CG 環境下預演 BOLT 的鏡頭走位、開發西洋鏡固定格律動態的工具、如何進行材質與燈光處理等等。 

IP 內容實驗室營運拍攝團隊工研院協助仙草影像陳奕仁導演拍攝田馥甄歌曲 MV《一一》所需真人動態 3D 模型。(工研院、仙草影像提供)

跨域結合九大案例,為產業帶來最新穎的體驗  

在成果發表區中,展示了《IP 內容實驗室》109 年度七組入選作品成果以及兩組示範案例之作,橫跨音樂展演、影視 MV、IP 轉譯延伸等領域。在音樂展演領域上,包含必應創造為羅大佑演唱會打造的 4D 開場影音《當年離家的年輕人》。在影視 MV 領域上,則有霹靂國際多媒體攜手方文山、李芷婷兩位知名音樂人,結合自家知名 IP《霹靂英雄之英雄戰記》創造的偶動畫 MV《遠走他鄉》、親子天下改編旗下知名 IP 而打造的 2D 與 VR 兩個版本的《小行星》MV、仙草影像為田馥甄打造的新歌 MV《一一》在 IP 內容轉譯上,則展出未來式互動改編懷觀筆下的奇幻小說《劍魂如初》,創作 AR 互動劇場《尋找蕭練》、銘傳大學改編鄭星惠的繪本《兩扇門》製作的 AR 立體插畫繪本

其中, 中國科技大學製作的 VR 舞蹈表演《將 Fusion,讓人感到耳目一新。在文化上融合了家將陣頭與潮流街舞,將兩大表演藝術碰撞出全新的花火;在技術上,將 4DViews 攝影棚結合光學動捕設備,開創了動畫產製的新製程,除了將表演者的舞蹈呈現在 VR 影像上,還能挪用其動作在虛擬角色上,製作出壯闊、具有爆發力且整齊劃一的群舞畫面,非常適合應用在音樂展演、沉浸式劇場表演中。另外《復刻中華商場》VR 體驗,改編吳明益小說《天橋上的魔術師》,帶領觀者穿梭時空,回到 1980 年代的台北,在天橋上觀看魔術師 360 度無死角的魔術表演,與周遭香腸攤、路邊攤互動搏感情,體驗 80 年代中華商場的熱鬧懷舊氣氛,是 IP 內容轉譯上沉浸感最強的一次娛樂體驗。最後 AR 遊戲《茶迷大稻埕》,以新奇有趣的互動玩法,讓玩家能夠在遊戲裡,深入了解大稻埕的歷史文化,其加入 4DViews 捕捉的繪師畫面,給人一種身歷其境,穿越時空的錯覺,開創新穎的觀光遊玩體驗。

                                                                       成果發表區展示與體驗 (映CG媒體攝) 


從創意、製作與產業面,一窺國外 4DViews 的發展  

除了國內案例的展出與分享外,主辦方還邀請三位國外講者,以影片的方式與現場的業者分享國外的應用趨勢潮流。 日本 CRESCENT 新月映像小谷創社長提到,日本已應用 4DViews 於表演、體育產業上,例如東京奧運的 VR、AR 體驗或是明星的舞蹈表演上,然而他也說明,並不是所有體育項目都能依靠容積擷取技術,像是高爾夫等快速動作的運動,現階段還無法成功捕捉。在技術搭配上,日本廠商也結合 light stage 等光學技術,在電腦生成擬真的臉部表現,製作出更加沉浸的娛樂體驗。最後他也提及,隨著新冠肺炎的影響,許多服飾品牌開始從實體轉而走向電商,因此也有人開始詢問是否能用 4DViews 技術,製作出讓人在網路上能 360 度觀看的體驗。這也表示 4DViews 不只能應用於文化內容創意上,更是能廣泛應用於銷售產業上。

而來自美國 Arcturus studio 的創意總監 Ewan Johnson,則與我們分享其公司開發的剪輯平台 Holoedit,如何幫助 4DViews 使用者以非線性體驗處理容積擷取影片。他也提到交互式敘事已是現今創作的潮流,去年瑪丹娜演唱會上的虛擬製作 + 即時轉播,以及今年在社群媒體上為 BTS 打造 AR 互動體驗,都是透過交互式敘事,創造全新的娛樂內容,帶給觀者視覺與體驗上的衝擊。最後也邀請打造 MV 導演田向潤,聊聊 chelmico《Easy Breezy》是如何被打造的。田向潤表示,當初刻意用 4DViews 為 MV 創造許多扭曲、到處穿幫的視覺畫面,以暴露缺點的方式形塑了歌曲與 MV 的怪奇風格,反而創造了話題。 他認為:「CG 的魅力是無限的,比起綁手綁腳地去符合主流畫面,還不如讓觀者知道這就是 CG,進而去欣賞它的無限可能。幸好歌手本身也覺得這樣很酷,才能一同打造出如此驚艷的作品!」最後他也期待拍攝台灣特色街景,再利用 4DViews 捕捉日本明星,創作出台日友好的有趣作品。 

日本 CRESCENT 新月映像社長小谷創 (Kotani Hajime) 分享日本截取技術應用現況。 (由新月映像、文策院提供)
Arcturus studio 創意總監 Ewan Johnson 分享 animated reality (由新月映像、文策院提供)
日本MV導演田向潤 (Tamukai Jun) 分享日本 4DViews 影視應用產製經驗 (由新月映像、文策院提供)

帥炸!打造超酷硬表面機甲概念設計,美國 VR 遊戲美術分享創作製程與訣竅
將文字腳本轉為虛擬角色動畫,零門檻、低成本的 AI 影音製作系統開展原創 IP 新解方

相關文章

本期雜誌聚焦在「從動態設計到典禮執行統籌,揭開金曲35幕後製作」,深入剖析這場國內最重要的音樂盛事的幕後故事。另外,我們也邀請了三組在不同領域中發光發熱的動態設計團隊,分享他們的專案故事。
還沒有帳號嗎? 點此立即註冊!

登入您的帳號