2024 年五月,Autodesk 收購了 AI 視效公司 Wonder Dynamics 及其旗下產品 Wonder Studio,近日正式更名為 Autodesk Flow Studio。Flow Studio(前身為 Wonder Studio)在推出之際,以其一鍵置換實拍影片中人物為 CG 角色的功能讓人驚艷不已。其背後的原理是透過 AI 技術追蹤實拍影片中人物的動作、光影、運鏡,甚至是演員的表情,再將其置換成使用者上傳的 CG 角色,並即時合成出符合影片氛圍的效果,大幅降低傳統視覺特效製作中的繁瑣作業。
Autodesk Flow Studio 提供的三大核心功能,讓使用者能夠輕鬆將 CG 角色整合到實景影片中。首先,AI 動作捕捉(MoCap)技術能夠擷取真人演員的動作,包括臉部表情、身體及手部動作,並以 USD 或 FBX 格式輸出完整的動作數據,此外,還支援骨骼重定向與動畫導出。其次,攝影機追蹤(Camera Tracking)工具可讓虛擬攝影機精準匹配真實場景中的運鏡,透過點雲技術偵測場景中的平面,確保角色與環境的自然對位。最後,使用者還可以選擇性地匯出特定元素(Individual Element Export),例如背景(Clean Plate)、攝影機追蹤數據及透明遮罩(Alpha Mask)。透過 USD(通用場景描述),使用者可將上述元素匯出至 Maya、Blender、Unreal Engine 等 3D 軟體中進行後續作業,確保高度的創作彈性與團隊協作效率。
Flow Studio 在上個月推出了新工具與改進,其中以 Wonder Tools 帶來的兩項功能效果最為顯著。「Clean Plate」功能讓使用者能以更快速且具成本效益的方式,將影片中有人物的部分去除,並自動生成乾淨背景(Clean Plate),隨後可將其匯出為獨立元素,直接應用於 3D 場景中。此舉大幅降低了傳統作法中一些重複性的工作,例如轉描角色輪廓後再進行局部重繪等繁瑣的作業流程。
此外,Wonder Tool 的另一項功能「Camera Track」,也以獨立工具的形式提供給希望從實拍影片中擷取攝影機運鏡的使用者。與原本的 Flow Studio 的 Live Action 專案不同(該專案需要真人演員出現在影片中),Wonder Tool 的 Camera Track 功能即使在畫面中沒有演員,也能精確匹配攝影機的運鏡。
目前這兩項功能皆存在一些限制。例如,「Clean Plate」功能目前尚不支援非人類角色的去背(如動物),而且在一個鏡頭中最多只能去除四位人類角色,且應盡量避免交疊。「Camera Track」則應儘量避免快速運鏡的鏡頭、特寫鏡頭或過於擁擠的過渡畫面,以獲得最佳的擷取效果。完整的功能限制可參考此連結。
Autodesk Flow Studio 採用點數計算機制,讓使用者能根據需求靈活運用訂閱額度。不同類型的專案需要不同的運算資源,因此每秒的處理時間會對應不同的點數消耗。以免費版方案來說,每月固定 300 點的額度讓使用者在不付費的情況下體驗其核心功能。每次使用 Live Action 或 AI MoCap 時間上限為 15 秒或 30 秒,適合短片段測試與快速驗證動作效果。輸出影片的最高解析度為 720p,並提供 1GB 的雲端儲存空間,單檔影片上傳大小限制為 100MB。每個月最多可上傳 3 個自訂角色檔案,每個專案僅能追蹤 1 個角色,功能設計以個人測試和小規模專案為主。完整方案與支援內容如下表:
© 文章為映CG所有,如需轉載請標明出處