By accepting you will be accessing a service provided by a third-party external to https://www.incgmedia.com/

Adobe Firefly 影片生成測試版開放登記!輸入文字、圖片即可生成影片,剪輯師將能夠自產 B-Roll 素材

去年三月,Adobe 首次推出 Adobe Firefly,便開始在旗下軟體中植入 Firefly AI 生成技術。例如 Photoshop 中的生成填充、Lightroom 中的生成移除、Illustrator 中的生成形狀填充以及Express 中的文字到模板功能。就 Adobe 官方表示,其使用者已經生成了超過 120 億張圖像和向量圖,讓 Firefly 及其驅動的功能成為其社群中增長速度最快的應用之一。

而現在短影音當道的時代下,影片是當今參與互動的主要媒介。Adobe 也即將推出的 Firefly 影片模型的預覽,以及它將如何在像是 Premiere Pro 中推動一些革命性的工作流程,這些功能將於今年晚些時候以測試版形式推出。就官方表示,與其它的 Firefly 生成式AI模型一樣,剪輯師可以放心地創作,因為 Adobe Firefly 影片模型是設計為商業安全的,並且僅基於開放給 Adobe 授權使用的內容進行訓練——絕不使用 Adobe 使用者的一般內容。


現在,Adobe 開放使用者們能夠成為首批獲得最新消息並獲得測試版使用權限的機會,點擊下方連結立即登記。注意:需有 Adobe ID 帳號的使用者才能夠填寫登記。


影片剪輯的新時代

隨著對新鮮短片內容的需求不斷增加,剪輯師、電影製作人和內容創作者被要求在更短的時間內完成更多工作。如今,剪輯師不僅要剪輯畫面,還要負責調色、字幕、視覺效果、動畫、音源混合等多種任務。Adobe 利用 AI 的力量幫助剪輯師擴展他們的創作工具集,讓他們能夠在這些領域工作,在客戶要求的時間內交付高品質的成果。

常見的編輯任務如填補素材間的空隙、移除場景中不需要的物體、平滑跳剪轉場、尋找完美的B-roll 素材等都需要時間。如果處理得當,這些任務可以決定敘事的成敗,讓故事更具吸引力和情感性,而不是分散觀眾的注意力。

有時,與團隊和主要決策者、資金來源關係人分享創意意圖,也可能是一個挑戰,這通常需要多次的溝通。Adobe 提供了像 Frame.io 這樣的工具來簡化團隊協作,透過獨特的集成審核與批准流程來提升效率。而現在,我們推出了 AI 工具,幫助進一步最佳化創作流程,減少後期製作的繁瑣工作。其 AI 工具讓剪輯師有更多時間探索新的創意想法,這是他們工作中最熱愛的部分,同時也為與大團隊的成功協作奠定了基礎。不僅如此,Adobe 不斷促進精簡的工作流程,現在通過生成式 AI,我們讓剪輯師和動態設計師能夠以更快的速度創作出他們的最佳作品。觀看下方影片,了解我們如何使用 Firefly 將影片剪輯提升到新的高度。

利用 Firefly 的文字轉影片功能,您可以通過文本提示、各種鏡頭控制和參考圖像來生成 B-roll素材,無縫填補時間軸中的空隙。

以下影片都是用 Adobe Firefly Video 模型,並在 2 分鐘之內所生成之範例

提示詞:Cinematic closeup and detailed portrait of a reindeer in a snowy forest at sunset. The lighting is cinematic and gorgeous and soft and sun-kissed, with golden backlight and dreamy bokeh and lens flares. The color grade is cinematic and magical.

提示詞:Slow-motion fiery volcanic landscape, with lava spewing out of craters. the camera flies through the lava and lava splatters onto the lens. The lighting is cinematic and moody. The color grade is cinematic, dramatic, and high-contrast.

提示詞:Miniature adorable monsters made out of wool and felt, dancing with each other, 3d render, octane, soft lighting, dreamy bokeh, cinematic.


Firefly 影片模型在生成自然世界的影片方面表現出色。當拍攝過程中錯過了關鍵的場景設定鏡頭時,可以通過生成帶有鏡頭運動的插入鏡頭,如風景、植物或動物,來補足這些空缺。

提示詞:Footage of a camera on a drone flying over a desert with wind blowing over the dunes creating waves in the sand below.

需要更多補充鏡頭嗎?可以根據參考畫面生成影片片段,來填補時間軸中的空隙。

原始影片

提示詞:Prompt: Detailed extremely macro closeup view of a white dandelion viewed through a large red magnifying glass

剪輯效果


使用 Firefly 影片模型,您可以利用豐富的鏡頭控制選項,例如角度、運動和縮放,來創造理想的視角,生成完美的影片效果。

提示詞:Drone shot going between the trees of a snowy forest at sunset golden hour. The lighting is cinematic and gorgeous and soft and sun-kissed, with golden backlight and dreamy bokeh and lens flares. The color grade is cinematic and magical.

提示內容越詳細,模型就能更好地利用這些細節來生成具有啟發性的圖像和 B-roll 素材。

提示詞:Cinematic closeup and detailed portrait of a man in the middle of a rainy street. the lighting is moody and dramatic. The color grade is blues and teals. the man is extremely realistic with detailed skin texture and stubble on his face. movement is subtle and soft. the camera doesn't move. heavy film grain and textures. Beads of water slowly rolling down his face.


Firefly 影片模型支持廣泛的應用場景,包括生成火焰、煙霧、塵埃粒子和水等大氣元素,並將其放置在黑色或綠色背景上,然後可以通過混合模式或鑰匙控件在 Adobe 的工具(如 Premiere Pro 和 After Effects)中與現有內容進行疊加。

原始影片

火焰效果疊加

合成影片


構思 2D 和 3D 動畫,包括停格動畫(Claymation),可以與創意合作者分享,以有效傳達創作意圖。

提示詞:Stop motion 2d animation made of felt of an egg cooking in a frying pan in a sunlit beautiful kitchen on the stovetop.

提示詞:Hand-drawn simple line art, a young kid looking up into space with a wondrous expression on his face.

提示詞:An adorable kawaii cheeseball on the moon smiling, 3d render, octane, soft lighting, dreamy bokeh, light sparkles floating in the background.


使用圖像轉影片功能,您可以將現有的靜態圖片或插圖轉化為驚人的實景影片。

提示詞:Macro detailed shot of water splashing and freezing to spell the word "ICE".

今年後半時候將在 Premiere Pro(測試版)推出的 Generative Extend 功能,允許生成延伸片段以填補素材中的空隙、平滑轉場,或延長鏡頭時間以實現完美的編輯時機。

參考圖片

提示詞:Zoom out of the galaxy to reveal that it is contained inside the pupil of a human eye, detailed macroscape.


觀看編輯師如何在 Premiere Pro 中使用由 Adobe Firefly 影片模型驅動的 Generative Extend功能,延長鏡頭時間,以匹配音頻的高潮部分。

觀看編輯師如何在 Premiere Pro 中使用由 Adobe Firefly 影片模型驅動的 Generative Extend功能,延長鏡頭時間,以匹配音頻的高潮部分。

文章授權聲明

  • 網站翻譯
  • 文章為映CG所有,如需轉載請標明出處
七人團隊以特效重現八十年前的婆羅洲戰俘營,建構屬於臺灣人的二戰記憶:專訪《聽海湧》導演、視效總監
2024 TCCF 提案大會入選名單揭曉,多國企畫案展現豐沛創意,釜山、威尼斯影展與艾美獎獲獎團隊將...

相關文章

還沒有帳號嗎? 點此立即註冊!

登入您的帳號