By accepting you will be accessing a service provided by a third-party external to https://www.incgmedia.com/
產業生態將大變?Stable Diffusion 超強擴充外掛 ControlNet 亮相,只需上傳草圖、簡易骨架即可生成精美圖像
AI 繪圖工具自推出後便掀起一波浪潮,許多人都趨之若鶩並嘗試創作屬於自己的作品。日前,知名繪圖軟體 Stable Diffusion 的一款超強擴充外掛「 ControlNet」橫空出世,使用者只需透過上傳可辨識動作的圖片、粗略的草圖、或直接在上面畫骨架,AI 系統就會自動生成繪圖,可說是 Midjourney 與 DALLE-2 的最大勁敵。現在就趕緊跟著映CG 一同目睹 ControlNet 的強大功能!
延伸閱讀:夢想動畫推出 AI 繪圖工具 Moonshot ,結合 Line 聊天機器人,可快速產出概念設計圖,現正封測中!
超詳細的生成細節,完整保留創作思維
ControlNet 作為 Stable Diffusion 的擴充外掛,擁有極佳的便利性與實用性,使用方法簡單來說就是先上傳一個雛型,再透過 AI 演算法生成各式各樣的圖像。演算的方法有非常多種,包括以線條、骨架、色塊等等,而本篇新聞將會簡單注重在 Scribbles 及 openopose,下列選項為目前 ControlNet 所提供的演算法分類:
· Canny – 擷取圖片中的邊緣線做為參考,以生成圖片
· mlsd – 擷取圖片中明顯的直線做為參考,以生成圖片
· hed – 擷取圖片中的特徵做為參考,以生成圖片
· Scribbles – 擷取使用者提供的線條做為參考,以生成圖片
· openpose – 擷取圖片中的人物骨架做為參考,以生成圖片
· seg – 將圖片化為大略的色塊作為參考,以生成圖片
· depth & normal – 擷取圖片中的景深做為參考,以生成圖片
透過線條與動作生成各式圖像
第一個介紹的演算法是 Scribbles,使用者只需把一張帶有粗略線條輪廓的草圖丟給 AI,它就會自動生成一系列的圖像;第二個是 openpose,使用者可透過在 ControlNet 上畫出簡單的骨架,AI 同樣會立即生成數張圖像。此外,若擔心只靠上傳圖像會導致成品看起來不準確,使用者也可額外輸入關鍵字作補充,讓 AI 能接收到更多資訊。
價格與使用方法
ControlNet 為免費下載,但目前仍是以開放原始碼的方式提供下載,若想查看完整使用及下載教學,請點擊此處。