跳到正文
IFAI

開源專案

InvokeAI 3.0 正式釋出:全面轉向節點架構,初步支援 SDXL

首次發布 傳播指數 48

InvokeAI 正式釋出 3.0.0 版本。系統程式碼被全面重寫為節點化架構,並加入實驗性的節點編輯器。新版本還集成了 ControlNet、動態提示詞,初步支援 SDXL,支援超過 77 個 token 的長提示詞,並讓 Mac 使用者能以半精度載入模型省視訊記憶體。

圖:youtube.com

InvokeAI 是一個面向創作者與專業開發者的開源影像生成引擎,配備了直觀的 Web 介面和命令列工具。2023 年 7 月 21 日,專案團隊正式推出了 InvokeAI 3.0.0。相比上一個正式版本 2.3.5,這次的底層程式碼被徹底推倒重寫。

新版本最大的變化,是把所有影像生成操作都抽象成了節點。每個節點都是一段將輸入轉化為輸出的小程式碼,彼此連線成處理圖。對於開發者而言,擴充套件或修改生成管線只需要自己寫一個新節點,系統維護與擴充套件變得簡單許多。

它能做什麼

對日常作畫的創作者來說,WebUI 帶來了多項核心能力升級。

首先是官方內建了 ControlNet 介面。你可以上傳一張參考圖,精準控制畫面中人物的姿勢或構圖,不必再憑運氣抽卡。

動態提示詞功能也正式加入,方便你自動排列組合提示詞元素,批次測試畫風和主體。

針對新一代模型,InvokeAI 3.0.0 提供了對 Stability AI 旗下 Stable Diffusion XL(SDXL)的初步支援。

提示詞長度限制也打破了以往的 77 個 token,支援更長、更細膩的文本描述。高階使用者還可以選擇在更早的 CLIP 層提取特徵,生成更多樣化的影像結果。

介面本身也重新梳理了佈局。隨機種子生成器等常用按鈕變得順手好找,還加入了多相簿管理功能,方便按主題或時間分類整理大批生成作品。

怎麼跑起來與硬體門檻

新版本在記憶體佔用和執行速度上做了針對性最佳化。

針對 Mac 使用者,3.0.0 允許以半精度(float16)載入模型,大幅減少了對系統統一記憶體的佔用,執行門檻明顯降低。

在模型管理上,終端安裝工具 invokeai-model-install 迎來重構。介面劃分了不同標籤頁,支援安裝 Checkpoint、Diffusers 格式、ControlNet、LoRA 以及 Textual Inversion 嵌入向量。你可以直接裝本地磁碟上的模型,也可以貼上網頁連結或 Hugging Face 的 Repo_ID 自動拉取。

啟動 WebUI 的推薦命令調整為了 invokeai-web。原來的命令列生圖工具則被移除,替換為面向開發者的 invokeai-node-cli,方便在終端裡測試節點流程。

如果你想體驗視覺化的節點連線,可以在 WebUI 右上角的設定選單中開啟實驗性的節點編輯器,直接拖拽搭建複雜的生成工作流。

想要上手的使用者,可以前往 GitHub 的 InvokeAI 倉庫下載 3.0.0 版本的安裝包,相關問題和使用教程都在官方文件與 Discord 社群開放交流。

為什麼重要

我們認為,InvokeAI 3.0 這一步走得相當清醒。

在開源影像生成領域,WebUI 派系一直面臨簡單易用與複雜控制的二選一。InvokeAI 這次把底層全切成節點,同時在前端保留了友好的互動介面,既沒有讓普通使用者面對一堆亂麻般的連線望而卻步,又給進階玩家留出了實驗性節點編輯器和擴充套件自由。

如果你正在尋找一個介面清爽、原生支援 ControlNet 且對 Mac 硬體相對友好的開源工具,3.0 版本非常值得下載一試。唯一的注意事項是節點編輯器目前仍屬實驗性質,複雜的自定義鏈路在穩定性上可能還需要磨合。

來源 (2)

  1. [1]
    youtube.com(在新分頁開啟)原文youtube.com
  2. [2]

每日 AI 內容精選