導(dǎo)航菜單

Stable Diffusion教程:效果超好的Instant-ID換臉 使用方法(純干貨)

導(dǎo)讀 Instant ID 是 controlnet 比較新的一個模型,主要作用也是固定人物的面部特征。它可以僅通過一張圖片進行完美換臉,可能是目前最強的...

Instant ID 是 controlnet 比較新的一個模型,主要作用也是固定人物的面部特征。它可以僅通過一張圖片進行完美換臉,可能是目前最強的臉部遷移模型。

Instant ID 技術(shù)在多個領(lǐng)域展現(xiàn)了其獨特的優(yōu)勢,主要表現(xiàn)在以下幾個方面:

1. 作為一種創(chuàng)新的ID保留方法,Instant ID 有效地解決了訓(xùn)練效率與ID保真度之間的矛盾。

2. 它具有可插拔性,與目前社區(qū)內(nèi)的文生圖基礎(chǔ)模型、LoRAs、ControlNets等完全兼容,可以在推理過程中零成本地保持人物ID屬性。同時,Instant ID 還保持了良好的文本編輯能力,使得ID可以平滑地嵌入到各種風(fēng)格中。無論是添加裝飾、改變發(fā)色還是更換套裝,都能輕松應(yīng)對。

3. 實驗結(jié)果證明,Instant ID 不僅超越了目前基于單張圖片特征進行嵌入的方法(如IP-Adapter-FaceID),而且在特定場景下與ROOP、LoRAs等方法相比也毫不遜色,且成本更低。

更詳細的原理可以閱讀Instant ID團隊在 github 的解析:https://github.com/InstantID/InstantID

步驟一:使用前準備

如果你的 controlnet 沒有 Instant ID 你需要到秋葉啟動包更新一下擴展

此外,你還需要下載controlnet模型到本地的controlnet模型文件夾中

模型下載地址:

ipadapter model

ControlNet model

如果網(wǎng)絡(luò)不好的話可以掃描右邊的二維碼加群獲取,或者在esheep這個在線SD網(wǎng)站上體驗

下載完還要改名字分別修改成 ip-adapter_instant_id_sdxl 和control_instant_id_sdxl,然后再放入這個文件夾中

步驟二:圖生圖設(shè)置

【大模型】必須上 SDXL 模型,因為目前 Instant ID 只支持 SDXL

我這里使用的是 DreamShaper XL V2.1 Turbo

該模型可以在 C 站上下載,訪問不了的可以掃描右邊二維碼加入群聊獲取

或者在Esheep在線SD網(wǎng)站上體驗

【采樣方法】 DreamShaper XL V2.1 Turbo 模型必須使用 DPM++ SDE Karras

【采樣步數(shù)】8

【尺寸】768*1024

【CFG 提示詞相關(guān)性】大模型作者建議將CFG設(shè)置為 2,以獲得最佳效果。

【重繪幅度】0.6

具體參數(shù)可以參考下圖

步驟三:ControlNet 設(shè)置

你的第一個單元必須是 embedding 和 ip-adapter 的組合

第一個單元是獲取人臉特征的模型

你的第二個單元必須是 keypoints 和 control-instant-id-sdxl 的組合

這個單元是作為替換模版,在圖生圖中你可以不上傳圖像,sd 會自動使用你上面圖生圖上傳的圖像作為模板

步驟四:點擊生成

以上參數(shù)設(shè)置好后點擊生成。可以看到面部特征還原的非常好,除了邊緣有一些瑕疵,可以調(diào)整蒙版邊緣模糊度改善

調(diào)整重繪區(qū)域和蒙版邊緣模糊度后:

注意事項

參數(shù)不是固定的,需要參考你的大模型提示,在我使用的DreamShaper XL V2.1 Turbo大模型是按照以上參數(shù)設(shè)置

盡量選擇高清的面部素材可以達到更好的換臉效果

------------------------------------------------------------------------------------------

站長素材AI教程是站長之家旗下AI繪圖教程平臺

海量AI免費教程,持續(xù)更新干貨內(nèi)容

想要深入學(xué)習(xí)更多AI繪圖教程,請訪問站長素材AI教程網(wǎng):

https://aisc.chinaz.com/jiaocheng/

免責(zé)聲明:本文由用戶上傳,如有侵權(quán)請聯(lián)系刪除!

猜你喜歡:

最新文章: