qinfengge

qinfengge

醉后不知天在水,满船清梦压星河
github
email
telegram

如何用AI畫二次元以及三次元的老婆

在家過年很爽,但是上班就不爽了,沒辦法,要恰飯的嘛。所以,我給枯燥的上班生活找了個調剂,那就是用 AI 畫小姐姐。

年前我也試用了下 OpenAI 的 ChatGPT3,簡直驚為天人,我沒有想到 AI 已經發展到這個程度了,幾乎可以說是一個低配版的電影中的智能 AI,缺點就是不能聯網。不過現在有了 new bing,它可以聯網。

十年,二十年前,我們喊互聯網 +,用互聯網給各行各業賦能,而現在,我們很有可能是 AI+,用 AI 來賦能甚至代替某些行業。


本地運行#

如果你的顯卡早於 NVIDIA 的 GTX10 系,或者你的顯卡是 AMD,非常抱歉,你需要自己找其他教程進行安裝,或者使用下面的在線運行進行測試

安裝包來源於 B 站 UP 主秋葉 aaaki發布的視頻【AI 繪畫】啟動器正式發布!一鍵啟動 / 修復 / 更新 / 模型下載管理全支持!,你也可以在此 UP 主的專欄查看安裝包的常用問題和進階操作。

安裝方法請查看上面的視頻,安裝完成後請設置啟動器的配置

image-20230215094939418

選擇對應的顯卡以及顯存,顯存不足可能會出黑圖或無法出圖

  • xattn 優化方案建議強制使用 xFormers,以縮短出圖速度

  • 不使用半精度VAE(no-half-vae)建議勾選,防止使用 Lora 模型無法出圖

  • 關閉數值溢出檢查(disable-nan-check),建議勾選

  • 跳過內部組件同步(快速啟動流程),自選項,如果你覺得啟動時太慢,可以關掉啟動檢查,但是關閉此選項後請不要安裝來源不明的模型和擴展

點擊一鍵啟動後等待啟動進程,直到出現下圖,並且已經打開了瀏覽器界面才能繼續進行操作

此進程需要大概 5 分鐘左右,請耐心等待

image-20230215100639378

啟動後stable-diffusion-webui默認是中文語言,默認是 final-prune.ckpt 模型,此模型可用來生成二次元圖像

image-20230215100842827

你可以在Danbooru 標籤超市中選擇你想要的標籤,然後把正向 tag,和反向 tag 輸入點擊生成即可查看效果。

00189-1066675082-(ahri_1.05), neon lights, v, blue hair, ahoge, hair bow, looking at viewer, 1girl, fox ears, sailor collar, school uniform, blus

正向 tag 為 : (ahri_1.05), neon lights, v, blue hair, ahoge, hair bow, looking at viewer, 1girl, fox ears, sailor collar, school uniform, blus

你也可以使用其他的模型,比如 Anything 來生成其他風格的二次元圖像,只需要在啟動器中的模型管理中下載對應的模型即可。

生成三次元#

image-20230215101950407

需要依賴,請安裝下面的依賴再使用魔法咒語

best quality, ultra high res, (photorealistic:1.4), 1girl, brown blazer, black skirt, glasses, thighhighs, ((school uniform)), (upper body), (Kpop idol), (aegyo sal:1), (platinum blonde hair:1), ((puffy eyes)), looking at viewer, facing front, smiling, laughing,, masterpiece, best quality,
Negative prompt: paintings, sketches, (worst quality:2), (low quality:2), (normal quality:2), lowres, normal quality, ((monochrome)), ((grayscale)), skin spots, acnes, skin blemishes, age spot, glan, lowres, bad anatomy, bad hands, text, error, missing fingers, extra digit, fewer digits, cropped, worst quality, low quality, normal quality, jpeg artifacts, signature, watermark, username, blurry
Steps: 28, Sampler: DPM++ SDE Karras, CFG scale: 7, Seed: 2861044465, Size: 576x960, Model hash: 2051a5b4f0, Denoising strength: 0.7, Clip skip: 2, ENSD: 31337, AddNet Enabled: True, AddNet Module 1: LoRA, AddNet Model 1: koreanDollLikeness_v10(e2e472c06607), AddNet Weight A 1: 1, AddNet Weight B 1: 1, Hires upscale: 2, Hires steps: 8, Hires upscaler: Latent

如果你想用 AI 生成類真人的三次元老婆,你需要使用其他的模型和擴展

你可以查看這個視頻【AI 繪畫】全新的微調模型!LoRA 模型使用教程 插件安裝 NovelAI來安裝擴展

至於 Lora,我的理解是強化特徵訓練,使用一組圖片生成模型用於強化某個或某幾個源文件的特徵,通俗點講就是,如果我用 1 組布偶貓的圖片訓練,然後使用訓練後的 Lora 模型,輸入關鍵字 cat,增加模型的權重,那麼大概率 AI 會畫一隻布偶貓,至於如何訓練,請查看這個視頻【AI 繪畫】最佳人物模型訓練!保姆式 LoRA 模型訓練教程 一鍵包發布

下載模型#

為了畫出類似真人的效果,我們需要下載一個新的模型,你可以直接在啟動器的模型管理頁面進行下載,模型名叫Chilloutmix,你同樣可以在官方的頁面下載。

如果你是在官方下載,請將下載的模型放入啟動器文件夾下的

sd-webui啟動器\models\Stable-diffusion

這個文件夾存放的都是模型

下載 Lora 模型#

上面的模型已經可以幫助你生成真人風格的圖像,但還需要一些個性化的定制

推薦下面兩個 Lora 模型

  1. Korean Doll Likeness

這是一款個個大佬都在使用的模型,擁有精緻的臉龐,足以以假亂真,上方的示例圖就使用這個模型

  1. 國風漢服少女仿明風格 lora 模型

這是 B 站 UP 主做的模型,可以在生成的人物身上加上明制漢服

00062-3861868837-solo, full bdoy illustration of a Chinese girl,(duijin_1.1),skirt,girlface,gorgeous,pure,beautyfull detailed face and eyes,large

下載完 Lora 模型之後,需要將其放到啟動器下的目錄

sd-webui啟動器\extensions\sd-webui-additional-networks\models\lora

當都配置好之後,需要修改設置頁面的模型的 VAE (SD VAE)

你也可以使用其他的 VAE 文件來優化作品的光照,細節,比如vae-ft-mse-840000-ema-pruned.safetensors

下載的 VAE 文件存放路徑為

sd-webui啟動器\models\VAE

image-20230215104715452

請注意一定要保存設置,如果您未設置 VAE 或未保存,則您生成的圖像很有可能會偏灰。

重啟之後,一切順利的話,您將在 web 界面看到多出來的

image-20230215105259972

勾選啟用,然後在 model 中選擇對應的 Lora 模型,如果未找到模型,請點擊下面的 Refresh models,如果還未找到,請檢查是否 Lora 模型放錯了位置。

然後 enjoy😊

在線運行#

如果你因為某些原因不能在線運行,那麼你也可以使用在線的方式來試用

請注意,大多數支持免費的在線平台都有較為嚴格的資源分配策略,因此他們僅能作為試用,我也不推薦長時間佔用免費的在線平台

安裝包來源為[分享] sd-webui Colab 谷歌網盤安裝版。集成各種優化colab 筆記地址

需要注意,使用 Google colab 的免費版,您可能會被隨時暫停,或者因濫用被 BAN

安裝步驟上面已經很詳細了,需要注意的是,因為文件都放在了 Google drive,因此您的網盤空間至少需要 12G 以上才能放得下模型。

默認的啟動界面是英文,你可以在此處下載中文的語言包 zh_CN.json,然後放入下面的文件夾

image-20230215110853891

然後在 web 界面中的設置下的 User Interface 最後選擇語言為 zh_CN,保存設置並重啟即可。

默認安裝及默認啟動的模型都是二次元風格的,如果想生成三次元風格的圖像,請查看上方的本地運行,然後下載對應的模型放到網盤中對應的目錄即可。

其他方式#

你也可以使用下面的其他在線平台

[AI 畫圖] 在 Paperspace 雲計算平台使用 Stable Diffusion web UI (自動腳本部署)

眾神之谷 - 魔法小鎮


最後,感謝那些充分發揮互聯網精神,以及無私奉獻的大佬們。

image-20230215111602656

【AI 繪畫】啟動器正式發布!一鍵啟動 / 修復 / 更新 / 模型下載管理全支持!

【AI 繪畫】全新的微調模型!LoRA 模型使用教程 插件安裝 NovelAI

【AI 繪畫】最佳人物模型訓練!保姆式 LoRA 模型訓練教程 一鍵包發布

[分享] sd-webui Colab 谷歌網盤安裝版。集成各種優化colab 筆記地址

stable-diffusion-webui

vae-ft-mse-840000-ema-pruned.safetensors

[AI 畫圖] 在 Paperspace 雲計算平台使用 Stable Diffusion web UI (自動腳本部署)

Chilloutmix

Korean Doll Likeness

國風漢服少女仿明風格 lora 模型

Danbooru 標籤超市

Civitai 模型站

眾神之谷 - 魔法小鎮

引用的排名不分先後,再次感謝上面的大佬做出的貢獻

載入中......
此文章數據所有權由區塊鏈加密技術和智能合約保障僅歸創作者所有。