AI星瞳(繪畫及翻唱)模型分享及制作經(jīng)驗分享

AI翻唱
1.模型
基于So-VITS-SVC 4.0項目(項目倉庫:https://github.com/svc-develop-team/so-vits-svc)。
挑選了星瞳近一年的唱歌音聲作為聲源素材進行模型訓練,最終留下了三個模型。

鏈接:https://pan.baidu.com/s/121BwSxmpS-xAEN0dhA-SFA?pwd=d9lh?
提取碼:d9lh?
我自己最常用的是99200這個。
2.人聲分離
需要用到軟件UVR5(Ultimate Vocal Remover)。
下面是我最常用也是我個人覺得比較不錯的提取設(shè)置。


AI繪畫
1.星瞳Lora模型

鏈接:https://pan.baidu.com/s/1qzVJ093APxqN1Kz6RrkAUQ?pwd=x3fn?
提取碼:x3fn?
這幾個lora的觸發(fā)詞都是:1girl, blue eyes, short hair,white hair
帶2d的lora主要素材是2d素材,帶2.5d的主要是用的3d素材基于不同的大模型制作,5.27是用的賽博星天使素材
我自己最常用的三個lora是:xingtong2d.safetensors,?xingtong2.5d-000008.safetensors,
xingtong2.5d(realisticVisionV20)-000008.safetensors
xingtong2d.safetensors:建議權(quán)重在0.55-0.8,可以不開啟分層控制,如果出現(xiàn)衣服雜亂的清空,可以開啟分層控制,推薦1,0,0,0,0,0,0,0.5,1,1,1,1,0,0,0,1,1(舉個例子:<lora:xingtong2d:0.55:1,0,0,0,0,0,0,0.5,1,1,1,1,0,0,0,1,1>)
?xingtong2.5d-000008.safetensors:建議權(quán)重在0.6-0.9,強烈建議開啟分層控制,推薦1,0,0,0,0,0,0,0.5,1,1,1,1,0,0,0,1,1(舉個例子:<lora:xingtong2.5d:0.8:1,0,0,0,0,0,0,0.5,1,1,1,1,0,0,0,1,1>)
xingtong2.5d(realisticVisionV20)-000008.safetensors:同上
2.參數(shù)設(shè)置

我一般出圖都是按照pc壁紙來做的,所以直出分辨率都是1920*1080,如果是出豎向圖可以將寬度高度改成960*600或者900*500。就我的經(jīng)驗來說豎向圖的出好圖率是要遠高于出橫向圖的,出橫向圖提示詞盡量對畫面背景要有詳細的描述,否則整個畫面就會出現(xiàn)很多無效內(nèi)容。
如果是想出等身抱枕圖,寬高比最好是1:3,開啟高清修復2倍倍率的前提下寬高可以設(shè)置成250*750

3.大模型推薦
3.1 GhostMix
算的上是我最喜歡的模型,也是我用過最好的2.5d模型,兼容性很好,良圖率高,同時畫面質(zhì)量也高。


3.2?Primemix_colorAnim, CetusMix , MeinaMix,?tmndMix
幾個不錯的2d模型,兼容型高

3.3?darkSushiMix
風格獨特,很適合做暗系圖

3.4?其他

4.其他Lora推薦
4.1 hanfu 漢服(c站地址:https://civitai.com/models/15365/hanfu)
建議權(quán)重0.4-0.6


4.2?Eye (c站地址:https://civitai.com/models/5529?modelVersionId=6433)
增加眼鏡細節(jié)的lora,推薦權(quán)重0.6-0.8

4.3?Add More Details(c站地址:https://civitai.com/models/82098?modelVersionId=87153)
增加整個畫面細節(jié)的lora,也可以設(shè)置成負數(shù)減少細節(jié),具體權(quán)重可以自己多試試,我一般用的話就會調(diào)成1
4.4?塔羅牌?(c站地址:https://civitai.com/models/11177/anime-tarot-card-art-style-lora)
推薦權(quán)重0.8-1
4.5?Blue Archive Emoji style(c站地址:https://civitai.com/models/43256/blue-archive-emoji-style)
一個表情包lora,推薦權(quán)重0.7左右
4.6 花想容/中國風(c站地址:https://civitai.com/models/89348/chinese-style-lora)
很喜歡的一個中國風lora,推薦權(quán)重0.8

4.7?幻想世界(c站地址:https://civitai.com/models/81928/fansty-world-lora)
推薦權(quán)重1

5.超分辨率
直出4k圖或者是8k圖應(yīng)該是不可能的,所以都需要用到超分辨率,方法有很多。我最近常用的是?Tiled diffusion和分塊VAE ,原理簡單來說就是把圖分成很多小塊,然后逐一進行高清化。貼一下大概的參數(shù)設(shè)置,重繪幅度:0.2-0.4

6.其他
1.呆毛的提示詞是:ahoge
2.我自己的出圖流程大致是先有一個大概的想法,然后選定好大模型,定好基本參數(shù),然后寫好提示詞,選好lora,然后先試著出圖,一邊出圖一邊調(diào)整提示詞和lora,調(diào)整好了之后就可以調(diào)整生成批次,一次出多張圖,然后進行初篩,將還不錯的圖進行保存,出到一定量的圖之后就可以進行復篩,確定好復篩后的圖如果有些細小的問題就可以拿去ps里面進行初次修改,修改之后再進行超分辨率,有問題的拿去ps里進行最后一次修改,最終出好一張成圖。
3.不同模型因為原始素材不同,所以人物特征就會有不同的情況,可以根據(jù)提示詞進行調(diào)整
4.一些能提高畫面質(zhì)量的起手式是有必要的,例如:masterpiece, top quality, best quality, official art, beautiful and aesthetic,?extreme detailed,highest detailed
5.只要不是出小分辨率的圖,文生圖的高清修復建議一直開啟
?