關(guān)于打通sd生成2d圖片和3d模型的一些想法。
【Stable diffusion提純和制作模型,使AI動(dòng)畫穩(wěn)定-嗶哩嗶哩】 https://b23.tv/FLYobXE,的回復(fù),你好明王up,評(píng)論字?jǐn)?shù)不能太多這里轉(zhuǎn)一下,這個(gè)視頻里面也要加入,完全似合穩(wěn)定物體的lora訓(xùn)練,這點(diǎn)也是非常重要。是,這樣訓(xùn)練,相當(dāng)于角色動(dòng)作物體等鎖定,穩(wěn)定后就能專門穩(wěn)定東西出圖。目前關(guān)鍵還有一點(diǎn)就是光影,cn插件其實(shí)可以加入多光源燈,(網(wǎng)上有圖片加小燈-開源代碼,實(shí)現(xiàn)圖片內(nèi)物體受光源影響),形成無(wú)光影牽引,穩(wěn)定出無(wú)影圖。cn插件也可以加入多邊形3d模型,通過(guò)點(diǎn)線形成面,類似cn骨骼牽引穩(wěn)定出圖,不但可以穩(wěn)定出圖實(shí)現(xiàn)三渲二,和blender通過(guò)插件自動(dòng)把3d模型各種角度,(建議在6視圖基礎(chǔ)上加入2-3個(gè)45度角圖,這樣通過(guò)cn插件的法線和深度置換ai預(yù)測(cè)加之模型訓(xùn)練一口氣生成8+6視圖,完全實(shí)現(xiàn)目前照片建3d模型,沒準(zhǔn)也可以用sd加文字生成做出一個(gè)完整3D模型,從而實(shí)現(xiàn)了2d-3d完整,而且比較清楚的連通,這也是完全模擬人類從人眼2d到大腦訓(xùn)練成為3d預(yù)測(cè)模型的全過(guò)程,幾視圖就是完全投影就能形成各種3d模型表面,參考cad制6視圖原理),也能直接再3d模型上進(jìn)行uv貼圖。cn插件里面也可以加入目前其他插件,尤其是xyz3d圖片層插件,這通過(guò)開源代碼就能完全實(shí)現(xiàn),以后可通過(guò)專門畫3d或者2d框里面單獨(dú)選模型和詞生成一個(gè)單獨(dú)物體等(簡(jiǎn)單材質(zhì)),再進(jìn)行整體渲染風(fēng)格生成一個(gè)可以定義很多東西的圖,這樣直觀明顯清楚精準(zhǔn)。當(dāng)然,這是我一個(gè)小小想法,如果還有地方說(shuō)的不對(duì)或者不足,請(qǐng)大家平和真心實(shí)意指導(dǎo)交流,謝謝[呲牙]。最后點(diǎn)贊up。[打call]