記一次嘗試如何用AI畫出更理想的mea圖
本來想發(fā)在頻道的,騰訊不當(dāng)人發(fā)不出去,寫都寫好了總要找個(gè)地方發(fā)吧


心血來潮玩了玩,說是現(xiàn)在偏真實(shí)類型的模型很火,就跑去c站下了個(gè)模型,用promo拉回anime風(fēng)格

跑出來是這效果

就是手指依然不行,試了試img2img的修復(fù)功能,還湊合,但是限制比較大,碰到畫面色彩豐富的就寄了,而且出的圖跟演示效果不一樣啊,差太多了

所以根據(jù)模型上傳者提示,我下載了該模型的vae,效果馬上不一樣了??
?


可見色彩表現(xiàn)如何,很大程度上取決于你用了哪個(gè)vae
?
但是效果依然不理想啊,出圖很隨機(jī)而且手還是很拉,所以開始試著用新出的controlNet和openPose這兩個(gè)插件,可以參考這個(gè)油管視頻 https://www.youtube.com/watch?v=MDHC7E6G1RA
?
安裝好了上來就給我報(bào)錯(cuò)
\stable-diffusion-webui\venv\lib\site-packages\ffmpy.py", line 98, in run
raise FFExecutableNotFoundError(
ffmpy.FFExecutableNotFoundError: Executable 'ffmpeg' not found
?
我沒學(xué)過python啊,不知道這是個(gè)什么情況,google了半天在AUTOMATIC1111的git上找到了一個(gè)和我碰到同樣問題的網(wǎng)友,在回答的最下面有人說這是因?yàn)閒fmpeg與win10/11兼容性差無法自動安裝,需要手動下載并配置環(huán)境變量
于是我參照 https://www.thewindowsclub.com/how-to-install-ffmpeg-on-windows-10
手動配置了ffmege,還真可以,如果有用win10和win11的報(bào)這個(gè)錯(cuò)的,可以參考這個(gè)方法
?
隨便挑了一張跑出來的圖

?
使用controlNet讀取圖片姿勢的功能


效果非常好,姿勢基本差別不大
于是又從c站下載了別人做好的姿勢,效果相當(dāng)穩(wěn)定


這張圖沒用Hires. fix功能,我顯存不夠內(nèi)存溢出了(
顯存夠的還是建議開,優(yōu)化很大
?
手指依然是個(gè)問題,但今天沒時(shí)間搞了,手指骨架太新還沒有人做。
看了下conrolNet的說明文檔上的其他功能



?
controlNet是根據(jù)不同模型獲取圖片信息后,輔助ai進(jìn)行畫圖
正好在b站上看到有人出了用controlNet畫手的視頻,就試了試

這里疊加了手勢和姿勢,且手部素材是用MMD做的,可以看出手勢固定了,但效果還是不太理想,我尋思再和手勢骨骼結(jié)合應(yīng)該能更好,沒時(shí)間試了,下次有時(shí)間再說吧