Sling☄
學習筆記
comfyUI
工作需求不得不開始跟這東西打架於是開個噗紀錄+哀哀叫
Sling☄
0327 進度
AI 繪圖的終極沙盒 ComfyUI 快速上手 #3 - ControlNet 精確構圖技巧
問題:Manager中沒有controlnet professer aux,到git hub手動下載安裝也無反應。嘗試更新comfyUI無果
可能解法:重新安裝comfyUI
Sling☄
ComfyUI从入门到精通系列-5.从裁剪到重绘,图生图完整搭建!#comfyui #aigc
問題:反推提示詞外掛缺少元件無法運作,詢問chat gpt確認已確實安裝。
解法:沒轍了先放棄這個外掛…(
Sling☄
0327 心得
我恨這個時代。
☯況少☯
解法透漏著七分死感與三分詼諧
Sling☄
☯況少☯ : 進度在0和1反覆橫跳
Sling☄
0328 進度
https://images.plurk.com/qGhz1K11E02hLBbtZIgVc.png
https://images.plurk.com/2eJ51WpN6PJ0utcWX6SYQy.png https://images.plurk.com/1x4TFZBnSxuH6uJFfLsS6x.png
昨天的controlnet重新安裝comfyUI解決了,PA老師的第三集實作完成
問題:生成風景還好但人類慘不忍睹
解法:調整提示詞 吧
Sling☄
0328 心得
模型頗占硬碟空間
逛模型網站看到熟悉畫風和惡俗成人向還是好倒彈
Sling☄
0330 進度
AI 繪圖的終極沙盒 ComfyUI 快速上手 #4 - Flux & Inpaint & Outpai...
https://images.plurk.com/Nb9C01iZLywLyvr3sDNMz.png https://images.plurk.com/5JOl5xQodmTfOuXCTHDr10.png
1.Flux遮罩功能測試、Flux1 Fill Dev下載不了,修圖擴圖功能暫時放置
2.摸魚,熟悉了下Checkpoint和Lora的幾種組合
問題:布袋戲模型大部分沒有下半身,測試openpose沒效果
ChatGPT解法:降低 LoRA 強度、混合LoRA,如使用一個「服裝 LoRA」+ 一個「人體 LoRA」
Sling☄
0331 進度
混元3D模型再升级!MV 2.0版本震撼发布,ComfyUI官方支持,动画视频轻松做!|HunYuan ...
本來想測試圖轉3D的模板,光debug就花了一個半小時,最後是把comfyUI設定為GPU-only解決。但顯卡跑不動還是個大問題...VRAM才3G.....簡單的模型就跑超久,要睡了暫時作罷
Sling☄
0403 進度
Quickly Spin Your 2D Art In 3D! ComfyUI Stable Video...
0331測試的3D模板後來算圖的成果完全不實用,退而求其次轉向多角度影片生成。(保命備註:使用圖片純練習、於本機運算)
問題:生成結果很糟
可能解法:先把2D的圖片轉為有立體感的畫風
https://images.plurk.com/5JJBEuFj5D6zkiGaCPDD2d.png
嘗試用三視圖的lora,看起來蠻糟的,還在想怎麼使用自訂的圖片而不是文生圖
https://images.plurk.com/4l74JwIzSruWVkHFojM9W8.png
Sling☄
一张图AI建模 ComfyUI-3D本地部署 Unique3d-CharacteraGen 工作流效果展...
看到這個生成3D感覺有到實用標準,但環境設定偏複雜,自己的顯卡也不夠力,先放置
Sling☄
Rodin - Free AI 3D Model Generator from Images | Hyp...
目前看起來Rodin的生成能到達實用標準(uv還是要人工整理)
但上傳式的服務不太適合公司專案,既有專案規格要沿用也是問題,
提prototype的話夠用
Sling☄
0406 進度
https://images.plurk.com/6bWEgGcAwWyojeARj6ye0L.png https://images.plurk.com/4GtKzaaoOAinjJA1JvG1g4.png
分別測試了簡單及複雜的圖型,簡單那組意外的還不錯
看來只靠這個工作流只能捕出大致輪廓,無法補足內部細節
Sling☄
0409 進度
Unique3D - a Hugging Face Space by Wuvin
發現0403找到的生成工具Unique3D有DEMO版,背面補足大概做到40%吧
本機表現也是這樣的話好像不必下載來用
https://images.plurk.com/25pwy13XZBtsK3wqQhQnDz.png https://images.plurk.com/6n7g0ujxpoYR4fEKQOkLAa.png
Sample圖的效果有好一點,跟hunyuan3D一樣的狀況
https://images.plurk.com/3Sb3QeHO0mbYiTMfLXXCsL.png
Sling☄
hunyuan3D
https://images.plurk.com/6wt5q3gUEBDWVNXnQh8GqF.png https://images.plurk.com/3fBlMiP3HYE9PQ2dngskoj.png
臉好好笑 背面狀況比unique好
Sling☄
TRELLIS
https://images.plurk.com/4vI7ar0U2GmbqxR4ZzlaRw.png https://images.plurk.com/cI6JoI7HP97YDI56sQTQP.png https://images.plurk.com/6TkR0a1az8UI5JEgvITZvp.png
三個之中補完最好的,連手指都全部做了,雖然臉消失
不知為啥背中挖了個洞 這個死法是另一位吧(靠
Sling☄
0410 進度
controlnet測試多視角
https://images.plurk.com/1ckQiQRif1jlLbBM4zzJ1o.png
請gpt生成三視圖,有種前幾天瞎忙的感覺
https://images.plurk.com/20yxiBzxcP6Nt2tKMsOQI7.png
Sling☄
0413 進度
MV-adapter demo測試
https://images.plurk.com/rGATW35ufzKjwBxtdbRGi.png
Generate endless CONSISTENT CHARACTERS from one inpu...
發現這個工作流,今天只先載好環境還沒有實際跑過
載入新的回覆