今更のようにControl Netの導入② | エラーとの戦い | 100日でComfy UIをマスターする備忘録 #78日目

昨日ダウンロードした内容をもとにトライしてみようー！

実際にノードを繋いで気づいた，そうか，理想の画像を参照してその画像の骨格などの情報から曖昧なプロンプトを強化するということか！

早速エラー発生

linear(): input and weight.T shapes cannot be multiplied (154x2048 and 768x320)

今のモデルの確認

全部ダメじゃん・・・笑
というか今思ったけど，ntrMIXIllustriousXL_v777ForLora.safetensorは，前にベースモデルと一緒にダウンロードされた謎のLoRAと一緒で，LoRAに移せば使えるのでは？？？確かこれ使えない〜〜〜みたいになって困った記憶が・・・（もしかして，いにしえにダウンロードしたFluxもそこにいるのか・・・？なんだかいろんなことがわかってきたような気がする．．．！）

早速Stability Matrixからダウンロードしよう〜〜〜！

ダウンロードしたもの：

• Base model: SD 1.5

• ControlNets(SDXL): 全部

再トライ

またまたエラー発生：ダウンロードに問題あり・・・

あら〜〜〜
昨日時間かかってたからなぁ．うまくダウンロードできてなかったんだろうな．もう一度やるか〜

ということで今日もここまでだ〜
ワークフローはできたし，再ダウンロードしてまた明日トライするしか無さそう．できると思ってワクワクしていたから悔しい・・・

メモ：お試し記録

anime illustration, watercolor style, 1girl, solo, deep purple eyes, perfecteyes, peace sign, white dress, too many frills, floating in space surrounded by pastel nebulae, soft glowing orbs shaped like musical notes, her eyes closed, hands reaching outward, translucent ribbons flowing from her sleeves, soft blue and lavender hues, dreamlike lighting, serene expression, highly atmospheric, blurred stars in the distance, painterly texture, cinematic framing, qxys

LoRA:
View 薄塗り / USNR STYLE: 0.7
View Holographic color style: 0.4
View Perfect Eyes XL: 0.8
View Hands XL + SD 1.5 + FLUX.1-dev + Pony + Illustrious: 0.8

ckpt: Anim4gine

うおぉぉぉぉ！！！
めっちゃいい感じ〜〜〜！
これはアップスケールとかImpactpackが役に立つんじゃないか？
多分，ステップ数を増やすor LoRAが反映されるようにプロンプトを直すor Impactpackとかの修正にかけるだけでかなり良くなるきが・・・！
てか，Anim4gineってこんな感じの淡いイラストも作れたんだね．．．
画風も変えるのが大事なんだな〜．奥が深い・・・
まだ，全然トライしてないことだらけだと改めて実感．
これ見て思ったけど，もっと顔が横長な女の子も作りたいな．全体的に細身が多いからな〜

あと，塗り方とか色くらいなら最適なチェックポイントじゃなくても結構いけるかも？これも色々検証してみてもいいな．ホントまだまだやってないことだらけすぎて無限すぎる．

ckpt: asyncsMIXILLUSTRIOUS

やっぱりモデルとしてはAnim4gineの方が重たいということなんだろうな〜
いやこれは凄いな．かなり線画はっきりしていて私好み．
しかも音符や楽譜の生成が美しい．色塗りはもうちょい抑えめでもいいかもだけどね〜
あと，指は長すぎるように感じる，ピアニストって思えばこんなもんかなぁ．それか前に出ているから遠近法的な？

ckpt: cyberrealistic

絶対うまく行かんだろうとか思いつつ使いたかったのでトライ（そろそろリアル調もできるようになってもいいと思ってはいる．）

こういう感じか．指はなんか変だけど思ったよりいいな〜
普通にリアル系でもうまく生成できるのね．
研究のしがいがあるのかもしれん・・・！
ただ時間かかりすぎ．LoRAが合わないだけかな？

ckpt: hassakuXL

asyncsMIXILLUSTRIOUSと同じ系統だと生成がはやい・・・
そして可愛い〜
もうちょい解像度高くてもいいなぁ．これもモデルの性質？と思ったけど単純にLoRAが合わないような気がしている・・・

ckpt: WAI-NSFW

いやこれが優勝〜〜〜〜
ホント万能だな・・・
恐るべし．