見出し画像

[ComfyMaster15] ComfyUIの{動的|推奨}プロンプトの落とし穴！

AICU

「思い通りの画像を生成したい！けど思うようにいかない…」という方、TextToImage(t2i)を使いこなせていますか？
Stable Diffusionの内部の仕組みを理解し、ComfyUIでのText to Imageテクニックを身につけて、思い通りの画像を生成できるようになりましょう！

こんにちわ、AICU media編集部です。
「ComfyUI マスターガイド」第15回目になります。
この記事では、ComfyUIを始めたばかりの方向けに、プロンプトの基本から応用、そしてComfyUI特有のテクニックまでを、実用的なプロンプト例を交えながらわかりやすく解説します。

前回はこちら


プロンプトテキストのランダム置換

ComfyUIでは、{選択肢1 | 選択肢2 | 選択肢3}のように記述することで、プロンプトの一部をランダムに選択することができます。

プロンプト例

A {red | blue | green} apple on a table

このプロンプトでは、red、blue、greenのいずれかがランダムに選択され、テーブルの上にある赤い、青い、または緑のりんごの画像が生成されます。

AUTOMATIC1111での「Dynamic Prompt」に当たる機能ですね！でもComfyUIの場合は特に機能拡張などは不要です。

動的プロンプトの注意点

注意点があります。実は、Empty Latent Imageのbatch_sizeを増やしたとしても、一度のワークフローで生成される画像には、同じプロンプトが適用されます。動的プロンプトによるランダム置換を適用するには、Queue Promptを複数回実行する必要があります。
以下は、batch_sizeを4にして実行した例です。全て緑のりんごが生成されています。

Queue Promptを複数回実行した場合の結果も見てみましょう。
Extra optionsにチェックを入れて、Batch countを4にして生成します。

先ほどと違い、ランダム置換が適用されています！

これを応用して、キャラクターの生成でもランダム置換が適用されるかテストをしてみます。以下、テストで使用したプロンプトになります。

1girl, short bob, {wearing dress | wearing t-shirt and jeans | coveralls}, looking at me and smiling, realistic, full body

ショートボブの少女がワンピース or Tシャツとジーンズ or 作業着を着て笑っている。という設定

モデルカードに注目! 推奨プロンプト

他のモデル（CheckpointやLoRAなど）を使用する際は、そのモデルが推奨するプロンプトを使用しましょう。モデルが推奨するプロンプトは、モデルの説明ページに書かれているので、モデルを使用する前にしっかり説明をよむことが大切です。

Checkpointの例

Checkpointの例を見てみましょう。以下のRealVisXL V4.0というモデルのページを確認してみます。

説明を読むと、Recommended Negative Promptの項に以下のプロンプトが記載されています。

(face asymmetry, eyes asymmetry, deformed eyes, open mouth)


https://huggingface.co/SG161222/RealVisXL_V4.0

これは、RealVisXL V4.0を使用する際は、ネガティブプロンプトに上記のプロンプトを使用することを推奨しています。他にもHiresFixでの推奨設定なども書かれています。RealVisXL V4.0を使用する際は、ネガティブプロンプトに指定のプロンプトを入力し、この種の推奨設定をしっかり理解することで、より高品質な画像を生成することができます。

新しいモデルを試すときにも、利用規約やライセンスと並んで、推奨プロンプトや設定はしっかり読みましょう！

LoRAの例

次にLoRAの例を見てみましょう。以下のデルタもんLoRAを確認してください。

デルタもんLoRAのページを見ると、「The trigger word is ap_deltamon.」と記載があります。

<lora:deltamon_official_v1.0:1.0>, ap_deltamon,1girl,solo,white_background,simple_background

ap_deltamonだけでもかなり正確に生成できる。

このLoRAを使用する際は、ポジティブプロンプトに「ap_deltamon」を含めることで、デルタもんを生成できる、とあります。
トリガーワードがわからないと、LoRAを活用することができませんから、超重要情報です。

まとめ

この記事では、ComfyUIでSDXLのプロンプトを記述する基本的な方法から、応用的なテクニックまでを紹介しました。プロンプトエンジニアリングは、試行錯誤を通して習得していくものです。様々なプロンプトを試してみて、自分にとって最適な表現方法を見つけてみましょう。

ComfyUIとSDXLは、非常に強力な画像生成ツールです。プロンプトの力を最大限に活用することで、あなたの創造性を形にすることができます。ぜひ、色々なプロンプトを試して、素晴らしい画像を生み出してください！

次回は、image-to-imageの方法を紹介します。乞うご期待！

【お知らせ】「デルタもん4コマ漫画コンテスト」開催中！

【応募方法】

  1. 「デルタもん」をテーマにしたオリジナル漫画を作成する

  2. 作品をX(Twitter)に投稿し、応募フォームへ記入します
    エントリーフォームのURL → https://j.aicu.ai/Delta4manga

必須ハッシュタグ #デルタもん4コマ #AICU #BlendAI
締め切り：2024年9月10日（火）23:59

審査期間：2024年9月11日（水）～2024年9月13日（金）
結果発表：2024年9月14日（土）　AICU media公式noteにて発表(予定)！

X(Twitter)@AICUai も忘れずフォローよろしくお願いいたします！

画像生成AI「ComfyUI」マスターPlan

画像生成AI「Stable Diffusion」特に「ComfyUI」を中心としたプロ向け映像制作・次世代の画像生成を学びたい方に向けたプランです。最新・実用的な記事を優先して、ゼロから学ぶ「ComfyUI」マガジンからまとめて購読できます。 メンバーシップ掲示板を使った質問も歓迎です。

  • メンバー限定の会員証が発行されます

  • 活動期間に応じたバッジを表示

  • メンバー限定掲示板を閲覧できます

  • メンバー特典記事を閲覧できます

  • メンバー特典マガジンを閲覧できます

  • 動画資料やworkflowといった資料への優先アクセスも予定

【書籍化】「ComfyUIマスターガイド」
http://j.aicu.ai/comfysb

【今すぐ使えるComfyUI】
https://aicu.jp/comfyui

【月刊AICUマガジン】「つくる人をつくる」クリエイティブAI専門誌、毎月魅力的な特集や深掘りお送りします[Kindle Unlimitedで無料]
https://j.aicu.ai/kindle

本日のメンバーシップ向けボーナストラックは犬沢某@InsBow さんのカバーアート（文字入れなし）です！
かわいいイラストをいつもありがとうございます！

ここから先は

0字 / 1画像
この記事のみ ¥ 980
Amazon Payで支払うと最大2%還元のチャンス！ 9/30まで

生成AIクリエイターユニオン『AICU: AI Creators Union』は、「つくる人をつくる…

AIキャラを創って動かす！ComfyUI実践マスタープラン

¥1,000 / 月
1ヶ月無料

世界中で注目が集まっている画像生成AIのユーザーインターフェース「ComfyUI」について週1-2件程度の新作記事を更新ししています。日本を代表するComfyUIの使い手がイラスト、写真、映像制作、広告などのプロ志向の読者に向けて丁寧に解説します。マガジン購読は収録話数と購読者数によって動的に変化します。お早めの購入がお得。本マガジンを購読できるメンバーシップ「ComfyUIマスタープラン」がさらにお得です。 https://note.com/aicu/n/n876fab5a0736

ゼロから学ぶ「ComfyUI」

4,000円

大人気「ComfyUIマスターガイド」として連載しているStable Diffusionを中心としたComfyUI(コンフィーユーアイ)の…

Amazon Payで支払うと最大2%還元のチャンス！ 9/30まで
ログイン