見出し画像

[ComfyMaster22] レイアウトそのままにアニメを実写化!image-to-imageとスタイル変換で実写化レベルを制御 #ComfyUI

アニメ風のイラストを、レイアウトそのままに、実写化したいと思ったことはありませんか?ComfyUIのimage-to-imageでスタイル変換と実写化レベルのコントロールを使いこなしてみましょう。

ComfyUI マスターガイド」第22回は、image-to-image (i2i)の応用編です。以前、スタイル変換について説明しました。

今回は、i2iでのスタイル変換をさらに掘り下げて、denoiseの値がi2iの生成結果にどのような変化を与えるのかを確認してみたいと思います。

前回はこちら
▶[ComfyMaster21] ComfyUIのAPI化 - Websocketで外部保存


1. 今回の目的: 犬のイラストを「レイアウトをそのままに」実写に変換

今回は、i2iで犬のイラストを「レイアウトをそのままに」実写に変換します。変換元の犬のイラストをLatentに変換し、それをKSamplerノードのLatentに入力することで、元の画像の特徴を保持しながら生成を行います。

スタイルの変換には、モデルとプロンプトの影響が大きいです。そのため、モデルには実写に強いモデルを利用し、プロンプトには「realistic, photorealistic」といった生成画像が実写になるようなプロンプトを入力します。

そして、今回は、KSamplerのdenoiseの値の変化による生成結果の違いを比較します。denoiseの値がどのような変化を与えるのかを確認してみます。

2. 使用するモデルと素材

モデル

今回は、モデルにRealVisXL V5.0を利用します。名称の通り、実写系を得意とするモデルで、商用利用可能(画像の販売、サービスへの組み込み可能)になります。このモデルを以下のリンクよりダウンロードし、「ComfyUI/models/checkpoints」フォルダに格納してください。

変換元画像

変換元画像には、以下の犬のイラストを使用します。

画像ファイルは、以下よりダウンロードください。


[おしらせ]【Coloso講座】ComfyUIマスター:カスタムノードとアプリ開発

ブログや書籍といった文字で読みたい方に加えて「動画で学びたい!」という方に向けて、Coloso x AICUコラボ動画コンテンツ第3弾「ComfyUIマスター:カスタムノードとアプリ開発」を開発しています。
詳しくはこちら

【書籍化】「ComfyUIマスターガイド」
http://j.aicu.ai/comfysb

【今すぐ使えるComfyUI】
https://aicu.jp/comfyui

【月刊AICUマガジン】「つくる人をつくる」クリエイティブAI専門誌、毎月魅力的な特集や深掘りお送りします[Kindle Unlimitedで無料]
https://j.aicu.ai/kindle

ここから先は

2,885字 / 5画像 / 1ファイル
この記事のみ ¥ 980
Amazon Payで支払うと最大2%還元のチャンス! 9/30まで

生成AIクリエイターユニオン『AICU: AI Creators Union』は、「つくる人をつくる…

AIキャラを創って動かす!ComfyUI実践マスタープラン

¥1,000 / 月
1ヶ月無料

世界中で注目が集まっている画像生成AIのユーザーインターフェース「ComfyUI」について週1-2件程度の新作記事を更新ししています。日本を代表するComfyUIの使い手がイラスト、写真、映像制作、広告などのプロ志向の読者に向けて丁寧に解説します。マガジン購読は収録話数と購読者数によって動的に変化します。お早めの購入がお得。本マガジンを購読できるメンバーシップ「ComfyUIマスタープラン」がさらにお得です。 https://note.com/aicu/n/n876fab5a0736

大人気「ComfyUIマスターガイド」として連載しているStable Diffusionを中心としたComfyUI(コンフィーユーアイ)の…

Amazon Payで支払うと最大2%還元のチャンス! 9/30まで