見出し画像

【あなたのWAN2.2はもう古い】最新の最適化技術(Nag, 3-Pass Sampler)で“Super WAN2.2”に覚醒させる方法。VFI後処理で品質は別次元へ。

どうも皆さん! 葉加瀬あい(ハカセアイ) です!

ということで今回ご紹介するのは、皆さんが普段使っている大人気AI動画生成モデル`WAN2.2`の性能を、 極限まで、120%引き出す ための、最新の “最適化技術” です!

 「`WAN2.2`、すごいけど、たまに動画が崩れちゃう…」
「もっとプロみたいな、滑らかで高品質な動画が作れたらいいのにな…」

そんな風に思っているクリエイターの皆さん、 今日の記事は、まさに皆さんのためのもの です!

今回の記事を読めば…

  • 皆さんが使っている`WAN2.2`が、実はまだ “真の力”を隠し持っている という衝撃の事実がわかります!  

  • プロが使う 複雑な最適化技術(Nag, 3-Pass-Samplerなど) を、 ワンクリックで適用 できる、魔法のような全自動ワークフローが手に入ります!  

  • 生成した動画を、後処理で “ヌルヌル実写級” のクオリティに引き上げる、 簡易Upscale & VFI のテクニックまで、まるっとマスターできます!

ということで今回お話しする内容はこんな感じです!

1.  【衝撃ビフォーアフター】 これが`WAN2.2`の“本気”!最適化で、AI動画はここまで変わる!
2.  【技術解説】 `Nag`って何?`3-Pass-Sampler`って?プロが使う最適化技術の秘密をやさしく解説!
3.  【完全再現】 私が作った“全部入り”ワークフローでOK!今日から皆さんもプロのクオリティ!

なお、Youtube では note の内容をAIで動画に変換して公開しているので、まだの方は noteのフォローYouTubeのチャンネル登録 もお願いします!

https://www.youtube.com/%40AI-Hakase

また、今回の動画版はレンダリングが終了し次第、こちらにて公開していますので、動画派の方はぜひご覧ください!

それでは、本日もよろしくお願いします!


Super WAN2.2 - 眠れる獅子を起こす時

【衝撃映像】皆さんの`WAN2.2`、もっと“ヤバく”なります。

「`WAN2.2`、すごく高品質な動画が作れるけど、時々キャラクターが崩れちゃう…」
「もっとプロみたいに、滑らかで、安定した動画が作れたら最高なのに…」

そんな風に、心のどこかで思っていませんか?

実は、最近明らかになったいくつかの “最適化技術” を組み合わせることで、皆さんが普段使っている`WAN2.2`の性能を、 120%…いえ、200%以上に引き出す ことができるんです!  

まずは論より証拠!
最適化 「前」 の普通の`WAN2.2`と、最適化 「後」 の`Super WAN2.2`で、動画のクオリティがどれだけ劇的に変わるか、この比較動画をご覧ください!

▼【比較動画】アニメ風キャラクター
左が通常版、右が今回の最適化+簡易VFIを適用したものです!

▼【比較動画】リアル系キャラクター
こちらも同じく、左が通常版、右が最適化版です!

見てください…!右側の最適化後の動画、キャラクターの動きが まるでLive2Dみたいにヌルヌル滑らか で、存在感が全然違いませんか…!?

特に、こんな風に少し動きが激しい動画で比べてみると、その差は一目瞭然です!

もう、これが同じ`WAN2.2`から作られているなんて、信じられないですよね…!  

“Super WAN2.2”を構成する、魔法の技術たち

この劇的な品質向上は、決して偶然ではありません!
いくつかの最新“最適化技術”を、緻密な計算の上で組み合わせることで実現されているんです。  

具体的には、モデルを読み込む部分は今までと変わらないんですけど…

その先に、こんな魔法たちが隠されているんです!

魔法①:`Patch Attention` & `Model Shift` & 特殊な`CFG`設定

ここは少し専門的なお話になるんですけど、AIが動画を作る際の「どこに注目するか(Attention)」や「どういう風に絵を描き進めるか(CFG)」といった、コアな部分に特殊な設定を加えることで、生成速度や動画全体の安定性をぐぐっと高めています!

それで、これまでCFGスケールという言葉を普通に使っちゃったんですけれども、これどういうものかと言いますと、簡単に言いますと ポジティブプロンプトの聞き具合とかネガティブプロンプトの聞き具合とかを調整したりできる値 ですね!

それぞれ例えば1から15までで値をいろいろ入れ替えながら同じ条件で生成すると、一例としてはこんな感じの違いが出ます!

もちろん今回のような最適化技術を一緒に使用している場合については、ここのCFGスケールについては 少しセオリーと違った設定 をしていくんですけれども、特に`WAN2.2`の最適化ワークフローでは、この CFGスケールが結構大事な意味を持ってくる わけですね!

とはいっても、私の方で 最適値を計算できるように設定 しているので、ここについては いじらなくても大丈夫 だと思います!

魔法②:`Nag` (Negative Guidance)

これは、AIに「こういうのは絶対にやっちゃダメだよ!」と、ネガティブプロンプトの指示を “強く” 聞かせるための最新技術です!
「キャラクターの手が崩れるのはNG!」「背景がぐちゃぐちゃになるのはNG!」といった禁止事項をAIがしっかり守ってくれるようになるので、動画の破綻が劇的に減るんです!

魔法③:`3-Pass-Sampler` (3段階サンプラー)

そして、ここが今回の最適化で一番重要かもしれません!
通常、`WAN2.2`のワークフローでは、2人の専門家(サンプラー)が協力して動画を作っていました。
でも、この`Super WAN2.2`では、 「下書き担当」「ペン入れ担当」「仕上げ担当」という3人のプロフェッショナル がリレー形式で動画を完成させる `3-Pass-Sampler`(3段階サンプラー) という手法を取り入れています!

各工程の精度が格段に向上することで、最終的なクオリティが別次元に引き上げられるんです!
この設定、実は結構難しいんですけど、私のワークフローでは、皆さんが意識しなくても最適な設定になるように、 全部自動化 しておきました!

魔法④:簡易`Upscale` & `VFI`による後処理

そして、動画を生成して終わりではありません!
仕上げに、動画の 解像度を上げる「Upscale(高画質化)」 と、動きを 劇的に滑らかにする「VFI(フレーム補間)」 という後処理まで、ワークフローに全部入れちゃいました!

▼UpscaleとVFIの詳しい解説はこちら!
以前、有料ソフトのTopaz AIを再現する、というテーマで詳しく解説しました!

この2つを組み合わせることで、AIが作ったとは思えないほどの “ヌルヌル実写感” が生まれるんです!

もちろん、いつもの“全自動”機能も!

その他にも、私のワークフローではおなじみの「プロンプト自動生成」や

「モデルの自動ダウンロード」機能、

さらには動画の長さやステップ数に応じて最適なパラメータを自動計算してくれる機能も、もちろん全部入りです!

「でも、葉加瀬さん、`Pusa`っていう、もっと新しい高速化技術も出てるみたいだけど…?」

するどいですね!そうなんです、AIの世界は日進月歩で、`Lightning`よりもさらに新しい`Pusa`という高速化技術も登場しています。

https://huggingface.co/RaphaelLiu/Pusa-Wan2.2-V1

今回は、安定性と品質を最優先して、実績のある`Lightning`ベースでワークフローを組みましたが、最新技術が好きな方は、ご自身で`Pusa`に差し替えてみるのも面白いかもしれません!

「こんなに複雑な技術、組み合わせるなんて自分には無理…」
そう思いますよね?
その通り、普通にやろうとすると、めちゃくちゃ難しいです!

…ですが、もし、この 全ての最適化が“ワンクリック”で完了する としたら…?

葉加瀬特製!“思考停止OK”なSuper WAN2.2ワークフロー

ということでここからは、今ご紹介した全てのプロ向け最適化技術を、 誰でも・簡単に・“思考停止”で 使えるように、私がゼロから作り上げた “全部入り”の特製ワークフロー をハンズオンで解説していきたいと思います!

「`Nag`とか`3-Pass-Sampler`とか、言葉を聞いただけでも難しそう…」
「私に使いこなせるかな…」

そんな心配は、一切不要です!
これから皆さんに体験していただくのは、専門知識がなくても、 まるで魔法のボタンを押すかのように 、皆さんの`WAN2.2`を `Super WAN2.2` へと覚醒させる、究極のワークフローです。

モデルの自動ダウンロード、プロンプトの自動生成、最適なパラメータの自動計算やリサイズ まで、

クリエイターの皆さんが「面倒くさいな…」と感じるであろう全ての作業は、私が裏側で 全部自動化 しておきました!  

初心者の方でも、 ワンクリックで始められる ように、環境構築から丁寧にサポートします!

ちなみに、まずは`WAN2.2`を無料で試してみたいな、という方については、こちらの動画でその方法などを詳しく解説しているので、よかったらご覧になってください!

▼まずはWAN2.2を無料で試してみたい方はこちら!

ぜひ、 私が作り上げた“究極の最適化ワークフロー” で、皆さんの`WAN2.2`を “Super WAN2.2” に覚醒させてください!  

ということで、ここからは私のNoteメンバーシップ「 あいらぼ(Ai-Lab) 」の入門者さん限定でやっていきたいと思います!

https://note.com/ai_hakase/n/ncdcda4208fd7

人数制限 を設けているので、気になる方はお早めに以下のURLから入門して続きをご覧ください!



ここから先はメンバーシップ「 あいらぼ(Ai-Lab) 」にご入門いただいた方のみご覧いただけます。葉加瀬特製の Jupyterノートブック“Super WAN2.2”ComfyUIワークフロー の配布、そして誰でも迷わない 超具体的なハンズオン解説 が続きます!



ワークフローの詳細解説と配布

それでは実際にこちらの、私が改良に改良を重ねた“Super WAN2.2”ワークフローを説明しながら、お配りしていこうかと思います!

葉加瀬特製ノートブック&ワークフローのダウンロード

まずは、今回使用するこちらの Jupyterノートブックワークフロー をダウンロードしてください!
ローカル環境から実行する方は ワークフローのダウンロードだけで大丈夫 です!
すでに私のPaperspace用ノートブックをお使いの方も、今回は専用に更新しているので、必ずこちらの v5 をダウンロードして使ってください!

ここから先は

4,549字 / 31画像 / 2ファイル

あいらぼ (Ai-Lab) は、NoteとYouTubeを活用して、皆さんを「生成AIを使いこなす側…

🐾あいらぼ:記事|動画|ComfyUI ワークフロープラン

¥1,980 / 月
あと5人募集中

🐾あいらぼ:記事|動画|WF プラン(質問・サポート付き)

¥4,980 / 月
あと7人募集中

この記事が気に入ったらチップで応援してみませんか?