見出し画像

【VACEよりスゴい】動画の“中の人”を完全に入れ替える「Wan2.2-Animate」がヤバい。TikTokマーケティングの常識が変わる、その仕組みとは?

どうも皆さん!最近、プロテインのチョコレートとバナナを一緒に食べるのにはまってます、 葉加瀬あい(ハカセアイ) です!

ということで、今回ご紹介するのは、最新にして最強のキャラクターアニメーションAI、 `Wan2.2-Animate` です!  

…皆さん、今お見せしているこの動画、信じられますか?
まるで人間が演じているかのように滑らかに動くキャラクター…。

「`Wan2.2-Animate`?さっき初めて知ったけど、全然詳細がわからない…」
そんな方々こそ、見逃し厳禁です!

はっきり言ってこれは、 TikTokなどのインフルエンサービジネスのあり方を、根底から変えてしまう かもしれない、とんでもない技術だと言われています!  

実は当の私も、今日の記事、本当は以前こちらの動画でもご紹介した、 “魂のコピペ” とも言える革命的技術 `VACE` について、詳しく解説する予定だったんです。

▼以前のVACE解説動画はこちら!

でも…今回ご紹介する `Wan2.2-Animate` という、 もっとヤバい技術が出てしまった ので、急遽、内容を全て差し替えました…!

はっきり言って、まだリリースされたばかりなので、「もうちょっとこうだったらいいな」って思う点も正直あります。でも、そのポテンシャルは計り知れません…。  

今回の記事を読めば…

  • AI動画制作における 最大の悩み「キャラクターの一貫性(キャラ固定)」 を、 LoRA学習なしで解決 できたり、  

  • VACEやControlNetとは全く違う 、「動きを“ロスレス”で完全模倣する」`Animate`の 革命的な仕組み が、誰にでも理解できます!

  • そして、実際にこの神技術を 無料 で使って、皆さんの 動画制作やマネタイズの可能性をどう変えるのか 、その無限の未来像についても触れていこうかと思います!

https://gorden-sun.notion.site/9-20-AI-27459424732580a38ca0f3bf9cd0d441  

ということで今回お話しする内容はこんな感じです!

1.  【衝撃】 “たった1枚の絵”が全てを変える!AI動画のキャラ固定問題、ついに終結へ。
2.  【核心】 これは“動き”の完全コピー!?VACEをも超える`Animate`の魔法
3.  【未来】 無料でプロ級アニメが当たり前に?`Animate`が拓く、新しい稼ぎ方と創作のカタチ

なお、Youtube では note の内容をAIで動画に変換して公開しているので、まだの方は noteのフォローYouTubeのチャンネル登録 もお願いします!

https://www.youtube.com/%40AI-Hakase

また、今回の動画版はレンダリングが終了し次第、こちらにて公開していますので、動画派の方はぜひご覧ください!

https://note.com/ai_hakase/m/m093618cdf798

それでは、本日もよろしくお願いします!


解説:Wan2.2-Animate - AI動画は「完全模倣」の時代へ

さて、`VACE`を超えるという、この`Wan2.2-Animate`…。
一体“何が”そんなに凄いのでしょうか?
その核心は、驚くほどシンプルでありながら、革命的な 2つの魔法のモード に隠されています。

一体“何”ができるのか?2つの革命的モード

魔法①:アニメーションモード(動きの“完コピ”モード)

まず1つ目は、 ビデオ内の人物の動きを、皆さんのキャラクターに“完全コピー”させてしまう モードです!

お手本となる動画(実写でもアニメでもOK!)と、動かしたいキャラクターの画像を1枚用意するだけで、AIがその動きを寸分の狂いもなくトレースし、皆さんのキャラクターがまるで生きているかのように動き出すんです!  

しかも、見てください、この口の動き…。 リップシンクも、ほぼ完璧 に再現してくれます。  

魔法②:置き換えモード(“中の人”入れ替えモード)

そして2つ目が、さらに驚きのモードです。
これは、 動画の中に映っている人物を、皆さんのキャラクターに“丸ごと”置き換えてしまう というもの!  

しかも、ただ顔を貼り付けるだけではありません。元の動画の 表情、動作、さらには照明の当たり具合 までAIが完全に理解し、まるで最初からそのキャラクターがその場所にいたかのように、自然に統合してくれるんです…!  

簡単に言うと、`ControlNet`のように 「動きを指示してアニメーションさせる」 か、動画内の人物を 「丸ごと入れ替える」 か、この2つの強力な魔法を、自在に使い分けることができるんですね!  

【核心】ControlNetやVACEと“決定的”に何が違うのか?

「葉加瀬さん、それってControlNetとか、前に紹介してくれたVACEと何が違うの?」
良い質問ですね!その違いこそが、`Wan2.2-Animate`が“革命”と呼ばれる理由なんです。

▼比較対象のVACEの公式モデルページはこちら
https://huggingface.co/alibaba-pai/Wan2.2-VACE-Fun-A14B

`ControlNet`で動画の動きを真似させようとすると、一度、棒人間のような骨格データ(アノテーション)に変換する工程が入ります。
でも、その時に、どうしても元の動画が持っていた 細かなニュアンスや滑らかさが、少し失われてしまう ことがあったんです…。  

しかし、`Wan2.2-Animate`は違います。
アノテーションを介さず、 元の動画の動きを“ロスレス”で、そのままダイレクトにトレースする んです!
だから、情報の抜け落ちがほとんどなく、 完璧にお手本通りの、ヌルヌルで滑らかな動画 が完成するというわけなんですね…!  

さらに、`LC-Light`のような照明を美しく再現する技術も内部的に組み込まれているようで、光の当たり方や影の落ち方まで、驚くほど綺麗に再現してくれます。

そして、何より驚くべきは、 既存の高速化LoRAがそのまま使える こと!
この、とんでもないクオリティの動画が、環境によっては わずか4〜5分 で完成してしまうなんて…本当に信じられませんよね…!


未来予測:TikTokインフルエンサーは“AI”に仕事を奪われる?

それで、この`Wan2.2-Animate`の登場は、特に インフルエンサービジネスや企業のコンテンツマーケティング に、革命的な変化をもたらすと言われているんですよね。

その理由が

1.  ①【“中の人”の不要化】 : 1人のインフルエンサーが、AIアバターを使って“100人”のキャラクターを演じ分ける未来が、もうすぐそこまで来ています。

2.  ②【コンテンツ制作の“超”効率化】 : 企画から動画公開までの時間が劇的に短縮され、投稿の頻度とクオリティが爆発的に向上します。単純にメイクとかヘアセットとかしてる時間が高速動画生成の時間に置き換わるわけですからね!

ですので、今のうちにこの技術を学ぶことは、未来のクリエイターにとって、最高の自己投資になるはずです!

正直レビュー:Animateの“今”と“これから”

さて、ここまで`Wan2.2-Animate`の革命的な側面を熱く語ってきましたが、ここからはAI事業家として、その リアルな現在地 についてもお伝えしていこうかと思います。  

今のAnimateにできること、できないこと

`Wan2.2-Animate`は、リリースされたばかりの、ダイヤモンドの原石です。
つまり、とてつもない可能性を秘めている一方で、まだ少し磨かれていない部分もある、ということです。

実際に使ってみると、お分かりのように、そのまま生成しただけだと 画質が少し荒くなってしまう ことがあります。

これは今後のアップデートで間違いなく改善されていく部分だと思いますが、現時点では、プロの作品として使うには、 Upscale(高画質化)やVFI(フレーム補間)といった後処理 が、ほぼ必須と言えるかもしれません…!

一応私も、こちらでそれらをComfyUIから無料で行う方法を解説してるんですけども、そういった技術を後処理として組み合わせると良いかもしれません!


葉加瀬式!“思考停止OK”な神ワークフロー

「この革命的な技術、すぐにでも試したい…!」
「でも、どのモデルをダウンロードして、どう設定すればいいのか、さっぱりわからない…!」

そうですよね!

まずは手軽に試してみたいな、という方は、回収制限などあるんですけど、こちらのHugging Faceで公開されている 公式のWebデモ で、その魔法の片鱗に触れることができます!

▼公式Webデモはこちら!
https://huggingface.co/spaces/Wan-AI/Wan2.2-Animate

何回でも自由に動画生成をやって、 誰でも・簡単に・“思考停止”で 完璧なアニメーションを作りたい!という方は、

https://huggingface.co/befox/Wan2.2-Animate-14B-GGUF  

ここから私が作成した、モデルの自動ダウンロードや自動プロンプトや自動リサイズなどを取り入れた、 “全部入り”の特製ワークフロー を、この先でハンズオン解説します!

TikTokの未来を、今日、皆さんの手で作り始めましょう!

ということで、ここからは私のNoteメンバーシップ「 あいらぼ(Ai-Lab) 」の入門者さん限定でやっていきたいと思います!

https://note.com/ai_hakase/n/ncdcda4208fd7

人数制限 を設けているので、気になる方はお早めに以下のURLから入門して続きをご覧ください!


ワークフローの詳細解説と配布

それでは実際にこちらの、私が改良に改良を重ねた`Wan2.2-Animate`の特製ワークフローを説明しながら、お配りしていこうかと思います!

葉加瀬特製ノートブック&ワークフローのダウンロード

まずは、今回使用するこちらの Jupyterノートブックワークフロー をダウンロードしてください!
ローカル環境から実行する方は ワークフローのダウンロードだけで大丈夫 です!
すでに私のPaperspace用ノートブックをお使いの方も、今回はAnimate専用に大幅アップデートしているので、必ずこちらの v7 をダウンロードして使ってください!

ここから先は

3,444字 / 25画像 / 2ファイル

あいらぼ (Ai-Lab) は、NoteとYouTubeを活用して、皆さんを「生成AIを使いこなす側…

🐾あいらぼ:記事|動画|ComfyUI ワークフロープラン

¥1,980 / 月
あと4人募集中

🐾あいらぼ:記事|動画|WF プラン(質問・サポート付き)

¥4,980 / 月
あと7人募集中

この記事が気に入ったらチップで応援してみませんか?