感情表現と演技｜Pollo AI｜Seedance2.0｜どこまで表現できるのか？｜悲しみと怒りの表情

みなさん、こんにちは～･:*+.(( °ω° ))/.:+💓

「Seedance2.0」のモデルで感情表現！
演技の検証をしていきます！(｀･ω･´)ゞ✨🌸
なぜか？…

もう少しで、「Seedance2.5」が
リリースされるらしいのです( *´艸｀)💓✨
その前にやっておきたい‼‼‼😭💖
（リリースされてたら申し訳…(:3 」∠)💦）

「画像から動画へ」
「リファレンスから動画へ」
の機能を使用して検証していきます！
今回は面白い結果になりましたよ～～ヾ(o´∀｀o)ﾉﾜｧｰｨ♪🌸

私がいつも使用しているAIとアプリです📱💻✨


◽nijijourney（イラスト）
◽ChatGPT（プロンプト）
◽Pollo AI（画像生成、動画生成）
◽Canva（動画編集）

👇一緒にやりたいよ～って方👇

モバイル版もございます👇🌸

Seedance 2.0は「演技」をどこまで
できるのか検証(｀･ω･´)ゞ✨！

今回、Seedance 2.0のモデルで、私が一番気になったのが

ということでした(*´ω`*)


Seedance2.5がリリースされるので
2.0で、どこまで表現できるのか検証していきます🌸

最近の動画生成AIは、人物を動かすことは
できるものが増えてきましたよね‎( •ㅅ• و(و"♪✨

でも、それだけでは私は少し物足りなくて…(；´･ω･)
MVでもそうですが、少しでも心動かす…

グッときて涙が出る、ふわっと心が軽くなる
感情が高まる、怒りを覚える
みなさんが持っている感情が揺れる…

そんな作品を目指したいんです(*´ω`*)💓✨

本当に知りたかったのは、
「感情を演じられるのか」という部分でした。

笑顔や泣き顔を作ることはできても、

◽目線が変わる
◽眉が少しずつ動く
◽呼吸が変わる
◽表情がゆっくり変化する
◽セリフに合わせて自然に口が動く

こういった細かな積み重ねがあって初めて
「演技をしている」と感じられると思っています。

そこで今回は、ただキャラクターを動かすだけではなく
AIがどこまで感情の流れを表現できるのか
という視点で、検証してみました∑d(d´∀`*)ｸﾞｯ！✨💗

今回検証したのは、

💎泣く前の感情の変化
💎怒りが少しずつ込み上げる演技
💎日本語リップシンク
💎キャラクターを維持したまま演技できるか

この4つです✨

それでは、いってみましょうヾ(o´∀｀o)ﾉﾜｧｰｨ♪🌸✨

検証① 画像から動画へ🎥

まずは完成したイラストを使って
怒りの感情が徐々に高まっていくシーン
悲しみを表現して涙が徐々に出るシーン
を生成してみました！

結果は…

想像以上でした

仕上がりです👇🌸

泣く演技

悲しみがどんどん高まり、涙も徐々に溜まって
流れ出す感じもいいですね！🌸

怒りの演技

最初は静かに視線を向け、少しずつ眉や表情が変化し
最後に感情が爆発する流れはとても自然✨

特に印象的だったのは、

◽表情の変化
◽怒りの積み上げ方
◽泣くまでの細かな表情の動き
◽日本語リップシンク

怒るシーンは、ただ怒鳴るだけではなく
「怒りを押し殺している時間」
まで表現できていたのは驚きでしたΣ(ﾟ艸ﾟ*)ｽｺﾞｰｲ!!✨

ただ、面白い発見も😂

マリヤの小さな悪魔の角が、途中で
鹿さんみたいな立派な角
になってしまいました🤣
（AIあるあるの楽しさですね🌸✨）

演技はとても良かった反面、細かなデザインまでは
完全には維持できない場面もあるようです(；´･ω･)

クレジットがぁ～～(´;ω;｀)💦 って！！！
そこのお悩みのあなた(*´Д｀)💕


Pollo AIさん、Xでコンテストを
開催していることがあります🌸✨
要チェックです(｀･ω･´)ゞ💗
(※先着早い者勝ちなので、チェックしましょう)

検証②リファレンスから動画へ🎬

次は、キャラクターシートをリファレンスとして使用し
同じような演技を生成しました(ﾉ≧∀≦)ﾉ✨

泣く演技（3本繋ぎ）

声の感じもとても悲しみ
耐えてる感じが表現出来てますね( *´艸｀)💓✨
瞳の揺れ、眉をひそめる感じもいい！

怒る演技（3本繋ぎ）

怒りを歯を食いしばって我慢してる表現とか
静かに睨みつけ、一気に爆発する感じが
とてもよかったです(*´ω`*)💓✨

こちらも感情表現はかなり自然で、
怒りが徐々に大きくなっていく流れはしっかり再現できていました！
ただ、生成を重ねていく中で気付いたことがあります( -᷄ω-᷅ ).｡oஇ

3回目の生成あたりから、少しずつキャラクターが崩れ始めたんです。
（※動画では順番を変えてます）

具体的には、

🎥顔立ち
🎥目の印象
🎥全体の雰囲気

このあたりが少しずつ変化し、元の白銀マリヤとは
違う印象になってきました(；´･ω･)💦

演技はどんどん良くなる一方で、
キャラクターの再現性は少しずつ下がる。

そんな傾向が見えてきました(-□д□-)✨

今回の検証で分かったこと

今回の検証を通して感じたのは
Seedance2.0は「人物を動かすAI」というより…
「感情を演出するAI」
という印象が強かったことです✨

怒りや悲しみなど、大きな感情表現は本当に上手でした🥰
でも、その代わりに感情表現を強くすると…

◽顔立ち
◽パーツ
◽キャラクターデザイン

こういった、細かな部分は少しずつ
変化しやすくなるようです(；´･ω･)💦

演技力とキャラクター維持
この2つのバランスが今後の課題なのかな
と感じました！

💮 良かったところ

• 感情の変化がとても自然

• 怒りや悲しみの演技が上手い

• 日本語リップシンクも自然

• 表情の演出が豊か

• 画像からの生成は想像以上にいい結果

⚠️気になったところ

• 感情表現を強くするとキャラクターが少し崩れやすい

• 角や顔立ちなど細部が変化することがある

• リファレンスを重ねるほど再現性が少し低下する傾向

悪女の演技も検証してみました

泣きや怒りだけでなく
今回は「悪女の演技」にも挑戦してみました🌸

キャラクターシートの表情管理をリファレンスとして使い、

👿嘲笑
👿見下ろす支配者の笑み
👿狂気
👿無表情

この4つの表情が自然につながるように
細かく指示しています(｀･ω･´)ゞ✨🌸

その結果…
表情の変化や日本語のリップシンクはしっかり反映され
笑い方や視線の演技も想像以上に自然でした✨

ただ、一つ面白い傾向もありました(｡•ω- ｡)💓

演技自体はとても良いのですが、全体の印象は
アニメというよりVTuberが配信で演技をしているような雰囲気
に近く感じました( *´艸｀)✨

表情は豊かに動く一方で、顔の動きや口元の印象が
リアルな演技というより、Live2DやVTuberモデルのような
滑らかな表現に寄る感じがあります🌸

もちろん作品によっては、
この表現がぴったりハマるケースもあると思います(｀･ω･´)ゞ

一方で、シリアスなアニメや映画のような演技を
目指す場合は、もう少し自然な顔の筋肉の動きや
細かなニュアンスが加わると、さらに完成度が
上がりそうだと感じました(-□д□-)✨

今回の検証では、Seedance2.0の強みと
課題の両方を見ることができました。

演技力は想像以上に高く、怒りや悲しみといった
感情の変化を自然につないで表現できます✨💗
キャラクターが本当に感情を持っているように
見える瞬間もあり、「ここまでできるんだ」と
驚かされましたね( ﾟдﾟ)🌸

その一方で、感情表現を強く求めるほど
元のキャラクターデザインから少しずつ
離れてしまう場面も確認できました(；´･ω･)

今回の検証を通して感じたのは、

ということです✨

これから「Seedance 2.5」がリリースされるとのことですが
この2つのバランスが、どこまで進化するのか
とても楽しみになりましたヾ(o´∀｀o)ﾉ♪🌸✨

試行錯誤、試す楽しみが増えましたよ～💓

しかも、ここまで表情表現が出来ると
MVやショート動画、アニメを制作してる人へも
創作の幅が広がりますね( *´艸｀)💓✨

🍉おまけ🎐

再生できるはず🎆✨
夏の一コマをお届け～💓

こちらのMVもぜひ聞いてねーん！🎧♬✨

Pollo AI様の記事をマガジンで
まとめたのでお時間ある時、他の記事もどうぞ！

Pollo AI様

YouTube

最後まで見てくれてありがとう🌸

私もまだまだ勉強中の身です✨
皆様のお声をお聞かせください！💓✨
質問箱もあるので、お気軽にどうぞ！

📚参加させて頂いているマガジンです📚

いつもありがとうございます💗✨

【共同運営マガジン】頑張る隊

#つづけたDay
#３日間チャレンジ
#生成AI
#画像生成AI
#動画生成AI
#繊細さん
#note毎日投稿
#毎日投稿
#振り返り
#記事
#AIイラスト
#アート好きと繋がりたい
#白銀の髪同盟
#紹介
#AIイラストアイラ
#PolloAI
#pollo
#創作あそびUP系
#アカリウム
#白銀マリヤ
#AI音楽
#AIMV
#Seedance