見出し画像

【メイキング】AIでアイドルをプロデュースする夏休み企画♯After Day|無課金で30秒MV作成する全手法公開

AIアイドルを1週間でデビューさせる夏休み企画、
無事完走することが出来ました!
まだ見ていない方は是非⇧から順にどうぞ。サクッと読めます。


今回はメイキング編。以下の方を主な対象としています。

  • AIでMVを作ってみたい

  • いきなり課金はちょっと心配…。無料で始めたい。

  • MVの作成方法ステップやツールを知りたい

  • 初心者でもできる?その方法は? (出来ます!)




記事構成

以下の5ステップを解説します! すべて課金なしで実現できます。

●手法① 企画
 
該当記事:
  ♯Day0【はじめに】
  ♯Day1【コンセプト作り】
 内容:
  AIを使った一人会議アイデア出し方法

●手法② キャラクター作成
 該当記事:
  ♯Day2【爆誕 ビジョコミ∞インフィニティ】
 内容:
  設定作成、AIとの壁打ちのリアル
  ChatGPT内にAIアイドルキャラクター綾瀬結月の人格を作成する方法

●手法③ 歌詞、ボーカル曲作成
 該当記事:
  ♯Day3【楽曲制作 未来にコミット!~Consulting My Way~】
 内容:
  作詞の指示プロンプト
  作詞をもとにボーカル曲を作成する方法

●手法④ リップシンク動画
 該当記事:
  ♯Day4【ティザーMV サビ5秒】
 内容:
  「曲と画像だけ」を元にリップシンク動画を一発で作る方法

●手法⑤ MV作成
 該当記事:
  ♯Day5【フル楽曲 歌詞字幕only】
  ♯Day6【MV本編】
 
内容:
  字幕付き曲動画を作成する方法
  曲をベースに、30秒MVを作成する超具体的な手順 再現性アリ!


手法① 企画

元々、AIアイドル作ろう&連載物をやるという構想はありました。
夏休みのチャレンジ企画で連続投稿したら面白いかな?
やってみよう!という流れ。

AI(ChatGPT)にも企画相談をしています。

AIアイドルプロデュースしてみた(仮称)の1週間毎日連続投稿noteコンテンツを作成したい。現実的に達成できるゴールが15秒程度の簡易MV(キャラ1人のみ)である点を踏まえ、企画、画像生成、歌作成、MVティザー、MVショート、howto有料コンテンツ程度の分割として、投稿計画と、大まかな1記事のタイトルと内容を考えて。

1投稿の構成は以下で決めておきました。
前回振り返り ⇒ 小話導入 ⇒ アウトプット ⇒ 次回予告


できる見込みはあったものの、
品質にこだわると詰むのも見えていたため、
最低限やり切れるゴール設定は自分で線を引いています。
1週間の期限と、品質面で無理をしない条件としました。

「ビジネスカタカナ用語を使ったアイドル」は、
初期構想にあった
ので、そこからAI壁打ちでアイデアを膨らませます。

前後しますが、実は曲を一番最初に作っています。
リライトなしで一発生成でした。

ITコンサル企業のアイドルが歌うJPOPなノリノリソングの歌詞を作ってほしい。歌詞にはコンサルが好んで使いそうなビジネスカタカナ用語をふんだんに盛り込んで。イントロ、サビ前、サビ、アウトロ(⇦この表現にこだわらなくてよい)のように構成を分けて記載して。パートナーのプロジェクトを成功に導く明日への希望を歌い上げてほしい。

未来にコミット!~Consulting My Way~ 誕生の瞬間

そこから、ユニット設定を掘り下げていきます。

ユニットの特徴を考えるうえでファンネームやユニット名等の特徴項目あげてください

そのまま各項目を作ってみて

こんな感じで、ビジョコミ∞インフィニティの設定が誕生。
良いところをピックアップして調整し、メモ帳などに記録&アップロードし、これが設定だから覚えておくようにとAIに指示をしておきます。

言えば覚えておいてくれる

手法② キャラクター作成

AIとの壁打ちでは3人ユニットの設定でした。
が、3名のMVは相当難しいのは感覚で分かっていました。
さらに、納得のいくキャラを期限内に作るのも結構賭け。

ということで、既存の生成結果から流用する逆転の発想に。
そして、何度も登場しているAI実験動画のOL
登場してもらうことにしました。 note内のストーリーも生まれます。

キャラクターの画像をアップロードして以下を指示。
(本当は、動画の初期フレーム用に前後左右や角度、表情差分のカットが欲しい意味でキャラクターシートとしたのだけど、設定集が出てきた…。)

このクールビューティOLのキャラクターシートを作成して

折角なので、人格を持ったキャラクターとして対話できるように
新規チャットを立ち上げてキャラ画像と、以下の指示を入力。

あなたはアイドルグループ立ち上げに際し抜擢されたソロメンバーです。ロールプレイをしてチャットをしてもらいます。その前に設定を確認、共有します。内容は以下。他に必要な設定項目があれば項目と案を提示してください。 ・キャラクター 設定、アイドル設定 添付写真のキャラ 項目 内容
 ~略~

こうして、AIキャラクター綾瀬結月が誕生。
インタビューなどで会話ができます!

AIキャラ作成は、note記事作成者の皆様にもおすすめ。
1人より、2人のほうがいろんな話が作りやすい。

動画サイトなどで2キャラの掛け合い動画が多いのもこの理由かも。

インタビューの様子。
ロールプレイを忘れて普通のchatGPTに戻るときもある。

イラストも、スタイルを指示しなければChatGPTスタイル
(っていうのでしょうか。最近流行りのフラット系?のテイスト)
で出してくれる。

ちなみに綾瀬結月はAIの自認がある

手法③ 歌詞、曲作成

歌詞は、先ほどの通り最初に作成して、気に入ったのでそのままです。
曲作成はsuno一択かと思いきや、実はSeaArtで作っています。
SeaArt招待URL ⇦ アクセスはこちらからどうぞ

SeaArtは動画や画像だけでなく、
AIキャラ、音楽、効果音なども作成できます。
この辺りはまた別の機会に。

曲は以下の「音声」から、ボーカル曲で歌詞と設定を入れればOK。

歌詞はAI生成で作る方も多いと思いますが、
自分で書く際、マーカー記法を知っておくと便利。
[Aメロ]等と書くと、私のようにそのまま歌われる場合も。

注意点として、SeaArtの曲生成はまだ発展途上です。
一発作成のみで編集やリミックスなどはできません。
このあたりはSunoのほうが強いですね。
曲のクォリティにこだわりたい方はSuno有償版を検討ください。


手法④ リップシンク動画(画像から一発作成)

リップシンク動画生成可能なサービスは多いですが、
動画を作ってから、曲(声)を合わせる方法が主かと思います。
今回、「画像と曲データだけ」で一発作成できる方法をお伝えします。

動画にウォーターマークが入っているので
お気づきの方はツールもご存じかもしれません。

こちらのnoteを参考にしました。

使い方は超簡単。まずはサイトにアクセス。
https://www.hedra.com/

用意するもの

  • 歌わせたいキャラクターの(リアル系で顔がはっきり映っている)画像 

  • 歌わせたい曲データ(mp3,wav,m4a形式)

サイトから、Videoをクリック

以下の画面から、3つ入力。

①プロンプト
”While singing, move your body naturally in sync with the rhythm”
"歌いながらリズムに合わせて自然に体を動かして" 的な意味です。

②Audio Script
手法③で作成した楽曲ファイルをアップロード。
アップロードした後にトリミングします。1回の出力は20秒まで

20秒以上の音声はトリミングできる

③Start Frame
先ほど用意した、歌わせたいキャラクターの画像をアップロードします。

あとは実行するだけ!数分も待たずに完了します。
出来上がりを確認しましょう。

フリープランの注意点は以下。
月300クレジット、ウォータ-マークあり、商用利用不可


手法⑤ MV作成編集

別シーンで一貫性のあるキャラクター動画を作る方法だけが知りたい!
その他は不要!という方は以下の記事をどうぞ。

ここからは、上記記事内容を含むMV作成編集方法を公開しています!

かなり詳細に手順を作ったため、この記事作成が他のDay0~6記事合計より時間がかかってしまいました。有償ですが元が取れる気はしません笑

ここから先は

4,321字 / 40画像

¥ 300

Amazon Payで支払うと最大2%還元のチャンス! 9/30まで

この記事が参加している募集

記事をご覧いただきありがとうございます!もし少しでもお役に立てたら、チップで応援いただけると嬉しいです。いただいたご支援はクレジットに投資して記事で還元いたします。未来のAI技術にご期待ください!