【HeyGen】より自然なイントネーションで日本語をしゃべらせる方法【Gemini speech generation】

こんにちは、ごまめです。

『HeyGen』は、リップシンク(口パク)に特化したAIで、打ち込んだ文章をアバターにしゃべらせることが可能です。

しかしながら、日本語のイントネーションは難しいらしく、あまりいい発音ではないことが多いです。

今回は、『Gemini speech generation』を使うことで、より自然なイントネーションで喋らせることができましたので、その方法をお伝えしていこうと思います。

📝手順の概要

手順は以下の4工程です。

① 『Gemini speech generation』を起動し、音声データを作成する
②  作成した音声ファイルをダウンロードする
③ 『HeyGen』を起動し、喋らせたいアバターを選択する
④  音声ファイルをアップロードする

📝実際にやってみよう！

①『Gemini speech generation』で、音声データを作成する

Google AI Studioを起動し、「Generate media」の「Gemini speech generation」をクリックします。

クリックすると、このような画面が出てきますので、赤枠部分を必要に応じて設定していきます。

設定し終わったら、右下の「Run Ctrl」を押下します。

②作成した音声ファイルをダウンロードする

音声ファイルの出力が完了したら、左下の3点リーダーをクリックし、「ダウンロード」を選択します。

③『HeyGen』を起動し、喋らせたいアバターを選択する

「HeyGen」を起動し、左ペインの「アバター」をクリックして、使用したいアバターを選択します。

④音声ファイルをアップロードする

左ペインの「オーディオ」をクリックして、「音声をアップロード」を選択し、先ほど作成した音声ファイルをアップロードします。

アップロードが完了すると、自動でスクリプトが生成されますので、左上の「生成」ボタンを押したら、完了です！

📝作った動画を見てみよう

こちらが、今回の手順で作成した動画です。
(冒頭に、別のシーンも追加してます笑)

ちなみにこちらが、HeyGenのみで作成した動画です。

上の動画のほうが、より自然に喋っているのがわかると思います。

現時点では、HeyGenのみで動画を作成するのは難しそうですが、いずれアップデートが来ると思いますので、それまでは今回紹介したような方法で頑張っていきましょう🙆

📝最後に

このような感じで、実際に創作活動を通じて得たAIに関する経験やノウハウを発信しております！

少しでも良いなと思ってくれた方は、ぜひフォローやいいねをお願いします。

それでは、また🙌