見出し画像

【AI駆動アプリ】NotebookLMの漫画に声をつけて動画にする——4つのAIリレーで「ヨミック」を作る方法

みなさん、こんにちは。
AI共創イノベーション・ワンダー佐藤です。

NotebookLMのスライド機能でつくったハイクオリティなAI漫画を、

同じくNotebookLMの動画機能でAI動画にして「コミック」ならぬ「ヨミック」にしようと思ったのですが・・・

今回はClaudeのスキルでAI漫画を突っ込んでストーリーテキストにし、それをAI音声変換したものをGeminiのAI駆動アプリで合体させていこうと思います。

以下のような感じで、アプリの中にGeminiが搭載される「AI駆動アプリ」となります。

つまり、アプリの中のGeminiが音声を読みどり、適切な場所に画像を配置してくれます。しかし、微妙なズレがあるので、そこを後からアプリで手動でも調整可能、これがハイブリッド型のAI駆動アプリとなります。

ポイントはGeminiで、音声を聴き取るのと、気軽にAI駆動アプリを仕様できるという点で、ここはGeminiが使いやすいですね。

もちろん、Gemini CLIでもできますが、わかりやすく、今回はGeminiで解説します(Gemini CLIでも確認済み)。

Gemini CLIで行った場合のログ

今回は、NotebookLMで作った漫画を「ヨミック」(声つき動画)にするまでの全工程を紹介します。使うのは4つのAIツール。それぞれの得意分野をバトンのようにつないでいきます。

【関連動画】


ワークフローの全体像——4つのAIをつなぐ

まず、今回のワークフローをざっくり見てみましょう。

NotebookLM → Claude → VOICEVOX → Gemini

この4つのAIをリレーしていきます。

  • NotebookLM:漫画を作る

  • Claude:漫画の文字起こしを「一人称のナレーション」に変換する

  • VOICEVOX:テキストを音声に変換する

  • Gemini:音声と画像を合体させるアプリを作る

ここがポイントです。どれか1つのAIで全部やろうとするんじゃなくて、それぞれの得意分野を活かして組み合わせる。これが、今のAI活用の醍醐味なんですよね。


Step 1:NotebookLMで漫画を作る

最初のステップは、NotebookLMでの漫画制作です。

NotebookLMにはスライドデッキ機能があって、Googleの画像生成モデル「Nano Banana Pro」を使ってビジュアルコンテンツを生成できます。ここで漫画を作るわけですね。

何回見てもすごいなと思うクオリティで、これがAIで作れてしまう。ここが出発点です。


Step 2:Claudeで「一人称ナレーション」に変換する

漫画ができたら、次はその文字起こしをします。NotebookLMで作った漫画のテキストを抽出するのは簡単です。

ここからが面白いんです。

抽出したテキストをClaudeに渡して、**「主人公目線で、一人称で読み上げて」**と指示するだけ。そうすると、Claudeが主人公だけの声になるように文章を整えてくれます。

なぜ一人称に変換するかというと、次のステップで音声化するときに、一人の声だけで済むからです。複数キャラの掛け合いだと音声変換が複雑になりますが、一人称ナレーションならコピペ一発でいける。

このテキスト変換の精度は、Claudeが得意とするところですね。


Step 3:VOICEVOXで音声に変換する

一人称のテキストができたら、次はVOICEVOXで音声化します。

VOICEVOXは無料のテキスト読み上げソフトです。「ずんだもん」をはじめ、たくさんのキャラクターボイスが使えます。AIの音声合成技術を使っているので、品質もかなり高い。

使い方は本当にシンプルで、Claudeが作ってくれた一人称テキストをコピペして、好きなキャラクターの声で変換するだけ。WAVEファイルとして書き出せるので、次のステップにすぐ渡せます。


Step 4:Geminiで音声と画像を合体させる

ここが今回のワークフローの核心です。

音声ファイルと漫画の画像を「ガッチャンコ」する——つまり、音声のタイミングに合わせて画像を切り替える動画を作る。これをGeminiにやってもらいます。

なぜGeminiなのか?

ちょっと意外かもしれませんが、ここでGeminiを選ぶのには明確な理由があります。

理由1:音声ファイルの理解力が強い

Geminiはマルチモーダル(テキスト・画像・音声など、いろんな形式のデータをまとめて扱えるAI)で、音声の処理がとにかく強い。音声ファイルを読み取って、どこで何を喋っているかを理解してくれるんですね。この「共感覚的な変換」が、他のAIにはないGeminiの持ち味です。

理由2:API不要でAI駆動アプリが作れる

ここ、大事なところです。

GeminiにはCanvasやGoogle AI StudioのBuildモードがあって、ブラウザ上でAI搭載のアプリが作れちゃいます。しかも、APIキーの設定も従量課金の設定もいらない。普通にGeminiを使うだけでいいんです。

つまり、ただのアプリじゃなくて「AI駆動アプリ」——Geminiの頭脳が入ったアプリが、ブラウザだけで作れるということですね。

アプリの仕組み

Geminiに作ってもらうアプリは、こんな機能を持っています。

  • 音声ファイルと画像を読み込む

  • 音声の文字起こしを自動で行い、どのセクションにどの音声が入っているかを表示

  • 秒単位での微調整ができる

  • 画像の切り替えタイミングが合っているか確認できる

  • ズレていたら、ドラッグ&ドロップで画像を差し替えられる

  • 完成したらレンダリングしてダウンロード

一発で完璧に同期できればベストですが、微調整が必要なこともある。だから、そういう調整機能もアプリに組み込んでおくわけです。

Gemini CLIでもできる

ちなみに、ブラウザ上のGeminiだけでなく、Gemini CLI(コマンドライン版)でも同じことができます。2025年7月のアップデートでGemini CLIも音声ファイルの処理に正式対応しました。

見やすさを優先するならブラウザ版のアプリ、慣れている人はCLI版、お好みで選べます。


なぜ他のAIではなくGeminiなのか

「Gemini CLIやGemini AI Studioでできるのは分かったけど、ChatGPTやClaudeじゃダメなの?」

これは当然の疑問ですよね。

結論から言うと、このワークフローではGeminiが一番しっくりきます。

理由はシンプルです。音声ファイルを直接読み取る力ブラウザ上でAPI不要のAI駆動アプリが作れる手軽さ——この2つが揃っているのが、今のところGeminiだけだからです。

ChatGPTやClaudeにもそれぞれ素晴らしい強みがあります。実際、このワークフローでもClaudeはテキスト変換で大活躍していますよね。要は、各AIの得意なことを理解して、適材適所で使い分けることが大切なんです。


ダウンロード後の仕上げ

Geminiのアプリでレンダリングしてダウンロードしたら、あとは動画編集ソフトで仕上げるだけです。

各話分のファイルをポンポンと貼り付けていけば、漫画の声つき動画——ヨミックの完成です。


まとめ:AIは"組み合わせ"で可能性が広がる

今回のワークフローをもう一度整理しますね。

  1. NotebookLM で漫画を作る

  2. Claude で一人称ナレーションに変換する

  3. VOICEVOX で音声ファイルを作る

  4. Gemini で音声と画像を合体させるアプリを作り、動画にする

1つのAIだけで全部やろうとすると、どうしても苦手な部分が出てきます。でも、それぞれの得意分野を活かしてリレーすれば、1人では到底できなかったクリエイティブが実現できる。

AIは「どれが最強か」じゃなくて、「どう組み合わせるか」で可能性が変わる。

漫画を作って、声をつけて、動画にする。この一連の流れが、ブラウザとフリーソフトだけでできてしまう時代です。

ぜひ、みなさんも自分だけのAIリレーを組み立ててみてください。


「便利なアプリと素敵な声にいつも感謝!」
VOICEVOX:中部つるぎ


【プロフィール】
ワンダー・佐藤源彦(さとう もとひこ)
1977年生まれ
MBBS & AI共創イノベーション主催。
医療系の研究所、心理学の研究所の勤務を経て独立し、現在は生成AI(ChatGPT、Claude、Geminiなど)と心身に関する研究をしている。
主著『かんたんプロンプト』(芸術新聞社)『東洋医学と潜在運動系』(たにぐち書店)、2年間専門誌に連載、論文執筆などの執筆業を行いつつAI共創ライティングを開発中。
心理学・カウンセリング・コーチングをAIに技術転用し、AI共創プロンプトエンジニアリングを開発している。
AIスクール・AI企業研修・AIアプリ開発などを行う。

✅ワンダー佐藤源彦・著『かんたんプロンプト』(芸術新聞社から刊行)
※プロンプトエンジニアリングの基本から応用、タスク実行までを網羅
https://amzn.asia/d/80zVtv8

✅note記事
https://note.com/mbbs
※ChatGPT・Claude・Gemini・NotebookLM・Perplexity・Genspark・Feloなどの記事あり
※ワンダー佐藤のMyGPTsも公開しています
※メンバーシップはじめました!

✅AI共創イノベーション(AIスクール・AI企業研修・AIアプリ開発のサイト)
https://mbbs-ai.jimdofree.com/

✅Facebook
https://www.facebook.com/motohiko1977
※リクエスト申請前にメッセージください

✅ワンダー佐藤総合リンク
https://linktr.ee/motohiko.sato

【AI共創イノベーションおすすめ動画】
https://www.youtube.com/watch?v=IXbKlwHUdbg&list=PLTcSHWqKTOojc8R-brID5q06JrmtiWRTl

サテライトチャンネル
https://www.youtube.com/@mindbody_ai

ラジオチャンネル
https://stand.fm/channels/6954a21d6f1e5aedb1e543f3

#AI漫画 #NotebookLM #Gemini #VOICEVOX #AI駆動アプリ #AI動画生成 #AIイラスト #Claude #ヨミック

いいなと思ったら応援しよう!

佐藤源彦@MBBS チップをいただけると、とても励みになります✨ いただいた分はすべて研究活動や記事制作に使わせていただきます🍀