記事のURLから、キャラクターが語る動画を全自動で
ホームページやブログの記事のURLを渡すと、AIキャラクターたちが掛け合いで内容を解説する、ラジオ番組風の動画ができあがります。台本づくりから声、字幕、映像の合成まで自動です。人が手を入れるのは、台本の最終チェックだけです。
今回採用した制作ステップ
記事のURL
→ ① 台本生成(Claude)
→ ② 音声生成(Irodori-TTS)
→ ③ テロップ生成(Pillow)
→ ④ 動画合成(FFmpeg)
→ 完成動画(3〜5分)
①で台本を確認したら、あとはコマンド1回で②〜④が流れ、mp4が書き出されます。
① 台本:配役まで自動で
Claudeのプロジェクトに、キャラクターのプロフィール、配役ガイド、出力形式を持たせています。記事を読んでテーマをつかみ、解説役・進行役・合いの手・締め役を割り当てて、それぞれの話し方のまま掛け合いの台本を書きます。 台本は、機械が読むJSONと、人が確認するテキストの2つで出力されます。
② 声:録音しない
音声合成には、日本語向けのIrodori-TTSを使いました。声は「若い女性・元気・やや高め」のような説明文から新しく作ることができます(VoiceDesign)。
なお、Irodoriはセリフの頭に絵文字を1つ付けると、声のトーンが変わります。使える絵文字は33種類で、キャラクターごとに「よく使う感情」を決めています。
③④ 映像制作
立ち絵と字幕を1枚の画像に焼き込むことでシンプルに効果的な動画を作成することにしました。 背景動画には、登場する5人全員を暗いシルエットで置いておき、話している人だけを明るい立ち絵で重ねています。話し手が影の中から浮かび上がって見える、昔のアドベンチャーゲームの技法です。
複雑にするのはいつでもできるので、まずはトラブルが少ない手法で確認することを目指します。
どんなサイトでも使えます
入力は記事のURLだけなので、note以外のブログや、会社のホームページのお知らせ・コラムでも同じように動画にできます。キャラクターの性格と動画の方向性を決めれば、楽しい番組から真面目なお知らせまで作り分けられます。
- オウンドメディアの動画化:ブログや技術記事を、そのまま動画チャンネルへ
- 製品・サービス紹介:マスコットが対話形式で製品を紹介するシリーズ
- 社内広報・研修:社内報やマニュアルを「聞き流せる」番組に
- キャラクターIP:既存のキャラクターに声と番組を持たせる
AI館ラジオ(第1〜3回)などのサンプルを、YouTubeで公開しています。このセリフ生成の仕組みは、MIKOのセリフづくりにも生きています。