Runway リップシンク 機能について、この記事で深掘りしていきます。
「静止画の人物が、まるで生きているかのように喋り出したら…」そんなSFのような表現を、AI動画生成ツール「Runway」が誰でも簡単に実現できるツールとして注目されています。その中核をなすのが「リップシンク」機能です。
本記事では、Runwayに搭載されているリップシンク機能の概要から、具体的な使い方、そしてより自然な動画を作るためのコツまで、動画のデモンストレーションを基に詳しく解説します。
Runwayのリップシンク機能とは？
Runwayのリップシンク機能は、アップロードした画像や動画に映る人物の口元を、入力したセリフや音声データに合わせて自動で動かす（口パクさせる）ことができる画期的なツールです。専門的な動画編集スキルがなくても、まるで人物が本当に話しているかのような動画を手軽に作成できます。
リップシンク動画の作成手順はわずか3ステップ
Runwayを使ったリップシンク動画の作成方法は非常にシンプルです。手順は、以下の3ステップにまとめられます。
| ステップ | 内容 | 補足 |
| 1. 画像・映像のアップロード | 人物が写っている静止画、または動画ファイルをアップロードします。 | Runwayが自動でファイル内の顔を認識してくれます。 |
| 2. セリフと音声の準備 | ①喋らせたいセリフを入力し、声のテンプレートを選択、または<br>②用意した音声データを直接アップロードします。 | 声のテンプレートは複数用意されており、試聴して選ぶことができます。 |
| 3. 生成と出力 | 「Generate」ボタンをクリックすると、AIが動画の生成を開始します。 | 完成した動画はダウンロードして利用できます。 |
実践！Runwayでリップシンク動画を作ってみる
以下の手順で実際にリップシンク動画を作成するデモンストレーションが行われています。
- ツールの選択 Runwayの管理画面から「All Tools」を開き、「Lip Sync Video」を選択します。
- 画像のアップロード 操作画面の左側に、素材となる天文学者風の老人の画像をアップロードします。すると、Runwayが即座に人物の顔を「Face 1」として自動認識します。もし画像内に複数人いれば、「Face 2」「Face 3」…とそれぞれ認識されます。
- セリフと音声の設定 ダイアログ入力欄に、喋らせたいセリフ（今回は英語の文章）を入力します。次にマイクのアイコンをクリックし、用意されている音声テンプレートの中から、画像の雰囲気に合う「Vincent」という男性の声を選択します。
- 動画の生成 すべての設定が完了したら、画面下部の「Generate」ボタンをクリック。しばらくすると、老人の画像が入力したセリフに合わせて口を動かし、設定した音声で喋る動画が生成されました。
より自然で高品質なリップシンク動画を作るコツ
Runwayのリップシンク機能は非常に強力ですが、動画の解説にもあるように、静止画を元にすると、口の動きに若干の不自然さが感じられる場合があります。
もし、より滑らかで違和感のない高品質なリップシンク動画を目指すのであれば、静止画ではなく、元々人物が少し動いている動画を素材として使用するのがおすすめです。ベースとなる映像に動きがあることで、生成される口パクがより自然に馴染み、クオリティの高いコンテンツに仕上げることができます。
まとめ
Runwayのリップシンク機能を使えば、誰もがクリエイティブなアイデアを手軽に映像化できます。SNSの投稿、プレゼンテーション資料、エンターテイメントコンテンツなど、その活用方法は無限大です。この記事を参考に、あなたもRunwayで喋るアバターやキャラクターを生み出してみてはいかがでしょうか。