リアルタイムのリップシンクAIはある？確認すべきこと

はい、AIシステムは入力された音声に基づいて口の動きを動かせます。特定の構成を利用できるかどうかは、音声ソースと必要な出力に対応しているかによって異なります。高速なオフラインレンダリングができるだけでは、ライブシステムとはいえません。

必ずしもそうとは限りません。キャプチャ、レンダリング、ストリーミングによって異なる遅延が発生する可能性があるため、ローカルプレビューだけで判断せず、視聴者側から録画した映像を確認してください。

録音を音声ソースとして使用することはできますが、プレビューで再生しても、スピーカーが新しい音声に反応するようになるわけではありません。インタラクションが重要な場合は、セッション中の入力音声にワークフローが対応していることを確認してください。

台詞が決まっていて、公開前にタイミングを確認したい場合は、準備済みクリップを選択してください。編集済みの結果が本来の目的であるにもかかわらず、低遅延を必須条件として扱う必要がなくなります。