音声に合わせて人物動画の口の動きを同期させるリップシンクAI。
#リップシンク#音声同期
※この説明はAIが公式READMEから自動生成したものです。内容は必ず公式ページでもご確認ください。
これは何?ブラウザで使えるサービス
できること
既存の人物動画と音声を入力し、話しているように口の動きを合わせた動画を生成できる。
誰に効く?
動画制作者、吹き替え制作者、教材制作者
用意するもの
人物動画、音声ファイル、ブラウザ
時間のめやす
3分
使えるようになるまでの手順をひらく
- 下の「GitHubで見る」ボタンで公式ページを開く
- ページ内の公式サイトリンク(Website / Cloud など)へ進む
- アカウント登録(メールアドレスなど)をする
- そのままブラウザ上で使えます
迷ったらこれ:いつも使っているAIチャット(ChatGPT・Claude・Geminiなど)にこのツールのGitHubリンクを貼って 「これを使いたい。私のPCでの始め方を一歩ずつ教えて」と頼むのが一番の近道です。
他人の顔や声を扱う前に
本人の許可なく顔や声を使い、その人が言っていない・していないことをしているように 見せる映像や音声を作って公開すると、名誉毀損や肖像権・パブリシティ権の侵害として 損害賠償や刑事責任を問われることがあります。性的な内容にした場合や、 実在の人物になりすまして金銭をだまし取る目的で使った場合は、さらに重い責任を問われます。 使ってよいのは、自分自身の素材か、内容と公開範囲まで説明したうえで許可を得た相手の素材だけだと 考えてください。手元のパソコンだけで処理できることと、作ったものを公開してよいことは別の問題です。
注意点
本人同意、肖像権、誤解を招く加工に注意が必要。 ここに書いたは、このお試しページ自体のものです。作ったものを仕事に使えるかどうかは、中で使われているAIモデルの条件で決まります。使われているモデルは商用利用そのものは可能ですが、禁止されている用途の定めがあります(openrail++ / creativeml-openrail-m / creativeml-openrail-m)。禁止されているのは、法に触れる利用、他人を傷つけたり差別したりする内容の生成、本人になりすます目的の利用、医療や法律の助言として使うことなどです。普通の仕事で使う分にはあてはまらないことがほとんどですが、念のため本文で確認してください。
ひとことメモ
公開元のサーバー上で動くお試しページです。アップロードした画像や文章はその環境に送られるので、社外に出せないものは入れないでください。混み合っていると順番待ちになることがあります。
LatentSyncについてよくある質問
- LatentSyncを使うのに、インストールや専門知識は必要ですか?
- ブラウザで開くだけで使えます。インストールは不要です。
- LatentSyncはスマホでも使えますか?
- スマホでも使えます。
- LatentSyncは仕事(商用)で使えますか?
- 公開元がライセンスをはっきり書いていないため、商用で使ってよいかは判断できません。仕事で使う場合は、公式ページで確認するか、作者に問い合わせてください。
動画生成のほかのツール
LatentSyncが合わなかったときの、同じ用途の候補です。
VideoRetalking
口の動きを音声同期
準備がいる・黒い画面いらない
gradio-lipsync-wav2lip
音声で口パク動画
上級者向け・黒い画面いらない
whisperspeech-dreamtalk-combo
声と顔で会話動画
上級者向け・黒い画面いらない
LTX-2-3-sync
口パク動画生成
準備がいる・黒い画面いらない
StableAvatar
音声でアバター動画
準備がいる・ターミナル操作あり
palmier-pro
AIと一緒に動画を編集できる、Mac用の無料動画編集ソフト
はじめやすい・黒い画面いらない