【HeyGen】多言語に変換!リップシンクが自然で嬉しい

はじめに

今回はHeyGenLabsで動画を様々な言語に変換する方法を紹介します。

これの凄いところは多言語に変換できることはもちろん、その人の声で違う言語を喋ること、それから言語の発音に合わせてリップシンクが自然に行われることです!

それでは早速紹介していきます。チェケラッチョ!ちなみにそのサイトはこちら「https://labs.heygen.com/video-translate

けんたろう
けんたろう

セグウェイは高い、ローラースケートでいい、タクシーが一番いい、チェケラッチョ

多言語変換の方法

HeyGenLabsの「Video Translate」のサイトはこんな感じです。

ここで変換したい動画をアップロード、変換する言語を選択、話者の数を選択します。

変換する言語は全部で30種類もあります!

これで「Translate this video!」を押すと変換されます!簡単!

完成した動画もクオリティが高かったです。(英語分からないから内容合ってるかは不明、、チェケラッチョ、、。)

一つ注意するべきことは口の前に何か被るものがあれば、そのものが歪みます。

変換する対象の動画は口の前に何も被っていないものが良いでしょう!

おまけ(アリババのEMO)

昨日、リップシンクの分野で言うと、alibabaが1枚の写真と音声データから、表情豊かな音声アバターのビデオを生成できる「EMO」を発表しましたね!

まだ触れないのが残念ですが、触れるようになればすぐに記事にします!

github : https://github.com/HumanAIGC/EMO


投稿日

カテゴリー:

投稿者:

タグ:

コメント

コメントを残す

メールアドレスが公開されることはありません。 が付いている欄は必須項目です

Discord Ch. 始めました! (内容: エンジニア/映像クリエイター向けになります)