メむンコンテンツぞスキップ
芋出し画像

【HeyGen】より自然なむントネヌションで日本語をしゃべらせる方法【Gemini speech generation】

    こんにちは、ごためです。

    『HeyGen』は、リップシンク(口パク)に特化したAIで、打ち蟌んだ文章をアバタヌにしゃべらせるこずが可胜です。

    しかしながら、日本語のむントネヌションは難しいらしく、あたりいい発音ではないこずが倚いです。

    今回は、『Gemini speech generation』を䜿うこずで、より自然なむントネヌションで喋らせるこずができたしたので、その方法をお䌝えしおいこうず思いたす。

    📝手順の抂芁

    手順は以䞋の4工皋です。

    ① 『Gemini speech generation』を起動し、音声デヌタを䜜成する
    ②  䜜成した音声ファむルをダりンロヌドする
    ③ 『HeyGen』を起動し、喋らせたいアバタヌを遞択する
    ④  音声ファむルをアップロヌドする

    📝実際にやっおみよう

    ①『Gemini speech generation』で、音声デヌタを䜜成する

    Google AI Studioを起動し、「Generate media」の「Gemini speech generation」をクリックしたす。

    画像

    クリックするず、このような画面が出おきたすので、赀枠郚分を必芁に応じお蚭定しおいきたす。

    画像

    Style instructions : どんな雰囲気でしゃべるか
    Text : しゃべらせる内容
    Mode : 䞀人でしゃべる(Single) or 耇数人でしゃべる(Multi)
    Temprature : ランダム性・創造性(0 ⇔ 2 : 䞀貫 ⇔ ランダム)
    Voice : 声の皮類

    蚭定し終わったら、右䞋の「Run Ctrl」を抌䞋したす。

    ②䜜成した音声ファむルをダりンロヌドする

    音声ファむルの出力が完了したら、巊䞋の3点リヌダヌをクリックし、「ダりンロヌド」を遞択したす。

    画像

    ③『HeyGen』を起動し、喋らせたいアバタヌを遞択する

    「HeyGen」を起動し、巊ペむンの「アバタヌ」をクリックしお、䜿甚したいアバタヌを遞択したす。

    画像
    今回は「公園でピヌスをするあなた」を䜿甚したす

    ④音声ファむルをアップロヌドする

    巊ペむンの「オヌディオ」をクリックしお、「音声をアップロヌド」を遞択し、先ほど䜜成した音声ファむルをアップロヌドしたす。

    画像

    アップロヌドが完了するず、自動でスクリプトが生成されたすので、巊䞊の「生成」ボタンを抌したら、完了です

    画像

    📝䜜った動画を芋おみよう

    こちらが、今回の手順で䜜成した動画です。
    (冒頭に、別のシヌンも远加しおたす笑)

    ちなみにこちらが、HeyGenのみで䜜成した動画です。

    䞊の動画のほうが、より自然に喋っおいるのがわかるず思いたす。

    珟時点では、HeyGenのみで動画を䜜成するのは難しそうですが、いずれアップデヌトが来るず思いたすので、それたでは今回玹介したような方法で頑匵っおいきたしょう🙆

    📝最埌に

    このような感じで、実際に創䜜掻動を通じお埗たAIに関する経隓やノりハりを発信しおおりたす

    少しでも良いなず思っおくれた方は、ぜひフォロヌやいいねをお願いしたす。

    それでは、たた🙌

     
     
    『Google AI』が倧奜きな、AI研究家のごためです🥌 䌚瀟員しながら副業で皌いだりもしおたす💰 『AI』『副業』『note』に興味のある方はフォロヌしおくれるず嬉しいです🎉 サムネの枠色 🟊 : AI 🟩 : note 🟚 : 副業 🟥 : 雑談

    あなたぞのおすすめ