サンプルの実行SadTalkerの応用SadTalkerとはSadTalkerとは、顔の画像とスピーチの音声から会話するムービーを作成する技術です。人の顔の画像と音声ファイルを合成し、人が話しているような動画を作成してくれます。以前、D-IDを紹介しましたが、似たような技術ですが、SadTalkerを使えばウォーターマークが無い状態で、人が話しているような動画が作成できますので紹介いたします。D-IDに関しては、下記を参照して下さい。D-IDを使い、ChatGPTに言葉を作ってもらい、偉人が話している動画を作ってみましょう!!D-IDという1枚の画像に、テキストを入力することで、アバターが話している動画を作成できるサービスがあります。WebUIを起動したり、何かをインストールすることもなく、SadTalkerを実行する方法を紹介いたします。Colaboratoryサンプルがありますのでクリックして下さい。Colabと書いてあるものが、SadTalkerのサンプルになります。Colaboratoryが起動します。実行する際の事前の準備として、まずは、サンプルを自分のドライブにコピーしましょう。Colaboratoryの「編集」→「ノートブックの設定」より、ハードウェアアクセラレータの設定を「GPU」を設定してください。これで事前の準備はOKです。Colaboratoryで上から順番に実行していきましょう。Installationから順番に行きます。5minsと書いてあるので、大体5分ぐらいかかります。気長に実行しましょう。modelsの実行です。約1分ほどかかります。画像を選択する場面がありますが、気にせず実行していきます。次は、Animationを実行します。最後まで実行すると、可愛らしい女の子が英語で何かを話す動画が完成します。サンプルの実行は以上になります。応用するためには、実行した環境をそのままにしておいてください。一通り実行が完了したら、自作の画像ファイルを使って、好きな言葉を話してもらいます。今回は、下記の勇者に話してもらおうと思います。GPTにお願いすることにします。素晴らしい言葉をいただきましたので下記の言葉を音声に変換します。仲間よ、勇気を忘れずに前進しよう。困難に立ち向かい、信じる心で進めば必ず勝利は手に入る。互いに支え合い、団結すれば乗り越えられる。冒険は成長と発見の旅。未知の世界が君たちを待っている。勇敢に進もう、勇者たちよ!音声ファイルの作成SadTalkerを使用するには、音声読み上げが完了したオーディオファイルが必要となります。webファイルやmp3ファイルにしても大丈夫です。今回は、ChatGPTに作った文字を読んでもらうため、音読さんのホームページに行きましょう。音声読み上げソフト|音読さん音声読み上げソフト音読さんは無料で最大5000文字までテキストを読み上げることができます。有料プランでは最大月間100万文字の読み上げができます。高品質な音声で読み上げられた文章は音声ファイル(.mp3)として読み上げることができ商用...ondokue3.com音読さんに先ほどのテキストを張り付けます。音声を選択して、「読み上げ」ボタンを押してください。音声が完成したらダウンロードします。画像ファイルと、音声ファイルが完成しました。画像ファイルは、image.png、音声ファイルは、audio.mp3という名前にしておきます。Colaboratoryに戻ってください。Colaboratoryの左側のフォルダアイコンをクリックすると下記のようにフォルダができますので、examplesフォルダの「source_image」にimage.png,「driven_audio」にaudio.mp3をアップロードしてください。Animationのソースコードを修正します。gfpganソースコードを修正したらAnimationから実行してください。最後まで実行すると、勇者と音声結合され話しているような動画が完成します。ダウンロードダウンロードは、フォルダアイコンをクリックして、resultsフォルダを選択してください。resultフォルダの中は、日付ごとのファイル名となっております。実行した日付のフォルダを開けば、フォルダ内に完成した動画が格納されています。クオリティが高いのは、image(画像ファイル名)##_audio(音楽ファイル名)_enhanced.mp4になりますので、右クリックでダウンロードすればOKです。今回作成した動画は次のようになります。SadTalkerを使えば、画像から人が話す動画が、ウォーターマークのない状態で作成できます。コピーLearningAnimalをフォローするLearningAnimal関連記事サイト公開コンテクストとは何か?オンラインでも文脈を理解してもらえるかを意識しよう!コンテクストとは何か?人が言葉を発するときに「文脈」同時に伝えます。割れ窓の法則と何か?軽微な問題を無視せずに、組織の風土を改善しよう!!割れ窓の法則と何か?重大問題は、軽微な問題を見逃すことで、モラルが低下し発生します。ハインリッヒの法則でも言われるように、重大問題の裏には、300倍のヒアリ・ハットな事象が存在します。囚人のジレンマとは?しっぺ返し戦略を使うことで長期的にジレンマを克服しよう!囚人のジレンマとは?ゲームの理論で有名な囚人のジレンマを学び、ビジネスでの事例を紹介。と何が悪いのかがわかります。良い失敗とは、未知との遭遇によって引き起こされる失敗で、悪い失敗は、単純ミスによって引き起こされる失敗です。内省(リフレクション)とは何か?考えや言動、行動を省みることで、経験から成長して行きましょう!内省(リフレクション)とは、自分の考えや言動、行動を深く省みることです。4つの角度から分析し、自問自答することが重要となります。人は、70%直接経験から学びます。変革の8ステップをマスターする:効果的な変革戦略と実践的ヒント変革の8ステップとは何か?ジョンコッター氏が提唱する変革の8ステップを理解し、企業変革していくことが重要です。コメントをキャンセルメールアドレスが公開されることはありません。※サイト次回のコメントで使用するためブラウザーに自分の名前、メールアドレス、サイトを保存する。ホームサイト公開プロフィールラーニングアニマルです。学び続ける、繋がり続けるビジネスとテクノロジーのブログをNoteで書いています。Noteはこちら:ラーニングアニマル※ブログの作成方法は、「お問合せフォーム」から聞いてください。お問合せ※Amazonのアソシエイトとして、当メディアは適格販売により収入を得ています。defined.")}))})()タイトルとURLをコピーしました。