発声動画の生成（SadTalker，Python，PyTorch を使用）（Windows 上）

前準備

Git のインストール（Windows 上）

Gitは，バージョン管理システム．ソースコードの管理や複数人での共同に役立つ．

【サイト内の関連ページ】

Windows での Git のインストール: 別ページ »で説明している．

【関連する外部ページ】

Git の公式ページ: https://git-scm.com/

Python のインストール（Windows 上）

【サイト内の関連ページ】

• Windows での Python 3.10，関連パッケージ，Python 開発環境のインストール: 別ページ »で説明している．
• Windows での Anaconda3 のインストール: 別ページ »で説明している．
• Python のまとめ: 別ページ »にまとめている．

【関連する外部ページ】

Python の公式ページ: https://www.python.org/

Build Tools for Visual Studio 2022，NVIDIA ドライバ，NVIDIA CUDA ツールキット 11.8，NVIDIA cuDNN 8.6 のインストール（Windows 上）

【サイト内の関連ページ】

NVIDIA グラフィックスボードを搭載しているパソコンの場合には， NVIDIA ドライバ， NVIDIA CUDA ツールキット， NVIDIA cuDNN のインストールを行う．

• Windows での Build Tools for Visual Studio 2022，NVIDIA ドライバ，NVIDIA CUDA ツールキット 11.8，NVIDIA cuDNN v8.6 のインストールと動作確認: 別ページ »で説明している．

【関連する外部ページ】

• Build Tools for Visual Studio 2022 （ビルドツール for Visual Studio 2022）の公式ダウンロードページ: https://visualstudio.microsoft.com/ja/visual-cpp-build-tools/
• NVIDIA ドライバのダウンロードの公式ページ: https://www.nvidia.co.jp/Download/index.aspx?lang=jp
• NVIDIA CUDA ツールキットのアーカイブの公式ページ: https://developer.nvidia.com/cuda-toolkit-archive
• NVIDIA cuDNN のダウンロードの公式ページ: https://developer.nvidia.com/cudnn
• winimage の ZLIB DLL の公開ページ: http://www.winimage.com/zLibDll/

SadTalker のインストール（Windows 上）

FFmpeg のインストール（Windows 上）

Windows での FFmpeg のインストール（Windows 上）: 別ページ »で説明している．

SadTalker のインストール（Windows 上）

1. Windows で，コマンドプロンプトを管理者として実行

   コマンドプロンプトを管理者として実行: 別ページ »で説明

2. ダウンロードとインストール

   cd %HOMEPATH%
   rmdir /s /q SadTalker
   git clone --recursive https://github.com/Winfredy/SadTalker.git
   cd SadTalker
   mkdir checkpoints
   mkdir gfpgan
   

3. 次のページの Download Models のところから、Pre-Trained Models と GFPGAN Offilne Patch をダウンロード

   https://github.com/OpenTalker/SadTalker#2-download-models

   Pre-Trained Models の sadtalker.zip は解凍（展開）し、%HOMEPATH%\SadTalker\checkpoints に置く

   GFPGAN Offilne Patch の gfpgan.zip は解凍（展開）し、%HOMEPATH%\SadTalker\gfpgan に置く

   
   
4. Windows で，コマンドプロンプトを実行
5. 次のコマンドを実行

   cd %HOMEPATH%\SadTalker
   webui.bat
   

   
6. 初回実行時は pytorch などのインストールが始まる．しばらく待つ．
7. 画面の指示により http://127.0.0.1:7860 を開く
   
8. 右上の画面で画像を設定し，右下の画面で音声を設定する．「Generate 」をクリック
   

   使用した画像

   

   使用した音声

   1.m4a

   結果の動画ファイル

   image1-0-100.mp4

   結果のスクリーンショット