TalkFace2 のバックアップ(No.1) - PukiWiki

[ トップ ] [ 一覧 | 検索 | 履歴 | ログイン ]

バックアップ一覧
差分を表示
現在との差分を表示
ソースを表示
TalkFace2 へ行く。
- 1 (2024-10-14 (月) 15:45:47)
- 2 (2024-11-05 (火) 08:55:37)
- 3 (2024-11-05 (火) 12:41:41)
- 4 (2024-11-06 (水) 11:09:58)
- 5 (2024-11-06 (水) 15:56:36)
- 6 (2024-11-06 (水) 16:43:55)
- 7 (2024-11-10 (日) 17:02:54)
- 8 (2024-11-17 (日) 10:54:41)
- 9 (2024-11-17 (日) 11:17:14)
- 10 (2024-11-18 (月) 16:05:26)

私的AI研究会 > TalkFace2

音声で顔画像を動かす：One Shot Talking Face（その２）== 編集中 == †

　音声と１枚の顔画像を使って、顔画像がまるで話しているような動画を作成する技術「One Shot Talking Face」をローカルマシンで動かす

音声で顔画像を動かす：One Shot Talking Face（その２）== 編集中 ==
参考資料

※ 最終更新:2024/10/14　

One Shot Talking Face †

　『One Shot Talking Face を使って音声で顔画像を動かす』をローカルマシンに移植する

概要 †

StyleGANとは、高解像度の画像を生成する敵対的生成ネットワーク（GAN）
StyleGANを活用すると、本物とは見分けが付かないような人間の顔など、リアルな画像を生成できる
リアリティが高すぎる SyleGAN で「写真は証拠として役に立たなくなる」とまで言われている

One Shot Talking Face 概念図（下記論文所収）
論文「Alias-Free Generative Adversarial Networks (StyleGAN3)」
<paper>
・One-shot Talking Face Generation from Single-speaker Audio-Visual Correlation Learning
<framework>
・https://github.com/camenduru/one-shot-talking-face-colab

前回の検証
・One Shot Talking Face を使って音声で顔画像を動かす

実行環境の構築 †

仮想環境「py38_learn」で実行する
未作成の場合は → 『仮想環境 (py38_learn)』の手順で仮想環境を作成
GitHub サイトからプロジェクトをダウンロード
プロジェクト・パッケージ project_stylegan3.zip (1.47GB) <StyleGAN> をダウンロード
・解凍してできるフォルダ
・解凍してできる「project_StyleGAN/」フォルダ内を次のフォルダの下に上書きコピーする
　Windows の場合 →「anaconda_win/」　Linux の場合 → 「~/」
不足しているパッケージの導入

対処した問題点とエラー詳細 †

　　 †

更新履歴 †

2024/10/14 初版

参考資料 †

One Shot Talking Face
- One Shot Talking Face を使って音声で顔画像を動かす
- GitHub - one-shot-talking-face-colab

Others