GanFOMM2 のバックアップ(No.1) - PukiWiki

[ トップ ] [ 一覧 | 検索 | 履歴 | ログイン ]

私的AI研究会 > GanFOMM2

静止画から動画を作る：First Order Motion Model（その２）== 編集中 == †

#ref(): File not found: "monaliza.gif" at page "GanFOMM2"

　同じカテゴリの静止画と動画を使って、静止画を動画のように動かす「First Order Motion Model」技術を使って静止画を動画にする

静止画から動画を作る：First Order Motion Model（その２）== 編集中 ==
- - 概要
- 更新履歴
参考資料

※ 最終更新:2024/06/18　

†

概要 †

静止画 source と動画 Driving Frame から入力動画の動きに沿って動く入力画像の動画を生成する。

#ref(): File not found: "first_order_model_m.jpg" at page "GanFOMM2"

モデル概要図（下記論文所収）詳しくは上記サイト参照
「First Order Motion Model」を、上記サイト(cedro-blog) の手順に従って検証してみたが tensorflowの 1.x 系と cuda バージョンなどの問題で現在の「Google Colaboratory」では動作しない

参考にしたと思われる「First Order Motion Model」のオフィシャルサイトにある「Colab Demo」は動かすことができた。
　→ First Order Motion Model for Image Animation
この環境でタイトルのサイトを参考に検証を進める

論文「First Order Motion Model for Image Animation」
・https://papers.nips.cc/paper_files/paper/2019/file/31c0b36aef265d9221af80872ceb62f9-Paper.pdf
・https://aliaksandrsiarohin.github.io/first-order-model-website/

更新履歴 †

2024/06/18 初版

参考資料 †