GanFOMM2 の履歴(No.3)

• 履歴一覧
• 差分 を表示
• 現在との差分 を表示
• ソース を表示
• GanFOMM2 へ行く。
  • 1 (2024-06-19 (水) 02:13:05)
  • 2 (2024-06-19 (水) 02:13:57)
  • 3 (2024-06-19 (水) 20:37:18)
  • 4 (2024-06-20 (木) 00:20:55)
  • 5 (2024-06-20 (木) 21:26:01)
  • 6 (2024-06-22 (土) 01:11:37)
  • 7 (2024-06-22 (土) 14:42:48)
  • 8 (2024-06-30 (日) 22:14:44)
  • 9 (2024-07-01 (月) 01:39:46)
  • 10 (2024-07-01 (月) 05:06:26)
  • 11 (2024-07-01 (月) 05:13:49)
  • 12 (2024-07-01 (月) 20:10:27)
  • 13 (2024-07-01 (月) 22:57:08)
  • 14 (2024-07-10 (水) 02:23:02)
  • 15 (2024-07-10 (水) 15:02:45)
  • 16 (2024-07-10 (水) 23:07:45)
  • 17 (2024-07-11 (木) 00:21:07)
  • 18 (2024-07-12 (金) 03:15:57)
  • 19 (2024-07-12 (金) 14:00:49)
  • 20 (2024-07-12 (金) 19:55:40)
  • 21 (2024-07-12 (金) 23:09:17)
  • 22 (2024-07-15 (月) 15:07:26)
  • 23 (2024-07-15 (月) 19:38:45)
  • 24 (2024-07-18 (木) 17:35:45)
  • 25 (2024-07-20 (土) 23:30:17)
  • 26 (2024-08-06 (火) 14:31:49)
  • 27 (2024-08-13 (火) 23:33:58)
  • 28 (2024-08-17 (土) 22:51:29)
  • 29 (2024-08-18 (日) 02:06:58)
  • 30 (2024-08-18 (日) 14:47:32)
  • 31 (2024-08-18 (日) 17:42:37)
  • 32 (2024-09-01 (日) 19:00:54)
  • 33 (2024-09-02 (月) 17:10:35)
  • 34 (2024-09-02 (月) 17:18:11)
  • 35 (2024-09-03 (火) 14:34:30)
  • 36 (2024-11-03 (日) 02:05:06)
  • 37 (2024-11-04 (月) 01:24:34)
  • 38 (2024-11-04 (月) 05:13:32)
  • 39 (2024-11-04 (月) 22:02:19)

私的AI研究会 > GanFOMM2

静止画から動画を作る：First Order Motion Model（その２）== 編集中 ==†

　同じカテゴリの静止画と動画を使って、静止画を動画のように動かす「First Order Motion Model」技術を使って静止画を動画にする

First Order Motion Model†

概要†

• 「first-order-model」は、2019年に発表された 『First Order Motion Model for Image Animation』 という論文に基づいて作成された、同じカテゴリの静止画と動画を使って、静止画を動画のように動かすというモデル
  
• 静止画 source と 動画 Driving Frame から入力動画の動きに沿って動く入力画像の動画を生成する
  
  
  モデル概要図（下記論文所収）
  
  
• 論文「First Order Motion Model for Image Animation」
  <paper>
  ・https://papers.nips.cc/paper_files/paper/2019/file/31c0b36aef265d9221af80872ceb62f9-Paper.pdf
  ・(new) https://arxiv.org/pdf/2104.11280
  <framework>
  ・https://aliaksandrsiarohin.github.io/first-order-model-website/
  ・(new) https://github.com/snap-research/articulated-animation
  

生成される画像例†

• ニュースのビデオと静止画から動画を生成（音声付き）
  
  
  
  

対処した問題点とエラー詳細†

更新履歴†

• 2024/06/18 初版
  
   

参考資料†

• First Order Motion Model
  
  • モナリザがトランプ大統領のように動き出すFirst Order Motion Modelを試してみる
    
  • モナリザの写真を自分の顔とシンクロさせて動かしてみる、流行りの深層学習モデルFOMMについて解説&実装(First Order Motion Model)
    
  • First Order Motion Model で、モナリザをトランプ大統領のように動かす