ComfyUI6 の履歴(No.2)

履歴一覧
差分を表示
現在との差分を表示
ソースを表示
ComfyUI6 へ行く。
- 1 (2025-11-30 (日) 10:53:02)
- 2 (2025-11-30 (日) 13:49:02)
- 3 (2025-11-30 (日) 15:44:19)

私的AI研究会 > Diffusion > ComfyUI6

画像生成AI「ComfyUI」６（動画編）　== 編集中 ==†

　「ComfyUI」を使ってローカル環境でのAI画像生成を検証する

▲　目　次

画像生成AI「ComfyUI」６（動画編）　== 編集中 ==
- 「ComfyUI」FramePack による動画生成
- 更新履歴
参考資料

※ 最終更新:2025/11/30　

↑

「ComfyUI」FramePack による動画生成†

「FramePackWrapper」を使って動画を作成してみる

↑

プロジェクトで作成するワークフロー†

ComfyUI_proj.zip をダウンロード
・解凍してできるフォルダ

ComfyUI
├─input　　　　　　　　　　　　　　← ワークフローに含まれる入力画像
└─user
    └─default
        └─workflows　　　　　　　　← ワークフローの保存場所
            ├─_base
            ├─_base_i2i
            ├─_base_t2i
            ├─_prompt
            ├─_utility
            ├─_video
            └─test

・解凍してできる「ComfyUI/」フォルダを「StabilityMatrix/Data/Packages/ComfyUI」へ上書きコピーする

↑

動画生成のための環境構築†

「Stability Matrix」上の「ComfyUI」にカスタムノード「ComfyUI-FramePackWrapper」を導入

ComfyUI-Manager ではレポジトリからの導入が出来ないので「Git via URL」からの導入か「Git clone」での導入が必要。
Git via URL だと、ComfyUI-Manager のセキュリティを変更する必要があるので、Git clone を使って導入する

・「Anaconda PowerShell」を起動し一時的に PATH を変更（例：D:\StabilityMatrix に設置の場合）

①	python -V	Python のバージョン確認
②	$env:Path = "D:\StabilityMatrix\Data\Assets\Python310;" + $env:Path	一時的なPATHの変更
③	python -V	パッケージ実行時のPython のバージョン確認

・パッケージ・ディレクトリに移動してパッケージ内の仮想環境を起動する

④	cd "D:/StabilityMatrix/Data/Packages/ComfyUI"	パッケージのディレクトリに移動
⑤	./venv/Scripts/activate	仮想環境を起動
⑤	コマンドラインに (venv) の表示がある（仮想環境下である）ことを確認すること

・「custom_nodes」フォルダへ階層変更し、git clone を実行

⑥	cd custom_nodes	custom_nodes フォルダへ移動
⑦	git clone https://github.com/kijai/ComfyUI-FramePackWrapper	git clone を実行

・「ComfyUI_Local_Media_Manager」階層に移動して必要なパッケージ類を導入する（パッケージの導入が必要なノードの場合）

⑧	ComfyUI-FramePackWrapper	ComfyUI-FramePackWrapper フォルダへ移動
⑨	pip install -r requirements.txt	必要なパッケージ類を導入

・カスタムノードの導入は完了。「Anaconda PowerShell」を終了する

動画生成のワークフロー作成に必要なカスタムノードの導入

以下は ComfyUI-Manager 使って導入する

・複数枚の画像を集約し、次ノードへ渡す「Get Image Size & Count」
　　kijai/ComfyUI-KJNodes　→ 「KJNodes」で検索
・画像のリサイズを行う「Image Resize」
　　cubiq/ComfyUI_essentials　→ 「ComfyUI_essentials」で検索
・複数枚の画像を結合し動画化するノード「Video Combine」
　　Kosinkadink/ComfyUI-VideoHelperSuite　→ 「VideoHelperSuite」で検索

必要モデルのダウンロードと配置

「Stability Matrix」上の「ComfyUI」ではモデルフォルダの場所が異なっていることに注意 → モデルフォルダの配置

モデル名	ファイル名（　.safetensors）	配置先 /StabilityMatrix/Data/Models/	ダウンロード URL
FramePack Model	FramePackI2V_HY_fp8_e4m3fn	DiffusionModels	Kijai/HunyuanVideo_comfy
FramePack Model	(FramePackI2V_HY_bf16)	DiffusionModels
Hunyan Video VAE	hunyuan_video_vae_bf16	VAE
CLIP Vision	sigclip_vision_patch14_384	ClipVision	Comfy-Org/sigclip_vision_384
CLIP	clip_l llava_llama3_fp16	TextEncoders	Comfy-Org/HunyuanVideo_repackaged

↑

サンプル・ワークフローによる生成†

「ComfyUI-FramePackWrapper」添付のサンプル・ワークフロー
・「StabilityMatrix/Data/Packeges/ComfyUI/custom_nodes/ComfyUI-FramePackWrapper/example_workflows/」フォルダ内の　「framepack_hv_example.json」ファイルをドラッグ＆ドロップする
「Load FramePackModel」ノードを確認する

・「model」が「FramePackI2V_HY_fp8_e4m3fn.safetensors」
・「load device」が「offload device」
　（VRAM が少ない場合にエラーとなるため）
「DualCLIPLoader」ノードを確認する

・「clip_name1」が「clip_l.safetensors」
・「clip_name2」が「llava_llama3_fp16.safetensors」
「Load CLIP Vision」ノードを確認する

・「clip_name」が「sigclip_vision_patch14_384.safetensors」
「Load VAE」ノードを確認する

・「vae_name」が「hunyuan_video_vae_bf16.safetensors」
「CLIP Text Encoder」ノードの「prompt」を入力する
・例：　 The girl dances gracefully, with clear movements, full of charm.
「VAE Decode (Tiled)」ノードのパラメータを調整する

・デフォールト値でメモリーエラーとなったのでこの値に変更
「FramePackSampler」ノードを確認する

・「total_second_length」パラメータで再生時間を指定できる
「Video Conbine」ノードで生成結果の指定がきる

・「save_output」が「Faulse」の場合自動保存しないが右クリック「Save preview」でダウンロードできる