私的AI研究会 > ComfyUI9i
「ComfyUI」を使ってローカル環境でのAI画像生成を検証する
| いきなりテキストから始めるのは難しいので、最初のフレーム画像を生成してから動かしてみる。 参考URL → https://note.com/sepiablue/n/n62c927e95ce8' |
| 項目 | 内容 | 入力画像 |
| プロンプト | High-quality, realistic full-body photo. A Japanese woman walking along a paved path lined with trees under a blue sky. |  |
| 高品質リアルな全身写真。日本人女性が青空の下、並木のある舗装された小道を歩いている。 | ||
| ワークフロー | 「Krea/」8213_krea2_identity_edit.json | |
| 生成画像 |  | ・参考サイトのプロンプトから参照画像を考える ・Krea 2 で生成したファッション写真をキャラクターに 木々が立ち並ぶ道に立つ全身画像を生成する ・縦横比は動画生成を意識して 16:9 とする |
| プロンプト | 生成動画 生成時間：6分58秒（RTX-4070Ti 12GB） |
|
High-quality, realistic live-action footage. Accurately maintain the appearance of the Japanese woman from the input image (dark brown hair, beige ribbed long-sleeve cardigan, white inner top, and pale-colored pleated skirt). Create a beautiful, continuous 8-second shot without cuts, set on a paved path lined with trees under a blue sky. The woman walks along the path with a light, cheerful step. Along the way, she gracefully turns around and spins, letting her skirt and hair flutter in the breeze. Afterward, she clasps her hands behind her back, leans toward the camera with a cute, mischievous, and teasing smile, and gives a charming wink with her right eye. Maintain character consistency, facial details, clothing, and the outdoor background throughout the video. Ensure natural movement and avoid morphing or abrupt cuts. overall_soundscape: Gentle breeze sound, and soft footsteps. non_diegetic_music: Pure instrumental music only, | ワークフロー：「MiniMax/」5602_minimax_h3_i2v.json |
| 高品質でリアルな実写映像。入力画像に写っている日本人女性の容姿（濃い茶色の髪、ベージュのリブ編み長袖カーディガン、白いインナー、淡い色のプリーツスカート）を正確に再現してください。青空の下、木々が立ち並ぶ舗装された道を舞台に、カットなしの美しい8秒間の連続ショットを作成してください。女性は軽やかで明るい足取りで道を歩き、途中で優雅に振り返り、スカートと髪を風になびかせます。その後、両手を後ろで組み、可愛らしくいたずらっぽい笑顔でカメラに寄りかかり、右目で魅力的なウインクをします。映像全体を通して、キャラクターの表情、顔のディテール、服装、屋外の背景の一貫性を維持してください。自然な動きを確保し、モーフィングや唐突なカットは避けてください。 全体的なサウンドスケープ：そよ風の音と、静かな足音。 非ダイジェティック音楽：純粋なインストゥルメンタル音楽のみ。 |
| プロンプト | 生成動画 生成時間：6分47秒（RTX-4070Ti 12GB） |
|
High-quality, realistic live-action footage. Accurately maintain the appearance of the Japanese woman from the input image (dark brown hair, beige ribbed long-sleeve cardigan, white inner top, and light-colored pleated skirt). Create a continuous 8-second clip following the specified timing, without scene cuts. [0:00-0:03] The woman walks along the path with a light, cheerful step. [0:03-0:05] She turns around gracefully, causing her pleated skirt and dark brown hair to flutter in the wind. [0:05-0:07] The camera zooms in on her face as she winks her right eye with a cute, playful smile. [0:07-0:08] She flashes an adorable smile and makes a peace sign in front of her face. Maintain character consistency, facial details, and outfit design throughout the video. Ensure movements are natural; do not use morphing effects. overall_soundscape: Gentle breeze sound, and soft footsteps. non_diegetic_music: Pure instrumental music only, | ワークフロー：「MiniMax/」5602_minimax_h3_i2v.json |
| 高品質でリアルな実写映像を作成してください。入力画像に写っている日本人女性の外見（濃い茶色の髪、ベージュのリブ編み長袖カーディガン、白いインナー、淡い色のプリーツスカート）を正確に再現してください。指定されたタイミングに従い、シーンカットなしで8秒間の連続クリップを作成してください。[0:00-0:03] 女性は軽やかで明るい足取りで小道を歩きます。[0:03-0:05] 優雅に振り返ると、プリーツスカートと濃い茶色の髪が風になびきます。[0:05-0:07] カメラが彼女の顔にズームインすると、彼女は可愛らしく遊び心のある笑顔で右目をウインクします。[0:07-0:08] 彼女は愛らしい笑顔を見せ、顔の前でピースサインをします。動画全体を通して、キャラクターの一貫性、顔のディテール、衣装デザインを維持してください。動きは自然になるようにし、モーフィング効果は使用しないでください。 全体的なサウンドスケープ：そよ風の音と、静かな足音。 非ダイジェティック音楽：純粋なインストゥルメンタル音楽のみ。 |
| プロンプト | 生成動画 生成時間：2分50秒（RTX-4070Ti 12GB） |
|
High-quality, realistic live-action footage. Accurately reproduce the appearance of the Japanese woman from the input image (dark brown hair, beige ribbed long-sleeve cardigan, white inner top, and pale-colored pleated skirt). Depict her walking along a tree-lined paved path under a blue sky. Create a smooth, continuous 4-second video without any scene cuts. The woman walks with a light, graceful gait, gazing ahead with a gentle smile. Maintain consistency in character design, facial features, clothing, and the outdoor environment throughout the video. Ensure natural animation movement without unnatural changes such as morphing. overall_soundscape: Gentle breeze sound, and soft footsteps. non_diegetic_music: Pure instrumental music only, | 最終フレーム画像  ワークフロー：「MiniMax/」5602_minimax_h3_i2v.json |
| 高品質でリアルな実写映像を作成してください。入力画像の日本人女性の姿（ダークブラウンの髪、ベージュのリブ編み長袖カーディガン、白いインナー、淡い色のプリーツスカート）を正確に再現します。青空の下、並木のある舗装された小道を彼女が歩く様子を描写してください。シーンの切り替え（カット）を含まない、滑らかで連続した4秒間の動画を作成します。女性は穏やかな笑みを浮かべて前方を見つめながら、軽やかで優雅な足取りで歩きます。動画全体を通して、キャラクターのデザイン、顔立ち、服装、そして屋外の環境に一貫性を持たせてください。モーフィングのような不自然な変化が生じないよう、自然な動きのアニメーションに仕上げてください。 全体的なサウンドスケープ：そよ風の音と、静かな足音。 非ダイジェティック音楽：純粋なインストゥルメンタル音楽のみ。 |
| プロンプト | 生成動画 生成時間：2分49秒（RTX-4070Ti 12GB） |
|
High quality realistic live-action footage. Accurately reproduce the appearance of a Japanese woman in the input image (dark brown hair, ribbed beige long-sleeved cardigan, white innerwear and light-colored pleated skirt) and place it on a paved path lined with trees under a blue sky. Create 4 seconds of smooth, uninterrupted footage without scene transitions. The woman gracefully sits on the ground, places her hands on the ground in front of her, and assumes a cute "wariza" pose (a position where she goes from kneeling to sitting with her legs bent next to her hips). She looks straight into the camera with a bright and adorable smile. Maintain consistency in character design, facial details, clothing, and outdoor backgrounds throughout. Please do not use unnatural deformations such as morphing, but use natural movements. overall_soundscape: Gentle breeze sound, and soft footsteps. non_diegetic_music: Pure instrumental music only, | ワークフロー：「MiniMax/」5602_minimax_h3_i2v.json |
| 高品質でリアルな実写映像を作成してください。入力画像の日本人女性の姿（ダークブラウンの髪、ベージュのリブ編み長袖カーディガン、白いインナー、淡い色のプリーツスカート）を正確に再現し、青空の下、木々が並ぶ舗装された小道に配置します。シーンの切り替えなしで、4秒間の滑らかで途切れのない映像を生成してください。女性は優雅に地面に座り、体の前で両手を地面につき、可愛らしい「割り座」のポーズ（正座の状態から、両脚を腰の横に曲げて座る姿勢）をとります。彼女は明るく愛らしい笑顔でカメラをまっすぐ見つめます。映像全体を通して、キャラクターのデザイン、顔の細部、服装、屋外の背景の一貫性を保ってください。モーフィングのような不自然な変形は避け、自然な動きで表現してください。 全体的なサウンドスケープ：そよ風の音と、静かな足音。 非ダイジェティック音楽：純粋なインストゥルメンタル音楽のみ。 |
| 完成動画 | 最終フレームを出力できるように改良した ワークフロー |
 「MiniMax/」5602_minimax_h3_i2v.json |
| × 悪い例 | Audio: Bright, upbeat instrumental music, soft footsteps, and the sound of a gentle breeze. No dialogue, speech, or vocals. |
| 音声：明るく軽快なインストゥルメンタル音楽、柔らかな足音、そして穏やかな風の音。セリフ、話し声、ボーカルはなし。 | |
| 〇 良い例 | overall_soundscape: Gentle breeze sound, and soft footsteps. non_diegetic_music: Pure instrumental music only, |
| 全体的なサウンドスケープ：そよ風の音と、静かな足音。 非ダイジェティック音楽：純粋なインストゥルメンタル音楽のみ。 |