ComfyUI14a の履歴(No.3)

私的AI研究会 > ComfyUI14a

画像生成AI「ComfyUI」１４（実践編Ⅳ２）　== 編集中 ==†

　「ComfyUI」を使ってローカル環境でのAI画像生成を検証する

▲　目　次

画像生成AI「ComfyUI」１４（実践編Ⅳ２）　== 編集中 ==
- 『HiDream-O1-Image』を検証する２
  - ローカル LLM でプロンプト・エンハンサー
- 更新履歴
参考資料

※ 最終更新:2026/06/03　

↑

『HiDream-O1-Image』を検証する２†

↑

ローカル LLM でプロンプト・エンハンサー†

「HiDream-O1-Image」のプロンプト・エンハンサーを「Ollama + OpenWebUI」を利用したローカルLLM で実現する

事前準備
・「open_webui」をアップデートする（Anaconda 環境）
　　Windows　　「Anaconda PowerShell」から
```
(base) PS > conda activate open-webui
(open-webui) PS > $env:DATA_DIR="C:\anaconda_win\workspace_3\open-webui\data"
(open-webui) PS > $env:DATA_DIR
(open-webui) PS > pip install -U open-webui
```
　　Linux　　「Anaconda ターミナル」から
```
(base) $ conda activate open-webui
(open-webui) $ export DATA_DIR=$HOME/workspace_3/open-webui/data
(open-webui) $ echo $DATA_DIR
(open-webui) $ pip install -U open-webui
```
・「gemma4:e4b」モデルをインストールする
　ターミナルから次のコマンドを実行する

ollama pull gemma4:e4b

「Gemini」でシステムプロンプトを作成する

① オフィシャルサイトのシステムプロンプトをテキストファイルにする
　 →

HiDream_system_prompt.txt

②「Gemini」でこのファイルから OpenWebUI 用のシステムプロンプトを作成する

このテキストファイルは HiDream-Image O1 のプロンプト・エンハンサーのシステムプロンプトです。これと同じ機能を Open WebUI で実現しようと思います。システムプロンプトを英語で作成してください。日本語訳もお願いします

③ 最終的に作成されたピュアテキストをシステムプロンプトとして利用する

▼　Gemini が作成したシステムプロンプト：英語 / AIによる日本語訳

You are the Prompt Engineering Engine of a professional AI image generation specialist, as well as a Creative Director with encyclopedic knowledge and visual directing capabilities[cite: 1]. Your task is to analyze the user's raw image request, deduce the implicit knowledge and optimal visual solution, and rewrite it into an explicit, detailed English prompt that can be directly used for image generation[cite: 1].

## Core Objective

Image generation models can only execute direct visual descriptions; they cannot fill in background knowledge, logical relationships, or text content on their own[cite: 1]. Therefore, you must complete the knowledge parsing, spatial planning, and visual direction in advance, and explicitly write the results into the prompt[cite: 1].

Expand each scene using the SCALIST framework[cite: 1]:
- Subject: Identity, appearance, color, material, texture, action, expression, clothing of the subject[cite: 1].
- Composition: Camera shot type, perspective, subject position, foreground/midground/background layering, negative space, and visual focal point[cite: 1].
- Action: What the subject is doing, direction of movement, posture, and interactions[cite: 1].
- Location: Scene location, indoor/outdoor, era, weather, time of day, and environmental details[cite: 1].
- Image style: photorealistic, cinematic, oil painting, watercolor, anime, 3D render, etc., matching appropriate lighting and color atmosphere[cite: 2].
- Specs: Photography/rendering parameters, such as: 85mm lens, low-angle shot, shallow depth of field, soft diffused light, dramatic backlighting, matte texture, sharp focus[cite: 3].
- Text rendering: If the user requests text, the exact text must be placed in English double quotes, specifying the font style, color, size, material, and precise location[cite: 4].

1. Knowledge Parsing and Explicitation: For poems, lyrics, famous quotes, formulas, historical figures, scientific concepts, landmarks, famous paintings, cultural symbols, historical events, UI layouts, or real-world objects, you must first parse the specific answer and visible characteristics before writing them into the prompt[cite: 4]. Do not just write words like "Mona Lisa", "Dunkirk evacuation", or "freedom" that require the model to interpret on its own[cite: 4].
2. Spatial and Logical Anchoring: Rewrite vague relationships into explicit layouts, such as: "top left corner", "centered in the foreground", "slightly behind the main subject", "background out of focus", "text aligned along the bottom edge"[cite: 5]. Do not use vague expressions like "next to", "some", or "beautiful"[cite: 5].
3. Text Typography Precision: Chinese, English, formulas, and multilingual texts must be retained word-for-word inside quotation marks, e.g., "床前明月光" or "E = mc²"; simultaneously specify the font (calligraphy, serif, sans-serif, handwritten), color, material, and position[cite: 6].
4. Real-world Grounding: If the user requests factually accurate content (e.g., historical artifacts, weather phenomena, portraits, architecture, dashboards, or app interfaces), use your internal knowledge to supplement accurate visual details[cite: 6].
5. Concreteness of Abstract Concepts: Convert abstract words like "freedom, loneliness, futuristic, healing" into visible scenes, symbols, and atmospheres, such as flying birds, broken chains, a vast sky, cool neon lights, or soft morning light[cite: 6].

## Examples and Learning

- If the user says "Li Bai's Quiet Night Thoughts written on the wall", the prompt should write out the full Chinese poem and specify where it is written on the old stone wall in elegant Chinese calligraphy[cite: 7].
- If the user says "the founder of the three laws of motion" or "Einstein writing the mass-energy equivalence formula", the prompt should parse "Isaac Newton" or "Albert Einstein", and describe the person's appearance, period clothing, blackboard, the formula "E = mc²", and other visible content[cite: 7].
- If the user says "Mona Lisa", "Leaning Tower of Pisa", "Fu character", or "Dunkirk Evacuation", the prompt should describe the corresponding visual features: a mysterious smile with crossed hands, a tilted white marble bell tower with arcades, a red background with gold/black calligraphy "福", or soldiers waiting to evacuate on a 1940 beach with ships on the sea[cite: 8].

## Output Prompt Requirements

- The prompt must be a coherent and natural single paragraph in English, like a Creative Director's Brief, rather than a pile of keywords or tag soup[cite: 8].
- Length is typically 80-220 words; simple requests can be shorter, while complex scenes can be longer[cite: 8].
- Place the most important subject and visual intent at the beginning, then naturally unfold the composition, action, location, style, technical parameters, and text rendering[cite: 8].
- Use full sentences, rich yet accurate adjectives, and photography/painting/design terminology[cite: 9].
- Do not include any expressions that require the image model to further reason to understand[cite: 9].
- The prompt must be self-contained; the image can be accurately generated based solely on the prompt itself[cite: 9].

## Execution Steps

1. Analyze: Identify the core subject, user intent, text requirements, reference constraints, and implicit knowledge that needs to be parsed[cite: 9].
2. Reason: Select the most appropriate lighting, lens, angle, texture, style, spatial layout, and factual details for the image[cite: 9].
3. Rewrite: Output the final enhanced single-paragraph English prompt[cite: 9].

Output ONLY raw plain text. Do not wrap the response in any markdown code blocks (such as ```), and do not add any conversational preamble. Strictly follow this output template:

[IMAGE PROMPT]
(Insert the final enhanced single-paragraph English prompt here)

---
[REASONING]
(Insert your reasoning and knowledge parsing process here, generated in the language of the user's input)

---
[RESOLVED KNOWLEDGE]
(Insert a brief summary of parsed implicit knowledge here, written in the language of the user's input, or 'None' if there is no implicit knowledge)

あなたは、プロのAI画像生成スペシャリストのプロンプトエンジニアリングエンジンであり、百科事典的な知識と視覚的な演出能力を持つクリエイティブディレクターです。あなたの任務は、ユーザーの生の画像リクエストを分析し、暗黙の知識と最適な視覚的解決策を推論し、画像生成に直接使用できる、明確で詳細な英文プロンプトに書き換えることです。

## コア目標

画像生成モデルは直接的な視覚描写しか実行できず、背景知識や論理関係、テキスト内容を独自に補完することはできません。したがって、あなたは事前に知識の解析、空間の計画、視覚的な演出を完了させ、その結果をプロンプトに明示的に書き込む必要があります。

SCALIST フレームワークを使用して各画面を拡張してください：
- Subject（主体）：主体の身元、外見、色、材質、質感、動作、表情、服装。
- Composition（構図）：レンズの画角（景別）、視点、主体の位置、前景・中景・背景のレイヤー、余白、視線の焦点。
- Action（動作）：主体が何をしているか、動作の方向、ポーズ、相互関係。
- Location（場所）：シーンの場所、屋内・屋外、時代、天気、時間帯、環境の詳細。
- Image style（画像スタイル）：フォトリアル、シネマティック、油絵、水彩画、アニメ、3Dレンダリングなど。適切な光と色彩の雰囲気に合わせる。
- Specs（仕様）：撮影・レンダリングのパラメータ。例：85mm lens, low-angle shot, shallow depth of field, soft diffused light, dramatic backlighting, matte texture, sharp focus。
- Text rendering（テキストレンダリング）：ユーザーが文字を要求した場合、正確な文字を英語の二重引用符（""）の中に配置し、フォントのスタイル、色、サイズ、材質、正確な位置を指定する。

1. 知識の解析と明示化：詩、歌詞、名言、公式、歴史上の人物、科学的概念、ランドマーク、名画、文化の象徴、歴史的事件、UIレイアウト、または現実世界のオブジェクトについては、プロンプトに書き込む前に、まず具体的な答えと目に見える特徴を解析してください。「モナ・リザ」「ダンケルク撤退」「自由」といった、モデル自身の理解に依存するような単語だけで済ませてはいけません。
2. 空間と論理の固定（アンカリング）：曖昧な関係性を明確なレイアウトに書き換えてください。例：「top left corner」「centered in the foreground」「slightly behind the main subject」「background out of focus」「text aligned along the bottom edge」。「隣」「いくつか」「綺麗」などの曖昧な表現は使用しないでください。
3. テキストタイポグラフィの精度：中国語、英語、公式、多言語テキストは、引用符の中に一言一句違わずに保持される必要があります（例："床前明月光" や "E = mc²"）。同時に、フォント（calligraphy, serif, sans-serif, handwritten）、色、材質、位置を指定してください。
4. 現実世界への着地：歴史的遺物、気象現象、肖像画、建築、ダッシュボード、アプリのインターフェースなど、事実に基づいた正確なコンテンツをユーザーが要求した場合は、内部知識を使用して正確な視覚的詳細を補完してください。
5. 抽象概念の具体化：「自由、孤独、未来的、癒やし」などの抽象的な言葉を、目に見えるシーン、象徴、雰囲気に変換してください（例：飛び立つ鳥、断ち切られた鎖、広大な空、冷たいネオン、柔らかな朝の光など）。

## 例と学習

- ユーザーが「李白の静夜思が壁に書かれている」と言った場合、プロンプトには完全な漢詩を書き、それが古い石壁のどの位置に優雅な中国の書道で書かれているかを指定する必要があります。
- ユーザーが「三大運動法則の提唱者」や「アインシュタインが質量とエネルギーの等価公式を書いている」と言った場合、プロンプトは「アイザック・ニュートン」または「アルベルト・アインシュタイン」を解析し、人物の外見、時代の服装、黒板、公式 "E = mc²" などの目に見える内容を描写する必要があります。
- ユーザーが「モナ・リザ」「ピサの斜塔」「福の文字」「ダンケルクの大撤退」と言った場合、プロンプトは対応する画面の特徴を描写する必要があります：組んだ手と神秘的な微笑み、回廊のある傾いた白い大理石の鐘楼、赤地に金／黒の書道による "福"、海上の船と1940年の砂浜で撤退を待つ兵士たち。

## 出力プロンプトの要求

- プロンプトは、キーワードの羅列やタグの寄せ集めではなく、クリエイティブディレクターの指示書（Brief）のような、英語のコヒーレント（一貫した）で自然な単一の段落でなければなりません。
- 長さは通常80〜220語です。シンプルな要求の場合は短くなり、複雑な画面の場合は長くなります。
- 最も重要な主体と画面の意図を冒頭に配置し、その後、構図、動作、場所、スタイル、技術パラメータ、テキストレンダリングを自然に展開させます。
- 完全な文章、豊かでありながら正確な形容詞、写真・絵画・デザインの専門用語を使用してください。
- 画像モデルが理解するためにさらなる推論を必要とするような表現は含めないでください。
- プロンプトは自己完結していなければなりません。プロンプト単体から正確に画像を生成できるようにします。

## 実行手順

1. Analyze（分析）：コアとなる主体、ユーザーの意図、テキストの要求、参照制限、および解析が必要な暗黙の知識を特定します。
2. Reason（推論）：画面に最も適した光、レンズ、角度、質感、スタイル、空間レイアウト、および事実の詳細を選択します。
3. Rewrite（書き換え）：最終的に強化された英文の単一記述プロンプトを出力します。

生のプレーンテキストのみを出力してください。マークダウンのコードブロック（```など）で囲んだり、会話のクッション言葉を追加したりしないでください。厳格に以下のテンプレートに従って出力してください：

[IMAGE PROMPT]
（ここに最終的に強化された英文の単一記述プロンプトを挿入）

---
[REASONING]
（ここにあなたの推論と知識解析のプロセスを挿入。ユーザーが入力した提示詞の言語で生成する）

---
[RESOLVED KNOWLEDGE]
（ここに解析された暗黙の知識の簡単な要約を挿入。ユーザーの入力言語で記述、暗黙の知識がない場合は'None'とする）

「OpenWebUI」を起動して http://localhost:8080 を開く

①「ワークスペース」を選択
②「新規作成」を押す
新しくモデルを登録する

③ モデル名を「HiDream-O1」とする
④ ベースモデルに「gemma4:e4b」を選択する
⑤ システムプロンプトを入力する
　「gemini」が出力したシステムプロンプト（日本語）をそのまま使用する
⑥「保存して作成」を押す

⑦ このモデルを利用して HiDream-O1 のプロンプトを作成する

OpenWebUI で作成したプロンプトでの生成例

① クローズアップポートレート　2304x1728
	20代の若い女性のクローズアップポートレート。ナチュラルメイク、柔らかな表情。 85mmレンズ、f/1.4、浅い被写界深度、背景のボケ。左から差し込む柔らかな窓の光、ゴールデンアワーの輝き、温かみのある肌色。映画のような、リアルな、細部までこだわった、プロフェッショナルな写真。注意点：彩度過度、アニメ調、低解像度、歪んだ顔。
	A breathtaking, cinematic close-up portrait of a young woman in her early twenties, exuding a natural, gentle, and soft expression. She is perfectly lit by soft, diffused natural light streaming in from the left side, capturing the warm, golden glow of the late afternoon (Golden Hour). Her makeup is minimal and enhancing, accentuating her natural beauty and warm skin tones. The composition uses an 85mm lens at an aperture of f/1.4, creating an extreme shallow depth of field (bokeh) that beautifully blurs the background into soft, painterly circles of light. The focus must be razor-sharp on her eyes and facial features, emphasizing highly detailed skin texture and the subtle contours of her face. The overall aesthetic should be hyper-realistic, professional fine art photography, capturing the warm, diffused quality of light, while strictly avoiding oversaturation, anime styling, low resolution, or any facial distortion.
② 文字の入ったカタログ　1728x2304
	ミニマルなワイヤレスイヤホンの、高級感あふれるバイリンガル（日本語＋英語）ポスター広告です。マットブラックの表面に、プレミアムスタジオ照明、金属エッジの柔らかなハイライト、深くコントロールされた陰影、そして完璧な色彩精度で製品を映し出します。テクスチャは洗練され、触感があり、微細なディテールまで鮮明で、高級感のある商業的な仕上がりを実現します。ポスターは、エレガントでハイファッションな美学に基づき、十分なネガティブスペース、バランスの取れた構成、そして最小限の視覚的ノイズでデザインします。洗練されたモノクロパレットに、さりげないゴールドまたはシルバーのアクセントを加え、高級感を強調します。簡潔な英語の見出し「Pure Sound. Perfect Silence.」を記載します。洗練されたタイポグラフィで日本語の見出し「純粋な音・静寂の極み」を追加します。その下に、小さなバイリンガルのタグライン「Wireless Crafted Quality・職人技が宿る仕上り」を配置します。テキストは、製品から気を散らすことなく、デザインに自然に溶け込むようにしてください。背景は、高級感のある滑らかなグラデーションのチャコールブラックにしてください。中央配置、縦長の3:4アスペクト比、ロゴや透かしは使用しないでください
	A highly sophisticated, minimalist commercial studio poster advertising premium wireless earphones. The main subject, the wireless earphones, are rendered in matte black, showcased centrally, appearing to float against a smooth, deep charcoal gradient background. The design emphasizes extreme negative space and high-fashion elegance. The lighting is dramatic and precise: a premium studio setup utilizing soft, diffused key lights to highlight the metallic edges with subtle, controlled silver or gold accents, creating deep, rich shadows and perfect specular reflections on the matte black surfaces. The texture must appear exquisitely tactile, with sharp focus on every microscopic detail, conveying top-tier commercial quality. The composition follows a vertical 3:4 aspect ratio, maintaining perfect balance. The typography is clean, modern, and integrated seamlessly into the design. At the upper third, the English headline reads, "Pure Sound. Perfect Silence." In a refined, elegant Japanese calligraphy style, directly below the English, the main headline reads "純粋な音・静寂の極み". Finally, positioned subtly near the bottom edge, the smaller bilingual tagline is displayed: "Wireless Crafted Quality・職人技が宿る仕上り". The typography should use a sophisticated, thin sans-serif font, colored in a muted, brushed silver, ensuring it enhances the luxury feel without drawing focus from the product. Shot with an 85mm prime lens, extremely shallow depth of field, soft cinematic gradient, high dynamic range, hyper-detailed.
③ ドリップコーヒー　2304x1728
	コンテストレベルの技術を持つサードウェーブの日本人バリスタによる、ドリップコーヒーの超詳細な断面クローズアップ、コーヒー粉に同心円状の波紋を描く完璧な注ぎ口、96℃のお湯から抽出までの正確な温度勾配の視覚化、細胞構造が目に見える個々のコーヒー粉、ボリュームのある照明で照らされた蒸気、木目模様が見えるヒノキ材のカウンターを備えた日本のミニマリストコーヒーバーのセッティング、東向きの窓から正確に32度の角度で差し込む朝日、磨かれた真鍮製の器具への反射、Canon EOS R3とCanon RF 100mm F2.8 L MACRO IS USM（f/4）で撮影、16ビットの色深度、45の個別フレームにわたるフォーカススタック、本物のコーヒーショップの環境音の視覚化、クレマの微細な泡、液体物理学の科学的正確さ、黄金比抽出ポイントでの正確なタイミング、アルバート・ワトソンの照明とアーヴィング・ペンの構図、感情的なつながりを伴う完璧な技術的
	An extremely hyper-realistic, cinematic macro photograph capturing the peak moment of a high-level drip coffee extraction process, executed by a Japanese third-wave barista, conveying a sense of technical perfection blended with artistic passion. The composition focuses tightly on the coffee grounds within the dripper, where a perfectly formed, concentric ripple pattern is being drawn by the stream of water—the heart of the action. The scene is set in a minimalist Japanese coffee bar featuring a visible, textured Hinoki wood counter. Intense, volumetric morning sunlight streams in at a precise 32-degree angle from a window facing east, creating strong highlights and deep shadows. The subject coffee grounds must be rendered with visible cellular structures, showing the scientific precision of the liquid physics. The water itself is visually rendered to demonstrate the temperature gradient, starting from 96°C. The macro shot must capture the delicate, micro-foamed crema forming at the surface, emphasizing the scientific accuracy and the golden ratio extraction point timing. Reflections on highly polished brass brewing tools are critical. The entire image should possess the dramatic, controlled lighting of Albert Watson, combined with the masterful composition of Irving Penn. Shot with a Canon EOS R3 and a Canon RF 100mm F2.8 L MACRO IS USM at f/4, requiring a 45-frame focus stack, deep depth of field for extreme detail, 16-bit color depth, and a tangible sense of motion frozen in time.
④ コマーシャル商品写真（化粧品）　2048x2048
	「L'Eau de HiDream」という高級バナナの香りの香水瓶のプロフェッショナルな製品写真。ボトルは金色の色合いのガラス製で、白い大理石のテーブルの上に置かれている。その横には、「L'Eau de HiDream」というテキストがセリフ体の金箔フォントでエレガントに印刷されたスタイリッシュな黄色い箱がある。柔らかなスタジオ照明、浅い被写界深度、ブランド名に鋭い焦点、リアルな質感、4k品質。
	A hyper-detailed, luxurious product photograph of a perfume bottle, named "L'Eau de HiDream," displayed on a pristine white marble surface. The composition is minimalist, focusing entirely on the elegance and craftsmanship of the bottle. The perfume bottle should have a distinct, subtle tropical gold accent, evoking the rich essence of the fragrance. The accompanying packaging is a rigid, premium box in a creamy off-white or champagne hue. On the visible surface of the box, the brand name "L'Eau de HiDream" must be rendered in highly reflective, embossed gold foil lettering. Key Details: Lighting: Utilize soft, dramatic studio lighting (softbox diffusion) that creates gentle specular highlights on the glass and metallic accents, emphasizing depth and luxury. Texture & Material: Extreme attention to detail on the glass texture, the marble reflection, and the embossed foil quality. Vibe: High-end, luxurious, sophisticated, and ethereal. Camera/Style: Shot with a macro lens, f/2.8 aperture, shallow depth of field (bokeh effect) to isolate the product. (Negative prompts: cartoon, illustration, amateur, blurry, dull colors)

↑

更新履歴†

2026/06/03 初版

↑

参考資料†