Select Page
Ideogram 4 實作教學:在 ComfyUI 本機部署最強開源 AI 繪圖模型

Ideogram 4 實作教學:在 ComfyUI 本機部署最強開源 AI 繪圖模型

2026 年最受矚目的 AI 繪圖模型之一,莫過於 Ideogram 團隊正式釋出的:

Ideogram 4

這是 Ideogram 首次公開模型權重(Open Weight),也是目前開源陣營中,在:

  • 文字生成(Text Rendering)
  • 海報設計
  • 品牌廣告
  • 排版控制
  • JSON 結構化提示詞

官方資料顯示,Ideogram 4 採用 9.3B 參數的單流 Diffusion Transformer(DiT)架構,並支援原生 2K 圖像生成。

本篇將帶你使用 ComfyUI,在本機部署 Ideogram 4。


系統需求

官方模型共有兩個版本:

版本量化
Ideogram 4 FP8品質最佳
Ideogram 4 NF4VRAM需求較低

目前 ComfyUI 官方整合版本主要使用:

  • FP8
  • NVFP4

其中 FP8 畫質最佳。


第一步:下載模型

ComfyUI 專用模型

官方:

Comfy-Org Ideogram-4

原始模型:

Ideogram 4 FP8 官方模型


第二步:放置模型檔案

依照官方說明建立目錄。

ComfyUI
│
├─ models
│  ├─ diffusion_models
│  │  ├─ ideogram4_fp8_scaled.safetensors
│  │  └─ ideogram4_unconditional_fp8_scaled.safetensors
│  │
│  ├─ text_encoders
│  │  └─ qwen3vl_8b_fp8_scaled.safetensors
│  │
│  └─ vae
│      └─ flux2-vae.safetensors

第三步:了解每個模型用途

ideogram4_fp8_scaled

主模型

負責:

  • 圖片生成
  • 構圖
  • 風格
  • 排版

ideogram4_unconditional_fp8_scaled

CFG 引導模型

負責:

  • 提升細節
  • 強化 Prompt Follow
  • 改善品質

官方建議兩個模型一起使用。若只載入主模型雖可運作,但畫質會下降。


qwen3vl_8b_fp8_scaled

文字編碼器

負責:

  • Prompt 理解
  • JSON 理解
  • 空間推理
  • 海報版面配置

flux2-vae

VAE 解碼器

負責將 Latent 轉換成圖片。


第四步:更新 ComfyUI

Ideogram 4 需要最新版本的 ComfyUI。

更新方式:

cd ComfyUI

git pull

或:

update_comfyui.bat

官方於 Day-0 即已原生支援 Ideogram 4。


第五步:載入官方 Workflow

ComfyUI 官方已提供範例工作流。

建議直接從:

Comfy Blog

下載 Workflow


基礎工作流架構

Prompt
    ↓

Qwen3-VL Encoder
    ↓

Ideogram 4
    ↓

Sampler
    ↓

Flux VAE Decode
    ↓

Save Image

第六步:第一張圖片

測試 Prompt:

A futuristic cyberpunk city at night,
neon signs in Chinese,
cinematic lighting,
ultra detailed,
high contrast,
8k photography

生成尺寸:

1024 x 1024

推理模式:

DEFAULT

第七步:體驗 JSON Prompt

Ideogram 4 最大特色就是:

Structured JSON Prompt

官方模型訓練時即使用 JSON Caption。


範例:海報設計

{
  "scene_summary": "Professional technology conference poster",

  "background": {
    "description": "Modern convention center stage with blue ambient lighting, large LED screen, clean professional environment"
  },

  "style": {
    "description": "Corporate marketing design, professional conference poster, clean typography, premium branding, modern layout"
  },

  "objects": [
    {
      "description": "Conference stage",
      "bbox": [100, 150, 900, 850],
      "colors": ["#0A2540", "#1E88E5", "#FFFFFF"]
    }
  ],

  "text_elements": [
    {
      "text": "AI SUMMIT 2026",
      "bbox": [150, 120, 850, 260],
      "style": "Large bold white sans-serif title"
    },
    {
      "text": "Future of Artificial Intelligence",
      "bbox": [180, 280, 820, 350],
      "style": "Medium white subtitle"
    },
    {
      "text": "Taipei International Conference Center",
      "bbox": [180, 1050, 820, 1120],
      "style": "Small white footer text"
    }
  ]
}

Bounding Box 控制

可直接指定位置。

{
  "text_elements":[
    {
      "text":"SALE 50%",
      "bbox":[100,100,500,300]
    }
  ]
}

座標範圍:

0 ~ 1000

原點:

左上角

這是目前 FLUX 與 Stable Diffusion 所不具備的能力。


色彩盤控制

品牌設計超級好用。

{
  "color_palette":[
    "#FF6600",
    "#FFFFFF",
    "#000000"
  ]
}

官方支援:

  • 最多16色
  • 單元素最多5色

與 FLUX 比較

FLUX 強項

  • 寫實攝影
  • 光影細節
  • 人像品質

Ideogram 4 強項

  • Logo
  • 海報
  • Banner
  • 電商素材
  • 排版設計
  • 中文文字生成

若你是:

  • 電商設計師
  • 行銷公司
  • 品牌設計
  • 廣告公司

Ideogram 4 很可能比 FLUX 更適合。


結論

Ideogram 4 不只是另一個 AI 繪圖模型。

它最大的創新在於:

把 Prompt 從自然語言升級為結構化設計規格。

透過:

  • Qwen3-VL
  • Diffusion Transformer
  • JSON Prompt
  • Bounding Box
  • Color Palette

使用者終於可以像操作 Figma 一樣控制 AI 生成內容。

對於需要:

  • 海報設計
  • 品牌素材
  • Banner 製作
  • AI Agent 自動產圖

的開發者來說,Ideogram 4 是目前最值得研究與部署的開源模型之一。

Ideogram 4.0 技術解析:9.3B 參數 DiT 架構、結構化 JSON 提示詞與 2K 原生輸出,Diffusion Transformer 革命登場

Ideogram 4.0 技術解析:9.3B 參數 DiT 架構、結構化 JSON 提示詞與 2K 原生輸出,Diffusion Transformer 革命登場

AI 圖像生成正式進入「設計級控制」時代

近兩年 AI 繪圖領域競爭激烈,從 Midjourney、Stable Diffusion、FLUX,到 Google Imagen,各家模型都在追求更好的畫質與更精準的提示詞理解能力。

真正困擾設計師與企業用戶的問題其實不是畫質,而是以下的問題:

  • 文字總是生成錯誤
  • 排版無法控制
  • Logo 與標題位置不準確
  • 無法符合品牌色彩規範
  • 每次生成結果都像在「抽卡」

2026 年 6 月,Ideogram 正式推出最新開源模型:

Ideogram 4.0

這不僅是 Ideogram 首次公開權重(Open Weight)模型,更被許多開發者視為目前最接近商業設計工作流程的 AI 圖像生成系統。


什麼是 Ideogram 4.0?

Ideogram 4.0 是一款從零開始訓練的 AI 圖像生成模型,採用最新的:

Diffusion Transformer(DiT)架構

與傳統 Stable Diffusion 不同,Ideogram 4.0 使用:

  • 34 層 Transformer
  • 93 億參數(9.3B)
  • 單流(Single Stream)設計
  • 文字 Token 與影像 Token 共用同一套注意力機制

官方稱其為:

Single-Stream Diffusion Transformer(DiT)

這種架構讓模型能更深入理解文字與影像之間的關聯,提高提示詞遵循能力(Prompt Adherence)與版面控制能力。


核心架構解析

1. 文字編碼器(Text Encoder)

Ideogram 4.0 並未使用傳統的 CLIP 或 T5 「文字編碼器(Text Encoder)」。

而是採用了:

Qwen3-VL-8B-Instruct

作為文字理解引擎。

其特色包括:

  • 視覺語言模型(Vision Language Model)
  • 僅使用文字模式
  • 提取 13 個中間層隱藏狀態
  • 將多層特徵串接後輸入 DiT

這種設計能同時保留:

  • Token 級語意
  • 物件關係
  • 空間推理
  • 構圖理解

讓模型對複雜提示詞有更深層的理解能力。


2. DiT 主幹網路

Ideogram 4.0 採用:

  • 34 Layers
  • Embedding Dimension:4608
  • 18 Attention Heads
  • SwiGLU Feed Forward

總參數量達:

9.3 Billion Parameters

目前已是開源 AI 繪圖模型中最頂尖的規模之一。


3. VAE 解碼器

使用凍結(Frozen)的:

KL VAE

特性:

  • 8× 空間壓縮
  • 128 Latent Channels

負責將潛在空間(Latent Space)轉換為最終圖像。


4. Flow Matching 取樣器

不同於傳統 DDPM。

Ideogram 4.0 採用:

Euler Flow Matching

搭配:

Asymmetric CFG

特色:

  • 提升生成效率
  • 改善細節品質
  • 更穩定的提示詞遵循能力

官方提供三種推理模式:

模式Steps
V4_TURBO12
V4_DEFAULT20
V4_QUALITY48

品質模式會在最後階段降低引導強度,進一步提升真實感。


最大突破:JSON 結構化提示詞

這是 Ideogram 4.0 最具革命性的地方。

過去 AI 繪圖都依賴自然語言:

A beautiful girl standing beside a lake...

Ideogram 4.0 則改為:

{  "background": "...",  "objects": [...],  "texts": [...],  "style": {...}}

模型訓練時完全使用 JSON 描述,因此天生理解結構化資訊。


Bounding Box 精準版面控制

支援 Bounding Box:

{  "bbox": [100,100,400,400]}

採用:

  • 0~1000 正規化座標
  • 左上角為原點

可直接指定:

  • Logo 位置
  • 標題位置
  • 商品位置
  • 人物位置

這是過去 Midjourney、Stable Diffusion 很難做到的功能。


色彩盤控制(Color Palette)

可直接指定品牌色:

{  "colour_palette": [    "#FF6600",    "#FFFFFF",    "#000000"  ]}

限制:

  • 每張圖最多 16 色
  • 每個元素最多 5 色

非常適合:

  • 品牌設計
  • 電商素材
  • 廣告 Banner
  • 包裝設計

多語言文字生成能力大幅提升

Ideogram 一直以來最強的能力就是:

Text Rendering

也就是圖片內文字生成。

例如:

  • 海報
  • Logo
  • 廣告標語
  • 包裝文字
  • 社群貼文

以往 AI 經常出現亂碼。

但 Ideogram 4.0 已能大幅提升:

  • 中文
  • 英文
  • 日文
  • 韓文

等多語系文字品質。


原生支援 2K 輸出

解析度支援:

  • 最小:256 × 256
  • 最大:2048 × 2048

且:

  • 必須為 16 的倍數
  • 最長比例可達 6:1

例如:

  • YouTube Banner
  • 網站橫幅
  • 電商主圖
  • 手機桌布

皆可直接生成。


設計工作流功能全面升級

除了模型本身之外,Ideogram 平台也同步推出多項設計工具:

Prompt Edit

直接修改既有圖片中的特定區域。

Magic Fill

局部重繪。

Remix

基於現有圖片重新生成。

Extend / Reframe

擴展畫布與調整比例。

Upscale

提高解析度。

Transparent Background

直接輸出透明背景 PNG。

MCP 整合

可接入 AI Agent 工作流程。

Editable Text Layers

未來將支援真正可編輯的文字圖層功能。


Ideogram 4.0 與 Google Imagen 誰更強?

若比較:

  • Google Imagen
  • FLUX
  • Stable Diffusion
  • Ideogram 4.0

目前 Ideogram 最大優勢在於:

✅ 文字生成能力

✅ 排版控制能力

✅ JSON 結構化設計流程

✅ 開源權重

✅ 可自行部署

而 Google Imagen 仍在:

  • 寫實度
  • 影像理解
  • Google 生態整合

方面維持優勢。

若是企業設計工作流,Ideogram 4.0 已經是極具競爭力的選擇。


官方資源

官方網站

Ideogram 官方網站

模型介紹

Ideogram 4.0 Model Page

技術部落格

Ideogram 4.0 Technical Details

API 文件

Ideogram Developer API

GitHub

Ideogram 4 GitHub Repository

Hugging Face

Ideogram 4 Hugging Face Collection


Ideogram 4.0 不只是另一個 AI 繪圖模型。

它最大的突破在於:

把 AI 繪圖從「描述圖片」提升到「設計圖片」。

透過:

  • Diffusion Transformer(DiT)
  • Qwen3-VL 編碼器
  • JSON Prompt
  • Bounding Box 控制
  • 色彩盤控制
  • 可編輯文字圖層

Ideogram 4.0 正逐步接近 Photoshop、Illustrator 與 Figma 所代表的專業設計工作流程。

對於品牌設計、電商素材、廣告製作與 AI Agent 自動化內容生成來說,Ideogram 4.0 很可能會成為 2026 年最值得關注的開源 AI 圖像生成模型之一

比肩 FLUX!Ideogram 讓 AI 圖片生成更寫實、更個性化

比肩 FLUX!Ideogram 讓 AI 圖片生成更寫實、更個性化

在數位創作領域,最近正在火 FLUX 1,但 AI 生成圖片新創不斷推成出新,而 Ideogram 則是近期受到矚目的服務之一。這項服務讓使用者可以通過簡單的文字輸入來生成高質量的圖片,並且在效果和功能上都有其獨特的優勢。

Ideogram 的五大特色

  1. 優秀的效果媲美 FLUX Ideogram 的圖片生成效果可說與 FLUX.1 不相上下,能夠呈現高水準的圖像品質和細膩的細節,無論是自然場景還是具象物件,細節的處理都相當到位。
  2. 每日免費點數讓創作無限 Ideogram 每日提供使用者免費點數,大約可以生成五組圖片,這讓初次嘗試的使用者可以免費體驗其服務,且不必擔心每次生成都需要付費。這樣的彈性也吸引了許多創作者持續回訪。
  3. 比 FLUX 更寫實的圖片品質 與目前其他 AI 圖像生成服務(如 FLUX)相比,Ideogram 能夠生成更加寫實的圖片。這點對於需要精緻細節的設計師或品牌來說尤其重要,能夠符合更多商業與創作需求。
  4. 精準的文字輸出能力 一大特色是 Ideogram 能夠正確地在圖片中嵌入文字。這對於需要文字設計或標語的創作尤其實用。過往許多 AI 圖像生成工具常常會錯誤呈現文字,但 Ideogram 則解決了這個困擾,讓使用者能更精確地輸出文字圖像。
  5. 自訂色調控制 Ideogram 提供色盤工具,允許使用者控制生成圖片的色調,使整體風格更具一致性。無論是偏愛溫暖、冷色或復古的色彩效果,都能輕鬆調整,這在多數 AI 圖像生成平台中是少見的功能,尤其適合想要精確調色的設計需求。

極真實的圖片生成

可以看到下圖,現在生成的人物,可以說是完全無法辨識是否為真人還是AI,這邊的模型也沒限制你明星是不能當作提示詞,所以你可以盡情想像和發揮,但有肖像權的問題時還是不建議商用

價目表

這個費用比起主流的服務也相對的有誠意,如果用起來滿意,是真的可以考慮買一下的

咒語示範

A photo of a 20-year-old Chinese model with brown hair. She is smiling and wearing a navy blue fitted t-shirt. She is standing at a convention center, surrounded by a crowd of people. The background contains a large stage with a banner that reads “Welcome to the International Fashion Convention”.

A smiling 20-year old China model with brown hair

如有興趣,可直接訪問他們的官方網站了解更多:Ideogram 官方網站

參考資料

Flux API – black-forest-labs(黑森林實驗室中的最強文生圖)

Flux API – black-forest-labs(黑森林實驗室中的最強文生圖)

這是由黑森林實驗室所提供的 Flux API,, 原生有提供 Python, Node.js, Http 的範例,價格也很彈性,產圖的效果很好,可以不用自己組建自己的主機,就可以享有 FLUX 的繪圖能力,可以快速且容易的整合進 Dify 工作流程中

參考資料

https://replicate.com/black-forest-labs

GitHUB

定價策略