ComfyUI
從空白畫布到 Flux 局部重繪的 8 頁重點
Load Checkpoint→CLIP Text Encode→KSampler→VAE Decode→Preview Image
Checkpoint → KSampler
第 2–4 頁:基礎觀念、工作流與核心參數
LoRA · Upscale · ControlNet
第 5–6 頁:風格、放大與構圖控制
Flux Fill
第 7–8 頁:局部重繪、擴圖與維運
Model
Checkpoint 三支柱
Model
畫家
擴散模型,負責造型、結構與主要藝術風格。
CLIP
翻譯
把文字 Prompt 編碼成 AI 能理解的概念向量。
VAE
後製
將壓縮的 Latent Space 解碼成可顯示的 Pixel 影像。
Getting started
- 完全在本機執行:資料私密,無訂閱費用、無次數限制。
- Desktop 版自動打包 Python 環境;首次會建議下載 SD 1.5,按 Queue 即可跑預設流程。
- 建議把介面切成英文,才能對上 Civitai、Hugging Face 的專業術語。
Flow
Text-to-Image 工作流與畫布操作
Load Checkpoint→Positive+Negative+Empty Latent→KSampler→VAE Decode→Preview / Save
Nodes
建立與複製節點
- 右鍵空白處選單,或雙擊空白處搜尋節點名稱後按 Enter。
- Negative 節點:Ctrl+C/V,或按住 Alt 拖曳複製。
- Ctrl+Shift+V:貼上並保留原有連線。
- Empty Latent:XL 模型用 1024×1024,Batch Size 1。
Save
存檔與還原
- Workflow → Save 匯出 .json,拖回畫布即可還原。
- Save Image 預設把流程嵌入 PNG Metadata,把圖拖進畫布就能 100% 重現節點與參數。
- 新增模型檔後按 R 重新整理,不用重開軟體。
Sampler
KSampler:六大核心參數
| 參數 | 作用與建議 |
|---|---|
| Seed | 雜訊起點,不同值產生不同構圖。模式:Randomize、Fixed、Increment、Decrement。 |
| Steps | 去噪步數。低於 15 會糊,高於 50 只增加時間;建議 20–30。 |
| CFG | 遵循 Prompt 的強度。高於 10 色彩過曝、筆觸僵硬;低於 3 易偏題;新手用 7.0。 |
| Sampler | 去噪的數學方法,例如 Euler、DPM++ 2M。 |
| Scheduler | 各階段的降噪節奏,例如 Normal、Karras。推薦 Euler + Normal(快而穩)或 DPM++ 2M + Karras(細節與色彩佳)。 |
| Denoise | 1.0 = 全新生成;小於 1.0 保留原圖結構,是 Img2Img、Upscale、Inpaint 的基礎。 |
LoRA
LoRA 風格微調與 Upscale 放大
Load Checkpoint→ MODEL + CLIP →LoRA Loader→Prompts&KSampler
LoRA
LoRA 重點
- Checkpoint 為 2–7GB 的底模;LoRA 僅 10–200MB,專攻角色、服裝或風格。
- 檔案放 models/loras/,Prompt 要加入觸發詞(如 Sticker)。
- LoRA 與 Checkpoint 架構必須相符:SDXL 的 LoRA 不能接 SD 1.5。
Upscale
兩種放大做法
- Upscale Image by:像素內插,會糊、有塊狀感,適合快速預覽。
- Upscale Image (Using Model) + Upscale Model Loader(RealESRGAN):AI 重建細節,適合商業級輸出。
Seed lock
放大前先鎖定構圖
把 control_after_generate 由 After 改成 Before,再把 Seed 設為 Fixed,目前的 Seed 才會立即套用到下一次執行。
Control
ControlNet:鎖定姿勢與空間結構
Load Image→Openpose / Depth Map Aux→Apply ControlNet→KSampler
Setup
準備環境
- Manager → Model Manager 搜尋 Controlnet++,下載 ProMax 多功能模型。
- Manager → Install Custom Nodes 安裝 ComfyUI ControlNet Aux,然後重啟。
- Apply ControlNet 接入 ControlNet Loader、預處理圖與 VAE,輸出 CONDITIONING 到 KSampler 的 positive。
Parameters
三個參數
- Strength:1.0 完全遵循;低於 0.6 讓 AI 自由發揮。
- Start Percent:開始介入的時機,預設 0.0。
- Stop Percent:停止介入的時機;設 0.5 即前半段鎖骨架,後半段自由完成質感與光線。
Example · Spring to winter
春景圖 → Depth Map Aux 取得深度圖 → 冬季 Prompt(heavy snow covering mountains…)→ 保留地形與視角,只換成雪景。
Flux
Flux:快速生成、Inpaint 與 Outpaint
Flux Schnell
- Steps 4、CFG 1.0,不需 Negative Prompt;Sampler euler、Scheduler simple。
- 檔案約 17.2GB,建議 12GB 以上 VRAM,或用 FP8 / GGUF 量化版。
Flux Fill · Inpaint
- Load Diffusion Model 載入 flux1-fill;Dual CLIP Loader(clip_l + T5);Load VAE 用 ae.sft。
- Open in MaskEditor 塗遮罩,筆刷硬度調到最低,避免接縫。
- Inpaint Model Conditioning 合併 image、mask、vae、positive。
- Differential Diffusion 讓邊緣融合;Flux Guidance 設 30–50;Steps 20–30。
Outpaint
- 在 Inpaint Model Conditioning 之前加 Pad Image for Outpainting。
- 例如 left = 400、right = 400 像素,空白區自動成為遮罩。
- 更新 Prompt 描述擴展的場景後按 Queue。
Finish
畫布管理、疑難排解與三大建議
Troubleshooting
缺少節點或模型
- 紅色節點錯誤:Manager → Install Missing Custom Nodes → Select All → Install → 重啟。
- 缺模型:點提示視窗內的 Direct Download Link,自動下載到正確資料夾。
- 社群流程可從 Civitai、OpenArt 或 Browse Templates 取得。
Canvas
畫布管理
- Ctrl+G 群組並命名上色;Reroute 整理走線;連線改成 Straight。
- Ctrl+M Bypass 單一節點;Set Group Nodes to Never 暫停整組運算。
Tip 1
系統化規劃
群組、命名、Reroute、上色,能大幅縮短除錯時間。
Tip 2
掌握 Seed 與 Denoise
先切 Before 再 Fixed;Denoise 1.0 為全新圖,低於 0.6 為保留結構。
Tip 3
聰明用硬體
測試 Prompt 時暫停 Upscale、ControlNet 群組,加快速度並節省 VRAM。