ComfyUI Inpainting：完整指南

ComfyUI 提供複雜的影像編輯工具。本指南可協助您掌握內繪技術，這是一種強大的技術，可無縫編輯和取代影像元素。了解如何配置工作流程、應用先進的遮罩策略、修正錯誤，以及利用差動擴散來達到出色的效果。

重點

設定 ComfyUI 以進行內繪作業。

使用基本節點和影響包。

實施優異的微分擴散內繪方法。

瞭解平滑轉換的高斯模糊遮罩功能。

使用 SAM 檢測器和 Mask Editor 進行精確遮罩。

校準信心等級，以便在遮罩期間精確選擇物件。

有效修改提示以改變影像中的物件顏色。

找出並解決內繪圖工作流程中的問題。

優化內繪參數，以達到高品質的影像編輯。

在 ComfyUI 中開始內繪

設定您的 ComfyUI 環境

在探索進階內繪技術之前，請確保您的 ComfyUI 環境已正確設定。這包括安裝所需的自訂節點和瞭解基本的工作流程結構。內繪可讓您以新內容取代特定區域，順暢地修改影像，使其成為不可或缺的創意編輯工具。

您需要 Essentials 和 Impact Pack 節點。這些自訂元件可在 ComfyUI 中提供關鍵功能並簡化內繪流程。

這些元件可從各自的 GitHub 套件庫中下載。為了加速安裝，強烈建議使用 ComfyUI Manager。此管理工具可簡化安裝與更新自訂節點的程序，確保您受惠於最新的功能與修正。

• ComfyUI Manager：重要的 ComfyUI 擴充套件，可最佳化自訂節點管理。它可以直接在介面中安裝、移除、停用和更新節點，提升工作流程的生產力。

Patreon 支持者可以存取預先建立的工作流程，直接載入 ComfyUI。利用「遺失備註」功能自動安裝任何所需的元件。

安裝完成後，您就可以建立內繪工作流程。

瞭解內繪工作流程

ComfyUI 內繪工作流程包含幾個關鍵階段：載入檢查點模型、編碼文字提示、載入源影像、建立遮罩、套用差動擴散，以及解碼潛在影像。每個步驟都是達成專業內繪結果的關鍵。

1. 載入檢查點：載入您偏好的 Stable Diffusion 檢查點模型，形成影像產生程序的基礎。
2. 編碼文字提示：利用 CLIP 文字編碼來定義正面和負面提示，在遮罩區域內引導內容產生。
3. 載入影像：匯入您打算編輯的影像，作為內繪程序的基礎。
4. 建立遮罩：產生遮罩以指定需要內繪的區域，指示 ComfyUI 在何處執行修改。
5. 差異擴散：此重要階段可讓新內容與現有影像無縫整合。
6. 解碼潛像：解碼潛在圖像，以產生最終的渲染影像。

如圖所示，透過建立基本節點和建立連線，開始設定內繪工作流程。從 Load Checkpoint 節點開始，初始化影像產生的 Stable Diffusion 模型。

接下來，建立兩個 CLIP 文字編碼 (Prompt) 節點-一個用於正面指示 (描述所需的內繪內容)，另一個用於負面指引 (指定要避免的元素)。現在繼續上傳您的影像。

精確內繪的進階遮罩技術

無縫轉換的高斯模糊遮罩

在原始圖像和內繪部分之間實現平滑過渡對於逼真的效果至關重要。高斯模糊遮罩節點能柔化遮罩邊緣，創造漸進的過渡效果，並減少粗糙的邊界。

差異擴散噴繪方法大大優於傳統技術，對這些轉換貢獻良多。

高斯模糊遮罩節點對於內繪圖應用是不可或缺的。它可以模糊遮罩周邊，並有助於改善原始圖像區域與修改後圖像區域之間的融合。

實作過程包括

1. 產生高斯模糊遮罩。
2. 建立遮罩預覽，以視覺化模糊遮罩的效果。
3. 建立與 K Sampler 連結的 Inpaint Model Conditioning 節點。
4. 將所有元件連接成一個統一的網路。

建立節點網路後，我們就可以檢視 SAM 功能。

使用 SAM 檢測器進行目標遮罩

SAM (Segment Anything Model) 檢測器提供精密的遮罩建立功能。它可以精確地選擇特定的影像區域，使其成為目標性遮罩作業的完美選擇。

讓我們從 SAM 檢測器開始。此工具可讓您方便地遮罩特定區域，省去使用遮罩編輯器進行大量手動編輯的麻煩。

操作 SAM 檢測器：

1. 左擊您想要遮罩的圖像部分。SAM 會自動偵測這些區域，並產生相應的遮罩。
2. 使用提供的滑桿調整置信度。置信度值越高，識別精確度越高，而置信度值越低，可能會選取較寬廣的區域，例如整個圖形。
3. 按一下「儲存至節點」儲存遮罩。遮罩編輯器仍可用於後續調整。

使用遮罩編輯器修正遮罩錯誤

儘管有 SAM 檢測器等先進工具，仍可能發生遮罩不準確的情況。遮罩編輯器允許手動修正這些問題，保證遮罩與預期的內繪區域完全對齊。另一個遮罩製作選項是遮罩編輯器，我通常使用它來修正 SAM 產生的遮罩中的瑕疵。

1. 執行遮罩後，檢視是否有不準確的地方，然後啟動遮罩編輯器。
2. 使用厚度參數修改選擇半徑。
3. 必要時新增或移除遮罩區域。
4. 選擇「儲存節點」以保留修改。

逐步繪製指南

變更物件顏色

遮罩完成後，您可以進一步修改指定區域內的物件顏色。這需要更新文字提示以反映目標顏色，以及微調內繪設定以確保自然的顏色整合。

首先，將兩個高斯模糊值設定為 50。接下來，複製原始的影像建立提示，並調整為衣服或其他物件指定新顏色。現在利用 KSampler 來預覽您的修改。

定價

ComfyUI 是免費的開放原始碼軟體！

ComfyUI 是免費的開放原始碼軟體，無需支付個人或商業使用的授權費用。然而，有效率的運作通常需要投資硬體資源，例如有能力的 GPU。

此外，透過 Patreon 等平台的開發人員支援，可以存取獨家內容，包括預先設定的工作流程和教學材料。

差動擴散繪圖的優缺點

優點

增強繪圖品質：相較於傳統的噴畫方式，差動擴散提供了更優異的整合性和更真實的結果。

精確的遮罩：SAM 檢測器與 Mask Editor 可精確控制遮罩區域，進行精確的編輯。

自然轉換：高斯模糊遮罩可在原始影像與內繪部分之間產生更平滑的混合效果。

簡化工作流程：ComfyUI Manager 簡化自訂節點的安裝與管理，提高操作效率。

缺點

技術複雜：建立並掌握 ComfyUI 的內繪工作流程是一項挑戰，尤其是對新手而言。

資源需求：內繪作業可能是密集的運算，需要強大的顯示卡處理器和充足的記憶體。

時間投資：微調繪圖參數和修正瑕疵可能需要相當多的時間。

依賴自訂節點：工作流程依賴於可能需要持續更新與維護的自訂節點。

ComfyUI 適用於影像噴繪的主要功能

主要功能

ComfyUI 提供多項關鍵功能，可提升影像噴繪體驗：

• 基於節點的工作流程：為內繪任務提供適應性和可自訂的操作。
• 自訂節點支援：可整合特殊節點以擴充功能。
• SAM 檢測器：有助於精確遮罩特定影像區域。
• 遮罩編輯器：支援手動修正遮罩錯誤。
• 高斯模糊遮罩：在原始區域與修改區域之間產生無縫轉換。
• 差異擴散：確保優異的內繪品質與整合性。

ComfyUI 圖像內繪的熱門使用案例

您可以使用 Inpainting 做什麼

ComfyUI 的圖像內繪功能證實對以下用途非常有價值：

• 物件移除：消除照片中不想要的元素。
• 影像修復：修復受損或變質的影像部分。
• 創意編輯：引入新元件或改變現有元件。
• 背景替換：無縫取代影像背景。
• 紋理編輯：修改影像中物件的表面紋理。

關於 ComfyUI Inpainting 的常見問題

什麼是 Inpainting？

Inpainting 代表一種無縫編輯和替換影像區段的技術。它有助於移除不想要的物件、修復受損區域或新增影像元素。ComfyUI 為內繪創造了一個多功能且強大的環境，讓您能夠達到優異的效果。

ComfyUI 中內繪的重要節點有哪些？

ComfyUI 內繪的關鍵節點包括載入檢查點 (Load Checkpoint)、CLIP 文字編碼 (提示)、載入影像、高斯模糊遮罩 (Gaussian Blur Mask)、內繪模型調整 (Inpaint Model Conditioning)、差異擴散 (Differential Diffusion)、K 取樣器 (K Sampler) 和 VAE 解碼 (VAE Decode)。這些元件協同形成完整的內繪圖工作流程。

SAM 檢測器如何改善遮罩流程？

SAM 檢測器可精確選擇特定影像區域，從而增強遮罩作業。這可減少手動編輯的需求，並確保遮罩與目標區域完全對齊。

高斯模糊遮罩的目的是什麼？

高斯模糊遮罩可在原始影像與噴繪區域之間建立漸層過渡。它可將明顯的邊緣減至最少，並確保新內容的無縫整合。

關於 ComfyUI Inpainting 的相關問題

如何排除 ComfyUI 中常見的內繪錯誤？

解決 ComfyUI 中典型的內繪錯誤涉及多種方法：驗證遮罩：確認遮罩準確覆蓋預期的內繪區域。使用遮罩編輯器修正任何差異：測試不同的提示變化，以引導影像產生程序。優化參數：調整去噪強度和 CFG 比例等內繪圖設定，以提升結果：重新啟動 ComfyUI：偶爾重新啟動應用程式可解決意外錯誤或效能問題。