【ComfyUI進階】💡IC-Light光線插件基礎運用全面講解,不止打光那麼簡單,如何做到一魚多吃!👀 #aigc #flux #comfyui #iclight

Hello 大家好
歡迎再次來到歐陽的視頻頻道
這一期的ConfigURI系列教學
我將會根據羣裏的朋友們的反饋
有些朋友一直在說IC-Lite
一個打光的插件
在ConfigURI中到底怎麼使用
大家自從插件出了以後
就一直在吹捧它
之前歐陽一直沒有分享的
主要原因是因爲打光的手段
和這個方法原先太多太多了
傳統的方法比如說用卡存net
比如說直接給latent
爲什麼要用IC-Lite
其實在歐陽瞭解以後
它是有一些不一樣的地方
有一些獨到的地方
哪些方面
我們這一期就來展開來講一講
好的 回來以後
本期我們還是以端腦營的平臺爲例
來在雲端打開我們的一個鏡像
大家也可以隨意的在這裏挑選任何
別的博主準備的鏡像
又或者是官方推薦的鏡像
都是比較全面的
來到我的應用
這裏我選擇我的鏡像
我們直接進入ConfigURI
開始今天的內容
那麼來到ConfigURI以後
我這裏準備了一個簡潔的
還是我們之前InPack裏的工作流
這邊是一個MegPipe
然後這邊就是一個Pipe的
K-Simpler採樣器
當然中間我添加了一個EditPipe
來編輯我們中間的一個節點數
因爲我們要用到IC-Lite這一期
首先插件的安裝也不需要多說了
在這個插件管理器裏面
我們安裝節點
直接來搜索IC-Lite
就可以看到第一個IC-Lite的插件
如果沒有的話
可以Install直接點擊安裝
如果安裝了以後
我們可能還需要安裝兩個模型
這時候我們點擊一下插件名稱
來到它的Hacking Face
我們來看一下
它的大體功能
其實就如我們之前所瞭解到的
利用三個通道
沒錯
其實還是傳統的通道
進行顏色和光感上的變化
說白了就是明暗場和色相的問題
更改一些顏色
它就改變了色相了
更改一些亮度
它就改變了明暗場了
對吧
黑白對比也就出來了
所以說大家可能會覺得它很驚豔
但是這其實就是我們傳統
之前傳統流程可以做到的
它的流程
其實是一個非標準的圖生圖的流程
是需要我們有一個參考圖的
那麼除了基本的圖生圖
靜態圖像以外
我們還可以接入
額外的是AnimateDiff的插件
做這樣一個動態視頻幀的動態畫面
當然了
這個動態畫面沒有什麼意義
它只是簡單的運動了一下
光源的方向而已
OK瞭解了基本這些以後
我們回到我們的咖啡UI
來講一下
IC-Lite的基本使用方式
在我們安裝了插件以後
其實我們還需要額外的安裝一些模型
在Manager面板
我們可以點擊模型管理
搜索來一樣
我們搜索IC-Lite
同樣可以看到屬於IC-Lite的三個模型
在這裏我們常用的其實就兩個
我們可以看到結尾有個FC和FBC
這兩個一個是運算單一前景的
一個是運算前後景合成的兩個模型
另外一個FCON
這其實是一個噪聲偏移的另外一個版本
我們通常是不常用的
所以我們基本上只需要安裝這兩個模型就可以
如果我們要單獨下載的話
其實也是放到ConfigureModels下面的Unit
好的
瞭解了這些以後
我們就可以來正式的瞭解一下它的組件
這個地方我們直接右鍵
新建節點
在IC-Lite的選單裏面
我們可以看到很簡潔
就是這麼幾個組件
但其實我們用的並不多
第一個是IC-Lite的應用apply
第二個是loader
一個加載模型的
主要就這兩個
之後其實就是一些輔助的方式了
比如說加載圖像的
計算法線貼圖的
以及簡易光源也是給我們提供遮罩生成的
其實之後細節處理還會用到一個細節遷移
我們之後再說
所以說我們只需要把這兩個加載出來就可以
一個是模型加載一個loader
還有一個我們直接搜索IC-Lite
一個條件應用叫apply
怎麼接入其實很簡單
模型加載我們可以看到
它只走模型管道
所以我們把模型串過來就可以
接下來應用IC-Lite的conditioning的一個條件
我們仔細來觀察一下
它的輸入接口其實很像我們另一個組件
對不對
就是我們的country-lite
因爲它也是走條件的
走條件就意味着它其實是控制clip
所以上面這一塊我們可以把它想做是
我們之前的ip-adapter
也是改變模型的一個權重內容的
下面這個我們可以把它比喻成country-lite
然後這樣的話它是一個結合的方式
把整個的生成環節全部整合在一起的
因爲要編入圖像對吧
我們country-lite也要編入一個預處理的圖像
所以說我們還要給個AVE
之後我們要給一個圖像的latent或者是兩個
如果我們要做前後景合成的話
我們可以給兩張
目前我們可以先簡單的給一張
當然這個latent我們可以先load一個image對吧
要在一個圖像
圖像我們直接把它進行一個latent的編碼
之後我們再傳給我們的前景latent
這樣就形成了一個類似於country-lite的控制方式
接下來我們就可以直接生成了
但是還有一點要注意的是
因爲這個IC-lite它用的是所有的通道
unite通道clip通道以及latent通道全部調用上了
它是一個整合型的
所以說latent我們是不可以給一個空的latent
其實在官方提供的勢力工作流裏
它是用了一個KJ節點的創建遮罩這麼一個節點
創建了一個遮罩
這裏它設置了一下遮罩的強度範圍
以及邊緣的語化模糊
最後又將遮罩轉換成爲了一張圖像
傳給到latent裏面去的
所以這種方式我覺得就是比較不直觀
而且你繪製這個東西是需要調很多參數的
比如說我們要換一個形狀
然後換完形狀以後
我們又覺得位置不對
要在這裏調半天參數
我覺得這個東西是挺反人性的
它是編程的方式來做豎直的
但是我是不太喜歡這樣的方式
所以我們這邊我簡潔處理一下
直接把這個圖像拖出來
我們在這個圖像的遮罩編輯器上
我們直接來編輯也是可以的
比如說它的面部這個地方畫一個遮罩
之後我們再新建一個遮罩模糊對吧
這裏也是可以說到KJ節點的模糊生長
又或者是impact的高次模糊
再或者是essentials的
這些我們之前都接觸過
我隨便選一個essentials
然後我們直接這邊來預覽一下遮罩的形態
可以看到我們這邊的模糊數量太少了
我們給的大一點給到100
這樣它的模糊範圍就更大一些
當有了這個遮罩以後
我們之後把這個遮罩轉換爲一個圖形
mask2
默認就是第一個遮罩到圖像
這樣它就變成了一張什麼黑白圖
並不是遮罩是作用區域和非作用區域了
這樣的話我們直接把圖像進行一個latent編碼
然後再把編碼的latent輸入給我們到KSimpler
這裏的VAE我們也傳過來
這樣的話才形成了IC-Lite的整體的這麼一個結構
所以我們可以看到它的控制是比較全面的
同時其實也比較讓我們調起來
其實有時候也比較複雜的
這個邏輯我們要捋清楚
之後我們來把這個模型選一下
這裏默認的是FBC
我們現在只給了前景
所以我們只給FC而不用FBC
對吧
這就是一個指示生成單張圖片的光源的
如果我們要給個背景的話
我們就需要把這個模型換成FBC
那麼現在我們用DreamShifter8這個模型來生成一下
這樣就會看到我們的一個默認的生成出來的這樣一個效果
這個IC-Lite的默認值它的效果不是很好
就是說它會有一些糊有一些模糊的感覺
但主要的一個優勢就是它能還原我們這張圖的一些細節
這是比較主要的一個地方
爲什麼會這樣呢
其實在我試驗了以後主要是因爲這兩個部分
它單獨加載了一個調校的模型和一個apply的部分
這個apply的部分它裏面肯定是運用了類似於
或者是ControlNet當中的一些邊線描繪等等的
來控制我們這個原圖的形象
我們的參考圖和它最終生成出來的形象偏差不是很大
那就是因爲這個apply這個地方
它內部其實是有一些ControlNet的一些模型的借鑑
當然它裏面套用的東西我們並不知道
但是它肯定是用了這個原理的
同時通過上面這個unite加載的模型進行引導
才能使得它最終生成出來
再疊加了Latent光效的這麼一張圖片
和我們這個圖片變化度不是很高
可以看到我現在默認給的是0.8的準繪
哪怕我們把這個準繪給到1
它的變化是不是也不是特別的大
所以說這個地方它是用了結合的方式
才控制住了我們給到它的參考圖
如果只是簡單的IP adapter和ControlNet相結合
是還原不到如此相似的地步的
這個地方我也測試過
當我們把這個模型的管道挪走
也就是不要這個模型管道
我們還是用我們原先的
DreamShifter的模型管道
來生成同樣的一個東西
但是我們Apply的地方還在
你會看到形象就已經偏了
已經不是我們這個參考圖的了
所以說這一步它的模型很主要
模型和這兩個結合纔會有這樣的一個效果
OK 明白它的原理以後
我們就來說它的一些參數
首先對於SLI的調節來說
降噪我們默認可以稍微給低一點
這樣的話它能體現出來一些光效
因爲我們降噪的部分
是輸入我們光影的部分
只有有了降噪
我們的光影纔可以注入到圖像當中
如果沒有的話是注入不進來的
對不對 這是第一點
那麼第二點當我們用了SLI以後
它的CFG的體現方式也有些不同
我們可以看到現在是7.5
按理說加入了這個模型以後
可能會有些過擬和會過重
但其實接入了以後也不完全是這樣的
比如說現在我們給到3
你會看到它對於光線的處理
以及原始圖像的還原它會柔和一些
其實就是和我們提示詞有一些偏差
但是有一點不太相同的就是
它對於色彩上的對比度
和飽和度上的干擾和擾亂要少了一些
爲什麼要少一些
其實這和我們iSelect另外一個參數有關
也就是我們這邊應用apply的一個乘數
那麼這個乘數的大體概念
其實我感覺和這個模型
又或者它內部對於圖像的干擾有關
這個乘數反而能更大的代表
CFG所出的效果
也就是乘數越大
圖像的銳度和對比度和飽和度越高
現在我們可以看到我使用了1的CFG
和使用了3的CFG
其實變化並不大
我們再來看一下3的CFG
它可能背景會有一些暗
但是整體我們這個顏色的飽和度
它沒有上來對吧
這就是因爲它更偏向我們提示詞
而稍微忽略了一點點
我們燈光後面暗部和亮部的感覺
如果我們想讓它飽和度銳利度
觀感更好一點
其實我們需要調這個
這個是決定了
ICLight一個圖像的強弱
比如說我們現在給到0.1
這樣的話你會看到它會很模糊
很糊對不對
爲什麼會模糊
其實對於ICLight來說
它處理前後景
如果我們接了背景以後
它處理背景
很多時候背景都是糊的
它就都是模糊的
就高斯模糊
我們可以看到這個圖它不是說糊
而是說一種高斯模糊的感覺
這個係數給的越低
我們這個圖像越感覺像是
靠向背景的處理方式
而給的越高它越像靠向前景
比如說我們給0.2
這樣的話就是比較高的一個值了
它默認是0.18
所以我們可以看到
它現在的銳度和表現度
就要比之前好很多
這就是這個值的強弱的關係
如果給到0.3它就會有些崩了
就我們曾經CFG的效果一樣
可以看到邊緣就有一些過銳了
過銳利了對不對
所以說這個地方
當我們接了ICLight以後
它更像是我們曾經CFG能夠達到的效果
這個時候我們就需要前後
來進行綜合的調整
比如說是這個地方我們給到0.3對吧
這個地方我們就可以給到1對不對
這兩個地方我們就可以配合的
綜合的去調整
這個3還是有點高0.25
而且我們可以感受到
採樣器這個CFG
它又決定了我們燈光體現的強弱
這邊越弱我們燈光體現的越強
因爲什麼
因爲我們的提示詞它就降弱了
可能就偏向我們Latent了
提高它提示詞的權重就起來了對吧
我們這個淺空間能作用的
這個作用就很小
可以看到背它就是有點深藍色
然後我們可以看到
這邊有沒有深藍色的一個詞語
可以看到這裏有一個藍色的領帶
所以很可能這個地方
它有一些提示詞污染
就污染到我們背景的部分
當然了對於ICLight來說
我們控制它的光線
可以通過兩種方式
第一個是通過提示詞
第二個其實可以
直接通過我們Latent來控制
首先說我們如果用提示詞的話
我們把一些東西刪掉
這個提示詞有點長
我們稍微先刪一些東西
然後我們在最後加一個黃色的光線
因爲我們想把光的顏色變一下
就改成這個Yellow Light
OK這樣就能直接反映出來
我們提示詞當中的一個光線的變化
如果我們想讓它再換一下
比如說換一個改成一個Blue
自然這就是藍光
所以說當我們把CFG調高了以後
我們可以只把Latent當做一個形狀
就是我們的光想是什麼樣的形狀
比如說我們不想要它是豎的
我們想要它是一個橫的
我們把這個上下兩邊的給它去掉
就是在這個眼睛部分畫一下
這樣的一道
那麼下面也有一道
重新儲存一下
然後我們再次來生成
那麼這樣的話
它就是另外的一種光照效果對吧
所以說我們CFG如果高了的話
就可以控制提示詞
同時來使用提示詞
來決定光照的效果
顏色以及質感
那麼第二種方式
就是使用Latent來直接上色
這裏我們先把提示詞給它去掉
直接使用一個畫板的工具
不知道大家還記不記得
我們之前講翻譯插件的時候
使用過一個畫板
A L E K P E T翻譯插件對吧
當時我們講過的
它是直接一個在線翻譯
接入接口來翻譯我們提示詞用的
在這個組件當中
我們有一個節點是繪畫
這樣一個畫板工具
然後我們直接選擇圖片上傳
還是上傳我們相同的圖片
這樣的話
我們就可以基由這個圖片
來進行一些圖形上的操作
現在我們就是完全像素操作
我們可以先在這裏
隨便繪製一個前景的顏色
比如說我們想要紅色
在這個地方我們給它一條紅色
然後我們再在下面給它一條綠色
在這個地方
我們再來畫一個綠的部分
這樣我們也是通過
Latent的編碼把它編進去
這個時候我們把背景圖去掉
我們可以把我們這個圖像去掉
只留這樣一個光線
或色彩的一個圖像
然後我們直接把圖像
同樣VAE編碼一下
這個時候我們再來生成一下
它沒有什麼影響
甚至影響不大
爲什麼
因爲我們這個地方的4FG
現在給的比較高
它現在還是遵循提示詞的
接下來我們就需要
把提示詞給它降低了
比如說我們降到1
降噪我們也可以稍微降低一點
降到8.5
這樣的話它會更遵循
我們給到的編碼的圖像
現在我們來重新生成一下
它多少就會根據
我們所給指定的顏色
來進行上色了
不管是背後還是什麼
當然畫板可能並不準確
我們可以預覽一下它的圖像
有的時候畫板出這個顏色
它可能並不是特別準確
你會看到
我已經把背景圖刪掉了
但是它還會有背景圖
所以說背景這個地方還是紅色
我們給到的東西
還是這樣一個東西
這是不對的
所以說這個畫板
它會有一些問題現在
但是可以確定的是
我們使用顏色圖
一樣會影響到
我們整張圖像的構圖
或者是整張圖像的一個效果
比如我們現在把這個地方
給它塗一下
塗成藍色
它肯定上面這個地方
會更偏向藍色一點點了
那麼這樣的話也可以看到
我們還是可以通過
Latent的顏色區域
來直接通過Pixel的信息注入
改變Light的範圍和方向
對吧
這就是關於Light光線當中的
兩種輸入方式
那麼當然在這個基礎之上
其實還有一些深入的問題
我們可以探討
就比如說它的優點
它的優點其實就是
對我們這個圖像
它本身還原度就是很高的
所以說我們是否可以通過
它還原的能力
給我們轉會一下
這樣的方式是不是就可行了
現在這一部分
我們給它刪除掉
我們給它清除一下遮罩
重會我們也不要給它
太多
因爲我們不想讓它
借鑑我們Latent裏面的
一個光亮程度
這樣的話就解決了
燈光的問題
就可以屏蔽掉燈光的問題
之後我們就可以說重會的事情
比如說我們想重會成動漫的
我們就可以換一個
動漫的模型
可以看到第一次效果有點平
不是特別的好
我們可以試着調整一下
採樣器以及CFG
如果參數我們調不到
最佳理想的狀態沒有關係
因爲可能我們寫實的照片
和我們動漫的風格
它確實相差有些大
它沒辦法還原的特別好
但也沒有關係
這個東西一步不成
我們可以來兩步
就是說任何東西
不是說一步就可以到位的
所以之後我們也可以進行
多次的二次渲染
我們Ctrl加C
然後Ctrl Shift加V
把這個關係帶出來
不用我們之前的BasePipe
我們可以直接使用
原始的BasePipe
給它重新的重會一下
然後我們這邊給一個Latent
就使用我們這邊的編碼的Latent
我們下來這邊來編一個碼
同時把我們編碼的Latent串進來
然後重會我們給低一點
對吧
給到0.6
之後上面我們來給一個
相同的一個解碼
這都是同樣的一個
複製粘貼的一個過程
不需要在意這個過程
我們迅速的把它搞定
之後我們再來生成一下
這樣我們就有了一個
相對貼近動漫風格的
轉會的一個風格了
對吧
這就是一個二次的一個腦補
算是二次用原始模型
再給它修正一下
就會更像這個風格
我們之前的可能不是特別像
或者是它的細節不是特別好
用之後的風格
我們再重新修一下
就會好一些了
所以說任何東西
它都不是一步完成的
我們不要想
怎麼能在一步當中給它做好
目前的情況來說
當我們接入的組件很多的時候
你是不可能調到最佳狀態
能調到最佳狀態
也是要花很多功夫的
有時候我們的衝突
我們的IPA衝突
ContraNet衝突
很多時候它都會和
Unite這個管道進行衝突的
都有可能的
要不是手崩
要不腳崩
要不眼睛歪什麼
歪也邪的
但是我們要的組件
或者形狀或大框架對了
之後我們再進行
二次的一個渲染
把這些東西就全修復了
主要是風格上面的
這麼一個方向
這是另外的一個小技巧
那麼這就是基礎的一個
它的構架和光線
最後我們再講一下
它的二次合成
我們再給它一個背景是個什麼樣
這裏我們重新傳兩個圖
這個功能也是它特有的一個功能
就是前後合成
但是前後合成它有它的問題
它有它的優勢
什麼優勢
就是它和整體的融合的效果會比較好
問題就是我們可能不常用
我們在這裏再傳一個Latent
來編一個碼
同時一樣把這個編碼
都給到背景的Latent
然後我們把它的模型
換成FBC的模型
之後我們來上傳兩張圖
這兩張圖像
是我之前生成的兩張圖像
一個美女的圖像
以及我們想要的一個背景圖像
我們把它兩個進行一個合成
默認我們就這麼使用
直接這麼使用
一個前景一個背景
都傳給這邊
然後這邊我們稍微改一下提示詞
也就是讓它重新給我們推一下
直接右鍵
我們簡單一點
還是W1.4反推提示詞
來直接複製一下這邊的提示詞
能精簡
我們就儘量精簡一下
不需要太多
那麼最後燈光我們同樣不要
我們不要燈光
還是給1的降噪
我們來生成一下
來看一下它的合成效果
OK可以看到它花了
這裏要注意的一點
我剛纔沒說
就是我們Latent的大小
一定要符合我們這邊
前後景所輸入的大小
我這裏沒有調
因爲這兩張圖像分辨率是一致的
所以說隨便任意
給到一個圖像的分辨率過來
它就能保持大小一致了
這個是要注意一點的
然後生成了以後
這個圖像就正常了
對吧
現在我們可以看到
這兩張圖形的合成
還是我覺得它的合成效果
比較柔和比較好
包括光線統一也比較好
這是它第二
應該是第三個特點
就是說它的前後景統一比較好
當然我覺得合成的它的功能
對於人像來說
我們並不常用
這個背景
我們也不會特別的在意
是什麼背景
只是大概齊
比較像一個街道
比較像一個室內
室外
大概齊這麼一個東西就行
主要還是人像
對吧
還是看人
並不是看背景
而且背景它出來也是虛化的
對於人像來說
我覺得作用並不大
之後我們可以再通過燈光
我們再給它一些
比如說我們複製一下這個圖像
然後粘貼到這邊來
同時我們把這個當成一個
蒙版編輯器
比如說我們想要這麼一個光線
這樣的話
當我們設計到的管道越多
它的綜合性最終合成的
這個東西就越不確定
我們可以看一下它現在的感覺
可以把CFG再降低一點
讓它的光感更明顯一點點
然後這邊我們提到0.2
它的對比度就更明顯
然後把降噪我們再往下降一降
這樣的話它的這個地方的光它會更亮
它整個打的會更亮
但是我們對比度就高了
這個地方再給的低一點
OK
這樣它就會形成一些
比較柔和的這種光感的效果了
那麼這就是對於這兩張圖的合成
但是反過來說
我覺得這兩張圖
剛纔一直說不適合人物
其實它挺適合一個道具
或者是我們商品圖
又或者是我們電商產品
等等的這樣的場景
因爲產品
它佔的體積面積比較小
不像人前景是很大的一片
後景其實很少
而電商產品它的前景比較小
後景它的佔比其實比較大
是一個渲染
整個氛圍渲染的一個襯托
對不對
這樣的話其實更適合前景
這裏我也準備了一個
類似於道具的東西
我們這裏來一個道具
就是這樣一個斧頭
我們把它比喻成一個產品
它其實也是一個裝備
對吧
我生成的
這是用flex生成的東西
生成了一個遊戲的裝備和一個場景
然後我們同樣來複制一下圖像
粘貼到我們這邊的蒙版編輯器
然後我們來編一下蒙版
比如我就想讓斧子這個部分亮
就是前面的這個刃
我們稍微修一下
就是前面的這個刃比較亮
這個地方和寶石這個地方
之後我們這邊原始的參數
我們來試一下
直接來生成
自然會看到它有一個這種效果了
對吧
稍微降噪稍微加一點點
這邊也加一點點
提示詞我們都忘寫了
可以看到提示詞我們都沒有反推
也可以看到它的合成效果
是比較自然的
這裏我覺得最好不要摳像
如果摳了像的話
它的邊緣會比較怎麼說
就不是特別處理的特別好
如果不摳像
它自身合成的效果
我覺得還是不錯的
你可以看到
所以說當我們使用這個產品的話
它的效果融合度會更好一些
你可以看到這個背景
它是根據我們的前景
有一些變化的
有一些改變的
比如說這個地方的雷和山
它就沒有了
就更像是一種迷霧
OK
那麼這就是我們這一期分享的
基礎的IC Lite
關於IC Lite的基礎的使用方法
以及它的結構
它的基本原理
它的構成是哪些
其實就是三部分
三個管道都給佔了
Unit
Clip
以及Latent
所以說它調用的東西挺多的
那麼它能實現的功能有三點
我們來總結一下
第一點就是最簡單的達光
我們的光線
第二點細節的把控比較好
當我們人物轉回過來以後
換一個模型
可以做到比較輕鬆
比較簡單的
就能做一個精準準確的轉會
轉過來的話還比較像
有些人說轉過來不像
又加IP Adapter
又加什麼Face ID
等等的一些東西
非得特別的像
其實通過這個來說
我覺得相似度也不錯
也可以能快速的達到轉會的目的
第三個功能就是它的前後景融合
我們可以做一些電商
主要這個東西還是應用在電商
我也看到一些電商的工作流
都會用這麼一個東西
來進行它的前後景融合
當然了在基礎上
其實還有很多拓展要講
比如說我們如何能更好的
調整它的細節
如何讓它融合的更好
如何能光線控制的更靈活
甚至是做一些光線變化的
動畫之類的
那麼這個我們可以放到之後
進行iSelect一個拓展的工作流
通過iSelect來拓展一個工作流
來講一下它深入的
控制的一些方面和東西
OK
作爲基礎瞭解部分
我覺得這些基本上夠用了
也讓大家知道了
它的一個能實現的案例有哪些了
OK
如果本期內容
對你還有所幫助的話
就千萬不要忘了
點擊系列按鍵
來支持歐陽一下下了
那麼最後也感謝
斷腦雲對歐陽的大力支持和幫助
如果有線上部署
或者應用需求的話
也可以通過歐陽視頻
下方簡介
或者是評論區置頂的連接
來領取5000算力
免費體驗這個斷腦雲的平臺
OK
那麼最後再次感謝大家
長久以來的支持
如果喜歡歐陽頻道的話
也不要忘了
點一波關注
我們未來一同學習
一同成長
那麼下期再見