AI高階教程 價值上萬的商業工作流公開思路和搭建流程，任意物體任意場景一鍵遷移

我操這個工作流程有點無敵了 今天我來給大家去介紹一下 我們最新寫的這個萬物遷移的工作流程 那這個流程在做什麼事情呢 簡單跟大家去說一下 就是假設你有一個自己的產品啊 像這些擺底圖包括這些啊服裝裝飾品 然後包括這些服裝 包括你有任何的產品 那假設你有一個做好的產品的擺底圖 好你想去以前要去做這個 場景圖對吧你要去請模特 或者是你要去搭一個攝影棚 然後去拍照 然後呢這套流程下來 不僅很花時間而且很費錢的吧 那現在呢我們可以直接啊 你在網上去找一張異象圖 或者呢你直接去用 ai 生成一張圖 然後把你的產品放進去 他這個不是簡單的放進去啊 你看這個圖角度都不一樣的吧 他放進去也是很完美的 而且他的光線啊 也是跟這個場景是很完美的去匹配的 我這個地方有一個燈對吧 他下面這個地方呢就會偏的黃色一些 然後呢這個光線從我的陽臺進來 這邊他會有這個明暗的分界 你看跟這個沙發並不是完全一樣的 他的結構是一樣的 但是他的光線啊 他跟整個環境是融合的非常好的 這個甚至我覺得比我們之前說的 IC night 這個做出來的效果還要好一些 或者是另外一個沙發啊 這些都是沙發 這個像這種稍微長一點的沙發 這種短一點的沙發 包括這邊的對吧 是這些啊各種各樣的款式 而且他的角度是支持非常多種啊 多樣的這種角度的 包括像這個啊 你如果說你這個場景比較簡單啊 你不做白底圖 你簡單的拍個照啊 你隨手都用手機拍個照 你想把它放到這個新的場景裡面去啊 都是支持的 包括我這邊啊 去做了一些這種裝飾品啊 你看這些裝飾品 你直接去網上去找一個模特對吧 那麼不管是用白底圖也好的吧 或者說你用一個這種展臺啊 或者說你自己啊 用手機拍個照子吧 你拍戴在自己的脖子上去 然後呢 你覺得自己長相沒有那麼ok對吧 那麼你把它換的 遷移到這個模特身上去啊 都是可以的 包括我們這些換裝啊 現在啊網上做電商的 可能對這塊需求也是很大的 我只要有一件衣服對吧 啊我去找一個虛擬的模特啊 或者說你直接用ah申請的模特 然後把它給他穿在上面去 這些衣服基本上啊 都是非常完美的遷移過去的 可能有些啊會有一些小瑕疵啊 可能偶爾有一些 可能需要去簡單去抽一下卡 但是大部分情況下 這個成功率是非常非常高的 哪怕你以前啊你去訓練nora的吧 他也不是說百分之百的成功的 那麼你用aa的話 你要接受他有一點點可能啊 會有一點點小瑕疵 但是目前來說啊 我覺得他的這個 對於很多很多普通人來說啊 你其實有點難分辨的出來 這個是真人的拍攝 還是aa出的出了好 他們這個工作流程具體是怎麼去使用的 我打開這個工作流程給大家去說一下 這個就是在config裡面去啊 你拿到我的工作流程呢 把它拖進來就行了 我們的商業工作流 01的這個萬物千億工作流 好然後呢 我在這邊去寫了一個簡單的一個使用說明啊 那如果說你不想去看呢 你直接看我操作一遍啊 大概懂了 第一步呢 就在對方去上傳一張你的這個產品的圖啊 那麼我之前啊做過一次啊 這個是做的一個傢俱的 然後呢這邊就是一個意象圖 那可以從網上去搜啊 你可以用ai去生成一張 然後呢一定要記得在這個地方右鍵 遮罩編輯器當中打開 他默認的話這個圖他是這樣子的 那我希望把我的這個傢俱對吧 現在這個白底圖把它放到哪個位置去呢 我們就要在對方右鍵 然後呢去塗抹出來 把這個場景裡面我們需要替換的部分 把它塗抹出來 塗抹出來的地方呢 等會他就ai去重繪啊 我們把這樣子塗抹出來啊 塗抹出來啊這樣子 稍微的這個抹下大概的位置就行了 不用去塗抹的非常的精準 不用像我們有一些 客徒技術啊客徒非常的 精準的那種邊緣才能做 他這個不需要啊就簡單的抹一下就行了 然後呢點擊這個save to node 然後呢剩下的就沒有了 他就這兩步 然後你點擊這個自信堆裂啊 他就開始跟你去跑圖了 好我這邊已經跑過了 我這邊就不去重複的跑了 然後呢 最終他就會在這個地方 去生成一個最終的結果 你看到這個圖的這個場景的吧 他的光影關係 包括他的角度跟這個都是不一樣的 他都可以非常完美的融入進去 我並沒有去做任何的這個什麼 control line的控制啊什麼這些啊 那他這裡面的核心是什麼呢 核心就是在於我們之前啊 就是我們的 Blocks最近發了幾個新的模型啊 這裡面哈除了我說的這兩步啊 這地方我給他大家去標紅的 就是標紅的地方 就是你打開這個工作流程 需要去自己操作的 那麼這個模型加載區啊 因為你用的模型的路徑 可能跟我稍微有些區別 那麼你也可能要去啊 加載不同的這個路徑啊 你稍微再去檢查一下 那這個模型加載區 其實就是啊 我們整個這個工作流程的核心啊 就是第一個呢 就是我們用到了 FluxFill這個模型啊 這個就是Flux出的這個重繪模型的 那麼他這個重繪技術非常的好 那麼我們在這個地方去重繪的時候 他就可以保證我們重繪的這個圖跟原圖 他是非常協調非常統一的 包括我們這些傢俱的話 他這種光影關係 他會啊去判斷你這個 場景裡面哪個地方應該是這個 光源進來的地方啊 他會自動的去做這個 光影的這種協調啊 這個Fill這個模型非常非常重要啊 這個地方你要去自己去選擇你自己的路徑 然後Cliff這個地方非常好說的啊 一個CliffL一個是T5的這個 然後呢VE的吧 這邊也是常規的 然後呢這下面這兩個是做什麼的 這個就是Flux新出的一個Redux那個模型啊 我們之前在評測Redux就跟大家說過 Redux他把他這個風格建議的非常的實 那麼當時啊 一個比較保守的評價就是 有可能對吧很有用 有可能沒有什麼太多這個用啊 目前來看他就非常的有用 因為他控制的非常實 他就可以把這個圖呢 非常完美的遷移到這個圖裡面去 那麼一個是這個Cliff的這個視覺加載器啊 那這個呢 是我們使用Redux模型必須要去加載的啊 選擇這個 SigCliff這個什麼Patch14384這個模型 然後呢風格模型加載器 這個地方就選擇Redux 然後呢後面就是他常規的接法 我們把這個風格模型啊 這個模型對吧接在我們的條件後面去 那麼在這個Cliff文本這裡啊 不用去寫任何的提示詞啊 不用去寫任何的提示 我們以前還去做些什麼圖像提示詞的反推 對吧啊全自動的流程 像在這個地方提示詞直接不用寫啊 就空在這就行了 然後呢 記得啊你用這個Field這個模型的話 Flex的引導在Redux開到30啊 差不多就可以了 其他的就是一個很常規的流程啊 那麼這個地方的K採樣器這啊 你們看到這這裡啊 他實際上是兩張都拼起來的 那麼這個啊 他實際上是進一步的去強化的 這種圖片的這種一致性啊 就是我們最終生成這個圖啊 這個圖跟這個圖他保持這麼高的一致性呢 實際上呢這個也是受到一個 嗯 叫IcyLora的這個技術的影響啊 IcyLora其實我們並沒有給他去講 但是呢他的這個技術的思路啊 其實是值得去學習的 就是我們在重繪的時候呢 我把這個圖把他放在旁邊啊 放在旁邊的話他去重繪的話 他會去嚴格的參照這張圖 這個是啥意思啊 就是比如說我們在 Flex裡面去生成圖片的時候 那假如說我一次生成兩張圖片啊 這個是一次性生成的兩張圖片啊 就是我一次同時生成啊 一個人物啊 他左邊是一個什麼 呃場景右邊是個什麼場景 那麼他左邊不是在走路 右邊端著一杯咖啡 那你會發現如果Flex 一次同時在一張圖裡面啊 就是他是在Ignitant裡面出來的 然後呢這裡面有兩個角色 那麼這兩個角色他的一致性 就會保持的非常非常的高 你可以看到他的 面部啊他的這個服裝啊 他這個裡面的襯衣 包括他啊所有的這些東西對吧 就這個人啊他 本身這個角色 應該是一個什麼樣的這個樣式啊 他在兩張圖裡面保持了 非常高的這種一致性 我們看一下另外一張 比如像這個對吧 我換了一個人啊 他一樣的啊就是他的衣服 他的眼鏡啊他的這個長相啊 包括他這種什麼首飾吧 像這個圖裡面他還戴著這個項鍊啊 然後呢像這個圖裡面對吧 他裡面的內搭啊他的衣服怎麼 啊怎麼去這個匹配的 兩張圖的一致性會保持的非常高 那麼這個啊 其實也給我們提供了一個思路 就是我們可以把這兩個圖 就是這兩張圖對吧 我餵給AI的這兩張圖把它拼在一起 拼在一起讓他重繪的時候 他會去參考左邊這個圖 那麼假如說我們啊這個圖對吧 就是我在AI重繪的時候 我本來這個圖有一半啊 我已經有了 另外一半呢我讓他去重繪的吧 那麼他重繪之後 他也會去參考你左邊的這一張圖啊 那麼這個也是一個非常重要的思路啊 那麼我看到網上 可能有些別的博主也寫過類似這樣子的 這個思路 但是他們做的那個呢 我覺得不太智能化啊 就是我們本身就是要再用這個config 他們生成這個圖了 最後他還要生成這樣子兩張圖 就很難用ps把它切開 那這個呢其實很簡單啊 就你直接把這個東西 在config裡面寫個流程 就把直接把它自動化的切了就行了 那麼因為這個圖本身我上傳的時候 就是兩張圖拼起來的 那麼我在拼之前呢 我去記錄一下對吧 每個圖這個尺寸 我們這邊先去做了一個縮放哈 整體做一個縮放 萬一你這個圖太大了 你整體是縮放到1280 嗯你可能在768到1536之間 這個整數應該都是可以的 就是這個圖片不要太大了太大了 因為他還要去拼啊兩張圖拼 就是你一張圖1280兩張圖拼起來 他差不多就是2000多了 這個圖如果說太大的話可能出來也會 嗯就你的顯存消耗會比較大吧 然後呢這個就是 呃相當於我做了兩次拼圖嘛 一次拼圖呢就拼出來的是這個啊 就是這兩張圖 我們上傳了兩張圖把它拼起來 另外一個呢就是把這個蒙版去做一個拼接 因為我這個地方這個圖對吧去做了一個蒙版 那麼他的蒙版然後他對應起來 那麼我只是去重繪這塊區域對吧 就整個圖其實 我現在把這個圖給你擴大了 我最後只重繪了這一塊區域 他這種一致性呢就會更好 然後呢我們最後生成出來這個圖之後呢 最終再把它切開啊只留下這張圖就行了 那麼整個這個思路啊其實非常的簡單 後面呢再去接了一個圖像放大這個流程啊 這個用的是 flux的upscale這個模型啊去放大 但這個可選啊就是 啊如果說你覺得那個圖對吧還不夠清晰 你可以去把它打開然後再去跑一遍 如果說啊覺得夠了對吧 一般來說一千多我覺得也夠了啊就是 就直接把這個禁用了就好了 那麼這就是一個完整的工作流程 其實他的思路是非常簡單的 大家啊把這個啊 就是把這個地方這幾個模型你看懂啊 實際上你自己就搭建起來 其實非常的容易好不好 大家可以自己去玩一下啊 好那接下來我給大家去說一下 詳細的這個搭建過程啊 如果說你只是想直接用對吧 那麼你直接拿到這個工作流程去用就行了 這個工作流程我會放在科技裡面 那如果說你想去 學習一下怎麼去搭建這個工作流程呢 我從頭給大家去搭建一下 這個其實很快的哈 我們就先從一個ksampler開始 k採樣器 一般來說我們搭工作流都是從這個開始 然後呢這邊選擇這個ulet加載器 然後這邊 因為我們要用重繪這個模型吧 所以這邊選擇flux fail這個模型 然後這邊簡字類型保險解析器 選擇fp8的這個 然後呢他官方給的工作流程 在這個裡面他還加了一個差異擴散 在這個節點的差異擴散 把這個加進去然後把這個模型給他接過來 然後呢這個嗯 clip對吧一般來說我們就是雙clip 選擇這個雙clip加載器 然後呢一個clip l 一個t5 然後這邊保險還是選擇 f8的然後呢類型選擇flux 好然後呢 拉出來兩個這個clip文本編碼器啊 這個地方呢我們不需要去寫任何的提示詞 因為redux 他用了redux之後呢 redux他的這個條件太強了 基本上你這個提示詞寫了也沒啥用啊 就不用寫就放在這就行了拿來去寫對吧 好然後呢 呃因為我們要去用那個 redux的模型 所以我們這邊要去加一個style model style style model 然後這邊style model apply 風格模型應用 然後呢把這個條件給他接過來 然後呢這邊啊 因為要用這個風格模型 他有幾個接口對吧 你就往前拉啊這邊風格模型加載器 然後把它拉過來這邊選擇flux redux 然後呢這邊有個clip視覺輸出啊 選擇clip視覺編碼 然後呢我們這邊啊選擇一張圖像 我們把它去加載一張圖像 選擇加載圖像 ok 然後呢clip視覺啊 這邊選擇clip視覺加載器 好這邊選擇這個save clip 然後呢選擇這個啊就是這個 然後呢patch14這個 好我們這次我們要去參考的這個圖像啊 這個clip視覺編碼 這地方表示是我們要去參考的圖像 比如我們這次來換一個這個小案例啊 比如我們來啊畫一個什麼項鍊啊 比如說這個啊把這個項鍊 嵌移到這個人的 啊這個脖子上面去啊 然後呢嗯這邊啊風格模型應用之後 完了之後我們要去接一個flux的引導 flux引導 因為這個fail這個模型呢他必須要去用他 然後我們給他30 他的條件是可以去串起來的 管道對吧是相通的 然後呢因為我們要用fail這個模型呢 我們還要去加一個什麼內部模型條件啊 選擇input input內部模型條件 然後呢把這個正面條件接給他 然後呢負面條件這邊接過來 ok vae對吧 我們就接我們的vae加載器 vae加載器這邊flux vae 對吧我們要去加載這些 就是我們一開始給他說的 這些呢模型啊 你要去選一下你自己本地的路徑 盡量呢這個要去檢查一下啊 然後呢這個圖像啊 就是我們要去重繪的這個圖像啊 我們這邊選擇 呃加載一個圖像 加載圖像那麼我們去選擇一個 比如說一個模特的這個脖子對吧 我們選擇他好然後呢 嗯選擇這個模特之後呢右鍵 遮罩編輯器打開 我們希望把那個項鍊的吧 重繪的他的脖子哪個地方去 我們把這個項鍊給他抹出來 好那麼這個 抹的時候呢盡量把它區域抹的大一點 不用抹的非常的準確 因為他這個項鍊比他 現在戴這個項鍊的吧 本身他這個啊就要大很多 那你右鍵啊 就把他這個稍微的調大一點啊右鍵 在遮罩編輯器當中打開 因為他戴的這個區域呢可能會大一些 然後你把他這個稍微的 給他脖子上多抹一點 比如說這個地方有可能都會 啊涉及到一點啊 反正這個呢不用非常的精確啊 不是像那種code那種啊 那code非常的準確纔行 就大概把他這個區域給他抹一下 就能save to load 保存一下好 然後呢把他的遮罩啊給他去接過來 接過來之後呢這邊的正面條件接到他 然後這邊負面條件接到他 然後呢latent接到他 然後呢這個noise mask 開和不開好像都可以啊 這個我看了官方的給的那個 案例好像是沒有開的 好我們先不開來試一下 我們選擇這個 VAD解碼 然後我們再把這個VAD接過去 然後呢這邊可以去預覽一下這個圖像 好那麼其實一個基本的流程啊 其實你就這樣子就搭完了 哦不對好我們這邊忘了改個參數 這個safety要改成1 然後把這個部署啊可以稍微的開高一點 開到30 然後啊其他的就隨機種子 就讓他隨機就行了 隨機啊我們重新來生成一下 ok 稍等片刻我們這邊就生成出來了 但這個呢他只是做了一個參考 他並不是把你這個項鍊呢 給你啊原封不同的給你啊放過來 那這個其實還是有問題的吧 那麼這個就涉及到 我們剛剛給大家說的另外一個這個技術的 就是我們把這兩個圖給他拼在一起 讓他操作也對著操對吧 那麼這個時候他 從會啊出來這個就會比他更像 就是有點像一張圖去當成這個 lorra這種解決問題的吧 那麼這個就涉及到把兩張圖拼在一起 然後呢把他的模板啊 怎麼去合在一起的這個問題的吧 好拼圖啊其實很簡單 選擇這個有個叫圖像連接 你直接用中文搜都可以啊圖像連接 應該是這個 英文的話應該就是叫 image concatenate 這個然後呢把它連接一下啊 那這個連接的話 圖像他會自動的去做一個尺寸的這個 就是他的高度會合併到一樣啊 那這個時候呢 我們直接啊先手動的給他去縮放一下吧 按這個寬高比縮放 這樣子你可以更好的去把控他的這個尺寸 對吧然後呢 我們這邊縮放到邊呢選擇這個高度 然後呢嗯把第一個圖像 這個是我們的 產品圖對吧 拖過來然後縮放的高度縮放多少了 我們這邊給他同一個整數啊 選擇一個 int 這個整數比如說我們這邊就先 寫個1024啊 好的把這個1024拖到這個 縮放到長度這裡面去 然後呢第二個 ctrl c ctrl v 他也是一樣的那麼這個 縮放到的這個邊對吧 縮放到的這個 長度呢是一樣的啊這個值 然後呢把這個也縮放到這個邊啊 然後呢把這兩個圖像對吧 再來去做一個連接 然後高度是一樣的對吧 這樣就統一起來 我們再去做一個圖像的預覽 好我們把這個呢往上拖一拖 我們單獨來看一下 這上面這個在做什麼事情 我們把下面的 ctrl b 把它禁用一下 好 ctrl enter 實行一下 ok 好這兩張圖呢就拼在一起了 那麼這兩張圖拼在一起對吧 我們對這 兩個拼在一起的圖一起做一個重繪 那麼重繪的時候我們需要 做他的這個整個這個兩個圖拼在一起 這個蒙版對吧 那麼這個時候呢 啊就簡單的把它給這個蒙版給他 啊因為他也會蒙版也會做縮放嘛 我們把它給他拼過來就行了 那麼上面這個圖呢 他整個都不需要去重繪對吧 就這個產品圖那麼這個白圖呢 就直接把它做成一個黑底的就行了 黑色就是不重繪嘛 那麼我們要重繪的其實就是這塊區域 我們可以在這邊 先去 mask preview 先看一下 對吧這個遮罩呢他就是這一小塊嘛 就這一小塊 那我們這塊呢 相對應的這塊啊旁邊呢 我們這邊還要一塊這個純黑色的對吧 那麼這個純黑色呢 我們可以直接啊去用一個空圖像 好選擇這個 w as 這個節點啊 然後呢他的這個顏色啊 這邊啊他是用 rgb 紫的你就給他0啊 紅綠藍啊都給他0啊就是純黑色 好然後呢這個寬度和高度呢 實際上我們這邊啊 縮放之後他的寬度 就直接給他給過來就好了 高度啊直接給他給過來 然後呢這邊這個圖像呢 就是一個空的這個黑圖 我們給他預覽一下看一下對不對 ok 好那我們再把這兩張圖給他一拼對吧 他就是這個 遮罩就出來了好 然後我們這邊啊把它來合併一下 好我們直接把這個圖像連接再給他複製一份 ctrl c ctrl v 然後呢 我們呃第一個對吧 要連接的就是上面這個圖 然後呢第二個要連接的就是這個遮罩 那麼這個遮罩他不是一個圖像 你要去轉一下啊 mask to image 遮罩到圖像把這個遮罩接過來 接過來好然後呢 嗯這邊啊你再去預覽一下 我們就預覽圖像了 因為他是個圖像 我們用遮罩預覽預覽不了了 ok 好 對吧這個遮罩對吧 就跟上面這個圖像啊 他是一一的對應起來的好 那麼這個呢 我們再把它去接到我們的這個 內部模型的這個條件上面去 ctrl b 取消一下 呃這個呢因為他是個圖像啊 你還把它轉成再轉回成遮罩啊 這個image to mask ok 好然後呢把這個遮罩啊把他這個 接過來接過來之後呢 哎等一下 我們剛剛忘了去把我們的這個 連接之後這個圖像給他接過來 應該是把這個連接之後的圖像啊 接到這個內部模型條件 然後把這個啊連接之後的這個遮罩對吧 給到這個地方的遮罩啊 我們再來重新生成實行對立 ok 我們再來看一下這次 對吧他是不是就對著這個操作頁 然後這邊一共四層的這個項鍊 然後他這邊四個對吧 把這個圖案 是不是基本上就跟他一致的對吧 在後面他給他綁在這個脖子上面去了 整個這個流程對吧 其實跑起來非常的簡單啊 這個下面其實就是一塊核心的一個 這個生圖對吧 然後他上面呢就是去 對這個圖像做一個操作 對方整體的去做一個 多放的這個參數的一個設置啊 這上面的這些 呃節點對吧你自己再去稍微的捋一捋 對吧差不多這個東西就出來了啊 其實不難對吧不難非常的簡單好吧 那我們這節課呢 就先跟大家講到這對吧 那麼最終你如果說你想 用我那個給你整理好的這個 你就直接用這個好了 啊你自己去寫的話對吧 大概就這樣子啊 你就把這個思路就把它捋清楚了 好吧那這節課呢就先給大家講到這 謝謝大家拜拜