AI前沿技術 設計人狂喜,比肩MJ吊打SD3,無需微調直出精美圖像的Flux新模型你值得擁有!

东方之韵
2粉絲
2025年10月20日
不要再說開源的AI出圖質量不行了
因為你沒有用對模型
最近由Stability AI前成員成立的黑森林工作室
開源的這個Flux模型
一經問世就立馬的引爆了開源社區
那麼這個模型在開源社區裡面的總體評價
大部分人認為它應該是跟MidiJolly
要麼就是平分秋色
或者說認為它稍微比MidiJolly差一點點
但是明顯的是要優於SD3的
當然最重要的是它是完全開源的
就是我自己實測下來的話
特別是在我們的設計領域
我去跑了一些圖
像我們的建築
然後室內這些
它的效果都是非常好的
大家可以看一下
它這些線非常直
而且光感非常好
這種氛圍感這些都非常好
它的這種畫面
這種光感非常的細膩
就是以前我們可能通常來說
需要用到渲染器纔能夠去渲染出來
這麼細膩這種質感
它直接通過提示詞描述就可以生成出來
這是建築跑的一些圖
這個隨機的寫了一些非常簡單的提示詞
包括室內的我也去跑了一些
像這個它的光感對吧
這種材質這種質感非常的清晰
非常的這種有細節
而且它基本上傢俱沒有說明顯的出錯
可能就是也有一定的概率
會有一些小瑕疵
但是整體上來說
比我們以前用到的各種版本的
就是它的初代版本
比如說SDXL也好
SD3也好的
就是它發布的原始模型底模
如果說你不做微調的話
是很難出到這樣子的水平的圖的
包括我們還有一個特別難搞定的
就是瞭看圖
大家都知道瞭看圖
即使我們去經過微調之後
我們去出這個圖
都不見得質量很高的
但是我們用這個Flex模型
你直接用它這個基礎的底模去出
你看它的整個這個結構
其實都是比較正常的
包括這些線透視都是比較直的
沒有說非常糟糕的這種紊亂
因為做瞭看圖
如果說你們之前出過一些
別的這個底模出的
如果說你用SD3或者SDXL去出
它這個瞭看
你基本上出來的這個結構都是比較亂的
就是它根本就沒有去進行這方面的訓練
但是我們在這個Flex模型裡面
你可以直接看到
它的這些結構是非常非常好的
就是你看這些
包括這些遠處的這些建築
它的結構基本上沒有亂
線都是平行的
而且是比較直的
有一個透視這個關係的
看這前面的這些格子
雖然說我們這個出的是一個黃昏的
但是你看到這邊的一些細節
是非常的非常的好的
而且這個模型
是沒有去經過任何的微調的
這個模型潛力是非常高的
那麼這個模型具體怎麼去使用
給大家去說一下
就是如果說你想在線的體驗的話
有一個Hacking Face的這個網站
你可以點擊進去
這個地方去輸入對應的提示詞
點這個run就可以在線體驗了
我們重點給大家去說一下
怎麼在本地去跑
本地跑的話
我們主要是依賴我們的這個config去跑
config的話
他們首先你需要去把你的config的這個
軟件本體把它更新到最新的
就是如果說你的軟件
和這個依賴沒有去更新的話
你可以點到這個地方
在我們的config這裡面去
然後找到這個update
然後把這個update
config和這個python這個環境
一起把它更新一下
點到這個文件就把它更新
更新完了之後
等它自動去裝一下這些東西
裝完了之後
重新去啟動就可以了
然後它的工作流程
config官方是給了幾個工作流程
就是這個圖線
你把這個圖線下載下來
到時候我也給大家去提供好了
如果說你們知道怎麼去下載的話
你就直接從我的這個科技業裡面
去把這個工作流程
把這個圖線
就是直接拖進去可以用了
那麼這個圖片你拖進去之後
它肯定會告訴你去缺一些模型的
那麼這個模型需要去下哪些模型
我這邊給大家去整理了一下
就是我們前置模型需要三個文件夾
就是我們在config裡面
第一個就是我們要去下載這個
應該是這個吧
這個是最主要的這個主模型
那麼這個主模型我們在哪去下載呢
在這個hackenface上面
其實有它的這個主頁
就是找到這個叫blackforest
就是最近你如果去打開這個hackenface的話
你會發現它這個首頁
這個村頂這兒
就是最火的就是這兩個模型
就是這個flux的
它有不同的版本
實際上有三個版本
還有個版本沒有開源的
那麼點進去
我們其實主要推薦大家
就是用這個dev這個模型
點進去
然後你點到這個files這裡面
去點下載就可以了
它這個是原始的模型
這個模型非常的大
這裡面有這個這個模型
這個叫flux-dev對吧
然後去下載這個23.8G
這個模型基本上應該是
目前只有4090的這個電腦
才能跑得起來
所以如果說你電腦不是4090的
你就沒有必要去下載這個原始的模型了
那麼它也有一些這個叫修剪過的模型
就是去提煉過的模型
就是你直接搜這個flux-fp8
然後就是這個叫keyjia這個人做的
這個是個外國人
我不知道他名字唸的對不對
然後在這裡面點了這個files這裡面去
然後可以去下載到這兩個fp8的
這個三個模型它有什麼區別
在這個hugging face上面
就是這個叫black forest
就是他們發布的這個flux這個模型的公司
它就是有一個詳細的介紹
它這方面給大家去說明一下
就是它這個叫shlyard這個模型
它就是最低的一個版本
就是它是完全開源的
然後有一個叫dev這個模型
這個模型它其實雖然說開源了
但是它其實它是遵循的一個
非商業的這個區隔
就是你如果是商業用途的話
你要去跟他們去溝通
當然我們就是自己可以酌情的去考慮
就是這個東西
它沒有那麼嚴格的去限制你
然後這個pro這個
它是隻能通過它這個API的這個去
去調用它
這個是要收費的
但是我們在這個社區裡面
有大量這個實測
就大家我也有去下載一些這個模型的比較
就是實際上這個不同的模型
它的這個區別的話
就是這個dev的模型和這個pro的模型
它其實它的這個效果差別不是特別大
但是這個snare這個模型
效果相對來說要差一些
這個是一些比較
那我們推薦大家的話
如果說你要去用的話
就是重點就是用這個dev這個模型
然後這個snare這個模型
就沒有太大的必要去研究它
當然如果說你想去嘗試一下
你可以自己去下載這個模型
在這個網站上都可以下載到
這是要去下載的主模型
就是推薦大家
重點就是去用這個flex
然後這個dev這個模型
然後這個是三個模型的區別
我們剛剛跟大家就說了
然後它除了需要去下載這個主模型之外
這個主模型下載下來之後
它是放到這個文件夾裡面的
給大家看一下
在我們的configure.models
然後找到unit這個模型
找到這個下面還有一個叫unit
第二個就是我們要去下載
它專門的有一個ve的這個文件
它這個文件名字叫a1.sft
這個文件的話在這個裡面
其實它也提供了
就是在這個Black Forest的
這個hack&fix這個網站上面
就是這個地方
a1.sft
然後它還有這個叫clip的文件
有三個在這個地方
這個如果說你們之前下載過SD3的話
應該也是有的
那這個如果說你沒有的話
我也給它拿去提供好了
就是在這個
剛剛那個ve的文件的話
你下載下來就是放到這個裡面
這個有一個叫a1.sft
然後還有clip文件
clip的文件的話
你就放到這個clip這裡面
有三個就是一個是
這裡面我擁有一些
其他的這個插件裡面
需要用到這個clip
然後這裡面主要是這三個
bip.l
然後t5
然後有一個fp16的
還有一個fp8的
這三個文件你把它下載下來之後
給它總結一下
就是你要去用這個flux這個模型
一定要記得去下載
三個文件夾裡面的對應的模型
那這些模型
比如說像這個unit這個模型
你可以只下載其中這一個
就可以去用了
如果說你電腦是4090的
你可以去下載這個完整的
然後這個ve的這個是一定要去下載的
這個不管你用哪個版本的這個主模型
它這個都是要去下載的
然後clip把這三個都下載下來
就最後下載下來之後
你就重新去啟動你的configure
就可以去使用了
那我們打開我們的configure
然後我們去加載一下
這個默認的工作流程
這張圖顯就是
它的這個最基礎的一個工作流程
然後在這個裡面
簡單跟大家去說一下
這裡面去它是分別做什麼事情
就是這個地方
這個unit這個名稱
就是這個地方去加載你的這個
主模型
那麼主模型它的加載方式
跟我們以前的加載方式
稍微有點區別
我們以前的模型加載方式
是有一個叫checkpoint這個加載器
那麼這個是unit加載器
在這裡面可以去選擇
我們剛剛下載的這些模型
不同的模型
它這個對電腦的這個顯存的消耗
稍微的有些區別
如果說你是4090的
你就用這個完整版的
大部分情況
大部分的這個同學
應該都只能用這個fp8的
然後這個下面的選擇這個fp8的
然後這個下面的clip這個地方
第一個你可以去選這個T5的這個
然後如果說你電腦的顯存不夠
你可以去改成fp8的
如果說你顯存夠的話
用fp16的就可以了
反正第一個這個clip1
是選擇這個T5的
第二個clip2是選擇這個clipL
選擇這個模型
然後我這邊
我都改成這個T5 fp8的這個
它官方原版用的是fp16的
然後這個ve這邊
去選擇加載這個ae.sft
好然後其他的參數
它都是給你設置好的
這邊就用它默認這個參數
去跑就行了
然後這邊是設置我們的寬度高度
這個latent在這一方去設置
好其他的你就用它默認的這個去
就行了
然後我們點擊一下添加提示對立
讓它去跑起來
好它就可以正常去跑了
這個比我們之前的一些模型
跑起來稍微要慢一些
特別是如果說你電腦的這個
顯存不是特別大的話
可能會更慢一些
像我的4090跑起來
跑第一次跑
第一遍跑的話
就是它要去加載你的模型
加載ve加載clip這些
可能跑一張完整的圖
大概是需要四五十秒鐘吧
來看一下它跑完了
誒這邊跑完了
這邊23.86秒
這個反正比常規的模型跑
1024的圖要稍微的慢一點點
但是這個質量是非常非常的高
然後除了這個基本的用法之外
我在網上也給它去找了一些
這個顯存優化的工作流程
就是如果你的電腦是低於12G的顯存
你可以試一下這個工作流程
因為我沒有低於12G顯存的這個電腦
沒有辦法去測試
但是這個應該是可以的
我看到網上有很多都在用這個
就是12G顯存優化的這個工作流程
我在這個原版的這個技術上
去做了一個這個工作流程
就是大家如果說想自己去寫
這個提示詞的時候
稍微方便一點的話
我把這個給大家去做了一個優化
就是可以去寫這個中文
在這個地方用翻譯文本
那這個翻譯文本大家注意一下
就是這個翻譯文本
它的這個節點是需要
也要有這個上網的這個能力的
這個是上網大家懂的都懂
就是如果是你上網的這個條件
不是很允許的話
你肯定用不了這個翻譯文本
然後我就給大家加了一個
這個風格提示詞的選擇器
然後來這邊就可以直接去寫這個中文
通過中文去描述
去生成對應的這個圖顯
這個我就不給大家去演示了
這個就是在原版的技術上
稍微的改動了一下
然後還有一個工作流程
也給大家去分享一下
簡單的說一下就是
目前來說
Flex它就只能做這麼多事情
還有一個就是重繪的這個工作流程
這個重繪的工作流程就是
其實它就是把這個
Latent的那個地方
就把它換成了這個用圖像
去做這個VE的編碼
然後輸給它
然後這個工作流程的話
因為目前來說
它這個Flex這個模型
它也沒有ControlNet
所以說你去做這個重繪的話
圖生圖的這個重繪的話
它是完全是交給AI
自由去處理的
那麼你只能去調一個參數
就是這個重繪幅度
在這個降噪這個地方
那這個它不能控制的話
這個人畫出來多多少少
會有些不太像
就是那這個還是要等後續的
這個整個生態去完善起來
但是我覺得Flex這個模型
是非常非常有潛力的
就是它註定是要去淘汰掉
我們現在用的這些工作流程的
但是這個具體要等多久
這個可能不好說
就是等這個開源社區
你們這些各項生態的這個去優化
像SDXL的
我們也是差不多等了一年
它的生態才比較完善起來
好這個工作流程的話
就大家可以簡單去了解一下
目前來說
我覺得稍微有一點用的
就這幾個工作流程
那麼這些工作流程
包括我的所有的這些模型
包括我們的這些這個特件
我到時候會一起分享給大家
大家拿到之後
自己去體驗一下
去感受一下就行了
那麼我們這節課
就先給大家去分享到這
大家也可以關注一下
我們後續也會持續的去跟進
就是Flex這個模型
它後續的一些這個生態的一些
整個完善了之後
我們會陸陸續續
給它做一些課程的這個更新
好吧
那這節課就先到這
謝謝大家
拜拜
