【AI】開源模型和商業模型差距到底有多大 | Pyramid Flow | 最佳免費開源AI生成視頻
1 次觀看·2024年10月14日
在這期視頻中,我們將為大家介紹一款被國外博主評為最優秀的免費開源AI視頻生成工具——Pyramid Flow!這款工具由北京大學、快手科技和北京郵電大學聯合開發,在開源領域表現十分出色。視頻中,我們不僅會帶大家瞭解這款工具的功能與亮點,還會與商業AI模型進行對比,看看兩者之間究竟有多大差距。
Pyramid Flow AI生成視頻的模型
昨天剛發佈的
被國外的博主評價爲免費開源模型中最佳的一款
那今天我們就來看看開源模型和商業模型之間的差距到底有多大
觀衆朋友們大家好
今天給大家介紹一個新的AI生成視頻的工具
這個工具是號稱免費開源的
AI生成視頻工具裏面表現最佳的一個
爲什麼這麼牛呢
我們來看一下它的項目網站
北京大學快手科技北京郵電大學
快手科技這個看着是不是很眼熟啊
這個就是快手可靈啊
快手可靈至今在AI生成視頻這個領域裏
還是穩坐全球Top3的寶座
那這個公司發佈的模型
我們小大人認爲它會很厲害
我們來看幾個例子
下面這些例子我就不挨個一一演示了
我們來看一下它這個demo
這個demo是在Hugging Face上你可以免費試用的
我試了一下它試的生成的速度還挺快的
我們隨便找一個例子
上傳一張圖像
然後這裏輸入提示詞
Frames Per Second這個就是幀率
最少是每秒8幀
最多是每秒24幀
Guidance Scale
這個Guidance Scale是控制圖像質量的
它項目的建議是在7到9之間
Video Guidance Scale
這個是控制運動的幅度的
它項目建議是在5左右
那麼點擊生成就可以了
這個就是我們對這個Pyramid Flow的簡單介紹
接下來我們來將這個開源的工具
和商業工具來橫向的比較一下
我們將Pyramid Flow
Clean 還有Zen 3
使用同樣的起始幀
然後同樣的提示詞
我們看它生成出來的效果怎麼樣
首先我們來看這一部分
它這個應該是燈光招牌
慢慢的它變成了像霧一樣的質地在飄
接下來我們看這邊走出來一個無頭人
然後他就跟着這個黑衣人就走下去了
這個看上去相當的詭異
而且我們看這個視頻有一個特點
它的第一幅畫面是顏色非常的鮮豔
到最後一幀的時候
這個畫質還有這個圖像的細節等等
都已經和第一幀相去甚遠了
那麼同樣的我們來看一下可靈生成的
首先它這個鏡頭推進的速度非常快
它左邊那個牌子很快就過去了
這個有點像東北的打出溜滑
整個的這個幾乎沒有什麼瑕疵
也就是說它開源的生成的這個視頻
和可靈是幾乎是沒有辦法比的
我們再看看Runway生成的
我們看它整個的生成的這個這幾秒鐘
沒有任何的變形
或者是神出鬼沒的出現的人物啊
或者是物體什麼的
從第一個視頻比較來看
應該是Runway生成的效果是最好的
然後是可靈
Pyramid Flow生成的這個應該是
遠遠還達不到商業工具的這個級別
接下來我們看第二個
就是BBQ燒烤的這個
單看這個開源生成的
我們覺得它生成的這個畫面質量也很高
顏色也很鮮豔
火焰和煙霧的效果也非常好
但是和這個可靈生成的一比較
就能看出差別來了
它的這個雞肉和這個辣椒都是紋絲不動的
就像靜態的圖像一樣
而可靈生成的這個就真實多了
你看這裏它有油在冒泡
我們再看看Runway的生成的這個
映出的這個光線的變化
這個是非常的真實的
我覺得第二個視頻
應該是可靈和Runway的效果差不多
開源的這個還是遠遠的達不到這個級別
接下來我們來看這個Fireworks
它這個強的什麼地方呢
就是當這個煙花綻開的時候
這個女孩的臉被火光照亮了
她的臉有明滅的這個變化
我們來看可靈生成的這個效果是怎麼樣
你看Runway的效果怎麼樣
這個女孩也沒有什麼動感
這個生成的平平無奇
從這個視頻來看
應該是開源生成的這個視頻勝出
接下來我們看這個東京的下雪的街頭
它這個可能是對焦SORA的那個東京下雪的街頭
也是東京的街頭有雪有煙花
看上去很漂亮
我們看到最後一幀的時候
這個顏色已經非常暗淡了
而且路邊小店的這個細節已經變得非常模糊
像可靈Runway站3就沒有這個問題
接下來我們再看這個Tsunami
那這個效果生成的挺好的
但是它有一個問題
它樹邊就是這些樹啊
還有這些窗簾都完全靜止
就像靜態的圖像一樣
這裏像鬼魂一樣飄過去一個人影
像鬼魂一樣飄過去
這是完全不可同日而語
總的來說
通過這些視頻的橫向的比較
我們可以看出這個商業的軟件
它總體生成的成功率
生成的這個畫面的質量
運動的幅度
還有運動的正確性
都遠遠高於開源的工具
當然我們可以認爲
可靈因爲它是一個商業化的軟件
而Pyramid Flow是一個開源的模型
所以它背後的這個商業邏輯是不一樣的
那麼可靈可能使用了更復雜的模型技術
來滿足高質量的內容生成的需求
因爲可靈是面向內容創作者的
那麼它投入的技術和資源
肯定是要比開源模型要多
而Pyramid Flow它作爲一個開源模型
它的目的是提供給開發者進行二次開發
也就是說它的目標
並不是直接參與商業產品的競爭
當然這只是我們背後的評論了
作爲用戶來講
我們希望有更多的開源免費的
更好的工具能夠使用
今天的視頻就到這裏
感謝大家的觀看
我們下一期視頻再見

