英偉達投的Sora競品飛速上新,一手實測這就奉上
在AI影片賽道卷麻了之際,英偉達投的Sora競品,馬不停蹄地推出1.5代了!
![](http://n.sinaimg.cn/spider20240821/750/w1080h470/20240821/8a09-14d9b77bd57608660c8c085f010baf71.jpg)
據Luma創始成員介紹,相比6月推出的Dream Machine 1.0,此次升級主要圍繞文生影片,整體更加智能。
![](http://n.sinaimg.cn/spider20240821/178/w1080h698/20240821/233f-0e329362f3d8bf2e97bace3a33252e6f.jpg)
新版本全民在線可玩,已經嚐鮮的網民紛紛直呼:
incredible!(不可思議)
看了下網民試玩,目前的效果雀食不錯,下面挑幾個例子康康(PS:畫質均有一定壓縮)
雞蛋成精了,會騎車的流心蛋黃:
![](http://n.sinaimg.cn/spider20240821/75/w1079h596/20240821/bc6b-0cdce167f6b5bebee932e553f4ace24f.jpg)
視覺衝擊力強,堪比電影運鏡的快鏡頭。
Prompt:FPV, fast moving footage, at light speed, flying through houses before exploding into a volcano.(FPV,快速移動的鏡頭,以光速飛過房屋,然後爆炸成火山。)
![](http://n.sinaimg.cn/spider20240821/75/w1079h596/20240821/de3f-9306978246ba52237339f1eedd2cf160.jpg)
畫面上加文字的老大難,貌似也克服了。
![](http://n.sinaimg.cn/spider20240821/75/w1079h596/20240821/6990-0248449ae8a9665c7d4b18962f11ec13.jpg)
上下分屏,叢林和海底世界刷一下就拚接起來了:
Dynamic motion, vertical 2-panel Split-screen view: lush jungle canopy above, underwater coral reef below, UHD, nature documentary style(動態運動,垂直2面板分屏視圖:上面茂密的叢林樹冠,下面的水下珊瑚礁,超高清,自然紀錄片風格)
![](http://n.sinaimg.cn/spider20240821/76/w1079h597/20240821/81b6-84775bdc8a6090c25eb28aaf70ae1d21.jpg)
衣袂飄飄,自然抬頭的少女漫也安排上了。
![](http://n.sinaimg.cn/spider20240821/75/w1079h596/20240821/f5be-e58ef53943bf3b1536134facc77014bd.jpg)
看完這波效果,不難推測為何Luma AI在過去兩個月增長迅猛。
網站分析平台Similarweb的數據顯示,目前它在所有AI影片中(主要是國外產品)訪問量排第一,僅7月份全球訪問量達到了2260萬次。
![](http://n.sinaimg.cn/spider20240821/171/w600h371/20240821/36a9-69a0bd662199be3e8687ad3dcdedba66.jpg)
實測1.5代
手癢了,量子位第一時間也來試一下Dream Machine v1.5。為了順帶檢驗官方demo的真實性,咱們直接微調一下官方提示詞。(機智如我)
直接看重頭戲——文生影片。
第一個,將原玄幻場景中的老頭換成了老太太。從生成結果來看,基本要素都齊了,但是細節之處(如手部畸變)還是不能看。
prompt:old woman with a swirling fireball(手持旋轉火球的老婦人)
第二個,將考察影片運動能力的原綠色puppy換成了貓咪。這個效果相當不錯,貓咪大佬的氣質簡直撲面而來!不僅煙霧在空中的運動軌跡非常逼真,而且貓咪的耳朵還會動。
prompt:green cat smoking a cigar(抽菸的小貓咪)
第三個,將考察影片添加文字能力的原「WOW」換成了」STOP」。整體倒是挺自然,但是犯了一個致命錯誤:單詞拚錯了。(且這個影片生成最耗時)
prompt:「STOP」 in balloons in the sky(」STOP」出現在天空中的氣球上)
對了,知道大家肯定會被提示詞難倒,有網民已經貼心整理好了大禮包。(文末鏈接可取)
![](http://n.sinaimg.cn/spider20240821/168/w1080h2288/20240821/c2c0-b222b987be039ce11cfdd415602c7539.jpg)
來自Luma AI
Dream Machine是由英偉達投資的Sora競品,背後公司是Luma AI。
聯合創始人兼CEO Amit Jain是前蘋果AR/CV工程師;聯合創始人兼CTO Alex Yu 2021年畢業於加州伯克利,曾與Angjoo Kanazawa教授一起研究NeRF相關的3D計算機視覺。
![](http://n.sinaimg.cn/spider20240821/554/w1080h274/20240821/ca85-80ad43c6d9657a07236755f80dc0d4e4.jpg)
![](http://n.sinaimg.cn/spider20240821/581/w1080h301/20240821/2230-013f2214d20e24cdafbd9666bf19a952.jpg)
最近一輪融資是在今年1月(B輪4300萬美元),a16z領投,Anjey Midha、Amplify、Matrix、NVIDIA、South Park Commons等參投。
而且在國外一眾AI影片生成工具中,用戶訪問數據較好。
根據Similarweb的統計,當前Luma AI領先於許多類似的AI影片生成應用。7月份全球訪問量達到2260萬次。
![](http://n.sinaimg.cn/spider20240821/781/w1080h501/20240821/2447-f346a9c68a188c6c942b3dd4c87d137c.jpg)
試玩地址給大家放文末了,歡迎來波反饋~
體驗地址:https://lumalabs.ai/dream-machine/creations
參考鏈接:
[1]https://x.com/LumaLabsAI/status/1825639918539817101
[2]https://x.com/SwayMolina/status/1825651049904144591
[3]https://x.com/Similarweb/status/1822967997582958659
本文來自微信公眾號「量子位」,作者:一水,36氪經授權發佈。