AI影片工具又上新了,120秒生成高清影片,絲滑渲染3D藝術字,在線可玩

智東西8月22日消息,據VentureBeat 8月20日報導,專注於3D內容生成技術的AI初創公司Luma AI發佈了Dream Machine 1.5。該版本提高了AI影片生成效果,在逼真度、運動追蹤及prompt理解等方面有所提升。此次升級距Dream Machine首次面世已過去2個月。

Dream Machine能夠在120秒內生成包含120幀的高質量影片。用戶只需簡單輸入相關提示,點擊生成按鈕,系統便會在1至2分鐘內完成影片渲染。工具目前對所有公眾開放,每個用戶每月有30次的免費生成額度,但生成結果不可商用。

Luma AI當日在社交平台X上宣佈:「Dream Machine 1.5來了!它的文生影片、圖生影片效果都得到了提升,prompt理解更為精準,自定義文本渲染能力也得到了改良!」

值得注意的是,新版本尤其增強了渲染文本的能力,這是AI影片生成技術一直面臨的難題。這個進步為動態標題序列、動畫標識設計和演示幻燈片製作等任務開闢了新的可能性。

體驗地址:https://lumalabs.ai/dream-machine/creations

一、會3D文字渲染、能理解阿拉伯語,影片生成只需2分鐘

一直關注AI領域的平面設計師@aziz4ai在社交平台X上分享了Dream Machine 1.5的應用實例,展示了該模型在創造複雜視覺效果方面的能力。在其中一個實例中,該模型生成了「彩虹色液體3D文本」,以「LUMA」字樣呈現,展現出流暢且精緻的視覺效果。

▲@aziz4ai用Dream Machine 1.5生成的彩虹色液體3D文本「LUMA」▲@aziz4ai用Dream Machine 1.5生成的彩虹色液體3D文本「LUMA」

此外,Dream Machine 1.5在處理非英文prompt方面取得了進步。在@aziz4ai分享的另一個應用實例中,prompt使用了阿拉伯語輸入,其中包含一個要求:一個男人在木板上切肉,然後將這些肉塊以電影化手法變成「每日現切」(「يحضر يوميا」)字樣。

▲@aziz4ai用Dream Machine 1.5生成的阿拉伯語字樣▲@aziz4ai用Dream Machine 1.5生成的阿拉伯語字樣

生成的影片很好地將阿拉伯語文字融進了畫面,既展現了Dream Machine 1.5的文本渲染能力,也體現了它的多語言處理能力(Multilingual Processing)。

此次模型優化還提升了影片生成速度,約2分鐘即可生成一段長達5秒鍾的高清影片。這一效率提升,尤其適用於需要快速生成大量影片作品的內容創作者和市場營銷人員。

二、業界率先公測,已積累大量用戶反饋

儘管AI影片生成領域的競爭日益激烈,但Luma AI將產品開放公測的策略使其脫穎而出。

相較而言,OpenAI的Sora雖然擁有強大性能,但自今年2月16日公佈以來仍處於內測階段,僅供部分合作夥伴使用,這種排他性限制了它的實際測試和應用。另一方面,快手的可靈於今年6月6日推出、7月24日全面開放內測,短時間內便獲得了眾多關注。

而Luma AI的Dream Machine早在6月12日就開放了公測,因而積累了龐大的用戶基礎,並收集了大量的應用反饋。這使得Luma AI能夠針對各類實際應用場景進行模型優化。結合廣大用戶反饋和實際應用數據,Luma AI得以解決具體的用戶痛點,並進一步增強大部分用戶最需要的功能。

一些行業分析師認為,開放公測能催生更為穩定可靠且功能豐富的AI影片工具。來自各行各業的用戶創作的內容,為Luma AI提供了豐富的數據集,使得其模型迭代速度有機會超過內測的模型。

誠然,這種公測策略也帶來了挑戰。隨著AI影片生成變得越來越普及,如何防止濫用,如深度偽造和誤導性內容,成為了行業面臨的主要難題。尤其需要強有力的監控機制以及倫理規範加以約束。Luma AI對此尚未明確表明立場。

結語:愈演愈烈的AI影片生成大戰

自Sora發佈以來,國內外的影片生成新模型新工具密集發佈。據統計,僅國內,當前便有約20家公司推出了自研AI影片模型。

前有快手可靈發佈後1個月就實現3次重大升級,後有Luma AI 2個月迭代Dream Machine新版本……儘管有飛快的更新速度,AI影片生成仍面臨著可生成長度過短、畫面形變等問題。在越來越卷的賽道上,誰將成為最後贏家?

來源:VentureBeat