AI視訊生成技術另一個里程碑
NIUNIUCard平台8月22日消息,根據VentureBeat 8月20日報,專注於3D內容生成技術的AI新創公司Luma AI發布了Dream Machine 1.5。此版本提高了AI視訊生成效果,在逼真度、運動追蹤及prompt理解等方面有所提升。此次升級距Dream Machine首次問世已過2個月。
Dream Machine能夠在120秒內產生包含120幀的高品質影片。使用者只需簡單輸入相關提示,點選產生按鈕,系統就會在1至2分鐘內完成影片渲染。工具目前對所有公眾開放,每位使用者每月有30次的免費產生額度,但產生結果卻不可商用。
Luma AI當日在社交平台X上宣布:“Dream Machine 1.5來了!它的文生視頻、圖生視頻效果都得到了提升,prompt理解更為精準,自定義文本渲染能力也得到了改良!”
值得注意的是,新版本尤其增強了渲染文字的能力,這是AI視訊生成技術一直面臨的難題。這個進步為動態標題序列、動畫標誌設計和簡報投影片製作等任務開闢了新的可能性。
體驗網址:https://lumalabs.ai/dream-machine/creations
一、會3D文字渲染、能理解阿拉伯語,影片產生只需2分鐘
一直關注AI領域的平面設計師@aziz4ai在社交平台X上分享了Dream Machine 1.5的應用實例,展示了該模型在創造複雜視覺效果方面的能力。在其中一個實例中,該模型產生了“彩虹色液體3D文字”,以“LUMA”字樣呈現,展現出流暢且精緻的視覺效果。
▲@aziz4ai用Dream Machine 1.5產生的彩虹色液體3D文字“LUMA”
此外,Dream Machine 1.5在處理非英文prompt方面取得了進展。在@aziz4ai分享的另一個應用實例中,prompt使用了阿拉伯語輸入,其中包含一個要求:一個男人在木板上切肉,然後將這些肉塊以電影化手法變成“每日現切”(“ يحضر يوميا”)字樣。
▲@aziz4ai用Dream Machine 1.5產生的阿拉伯文字樣
生成的影片很好地將阿拉伯語文字融進了畫面,既展現了Dream Machine 1.5的文字渲染能力,也體現了它的多語言處理能力(Multilingual Processing)。
此模型優化也提升了影片產生速度,約2分鐘即可產生一段長達5秒鐘的高畫質影片。這項效率提升,尤其適用於需要快速產生大量影片作品的內容創作者和行銷人員。
二、業界率先公測,已累積大量用戶回饋
儘管AI視訊生成領域的競爭日益激烈,但Luma AI將產品開放公測的策略使其脫穎而出。
相較而言,OpenAI的Sora雖然擁有強大性能,但自今年2月16日公佈以來仍處於內測階段,僅供部分合作夥伴使用,這種排他性限制了它的實際測試和應用。另一方面,快手的可靈於今年6月6日推出、7月24日全面開放內測,短時間內便獲得了許多關注。
而Luma AI的Dream Machine早在6月12日就開放了公測,因而累積了龐大的用戶基礎,並收集了大量的應用回饋。這使得Luma AI能夠針對各類實際應用場景進行模型最佳化。結合廣大用戶回饋和實際應用數據,Luma AI得以解決具體的用戶痛點,並進一步增強大部分用戶最需要的功能。
一些產業分析師認為,開放公測能催生更穩定可靠且功能豐富的AI視訊工具。來自各行各業的使用者創作的內容,為Luma AI提供了豐富的資料集,使得其模型迭代速度有機會超過內測的模型。
誠然,這種公測策略也帶來了挑戰。隨著AI影片生成變得越來越普及,如何防止濫用,如深度偽造和誤導性內容,成為了產業面臨的主要難題。尤其需要強而有力的監控機制以及倫理規範加以約束。 Luma AI對此尚未明確表明立場。
結語:愈演愈烈的AI影片生成大戰
自Sora發布以來,國內外的影片產生新模型新工具密集發布。根據統計,光是國內,目前有約20家公司推出了自研AI視訊模型。
前有快手可靈發布後1個月就實現3次重大升級,後有Luma AI 2個月迭代Dream Machine新版本…儘管有飛快的更新速度,AI視頻生成仍面臨著可生成長度過短、畫面形變等問題。在越來越捲的賽道上,誰會成為最後贏家?
寫在最後,付費AI工具您可以用國際虛擬信用卡進行付款。 NIUNIUCard平台就是一個專門提供開通國際虛擬信用卡的平台,有興趣的朋友可以加客服TG(@bullbull1999)諮詢了解。