2025年2月14日,崑崙萬維集團正式發布了Matrix-Zero世界模型,這一創新成果標誌著中國在空間智能領域取得了重大突破。 Matrix-Zero模型包含兩款子模型:3D場景生成大模型和可交互視頻生成大模型,旨在通過先進的AI技術徹底改變數字內容創作的模式,為影視製作、遊戲開發以及具身智能等領域帶來革命性的創新。
Matrix-Zero的3D場景生成大模型具備強大的功能,能夠將用戶輸入的圖片轉化為高度真實的3D場景,並支持不同風格的圖片輸入和風格遷移。該模型通過場景佈局生成模塊和紋理生成模塊,結合可微渲染和擴散模型技術,確保生成的3D場景在全局一致性和動態合理性方面表現出色。例如,用戶輸入一張“城堡的花園一角”圖片後,模型可以生成一個360度環視且場景保持不變的3D環境,並支持用戶進行長距離、大範圍的自由探索,為3D遊戲建模和具身智能模擬場景的搭建提供了高效的解決方案。
與此同時,Matrix-Zero的可交互視頻生成大模型以用戶輸入為核心驅動,結合了先進的生成式視頻模型和自主研發的用戶交互模塊,實現了視頻內容中視角移動的精確控制。用戶可以通過鍵盤或鼠標輸入,實時控制視頻中的視角和運動軌跡,實現前後左右移動以及視角變換等操作。該模型包含離散運動控制模塊、連續視角控制模塊、3D場景位置追踪模塊和滑動窗口機制,確保交互體驗的流暢性和連貫性,為用戶提供了前所未有的沉浸式體驗。
崑崙萬維作為中國AI領域的領軍企業,始終致力於實現通用人工智能的目標,並通過自主研發不斷推出創新的AI產品。 Matrix-Zero的推出不僅是公司在空間智能領域的重大突破,也是其AI業務矩陣的重要補充。過去三年,崑崙萬維在視覺多模態、深度學習等關鍵技術方向取得了顯著成果,並構建了包括天工AI搜索、Mureka音樂創作平台、SkyReels短劇平台等在內的完整AI矩陣,展現了公司在AI領域的深厚技術積累和創新能力。
Matrix-Zero預計將於2025年4月份正式上線,屆時將為崑崙萬維的AI遊戲生產、AI短劇製作等業務帶來新的賦能。這款模型的推出將為用戶和開發者提供全新的平台和工具,推動數字內容創作進入一個全新的時代,進一步鞏固崑崙萬維在AI領域的領先地位。