2025年2月14日,昆仑万维集团正式发布了Matrix-Zero世界模型,这一创新成果标志着中国在空间智能领域取得了重大突破。Matrix-Zero模型包含两款子模型:3D场景生成大模型和可交互视频生成大模型,旨在通过先进的AI技术彻底改变数字内容创作的模式,为影视制作、游戏开发以及具身智能等领域带来革命性的创新。
Matrix-Zero的3D场景生成大模型具备强大的功能,能够将用户输入的图片转化为高度真实的3D场景,并支持不同风格的图片输入和风格迁移。该模型通过场景布局生成模块和纹理生成模块,结合可微渲染和扩散模型技术,确保生成的3D场景在全局一致性和动态合理性方面表现出色。例如,用户输入一张“城堡的花园一角”图片后,模型可以生成一个360度环视且场景保持不变的3D环境,并支持用户进行长距离、大范围的自由探索,为3D游戏建模和具身智能模拟场景的搭建提供了高效的解决方案。
与此同时,Matrix-Zero的可交互视频生成大模型以用户输入为核心驱动,结合了先进的生成式视频模型和自主研发的用户交互模块,实现了视频内容中视角移动的精确控制。用户可以通过键盘或鼠标输入,实时控制视频中的视角和运动轨迹,实现前后左右移动以及视角变换等操作。该模型包含离散运动控制模块、连续视角控制模块、3D场景位置追踪模块和滑动窗口机制,确保交互体验的流畅性和连贯性,为用户提供了前所未有的沉浸式体验。
昆仑万维作为中国AI领域的领军企业,始终致力于实现通用人工智能的目标,并通过自主研发不断推出创新的AI产品。Matrix-Zero的推出不仅是公司在空间智能领域的重大突破,也是其AI业务矩阵的重要补充。过去三年,昆仑万维在视觉多模态、深度学习等关键技术方向取得了显著成果,并构建了包括天工AI搜索、Mureka音乐创作平台、SkyReels短剧平台等在内的完整AI矩阵,展现了公司在AI领域的深厚技术积累和创新能力。
Matrix-Zero预计将于2025年4月份正式上线,届时将为昆仑万维的AI游戏生产、AI短剧制作等业务带来新的赋能。这款模型的推出将为用户和开发者提供全新的平台和工具,推动数字内容创作进入一个全新的时代,进一步巩固昆仑万维在AI领域的领先地位。