createai携手中国科学院自动化研究所联合推出的4d世界模型neoverse正式亮相,相关技术论文已同步发布于项目官网,面向全球开发者开放查阅。
据悉,该模型深度融合扩散模型(diffusion)与4D高斯溅射(4DGS)关键技术,依托100万段真实环境(in-the-wild)单目视频数据完成训练,仅需30秒即可构建通用型4D世界模型。此举不仅摆脱了传统4D建模对高成本多视角采集设备的依赖,更首次实现“重建→生成→再重建”的无限自迭代闭环,在多项权威基准测试中性能位居行业前列。

作为一款兼顾泛化能力与推理效率的4D建模新范式,NeoVerse可广泛适配影视工业化制作、具身智能体训练、自动驾驶仿真等多元场景,支持4D场景重建、高精度自由漫游、任意视角图像生成、时序一致的视频编辑以及三维点云动态跟踪等丰富功能,助力4D技术由垂直领域专用方案迈向跨行业通用基础设施,显著加快产业化落地进程。

本次发布的NeoVerse模型集成先进的蒸馏LoRAs(distillation LoRAs)扩展机制,可在单张消费级显卡上达成30秒以内的端到端推理,展现出卓越的工程部署友好性与规模化商用潜力。

如需深入研读NeoVerse技术细节与实验分析,请访问论文地址:https://www.php.cn/link/69573e0fbe6e2c4b7409ce92e366d865
延伸阅读:“自动驾驶第一股”图森未来完成战略转型:更名为CreateAI,并推出图生视频大模型“Ruyi”










