arXiv 世界模型与脑机接口· Jimmy Wang·· 1 天前精选AI 评分62
3D World Simulator:混合粒子-体素动力学实现多模态 3D 世界模拟
Hybrid Particle-Voxel Dynamics for Multimodal 3D World Simulation
AI 导读
作者提出 3D World Simulator,一个以动作为条件的多模态世界模型框架,从统一 3D 表示中同时预测外观、几何与触觉观测。该方法用混合粒子-体素自编码器把点云压缩为紧凑 3D 体素隐变量,再由动作条件隐动力学模型预测其演化,支持任意视角的几何一致渲染与空间对齐触觉信号接入。
关注价值
论文把外观、几何与触觉统一到同一 3D 表示中,读者可据此比较它与 2D 视频世界模型在空间一致性上的差异。
来源:arXiv 世界模型与脑机接口 · arxiv.org