跳到正文
arXiv 世界模型与脑机接口· Jimmy Wang·· 1 天前精选AI 评分62

3D World Simulator:混合粒子-体素动力学实现多模态 3D 世界模拟

Hybrid Particle-Voxel Dynamics for Multimodal 3D World Simulation

AI 导读

作者提出 3D World Simulator,一个以动作为条件的多模态世界模型框架,从统一 3D 表示中同时预测外观、几何与触觉观测。该方法用混合粒子-体素自编码器把点云压缩为紧凑 3D 体素隐变量,再由动作条件隐动力学模型预测其演化,支持任意视角的几何一致渲染与空间对齐触觉信号接入。

关注价值

论文把外观、几何与触觉统一到同一 3D 表示中,读者可据此比较它与 2D 视频世界模型在空间一致性上的差异。

来源:arXiv 世界模型与脑机接口 · arxiv.org