TPAMI 2026 | 北大、清华等团队提出 GAPrompt++:多粒度几何感知点云提示,高效适配3D视觉模型
北京大学、清华大学等团队提出多粒度几何感知点云提示方法 GAPrompt++,冻结预训练3D视觉骨干、仅训练轻量提示模块与任务头完成下游适配。以 Point-PQAE 为例,其使用 0.6M 可训练参数,在 ScanObjectNN 最难的 PB_T50_RS 划分上准确率达 90.63%,较全量微调的 89.56% 提升 1.07 个百分点。
试运行:收录范围与分类仍在校准,更新可能延迟。 最近内容更新:2026-11-04 17:28(北京时间)
北京大学、清华大学等团队提出多粒度几何感知点云提示方法 GAPrompt++,冻结预训练3D视觉骨干、仅训练轻量提示模块与任务头完成下游适配。以 Point-PQAE 为例,其使用 0.6M 可训练参数,在 ScanObjectNN 最难的 PB_T50_RS 划分上准确率达 90.63%,较全量微调的 89.56% 提升 1.07 个百分点。
作者提出 RFWorld,一种用于端到端轨迹评估的免轨迹展开世界模型,不再为每个候选轨迹递归预测未来状态。它构建共享场景记忆,通过训练时的轻量时序读出与语义监督形成可读未来表示,推理时候选轨迹以稀疏空间读出直接查询该记忆打分,计算量约降至规划时域与候选轨迹数之积的倒数,并避免递归展开误差累积。
关注价值:提出免轨迹展开的世界模型评分方法,为端到端规划降低推理开销提供了一条可比较的技术路线。
空间智能公司影溯(InSpatio)10 月 30 日在杭州落地全国首个具身仿真数采中心,预计单月生产 100 万小时仿真训练数据,单条数据综合成本约为传统真机遥操作采集的 1/10。
新智元报道了 SpatialScout 基准,它让 AI 在未见过的虚拟房间中自主决定转向、移动和拍摄,并提交目标物体的三维坐标。
World Labs 宣布已签署最终协议并入 AMD,交易预计在 2026 年底前完成,尚待监管批准及其他惯常交割条件。双方去年起在 AMD GPU 上开展模型训练与推理优化合作,合并后计划构建覆盖硬件、软件、平台与开放模型的端到端开放 AI 生态。
关注价值:世界模型团队并入芯片厂商,读者可据此观察空间智能研究与硬件算力结合后的路线变化。
World Labs 发布下一代世界模型 Atlas,称其为从零预训练的多模态自回归扩散 Transformer,原生统一处理文本、图像、视频和 3D,将输入编码为共享空间上下文后再生成后续内容。
关注价值:统一架构把相机位姿与深度作为原生输入,其重建与可控生成结果可用于判断世界模型的路线选择。
World Labs 团队发布文章,把当前被称为世界模型的能力拆成渲染器、模拟器和规划器三类,分别输出像素观测、世界状态和动作。文章认为模拟器关注度最低但最关键,是连接视觉渲染与机器人规划的桥梁,并以 Marble 同时输出 Gaussian splats 和碰撞网格为例说明边界正在融合。文中还指出三维数据稀缺、仿真到现实迁移差距和生成式模拟器的物理错误仍是待解难题。
关注价值:World Labs 把世界模型拆成渲染器、模拟器、规划器三类,并解释模拟器为何是连接视觉与行动的关键环节。
World Labs 发布 Spark 2.0,在 THREE.js 与 WebGL2 的 3DGS 渲染器中加入 Level-of-Detail 系统,按视角自动调整细节并经网络流式加载数据。
World Labs 发文提出 3D 是继文本之后人与机器描述和操作物理、虚拟世界的通用接口,并把 3D 表示类比为代码、神经图形类比为编程语言、仿真引擎类比为芯片。
World Labs 发布 World API,开发者可通过接口调用其多模态世界模型 Marble,从文本、单图、多图、360° 全景和视频生成可导航的 3D 世界。
关注价值:世界模型从演示走向可调用接口,机器人仿真环境的生成成本与规模是这条最直接的影响面。
World Labs 将两个月前预览的多模态世界模型 Marble 面向所有人开放,可输入文本、图像、视频或粗略3D布局生成完整3D世界,并支持交互式编辑、扩展与组合。
关注价值:从预览到全面开放并补上多模态输入与编辑导出,读者可据此判断生成式3D世界模型当前能做到什么程度。