首页
学习
活动
专区
圈层
工具
发布
技术百科首页 >VLA 模型 >VLA 模型如何融合 3D 空间感知能力?

VLA 模型如何融合 3D 空间感知能力?

词条归属:VLA 模型

早期 VLA 多依赖固定视角的二维图像输入,在遮挡与精细操作场景下容易因视觉信息缺失而误判。2026 年以来,3D 空间感知成为 VLA 感知升级的重点方向:

  1. 主动视角选择:复旦大学 2026 年 1 月提出的 ActiveVLA,根据任务需求在三维场景中选择更有利的虚拟视点,并放大关键操作区域,降低遮挡与视觉细节缺失对动作决策的影响。
  2. 多尺度点云融合:法国 Inria 2026 年 5 月提出的 PointACT,通过引入多尺度三维点云,使机器人在生成动作时兼顾局部几何细节与整体空间布局,提升精细操作中的空间判断能力。
  3. 三维高斯表征:南洋理工大学 2026 年 7 月提出的 VistaVLA,利用三维高斯表示将物体的语义信息与其三维位置、形状关联起来,为操作提供更完整的空间结构理解。

这些工作的共同方向,是让 VLA 从"固定视角看图"走向"三维空间感知与多模态融合对齐",从而支撑更精细、更可靠的操作。

相关文章
机器人感知技术技术突破与未来挑战
机器人感知技术(Robotics Perception Technology)是机器人理解物理世界、进行自主决策与精准交互的“眼睛与神经末梢”。过去的机器人感知多停留在“几何测量与特定目标检测”阶段(如单传感器几何重建、特定标签识别)。随着具身智能(Embodied AI)浪潮的爆发以及 Vision-Language-Action (VLA) 大模型技术的成熟,感知技术正在由“视/听单模态”向“多模态具身语义表达”与“高阶物理特性感知”跃迁。
共赢之路
2026-10-13
1810
模拟大脑功能分化!北大与港中文发布Fast-in-Slow VLA,让“快行动”和“慢推理”统一协作
作者简介:由来自北京大学、香港中文大学、北京智源研究院、智平方的老师同学联合研究,作者包括博士生陈浩、刘家铭、顾晨阳、刘卓洋,通讯作者为北京大学仉尚航。北京大学 HMI 实验室长期致力于具身智能和多模态学习领域的研究,欢迎关注。
机器之心
2025-07-12
7830
当前VLA模型的概述及解释
视觉语言动作模型(VLA)正成为具身智能领域的一个关键技术方向,简单来说,旨在打造一个“看得懂、听得懂、能行动”的机器人通用大脑,使其能像人一样,根据视觉和语言指令完成复杂的物理操作。
索旭东
2026-05-09
1.5K0
“大模型”研究风向变了!从这120篇顶刊顶会看最新研究趋势......
想发大模型论文,却还在“模型规模”上打转?那你跟顶会大概率无缘了!研究风向已经变了, “能力深化与场景适配”才是王道。
Ai学习的老章
2026-03-27
8210
具身智能元年:让AI长出“身体”——多模态空间感知与机器人控制实战指南
【机器之心/IEEE Spectrum综合报道】 2026年2月,北京智源人工智能研究院联合多家国际顶尖实验室正式发布《2026十大AI技术趋势》年度报告。报告明确指出:“人工智能的演进核心正发生关键转移:从追求参数规模的纯语言学习,迈向对物理世界底层秩序的深刻理解与建模。” 与此同时,全球科技巨头在具身智能(Embodied AI)领域的军备竞赛全面白热化,大模型正式从“屏幕里的对话框”走向“物理世界的实体躯壳”。具备空间感知、动态交互与复杂任务规划能力的具身智能体,正在重塑制造业、仓储物流与家庭服务场景。
用户12583550
2026-07-06
5030
点击加载更多
问题归档专栏文章快讯文章归档关键词归档开发者手册归档开发者手册 Section 归档
领券