首页
学习
活动
专区
圈层
工具
发布
技术百科首页 >VLA 模型 >VLA 模型如何处理触觉与力反馈信息?

VLA 模型如何处理触觉与力反馈信息?

词条归属:VLA 模型

在接触密集型操作(如擦拭、插拔、切割)中,仅靠视觉难以感知接触状态与力度,触觉与力反馈的引入成为 VLA 的重要补充:

  1. 触觉标注视觉输入:密歇根大学 2026 年 6 月提出的 TAP-VLA,在视觉图像上标注由触觉传感推导出的力方向,在不改变 VLA 架构的前提下引入接触反馈,提升接触密集操作的性能。
  2. 快慢分层力控:TARS Robotics 的 OmniVTA 采用分层快慢机制——慢系统预测接触变化并规划动作,快系统以 60 Hz 的触觉反射控制器根据预测与实际反馈的差异及时修正动作,帮助机器人恢复中断的接触并避免用力过度,在擦拭、切菜等任务上取得 80% 以上的成功率。
  3. 视觉与触觉的分工:当前最佳实践是让 VLA 负责接近阶段(识别物体、规划轨迹),由力/触觉策略负责接触阶段(力调节、插入、手内操作),因为语言骨干对接触动力学难以提供有效先验。
相关文章
效率提升25%,灵巧操作数采困境被「臂-手共享自主框架」解决
实现通用机器人的类人灵巧操作能力,是机器人学领域长期以来的核心挑战之一。近年来,视觉 - 语言 - 动作 (Vision-Language-Action,VLA) 模型在机器人技能学习方面展现出显著潜力,但其发展受制于一个根本性瓶颈:高质量操作数据的获取。
机器之心
2025-12-18
8810
遥操作:手把手教机器人干活
先说结论:具身智能的瓶颈不在算力,而在数据。机器人要学抓取、叠衣、装配,离不开海量真机演示,而遥操作正是目前最高效的真机数据生产方式。
RabuPaw
2026-08-25
1520
触觉感知赋能机器人灵巧操作
在机器人先驱 Michael Yu Wang 教授的带领下,DAIMON Robotics 开发了一个用于物理 AI 的大规模全模态数据集,旨在加速通用机器人基础模型在现实世界中的部署。
用户11764306
2026-06-06
3390
(译)SDL编程入门(20)触力反馈
我们知道了[如何用SDL使用操纵杆],现在我们可以使用新的触觉API来使控制器震动。
arcticfox
2021-01-06
8860
深度学习主流方法概述
深度学习是基础学习机制,简单来说,深度学习是机器学习的一个子集,通过构建包含多个处理层(即“深度”)的神经网络模型,来自动从海量数据中学习更抽象、更高层级的特征,从而让机器具备“理解”和“决策”的能力。
索旭东
2026-05-22
3920
点击加载更多
问题归档专栏文章快讯文章归档关键词归档开发者手册归档开发者手册 Section 归档
领券