未分类

蚂蚁灵波开源触觉模型 三类传感器统一表征 换硬件免重采数据

要点

把触觉传感器装到灵巧手上,仅仅是起点。真正麻烦的是换一个传感原理、换一种触点布局,之前积累的触觉经验就得重新采、重新训——这也是触觉数据至今无法像图像数据那样从公开语料里直接获取的原因。11月10日,蚂蚁灵波把这条链路上最靠后的一段做成公共资产:开源触觉基础模型LingBot-…

把触觉传感器装到灵巧手上,仅仅是起点。真正麻烦的是换一个传感原理、换一种触点布局,之前积累的触觉经验就得重新采、重新训——这也是触觉数据至今无法像图像数据那样从公开语料里直接获取的原因。11月10日,蚂蚁灵波把这条链路上最靠后的一段做成公共资产:开源触觉基础模型LingBot-Touch,把磁触觉、视触觉、压阻式三类传感路线统一到同一套触觉表征上,模型、代码与技术报告同步开放,采用Apache 2.0许可。

与只讲能力指标的介绍不同,官方开源仓库本身透露的信息更接近工程界关心的东西:这个模型究竟怎么把三种差异极大的传感器接进来。仓库给出的路径是模态专用tokenizer加共享Transformer——每种传感原理先由各自的编码入口处理原始信号,再把不同布局的触点映射到统一的标准指尖坐标空间,由共享Transformer学习接触位置、受力及其随时间的变化,最终输出统一的触觉Token。坐标映射这一步有明确的工程约定:三维触点坐标先经旋转与参考原点对齐、按参考半径归一化,信号值的XY分量归一化到负一至一区间、Z分量归一化到零至一区间;官方特别说明校准参数必须来自完整的触点几何与参考模板,而不是当前这一段触觉数值。

触点密度的不一致也被当作一等问题处理。仓库为每种模态列出可用的每指点数选项:磁触觉支持96、76、64、48、32、24个点,压阻式支持61、16、9个点,视触觉支持200、96、32个点,其中61点压阻布局的拇指可使用124个点;实际使用中把传感器重采样到兼容的分辨率与几何分布,还可能进一步提升表征质量。官方给出的对比是,XHand适配器把120点数据按120到96点的映射处理,效果优于直接使用原始120点数据,但这一映射只适用于已验证的点序与信号轴约定,硬件或SDK一旦改变排列方式,即便张量形状相同也必须重新验证。

输出怎么用,官方给的建议也值得记一笔。推理结果除潜表示外,还保留每个Token的时间地址、手指索引和三维空间位置。仓库明确建议用基于注意力的查询来聚合表示,通过交叉注意力提取任务所需信息,而不推荐逐Token线性投影或均值、最大值池化,理由是共享Transformer的自注意力已经把其他触点与其他时间位置的信息融入了单个Token,不能再把它当成只对应单个触点的独立测量。仓库当前提供的是冻结的target encoder与特征提取工具、预训练权重与数据接口指南,示例覆盖Sharpa与XHand两类手共120个单手输入文件;完整的预训练训练流水线并未包含在这一版本中。

把这件事放进更大的开源脉络看,方向更清楚。2026年世界互联网大会乌镇峰会首次把”开源开放”写入峰会主题,主论坛发布《携手构建全球开放人工智能行动倡议》,围绕开放发展、安全可信、参与治理、互利包容提出18条行动倡议,”互联网之光”博览会展示发布1000余项新技术新产品,100多款具身智能机器人现场实景作业。政策端也在同步铺垫,今年9月工业和信息化部印发《”人工智能+软件”专项行动实施方案》,提出支持重点开源项目在社区首发,设立智能操作系统等领域开源专区,并把开源贡献纳入科研评价与人才认定体系。在这种环境下,具身智能模型以开源方式提供基础能力,正成为把”同一套智能在不同本体、不同任务间复用”这条路径落地的方式。

真正的短板同样清楚,而且被反复指认。两会期间有代表提出,我国具身智能正处在技术爆发与产业导入的交叉阶段,要实现领跑亟需突破多重瓶颈,突出堵点包括”大脑—小脑—肢体”尚未高效协同、高保真多模态物理交互数据稀缺、行业级数据共享机制缺位、标准体系缺乏,硬件接口标准不统一直接阻碍规模化应用。另有研究机构在梳理全球技术演进态势时,把开源社区影响力有限、高质量交互数据供给不足、标准化与开源化程度不够列为制约因素,并主张建立高层级数据汇聚与治理主体、制定多模态数据采集与标注规范。这套判断与触觉开源的现实处境是吻合的:模型层可以一次性做成公共资源,但传感器厂商各有路线、触点布局各不相同、硬件一致性难以保证,采集端的数据质量与可比性,仍然是绕不开的环节。

从产业侧看,围绕这一层能力的落地已经开始验证。据乌镇峰会披露的信息,LingBot系列模型开源9个月下载量已突破220万,GitHub星标数超过3.3万,相关工作被多家海外团队引用并做了二次开发:斯坦福大学OpenWAM项目把LingBot-VA模块改造后用在自己项目里,韩国FastOPD研究拿LingBot-VLA充当教师模型,瑞士洛桑联邦理工学院则基于LingBot-Map去做珊瑚礁的三维重建。落地场景方面,机器人智慧药房方案已在上海国大药房多家门店常态化运营,机器人在80厘米宽的窄通道内自主完成从订单接收到商品交付的连续作业,无需改造陈列或门店布局;首届具身大模型挑战赛线上初赛吸引来自13个国家、648所高校及企业的1855支队伍参赛,参赛选手总数达3252位。开源之后,模型统一表征解决的是”接口”问题,而接口能否在不同硬件、不同数据标准之间真正通用,取决于采集与硬件侧能否同步收敛——这一点在触觉上尤其明显,因为触觉数据目前不存在可以直接取用的公开语料库。

免责声明本页信息整理自互联网公开渠道,仅供资讯参考,不构成任何投资或商业决策依据;相关产品参数、企业信息可能存在滞后或误差,请以厂商官方发布为准。如内容涉及版权、准确性或侵权问题,请联系 981209856@qq.com,我们将第一时间核实处理。

沈砚清

沈砚清,参与大观门户各频道的选题与稿件整理。