成果速递
近日,由北京大学武汉人工智能研究院、北京大学人工智能研究院、北京通用人工智能研究院、北京大学工学院和伦敦玛丽皇后大学联合组成的科研团队取得一项重大突破。
研究团队开发的F-TAC Hand成为国际首个同时具备全手高分辨率触觉感知和完整运动能力的机器人手系统,其相关论文——“高分辨率触觉感知机器手实现类人适应性抓取" (Embedding high-resolution touch across robotic hands enables adaptive human-like grasping)在国际顶级学术期刊《自然·机器智能》(Nature Machine Intelligence)正式发布。北京大学武汉人工智能研究院首席科学家朱松纯教授为本文的合作作者,本文通讯作者为北京大学武汉人工智能研究院具身智能实验室主任、北京大学人工智能研究院助理教授朱毅鑫。
这一突破性成果印证了中国科研团队在前沿领域的自主创新能力,也更标志着中国在人工智能和机器人技术领域已跻身世界前沿。该项成果对北武院推动机器人技术的场景应用创新具有重要意义。
图1. Nature Machine Intelligence 截图
论文链接(点击下方阅读原文):
https://www.nature.com/articles/s42256-025-01053-3
成果解读
随着人类的进化,手部的功能由攀爬转为使用工具,并逐渐掌握了精准抓握能力。手部既是人类改造自然与外界交互的核心器官,也是智能的核心载体。人的手部具有结构高度复杂、功能极为精密的特点,手部由27块骨骼和34块肌肉组成,提供了24个自由度的灵活性,对人类手部功能的研究是具身智能与机器人学科研的前沿领域。
人在拿取物体时涉及到“触觉反馈”与“运动功能”两大能力:触觉反馈包含运动觉(通过肌肉、肌腱和关节感知力量)与皮肤触觉(通过皮肤感知接触状态、纹理、温度、摩擦力等物理特性);运动功能包括运动学(研究关节的角度、位置及其运动的几何关系)与动力学(研究力和扭矩应该如何作用于关节和肢体,从而实现精确的运动控制)。
在以往的研究中,触觉反馈与运动能力的整合被认为是机器人研究领域中的关键挑战之一。F-TAC Hand通过传感器与结构一体化设计成功突破了这一瓶颈。首先,从硬件角度来看,如何避免触觉传感器的引入对机器人的运动灵活性造成影响是第一个难题,同时当前的触觉传感技术在覆盖率、分辨率和耐久性等方面仍难以满足实际应用需求。其次,即便获得了具备高分辨率触觉感知能力的机器手,如何高效地处理大量的触觉数据,并以此驱动每个关节协同运动,使其在高自由度空间中像人一样完成复杂的任务,依然是一个亟待解决的难题。
联合科研团队取得的成果是首次在保持完整运动能力的前提下,实现了机器手掌表面70%区域的高分辨率触觉覆盖,使机器人能够像人类一样通过触觉反馈进行精确操作和适应性抓取。
在缺乏丰富的触觉反馈的情况下,目前主流的机器手或抓取器难以应对动态环境中的复杂操作任务。论文第一作者、北京大学人工智能研究院博士生赵秭杭介绍道:"人类手部的灵活性和适应性很大程度上归功于其密集的触觉传感能力,这使我们能够精确感知与调整抓握过程。例如,人类在抓取一个装满水的杯子与一个空杯子时,抓握杯子的位置、角度、方式可能完全不同。然而,在机器人领域,如何在不影响运动功能的前提下实现全手触觉覆盖一直是一个难题。"(图2) 研究团队开发的F-TAC Hand解决了这一难题。高分辨率触觉传感器覆盖了该手部系统手掌表面70%的广大区域,空间分辨率达到0.1毫米,相当于每平方厘米约有10,000个触觉像素,远超目前商用机器手的触觉感知能力,如目前最先进的Shadow Hand仅在指尖提供单点力传感。
图2. F-TAC Hand 与人手比较
视频1. F-TAC Hand实时高分辨触觉感知能力
论文共同第一作者、北京大学人工智能研究院博士生李宇飏说:"机器手高度的关节灵活性会给控制算法带来极大挑战,我们通过开发一种生成人类多样化抓取策略的算法来解决这一问题。该算法基于概率模型,能够产生与人类非常相似的抓取方式,涵盖了人类常见的19种抓取类型。"
李宇飏进一步解释了F-TAC Hand的适应性智能机制:"多物体同时抓取是评估机器手灵巧性的重要基准测试,比单一物体要复杂得多。抓取单一物品可以通过双指夹持的方式实现,但当用一只手抓取多个物体时,需要做精确的全手接触检测并调整运动策略才能实现精准、稳定抓取。”
实验结果表明,当理论上最优的抓取策略在现实环境中遇到障碍时,F-TAC Hand能够在约100毫秒内感知情况并快速切换到替代策略,确保任务完成。为验证这一技术的实际效果,研究团队在600次真实世界实验中评估了F-TAC Hand的多物体抓取能力。结果表明,相比没有触觉反馈的系统,F-TAC Hand在面临执行误差和物体碰撞风险时表现出显著的适应性优势,平均成功率从53.5%提升至了100%。这种基于触觉的闭环反馈机制,使F-TAC Hand能够像人类一样,在不确定环境中保持高效灵活的操作能力,这对机器人在家庭、医疗和工业环境中的实际应用至关重要。
视频2. F-TAC Hand自适应多物体抓取能力
论文通讯作者、北京大学人工智能研究院助理教授、北京大学武汉人工智能研究院具身智能实验室主任朱毅鑫说:"我们的研究不仅是技术上的突破,更为理解智能的本质提供了全新视角。人类智能深深植根于身体的感知能力,尤其是手部的触觉体验对我们认知世界至关重要。F-TAC Hand的成果表明,丰富的感知能力对于机器智能的发展同样不可或缺。"
机器手作为人形机器人与外界交互的重要媒介,是机器人功能性的直接体现,需要“人手”参与的工作都是机器手的应用场景,在特定场景(如精密装配)中展现出超越人类手部的稳定性。由于其可提供超越人类手部稳定性的操作,该科研成果在对操作精度有极高要求的辅助手术、高精密组装类工作以及航空航天、应急响应等领域有广泛的落地场景。
这项研究成果有望推动机器人技术在医疗、工业制造、特殊环境作业等领域的落地应用。朱毅鑫博士表示:"未来我们将继续深化触觉感知与机器人控制的结合,探索更加智能的体感交互范式,为实现真正意义上的通用人工智能奠定基础。"
他进一步说,“近年来大型语言模型等基于纯计算的人工智能取得了显著进展,但它们在处理物理世界的实际交互任务时仍面临巨大挑战。我们的研究表明,真正的智能行为需要‘知行合一’。F-TAC Hand的成功为‘具身智能’开辟了新的研究方向,这种将高保真物理感知与智能控制系统结合的方法,代表了通向更高级别机器智能的重要路径。通过这项研究,我们不仅推动了机器人技术的发展,也加深了对智能本质的理解,这对构建下一代人工智能系统具有重要启示意义,也将为具身智能与千行百业融合发展,赋能我国经济、社会高质量发展,注入新质生产力。”
该研究工作得到了武汉市科创局和东湖高新区国家智能社会治理实验综合基地的支持。
文章来源:北京大学武汉人工智能研究院