北京时间6月3日晚八点,iCANX Youth Talks第100期邀请到了帝国理工学院生物医学机器人讲师张丹丹,北京大学助理教授韩梦迪,哈尔滨工业大学(深圳)教授邵奕天担任主讲,大连理工大学教授刘倩担任研讨嘉宾,北京航空航天大学教授王党校担任主持人,期待你一起加入这场知识盛宴。

在机器人系统中实现具身智能,需要具备类人、具有情境感知能力并与物理环境紧密耦合的感知能力。本报告介绍了我们在多模态传感器设计、快速制造及系统集成方面的最新进展,旨在赋予智能机器人在非结构化、接触密集环境中进行感知、推理与灵巧交互的能力。我们首先介绍VitacTip,这是一种仿生视觉-触觉融合传感器,模拟人类皮肤的集成感知能力。VitacTip 通过将视觉与触觉感知集成于紧凑的弹性体结构中,能够高保真地感知接触的几何形状、纹理与压力,适用于动态、不可预知的复杂环境。基于此,我们进一步开发了一个多模态感知框架,结合生成式学习,实现传感器数据的实时跨模态融合与解释,显著增强了系统的感知稳健性与泛化能力。接下来,我们提出CrystalTac传感器家族,这是一类基于视觉的触觉传感器(VBTS),具有按需设计的感知机制,并采用多材料一体化3D快速打印工艺制造。CrystalTac 在柔性弹性体中嵌入三维标记网格,利用内部摄像头进行追踪,从而实现对法向力和切向力的高分辨率重建。该平台具有良好的可扩展性与结构灵活性,适用于宏观机械臂与微尺度操作工具。在此基础上,我们重点介绍MagicTac,这是 CrystalTac 系列中一款采用“魔方”结构灵感设计的高分辨率视觉触觉传感器。MagicTac 采用三维多层网格结构,显著提升了空间分辨率,可精准感知复杂外部接触信息。传感器通过多材料增材制造技术一次成型,具备低成本、可重复制造与低组装门槛等优势。我们通过变形场与光流重建实验对其性能进行了验证,展现出优越的触觉感知能力。这些传感器系统已成功集成至柔顺型机器人末端执行器中。例如,TacFR-Gripper 是一款可重构的鱼鳍状夹爪,内嵌触觉皮肤,支持自适应的手内操控与实时反馈。在此基础上,我们开发了MagicGripper,这是一款高度集成的末端执行器,结合了微型 MagicTac、视觉感知与近距离感应模块,能够实时同时感知接触动态、物体姿态及运动轨迹。我们在多种任务中验证了上述系统的性能,包括远程装配、接触对齐与复杂环境中的自主抓取。结果表明,在定位精度、力感知与操作鲁棒性方面均取得显著提升。综上所述,我们的研究为实现感知丰富、物理具身的智能机器人迈出了关键一步。通过传感器架构创新、快速一体化制造与多模态系统集成,我们推动下一代机器人具备类人般的灵巧性、适应性与情境感知能力,以胜任复杂、人本导向的实际任务场景。
张丹丹博士是伦敦帝国理工学院生物工程系的生物医学机器人讲师,同时也是该校 I-X 人工智能与机器学习项目的讲师。她的研究跨越机器人、生物医学与机器学习等多个学科领域。目前,她的研究重点是将多模态传感融合与物理/人工智能相结合,以实现灵巧操作,并推进面向生物医学应用的微型机器人技术。她的目标是提升多尺度机器人系统的自主性水平,推动下一代精准医疗与个性化家庭护理的发展。张博士在学术研究方面表现卓越,已在国际顶尖期刊与会议上发表超过 40 篇同行评审论文,涵盖《IEEE Robotics and Automation Magazine》、《IEEE Transactions on Robotics》、《Science Robotics》(AAAS 出版)、《Advanced Science》、《Communications Physics》、《Matter》、《ACS Photonics》和《Advanced Optical Materials》等。她的学术影响力还体现在多项重要奖项的获得上,包括因其开创性的博士研究而荣获的“英国最佳机器人学博士论文奖”,以及“亚马逊杰出机器人研究博士奖”。作为第一作者,她的研究还获得了包括 IEEE 国际机器人与自动化会议(ICRA)在内的多个顶级国际会议的最佳论文奖,并在 IEEE IROS 和 MARSS 等会议上获得了优秀论文入围奖,彰显了她在机器人与人工智能领域的研究深度与广度。2025 年,张博士入选英国“AI Visionaries: Leading Health Innovation for Women”女性健康创新领袖计划,旨在表彰在人工智能与生物医学工程领域推动健康创新的杰出女性研究者。

柔性触觉传感器在人机交互、机器人操控和生物医学等领域具有重要作用。然而其柔性特质使其与晶圆器件、商用芯片或电路板的集成面临挑战。本研究提出了一套柔性模块化触觉传感器的制造方法、器件设计、集成策略及生物医学应用方案,成功实现了与商用电子器件的协同工作。该传感器采用光刻定义的金属/合金细丝作为传感元件,通过三维空间排布这些元件,实现了温度、法向力与剪切力的高精度、无迟滞且解耦的测量。将此类传感器与商用电子器件共同集成于柔性印刷电路板,可构建多种柔性电子系统,实现皮肤界面的无线测量、生物力学信号的连续监测以及触觉信息的空间映射。这种柔性模块化触觉传感器同时拓展了微电子学和宏电子学领域的功能元件体系。
韩梦迪,北京大学未来技术学院生物医学工程系助理教授,研究员,博士生导师。2012年本科毕业于华中科技大学电子科学与技术系,2017年博士毕业于北京大学微纳电子学系;2015-2017年作为联合培养博士生就读于美国伊利诺伊大学材料科学与工程系,2017-2020年于美国西北大学Querrey Simpson生物电子研究所从事博士后研究。已发表SCI论文百余篇,其中第一/通讯作者论文发表于Nature Electronics、Nature Biomedical Engineering、Science Translational Medicine、Science Robotics、Science Advances、PNAS、Advanced Materials等期刊。获Microsystems & Nanoengineering 青年科学家(2020)、《麻省理工科技评论》亚太地区35岁以下科技创新35人(2021)、世界顶尖2%科学家(2023)、iCANX青年科学家(2024)、亚洲青年科学家(2024)等奖励及荣誉。韩梦迪课题组致力于研发微机械生物电子器件,助力电子皮肤、无线生物传感、微型机器人等领域的发展。

触觉感知赋予了人类与环境灵巧交互的能力。然而,即便是简单的触碰交互,也会在人类肢体中产生复杂的触觉信号。其中,宽频的动态触觉信号以机械波的形式在肢体表层远距离传播,具有大范围、异构的时空分布。本报告将分为两个部分。第一部分介绍产生这些动态触觉信号的物理原理和对应的人体触感机理,并展示如何捕捉并还原信号在肢体上分布,以及如何从这些信号中解码出丰富的触觉交互信息。第二部分将介绍受人类动态触感机理启发而设计的智能触觉传感系统,如何使其具备类人的灵敏触觉感知能力,以及在生产和生活中对应的潜在应用。
邵奕天,博士,洪堡学者,哈尔滨工业大学(深圳)计算机科学与技术学院教授/博导,深圳市鹏城孔雀计划B档特聘岗位。兼任于哈尔滨工业大学(深圳)国际人工智能研究院,信息物理系统CPS研究中心,以及智慧农场技术与系统全国重点实验室。回国前任职于德国德累斯顿工业大学电子与计算机工程学部W1助理教授,兼任德国精英集群中心Centre for Tactile Internet with Human-in-the-Loop (CeTI) 及6G-life研究中心助理教授。以触觉学(Haptics)为基础长期从事机器人触感,人机交互,可穿戴设备等相关方向的研究,成果发表在包括Science Advances,PNAS,Nature Materials, Device (Cell Press) 等知名期刊上。25年发表的Adv. Mater. Technol. 获选封面文章。22年在Springer出版学术专著1部。21年获触觉学领域最佳博士论文奖。在触觉学领域国际顶级会议IEEE World Haptics和IEEE HAPTICS获7个奖项与提名。与美国Meta Reality Labs合作的研究发表了3项专利。20年于美国加州大学圣芭芭拉分校电子与计算机工程系获得博士学位。19年在美国微软研究院任实习研究员。13年于天津大学电气工程及其自动化学院获得工学学士学位。任Frontiers in Robotics and AI评审编委。


特别声明:本文转载仅仅是出于传播信息的需要,并不意味着代表本网站观点或证实其内容的真实性;如其他媒体、网站或个人从本网站转载使用,须保留本网站注明的“来源”,并自负版权等法律责任;作者如果不希望被转载或者联系转载稿费等事宜,请与我们接洽。
直播预告:2024全球工程前沿全球十大工程成就发布会 Engineering
SEL 前沿报告:From energy to (soil organic) matter ——土壤生态学系列讲座直播预告
FASE 前沿直播:土壤健康究竟是沟通的有效术语还是无意义的概念?还是两者都是?
