应用于智能制造、工业机器人领域

From the founding to the present It is widely used in the field of mobile phone

新闻中心

联系我们

电话:0713-2115858 

          0713-2115868 

          0713-2115866  

          0713-2117622

新闻中心
当前位置: 首页 > 新闻中心
数据驱动的多相机触觉传感器,让机器人皮肤兼具触觉和视觉

      对于人类来说,“触觉”在日常活动时起着至关重要的作用。在拾取物体等任务时,人们通过触觉能感受到物体的硬或软,轻或重,温暖或寒冷,触摸与视觉相结合,让我们避免损坏它们。在科技迅速发展的今天,已诞生了能够走、跑、看、说、听等功能的机器人。但机器人触觉的研究还相对落后,需要开发新技术来克服其中一些问题。


       瑞士苏黎世联邦理工学院(ETH)的研究团队最近开发了一种多相机光学触觉传感器,该传感器提供了施加到其表面的接触力分布信息。与大多数现有的基于摄像头的触觉传感器相比,该传感器无需使用诸如镜子之类的附加反射组件,因此具有更大的接触表面和更薄的结构。在arXiv预发表的一篇论文(题为:Towards vision-based robotic skins: a data-driven, multi-camera tactile sensor)介绍了这种可用于机器人皮肤的多相机触觉传感器。


数据驱动的多相机触觉传感器,让机器人皮肤兼具触觉和视觉

                          多相机传感器。 图片提供:Trueeb,Sferrazza和D’Andrea


      “与现代相机可以实现的视觉功能相比,机器人的触感还非常欠发达。” 该项研究的研究人员Camill Trueeb表示:“基于视觉的触觉皮肤旨在弥补这项欠缺,利用视觉传感器和先进的人工智能算法,该触觉传感器可以获得大量数据和计算能力。”


      多相机触觉传感器由四个摄像头组成,这些摄像头位于柔软、透明的材料下面,该材料内部含有嵌入式的散布球形颗粒。摄像头能跟踪这些球形颗粒的运动,当有外力施加到材料上时,材料的变形会引发这些球形颗粒的运动。


       研究人员还开发了一种机器学习(ML)架构,该架构可以分析材料中球形粒子的运动。通过分析球形粒子的运动,该系统可以重建导致材料变形的力,也称为接触力分布。


      研究人员解释说:“我们使用相对便宜的相机,生成大量高分辨率的图像信息,总计提供约65,000像素的图像,这对数据驱动的触觉传感器非常重要。”


      多相机触觉传感器不仅能提供大多数现有机器人上用的标准力传感器能那样的总力值,还提供了施加在其柔软表面上的所有力的分布的反馈,从而能解耦法向分量和切向分量。由于独特的结构设计,与其他基于摄像头的触觉传感器相比,新型多摄像头触觉传感器因为不需要添加其他反射组件(例如镜子),而具有更大的接触表面和更薄的结构。


      研究人员表示:“使用多个摄像机可以使用这种类型的触觉传感器能覆盖任意形状的较大区域。这项工作也显示了如何将在子集摄像机上获得的数据转移到其他摄像机上,从而高效获得一种可扩展数据的方法。”


      由AI驱动的多摄像头传感器最终可以扩展到更大的表面,从而创建柔软且可感应的机器人皮肤。在最近的论文中,研究人员讨论了如何将其机器学习体系结构进行改编优化,从而在将来促进其在机器人上的应用。


      对于未来的打算,研究人员表示,他们现在计划扩展传感器的功能,以重建与复杂和通用形状的物体接触的信息。“我们认为传感算法的开发应始终考虑到数据效率组件,以促进在机器人技术中的广泛使用,因此,我们也将在未来的工作中朝这个方向发展。”