卡内基梅隆大学的研究人员已经能够教机器人拾取透明或反光物体。这在过去一直是机器人面临的挑战,研究人员解决这个问题的方法是教机器人从彩色图像中推断形状。拾取透明和反光物体长期以来一直困扰着机器人,但新系统有望缓解这个问题。
该团队开发的新技术最酷的功能之一是它不需要复杂的传感器、大量培训或人工指导。相反,它主要依赖于嵌入在机器人手臂中的彩色摄像头。研究人员大卫·赫尔德说,死亡相机将红外光照射到物体上以确定其形状,该技术适用于不透明物体。透明和反光物体的挑战在于光线要么直接穿过表面,要么从表面散射出去,从而阻止深度相机计算出准确的形状。
但是,彩色相机可以看到透明和反光物体以及不透明物体。研究人员开发了一种能够根据颜色识别形状的彩色相机系统。使用该技术,研究人员能够训练系统模仿深度系统并隐式推断形状以抓取物体。
该团队使用不透明物体的深度相机图像与相同物体的彩色图像配对。训练完成后,彩色相机系统应用于透明的闪亮物体。基于这些图像,连同深度相机能够提供的信息,系统可以高度成功地抓住具有挑战性的物体。
Held 指出,有时手臂会错过,但它在抓取透明或反光物体方面的表现比任何以前的系统都要好。该系统仍然能够比透明或反射物品更有效地拾取不透明物体。该系统还能够抓取杂乱的物品。