用仿生眼引爆机器人寒武纪(4)
【作者】网站采编
【关键词】
【摘要】如果给机器人提供了目标地图,它自然就会按照地图走。视频中我们没有给它提供地图,而是它自己来控制行走路径。它能够边走边测地图,只要它走过一
如果给机器人提供了目标地图,它自然就会按照地图走。视频中我们没有给它提供地图,而是它自己来控制行走路径。它能够边走边测地图,只要它走过一个地方,它就能画好这个地方的地图。
我们用仿生眼和固定双目相机做比较。大家可以在视频后半段中看到,仿生眼和固定双目都对同一个平的地方画图。仿生眼画出来的图是一个平面图;固定双目画的图不是平的,产生了分层,这意味着固定双目画的图是有问题的。所以,仿生眼在无人驾驶上的用途也很明显。
迪士尼的仿生机器人
情感交互智能机器人是我们近期正在攻关的仿生眼应用。迪士尼的这个机器人的眼睛上是没有相机的,下面有个双目相机,我们通过双目相机来控制上面的眼睛。那么,未来我们计划能够让它真正用眼睛看见物体,和真的人类一样。
德国萨尔大学人机交互实验室——EyeCam
这个视频中展示的是德国团队最近制造的EyeCam。它也是在后面放置了相机,不是用前面的眼睛来看物体。
中科院上海微系统所——Bino-Sense
这个图像中展示的是我们现在正在做的Bino-Sense。预计大概两三个月以后,它就能像人眼一样可以动,即成为有视觉能力的眼球。
仿生鹰眼(左)和鹰捕食时的用眼方式(右)
我们也利用老鹰的眼睛来做仿生眼应用。上图中的仿生眼睛上有望远镜头和两个固定双目,因为老鹰的眼睛有两个中心视。在1000米高空的时候,老鹰用深的中心视看;在距离近的时候,老鹰用浅的中心视看。老鹰在天空盘旋的时候,它是用一只眼睛来看物体的。
鹰眼结构的相机
这是我们最近做的一个鹰眼结构的相机。我们可以看到,它有四个相机,分别是是望远、中望远、广角和红外的相机。这个鹰眼结构的相机还有光源和激光测距仪。有了这样的相机,在无人机或者在车上,我们都可以看很远的东西。如果要在深山老林里监测动物,或者要在西藏高原监测冰川,我们都会用到这一款机器。
高精度主动式三轴云台
另外,为了让大家更广泛地了解应用仿生眼的特点,我们做了一个通用平台,也是有三个自由度的。这个仿生云台可以放置各种传感器,它不仅具有摄像机拍摄的稳定性,还可以把转角传感器的各种信息和陀螺信息全部收集出来,与图像做匹配。
激光雷达(L515)(左)和固定双目相机(D435)(右)
这是英特尔的两个机器,左图是激光雷达,右图是固定双目相机。
我们用它们做了一个比较。左侧的视频没有加防震效果,右侧的视频加上了防震效果。画面差距很大,右侧的图像不仅很稳定,而且很清楚。
所以,尽管我们用的是别人的相机和激光雷达,有了这个稳定平台,对于拍摄也是非常有用的。但是,这和普通的稳拍完全不一样。稳拍不可能自己找出角度,与图像做配置。
仿生眼将来会在无人驾驶、无人机等等各种运动平台上发挥非常好的效果。机器视觉一旦普及,就会产生大量的机器人和人工智能设备的爆发。这和寒武纪生命大爆发是一样的。我们认为,现在,就是机器人的寒武纪时代。
谢谢大家!
原标题:用仿生眼引爆机器人寒武纪 | 张晓林
来源:格致论道讲坛
编辑:观山不易
文章来源:《中国体视学与图像分析》 网址: http://www.zgtsxytxfx.cn/zonghexinwen/2021/0707/678.html