前往小程序,Get更优阅读体验!
立即前往
首页
学习
活动
专区
工具
TVP
发布
社区首页 >专栏 >我把无人车的避障技术装进了iPad,刺激手部为盲人导航,杂货间也能畅通无阻

我把无人车的避障技术装进了iPad,刺激手部为盲人导航,杂货间也能畅通无阻

作者头像
大数据文摘
发布2020-07-28 15:03:06
3350
发布2020-07-28 15:03:06
举报
文章被收录于专栏:大数据文摘大数据文摘

大数据文摘出品

作者:刘俊寰

根据世界卫生组织的数据,截止去年,全世界共有3900万人失明,2.5亿人视力受损。

对于这些人来说,出行是亟需解决的首要大事。目前市面上已经有多个针对盲人的出行工具,比如智能手杖等。

但是这些工具的适用场景更多是在室外,在狭窄的室内,要使用一根长长的手杖,就显得有些局促了,于是,这个名叫Shane Wighton的YouTube博主就利用iPad做了一款便于在室内行走的工具。

老规矩,先来看看效果如何:

可以看到,在高处有木板的情况下,也能顺利低头行进:

oops,撞到了一个膝盖高的工具箱。别担心,这是Wighton想看他的妻子“翻车”,故意设置的。(默默地又吃了把狗粮)

完整(无字幕版)视频戳这里:

有网友评论道,“你应该管这叫‘Eyepad’”。

也有网友开玩笑地表示,“我的盲人朋友看到这个一定会很开心的”。

其实前阵子大火的百发百中篮球框和脑洞大开的自动剪头发机器也是这个YouTube博主发明的,真想敲开他的小脑袋瓜看看里面都装了些啥。

在这次的项目中,Shane Wighton表示,他所用的这个方法不是最简单的,但却是在他看来最有挑战性的。既然如此,那我们也就来看看这个方法是怎么实现的~

等等!那个“保温杯”是什么?

在上述演示画面中,你可能会注意到,和正常的iPad最大的不同是,Wighton的iPad上配置了一个像保温杯一样的东西,别小看了它,这其实就是整个导航系统的关键。

越看越像保温杯?

在视频中,Wighton介绍道,这个小东西看起来不起眼,动手做起来也还是有点复杂,主要包括了以下材料:

  • 一个微处理器(microcontroller);
  • 蓝牙连接模块
  • 两个步进马达驱动器(stepper motor driver)。

如果要把这个导航系统真正做成一个产品的形式,可能还需要加上一块电路板

同时,Wighton表示,考虑到和iPad的尺寸匹配,和目前的运作情况,他也没有再去进一步地把整个设备的尺寸进一步缩小处理。

但是,可以看到,这个“保温杯”有点太抢眼了,毕竟用小指针向上运动刺激手指关节也不需要特别大的动力。

但是管他呢,现在这个“保温杯”造型还蛮吸睛的。

其他还需要的零部件和购买链接都在视频下方的介绍中贴出来了,大家感兴趣的可以按照这个去采购一波:

部分零件清单

iPad还能这样玩?感觉自己买了个假货

解决了“保温杯”之谜后,我们首先来看看Wighton是怎么利用iPad的LiDAR来实现障碍物识别的。

在这方面,Wighton首先就遇到了史上最大的困难——他没有搭载了LiDAR的最新版iPad

于是他就和妻子进行了一番协商:

I don't have a choice here. I have to get this. It's to help humanity.

Really? Humanlity? Don't think about it.

似乎突然能理解为什么他想看妻子“翻车”了。(手动狗头)

根据LiDAR的工作原理,它能够计算出光线从镜头射向物体、再从物体返回镜头的时间,再考虑到光的传播速度,整个过程大约只需要25纳秒

也就是说,根据这25纳秒内发射再返回的光线,就能够知道障碍物距iPad有多远了。这也是自动驾驶汽车的技术原理

居然还配了Apple Pencil,该打!

可以简单试想一下具体场景的工作情况,比如在如下场景,标黄的墙和标红的椅子是障碍物,要避开,能够通行的是中间的青色区域

在视觉上识别障碍物和通路之后,还要把这种视觉信息转换成针对手指关节的刺激,比如,如果该障碍物离你很近,这个刺激可能就会比较大,相反,如果物体较远,给到的刺激也就相应较小。

于是,通过手部刺激,就“绘制”出了一张你周围的地图

这还不止,当换成俯视图时,我们会发现,还存在镜头看不见的地方,就是墙背后标黄的未知区域,要把已知区域和未知区域区分,在已知区域的分支下进行上述刺激转换,难度瞬间就蹭蹭蹭往上窜了不少。

接下来就是没日没夜的编程和设计,又看到了熟悉的工作场景:

准备就绪之后,我们打开iPad中的这款应用程序“HandEyes”,可以看到整个界面比较简洁,右侧就是简单的控制按钮,用以切换视角和镜头放大,当拿着iPad在屋里行走的时候,也能很方便地进行控制。

在左边,有一个红色按钮,这是对深度数据(depth data)的一个预览,能够帮助看清镜头前方的路况。不过,Wighton表示,要是iPhone也支持LiDAR的话,整个设备就可以再简便很多。

给手一个刺激,你就能“撬起”所有障碍

“看”的步骤搞定了,怎么把视觉信息转换成手部刺激呢?这就轮到“保温杯”出场了。

Wighton介绍道,与身体其他部位相比,我们的手相对而言就足以敏感,能够根据外部刺激正确辨别来源方向。

比如针对上述场景,就能转换成下图右下方蓝色区域内的刺激示意图:

也就是说,在每根手指的每个关节处施以不同强度的刺激,就能帮助更好地复现障碍物的方向和位置距离。

把这个原理图做出来大概就是这个亚子:

接下来的工作,就是没日没夜地组装“保温杯”了:

大致的过程差不多就是这样了,从效果上看,这个导航系统还是十分完美的,尤其是当熟用之后。

不过,根据Wighton的制作反馈,这个导航系统比他想象的还要难做。要是大家感兴趣,也可以自己动手试试~

除了利用AI检测障碍物,这个智能手杖还搭载了语音助手和谷歌地图

正如上文所说,这款EyePad的实用价值在室内更能明确体现,想要出门散步的话,可能还是要用到智能手杖了。

目前,为给盲人提供更为安全和便利的出行服务,国内外都已经发明了多项技术,比如这款智能手杖WeWalk,就能弥补EyePad在户外场景的应用缺失。

值得注意的是,WeWalk联合创始人Kursat Ceylan也是一位盲人,这不仅让他有了研发热情和动力,也使得WeWalk手杖能够更加贴合盲人自身所需要的各种服务

官网链接:

https://wewalk.io/en/

据Ceylan介绍,在障碍物识别上,这款手杖配备了AI技术,最远能够检测出160cm外、与使用者胸部高度齐平的物体。

同时,手杖还搭载了亚马逊的语音助手Alexa和谷歌地图,通过蓝牙连接,使用者可以与手杖语音交流,进一步护航盲人的室外出行。目前该手杖已支持英语、法语、意大利语、西班牙语、葡萄牙语、土耳其语和阿拉伯语。

除此之外,根据协助开发该产品的Jean Marc Feghali表示,他们不仅想要做一根“聪明”的手杖,还希望把手杖与运输网络和自动驾驶汽车进行融合。比如,WeWalk可以与交通信号灯互动,使用者在过马路的时候无需按下按钮,以及可以提醒使用者在公交车特定站点等待。

不管是EyePad还是智能手杖,技术正在为更多人做出贡献,这本身不就是一件好事吗?

本文参与 腾讯云自媒体分享计划,分享自微信公众号。
原始发表:2020-07-22,如有侵权请联系 cloudcommunity@tencent.com 删除

本文分享自 大数据文摘 微信公众号,前往查看

如有侵权,请联系 cloudcommunity@tencent.com 删除。

本文参与 腾讯云自媒体分享计划  ,欢迎热爱写作的你一起参与!

评论
登录后参与评论
0 条评论
热度
最新
推荐阅读
目录
  • 等等!那个“保温杯”是什么?
  • iPad还能这样玩?感觉自己买了个假货
  • 给手一个刺激,你就能“撬起”所有障碍
  • 除了利用AI检测障碍物,这个智能手杖还搭载了语音助手和谷歌地图
领券
问题归档专栏文章快讯文章归档关键词归档开发者手册归档开发者手册 Section 归档