街景车弱爆了,照片游技术会取而代之?

尼泊尔发生了本世纪陆地第五次八级大地震,加德满都12座世界遗产建筑被不同程度损毁,尼泊尔专家称能工巧匠需要用大约10年时间才可修复这些古迹。在他们实现这一目标之前,百度拿出了一个快速解决方案:基于照片游技术,号召全球网友上传加德满都相关景点照片,尝试用技术在虚拟世界对被损毁的景点进行360°还原。这听上去是一个巨大的“拼图”工程,好在有一项名为“照片游”的技术,而这项技术未来甚至有望取代街景车,做到真正还原世界每一个时刻的每一个角落。

照片游技术收集和还原真实世界

百度地图还原加德满都的计划,使用被称为照片游的核心技术。这个技术并不难解释清楚:首先,百度收集用户手里海量的关于某个景点不同角度、不同时间、不同特征的风景照片;其次,通过图像技术对海量照片进行筛选和三维建模,把平面还原成空间;再次,通过智能游览路径规划算法,生成一条最佳游览路径模拟真人游览;最后,利用照片渲染技术,对某些缺失的角落进行修补插入虚拟照片。

照片游技术所以来的四项基本技术,每一个都已被应用在成熟应用之中。

百度、Google地图很早就有UGC景点相册功能,用户可选定一个地点上传对应照片,只不过主要目的是分享给其他用户。基于平面图像的3D建模,是街景应用的核心技术,只不过它的照片素材是街景车等专业取景器拍摄而来。

智能路径游览规划算法主要是利用大数据分析和图像识别算法,分析出哪些角度更受用户亲睐,哪些位置的人流最多,进而得出景点最合适的虚拟游览路线,百度地图热力图便是基于人群特征的地图技术。照片渲染技术在《返老还童》《速度与激情7》已在大量电影中被应用,一些照相馆提供的照片修复服务所使用的软件同样应用了这个技术。

基于UGC的照片游技术已经被应用在Google地图和百度地图之中。百度与Google最核心的不同是智能路径规划算法和图片渲染这两部分,百度除了在空间上还原之外,还可以让用户看到不同时间状态下古迹的不同姿态(阴晴、白天傍晚、雨雪等),这主要基于对用户上传照片的光线强度分析。此前百度照片游技术已上线22个景点的街景,笔者体验感觉还不错。

上述所有技术都离不开关键的几个基础技术:大数据、机器视觉和人工智能。用户上传的海量照片与街景车的规范照片比杂乱数倍,需要剔除无用、重复照片,筛选对于还原有效的照片,这需要图像识别和大数据技术;在还原时不可能人工去拼接需要机器自动还原为3D,路径规划和图片渲染则需要基于图像素材情况进行自动的规划,这需要人工智能技术。当然,机器视觉本身是基于大数据和人工智能技术。

照片游技术还有哪些使用场景?

照片游技术还在探索阶段,目前仅仅用于少部分景点的虚拟街景生成。随着图像识别技术、图像渲染技术、三维建模技术和人工智能技术的发展,它将不断成熟,具有巨大的应用潜力,我甚至认为照片游技术可以与街景技术、电子地图技术并列,成为未来的核心地图技术之一,因为它可以低成本、高效率、无死角地帮助人类把物理世界映射到虚拟世界,而这是从地图第一天诞生其人类一直都有的愿望,并且今天愈发强烈。

典型场景1:还原世界的每个时刻

在加德满都被毁之后,基于街景车的专业取景已无可能,只有基于旧照片进行还原,利用互联网的UGC能力可收集到全球海量照片,照片游技术则可以实现还原。尽管在加德满都被损毁之后,其他重要旅游经典应该会有意识加快街景建设。不过别忘了,有目的的街景建设都只能还原某个时刻的街景,比如杭州西湖春夏秋冬各不相同,只有通过照片游才可还原不同时间点的街景。

还有,除了加德满都,世界上还有大量景色已经无法还原,且存在可观数量的照片,比如三峡工程蓄水后被淹没的沿线城市、沿线风景。哪怕是你所生活的城市,几年之后你再回头来看,恐怕都会面目全非,人类建设大跃进正在淹没一代又一代记忆。不过这个星球每时每刻都在被不同的人从不同角度拍摄进去,从室内到室外,海量照片未来都可能成为“照片游”还原的素材。而这些还原后的结果则可以被应用到景区导览、人文社科研究、用户还旧寻幽探古,等等。

典型场景2:更低成本的街景制作

街景技术已经出现近十年了,不过你会发现你所在地区可能并不在街景地图之中,就算在可能已是两年前的数据,店铺、路段什么的可能都已经认不出来了,相对于电子地图而言,街景地图不论是在覆盖范围还是更新频率上,都差距甚大。原因很简单:街景制作成本太高了。最典型的数据收集设备是街景车,此外还有自行车、头戴式、背包式的街景拍摄器。不过它们都需要大量专业人力,并且收集速度是非常慢的。

照片游技术可以部分取代现在的街景制作技术,它成本更低,更重要的是,速度更快,每个具有拍照设备的人都成为街景收集器,只要他们愿意贡献数据——现在是主动上传,未来或许是对海量云端相册照片进行去隐私处理后的利用。总而言之,照片游是更低成本、更高效率的众包街景制作技术。

典型场景3:室内街景从点到面

过去的街景几乎都是室外部分,并不是室内街景没需求,相反室内虚拟游览、室内导航的需求可能更甚,比如商场和博物馆。

室内街景没怎么做,我想主要有两个原因:室内诸多街景采集设备都失效了,街景车跑步起来,头上戴个街景采集器估计会被打。室内更容易触犯用户隐私,室外距离远人群密度低尚出现过Google 街景拍摄到换衣服女人遭起诉事件,室内就更容易出现这样的事件了。尽管Google、百度在过去做过博物馆、艺术馆的内部街景浏览,不过都非常少,并且为此付出了巨大的数据采集成本。

而照片游技术基于用户拍摄的照片,因此并不存在街景车跑不起来的限制。隐私问题在机器视觉技术成熟到一定成熟完全可以对人脸进行自动马赛克处理。而室内定位技术的成熟也给室内街景虚拟路径规划提供了更大的可能,百度已投资芬兰室内导航公司IndoorAtlas,iBeacon等室内定位技术正高速发展。总之,未来我们世界打开手机地图查看商场虚拟导航,并不是吃人说梦——这些导航都是基于用户上传的室内照片生成。未来互联网公司则可基于室内街景开展O2O体验式购物、O2O体验式公民博物馆,虚拟历史教育等等。

照片游技术未来还有哪些发展方向?

照片游技术才刚刚开始,它的未来不只是一个更低成本更高效率的街景工具,与以下技术有着巨大的结合空间:

1、视频技术。图像识别技术只是机器视觉技术的一种,随着人工智能、大数据和深度学习技术的发展,随着机器计算能力的爆发式增长,视频识别技术正在日益成熟。百度现任首席科学家、前Google X实验室负责人吴恩达让机器自动从海量YouTuBe视频识别猫就是视频识别的应用。未来照片游可升级为视频游,实际上视频数据量更大,因为它无时不刻、不知疲劳地地记录着世界,而这些记录的“眼睛”遍布在我们的周围且越来越多。

2、云摄像头。百度上马了百度公园,记录几十个景区的实时视频,未来都可以成为街景还原的数据。不只是百度,不少用户已经开始购买云摄像头,以便通过云实时查看某个地方的视频,这些视频被存放在某个云空间,或者被公开分享,未来它们可以成为照片游街景的数据来源。另外一个分支是运动摄像头,GoPro为代表,国内现在抄得很厉害,未来运动摄像头拍摄的海量运动照片和视频,则可以成为运动圣地,比如珠穆拉玛峰的虚拟实景还原的素材,能够登顶珠峰的人太少,不过想要体验登顶感觉的普通人太多了。

用GoPro拍摄的海浪

3、虚拟现实。VR设备,Oculus是其中最出名的应用,你带上一个眼镜之后就可以进入一个虚拟世界,它可以给你声音、环境诸多维度的感觉,能够感知你的动作、声音、情绪。而这些虚拟现实设备都缺乏应用和内容,未来基于照片游技术可以为它们创造大量的与现实环境紧密结合的内容。记得去美国大峡谷游玩时在峡谷边看了场平面电影,以后再去可能就是直接带着眼镜去体验滑翔、跳伞等探险项目了;去三亚则可以带着眼镜等设备学习潜水、体验深潜……

4、无人机航拍。DJI(大疆)的声名鹊起说明了一个趋势:航拍太火了。过去人们都是站在地上看这个世界,却很少有机会通过“上帝视角”来了解这个世界。有了俯瞰式的航拍影像数据,人们可以真正实现360度建模世界、还原世界——Google Earth的卫星云图实在太模糊了。航拍技术的普及让Google Earth一下进入了史前时代。从覆盖范围来看,无人机航拍更多还是一个补充,不过它更有用。

DJI-大疆无人机最新款Inspire

总结:百度还原加德满都采用照片游技术,只不过呈现了冰山一角的能力,照片游未来还有巨大空间,当然,一切的前提是人工智能、机器视觉和大数据技术要更加成熟。

原文发布于微信公众号 - 罗超频道(luochaotmt)

原文发表时间:2015-05-04

本文参与腾讯云自媒体分享计划,欢迎正在阅读的你也加入,一起分享。

发表于

我来说两句

0 条评论
登录 后参与评论

相关文章

来自专栏程序员互动联盟

自学编程成功概率有几何?

坦白的讲一个人获得知识的方法有两种,一个是通过别人教,另一种就是自己学,然而通过别人教的方式一般都是需要付出一些金钱的,比如我上学的时候需要教学费,培训的时候就...

31080
来自专栏量子位

微软AI实力秀:调侃Google吹牛;免费AI课程上线

这家老牌科技公司,现在到底有什么黑科技?在大会现场,展示了微软AI小冰和人类打电话的实力、还有锥形的AI开会神器等等。微软技术院士黄学东还在现场diss了一下同...

15340
来自专栏企鹅号快讯

智能家居“智商”不够,能靠情商来补吗

试着去想象这样一个场景:当我们结束辛苦的工作回到家中,只需要花费几秒钟进行一个极其简单的操作,灯光就会依次缓缓打开,空调也会随之自动调节到我们最习惯的温度……如...

20990
来自专栏大数据文摘

NASA加速应用机器学习探测太空,英特尔携Nervana参与其中

13610
来自专栏VRPinea

《连线杂志》英特尔MR头显体验手记:有不足,但值得期待

30780
来自专栏程序员的知识天地

程序员吐槽网易游戏,用奖金控制加班,技术氛围差!

程序员在摸论坛吐槽网易,吐槽了一下几点,我们可以来看一下:一,技术氛围差,工作压力超大,领导中心,懒人多,推责任。二,画饼太大,进来无尽的业务,越学越退步。三,...

70130
来自专栏VRPinea

加入HoloLens的位置跟踪系统,微软VR头显或将赶超Oculus等VR大咖

34570
来自专栏新智元

浩哥说:还没做VR的手机厂商已经out了!

? 上一篇文章和大家分享了为什么我要做投资,这一篇主要想和大家聊聊我的投资方向。 现在做投资的人挺多,细分领域也很多。其实做投资和做企业有一点很像,都要聚焦。...

27160
来自专栏量子位

一文看尽Google新品发布会:手机、音箱、笔记本,硬件全面AI化

李根 若朴 发自 十一假期 量子位 报道 | 公众号 QbitAI AI+软件+硬件,让Google助手无处不在。 这是Google刚刚结束的产品发布会的核心...

33480
来自专栏CSDN技术头条

HPC技术趋势:HPDA、深度学习、软件定义和机柜即HPC

百度首席科学家吴恩达(Andrew Ng)曾经说,深度学习的前沿正转移到高性能计算(HPC),NVIDIA、AMD及Google、阿里巴巴等公司也确实都在为深度...

30650

扫码关注云+社区

领取腾讯云代金券