前端WebAR实现简单版pokemon Go

背景:

最近AR的话题很火,如前段时间pokemon Go游戏,和支付宝的AR红包,加上最近看到了一些关于前端运用webRTC技术实现WebAR的文章,这边就尝试结合下,实现一个简单版的pokeMon Go的游戏。由于有兼容性问题,目前demo只是跑在android的手Q中,具体效果如下:

元旦后提供demo链接

WebAR

WebAR说白了就是通过web端的技术能力去实现AR的效果!

我们知道,AR最基础要实现的功能其实就是实时视频效果,然而帮助我们实现这种实时视频效果的技术基础是WebRTC;

WebRTC是什么?

那么,WebRTC是什么? 对前端来说,我们可以通过HTML5的新特性WebRTC(网页实时通信,Web Real-Time Communication 一个支持网页浏览器进行实时语音对话或视频对话的API),通过WebRTC,可以通过网页呼起用户的摄像头,并且实时获取用户摄像头的图像数据的。

WebRTC API

WebRTC共分三个API。

  • getUserMedia getUserMedia主要用于获取视频和音频信息
  • RTCPeerConnection 用于浏览器之间的数据交换。
  • RTCDataChannel `用于浏览器之间的数据交换。``

这边目前我只使用到了getUserMedia

WebRTC兼容性

这边通过阅读相关文章了解到,目前兼容性情况如下:

由于苹果的安全机制问题,iOS设备任何浏览器都不支持getUserMedia()。 最终数据展示,Android设备下,有99.45%的设备在微信是支持getUserMedia()的,98.05%的设备在手Q是支持getUserMedia()的。而我们之前测试机型里面,本机浏览器、QQ浏览器对getUserMedia()都有不同程度的支持。 2015年底前,也就是chrome47版本前,chrome是支持http页面拉起摄像头的,出于安全问题考虑,chrome47版本后只支持https页面拉起摄像头。

实现步骤

目前我的demo的实现步骤如下:

  • 通过WebRTC的API来实现获取通过浏览器网页拉起摄像头操作
// 获取相应的浏览器内核的getUserMedia
navigator.getUserMedia = navigator.getUserMedia || navigator.webkitGetUserMedia || navigator.mozGetUserMedia || navigator.msGetUserMedia;  
// 调用getUserMedia方法
function getMedia() {  
    if (navigator.getUserMedia) {  
        navigator.getUserMedia({  
            'video': {  
                'optional': [{  
                    'sourceId': exArray[1] //0为前置摄像头,1为后置  
                }]  
            },  
            'audio':true  
        }, successFunc, errorFunc);    //success是获取成功的回调函数  
    }  
    else {  
        alert('Native device media streaming (getUserMedia) not supported in this browser.');  
    }  
}  
 // 获取摄像头源信息
 // 通常手机只有两个源,前置和后置
 MediaStreamTrack.getSources(function (sourceInfos) {  
      for (var i = 0; i != sourceInfos.length; ++i) {  
          var sourceInfo = sourceInfos[i];  
          //这里会遍历audio,video,所以要加以区分  
          if (sourceInfo.kind === 'video') {  
              // alert('sourceInfo'+ sourceInfo.id);
              exArray.push(sourceInfo.id);  
          }  
      }  
        // 调用摄像头  
      getMedia();
      // 定时展示小精灵
      showPet();
  });
  • 获取摄像头的数据流

当成功呼起摄像头时,会触发success的回调,在回调中我们可以获取摄像头的数据流

// 获取相应浏览器的URL对象
window.URL = window.URL || window.webkitURL || window.mozURL || window.msURL;  
function successFunc(stream) {  
     // 这里的stream为摄像头的实时数据
  }
  • 将摄像头的数据流通过video标签作为载体呈现在页面上
// 获取相应浏览器的URL对象
window.URL = window.URL || window.webkitURL || window.mozURL || window.msURL;  
function successFunc(stream) {  
      if (video.mozSrcObject !== undefined) {  
          //Firefox中,video.mozSrcObject最初为null,而不是未定义的,我们可以靠这个来检测Firefox的支持  
          video.mozSrcObject = stream;  
      }  
      else {  
          video.src = window.URL && window.URL.createObjectURL(stream) || stream;  
      }  
      // 音频  
      audio = new Audio();  
      audioType = getAudioType(audio);  
      if (audioType) {  
          audio.src = 'polaroid.' + audioType;  
          audio.play();  
      }  
  }
  • 可以在video上叠加任何我们需要的内容和操作
  • 配合CSS3和JS为叠加的内容增加交互效果,营造出WebAR的感觉

最终效果

小结

虽然目前webAR还是不能取代AppAR,且通过web来实现AR还是有许多问题。但我相信通过时代和技术的并行发展,webAR的流行可能并不久远。

参考链接

http://blog.csdn.net/journey191/article/details/40744015 http://tgideas.qq.com/webplat/info/news_version3/804/7104/7106/m5723/201612/537832.shtml

本文参与腾讯云自媒体分享计划,欢迎正在阅读的你也加入,一起分享。

发表于

我来说两句

0 条评论
登录 后参与评论

相关文章

来自专栏phodal

RePractise前端篇: 前端演进史

细细整理了过去接触过的那些前端技术,发现前端演进是段特别有意思的历史。人们总是在过去就做出未来需要的框架,而现在流行的是过去的过去发明过的。如,响应式设计不得不...

1819
来自专栏腾讯大讲堂的专栏

微信又更新了!这个新功能大家等了五年

1465
来自专栏Flutter入门到实战

安卓开发方式的进化之路

做安卓时间长了,接触到各种各样的框架,前前后后遇到了很多问题,这里顺便记录一下那些年在安卓开发的发展过程中的那些跨平台开发技术框架,大致如下:

1262
来自专栏即时通讯技术

P2P技术如何将实时视频直播带宽降低75%?

实时视频直播经过去年的千播大战后已经成为互联网应用的标配技术,但直播平台的成本却一直居高不下,各个平台除了挖主播、挖网红以外,其背后高额的带宽费用也是他们最大的...

2383
来自专栏竹清助手

安卓开发方式的进化之路

做安卓时间长了,接触到各种各样的框架,前前后后遇到了很多问题,这里顺便记录一下那些年在安卓开发的发展过程中的那些跨平台开发技术框架,大致如下: 如有错误,欢迎指...

1674
来自专栏ytkah

微信加关注链接 一键关注公众号 解决用手机看网页无法扫二维码的烦恼

  现在很多网页都会设置wap手机版,移动端的流量逐渐显现。问题来了,如果你用手机浏览网页,你又很想微信加关注,上面正好有个二维码,苦于手机分身无术,又不想打一...

1.3K4
来自专栏phodal

我的职业是前端工程师【六】:前端程序员如何有效地提高自己

要成为一个优秀的前端工程师,需要什么技能和学习?答案:练习 在逛知乎、SegmentFault 又或者是相似的技术社区,我们总会看到类似的问题。新手总会关注于,...

2026
来自专栏机器学习算法与Python学习

Chrome 的哪些功能改变了我们浏览网页的方式?

Chrome已经十岁了,正式进入了少年时期,过不多久它就要长起小胡子并且声音变得嘶哑。

732
来自专栏CDA数据分析师

电商数据分析时的excel的基本操作(吐血总结)

一般的使用Excel的工作习惯 1.保留原始文件,新建一个Sheet进行处理数据存放,或者另外COPY一份新的文档,尽量保持原始数据的原貌,因为我们都不知道啥时...

31310
来自专栏企鹅号快讯

一些提高效率的神器

本文会对列举一些自己在工作中使用的好用的工具。或许与PPT设计之类的关系不大,但是对于提高我们工作效率是很有帮助的。 我想,本来科技就是这样,以人为本,提高效率...

1958

扫码关注云+社区