首页
学习
活动
专区
工具
TVP
发布
精选内容/技术社群/优惠产品,尽在小程序
立即前往

DIY穷人版谷歌眼镜,自定义手势操控,树莓派再一次被开发新玩法

热衷于制作智能小物件的油管博主Teemu Laurila,利用树莓派DIY了一副可识别自定义手势的AR眼镜。 将自己想设置的手势录入装置,即可实现炫酷操作。 我有了一个大胆的想法!...应用程序功能的核心——手势识别模型由3个框架组成,包括手掌识别模型BlazePalm(用于识别手的整体框架和方向)、Landmark模型(识别立体手部节点)、手势识别模型(将识别到的节点分类成一系列手势...手势识别模型则在此基础上,根据关节角度识别每根手指状态,将状态映射到预定义的手势上,预测基础静态手势。 通过树莓派Zero W,对手势信息捕获。图像信息传输到电脑中,由手势识别AI进行处理。...之后再传达给装置,发出对应的手势命令,并同步在投影图像中。 它的前世今生 等一下,有摄像头,有微型投影仪,还有电脑处理器,并且还是一侧投影显示。这样的AR眼镜好像在哪里见过。...没错,就连用到的手势识别代码也都是谷歌开源的。

87920
您找到你想要的搜索结果了吗?
是的
没有找到

解读手势识别,或许不是VR交互的万能工具

但是如果想要在VR中达到更加自然的交互和沉浸体验,摆脱外设的手势识别必然是未来发展的一个大方向。 手势识别技术的发展 手势识别技术的发展,可以粗略分为两个阶段:二维手势识别以及三维手势识别。...早期的手势识别识别是基于二维彩色图像的识别技术,所谓的二维彩色图像是指通过普通摄像头拍出场景后,得到二维的静态图像,然后再通过计算机图形算法进行图像中内容的识别。...二维的手型识别的只能识别出几个静态手势动作,而且这些动作必须要提前进行预设好。 相比较二维手势识别,三维手势识别增加了一个Z轴的信息,它可以识别各种手型、手势和动作。...三维手势识别也是现在手势识别发展的主要方向。不过这种包含一定深度信息的手势识别,需要特别的硬件来实现。常见的有通过传感器和光学摄像头来完成。...前两种在早期的手势识别技术中运用的比较多,而基于深度学习神经网络的手势识别必然是未来手势识别的趋势。

1.9K30

技术猿 | 技术牛人讲解手势识别技术

---- 手势识别大家并不陌生,想得到的是二维手型识别、二维手势识别、三维手势识别这几个名词,但是到底手势识别技术是什么?怎么定义的?又是如何工作的呢?...谈起手势识别技术,由简单粗略的到复杂精细的,大致可以分为三个等级:二维手型识别、二维手势识别、三维手势识别。在具体讨论手势识别之前,我们有必要先知道二维和三维的差别。...而第三种手势识别技术,是基于三维层面的。三维手势识别与二维手势识别的最根本区别就在于,三维手势识别需要的输入是包含有深度的信息,这就使得三维手势识别在硬件和软件两方面都比二维手势识别要复杂得多。...一维手型识别 二维手型识别,也可称为静态二维手势识别识别的是手势中最简单的一类。这种技术在获取二维信息输入之后,可以识别几个静态手势,比如握拳或者五指张开。...“静态”是这种二维手势识别技术的重要特征,这种技术只能识别手势的“状态”,而不能感知手势的“持续变化”。举个例子来说,如果将这种技术用在猜拳上的话,它可以识别出石头、剪刀和布的手势状态。

3.5K51

肥皂与手纸:神奇的电商大数据分析

11.11光棍节已经过去,12.12促销又要到来,回望双十一的疯狂与激情,哪些人在小米、哪些人在华为,哪些人在林志玲,哪些人在杜蕾斯,都将是有趣的话题。...虽然市面上有不少大数据之类的书籍,但是真正专业电商技术解密和实践案例分享的书籍还真是独此一家,我马上去几本送给我的程序猿朋友们。...怎么这么多人肥皂和手纸?是啊,这就是趋势变化,一方面说明京东商城百货化成绩不俗,购物篮丰富度大大提升,另一方面也说明年轻网民们的生活必需品消费也呈现出电商化的趋势。 ?...按道理讲朝阳区北京夜生活最丰富的地区了,曾经的天上人间,灯红酒绿的三里屯都在这里,双十一朝阳区的青年们都跑哪里去了。...比如,虽然网友在早上和深夜下单已经成为习惯,但是移动电商还是带来了不同的东西,数据显示移动端购物呈现出“随看随”的特点,这样的消费特征让每一个时段的购物频次相当扁平化。

28.8K100

浅谈人机交互的前世今生,自然交互必成未来趋势

手势捕捉 不管是鼠标键盘也好,还是虚拟屏幕也罢,都需要人们一板一眼的精确操作。时间长了,人们开始厌倦此种刻板的交互方式,开始向往更为自由、灵活的方式。所以大量的手势控制产品出现。 ?...手势识别技术的发展,大约可分为两个阶段:二维手势识别以及三维手势识别。早期的手势识别识别是基于二维彩色图像的识别技术。...所谓的二维彩色图像是指通过普通摄像头拍出场景后,得到二维的静态图像,然后再通过计算机图形算法进行图像中内容的识别。二维的手型识别的只能识别出几个静态手势动作,而且这些动作必须要提前进行预设好。...相比较二维手势识别,三维手势识别增加了一个Z轴的信息,它可以识别各种手型、手势和动作。三维手势识别也是现在手势识别发展的主要方向。...不过这种包含一定深度信息的手势识别,需要特别的硬件来实现,常见的有传感器、光学摄像头。 ? 前两种在早期的手势识别技术中运用的比较多,而基于深度学习神经网络的手势识别,则是未来手势识别的趋势。

1.8K60

「深度」手势识别已起步,行业者还需找准刚需厚积薄发

手势识别是交互体验最基本的需求,精准与实时为关键所在。...此外,虽然这三个情境都是依靠手势识别技术实现的,但它们实际上用到了三类技术,从简单的到复杂精细依次分为:二维手型识别、二维手势识别及三维手势识别。 二维手型识别,是手势识别中最为简单的一类技术。...该技术可获取二维静态手势,帮助用户用手型控制设备。...这类技术的缺点就是不能识别动态手势,只能识别预设好的静态手型,拓展性差;而优点就是,该技术实质上是一种模式匹配技术,研发难度及硬件要求低; 二维手势识别,与手型识别一样,不含深度信息,但它可以识别动态手型以及追踪简单的二维手势动作...可以看到,谷歌、苹果、英伟达、亚马逊、微软等在手势识别领域均有布局,如微软的手势识别追踪技术handpose、谷歌将于今年发布的Project Soli手势识别芯片、亚马逊获得的AR手势识别专利等,涉及了智能家居

1.3K00

逆天了,谷歌无人车识别交警手势,没信号灯也能从容通过

来源:Forbs 编辑:元子 目前自动驾驶汽车识别交通标示的能力,已经超过了人类平均水平。Waymo最近发布了一个视频,甚至训练自动驾驶汽车能够识别行人和警察,还能识别交警的手势。...当执勤人员做出一个小手势时,汽车就会穿过十字路口。 对于人类驾驶员来说是很简单的事,但对于自动驾驶汽车来说就很难得。...建立信号灯位置数据库后,就知道哪里是十字路口,信号灯在哪里,然后就可以去追踪绿灯了。 红灯和黄灯也可以追踪,但绿灯权重最高。如果等灯的时候没看到绿灯,车就不应该移动。...但它们擅长寻找特定的东西,并识别这些东西。 比如自动驾驶汽车识别交通标示的能力,超过了人类平均水平。 Waymo甚至训练自动驾驶汽车能够识别行人和警察,还能识别交警的手势

86220

资源 | TwenBN发布两个大型DL视频数据集:助力机器视觉通用智能

视频是计算机视觉的下一个前沿 深度学习近年来取得了历史性突破,其系统在静态图像的物体识别方面赶超——在某些情况下,超越——人类水平。尽管如此,让机器理解视频的时间、空间维度依然是一个无解的难题。...传统的手势识别系统往往需要像立体相机或深度传感器这样的特殊硬件,比如时差测距相机(time-of-flight cameras)。...尽管手势可以被人眼所捕捉,但是它很难被计算机识别,因为录像往往包括次优级(sub-optimal)的光线条件和背景噪点(比如猫在场景里走动)。...我们公司的数据收集从难以识别但是可解决的问题领域(已经有一些证明点,像手势识别)横跨到那些很难而且还不能解决的问题领域。而这个领域的终点就是通用人工智能(general AI)。...怎样获取数据并且在哪里用基准问题测试你的结果 两个数据集都可以通过我们的网站进行下载(https://www.twentybn.com/datasets)。

1.1K90

对话上交苏剑波教授:直面手语的「方言」多样性与系统「通用性」挑战|GAIR live

目前,苏教授及其团队专注于手语识别和情绪识别两大技术领域,他们通过视频捕捉和分析,深入探讨静态与动态手语的表达方式及其在不同情境下的变化。...此外,手势识别与手语识别有很大区别。 让机器理解聋人的手势,并将这些手势转换成文字或语言,以便让正常人理解。反之亦然,当正常人说话时,机器也能转换成手语将信息传达给聋人,实现双方的沟通。...苏剑波:我们主要专注于两大类技术:手语识别和情绪识别。这些技术基本上都是基于视频的。计算机或机器人通过摄像机捕捉人的手势/手语视频,再分析视频中的手势/手语的含义。...举个例子,手语分为静态手语和动态手语,还涉及到方言和国际化的问题。手指伸/缩或手掌张/闭状态属于静态手语,而表达“不行”或“过来”等手指和/或手臂的动作则属于动态手语。...对于这500个词汇以外的不太常用的词汇,识别率会因采集的角度、光照、背景等有所下降,可能需要多次手势才能提高识别的准确率。

19210

案例|深度学习×综艺直播秀,还引起了尖叫狂潮?

亮点2 在人脸检测技术基础上,大屏幕侠使用表情识别技术定位笑脸。表情识别技术从给定的静态图像或动态视频序列中,分离出特定的表情状态 ,从而确定被识别对象的心理情绪,实现计算机对人脸表情的理解与识别。...亮点3 这次大屏幕侠也使用了手势识别技术,和上次现场识别手势不同,这次是让场外观众摆出经典摇滚手势,经系统检测标准程度最高的观众将入围榜单。这样做能够节省人工筛选的时间,且增强互动和趣味性。...目前手势识别技术较多应用于AR/VR行业,未来也将在智能驾驶、智能家居行业有更多的应用场景。如果手势识别技术加持驾驶系统,驾驶员可使用手势来控制汽车内部的各种功能,一定程度上提高驾驶的安全性。...而根据定制手势可以控制家电开关,甚至在黑暗环境中也可以进行,实现智能控制。 ?.../top 2)手势识别:百度AI开放平台的Easydl 工具 http://ai.baidu.com/easydl/ 借助上述工具,大屏幕侠掌握AI技能,而这些工具底层支撑则是PaddlePaddle

90220

python人工智能【隔空手势控制鼠标】“解放双手“

手势识别手掌检测 目前现阶段手势识别的研究方向主要分为:基于穿戴设备的手势识别和基于视觉方法的手势识别。...基于穿戴设备的手势识别主要是通过在手上佩戴含有大量传感器的手套获取大量的传感器数据,并对其数据进行分析。...而本项目关注点放在基于视觉方法的手势研究中,在此特地以Mediapipe的框架为例,方便读者更好的复现和了解相关领域。 基于视觉方法的手势识别主要分为静态手势识别和动态手势识别两种。...从文字了解上来说,动态手势识别肯定会难于静态手势识别,但静态手势是动态手势的一种特殊状态,我们可以通过对一帧一帧的静态手势识别来检测连续的动态视频,进一步分析前后帧的关系来完善手势系统。...增长了9.48个点,说明模型是可以准确识别出手掌的。而至于为啥做手掌检测器而不是手部,主要是作者认为训练手部检测器比较复杂,可学习到的特征不明显,所以做的是手掌检测器。

50140

苹果设备需要注意哪些坑

一、When to Buy(何时) 知名果粉网站 MacRumors.com 结合苹果产品的更新周期和各路媒体新闻,给出了选购时机的建议。...相比之下,使用屏幕边缘的侧滑返回手势(interactivePopGestureRecognizer)更加实用,但也可能出现部分 App 未按设计规范支持该手势的情况。...3、指纹识别 考虑到手机高频操作对便捷度和安全性的要求,指纹识别应当作为一款手机的标配功能,没有指纹识别的手机建议不要购买。...但 iPad 之类的平板电脑附带指纹识别的意义不大,因为它没有移动支付这样的指纹识别场景。且由于平板使用较为低频,甚至都可以考虑不加数字解锁密码,自然不需要指纹解锁。...如果只打算运动款的,那就白色表盘的(因为黑色表盘的不好搭配表带),再配上一条 5600 元的爱马仕表带,——完美! 最后,关于苹果配件的选购,我有过多次的购买和退货经验。

2.9K90

超越按钮,拥抱触摸界面

1.png 手势驱动界面的威力 在两年以前,我在探索手势如何才能为移动应用用户界面带来价值时总结了一条规律,“手势的使用必须自然而然”。...这时才是使用手势的最佳时机。考虑一下双击屏幕或者长按屏幕。Instagram中,双击屏幕可以对一个内容进行Like或者Unlike。所以别再犹豫了,尽量的使用手势而不是传统的导航控件吧。...那么你一定会发现,设计并向同事展示这些交互概念,还采用传统的静态页面的方式已经远远不行了。一些原型工具,例如 Pop 和 Invision ,能够创作具有动态效果的原型。...这样做充满了实验主义和创新精神,在向客户进行展示时,不再使用传统的静态页面和简单导航,而是将客户邀请进来参与整个交互过程。这样做会增加预算、延长工期,但是如果客户允许你这么做,那一切都不是问题了。...学习曲线 在设计手势驱动的用户界面时,移走传统的导航元素,用户的学习曲线就会对应上升。如果没有适当的用户引导,很可能用户会茫然不知所措。一点小小的探索没有关系,但是必须让用户清楚从哪里开始。

59120

Flutter | 事件处理

GestuerDetector GestureDetector 是一个用于手势识别的功能性组件,我们可以通过它来识别各种手势 GestureDetector 实际上是指针事件的语义化封装,下面我们来看一下各种手势识别...GestureDetector 会把要监听的组件的原点(左上角)作为本次手势的原点,当监听组件上手指按下时,手势识别就会开始。...,而 GestureRecognizer 的作用就是通过 Listener 将原始指针转换为语义手势 GestureRecognizer 是一个抽象类,一种手势对应一个子类,Flutter 实现了丰富的手势识别器...由于手势竞争最终只有一个胜出者,所以,当有多个手势识别器时,可能会产生冲突; 例如有一个 Widget,可以左右拖动,现在我们也想检测它上面手指按下和抬起的事件,如下: var _left2 = 100.0...,而手势是对原始指针的语义化识别,所以在遇到复杂的冲突场景时,都可以通过 Listener 直接识别原始指针事件来解决冲突 事件总线 在 App 中,我们经常需要一个广播机制,用以夸页面事件通知,例如注销登录时

2.7K10

多模态人机交互国际研究现状

▲ 图 5 通过手部跟踪捕获勾勒的路径 2) 基于手势的交互 动作识别和传感器技术的发展让基于手势的交互逐渐成为常用的交互方式之一。...2.1 基于声场感知的动作识别 基于声场感知实现不同手势与动作的识别是人机交互的热点研究内容,基于手势或者姿态带来声场变化的基础,实现手势或动作的识别。...对于双手手势识别,很多研究者会增加扬声器来构建设备周围的声场,通过分析麦克风接受到的信号变化来识别相应的手势。对于笔记本电脑、屏幕等固定设备,研究者使用声场识别出了手在空中的挥动、停留等手势。...基于以上声学测距技术,可以实现手势识别、设备追踪等交互技术。...1.3.1 静态的被动力触觉 在静态的被动力触觉方面,加拿大多伦多大学和美国芝加哥大学等团队曾提出过Thors Hammer以及PHANTOM两种比较具有代表性的研究。

1.8K20

谷歌开发手部识别系统,适配跨平台框架MediaPipe,手机可用!

一个手势识别器,将先前得到的关键点排列分类为不同的手势。 这种架构类似于我们最近发布的面部网格ML管道以及其它用于姿势估计的架构。...这个模型学习了连续的手势图案,并且对于被遮挡只有部分可见的手部也能识别。...手势识别 基于预测出来的手部骨骼,我们用一个简单的算法来推导手势含义。首先,每个手指的状态(如弯曲或笔直等)由多个关节的累积弯曲角度决定。然后我们将手指状态集映射到一组预定义的手势集合上。...这种简单却有效的技术使我们能够精确地估计基本的静态手势。...最后,谷歌在MediaPipe框架中将上述手部跟踪和手势识别管道开源,并附带相关的端到端使用场景和源代码。

2.3K20
领券