首页
学习
活动
专区
工具
TVP
发布
精选内容/技术社群/优惠产品,尽在小程序
立即前往

人脸“移植”,快手是怎样做到的?

近期新版本更新后,快手App上新增了AR换脸特效,与常见的点缀式手机AR特效不同,这个AR角色的面孔可以由用户自定义。 怎么讲?...比如在拍摄短视频时,如果选择了AR换脸特效,可以选取相册中的照片,把相册中的人脸“移植”到AR三维模型上… 之后,一个长着你想要的脸的3D虚拟角色,就诞生了。 像这样: ? 这样: ?...快手Y-Lab实验室专门做一些为用户提供有趣体验的功能,比如这个手上长多肉的AR特效:一颗种子从天而降,掉落在手心,逐渐生根发芽,长成一颗多肉,之后慢慢变为盛放的样子。 ?...此外,人体姿态捕捉也是Y-Lab正在研究的产品,用户通过手机直接拍摄人的动作,就可以将所有动作转化为特效。...同时根据场景帮助用户选择最合适的滤镜,提升视频效果。 之后,运用视频解析,让机器高效的看懂、理解视频,让机器对用户有深度的认知和理解。

1.5K30

数学和编程能力,马维英说这是字节跳动AI Lab招人的首要准则

此外,字节跳动 AI Lab 主任马维英还重点分享了实验室的招人准则,跃跃欲试的小伙伴们,你们准备好了么。 在开放日上,现场 Demo 展现了很多熟悉而又炫酷的应用。...炫酷的算法应用 有数学还不够,你需要把它做成产品,所以你可以先看看 AI Lab 做出来的 Demo。...答案是可以的,字节跳动实验室展示的这个应用甚至可以从视频中选出最好看的视频帧,并裁剪为合适的大小。 下图展示了挑选封面的主要做法,当我们上传一段视频后,模型首先会对不同的视频帧做一个聚类处理。...其实 Demo 中的很多应用都需要部署到移动端,例如给人脸加各种特效的激萌或抖音等。为此,实验室展示了一种快速轻量级的人脸识别方法。...因此在实际应用中能以毫秒级的延迟完成人脸识别任务,而对人脸再加特效也就非常迅速了。

1.1K30
  • 您找到你想要的搜索结果了吗?
    是的
    没有找到

    腾讯PCG光影研究室 - 校招&社招火热开启,喊你上车!

    腾讯光影研究室 Tencent GY-Lab 影像前沿 创意无限  魅力光影 与你同行 校招同学敲重点!!!...1 团队介绍 腾讯光影研究室(Tencent GY-Lab)致力于探索泛娱乐综合解决方案,将前沿的AI能力、3D渲染技术,先进的玩法SDK赋能产品,让拍摄特效更丰富,让创作编辑更智能。...LightSDK特效玩法 & 桌面端特效编辑工具 工程团队重点打造的特效玩法LightSDK,是一个提供基础美颜美型、普通贴纸挂件、多种渲染特效的跨平台的 SDK。...SDK开发工程师 PC/Mac客户端开发工程师 前端开发工程师 后台开发工程师 python后台开发工程师 3D计算机视觉研究员 人脸三维重建算法高级研究员 深度学习推理引擎研发与并行计算工程师 高级图像算法研究员...(计算摄影学方向) 高级美颜美化算法研究员 3D计算机视觉研究员(北京) 人脸三维重建算法高级研究员(北京) 计算机视觉算法高级研究员(北京) 相机创新-产品策划 相机游戏玩法产品策划 手Q拍摄客户端策划岗位

    2.2K30

    重新认识快手:人工智能的从 0 到 1

    场景在哪里?想要表达什么内容?深度学习部门也不再局限于解决视频的安全或版权问题,而是希望帮助快手「老铁」们更快地找到他们喜欢的内容。...随后的两年时间,Y-Lab 开发出了各种有趣、新奇的 demo,覆盖 AR 特效人脸关键点、手势识别、语义分割、人体关键点检测等多个领域。 ?...去年,Y-Lab 的「AR 上的人脸移植特效」就备受网友好评,用户可以选取相册中的照片,把相册中的人脸转移到到 AR 三维模型上,生成出一个长着人脸的 3D 虚拟角色。...2018 年,Y-Lab 为魔法表情部门设计了许多新的底层算法,比如 3D 照片、天空影像、人脸关键点等等。...染发特效 作为这次结构调整的一个标志,快手正式将 Y-Lab 改名为 Y-Tech。从 Lab 到Tech,背后是整个实验室定位的改变。 组织结构的调整对团队多少带来了影响。

    1.3K30

    音视频生产关键指标:采集预览优化丨音视频工业实战

    2.2、异步初始化非必要组件 通常相机会与特效等 SDK 混合使用,可以子线程异步加载特效组件,首帧可以无特效立即展示出来,等检测特效加载好后再加入效果即可。...3、采集预览流畅度优化 3.1、线程模型优化 把采集和视频特效放在同一个线程,随着特效功能越来越强,计算越来越重,会影响到最终的输出帧率。...texture with iOS 5 texture cache api[1] 3.4、不同设备智能选择分辨率和帧率 通常低端机效果较多情况下选择 1080P + 30FPS 会比较卡,影响用户体验,如何选择合适的分辨率和帧率则尤为重要...下面的对焦策略,可以参考: 手动对焦: 用户点击哪里就对焦哪里。 自动对焦: 基于系统能力在识别场景发生变化后,进行一次中心对焦。...如果有识别到画面从无人脸到有人脸时,做一次人脸对焦(这里是只做一次人脸对焦,不能一直跟着人脸对焦,这样可以防止用户不想对焦人脸的场景:在有人脸时,点击了其他地方进行手动对焦)。

    1.2K20

    春天,是腾讯码农丰收的季节

    今年,腾讯有59篇论文被CVPR大会接收 ,其中腾讯优图实验室25篇、腾讯AI Lab 33篇,腾讯手机管家1篇。...✿✿ヽ(°▽°)ノ✿ 这些论文涉及哪些“黑科技” 说起计算机视觉,不要整天想着美颜特效,这58篇论文的研究成果,涵盖深度学习优化原理、视觉对抗学习、人脸建模与识别、视频深度理解、行人重识别、人脸检测等热门及前沿领域...人脸识别?不行。因为每个摄像头拍到的人可能角度、光线、远近、清晰度和遮挡都不尽相同,甚至脸都看不清楚,人脸识别只能一脸懵逼。而单靠衣着打扮去推断也很容易出错,并不可取。 ?...让你美颜变脸更 easy 现在打开相机,不开个美颜特效都不好意思说自己在拍摄了。然而,每一次美颜,要跟踪你的五官变化且保持特效不违和,其实手机也很累哒。...(模拟暗光照片) 手动调整不太会,也不知道调到什么程度是合适的,调错了指不定又被打一顿。 没关系,人工智能照亮你的美。

    84110

    AI即开即用,这是悄然推出的“腾讯最新AI技术”小程序

    在本次腾讯AI技术展示体验中,计算机视觉方面涵盖了OCR、人脸识别、图片特效,以及图片识别等4大方面。...OCR方面,身份证、名片、行驶证、驾驶证、营业执照、银行卡和通用OCR都可直接体验; 人脸识别中,人脸对比、人脸分析、五官定位和颜龄检测,都是可供用户直接“上脸”的项目; 还有图片特效,从滤镜、人脸美妆...、人脸变装,大头贴,到最新的人脸融合,同样可以直接“上脸”; 最后的图片识别则更实用。...NLP方面的能力主要由腾讯AI Lab输出。 具体涵盖了基础文本分析、语义解析和机器翻译等三方面的AI应用。...• 第三个则是2016年4月正式成立的AI Lab,隶属于腾讯技术工程事业群(TEG),主要围绕图像识别、语音识别、自然语言处理和机器学习4个方向进行研究。

    1.1K70

    Midjourney+Gen2,7步完成「芭本海默」,引Karpathy惊呼|附实测经验

    然后用FinalCut Pro把动画,声音,和特效结合起来,短片就基本完成了。 7. 再用Capcut添加好字幕,大功告成!...最大的障碍在于,因为Gen-2的动画只能以某一张图随机生成,所以在涉及人脸画面的时候,畸变会比较多。...同时,他还比较了相似的场景和Pika Lab生成的区别。 下图是Pika Lab的效果。...可以看出,在演示之中人脸的效果变形不是很大,这与实测的差异很大,很有可能是因为作者试了很多次之后找到的脸部畸变不大的效果。...有网友生成了一部名人漫威角色的预告片,效果非常逼真,配上一点动画特效和光影,感觉真的像是漫威官方的作品。

    32930

    数学和编程能力怎么回事,马维英说这是字节跳动AI Lab招人的首要准则

    马维英暗示AI Lab 的方针是为今日头条和抖音等产物提供焦点技术支持,并满足此刻到未来2-5 年的产物和业务成长需要。 有这么优秀的科学家和资源,你想不想来局面试?...其次马维英会比力垂青工程实践能力,所以AI Lab 这边也会考虑应聘者的编程能力。马维英暗示我们经常会有很是好的想法,但很可能没有实践能力,这是不足的。...炫酷的算法应用 有数学还不足,你需要把它做成产物,所以你可以先看看AI Lab 做出来的Demo。...其实Demo 中的许多应用都需要陈设到移动端,例如给人脸加各类特效的激萌或抖音等。为此,尝试室展示了一种快速轻量级的人脸识别要领。...因此在实际应用中能以毫秒级的延迟完成人脸识别任务,而对人脸再加特效也就很是迅速了。

    78300

    把视频玩出花的快手来到CVPR ,解密背后AI能力,落地空间有多大?

    通过人脸关键点识别和人脸表情识别,虚拟形象能跟随体验者实时做出微笑、闭眼、张嘴、吐舌头等50余种细微表情。...通过三维人脸重建技术,恢复出人脸的三维几何信息及人头在世界坐标空间中的姿态,用来精准的驱动人头转动和人脸朝向。 此外,也充分考虑了肢体运动的物理限制,有效规避出现真实人体无法完成的动作。 ?...而背后的神经网络基础,则是依靠快手自研的YCNN深度学习推理引擎,针对不同手机硬件做了适配与优化,这样,无论哪里的用户,在拍摄各种特效时都能保证实时性和流畅性。...快手Y-tech硅谷实验室 快手Y-tech硅谷实验室负责人王华彦本硕皆毕业于北大,后来到斯坦福AI Lab读博,在加入快手前,王华彦曾在硅谷AI创业公司Vicarious任高级研究员。 ?...硅谷实验室坐落在斯坦福校园附近,与前面介绍的西雅图实验室不同,快手硅谷实验室更注重计算机视觉,用AI的方式创造各种特效,供用户在创作短视频的时候增添丰富多彩的内容。 比如有这样: ?

    1K40

    谈谈人脸关键点的江湖

    比如我们常用的换脸、换妆、人脸特效等2C应用中的功能,都需要先进行人脸关键点的检测,然后再进行其他的算法业务处理;在一些2B的业务场景中也都有涉及,如疲劳驾驶中对人脸姿态的估计,人脸识别前的人脸对齐等。...年底,本人和朋友调研开源的人脸关键点模型,当时精度最高的是商汤LAB,后来接触到不少朋友也是拿LAB作为辅助标注工具,LAB的边缘鲁棒性确实不错,同时期的还有Wing Loss,展示了暴力回归的实战可行性...下面我们结合各路资料简单谈谈人脸关键点算法的自研,首先我们上一张极端图,以此引发算法设计的思考:图中蓝色为人脸检测器的五点,红色依次是模型的输出,左图基于人脸检测器五点做人脸对齐,中图基于左图的模型输出做人脸对齐...,右图基于中图的模型输出做人脸对齐,三次精调救回极端case,证明人脸对齐对人脸关键点的回归作用很大。...我们知道标注数据中一般会有很多旋转的人脸,虽然说只要标注数据中有这些旋转人脸,CNN肯定能够回归出来效果。但不可否认的是,人脸旋转角度过大,增加了问题的难度,不利用训练出稳定性很高的模型。

    1.7K10

    AI视觉在教育场景中的创新应用

    我们的核心能力包括智能多摄、单帧/多帧画质,这类算法在手机客户中应用较多;人像美化,包括AR特效等会运用到泛文娱的领域;场景识别涉及人、物、环境等多样化的场景识别能力,另外包括一些视频分析的能力,在IOT...那这个深度图像从哪里来呢?这就要和硬件相结合,像现在很多教育平板都加入了双摄,前置结构光,前置TOF。 3.2 量化检测 课堂专注度、课堂接受度是家长非常关注的。...手势识别 像我们动画里展示的是老师点赞的特效,学生端可以实时收到显眼的反馈。那学生举手老师知不知道呢?...人脸特效 还有一些增加趣味性的人脸特效,一些可爱的动效可以抓住低领学生的注意力和兴趣点。 3.4 智能工具(超清拍题,智能补光,人脸考勤) 超清拍题与智能补光是我们首发的技术。...只有的是真正的旗舰手机,才会有光学防抖。所以我们提出了纯软的光学防抖方案,一次性解决上图所示各种拍照模糊问题,比如失焦,曝光拖影,抖动,噪点,暗光等。

    2.7K50

    音视频知识图谱 2022.05

    下面是 2022.05 月知识图谱新增的内容节选: 1)图谱路径:采集/视频采集/对焦策略 手动对焦 用户点击哪里就对焦哪里。 自动对焦 基于系统能力在识别场景发生变化后,进行一次中心对焦。...如果有识别到画面从无人脸到有人脸时,做一次人脸对焦(这里是只做一次人脸对焦,不能一直跟着人脸对焦,这样可以防止用户不想对焦人脸的场景:在有人脸时,点击了其他地方进行手动对焦)。...画面中从无人脸变为有人脸。...资源让给相机,相机打开后回调给业务相机首帧已出的事件,这样业务收到该事件后再进行其它初始化 3)图谱路径:采集/视频采集/指标优化/预览平均采集帧率+图像处理帧率+渲染帧率 线程模型优化 采集和视频特效放在同一个线程...,随着特效功能越来越强,计算越来越重,会影响到最终的输出帧率。

    95420

    美颜相机已无法满足老夫的少女心,关键还得靠AR

    Snapchat 众所周知,Snapchat是一款国外非常流行的主打阅后即焚的社交应用,其创新之处远不止于此,在版本更新后,Snapchat还加入了基于人脸识别与AR技术的特效滤镜。...MSQRD MSQRD采用先进的人脸识别技术,能够准确捕捉用户的表情和五官,并反馈相应的效果。 ?...MSQRD和其它通过捕捉面部添加特效的应用一样,用户只需将脸摆在合适的位置就可以被识别并自动追加特效。经由MSQRD特效打造后的人脸,不但逼真有趣,还自带美颜。...再利用AR技术,将这些面具贴合于用户面部,以达到特殊的化妆及特效效果。 Egg在人脸精准定位上做得十分出彩,即使用户将面对转动超过45度,面具贴片也不会有明显的翘起与凸出。...不过随着今后人脸识别技术愈加成熟,实时的人脸3D建模将会代替现阶段通过校准特征点来调整模型匹配的方式,这一技术也将为试穿试戴提供强大的技术助力。

    1.5K80

    云端绘梦:依托腾讯云HAI服务开启AI绘画新纪元

    如短时体验可直接购买1元8小时的HAI使用券,不来吃亏不来上当!如果还有兴趣可选择购置70元80小时的和200元250小时的使用券,平均算下来都是0.8元/小时左右,也是十分划算的!...图形渲染与游戏开发:不仅限于AI相关的应用,HAI同样适用于需要高性能GPU的应用场景,比如高清影视特效制作、建筑可视化设计,以及开发和测试具有丰富图形效果的电子游戏等。...CodeFormer是一款由南洋理工大学S-Lab研发的强大AI图像与视频处理工具,主要应用于人脸修复领域,拥有出色的人脸清晰化、人脸色彩化以及人脸去马赛克等功能。...影视特效制作团队、游戏开发商以及电商零售巨头们也在纷纷向HAI投来关注的目光。...在光影交错的电影世界里,AI绘画能够助力创作者瞬间跃升至幻想之地,快速构建故事所需的宏伟场景与鲜活角色,缩短特效制作周期,提升观影体验。

    90861

    产品分享 | 如何用AI打造爆款互动玩法

    2 人像变换——玩转年龄与卡通的转换 人像变换是近年的热门特效,很多用户都玩得不亦乐乎,而这一直都是腾讯云AI产品最多的领域。...腾讯云AI的3D人脸重建驱动技术,可以通过一个普通摄像头拍摄的视频,去生成一个3D头模,用户可以基于这个头模贴纹理,做成一个3D形象,比如贴一个虚拟形象,或者贴一个3D特效等都可以。...比如最近在短视频平台爆火的蒙娜丽莎特效,就是应用了多分类人像分割技术。...4 人脸试妆——让试妆玩出新花样 人脸试妆是一个很常见的能力,大家在许多日常生活场景都有见过甚至使用过,那腾讯云AI的人脸试妆技术有什么不同呢?...了解详细产品信息,快戳阅读原文联系我们 腾讯云AI生态计划 腾讯云AI,依托腾讯优图实验室、腾讯AI Lab、腾讯多媒体实验室、微信智聆、微信智言等腾讯顶级实验室的产品和技术能力,持续引入生态合作伙伴,

    3.9K20

    科技小编变身美妆博主,AR试妆就是这么神奇!

    还在纠结哪个口红色号?种草了这个粉底液,但是哪个色号适合自己呢?看了那么多美妆博主的试妆推荐,为什么等到自己用起来的时候是另外一回事?...当然,如果你觉得合适的话,可以直接剁手放到购物车里。 对此,镁客君不得不感慨科技就是第一生产力,试问有了这种试妆产品,爱美的男女老少还能控制住自己剁手的心吗! AR试妆让你剁手到停不下来?...其实早在2015年的时候,淘宝在也推出过类似的试妆台应用,通过人脸识别和动态影像分析等,利用AR技术的呈现方式实时预览妆后效果。 ?...简而言之,AR主要就是先通过人脸识别技术识跟踪脸部的关键点,然后再通过增强现实技术呈现出化妆的效果。...从技术的角度来看,AR试妆的实际效果可能和各家公司的智能识别算法有关,所以保不准有些试妆应用效果会和美图APP的特效相机一样失真。

    2.1K30

    跳舞手脚不协调?没关系,微视用AI打造你我的舞林大会,一张照片就可以

    近日,腾讯微视 APP 上线的「照片会跳舞」新特效玩法实现了人体姿态迁移技术的真正落地,让不会跳舞的你也能在手机上舞动起来。...从人脸到人体,腾讯不断探索迁移技术,创新视频特效玩法 从人脸到人体动作迁移,腾讯微视正一步步深挖迁移技术在爆款社交玩法上的延展空间,并持续探索前沿 AI 和 CV 算法在内容生产和消费领域的应用和落地。...今年 3 月,微视上线了一种基于人脸图像修复和人脸动作迁移技术的特效玩法「会动的老照片」,不仅可以一键修复老照片、让照片中的人物动起来,还能通过手机实时控制生成图像的面部动作,实现人脸动作迁移。...与此同时,作为隶属于腾讯平台与内容事业群(PCG)的技术团队,光影实验室(Tencent GY-Lab)为逼真特效的实现提供了坚实的技术支撑,致力于将前沿的 AI 能力、3D 渲染技术以及先进的玩法赋能产品...其中,QQ 相机漫画脸特效使用的技术是光影实验室自研算法 GYSeg,该算法在 MIT 场景解析国际竞赛(Scene Parsing Benchmark)中斩获冠军;微视 APP 中的迪士尼童话脸特效则是全球首家在手机上为用户提供实时个性化

    60820

    Mars说光场(5)— 光场在三维人脸建模中的应用

    本文主要介绍美国南加州大学ICT Graphic Lab的Paul Debevec所引领开发的Light Stage技术,该技术已经成功应用在好莱坞电影特效和2014年美国总统奥巴马的数字人脸建模等诸多应用中...反射场Relighting示意图 二 USC Light Stage介绍 Light Stage是由美国南加州大学ICT Graphic Lab的保罗•德贝维奇(Paul Debevec)所领导开发的一个高保真的三维采集重建平台系统...整个采集过程包括两个阶段:第一阶段是以人脸为中心旋转光源,从而构成64x32个不同方向的等效光源入射到人脸上。...如图17所示,所采集的图片分布于一个圆柱形上,当渲染不同视点下的Relighting图片时,从圆柱形上选择合适的视点进行融合。 ? 图 16. Light Stage 6 采集图片样例 ?...Light Stage 5基于球谐调和进行反射场的低阶采样,是相对比较成熟的一代系统,已经在《本杰明•巴顿》、《蜘蛛侠》等电影特效中得到应用。

    91610

    扫码

    添加站长 进交流群

    领取专属 10元无门槛券

    手把手带您无忧上云

    扫码加入开发者社群

    热门标签

    领券