首页
学习
活动
专区
工具
TVP
发布
精选内容/技术社群/优惠产品,尽在小程序
立即前往

快手Y-tech:GAN在短视频中的AI特效实践

在工业界,基于生成式技术的真实感效果也引领了一批爆款特效和应用。快手Y-tech在国内率先将GAN落地于短视频特效制作,并积累了丰富的实践经验,为快手各类人脸爆款特效提供有力技术支持。...人脸特效是辅助短视频内容生产的重要组成部分,生动好玩的特效有利于促进短视频内容的消费。...第一,GAN生成效果真实感强、清晰度高,可以做到传统特效无法实现的效果。第二, GAN是端到端的效果输出,可节约特效制作成本。第三,GAN可进一步实现自动化的图片和视频生产,降低短视频生产的门槛。...在工业界,GAN技术造就一批爆款特效和应用,海外如FaceAPP的变老、Snapchat的变性别,在国内,快手是最早将GAN落地于短视频特效制作的公司,本文从高精度人脸属性编辑方面介绍GAN在快手的实践工作...目前,生成式技术在高精度人脸属性方面,主要应用于快手、一甜相机等App的特效模块。 第一,快手魔表。

2.6K51
  • 您找到你想要的搜索结果了吗?
    是的
    没有找到

    人脸“移植”,快手怎样做到的?

    近期新版本更新后,快手App上新增了AR换脸特效,与常见的点缀式手机AR特效不同,这个AR角色的面孔可以由用户自定义。 怎么讲?...比如在拍摄短视频时,如果选择了AR换脸特效,可以选取相册中的照片,把相册中的人脸“移植”到AR三维模型上… 之后,一个长着你想要的脸的3D虚拟角色,就诞生了。 像这样: ? 这样: ?...郑文是快手CEO宿华在清华期间的同学,清华硕士毕业后去了斯坦福读博,研究计算机图形学和电影特效。 ? △ 郑文博士 此后,郑文陆续在ebay和pilot.ai从事计算机视觉方面的研究。...快手Y-Lab实验室专门做一些为用户提供有趣体验的功能,比如这个手上长多肉的AR特效:一颗种子从天而降,掉落在手心,逐渐生根发芽,长成一颗多肉,之后慢慢变为盛放的样子。 ?...最后到匹配环节,机器基于对视频内容和用户喜好的理解,智能分发视频内容。 毫无疑问,AI驱动也是快手快速崛起的核心原因。 快手目前已有7亿用户、50亿视频

    1.5K30

    原来最强赘婿在二次元长这样,秒穿次元壁的AI特效又双叒火了

    鱼羊 发自 凹非寺 量子位 报道 | 公众号 QbitAI 虽然每天早晨甚至无法从50平米的地铺上醒来,但偶尔刷刷知乎,还是会被这类问题吸引住眼球—— 穿越到霸道总裁小说的世界,是一种怎样的体验?...而针对短视频的形式,快手的手绘特效还要考虑保障实时效果,人怎么动,画面也要跟得上。 ? 这就涉及到手机计算能力与模型计算量的适配、脸部效果跟背景效果和素材的适配、视频效果流畅性等诸多因素。...为此,从算法,到工程、特效、涉及等多个环节,研发人员都进行了大量的尝试,以及细致的优化、打磨。 快手技术实力:不止于AI特效本身 打造这款特效的,是快手的Y-tech技术团队。...一方面,是因为每一次的产品落地,都关系到4亿用户的实际体验,牵一而动全身。 另一方面,快手的用户特性决定,用户手中的手机型号分布会很广,不同机型算力和内存资源差异很大。...所以如果你也有想到、期待一些新特效新玩法,不如评论区大胆表达起。 说不定就是下一个火爆全网的短视频新玩法呢~ ? — 完 —

    43830

    草根快手的短视频血战

    作为短视频行业的先锋者,快手在高速增长的同时也有巨额的营销支出,用以增加市场份额。而面对强悍的竞争对手抖音,两强相争的局面还要持续一段时间。...社区氛围与老铁文化 其实快手和抖音虽然同属于短视频赛道,但两者在内容运营的定位上还是有差异的。...随着抖音和快手的不断发展,截止2021年3月快手、抖音重合用户数达2.59亿人,目前国内短视频行业用户增速已有所放缓,平台获取新用户的空间将来自于与竞争对手的贴身肉搏。...另外快手也在教育内容上开始发力,并取得了不小的收获。 在教育内容上快手构建教育新场景,链接各行各业的普通人,通过视频加直播的功能,为用户创造教与学的新场景。...出海将是快手新的增长点。我国目前在短视频和直播领域的发展领先全球,海外市场蕴含着巨大潜力和机遇。

    41630

    搞定短视频!批量下载快手视频(附源码)

    [e375851a-3400-4842-b0bd-e9baebb4df48.jpg] 大家好,我是辰哥~ 相信大家都接触了短视频平台,比如某音、某手等平台,竟然大家都熟悉了,那么今天辰哥分享的技术是:在某手上搜索视频...2.分析数据包 通过查看返回的数据,可以发现所有的视频内容都在字段feeds中 [27a79e14-d188-4174-8816-41119f8e6925.png] 提取字段:视频地址、用户名、封面图、...,这里新建两个函数,一个是下载视频,一个是下载封面图。...下载视频 #下载视频 def download_mp4(mp4_name,mp4_url): dir = str(time.strftime('%y%m%d', time.localtime()...其名为是以视频名称对两者进行命名。 04 小结 本文讲解了某手搜索视频下载的技术,对于新手学习来说还是一个不错的可以练习的小爬虫,想学习的小伙伴,一定要动手尝试**!一定要动手尝试**!

    2.3K31

    揭秘:快手用AI在短视频里玩出三大花样,背后是怎样的技术原理?

    比如说,快手平台上的1.9亿短视频创作者,他们也在用AI技术丰富自己创作的短视频作者。 那么,具体怎么用呢? 量子位采访到了快手的技术团队,为大家介绍几个快手平台上AI应用,还有背后的原理。...低配手机也能用的Animoji 最有趣的功能当属“萌面Kmoji”,将视频中人物的头像变成虚拟卡通形象,一方面可以给视频增添乐趣,另一方面也可以帮助到那些不想露脸的用户。...世界上的另一个你 世界上的另一个你是快手在去年乌镇的世界互联网大会上亮相的一个线下应用,这个玩法是根据体验者的面孔,匹配亿万快手用户上传在平台上的公开视频,找到那个跟你长相相似的人。 ?...据快手技术团队介绍,在提取人脸特征后,系统在快手后台数据库中进行检索,找到相似度最高的三个人脸图像。...人像3D打光 快手上的另外一个AI应用则是人像3D打光,就像是短视频版的“逆光也清晰”,在光线不好的情况下,自动“打”一束光到用户脸上,让生成的图像效果有非常自然、符合面部形状的光线。 ?

    1.4K20

    分分钟拥有哈利波特的隐身衣,还是在手机端的那种

    最关键的是,给你一部安装了快手的手机,你同样可以实现。 没错,这个能实时实现电影大片里隐身特效的黑科技,就是快手最近上线的AI新玩法——「隐身魔法」。...效果如此丝滑,难怪上线几天时间,快手用户就玩得飞起,迅速贡献了77.5w个相关作品。 一时成为年度短视频最热特效玩法。 移动端的实时视频修复技术 让视频里的人实时隐身,怎么个原理?...一方面,是因为每一次的产品落地,都关系到4亿用户的实际体验,牵一而动全身。 另一方面,快手的用户特性决定,用户手中的手机型号分布会很广,不同机型算力和内存资源差异很大。...拿CPU来说,无论是苹果、高通、华为还是联科的芯片,无论是高端的骁龙865还是低端的骁龙450、430,YCNN引擎都能支持模型在上面运行。...快手之道 最后,回到AI特效、回到晚会,回到快手本身。 快手的技术和AI特效魔法,之前介绍的也不少。

    77420

    视频号、抖音、快手狙击付费直播

    2021年,视频号、抖音、快手三大短视频平台纷纷开始试水付费直播,覆盖了体育赛事、演唱会、美食制作、教唱音乐等多类型直播内容。...虽然视频号、抖音、快手的发展步调并不一致,但在付费直播的探索上却是不谋而合,这其中或许暗藏了各个短视频平台的别有用心。 其一,缓解流量变现焦虑。...现在关于付费直播模式,视频号、抖音和快手分别从不同角度力,谁都有各自的取经之道。...快手:由面及点深入 一直以来,快手理想的发展状态是通过强化社交属性,显著增强强互动及高参与度的一站式数字社区建设,使得快手作为一个社交平台从其他短视频平台中脱颖而出。...现在视频号、抖音、快手都已将付费直播作为新的力点,谁都不甘落后,但目前许多用户仍保有免费使用习惯,视频号、抖音、快手们需要正视用户的真正需求,争取最大程度刺激用户消费。

    85630

    快手视频记录脱贫攻坚故事

    他提及,在快手上看到一个身在悬崖村的小伙子每天都在悬崖村天梯的短视频。这个小伙子曾被央视报道,他通过快手,不但帮助小山村的人们卖出了不少山货,还为小山村带来了很多旅游机会。...这个总书记始终牵挂、曾经与世隔绝的小山村,通过快手,让许多悬崖村村民成为“网红”,不仅用短视频记录了悬崖村的发展变化,还顺带增加了当地旅游收入和土特产销售渠道,为贫困村的脱贫致富提供了一条可借鉴的全新途径...此后,悬崖村的年轻人里迅速产生了第一批快手“网红”,他们通过短视频展示村庄风景、田间地头的一切,或是通过直播做起了土特产生意。几代生活在封闭大山中的人们,正在通过快手与这个时代紧密地联系在一起。...这位快手用户曾被新华社、央视等多家媒体报道,引起轰动。 一个偶然的机会,蒋金春认识了一个快手老铁,在他的点拨下,蒋金春开始用手机拍摄自己在山村里生活的短视频,并上传到快手。...在此理念下,快手通过重视长尾内容的精准推荐,广大贫困地区的秀美风景、无污染土特产信息,能够被短视频的形式记录下来,并分发到对特色旅游、绿色食品有需求的潜在人群,这种连接带来的便是一条值得借鉴的脱贫致富新路径

    49620

    业界 | 快手科技李岩:多模态技术在产业界的应用与未来展望

    李岩在演讲中表示,多模态技术有两大应用方向,一是会改变人机交互的方式,二是将使信息分发更加高效;视频本身就是一个多模态的问题,而快手则拥有海量的多模态数据,多模态的研究对于快手来说是非常重要的课题;目前快手已经在语音识别与合成...、智能视频配乐、通过 2D 图像驱动 3D 建模特效视频精准理解等领域对多模态技术进行研发应用。...以下为演讲的主要内容: 大家好,首先我来简单介绍一下快手,在这个平台,用户能够被广阔的世界看到,也能够看到广阔的世界,我们可以看一下快手的数据: 70 亿条视频总量、1500 万日新增视频,日均的使用时长超过...用户不必去花上万元去买 iphoneX,只要用一个千元的安卓手机,就可在快手的产品上体验 Animoji 的特效,从而能够在不暴露脸部信息的同时展现细微的表情变化,例如微笑、单只眼睛睁单只眼睛闭等,让原来一些羞于表演自己才艺的人...像这样的视频快手数据库中有 70 亿,想要理解这么多的视频内容,必须借助多模态技术。

    1.1K30

    快手于冰:咱客户端工程师,还可以往哪个方向纵深?

    5、5G 加快落地,音视频产品越来越丰富,作为快手移动端和音视频技术负责人,于冰总结了他看到的移动开发新趋势。...更高的算法复杂度:除了交互能力,很多在过去只能在 PC 端才能做到的内容生产制作的能力,比如视频采集 / 剪辑、AI 特效等等,如今在移动端也能实现。“端智能 + 端云一体”趋势越加明显。...9、再从技术的深度来说,快手需要做到非常极致的性能优化和稳定性。比如,快手视频压缩算法要用汇编来加速,视频的解码需要适配硬件的能力,AI 推理引擎的加速也需要深耕。...再比如,特效的渲染、AI 的推理都需要很高的算力,在做端智能的时候,还需要在双端(iOS 和安卓)流畅运行,这就要深入到操作系统的内核去研究。 10、快手的移动端都有哪些特点或者挑战呢?...复杂和海量业务下,快手需要保证每周版频率,甚至在一些重大活动时,要做到随时版。 14、四是架构精益求精。

    5K20

    CNCC 2018 | 快手科技李岩:多模态技术在产业界的应用与未来展望

    李岩在演讲中表示,多模态技术有两大应用方向,一是会改变人机交互的方式,二是将使信息分发更加高效;视频本身就是一个多模态的问题,而快手则拥有海量的多模态数据,多模态的研究对于快手来说是非常重要的课题;目前快手已经在语音识别与合成...、智能视频配乐、通过 2D 图像驱动 3D 建模特效视频精准理解等领域对多模态技术进行研发应用。...大家好,首先我来简单介绍一下快手,在这个平台,用户能够被广阔的世界看到,也能够看到广阔的世界,我们可以看一下快手的数据: 70 亿条视频总量、1500 万日新增视频,日均的使用时长超过 60 分钟等,所以快手平台上有非常多的多媒体数据...用户不必去花上万元去买 iphoneX,只要用一个千元的安卓手机,就可在快手的产品上体验 Animoji 的特效,从而能够在不暴露脸部信息的同时展现细微的表情变化,例如微笑、单只眼睛睁单只眼睛闭等,让原来一些羞于表演自己才艺的人...像这样的视频快手数据库中有 70 亿,想要理解这么多的视频内容,必须借助多模态技术。

    99220

    CVPR2021|快手: 深度视频抠图

    ” 深度视频抠图 ?...近年来,短视频的大热进一步催生了更复杂的视频抠图的需求,如何提升视频抠图效果也成为了时下的重要课题之一。 ” ? 文 / 南木 编辑 / 贞霓 ?...近年来,短视频的大热进一步催生了更复杂的视频抠图的需求,如何提升视频抠图效果也成为了时下的重要课题之一。...03 成果 为了解决上述视频抠图的痛点,快手联合香港科技大学推出了新的视频抠图框架,这是第一个基于深度学习的视频抠图算法。...在深度视频抠图技术尚未被有效探索之际,该研究填补了这一技术空缺。考虑到深度视频算法通常需要大规模的训练数据,文中还提出了一个基于合成的大规模视频抠图数据集,用来支持后续的视频抠图技术研究。

    1.3K11

    快手智能视频图像编码处理服务架构

    2.2 Atlas 能力简介 Atlas作为多媒体处理算法引擎,已经在快手的各种线上服务全面落地,包括快手主站及海外的视频/图像分析、视频/图像处理、视频转码等。...快手平台通过应用响度均衡处理技术和标准,能够有效规范平台的音频响度和动态范围平衡,避免切换不同视频时,声音响度忽大忽小。而智能降噪技术已经应用在快手直播,视频会议及快手K歌等多个业务场景。...智能影集功能是通过对用户作品集的内容进行理解及分析,精选出用户公开作品中的优质片段,并以一定的故事线(时间或地点)逻辑裁剪梳理出视频集锦片段,最终结合特效片段合成出影集作品。...这里的“菜谱”包括后续算法服务层会使用哪些算法,以及这些算法的顺序和配置:比如用H.264/AVC还是用H.265/HEVC编码,采用怎样的编码配置;如何做前处理,包括做哪些处理及处理的顺序和参数,是先做去噪还是先做色彩增强...3.3 快手视频编码能力发展历程 这是我们首次对外披露快手的短视频转码能力,也是我们部门多个团队合作的一个阶段性总结。

    2.2K30

    没想到吧,让你一秒变身纸片人的爆火AI特效,背后还有这么多知识点

    快手“手绘封面”特效 并且早已不仅仅局限于单张照片,短视频的每一帧都能用这样的麻瓜“魔法”丝滑覆盖。 各种艺术风格,只有你想不到,没有AI做不到。...不妨以快手爆火的手绘特效为例,详细唠唠这件事。 首先,自然还是算法层面的一系列操作。...从用户拍摄视频/照片,到AI的“手绘作品”输出,在AI看来大致是这样一个流程: ISP将处理好的视频/照片发送给App,AI接收到需要处理的画面,就会预先对每一帧画面进行预处理,统一格式和尺寸。...利用这些软件工具,像视频平台这样的算法开发方,就能够快速接入高通AI引擎,充分探索AI算法的性能边界。 事实上,快手和高通早在骁龙765移动平台推出时就展开了合作。...2015年,搭载第一代高通AI引擎的骁龙820布,正式引入高通Hexagon向量扩展内核,以支持更强大的AI处理能力。

    37910

    视频出海:快手视频如何乘风破浪?

    但短视频的出现仿佛让大家发现了新大陆,你发现,现在万事万物皆可短视频。 作为颇受用户喜欢的短视频 App 之一,快手平台平均日活跃用户 3.08 亿,月活跃用户 7.7 亿。...在今天举办的 QCon 全球软件开发大会(北京站)上,来自快手的音视频中台技术负责人曾凡平老师将分享《快手海外音视频体验优化实践》的话题,如果大家感兴趣,可以扫描下图二维码查看。...需要找到一种方案,针对机型不同性能提供差异化音视频策略。 通过大量调研,快手视频团队采用机型画像方案较好地解决了上述问题。...快手长期积累的音视频黑科技算法是我们最基础的支撑能力,其中包括: 视频编解码算法,在保证视频清晰度的情况下,将视频文件尽可能压缩到最小; 图像处理算法能将质量较差的视频源进行画质增强; 传输算法提升了视频在弱网环境下上传和下载的速度...讲师简介 曾凡平,快手视频中台技术负责人,主要负责快手视频中台建设和海外业务的音视频体验优化工作,对短视频、直播的全链路优化有丰富经验,对出海业务如何提升音视频体验有深入的认识。

    72930
    领券