首页
学习
活动
专区
圈层
工具
发布
精选内容/技术社群/优惠产品,尽在小程序
立即前往

快手可灵团队创新力作开源项目LivePortrait:静态照片焕新生,火爆全网!

近期,快手可灵团队开源的人像视频生成框架 LivePortrait 在人工智能领域掀起了一阵狂潮。此创新工具凭借一张静态图像就能缔造出逼真生动的动态视频,充分彰显了 AI 技术在视频生成领域的广阔前景与巨大潜力。

LivePortrait 自发布以来,在开源社区引发了高度关注。短时间内,其在 GitHub 上斩获 7.5K 星标,荣登当下热门 AI 项目的宝座。甚至吸引了 HuggingFace 首席战略官 Thomas Wolf 亲自试用,并在 HuggingFace 平台的全部应用中占据趋势榜首。

LivePortrait 的突出优势在于其令人称奇的表情迁移能力。它不仅能让静态图像中的人物做出眨眼、微笑、转头等动作,还能将一人的表情和动态精准复刻到另一人身上,且不受风格束缚,无论是写实、油画、雕塑还是 3D 渲染等风格均能驾驭。

这款工具的应用范畴极为宽泛。从单人肖像到温馨的全家福,从人物到可爱的宠物,LivePortrait 都能赋予它们鲜活的动态效果。更为惊艳的是,它还能够对视频中的表情进行精细调控,比如微调嘴角上扬的幅度或者改变眼睛的大小,为创作者赋予了史无前例的表情掌控力。

在技术层面,LivePortrait 独辟蹊径,采用基于隐式关键点的创新框架,有别于当下主流的基于扩散模型的方法。通过两个阶段的训练流程,极大地增强了模型的泛化能力、表达能力以及纹理质量。第一阶段着重于框架的改良,涵盖高质量数据的整合、混合训练、网络架构的升级等工作。第二阶段则凭借贴合模块和重定向模块的训练,进一步提升了面部表情细节的处理精度。

相较现有的方法,LivePortrait 在生成质量和驱动精准度上表现出众,特别是在捕捉细微表情和保留原图纹理方面优势明显。尽管在某些方面稍逊于基于扩散模型的方法,但其推理效率极高,在 RTX 4090 GPU 上每帧生成速度可达 12.8 毫秒,远远超越现有的扩散模型方法。

LivePortrait 的问世不仅展现了 AI 技术在视频生成领域的最新突破,更为创意产业注入了全新的活力与可能。随着此类技术的持续演进,我们有理由期待在不远的将来,更多令人叹为观止的 AI 视频生成应用将如雨后春笋般涌现,为内容创作者和广大用户呈上更为丰富、便捷的创作利器。

  • 发表于:
  • 原文链接https://page.om.qq.com/page/Oygt1MZPEQDg2AeqnNiCgp-g0
  • 腾讯「腾讯云开发者社区」是腾讯内容开放平台帐号(企鹅号)传播渠道之一,根据《腾讯内容开放平台服务协议》转载发布内容。
  • 如有侵权,请联系 cloudcommunity@tencent.com 删除。

相关快讯

扫码

添加站长 进交流群

领取专属 10元无门槛券

私享最新 技术干货

扫码加入开发者社群
领券