首页
学习
活动
专区
工具
TVP
发布
精选内容/技术社群/优惠产品,尽在小程序
立即前往

用AI实现动画角色的姿势迁移,Adobe等提出新型「木偶动画」

他们还为了生成更高质量的卡通角色新动画搭建了一个端到端的模型,这个模型可用于合成中间帧创建数据驱动的变形,其模板拟合(template fitting)步骤检测图像配准方面的效果明显优于当前的通用技术...人类观察多个动作序列,很容易想象出这个角色在做其他姿势时的细节样貌,但这对于算法而言没那么容易:关节接合、艺术效果视角变化等都会对图像外观产生大量细微差别,这些极大增加了提取底层角色结构的复杂度。...研究人员构建了合成中间帧根据用户指定变形制作动画的原型应用,根据角色生成合理变形的新图像。...首先,用户通过分割一个参考帧来创建层级变形模板木偶;然后训练一个两阶神经网络:第一阶段学习如何扭曲木偶模板来重新设计角色外观,从而将变形木偶与输入序列中的每一帧进行匹配;第二阶段改进变形木偶的渲染结果,...变形网络 获得变形网络模板,就可以学习如何使模板变形以匹配目标角色图像的新姿势了。 图 2 展示了训练架构: ? 图 2:训练架构。

1.5K10

新垣结衣夫妇的孩子会长啥样?我用BabyGAN预测试试...

By 超神经 内容一览:昨日,日本男星星野源通过事务所发布声明,宣布结婚,新娘正是被不少男粉丝奉为「老婆」的新垣结衣。...二人曾共同出演日剧《逃避可耻但有用》 剧中两位主角原本是“契约结婚”,终成眷属 还有一波网友坦然接受「失恋」现状,转而关心起新垣结衣星野源的孩子来,生怕孩子长得不像妈妈。 ?...微博网友对二人孩子长相,表现出了极大关心 借助开源模型 BabyGAN,我们预测了新垣结衣星野源未来孩子的长相。 「大河」是《逃避虽然可耻但有用》剧中,二人孩子的名字。...BabyGAN 生成的儿子成长动图 BabyGAN 到底是何方神器 BabyGAN 是一个基于 StyleGAN 的儿童长相预测器,可以基于编码器生成器,输入父亲和母亲的图像,经过神经网络的处理,...pSp StyleGAN 反演、多模态条件图像合成 人脸正面化、图像修复超分辨率场景中的成果展示 pSp 可以不改变结构的前提下,处理各种各样的图像转换任务,如由分割图生成人脸图像、人脸正面化、

53620
您找到你想要的搜索结果了吗?
是的
没有找到

新垣结衣夫妇的孩子长啥样,用 BabyGAN 预测试试

By 超神经 内容一览:昨日,日本男星星野源通过事务所发布声明,宣布结婚,新娘正是被不少男粉丝奉为「老婆」的新垣结衣。...二人曾共同出演日剧《逃避可耻但有用》 剧中两位主角原本是“契约结婚”,终成眷属 还有一波网友坦然接受「失恋」现状,转而关心起新垣结衣星野源的孩子来,生怕孩子长得不像妈妈。 ?...微博网友对二人孩子长相,表现出了极大关心 借助开源模型 BabyGAN,我们预测了新垣结衣星野源未来孩子的长相。 「大河」是《逃避虽然可耻但有用》剧中,二人孩子的名字。...BabyGAN 生成的儿子成长动图 BabyGAN 到底是何方神器 BabyGAN 是一个基于 StyleGAN 的儿童长相预测器,可以基于编码器生成器,输入父亲和母亲的图像,经过神经网络的处理,...pSp StyleGAN 反演、多模态条件图像合成 人脸正面化、图像修复超分辨率场景中的成果展示 pSp 可以不改变结构的前提下,处理各种各样的图像转换任务,如由分割图生成人脸图像、人脸正面化、

1K30

从虚假信息到深度造假:网络攻击者如何操纵现实

近期,电视剧《狂飙》的爆火,激起了一些UP主的二创激情,将剧中的“CP”角色通过AI换脸移植到其他影视片段中,形成让网友惊呼“眼前一黑”的戏剧化效果,同时也收获了满满流量。...使用这类技术不同于一般类型的信息操纵,不需要采取片面截取、屏蔽等方式来让信息按自身的意图传递,而是更加接近信息本源,以”狸猫换太子“的方式制作虚假内容,因此在技术上更加高阶。...下方的视频截图展示了一个高级的换脸伪造示例,把著名影星汤姆·姆克鲁斯的脸换了视频中的主播身上。 据悉,在这个例子中,需要在 GPU 上进行两个小时的训练以及几天的专业视频编辑后期处理。...口型同步 口型同步又被称为”木偶大师“(Puppet Master),是一种操纵口型图像的技术,使人看起来好像在说他们实际上没有说过的话。...如何检测深度造假 初级检测方法 初级检测方法依赖于 ML 模型,这些模型经过训练可以识别通过深度伪造生成的伪影或像素化。

42020

不得不学的Markdown语法

合理的创建标题,有助于目录的生成 如何改变文本的样式 插入链接与图片 如何插入一段漂亮的代码片 生成一个适合你的列表 创建一个表格 设定内容居中、居左、居右 SmartyPants 创建一个自定义列表...新的改变 我们对Markdown编辑器进行了一些功能拓展与语法支持,除了标准的Markdown编辑器功能,我们增加了如下几点新功能,帮助你用它写博客: 全新的界面设计 ,将会带来全新的写作体验; 创作中心设置你喜爱的代码高亮样式...直接输入1次#,并按下space,将生成1级标题。...输入2次#,并按下space,将生成2级标题。 以此类推,我们支持6级标题。有助于使用TOC语法后生成一个完美的目录。...如何改变文本的样式 强调文本 强调文本 加粗文本 加粗文本 标记文本 删除文本 引用文本 H2O is是液体。 210 运算结果是 1024. 插入链接与图片 链接: link. 图片: ?

63020

加特技只需一句话or一张图,Stable Diffusion的公司把AIGC玩出了新花样

该公司官方网站上发布的 demo 中,展示了 Gen-1 如何丝滑地更改视频风格,来看几个示例。...比如将「街道上的人」变成「粘土木偶」,只需要一行 prompt: 或者将「堆放在桌上的书」变成「夜晚的城市景观」: 从「雪地上的奔跑」到「月球漫步」: 年轻女孩,竟然秒变古代先哲: 论文细节 视觉特效视频编辑在当代媒体领域无处不在...总体来说,本研究的亮点如下: 通过预训练图像模型中引入时间层,并在图像视频上进行联合训练,将潜在扩散模型扩展到了视频生成领域; 提出了一个结构内容感知的模型,样本图像或文本的指导下修改视频。...编辑工作完全是推理时间内进行的,不需要额外对每个视频进行训练或预处理; 展示了对时间、内容结构一致性的完全控制。该研究首次表明,对图像视频数据的联合训练能够让推理时间控制时间的一致性。...他们从输入视频推断出形状表征 s,并根据描述编辑的文本 prompt c 对其进行修改。首先,描述了对生成模型的实现,作为一个条件潜在的视频扩散模型,然后,描述了对形状内容表征的选择。

34410

LeCun新作:分层世界模型,数据驱动的人型机器人控制

新智元报道 编辑:alan 【新智元导读】复杂的物理世界中,人型机器人的全身控制一直是个难题,现有的强化学习做出的效果有时会比较抽象。...作者提出了一个分层世界模型,训练高级低级两个智能体,高级智能体根据视觉观察生成命令,供低级智能体执行。...第二阶段,训练一个木偶世界模型,该模型以视觉观察为输入,并根据指定的下游任务,整合另一个智能体提供的参考运动作为输出。...与传统的分层RL设置不同的是,「木偶」输出的是末端执行器关节的几何位置,而不是目标的嵌入。 这使得负责跟踪的智能体易于在任务之间共享泛化,节省整体计算占用的空间。...然后通过在线互动,对负责下游任务的高级木偶智能体进行训练,木偶接受状态视觉信息输入,并输出命令供跟踪智能体执行。

9710

7 Papers | 超越GPT 3.5的小模型;对ChatGPT摸底考试

该公司官方网站上发布的 demo 中,展示了 Gen-1 如何丝滑地更改视频风格,来看几个示例。...比如将「街道上的人」变成「粘土木偶」,只需要一行 prompt: 推荐:从文本生成图像,再到给视频加特效,下一个 AIGC 爆发点要出现了吗?.../2302.04761v1.pdf 摘要:自然语言处理任务中,大型语言模型零样本少样本学习方面取得了令人印象深刻的结果。....pdf 摘要:本文中,作者展示了 Transformer 网络可以通过使用特定权重对它们进行硬编码并将它们置于一个循环中来模拟复杂的算法程序。...作者通过对 Attention 进行逆向工程来模拟基本计算块来做到这一点,例如对输入序列的编辑操作、非线性函数、函数调用、程序计数器条件分支。

44220

用AI实现动画角色的姿势迁移,Adobe等提出新型「木偶动画」

近日,Adobe 康奈尔大学提出了一种名为「变形木偶模板」的动画制作方法,可实现基于少量卡通角色样本生成新角色动作,木偶动画的制作方法倒是有异曲同工之妙。...人类观察多个动作序列,很容易想象出这个角色在做其他姿势时的细节样貌,但这对于算法而言没那么容易:关节接合、艺术效果视角变化等都会对图像外观产生大量细微差别,这些极大增加了提取底层角色结构的复杂度。...研究人员构建了合成中间帧根据用户指定变形制作动画的原型应用,根据角色生成合理变形的新图像。...首先,用户通过分割一个参考帧来创建层级变形模板木偶;然后训练一个两阶神经网络:第一阶段学习如何扭曲木偶模板来重新设计角色外观,从而将变形木偶与输入序列中的每一帧进行匹配;第二阶段改进变形木偶的渲染结果,...变形网络 获得变形网络模板,就可以学习如何使模板变形以匹配目标角色图像的新姿势了。 图 2 展示了训练架构: ? 图 2:训练架构。

1.3K20

可以映射人物面部动作的人工智能

编辑 | TGS 发布 | ATYUN订阅号 ? 前段时间,人工智能模拟人脸事件闹得沸沸扬扬。...而近日,韩国的一家公司开发出了有意思的工具,名为“木偶”,只用网络摄像头图片就能逼真地模拟历史人物或政治家的面部特征。...这并不是什么新的想法,但木偶不同之处在于,它不需要任何训练数据,且不需要反复预设。它主要通过整合三个新元素来提升艺术水平:图像注意块、目标特征对齐地标变压器。...注意块允许模型关注映射的物理特征的相关位置,而目标特征对齐可以减轻伪影、扭曲失真。最后的地标变压器,则让它可以不需要任何标记数据的情况下,使动作的几何结构与目标几何结构相适应。 ?...研究人员使用了名人的照片开源视频资料库,对模型进行了简单测试,结果表明,木偶几乎超越了所有其他模型,而在另一项用户研究中,100名志愿者被要求,从不同模型生成的两幅图像中,选择最逼真的一幅,结果依然是木偶完胜

60340

技术 | 看Deepmind机器人尬舞,边玩边学人工智能

Deepmind通过增强学习让木偶学习行走、跑跳。 自然界中,无论是动物,还是人类,都可以灵活而随心所欲地做出一些动作,比如猴子树上自由自在得摆动,或是NBA球员虚晃过对手,帅气地投出篮球。...近日,Deepmind公布了智能电机的相关研究成果,展示了机器人学习如何控制和协调身体来解决复杂环境中的任务。这一研究涉及不同领域,包括计算机动画生物力学。 接下来我们带领大家边玩边学。...由此,自然就会想到慎重选择奖励信号,以此来实现优化,但是如果谨慎设计奖励,也就等同于回避了增强学习的核心问题:系统如何直接从有限的奖励信号中自主学习,让木偶实现丰富而有效的动作行为。...据了解,构建可编程人形木偶的问题可以追溯到几个世纪以前。1495年,达芬奇以装甲骑士的形式构建了一个人形自动机。骑士能够通过曲柄传递的力量挥动,坐起来,打开关闭其下巴。...总结 实现系统的灵活性适应性是AI研究的关键因素,Deepmind研究团队直面困难,专注于开发灵活的系统,虽然目前系统模型依然粗糙,但是我们还是很期待后期进一步的优化改进的成果。

85730

LaTeX简明教程(一)

LaTeX是一种基于ΤΕΧ的排版系统,使用时在给定的模板下填写内容即可,让作者将更多精力放在写作上,而不需要特别注意如何排版,只要作者把内容填进去,就可以生成一个基本符合规范的文章。...入门推荐一本书:一份(不太)简短的LaTEX介绍,本文的部分内容即摘自此书,非常推荐学习。 一、安装与配置 一般来说,完整的完成LaTeX功能需要TeX 系统、编辑pdf阅读器三个东西。...LaTeX的专用编辑器有WinEdtTexStudio,不过毕竟这只是一个编辑器,常用的VSCode,Sublime text,Atom,Vim等编辑器都可以作为LaTeX编辑器进行写作。...(第一份文件的生成) 安装完成,即可使用下面的Hello World程序开始第一个tex文件的使用!!!...编译结束看保存的源目录,如下图所示,发现多了很多文件,现在只需要知道,以下文件中,只有tex文件pdf文件是我们所需要的,其余都是编译过程文件,编译结束删除

1.5K10

斯坦福的「虚拟小镇」开源了:25个AI智能体照进《西部世界》

机器之心报道 编辑:陈萍 Smallville 虚拟小镇正式开源了。...看过《西部世界》的朋友们都知道,在这部剧中,故事设定在未来世界,一个庞大的高科技成人主题乐园中,有着拟真人的机器可以像人类一样行事,记得自己看到的东西、说过的话…… 每天,机器人都会被重置,然后回到它们的核心故事情节中...Smallville 的「虚拟小镇」概览图 论文地址:https://arxiv.org/pdf/2304.03442v1.pdf 项目地址:https://github.com/joonspk-research...「小镇居民」可以 Smallville 内随处走动,进入或离开一个场所,甚至去另一个「小镇居民」打招呼。 「小镇居民」可以随便出入的场景 「小镇居民」的行为有多像人?...除了斯坦福开源的 Smallville「虚拟小镇」,接下来我们列举一些其他的 AI 智能体: 初创公司 Fable 利用 AI 智能体,直接拍出了一集《南方公园》,编剧、动画、导演、编辑…… 全部制作流程都由

38330

ASPOSE.Cells & ASPOSE.Words 操纵ExcelWord文档的 .NET Core 实例

下面我使用ASP.NET Core MVC 做一个从Excel文件读取列表数据,并生成一个Word文档,同时Word里面生成同样的列表和数据的例子。...其内容如下: ? 打开HomeController,Privacy方法里进行实现,也就是我点击Privacy菜单的时候,会读取该Excel文件的内容生成一个Word文档: ?...写入Word文档 Aspose里面,Word文档对应的是Document对象。 Document里面写内容,就需要使用DocumentBuilder: ?...首先我需要一个剧中的,字号较大的一个标题。我先设置字体,然后设置段落: ? 这里字体是24号大,加粗,宋体,蓝色,没有下划线。 然后创建了一个段落,剧中的。 最后写了一行文字。...然后开始一个格一个格的写入内容。 最后,把table的宽度设为自适应窗口宽度。然后结束表格即可。 生成Word文件 生成Word文档的方式也是多种多样的,我这里直接生成文件: ?

2.6K30

Stirling-PDF一款开源可本地托管的pdf处理利器

另外在页面上编辑功能,如注释、绘图、添加文本图像。(使用PDF.js与JoxitLiberation.Liberation字体) • 全交互式GUI用于合并/分割/旋转/移动PDF及其页面。...安全与权限 • 添加删除密码。 • 更改/设置PDF权限。 • 添加水印。 • 认证/签名PDF。 • 清理PDF。 • 自动涂黑文本。 其他操作 • 添加/生成/写入签名。...• 通过检测PDF标题文本自动重命名文件。 • PDF上进行OCR(使用OCRMyPDF)。 • PDF/A转换(使用OCRMyPDF)。 • 编辑元数据。 • 平展PDF。...您也可以使用环境变量SECURITY_INITIALLOGIN_USERNAMESECURITY_INITIALLOGIN_PASSWORD来立即设置您自己的用户名密码(建议创建用户删除它们)。...一旦完成上述步骤,重启,如果一切正常,将显示新的stirling-pdf-DB.mv.db。登录Stirling PDF,您将被重定向到/login页面使用这些默认凭据登录。

57210

这才叫良心软件!!

PDF 文档是现在很常用的格式,有时候需要把 PDF 文档转换成图片或文档、合并内容、甚至编辑内容等,都需要借助相关软件。然而目前有些 PDF 软件要么需要付费,又或者功能比较零散单一。...识别书签 支持对 PDF 文档的标签进行编辑,支持自动根据你的文档生成对应的书签、导出/导入书签文档、更改页码、合并标签、设置标签格式等。...贴心PDF书签编辑器 带有阅读界面(具有便于阅读竖排文档的从右到左阅读方式),可批量修改PDF书签属性(颜色、样式、目标页码、缩放比例等),书签中执行查找替换(支持正则表达式及XPath匹配、可快速选择篇...生成PDF书签 无需手工输入,自动识别正文标题或目录,为PDF文档生成书签。 制作PDF文件 合并已有PDF文件或图片,生成新的PDF文件。...合并PDF文档带有原文档的书签,还可挂上新书签(或根据文件名生成),新书签文本样式可自定义。 拆分合并 拆分或合并PDF文件,并保留原文件的书签或挂上新的书签。

1.4K20

7 Papers & Radios | 一句话为视频加特效;迄今为止最全昆虫大脑图谱

/2302.09778v2.pdf 摘要: AI 绘画领域,很多研究者都在致力于提升 AI 绘画模型的可控性,即让模型生成的图像更加符合人类要求。.../2302.03011.pdf 摘要:相信很多人已经领会过生成式 AI 技术的魅力,特别是经历了 2022 年的 AIGC 爆发之后。...以 Stable Diffusion 为代表的文本到图像生成技术一度风靡全球,无数用户涌入,借助 AI 之笔表达自己的艺术想象…… 相比于图像编辑,视频编辑是一个更具有挑战性的议题,它需要合成新的动作,...这些指标有助于评估一项技术对给定工作流程的适用性,并说明组合合成的进步将如何开创加速材料科学的新时代。如下为组合合成平台的合成指标各自评价。...简单来讲,除了单向的文生图,还能实现图生文、图文联合生成、无条件图文生成、图文改写等多种功能,大幅提升文图内容的生产效率,也进一步提升了生成式模型的应用想象力。

62720

独家 | Gen-1——可以改变视频风格的AI模型

在其官方网站发布的一段演示视频中,Runway展示了他们的软件如何将街道上的行人变成黏土木偶,将桌子上的书变成夜晚的风景。...Runway成立于2018年,多年来致力于人工智能视频编辑软件的研发。抖音YouTube用户以及主流电影电视剧工作室都在使用他们的工具。...他们去年发布了一个类似于文本转视频的模型,就像Meta的Make-a-Video谷歌的Phenaki模型一样,这些种模型都可以从头生成非常短的视频片段。...我们即将实现这一目标:到那时候你们在网上看到的大部分内容都是生成式(AIG)的。”...有原创标识文章,请发送【文章名称-待授权公众号名称及ID】至联系邮箱,申请白名单授权并按要求编辑。 发布请将链接反馈至联系邮箱(见下方)。未经许可的转载以及改编者,我们将依法追究其法律责任。

1.1K60

《都挺好》,热点蹭得都挺好!

母亲的疼爱下成长起来的两个儿子,大哥事业有成但迂腐好面子,二哥啃老没担当。 虽然女儿没有感受到家庭的关怀,但还是靠自己成为了社会精英! 结果,母亲去世,家里的一堆破事都等着她来处理.........公众号“她刊”则聚焦一直被轻视的女儿明玉身上,通过明玉其他有同样遭遇的人的逆袭故事,告诉大家一个道理:原生家庭塑造了我们的过去,但是不能束缚我们的现在未来。...这两篇文章,尽管都是揭示“重男轻女”的原生家庭环境对孩子的影响,但各有自己的观点态度。观点态度,这对情感号是最重要的。...前天该账号发了一个视频《苏家人的一天》,由于内容过于真实,转评赞一下子翻了上百倍! 微博@中影小水 也《知否》热播期间得到很好的曝光和传播。...因为搞笑视频微博更容易传播,而预告花絮对时效性的要求较高。因此,建议做影视类公众号的小伙伴可以做一些深度内容,比如影评或者电视剧背后的故事。

56220
领券