凭借文生图模型Stable Diffusion占山为王的Stability AI,近期又整了个新活。近日,Stability AI发布了AI视频生成SDK工具Stable Animation。官方的宣传口号喊得高调:”一款将你的想象力变为现实的终极工具!“但实际生成效果是否能担得起”终极“的名号?GameLook对此进行了一番深入探索。
Stable Animation依然采用Stable Diffusion作为基础模型,目前仅支持SDK与付费API两种方式访问。据官方介绍,目前共支持三类生成途径:文生动画,图生动画和视频生成动画。
以视频生成动画为例,用户可以输入一段视频作为生成参照,同时加入文字prompt作为辅助,实现从视频到动画的转变。
此外,Stable Animation提供了一系列的参数设置。如3D Warping功能允许用户在视频中模拟3D摄影机移动视角。用户还可通过颜色指令对画面的整体对比度、色调、亮度等进行细致的调节。
AI视频生成历来是AI拥趸们最热衷的领域之一,如Runway公司推出的GEN1、GEN2产品此前就获得追捧。从效果上来看,Stable Animation也的确可以完成一些动画生成的任务。但发布后,市场回应Stability AI的是一片寂静——连在Reddit最活跃的AI画图板块r/Stable Diffusion上发布的相关新闻,也仅仅获得了11个点赞。
原因无它,尽管出身名门正派,但生成效果实在有限。Stable Animation依然采用的是为文生图而训练的大模型,并未针对视频生成进行针对性的训练。对于画面连贯性、画面闪烁这些AI生成视频的痛点问题,Stable Animation也并未解决。
早在controlnet技术刚刚推出时,AI爱好者们就已经推出了手动逐帧绘制的AI动画方案。在民间也早有大神推出使用Stable Diffusion制作动画的插件——正如一名Reddit用户吐槽的:”为啥Stablility AI要推出一个Deforum的仿品?“
这名用户所提及的Deforum是由一群AI爱好者开发的AI视频生成工具,使用的是Stable Diffusion的图生图功能。不仅支持本地部署和免费开源使用,并且该工具早在去年10月就已经推出。与Stable Animation类似地,Deforum同样支持3D视角变换、2D移动等等功能,生成效果与Stable Animation相仿。目前在YouTube和B站上一些爱好者发布的AI生成视频,就是使用Deforum制作。
当然,Stable Animation并非没有优点,如简化了视频生成的参数设置难度,并为用户提供了详细的部署指南,降低了使用门槛,帮助那些不擅长于电脑操作的用户生成视频。但对视频质量有要求的用户来说,Stable Animation的存在实在有些聊胜于无。
Stable Animation的遇冷反映出了AI发展现状:实在太卷了。眼下,科技公司拿出四平八稳的AI生成产品已经不足以挑起消费者的兴趣。AI视频生成赛道竞争者并不算多。除Runway的Gen系列产品外,恐怕仅剩Adobe的Firefly。考虑到视频内容的复杂性,一键生成真正的影视级内容的未来,恐怕还离我们十分遥远。
领取专属 10元无门槛券
私享最新 技术干货