图生3d新选手_meta最新开源视频特效模型原创

这次来看什么呢？来看这个图生3D的新玩家是Meta做的一个萨姆3D，这东西能做什么呢？比如说你给它一个石狮子的图片，它就能把这石狮子怎么样呢？做成一个3D的效果，这个3D的效果呢，我觉得还挺好，但是呢，它对于这个尾巴的理解好像还是有点儿问题是吧，有点儿问题，但整体上这个牙呀，还有手啊，你要你要细看呢，其实是有问题的，但是已经挺不错了。类似的玩家还有mesh和这个混元3D，这这个两个都是文声3D和徒生3D的非常厉害的东西，那我们看看它能有一些什么应用，那transformation generate a d model for any object in an image get geometry and textures for all angles of an object even the parts you can't see or choose to reconstruct all the objects in a scene Sam d is specialized.

Prizesed and reconstructing people get accurate meshes of a person's body shape and pose segment everyone in an image even those who are partially hidden or unique poss scientific d redeffis real world d persumption for robotics scientific research and commercial applications like Facebook marketplace try Sam three today in the segment anythingra, 我们就上传一张照片。比如说这张照片上传之后呢，他就可以去点击选择，他会把这个人物呢就选出来，然后呢，我们就可以看到这个人物，他有骨骼就已经已经已经存在了，当然我们也可以去创建3D场景。然后我们要添加一些这个遮罩，就是呃，让我们知道什么是一个人物加号，就是相当于魔术棒里的加刻，进来之后我们就创建3D，然后呢，他就得到这么一个模型，得到这么一个模型。

我们可以看到它就是说怎么说呢，What can I say啊，就是呃，有点就是它比如说就跟那狮子尾巴是一样的，它对一些基本的规律或者经典角色的认知还是比较少的。但是呢，它对一些常规的家用事物，比如说你可以添加多个事物，你可以点击好多的这个东西，添加一个对象，可以就是选中去添加一个特效。比如说3D的特效。嗯。或者环境特效。视觉筛选。它会添加这些相应的特效。

当然他也可以通过这个就是文本的方式直接选取，就是视频中选取对象，然后对这个对象加特效。是比如说加加加一些，比如说克隆啊，或者这种各种各样的特效，这个特效还是挺多的。比如说这个这这样的特效，那那我其实就是跳舞的时候就可以把这个东西搁进去，比如说我们这块有这样一个视频，在视频中呢，他先开始准备这个视频导入，然后他开始寻找其中的角色，比如说是鱼呀，或者人呢，他找到了一个人，然后呢，他就把这个人呢，就添加到了这个，就是就直接给他加了一个特效，现在是没有特效是吧。然后我们应用这个特效，我们可以看到，如果我应用这个特效的话，那那那那这个时候它其实从头到尾就会有这么一个，就是相当于买买瓜大队这样的存在。而且是多线程并行渲染的，比较快就能结束。

他是能做出这种效果，他这个有点问题，但如果说是一个背景非常清晰的这么一个状态，他做这种跳舞的这种是OK的，那就说这个东西它有一些参数对吧，它可以有。比如说我们可以。让它的数量变化。大小变化。距离变化。是吧？然后呃，羽化程度变化，其实都是一些参数，呃，然后呢，我们就可以去。去导出，诶，那你说这个东西不是剪映里面也有吗？这个剪映里面确实有，当我们把这个视频放到这儿之后呢，我们就是点这个特效，然后人物特效里面，人物特效里面搜索分身，那么他就会搜索出相当多的分身，如果说把这个东西拿过来，我觉得这个是分身不错，然后他就会。

就是。在这儿出现这个效果，其实效果也是非常好的，而且这些这些相应的参数都可以加关键帧，然后可以控制时长。都是没有问题的，嗯，那。现在其实有三种方式，一种是这种网站的方式，对吧，但是它它的缺点是不能加关键帧，网站上面，呃，速度相对来说不能确保，可是它有什么好处呢？它的好处是这个，呃。不用占用你的硬盘，就直接在网上就能做，它这块儿有这么一个链接，这个就是模模型叫萨姆三，这个萨姆三的模型呢，我们可以看到它更新的还是比较快的，它的源代码呢，也是开放出来的。在scripts里面有evaluation，然后呢，它里面有一些PY代码，Facebook研究室的一个。

萨三的模型的链接，那么这块就会有它的一些研究人员，还有他架构。然后。而且都是开源的，使用Python和py TORCH和qda就可以直接跑的，作为刚才那个3D呢，它也会有这样一个叫做萨3D的这么一个，呃，仓库链接，然后。也有相应的一些，呃，开放的源代码，它的好处就是第一不用占本地硬盘，第二呢，把不管是3D模型也好，还是视频特效也好，都都开源放到了网上，那这个剪映呢，它的就是效果很多，而且它能在时间轴上直接做，如果你呃这个机器硬盘足够，然后算力足够的话，那么本地这个效果是挺好的。但是还有一种更好的，或者说更传统的方式是ae，传统ae呢，其实就是你需要自己去抠像，然后准备通道，然后去呃设置设置这些东西，那他就会比较慢一点。

那么这三种呢，都是实时发生的，如果说您发现了好玩的视频特效或者3D的这种工具，也请告诉我，我们一起来分享，一起来玩儿，这次呢就是这样，谢谢大家，再见。