谷歌deepmind推出的视频处理AI：Generative Omnimatte AI

当你拍的照片背景杂乱，你可以用ps来去掉杂乱的背景

但是，当你拍的视频里有你想去掉的怎么办呢？

今天给大家介绍一个AI模型，可以实现视频中的物体分离，也就是视频版的PS：Generative Omnimatte AI

Generative Omnimatte AI是什么？

Generative Omnimatte AI是由谷歌DeepMind发布的，用于视频处理的AI。它能像个超细心的 “拆解大师”，把视频按不同元素，一层一层拆开，拆出的每一层都带着颜色、透明度这些信息，连物体的影子、反光啥的都能单独拎出来归好类。

这样一来，不管是想去掉视频里多余的东西，还是给画面加点特效、重新组合场景，都变得轻轻松松

它是怎么做到的？

生成式全景抠图的核心在于其独特的算法，能够将输入视频分解为一组 RGBA 全景抠图层。每一层都包含一个完全可见的对象以及与之相关的效果，如阴影和反射。这种分解方式为后续的精确编辑提供了基础，使得每个元素都能被单独处理。

与现有的全景抠图方法相比，生成式全景抠图具有显著优势。传统方法往往依赖于限制性的运动假设，例如假设背景是静止的，这就导致动态背景元素容易与前景对象层相互纠缠，影响编辑效果。而生成式全景抠图则不受此限制，能够更精准地分离各个元素。

此外，像 Omnimatte3D 和 OmnimatteRF 等方法，由于其 3D 感知背景表示对相机姿态估计质量敏感，可能会产生模糊的背景层。而生成式全景抠图在处理背景时表现更为出色，能够生成清晰、准确的背景层，为视频编辑提供更好的素材。

最后想说的

AI目前还在发展中，很多技术初衷是好的，但是落地很难。这个工具目前也是研究阶段，感兴趣的可以去项目主页查看更详细的信息。

项目主页

https://gen-omnimatte.github.io/

好了，今天的内容就分享到这里希望你们喜欢！欢迎关注、点赞和分享！

AI应用&工具82

AI应用&工具 · 目录

上一篇AI换脸，视频直播都不能信了！Deep-Live-Cam！