Dreamscreen使用Xsens开发实时LED虚拟制片技术

Dreamscreen Australia，是一家位于墨尔本专门从事实时LED虚拟制片的公司。Dreamscreen的首席执行官兼联合创始人克莱顿·雅各布森（Clayton Jacobson）就工作室的概念、未来以及如何在其项目中应用Xsens向我们进行了详细的介绍。

克莱顿已经在电视和电影行业工作了三十多个年头，他职业生涯始于为U2和Crowded House等乐队制作音乐视频。从那时起，他接触到了更多的商业视频工作，之后他便将注意力转向短片和故事片的制作。

新冠肺炎全球性爆发之后政府对于各类项目的限制迫使克莱顿暂停了一个正在进行的新的故事片项目的拍摄，但突如其来的封锁带同时也为克莱顿带来了一个全新的制作领域。Xsens的运动捕捉技术现在符合非常他的制作标准，这使得他能够继续在疫情期间追求他的梦想——在3年的时间里建立一个专业的LED虚拟制片工作室——Dreamscreen。为了实现这一目标，他与一些当地和国际上的企业达成了合作，如Tracklab实验室（Xsens澳洲合伙人），虚幻引擎以及英伟达等。

克莱顿回忆道：“当虚拟现实技术在2016年爆发式发展时，我看到了Dreamscreen的潜力，并一直热切地等待着电子游戏环境提高到更逼真的标准。随着技术的发展，我们将Xsens视为我们工具库中至关重要的组成部分。”

克莱顿开始召集一组专家一起测试增强虚拟现实环境下的实时虚拟制片并最终获得了出色的结果。

实时虚拟制片

实施虚拟制片是指影片的导演能够在不使用后期制作的情况下将真人表演实时放入到的虚拟世界中的制片方法，Dreamscreen将这一特点作为公司产品的最佳卖点。

“在传统的虚拟动画制作中，动作捕捉是快速制作基底动画的好方法。但是，对于实时LED虚拟制片而言，则必须找到将虚拟与物理相结合的新方法，而不能依靠后期制片来修复或改变动作捕捉演员的运动过程。克莱顿解释到：“Xsens能够实时捕捉镜头中非常自然的运动动作，这可以让我们的眼睛误以为动画中的背景是真实存在的。”他补充到，“Xsens提供的结果非常稳定而且非常令人满意，Xsens对于我们完成动画制作的最终效果来说至关重要。”

工作流中的Xsens

在目前进行的项目中Dreamscreen使用Xsens作为其表演捕捉通道的一个重要部分。团队使用虚幻引擎实时处理相机捕获的运动数据，以创建演员在真人外景拍摄中可能会看到的人工环境视差偏移。

“在LED虚拟制片时，我们可以将Xsens收集的实时数据流式传输到虚幻引擎中，以便直接在屏幕上与3D角色（化身）进行实时交互和操纵。我们还可以将身体捕捉与面部数据相结合，提供完整的3D角色效果表现。”

Dreamscreen独特的虚拟制片方法已经在当地和全球引起了广泛的关注。随着工作室不断完善其工作流程，并继续进步和扩展，Dreamscreen工作室希望能够承接到一些更大、更有发展空间的项目。克莱顿期待在未来的项目中继续使用Xsens为他们提供稳定可靠的动捕数据。

“实现演员的实时表演与屏幕中的实时3D化身交互与结合为具有创造性的制片开辟了巨大的可能性，我们在这方面使用的技术已经达到了专业制片标准的数据和资产水平。同时我们也在不断提升自身的技术水平，Dreamscreen的未来令人期待！”克莱顿说道。