腾讯自研XR虚实融合技术，助力文旅行业新体验新发展

腾讯文旅

发布于 2022-12-13 20:10:44

1.7K0

发布于 2022-12-13 20:10:44

虚拟现实（含增强现实、混合现实）是新一代信息技术的重要前沿方向，是数字经济的重大前瞻领域，将深刻改变人类的生产生活方式，产业发展战略窗口期已然形成。文旅行业作为虚实融合在具体领域的天然应用入口，其延展出的参与、体验方式等为文旅行业带来了新的生机。旅游业纷纷抢抓虚实共融领域新赛道，为文旅行业破圈提供新思路、创造新空间和延展发展新可能。

五部门：深化虚拟现实与文化旅游有机融合

近日，文化和旅游部等五部门联合发布《虚拟现实与行业应用融合发展行动计划（2022—2026年）》。提出将“虚拟现实和增强现实”列入数字经济重点产业，加速多行业多场景应用落地等五大重点任务，到2026年，我国虚拟现实产业总体规模（含相关硬件、软件、应用等）超过3500亿元。

《行动计划》提到，要加速多行业多场景应用落地。面向规模化与特色化的融合应用发展目标，深化虚拟现实在行业领域的有机融合，推动有条件的行业开展规模化应用试点。其中，在虚拟现实+文化旅游方面，要推动文化展馆、旅游场所、特色街区开发虚拟现实数字化体验产品，让优秀文化和旅游资源借助虚拟现实技术“活起来”。开展行前预览、虚实融合导航、导游导览、艺术品展陈、文物古迹复原等虚拟现实创新应用，鼓励一二级博物馆、具有条件的旅游活动场所设置沉浸式体验设施设备。

《行动计划》的制定，为进一步引导虚拟现实与旅游业深度融合，以数字科技助力旅游产业发展提供了方向指引。

腾讯自研XR虚实融合技术，助力文旅行业新体验新发展

虚拟现实技术以其虚实结合、实时交互与三维沉浸的特点，给文旅业的数字化传播增添了更多可能。在文旅业态方面，如旅游景区通过结合自身资源特色和属性，借助虚拟现实等技术，打造与其文化特色相匹配的沉浸式场景空间和体验业态，让景区变成虚拟世界，游客可以打破时空的局限，足不出户，即可到达每一个向往的“远方”；在新产品研发方面，虚拟现实技术在旅游行业的应用，有助于推动旅游企业升级已有产品和服务，丰富产品和服务供给内容，优化旅游供给结构。将虚实融合技术应用在文博场所文物馆藏展示上，将博物馆中的文物展品、文化展览等真实、生动、完整地呈现在观众面前，让冰冷的藏品鲜活起来，拉近观众与历史的距离......虚拟现实技术的应用，可以进一步拓展文旅业展示的手段，为体验者带来强烈的现场感和参与感，让文旅业焕发出新的生命力。

然而，目前能体验到的90%以上的优秀的虚拟现实体验大多都来自于线下体验，包括：旅游景区、主题公园、文博场所、沉浸式体验展览馆等。线下体验属于游客密集型娱乐方式，更加适合开放式、大空间、多人群的虚拟现实环境，展现方式多以大屏幕为主。然而，这种展现形式对软硬件和内容要求较高，成本也居高不下，一定程度上制约了此种类型虚拟现实技术的推广应用。

近期，由腾讯视频自主研发的腾讯XR虚实融合文旅解决方案，可将实拍真人、虚拟数字人，植入到虚拟场景中，并与场景实时交互，实现多维度的虚实融合效果。

该技术可摆脱对大型绿幕或LED屏的场地依赖，无需稳定器、跟踪器、定位器、摇臂等高达几十万的硬件设备。任何人都可以通过一台相机甚至手机把自己融入到虚拟世界中，极大降低了使用门槛和成本的同时，高品质的人物抠图、清晰稳定的画面、创新酷炫的互动也为内容创作带来无限发挥空间，其呈现效果媲美专业硬件，可降低95%以上的拍摄硬件成本。

场地示意图（简易绿幕+灯光+摄像机+普通工作站）

六大核心能力

虚拟运镜跟踪／防抖／实时渲染

固定机位拍摄视频，实现虚拟运镜跟踪，虚拟稳定器让画面更流畅，最高可实时渲染8K视频。

真人+特定场景，沉浸式赛事播报

二维码绿幕抠图

独创二维码抠图，户外级轻量/便携，精准定位空间坐标，支持动态机位跟踪拍摄，色彩自动校准，还原逼真影像。

手势互动

识别人物指定动作，可实现与虚拟背景或物体自然交互，还原光影和透视关系，支持动作和控制台触发交互双保障

真人3d手势操控虚拟物体

全景VR/360视频虚实融合

虚拟背景支持录制好的视频，包括36/VR视频，可将真人平移到任意场景中，扩展应用范围。

无绿幕AI抠图融合

在无绿幕场景下，通过AI抠图技术也能精准识别人物完成抠图，将真人和虚拟背景融为一体。

无绿幕实拍融合效果

多人异地同屏互动

通过多人融合技术，可以将异地多人同时渲染在一个虚拟场景中，多人间可自由交互。

真人+数字人，同场融合

行业应用

目前，腾讯XR虚实融合文旅解决方案已在文旅行业得到了广泛应用，已经和故宫、央视等多家单位展开深度合作，在提升景区游览体验、文物虚拟导览、文创消费体验、虚拟发布会等方面均有落地。

数字人+真人发布会/颁奖典礼：将虚实融合技术和数字人融入重要博物馆发布会场景，并与领导嘉宾进行有趣互动。高标准推进品牌概念的宣推。

科教讲解视频制作：将虚实融合技术应用在博物馆文物馆藏展示上，可以帮助您进行更好的文物历史教学内容呈现，让技术赋能历史，让文物重新鲜活！

乡村振兴助农XR直播间：帮助农业产业搭建XR直播间，三维空间播放农作物种植场景，更加全面的展示产品卖点，促进助农产品成交。

虚拟发布会：在元宇宙空间中和产品进行虚实互动，推动品效宣传二合一，结合虚实融合技术、数字人技术和腾讯流量生态，2023年1月，我们即将推出基于虚实融合的元宇宙发布会方案。XR虚实融合技术—— 真人+虚景完美融合，自由穿梭任意虚拟空间，有灵魂的数字人 —— AI摄像头捕捉、驱动数字人互动，模拟真人变声，直播互动双端联动 —— 直播互动玩法、海量的广告宣推资源位、视频号+腾讯视频双直播、联合招商体系。

此外，该技术已获得多项荣誉：成为腾讯内唯一连续两年受邀参与中国媒体论坛的技术方代表；作为唯一代表性技术案例亮相2022年世界VR产业论坛。11月8日，该技术从全球100多个国家和地区、200多个参评案例中脱颖而出，入选2022年世界互联网大会《携手构建网络空间命运共同体实践案例集》。