GME具有三大基本能力,实时语音用于语音开黑等实时通话场景;语音消息转文本常见于像聊天频道里发语音转文字场景;语音分析可以针对实时语音流中各类型敏感违规词和违规内容进行命中,辅助审查监管,同时也支持自定义违规词库 ,防止广告用户开麦拉人。 同时随着游戏本身的成熟、以及游戏行业的变化,也基于语音诞生了很多新玩法。比如游戏赛事直播的语音解说、游戏陪玩,以及近几年热度越来越高的线上桌游的玩法,都对语音有非常强的依赖。 游戏的玩法、玩家的习惯和心智的变化,目前呈现三点趋势,分别是: 玩家对游戏品质要求更高,需要更沉浸的语音体验 玩法同质化,玩家审美疲劳,需要更丰富的语音玩法支撑 游戏社交属性强化,社交与游戏双向渗透,需要建设更完整的游戏语音社交生态 GME负责处理玩家的语音流,借助Wwise将玩家通话时的语音流,融入到游戏内的物理空间中,让玩家本身的声音也能随着游戏内场景发生改变,给玩家还原出最真实、最沉浸的游戏体验。
导语 游戏多媒体引擎(Game Multimedia Engine,GME)作为游戏语音的PaaS服务,致力于提升游戏语音的质量,简化语音接入的流程,创造更多的语音玩法。 传统的独立语音SDK方案接入过程是独立于游戏音效设计的,而基于Wwise音频引擎开发的游戏,GME提供了专门的解决方案,通过使用相应的GME语音插件,游戏开发者可以将语音的接入融入到游戏音效的设计过程, Wwise强大的音频处理能力和音频控制能力都可以运用到语音上,在提升语音音质的同时,为游戏音效提供了更加丰富的语音玩法设计空间。 强大的设计能力,带来无限的玩法创意 Wwise-GME方案给游戏语音玩法带来非常大的设计空间,由于语音流全部送入Wwise总线,可将Wwise上丰富的音效处理和控制运用到语音,并且能定制化处理每一路语音流 当然还有一些其它的应用场景,比如根据玩家在游戏中的进程发送一些声音Emoji增加语音的趣味性。 模拟语音的反射衍射等处理 沉浸式的语音体验一定要把语音的渲染和游戏的实际场景结合起来考虑。
为企业提供极具性价比的语音识别服务。被微信、王者荣耀、腾讯视频等大量内部业务使用,外部落地录音质检、会议实时转写、语音输入法等多个场景。
幻灯片5.JPG 功能介绍 实时语音 麦序模式 用户轮流语音上麦,音质高流畅性好,适用于语音狼人杀等场景。 自由通话模式 支持多人同时讲话,超低延迟,适用于多人组队开黑等竞技游戏场景。 功能完善全面 提供游戏场景常用功能:多人语音、实时视频、语音消息、语音转文本等多种功能 GME 超低接入门槛 为方便开发者接入腾讯云游戏多媒体引擎产品,这里向您介绍适用于游戏多媒体引擎 SDK 的接入指引 国战游戏 国战游戏中的典型代表为 MMORPG,此类游戏中涉及团队副本、组队、帮派、国战指挥等多种玩法,对语音的时延要求也较高,腾讯云游戏多媒体引擎针对此类场景,实现实时自动上下麦及超低时延语音通话,高度适配超多人在线的国战类游戏玩家语音通话需求 除了游戏玩法本身的创意之外,游戏对于实时语音玩法也进行了颠覆式创新。游戏过程中玩家可以设置【全体模式】向附近的玩家喊话、挑衅、搭讪,这种语音模式可以与陌生人进行很有趣的沟通和互动。 游戏语音多应用在实时语音、多人会话、发送语音消息等场景,而《QQ炫舞》手游的实时K歌玩法在音频处理上的复杂度上远远超出了正常范畴。
Metaverse已成为游戏行业发展的必然趋势,各类游戏也开始在强化互动玩法趣味性,提升玩家体验的方向上进行积极探索。 二、游戏实现Metaverse特征,要克服哪些语音技术难点? 帮助玩家解决跨语种沟通的障碍对游戏提出了更高的要求。 三、GME助力游戏实现Metaverse的无尽想象 GME 3D位置语音 3D语音让语音的效果带有方向、位置信息,让说话声音不再扁平。 玩家可以根据队友语音“听声辨位”,拥有“身临其境”的沉浸感游戏体验。 以下是我们模拟玩家方位处理的一段棋牌游戏中实时语音效果: (点击收听,戴上耳机效果更佳~) MOBA、FPS、ARPG、狼人杀、太空杀、棋牌游戏等游戏类型也能应用3D位置语音效果: 沉浸感:Wwise 除了完美融入环境音效,Wwise+GME方案还能定制化处理每一路语音流,为游戏音效提供更多丰富的语音玩法设计空间。
这种游戏,由于有玩家间的交互,有团队作战、配合,保证玩家能够进行实时语音通话,成为极大的需求。 ? 游戏内嵌实时语音又有两种选择:自己开发,或选择第三方供应商。 2、稳定性和接通率 这两个指标,对游戏实时语音来说,是可用度的问题。玩家游戏中开启实时语音通话,能够成功听到队友的声音,交流中不掉线,是最基本的底线。 1、对游戏音效的影响 常见的游戏实时语音API,由于与游戏音效不兼容,会影响游戏音效。玩家的体验就是,开启、关闭实时语音的瞬间,或者在通话的过程中,游戏音效和背景音会失真、有杂音或者音量有变化。 这直接影响玩家愿不愿意使用游戏语音。 2、CPU、耗电量和游戏FPS 游戏厂商如果选择语音通话SDK集成方案,那么SDK占用系统资源量和耗电量会起到很大的影响因素。 5、适用不同游戏场景 不同游戏场景下,玩家对实时语音的要求是不一样的。
游戏语音多应用在实时语音、多人会话、发送语音消息等场景,而《QQ炫舞》手游的游戏音乐房间内实时语音玩法在音频处理上的复杂度上远远超出了正常范畴。 玩家在实时语音房间中使用媒体音量模式播放高清音乐的同时,需要确保实时语音清晰并且避免回声。 这些技术难题对于《QQ炫舞》手游来说,无疑是一项重量级挑战。 玩家在游戏音乐房间内实时语音时,使用手机的媒体音量(而非电话音量),绕过了手机系统的音频处理模块,播放效果达到QQ音乐一样的高清播放体验。 对于游戏玩家很关心的流量消耗和CPU占用问题,GME也做了相应优化,例如MOBA类游戏中,在保证正常的语音沟通和良好的性能前提下,移动网络模式每分钟流量消耗低于500KB,CPU占用率平均在10%以下等 这种技术可以应用在“吃鸡”和棋牌类游戏场景上,通过提供听声辨位的能力,让玩家获得更好的游戏体验。
腾讯云游戏行业资深架构师 张晓愚 游戏内语音沟通需求 早在2015年,艾媒咨询即有移动游戏社交相关数据统计:近40%的玩家因为社交因素选择一款游戏;15.6%的玩家因为一款游戏社交性差而选择离开。 若实时语音能力占用了过多的设备CPU和内存,会导致游戏本身体验的下降,社交需求虽然是玩家选择游戏的重要方向,但游戏体验才是决定一个游戏能否存活的根本。 然而,各类游戏对语音能力的需求也不尽相同:竞技类游戏要求游戏内同队玩家均可连麦游戏,在保证基本沟通需求的同时尽量减少对移动设备性能和网络的影响;MMO类玩家很多,如PVP场景下的小队语音、PVE场景下的团队语音 ,而类似游戏内主播频道的玩法也在最近被众多MMO游戏所关注;社交类游戏如狼人杀更关注实时语音的音质,流畅无卡顿的沟通是游戏长久运营的必要条件;休闲类游戏也将实时语音和语音消息作为辅助的社交手段来提高玩家的活跃度 多路声音混叠 游戏中小队语音会有多个玩家同时说话的情况,并且在玩家收听语音的同时,游戏的背景音也不可被去除,因此如何使多路语音清晰传递并且不会造成爆音是该场景下优质混音的评判标准。
“PC实时语音3D、移动端的实时混响及变声,刚体验了这些demo,利用GME我们能够在Wwise编辑器里直接集成语音模块,使用起来非常方便,而且可以激活很多新的玩法。” 经常用电脑/手机玩吃鸡的朋友,应该不会对语音与音频冲突的问题感到陌生——使用语音交流时,就很难听清游戏中的枪声/脚步声,从而影响反应速度。 在联合方案中,语音和游戏音效的设计得到了很好的融合,开发者可以通过Wwise引擎在游戏中方便快速的集成语音服务,不但从根本上解决了前述的技术难题,并且可以创造出和游戏实际场景更加符合的语音聊天玩法,从而极大的加强了玩家的游戏体验 通过GME和Wwise引擎的数据流交互,游戏逻辑就可以像处理普通游戏中的声音一样,来根据游戏场景处理语音数据,规避玩家在实时语音时音量类型跳变的情况发生。 打通游戏音效与游戏内语音这两条独立线路的解决思路,彻底根除了玩家在音效和语音通信之间进行取舍的难题,成功连接了游戏开发者和音频制作者,为整个游戏的声音开发提供了一整套的解决方案。
游戏中玩家的互动形式也不再止于语音聊天,有了更为高阶的需求,比如:玩家在“吃鸡”的时候,会通过外带的声卡或者其他的技术手段进行“变声“。 大叔变萝莉,萌妹变宅男,这些都让游戏里的语音互动变得更具娱乐性。 在这股社交娱乐大浪潮下,腾讯云游戏多媒体引擎GME创新性地引入了变声的玩法,让变声成为了游戏内置的功能。 只要接入GME的SDK,游戏研发厂商就可以提供给玩家更加丰富有趣的游戏内语音体验,让玩家在不借助任何外部设备的情况下,实现抠脚大汉变声萝莉、变声口吃的的有趣玩法。 而人耳不会感受的最大延时是40ms,这个延时基本不被用户所感知。最终实现了用户在QQ里体验到的实时语音变声功能。 “趣味变声”也集成到了腾讯云游戏多媒体引擎GME产品能力中。 只要在游戏中集成GME的SDK,就能实现QQ通话里的趣味变声玩法,丰富游戏玩家的社交体验,让游戏玩家爱上沟通,通过社交属性有效地提升游戏热度。
然而,3D音效之前并没有大规模应用在实时语音沟通领域,这主要是由于之前重度游戏中玩法对于语音能力的定位更多是沟通方式而非创新玩法,使用场景对于实时语音携带方位感诉求也不强烈。 2017年一款游戏《绝地求生:大逃杀》,通过创新的百人大逃杀、胜者吃鸡玩法,短时间获得了全球玩家的青睐和追捧。除了游戏玩法本身的创意之外,游戏对于实时语音玩法也进行了颠覆式创新。 游戏过程中玩家可以设置【全体模式】向附近的玩家喊话、挑衅、搭讪,这种语音模式可以与陌生人进行很有趣的沟通和互动。社交媒体上已经有很多用户基于这种语音模式,创作了很多趣味视频。 例如,3D音效应用到棋牌类游戏的语音房间时,通过将各个声音虚拟到桌面相应位置,玩家可以清楚地感知到其他玩家的声音是来自自己左、右还是正前方,打造线上棋牌房的沉浸式体验,也让玩家开语音沟通的意愿更加强烈。 3D位置语音解决方案应用到游戏实时语音沟通中,玩家可以根据队友语音“听声辨位”,拥有“身临其境”的沉浸式游戏体验。
在网络游戏中,无论是大逃杀、棋牌类、电子竞技类还是娱乐休闲类小游戏,玩家和玩家之间的互动、语音聊天是一个必不可少的环节。 等通用游戏框架全覆盖,四行代码极速接入; 功能完善全面:提供游戏场景常用功能:多人语音、语音消息、语音转文本等多种功能。 此外,腾讯云GME还提供3D实时语音、变声、播放高音质伴奏等适用于多种游戏场景的特色能力。 23.png 游戏社交化趋势越来越明显,在游戏中集成语音功能,不只是一个“标配”,它对于提升游戏体验、提升用户粘性和留存都具有重要意义。 随着接入的游戏越来越多,腾讯云GME也在不断优化体验,致力于为游戏厂商提供更好、更稳定的音频服务,为玩家打造畅爽的游戏语音体验。
看完游戏的运行情况,你可能对游戏有了一定了了解: #运行游戏后,玩家首先要进行语音的选择,1选择英语,2选择汉语,其他则默认选择英语 #根据玩家选择的语音,进入不同的语音环境 #游戏规则:玩家输入一个0 #退出游戏:游戏会随着打印信息的完成提示退出游戏 代码部分: 1 #运行游戏后,玩家首先要进行语音的选择,1选择英语,2选择汉语,其他则默认选择英语 2 #根据玩家选择的语音,进入不同的语音环境 3 #游戏规则:玩家输入一个0-9的数字,系统根据玩家输入的数字,打印出数字的信息 4 # 如果玩家输入的数字范围不在0-9,则会打印出"Error!" ..详细请参看代码 1 #运行游戏后,玩家首先要进行语音的选择,1选择英语,2选择汉语,其他则默认选择英语 2 #根据玩家选择的语音,进入不同的语音环境 3 #游戏规则:玩家输入一个0-9的数字 (input(enter_str)) 76 if again == 1: 77 pass 78 elif again == 2: 79 #这里使用的是全局变量
做游戏之王,发号施令即可赢得战斗 除了在UI上的应用外,语音交互在VR游戏上的运用潜力也不容小觑。 在IBM的支持下,玩家可以直接用语音命令来与其他玩家和游戏角色进行交互,甚至使用语音控制来对电脑下命令以操控角色。 ? 与跟其他的游戏不同,《星舰指挥官》 只会接受玩家的语音命令。 游戏中,Human Interact采用了微软的最新语音识别科技“Cognitive Services”,并使用了“Custom Speech Service”将游戏故事中的用语插入人工智能的字典里,大大提高了语音识别的准确性 在游戏中使用语音操控能让玩家融入游戏情节之中,使其成为故事的一部分,甚至还能够将自己的个性带到游戏对话中,不再千篇一律的跟随游戏脚本。
简介:《星际迷航:舰桥船员(Star Trek Bridge Crew)》是首款添加AI语音识别技术的游戏,允许玩家与AI组成队友进行游戏。 游戏使用IBM的Watson软件自然语言处理功能,能够解析玩家发出的语音命令,并允许玩家控制AI角色。 简介:《精灵之歌》是一款欧美魔幻题材的ARPG VR游戏,画风属于阴暗风格。目前,该游戏还未全部完成,仍属于Demo阶段。 《精灵之歌》允许玩家在游戏中,使用武器或者真人念动咒语释放魔法来击退敌人。 玩家所发出声音的高低、持续时间、音量和音量的变化,都会对游戏产生影响。 如在飞行途中,玩家需要利用声音为飞机续航,只有不间断的声音才能保证飞机不坠落。不仅如此,音量的高低也将决定飞机的飞行高度。 玩家在游戏中走动时,有时需要依靠鞋子与地板接触所产生的声音与震动,照亮周围的环境,有时还需要玩家利用声音,照耀自己前方的道路。 在游戏中,沉默就意味着黑暗。
语音消息(Voice Message Service,VMS)沉淀腾讯十年短信服务技术和经验,通过腾讯云提供的语音专线,为 QQ、微信等亿级用户平台和货车帮、摩拜、聚美优品等数千家客户提供语音验证码、语音通知等服务。高到达率、超低延时、秒级触达,支持大容量、高并发,并提供企业专属码号服务。
扫码关注云+社区
领取腾讯云代金券