Wwise + GME 游戏语音解决方案:解锁更多语音玩法,让玩家“沉浸在场景中”

发布于:2024-10-24 编辑:匿名 来源:网络

简介 游戏多媒体引擎(GME)作为游戏语音的 PaaS 服务,致力于提升游戏语音质量。简化语音接入流程,创造更多语音玩法。

GME 推出了基于 Wwise 引擎的独特解决方案,是目前 Wwise 唯一官方支持的语音合作伙伴。本文将简单介绍一下 Wwise + GME 解决方案,并看看新的解锁游戏语音方式。

“如果您的团队正在使用 Wwise 音频组件,请务必使用 GME for Wwise 解决方案。它完美解决了我们在实时语音功能方面遇到的所有问题。

” ——来自《香肠派对》项目组 当你在玩吃鸡的时候,右侧突然出现了沙沙的脚步声,一声枪响在你的右耳中爆炸。旁边的队友瞬间倒地,队友的惊呼声中依然充满了被击中后的痛苦。

抖音……进入狼人杀室,看到的就是夜晚草原篝火的背景。玩家们坐在篝火周围的地板上。

耳机里隐隐约约听到左边玩家的低语声。主持人的叙述中还夹杂着远处的声音。

到处都是狼嚎,闭上眼睛,睁开眼睛,今晚又有人中毒了……这些游戏中语音与游戏场景的完美融合,可以为游戏玩家提供身临其境的游戏体验。在之前的《来了!GME沉浸式方案助力游戏实现Metaverse的无限可能》文章中,我们提到过元界游戏的核心在于真实、沉浸式的交互体验。

但在实际操作中,如何将游戏语音深度融入游戏场景,最大程度地为玩家“还原临场感”,却存在不少困难。为了解决这些行业难题,提升游戏语音体验,作为顶级交互音频引擎Wwise唯一官方授权的语音插件,GME与Wwise的研发团队联合推出了专属语音解决方案。

游戏多媒体引擎(GME)是针对游戏场景定制的一站式语音解决方案。提供多人实时语音、语音消息、语音转文字、语音内容审核等功能。

开发者需要通过API调用进行连接。进入GME SDK,实现游戏中的语音功能。

传统的独立语音SDK方案接入流程与游戏音效设计无关。对于基于Wwise音频引擎开发的游戏,GME提供了专门的解决方案。

通过使用相应的GME语音插件,游戏开发者可以集成语音接入。融入到游戏音效的设计过程中,将Wwise强大的音频处理能力和音频控制能力应用到语音上,不仅提高了语音质量,也为游戏音效提供了更丰富的语音玩法设计空间。

基本流程框架如下: 从上图可以看出,GME的几个插件发送的都是本地要发送的语音(麦克风录制的本地玩家语音)和从网络接收到的语音(其他队友的语音)本地播放)。在 Wwise 的处理管线中,GME 语音流被抽象为 Wwise 的基本声源进行处理。

正是基于这种新颖的设计,Wwise-GME 相比传统的独立语音 SDK 具有独特的优势。语音和游戏音效统一设计。

在 Wwise 项目中,GME 语音音频流无缝连接到 Wwise 音频管道。语音的接入流程与Wwise的音效设计流程深度融合,避免了单独接入一套语音SDK可能带来的音频问题。

冲突。在游戏终端中,GME语音发送和接收的操作被抽象为Wwise事件的触发。

这些操作符合Wwise标准开发流程体验,比之前的API调用访问方式更加直接、生动。完美解决行业痛点。

对于传统的独立语音SDK方案来说,语音麦克风开启后游戏音质下降、音量跳动、声音干涩一直是行业痛点。麦克风开启后,整个游戏的音质进入“电话音质”级别(低采样率的单声道信号),极大影响玩家的游戏体验。

Wwise-GME有效解决了手游中打开麦克风后音量类型切换导致的游戏音质下降问题。大大提高了打开麦克风后语音的音质。

您在流畅聊天的同时仍然可以保持原有的音效,实现听和说。强大的设计能力带来无限的玩法创意。

Wwise-GME解决方案给游戏语音玩法带来了非常大的设计空间。由于所有语音流都发送到 Wwise 总线,因此 Wwise 上丰富的音效处理和控制可以应用于语音。

它还可以定制每个语音流,从而增加游戏过程中语音的沉浸感和乐趣,让玩家交流时不那么戏剧化。对于每个玩家来说,语音聊天主要涉及两个音频流链路,一个是上行链路,即本地麦克风采集自己的语音并通过服务器分发给远程队友,另一个是下行链路,即接收将服务器上所有队友的声音进行混合并通过本地播放设备播放。

上行播放器的本地聊天语音流会通过GME采集插件发送到Wwise引擎。基于Wwise提供的丰富音效处理能力,游戏可以根据实际环境和玩家的需求对语音流进行处理,比如纹理等。

、混响和变声处理等。想象一下,现在玩家的角色在一座教堂里,处理后的带有教堂混响的语音流会通过GME发送插件发送到服务器,然后发送到远程玩家。

同样,如果游戏设计有变声玩法,则经过实时变声算法处理后的语音流将被发送到远程玩家。上行处理流程 下行 与上行的单个本地语音流相比,下行通常接收来自所有队友的 N 个语音流。

这些语音流通过 GME 接收插件传递到 Wwise 引擎。同一个游戏终端可以根据游戏中各个语音接收通道对应的玩家实际场景,例如相对于本地玩家的位置、距离、是否有障碍物等,进行相应的音效处理。

处理后的数据由 Wwise 混合,然后在本地设备上播放。玩。

在特定的游戏场景中,例如,队友A站在本地玩家的左侧前方,那么他会听到队友A的声音从左前方传来,而队友B跳到一块石头后面,然后他会听到队友B的声音。声音是从路过的玩家那里传来的。

岩石阻挡并折射声音,随着队友接近或远离听者,相应的声音也会增强或减弱。下行处理流程 这种基于游戏场景处理的语音不再像传统的独立语音SDK那样仅仅提供“语音会议”般的游戏体验,而是将语音体验提升到了一个更高的层次,即与游戏场景相结合集成沉浸式语音体验。

下面的视频展示了 Wwise-GME 解决方案的一些基本用法。如果您在手机上观看Demo视频,则需要佩戴耳机才能观看,因为这里采用了双耳虚拟声场技术。

视频中,你是第一人称视角,对面的灰色机器人是其他队友通过GME与你对话。语音聊天处理中用到了3D、变声、混响等。

视频中的所有声音均由远程玩家实时屏幕录制发送。声音,而不是后期合成制作。

(点击播放,演示采用双耳虚拟声场技术,需要佩戴耳机才能体验最佳效果,顺便练习一下英语听力~)Wwise-GME解决方案的独特设计,让使用语音作为声音成为可能游戏声音设计的一部分。这里列出了作者想到的一些可能的语音处理,更多的玩法期待音频设计师创造出来。

发送环境音或伴奏音 GME不仅提供发送玩家语音的能力,还提供发送其他音频流到语音服务器的能力。这种能力最明显的应用场景就是卡拉OK。

对于游戏来说,想象一个游戏场景,游戏中玩家的角色在雨中或风中。当玩家与队友交谈时,沉浸式体验需要将雨声或风声适当地混合到声音中。

。当然,还有其他的应用场景,比如根据玩家游戏进度发送一些声音Emoji,让声音变得更有趣。

要模拟语音的反射、衍射等,沉浸式语音体验必须与语音的渲染和游戏的实际场景相结合。本文前面提到的纹理、衰减、声音变化、混响和3D定位处理只能算是初步处理。

为了更好地模拟游戏场景中说话者和听者之间的语音传输路径,Wwise 提供了反射、衍射、声笼和阻塞模型,也可用于处理队友之间的语音。这些处理的效果就是元宇宙中语音的终极体验。

人物性格和状态处理为了让游戏声音更加有趣,还可以根据游戏场景中的一些性格和状态变化,对玩家的声音进行一些专门设计的DSP处理。例如,如果游戏中的玩家被对手击中并失去生命值,那么会对声音进行一些失真、延迟或颤音处理,以指示玩家的痛苦状态。

又比如,如果玩家PK输掉对手或者捡到宝物,就会对语音进行一些高通滤波或者一些其他处理。加速语音处理以反映玩家的兴奋程度等。

侧链加工 侧链是混合和生产过程中必不可少的加工方法。其基本原理是用一个信号来控制另一个信号。

游戏中加入语音功能的目的是为了增加游戏的社交性。声音必须清晰地传送给听者。

当玩家说话时,游戏混音的重点应该落在声音上,而不是游戏本身的音效上。这与广播电台的做法类似,DJ 在想要讲话时会降低播放音乐的音量,然后在讲话结束时恢复音量。

Wwise-GME 解决方案将所有语音流发送到 Wwise 总线,使得这种处理在游戏场景中成为可能。比如在接收到的声音处设置一个Wwise Meter,然后根据这个Meter的值动态控制其他音效的音量。

。下面的视频是Wwise的开发商Audiokinetic联合GME制作的Demo视频,展示了GME语音的声音反射、阻塞和侧链等处理。

视频展示了第一人称、第三人称和俯视视角。绿色机器人是一个通过 GME 与你交谈的队友。

随着机器人位置和环境的变化,会对语音进行相应的处理(处理细节在字幕中描述)。这样处理的语音聊天会给人一种身临其境的感觉。

同样,视频中的所有声音都是远程播放器实时录制时发出的声音,而不是后期合成制作的。 (点击播放。

演示采用双耳虚拟声场技术,需要佩戴耳机才能体验最佳效果~) 游戏语音解决方案GME和音频引擎中间件Wwise。两款产品都可以从不同角度提升游戏品质。

GME增强增强游戏的社交性,从而增加游戏对玩家的粘性。 Wwise音频引擎极大地提高了游戏中交互音效的开发效率,改善了游戏中的声音体验。

当游戏语音解决方案 GME 遇上音频引擎 Wwise,GME 填补了 Wwise 生态系统中的语音空白。两者结合在一起,必然会产生一加一大于二的效果。

我相信他们的融合解决方案 Wwise-GME 将成为游戏声音设计师为游戏创造最佳、最真实、最有创意的声音的强大工具。目前,Wwise+GME语音插件已在Wwise官网上线,并向全行业开放。

01Wwise+GME计划后续会有详细的操作讲解和创意征集活动。好处多多,大佬云集。

Wwise + GME 游戏语音解决方案:解锁更多语音玩法,让玩家“沉浸在场景中”

站长声明

版权声明:本文内容由互联网用户自发贡献,本站不拥有所有权,不承担相关法律责任。如果发现本站有涉嫌抄袭的内容,欢迎发送邮件 举报,并提供相关证据,一经查实,本站将立刻删除涉嫌侵权内容。

标签:

相关文章

  • 今天,两位工科生敲响IPO钟声:开盘涨幅超100%,市值270亿

    今天,两位工科生敲响IPO钟声:开盘涨幅超100%,市值270亿

    今天,科创板迎来了一家特殊的公司。 据投资界(ID:pedaily)10月29日消息,智能出行公司九号股份(简称“九号公司”)正式在上交所科创板挂牌。 股票代码为09,发行价格为18.94元/股。 开盘后涨幅超过%。 市值突破亿元。 截至发稿,市值突破1亿元。 值得注意的是,九公司并

    06-17

  • 离开高盛后,来执掌2.5万亿

    离开高盛后,来执掌2.5万亿

    凯雷新任CEO终于官宣。 投资界获悉,昨日(2月6日),超级PE——凯雷集团宣布新的人事任命:公司董事会一致同意任命Harvey M. Kong为首席执行官兼董事会成员,并将于2月15日正式任命同日上任。 至此,凯雷CEO职位空缺半年,终于有了新的舵手。 凯雷成立于2007年,2005年在美国

    06-18

  • AI药企“未知君”完成A+轮融资,利和宏芯领投

    AI药企“未知君”完成A+轮融资,利和宏芯领投

    投资界6月24日消息,据媒体报道,深圳市未知君生物科技有限公司(简称“未知君”) )年初完成A+轮融资,由利和宏信领投,耀明投资跟投。 据悉,未知君今年8月完成A轮融资,由高榕资本领投,晨兴资本、真格基金跟投。 两轮融资总额达数千万美元。 未知君成立于2007年,是中国

    06-18

  • 比赛正在进行中 - 2023工业人工智能大赛参赛问答

    比赛正在进行中 - 2023工业人工智能大赛参赛问答

    工业人工智能大赛由全球一流的AI实验室与国际工业智能领军企业超能网络联合打造。 本届大赛以“AI引领未来工厂”为主题,面向高校、研究机构、初创公司等开放,通过竞赛和分享,展示工业人工智能的最新进展和应用案例,分享经验和成果,探讨未来发展方向,推动产业领域技术成

    06-18

  • 加快科技成果转化,学术成果报告会为科学家与企业家“媒人”

    加快科技成果转化,学术成果报告会为科学家与企业家“媒人”

    8月31日下午,北京地区广泛关注的学术成果参加系列报告会三市一区——北京肿瘤经济技术发展区专场会议在北京亦庄生物医药园成功召开。 本次会议由北京市科协、北京亦庄国际生物医药投资管理有限公司、云网(WIIN-全球智能孵化网络)、北京市乳腺疾病防治学会、北京市肿瘤防治

    06-17

  • 奥瑞生物获近亿元B轮融资,由大陈财智领投

    奥瑞生物获近亿元B轮融资,由大陈财智领投

    投资界(ID:pedaily)据9月11日消息,杭州奥瑞生物科技有限公司(以下简称“奥瑞生物”) )已完成近亿元B+轮融资,由大辰财智领投,道源资本、热晶生物及公司管理团队跟投。 本轮融资将主要用于基于PCR+蛋白质多组学平台的肝癌早筛产品和消化道多癌早筛产品以及其他单癌和泛

    06-18

  • 充电宝、自行车都上彩票了,投资者说共享失去了投资价值

    充电宝、自行车都上彩票了,投资者说共享失去了投资价值

    大家好,恭喜发财了。 看到本亚的出现,意味着距离周末还有一小时。 有没有感觉腰不酸了,腿不酸了,呼吸更顺畅了?我不知道你们呼吸还好不好,但我知道做共享充电宝的人最近可能会呼吸困难。 10月18日,杭州共享充电宝公司乐天LeDian正式宣布停止运营共享充电宝业务。 乐店表

    06-18

  • 友信科技完成数千万元A轮融资,金沙江创投独家投资

    友信科技完成数千万元A轮融资,金沙江创投独家投资

    投资圈(ID:pedaily)7月27日消息,一站式云服务平台友信科技宣布完成数千万元融资元A轮融资,由金沙江创投独家投资。 本轮融资将主要用于深化技术能力、优化服务流程。 优信科技成立于2016年,由腾讯、滴滴、YY和新零售营销专家等顶级互联网团队成员创立。 是国内企业BBC解

    06-17

  • 令人惊叹的!三星发布Galaxy Fold折叠屏手机,S10系列沦为配角

    令人惊叹的!三星发布Galaxy Fold折叠屏手机,S10系列沦为配角

    随着MWC的到来,整个智能手机行业迎来了密集的手机发布过程。 尤其是2月20日,北京时间这一天小米9发布后,三星S10系列在大洋彼岸的旧金山亮相。 值得一提的是,去年三星在巴塞罗那MWC会场发布了S9系列。 。 三星对S10系列寄予厚望。 北京时间2月21日凌晨3点,三星重磅手机发

    06-18

  • 阿里云X蚂蚁联合扶持 为更多中小企业保驾护航

    阿里云X蚂蚁联合扶持 为更多中小企业保驾护航

    阿里云活动。 参与即可获得:领取0元信用报告优惠券、0元下载企业信用报告;享受办公用品免押金租赁;加入中小企业协会可享受50%的折扣。 据了解,中国中小企业协会信用服务专业委员会联合芝麻信用管理有限公司正式启动“中小企业信用卫士计划”。 芝麻企业信用利用自身资源和

    06-17

  • “职业考试培训领军者”科观教育完成数千万元A轮融资,红点中国投资

    “职业考试培训领军者”科观教育完成数千万元A轮融资,红点中国投资

    投资界9月3日消息,职业考试培训机构“科观教育”宣布已获数十家数百万人民币A轮融资,由红点创投中国基金投资。   此前,科冠教育已获得云天使基金领投的天使轮融资和蓝象资本的种子轮融资。   科冠教育创始人张峰表示,本次融资将主要用于职业考试市场的横向布局,包括

    06-18

  • 创新宠物药公司“腾创”完成数千万元天使轮融资,金鼎资本独家投资

    创新宠物药公司“腾创”完成数千万元天使轮融资,金鼎资本独家投资

    投资圈(ID:pedaily)据8月11日消息,创新宠物药公司上海健医腾创生物医药腾创科技股份有限公司(以下简称:腾创)近日完成数千万元天使轮融资,由金鼎资本独家投资。 本轮融资主要用于产品研发、团队扩充和市场拓展。 腾创成立于2007年,是一家致力于改善动物保健的动物保健

    06-17