试想一下,当你和队友们正在和敌方进行激烈的战斗,突然之间语音掉线,导致自己到嘴的胜利飞掉了,用一句不客气的话来说,这个时候砸手机的心情都有了。这是很多人都曾经历过的事情,毕竟网速不给力,有的时候神仙也难救啊。
近些年来,随着手游越来越火,游戏内的语音交流也成为了玩家们的刚需,无论是交友还是沟通游戏内的战术内容,语音交互都起到了决定性的作用。因此如今游戏的内置语音交互功能也成为了高品质游戏的决定因素之一,更是近年来众多游戏厂商的关注重点。
近日,腾讯游戏发布了最新游戏语音技术方案,将AI Codec应用到了“国民游戏”《和平精英》中,《和平精英》也成为第一个实现AI Codec技术应用的游戏,对于这种情况我只能说,厉害了我的《和平精英》!
手游的社交因素能有多重要?据统计,有40%的玩家会因为社交因素而选择一款手游,15.6%的玩家会因为一款手游的社交因素差而选择离开。而游戏语音作为手游的最关键因素之一,自诞生起就受到了玩家们的喜爱,有了游戏语音,玩家们就少了那种孤军奋战的感觉,即使屋子里只有自己和一部手机,但是这感觉就像是一起游戏的玩伴们在身边一样。
所以,随着游戏语音越来越普及,玩家们对于手游的语音传输质量,延迟时间和使用环境就有了越来越高的要求。一个好的游戏里的语音不仅仅能让玩家们在听觉方面符合要求,在这个前提之下,传输码率越低,用户耗费的流量越少,占用算力越少,CPU的耗能越少也是需要游戏厂商们不断突破的地方。
其最重点的一个话题就是——在弱网的恶劣环境下,如何能够保证玩家们流畅的交流。在听感质量相同的前提下,如果语音信息的码率越低,那么传输的连贯性就更有保障,所以更低的码率更适用于弱网环境。并且让语音功能尽可能减少对CPU的占用,也是保障用户交流体验也是重点之一。
传统的音频解码技术Codec致力于使用较少的网络带宽资源、较低的传输码率去传递更保真的语音信息。而随着技术的发展,基于人工智能技术进化的AI Codec渐渐的成为了主流。让游戏语音也加上人工智能的“BUFF”是一大难题,对此,游戏界也进行了非常多的尝试,就比如2019年行业内涌现了一些可以对语音进行压缩的超低码率AI Codec,但是质量却不尽人意。
就算是互联网巨头谷歌也曾在这方面碰壁。2021年初,谷歌就发布了可以在低码率传输的同时保证声音效果的AI Codec Lyra,但是Lyra不能提供高质量的实时通信,算法存在延迟。 时隔半年,谷歌再次发布了新的模型SoundStream,虽然相比于Lyra,SoundStream在语音传输质量方面有所提升,但是模型复杂度较高,大多数的手机上都无法做到平稳运行。
《和平精英》这款游戏上线这么多年以来,一直在不断的超越自我。各种大大小小的活动接连不断,对外挂一次又一次的全力出手让玩家们的游戏体验直接拉满,可以说《和平精英》的游戏品质和玩家体验都是海内外玩家公认的。而在语音品质这一方面,《和平精英》创造团队也一直十分重视。
2021年底,《和平精英》团队携手腾讯AI Lab、CROS游戏语音GVoice团队一起正式立项GVoice AI Codec研发项目,新项目着力实现高质量、低码率和低功耗的游戏内实时语音环境。
GVoice AI Codec通过自主研发的编解码模型算法,以 5-12kbps 的 AI Codec 替换了原来24kbps 的Opus,虽然玩家们在主观听觉方面上并没有明显差别,但是从技术层面上来讲,5-12kbps的传输码率更低,同时耗的流量也更少。
而在算力消耗方面,GVoice AI Codec通过模型压缩、量化、并行运算、移动端指令集适配等工程化措施,不断降低运算与资源开销,最终达到移动端落地要求。
或许用一组数据来对比更加明显一些,GVoice AI Codec在手机OnePlus 3双工通话下测试,相比Opus格式 CPU占用率资源增长约为2.3%;在iPhone 6s下测试,采用GVoice AI Codec后CPU占用率增长约1.3%。这代表着仅仅用了百分之一、百分之二的CPU使用功率就就可以完美运行GVoice AI Codec。
所以从总体上来讲,在游戏场景下GVoice AI Codec的语音处理算法比传统即时通讯软件有更加优异的音质表现,并且在弱网环境下也能保证游戏的语音音质表现不受损害。
相信大家在交通出行,户外活动这些条件下,也会经常玩《和平精英》吧,但是可能会因为网络环境有着不好的游戏体验。而GVoice AI Codec技术在《和平精英》中应用后,语音服务质量整体得到了进一步的提升。就算是在以上提到的弱宝环境下,也能保证语音的流畅性,基本上在战斗中卡麦,断麦这种情况基本是不会再出现了。并且由于使用了AI模型算法,搭载了GVoice AI Codec技术的《和平精英》在人声传输方面也会有非常大的提升,玩家们的游戏里的沟通交流将会更加清晰,此以后无论是人多嘈杂的环境,还是种游戏情景下《和平精英》都会有着更加让人舒服的游戏体验,为此《和平精英》官方也多次向玩家征集反馈,均得到了正向反馈。
GVoice AI Codec在《和平精英》上的成功落地,不仅提升了《和平精英》玩家的游戏体验,也为更多游戏语音技术的研发成果落地打下了基础,我们的《和平精英》再一次成为了“先驱者”。