界面新聞?dòng)浾?| 崔鵬
界面新聞編輯 | 文姝琪
在第二十一屆中國(guó)國(guó)際數(shù)碼互動(dòng)娛樂展覽(ChinaJoy)期間,高通與騰訊、網(wǎng)易和OPPO等游戲開發(fā)商及OEM廠商舉行了一場(chǎng)移動(dòng)游戲技術(shù)展示活動(dòng),討論移動(dòng)游戲行業(yè)的技術(shù)發(fā)展趨勢(shì),以及生成式AI技術(shù)的相關(guān)落地實(shí)踐。
高通技術(shù)公司手機(jī)、計(jì)算和XR事業(yè)群總經(jīng)理Alex Katouzian給出的數(shù)據(jù)顯示,2023年全球玩家在移動(dòng)游戲上的花費(fèi)接近900億美元,約占全球游戲市場(chǎng)總銷售收入的50%,中國(guó)市場(chǎng)的銷售收入約占全球的三分之一。
隨著全球游戲廠商對(duì)移動(dòng)平臺(tái)的重視程度增加,移動(dòng)游戲的質(zhì)量也逐漸向PC和主機(jī)游戲靠攏,這對(duì)智能手機(jī)的終端算力和性能提出了更高的要求。
最近幾年,高通保持著每年發(fā)布一款新移動(dòng)平臺(tái)的傳統(tǒng),目前主流的第三代驍龍8平臺(tái)(驍龍8 Gen3)發(fā)布于2023年末,目前已有超過115款安卓旗艦手機(jī)采用該平臺(tái)。
Alex Katouzian在展示會(huì)現(xiàn)場(chǎng)透露稱,高通Oryon CPU也即將登陸移動(dòng)平臺(tái),高通也將在十月份的驍龍峰會(huì)上公布更多技術(shù)細(xì)節(jié)。
終端側(cè)生成式AI將成主流選擇
驍龍8 Gen3是高通針對(duì)生成式AI研發(fā)的首個(gè)移動(dòng)平臺(tái),其NPU和異構(gòu)計(jì)算架構(gòu)支持虛擬助手、實(shí)時(shí)翻譯等終端側(cè)AI游戲功能,并且給了游戲公司開發(fā)AI NPC的硬件性能支持。
高通與網(wǎng)易已經(jīng)將這項(xiàng)技術(shù)在游戲中應(yīng)用落地。網(wǎng)易在7月25日剛剛上線的《永劫無(wú)間》手游中,發(fā)布了全球首例語(yǔ)音AI隊(duì)友功能。
該游戲基于驍龍8 Gen3的NPU直接在端側(cè)運(yùn)行AI推理模型,玩家能通過語(yǔ)音交互的方式與AI進(jìn)行交流。
在網(wǎng)易的實(shí)機(jī)演示中,這個(gè)AI隊(duì)友能聽懂玩家的指揮,執(zhí)行搜裝和送裝操作,還能實(shí)時(shí)觀察戰(zhàn)況,向玩家匯報(bào)關(guān)鍵信息。此外AI隊(duì)友還懂得與真人玩家進(jìn)行博弈與配合。
網(wǎng)易伏羲實(shí)驗(yàn)室AI技術(shù)負(fù)責(zé)人呂唐杰介紹稱,這項(xiàng)功能的實(shí)現(xiàn),融合了包括語(yǔ)音識(shí)別、語(yǔ)義理解、文本生成、語(yǔ)音合成、強(qiáng)化學(xué)習(xí)和模仿學(xué)習(xí)在內(nèi)的多項(xiàng)AI技術(shù)。
“為了達(dá)到極低的交互速度,實(shí)現(xiàn)類似于GPT-4o的交互體驗(yàn),我們做了大量的工程優(yōu)化工作”,呂唐杰表示,目前游戲內(nèi)AI隊(duì)友的最長(zhǎng)相應(yīng)時(shí)間已經(jīng)被控制在1秒以內(nèi)。
網(wǎng)易為什么要在《永劫無(wú)間》手游中進(jìn)行端測(cè)推理的問題,他給出了兩個(gè)理由:
首先,端側(cè)推理能解決傳統(tǒng)云端推理帶來(lái)的高時(shí)延問題,對(duì)于網(wǎng)絡(luò)條件不好的玩家來(lái)說(shuō),能明顯改善游戲流暢度的體驗(yàn)。
其次,將AI推理從云端轉(zhuǎn)移到端側(cè),能充分利用手機(jī)終端的算力,降低服務(wù)運(yùn)行成本,游戲開發(fā)者就不用通過限制AI玩法的方式降低成本,也不會(huì)影響到用戶的完整體驗(yàn)。
他透露稱,未來(lái)網(wǎng)易游戲還計(jì)劃將更多AI能力,包括大語(yǔ)言模型(LLM)、語(yǔ)音合成(TTS)等技術(shù)適配到手機(jī)終端中。
移動(dòng)端畫質(zhì)和功耗優(yōu)化是核心
高通在展示會(huì)上重點(diǎn)介紹了其Snapdragon Elite Gaming技術(shù),該技術(shù)目前包含超過60項(xiàng)游戲特性。
其中,Adreno圖像運(yùn)動(dòng)引擎2.0(AFME2.0)是高通自研的基于游戲3D信息的插幀技術(shù),它運(yùn)行在GPU上,同時(shí)支持內(nèi)插幀和外插幀兩種模式。
AFME2.0從游戲管線中獲取運(yùn)動(dòng)向量、顏色信息和深度信息等,經(jīng)過算法運(yùn)算生成更高質(zhì)量的新游戲幀,用較低功耗實(shí)現(xiàn)游戲幀率翻倍的效果。
高通研發(fā)出該項(xiàng)技術(shù)后,將其推廣給外部游戲公司,引起了很多游戲工作室的興趣。
騰訊與高通在剛剛發(fā)布的《塔瑞斯世界》項(xiàng)目上就進(jìn)行了重點(diǎn)合作,這款產(chǎn)品是基于UE4(虛幻引擎4)研發(fā)的大世界MMORPG游戲,對(duì)游戲流暢性和操控響應(yīng)時(shí)間有非常高的要求。
此前,產(chǎn)品在原生60幀畫面下由于性能負(fù)載較大、功耗較高,導(dǎo)致游戲經(jīng)常出現(xiàn)幀率波動(dòng),手機(jī)在運(yùn)行一段時(shí)間后便開始降頻,非常影響用戶體驗(yàn)。
而AFME2.0是純GPU運(yùn)算,不會(huì)調(diào)用CPU資源,所以幀數(shù)表現(xiàn)更加穩(wěn)定,在60幀下的CPU負(fù)載與30幀幾乎一致。
騰訊游戲國(guó)內(nèi)發(fā)行線生態(tài)發(fā)展部引擎組負(fù)責(zé)人胡豪翔給出的數(shù)據(jù)顯示,AFME2.0在能耗上相較原生60幀方案降低大約30%,畫面更加流暢的同時(shí),畫質(zhì)沒有任何損失。
高通產(chǎn)品市場(chǎng)資深經(jīng)理姚軼非表示,提升游戲畫質(zhì)是手游行業(yè)的技術(shù)趨勢(shì)之一,Snapdragon Elite Gaming技術(shù)已經(jīng)對(duì)移動(dòng)行業(yè)產(chǎn)生巨大影響,“因此越來(lái)越多的3A端游大作正在遷移到移動(dòng)端?!?/span>
終端廠商也在跟進(jìn)。本月初,一加Ace 3 Pro手機(jī)發(fā)布時(shí)曾宣布,其在安卓平臺(tái)首個(gè)實(shí)現(xiàn)了《原神》原生級(jí)120幀支持。
OPPO游戲中心負(fù)責(zé)人譚皓介紹稱,在這個(gè)過程中,一加獲得了不少自研技術(shù)突破。
比如,將幀生成與計(jì)算的整個(gè)過程放在高通芯片上完成,讓生成幀與游戲渲染幀之間,只間隔一個(gè)120Hz的垂直同步周期,“這已經(jīng)是安卓顯示體系的極限?!?/span>
此外一加還開發(fā)了基于GPU的算法,將幀生成的能力轉(zhuǎn)移到GPU上進(jìn)行運(yùn)算,解決出幀延遲的問題。
譚皓表示,在整個(gè)研發(fā)過程中,一加、高通與米哈游三方技術(shù)團(tuán)隊(duì)花費(fèi)10個(gè)月時(shí)間討論技術(shù)方案,然后又花費(fèi)6個(gè)月時(shí)間進(jìn)行調(diào)試,才最終實(shí)現(xiàn)這套高幀優(yōu)化方案。
OPPO相關(guān)技術(shù)人員在現(xiàn)場(chǎng)告訴界面新聞,OPPO已經(jīng)將此前的部分優(yōu)化技術(shù)方案分享給平臺(tái)方和外部開發(fā)者,并且正在關(guān)注基于UE(虛幻引擎)的移動(dòng)游戲的高幀優(yōu)化工作,在這方面引擎差異不會(huì)是難點(diǎn)。