界面新聞記者 | 崔鵬
界面新聞編輯 | 文姝琪
在第二十一屆中國國際數(shù)碼互動娛樂展覽(ChinaJoy)期間,高通與騰訊、網(wǎng)易和OPPO等游戲開發(fā)商及OEM廠商舉行了一場移動游戲技術展示活動,討論移動游戲行業(yè)的技術發(fā)展趨勢,以及生成式AI技術的相關落地實踐。
高通技術公司手機、計算和XR事業(yè)群總經(jīng)理Alex Katouzian給出的數(shù)據(jù)顯示,2023年全球玩家在移動游戲上的花費接近900億美元,約占全球游戲市場總銷售收入的50%,中國市場的銷售收入約占全球的三分之一。
隨著全球游戲廠商對移動平臺的重視程度增加,移動游戲的質量也逐漸向PC和主機游戲靠攏,這對智能手機的終端算力和性能提出了更高的要求。
最近幾年,高通保持著每年發(fā)布一款新移動平臺的傳統(tǒng),目前主流的第三代驍龍8平臺(驍龍8 Gen3)發(fā)布于2023年末,目前已有超過115款安卓旗艦手機采用該平臺。
Alex Katouzian在展示會現(xiàn)場透露稱,高通Oryon CPU也即將登陸移動平臺,高通也將在十月份的驍龍峰會上公布更多技術細節(jié)。
終端側生成式AI將成主流選擇
驍龍8 Gen3是高通針對生成式AI研發(fā)的首個移動平臺,其NPU和異構計算架構支持虛擬助手、實時翻譯等終端側AI游戲功能,并且給了游戲公司開發(fā)AI NPC的硬件性能支持。
高通與網(wǎng)易已經(jīng)將這項技術在游戲中應用落地。網(wǎng)易在7月25日剛剛上線的《永劫無間》手游中,發(fā)布了全球首例語音AI隊友功能。
該游戲基于驍龍8 Gen3的NPU直接在端側運行AI推理模型,玩家能通過語音交互的方式與AI進行交流。
在網(wǎng)易的實機演示中,這個AI隊友能聽懂玩家的指揮,執(zhí)行搜裝和送裝操作,還能實時觀察戰(zhàn)況,向玩家匯報關鍵信息。此外AI隊友還懂得與真人玩家進行博弈與配合。
網(wǎng)易伏羲實驗室AI技術負責人呂唐杰介紹稱,這項功能的實現(xiàn),融合了包括語音識別、語義理解、文本生成、語音合成、強化學習和模仿學習在內的多項AI技術。
“為了達到極低的交互速度,實現(xiàn)類似于GPT-4o的交互體驗,我們做了大量的工程優(yōu)化工作”,呂唐杰表示,目前游戲內AI隊友的最長相應時間已經(jīng)被控制在1秒以內。
網(wǎng)易為什么要在《永劫無間》手游中進行端測推理的問題,他給出了兩個理由:
首先,端側推理能解決傳統(tǒng)云端推理帶來的高時延問題,對于網(wǎng)絡條件不好的玩家來說,能明顯改善游戲流暢度的體驗。
其次,將AI推理從云端轉移到端側,能充分利用手機終端的算力,降低服務運行成本,游戲開發(fā)者就不用通過限制AI玩法的方式降低成本,也不會影響到用戶的完整體驗。
他透露稱,未來網(wǎng)易游戲還計劃將更多AI能力,包括大語言模型(LLM)、語音合成(TTS)等技術適配到手機終端中。
移動端畫質和功耗優(yōu)化是核心
高通在展示會上重點介紹了其Snapdragon Elite Gaming技術,該技術目前包含超過60項游戲特性。
其中,Adreno圖像運動引擎2.0(AFME2.0)是高通自研的基于游戲3D信息的插幀技術,它運行在GPU上,同時支持內插幀和外插幀兩種模式。
AFME2.0從游戲管線中獲取運動向量、顏色信息和深度信息等,經(jīng)過算法運算生成更高質量的新游戲幀,用較低功耗實現(xiàn)游戲幀率翻倍的效果。
高通研發(fā)出該項技術后,將其推廣給外部游戲公司,引起了很多游戲工作室的興趣。
騰訊與高通在剛剛發(fā)布的《塔瑞斯世界》項目上就進行了重點合作,這款產(chǎn)品是基于UE4(虛幻引擎4)研發(fā)的大世界MMORPG游戲,對游戲流暢性和操控響應時間有非常高的要求。
此前,產(chǎn)品在原生60幀畫面下由于性能負載較大、功耗較高,導致游戲經(jīng)常出現(xiàn)幀率波動,手機在運行一段時間后便開始降頻,非常影響用戶體驗。
而AFME2.0是純GPU運算,不會調用CPU資源,所以幀數(shù)表現(xiàn)更加穩(wěn)定,在60幀下的CPU負載與30幀幾乎一致。
騰訊游戲國內發(fā)行線生態(tài)發(fā)展部引擎組負責人胡豪翔給出的數(shù)據(jù)顯示,AFME2.0在能耗上相較原生60幀方案降低大約30%,畫面更加流暢的同時,畫質沒有任何損失。
高通產(chǎn)品市場資深經(jīng)理姚軼非表示,提升游戲畫質是手游行業(yè)的技術趨勢之一,Snapdragon Elite Gaming技術已經(jīng)對移動行業(yè)產(chǎn)生巨大影響,“因此越來越多的3A端游大作正在遷移到移動端?!?/span>
終端廠商也在跟進。本月初,一加Ace 3 Pro手機發(fā)布時曾宣布,其在安卓平臺首個實現(xiàn)了《原神》原生級120幀支持。
OPPO游戲中心負責人譚皓介紹稱,在這個過程中,一加獲得了不少自研技術突破。
比如,將幀生成與計算的整個過程放在高通芯片上完成,讓生成幀與游戲渲染幀之間,只間隔一個120Hz的垂直同步周期,“這已經(jīng)是安卓顯示體系的極限。”
此外一加還開發(fā)了基于GPU的算法,將幀生成的能力轉移到GPU上進行運算,解決出幀延遲的問題。
譚皓表示,在整個研發(fā)過程中,一加、高通與米哈游三方技術團隊花費10個月時間討論技術方案,然后又花費6個月時間進行調試,才最終實現(xiàn)這套高幀優(yōu)化方案。
OPPO相關技術人員在現(xiàn)場告訴界面新聞,OPPO已經(jīng)將此前的部分優(yōu)化技術方案分享給平臺方和外部開發(fā)者,并且正在關注基于UE(虛幻引擎)的移動游戲的高幀優(yōu)化工作,在這方面引擎差異不會是難點。