游戏已经成为智能手机发展重要的推动力。
市场调研机构的数据显示,2023年全球玩家在移动游戏上的花费高达近900亿美元,约占全球游戏市场总销售收入的50%,是主机游戏和PC游戏的两倍左右。
从2018年开始,全球移动游戏市场销售收入就保持着惊人的增长态势。中国市场尤为明显,移动游戏的销售收入约占全球三分之一。
如何才能满足移动游戏玩家极致的需求?ChinaJoy前夕的2024骁龙游戏技术赏上,高通、网易伏羲实验室、红魔、腾讯游戏和OPPO等的业界专家分享了当下移动游戏的痛点及解决方案,以及生成式AI将会对移动游戏、AI手机和AI PC产生的影响。
移动游戏高帧率、光追、功耗的极致
伴随移动游戏的快速发展,2018年高通首次参展ChinaJoy,2019年和八大合作伙伴首次共同打造骁龙主题馆,并延续至2024年ChinaJoy,骁龙主题馆成为了ChinaJoy的前沿移动体验专属空间。
高通公司全球副总裁侯明娟介绍,“截至2023年,我们与近260家合作伙伴深入合作,呈现了超过350项产品与技术展示,共吸引超过100万名观众来到现场,亲自体验骁龙赋能的顶级数字娱乐体验。”
如今的移动游戏体验已经能够满足大部分消费者的需求,但对于那些追求极致的游戏玩家来说依旧有提升的空间,想要把制作越来越精良的游戏大作在电池供电的手机上运行,挑战不小。
为此高通也在不断升级Snapdragon Elite Gaming的特性,从骁龙855支持第一代Snapdragon Elite Gaming技术,第三代骁龙8搭载的Elite Gaming已经发展到了第六代,包含了60多项游戏特性。
2024骁龙游戏技术赏上,高通产品市场资深经理姚轶非介绍了Snapdragon Elite Gaming的三项全新特性: Adreno图像运动引擎2.0、基于硬件的实时光追和虚幻引擎5 Lumen、骁龙自适应游戏画质。
首次在移动端实现240Hz显示支持
帧率是影响游戏体验的关键,越高的游戏渲染帧率,能带来越流畅的游戏体验,更好的画质也给游戏玩家带来更好的游戏沉浸感,但高帧率也同时带来更高的游戏功耗。
为了在移动端实现极致的游戏帧率,基于最新定制的骁龙显示硬件,第三代骁龙8重大升级后的Adreno图像运动引擎2.0,全球首次在移动端实现对240Hz显示的支持,用户能够以240fps的超高帧率畅玩游戏。
姚轶非表示,“一方面,采用全新的增强光流引擎,可以在相同的能效条件下,生成更高质量的帧;另一方面,大幅提高了即时帧生成的能效,可以在对续航影响很小的情况下,使游戏帧率翻倍。”
Adreno图像运动引擎2.0(ADME2.0)是高通完全自研的基于游戏3D信息的插帧技术,通过从游戏管线中获取运动向量,颜色信息,深度信息,转换矩阵等,经过算法运算生成高质量的新的游戏帧,能够以较低的功耗达到游戏帧率翻倍的效果。
这一引擎运行在高通Adreno GPU上,同时支持内插帧和外插帧两种模式,具有高画质,超低延时,低功耗和平台适用性广等优点。
这一升级支持了《塔瑞斯世界》实现帧率的稳定性大幅提升,以及能耗大幅降低。
《塔瑞斯世界》是一款UE4打造的高品质大世界MMORPG,主打挑战硬核副本开荒玩法,对于游戏的流畅性以及操控的及时响应有着极高的要求,所以对硬件有极高的性能要求。
“我们一直尝试各种方案,不断优化游戏性能,提升流畅性。”腾讯游戏国内发行线生态发展部引擎组负责人胡豪翔表示,《塔瑞斯世界》接入AFME2.0方案之后,不仅画面更加流畅,保证持续60帧体验的同时,功耗比原声60帧降低了30%左右,相比原生60帧极大的性能负载会在后半段造成设备降帧,带来了著提升。
大幅提升的关键在于AFME2.0是纯GPU运算,60帧下CPU负载不会有明显的提升,负载与30帧下几乎一致。再加上帧预测算法的着色开销,低于游戏的渲染着色开销,所以在着色指定占比上,也比原生60帧低,实现了更高帧率的同时更低功耗。
首次在商用终端上支持UE5光追
和高帧率一样,光线追踪也是提升游戏沉浸感的关键技术,但实时光线追踪带来了更高的功耗挑战。
“第三代骁龙8不仅将光追性能提升至前代的1.5倍,还是首个能够以完全交互式的帧率运行虚幻引擎5 Lumen全局光照系统的移动平台。”姚轶非介绍,虚幻引擎5中的Lumen系统是一套革命性的动态全局光照与反射系统,专为次世代主机及建筑可视化等高端可视化领域设计。以前,只有高性能的游戏主机和PC才有能力运行Lumen。
高通展示了骁龙游戏工作室基于UE5引擎开发的Demo:Dragon Alley。
雷峰网了解到,骁龙游戏工作室已经与头部游戏公司合作,这个头部游戏公司即将推出的虚幻引擎5手游中启用Lumen。
自适应游戏画质
高帧率和实时光追带来了更高的游戏画质和更沉浸的体验,也让CPU和GPU渲染压力越来越大。
调查数据显示,功耗增加引起手机的发热降频导致游戏的帧率不稳定是手游体验的一个很大的痛点。
如何才能降低功耗和稳定帧率?
“我们开发的骁龙自适应游戏画质,通过和游戏实时交互,及时把手机SOC的一些信息如CPU,GPU利用率,手机温度,电流信息和各种预警信息通知到游戏,游戏可以根据手机的状态自动调整游戏的画质,降低或者提升CPU和GPU的负载。”姚轶非进一步表示,“游戏也可以实时把一些配置信息,场景信息,画质和负载变化信息等等通知手机,让手机及时做出调度策略的调整和优化,降低功耗和发热,提升游戏帧率的稳定性和体验。”
已经有国内头部MOBA游戏接入骁龙自适应游戏画质特性,在120帧极致画质的配置下功耗平均有13%的降低,性能上有最低帧率1.2fps的提升以及平均2.5度的温度降低。
更多的游戏也将接入骁龙自适应游戏画质。
基于上述三个Snapdragon Elite Gaming的新特性,手机OEM也能带来更好的移动游戏体验。
OPPO游戏中心负责人谭皓就分享了历时一年多,在一加Ace 3 Pro上实现的安卓首个《原神》120帧。
“传统的插帧游戏技术,通常使用前后两帧图像信息,在专用芯片上计算生成中间帧。这种在显示末端进行插帧的方案无法充分利用游戏自带的渲染管线信息,还会出现延迟与卡顿的现象。”谭皓介绍,OPPO和高通以及游戏工作室合作,在行业通用技术上做了三个改变。
第一个是将帧生成环节前置在整个渲染环节的初期。
第二个是在高通的支持下,将整个帧生成与计算直接放在高通芯片上完成,缩短了至少一个垂直同步周期。“生成帧与游戏渲染帧之间,只间隔一个120HZ的垂直同步周期,这是安卓显示体系的极限,可以说是零延迟的体验。”谭皓表示。
还有一个是在讨论和调试的过程中,OPPO发现在重载游戏场景下,高通的GPU仍然有足够的性能余量,将余量与OPPO自研的GSS技术能力结合,可以根据游戏的实时需求,更加精准释放CPU、GPU硬件性能,确保游戏在各种复杂场景下保持高帧率、低延迟的稳定运行。
移动游戏的AI拐点
更高的画质和更好的沉浸感能够带来更好的移动游戏体验,生成式AI的引入,则会带来全新的游戏体验。
网易伏羲从2017年成立就开始探索在游戏中落地AI玩法。去年在《逆水寒》手游中落地了大量创新的AI应用,包括智能NPC、文字捏脸、大宋头条、UGC剧组模式等。
网易伏羲实验室AI技术负责人吕唐杰介绍,“我们刚刚开启公测的《永劫无间》手游,率先发布了全球首创的语音AI队友玩法,玩家可以邀请智能AI队友进行一场完整的游戏体验。”
也就是说,玩家可以通过语音交互的方式,直接跟AI进行交流。AI队友能听懂指挥,搜装送装、团战配合样样精通;还能实时观察战况,汇报关键信息并答疑解惑;AI队友也具备强大的战斗能力,博弈强、配合好;还能自由交流,给玩家较高的情绪价值。
“语音AI队友玩法对于时延非常敏感,为了给用户带来更极致的交互体验,伏羲跟高通进行了深入合作,将部分AI推理从云端GPU迁移到第三代骁龙8移动平台的NPU上。”吕唐杰表示,在端侧运行AI推理不仅可以实现低时延,还能降低服务运行成本。
能够在将游戏中的AI特性在移动端落地,离不开过去6年高通骁龙旗舰移动平台AI性能飙升25倍,也少不了骁龙平台落地生成式AI的三大优势。
“第一,我们能够在推动智能手机AI能力发展的过程中,不断的去推动更多企业开发具有高精准度和训练能力的AI模型,以实现终端侧AI功能。”高通技术公司手机、计算和XR事业群总经理阿力克斯·卡图赞(Alex Katouzian)进一步表示,“第二,我们能够助力应用开发者直接获取经过我们量化和优化的模型,并提供一个平台,让他们能够直接进行测试验证和硬件终端部署。第三,我们正在推动具备AI能力的边缘终端实现普及,包括智能手机、PC、平板电脑、手表、XR等。”
高通的合作伙伴红魔就基于第三代骁龙8探索多终端上落地AI大模型。7月初红魔发布了搭载垂直游戏AI大模型的新品——红魔9S Pro AI游戏手机。
红魔还推出了红魔平板·3D探索版,搭载了红魔团队自主研发的“红魔魔方大模型”,在通用大模型基础上,强化了以游戏场景功能为核心的游戏大模型,
努比亚技术有限公司常务副总裁、努比亚品牌联合创始人余航介绍,魔方大模型能够通过多模态,实时识别关键元素,理解游戏场景意图和玩家状态,实现全方位的游戏智能辅助。比如“AI智能领航员”,游戏中能实时为玩家贴心支招。还有针对FPS射击类游戏的声像探针、高光时刻的自动剪辑、AI触发器等新奇功能。
对于手机落地大模型,如何在算力、内存和续航有限制的条件下落地大模型,不得不权衡模型大小和性能之间的关系。
“过往我们认为10B参数的大模型比4B参数的大模型要好,但这可能并不一定是百分之百成立的。我觉得未来的趋势是小模型通过不断训练变得更加准确,高通与众多模型厂商合作,挑选最准确、最轻量化的小语言模型来实现在手机终端侧的部署。”Alex Katouzian对雷峰网表示,“目前4B参数的模型已经做的相当出色了。以微软举例,他们在PC后台运行的小语言模型Phi大概的参数量在3.8B到7B之间。”
不过无论是手机端大模型的落地还是游戏中增加AI特性,都需要时间。
“过去大家习惯在云端处理AI功能,如今云端计算的成本正在大幅增加。可以看到包括大型操作系统公司、互联网公司在内的所有企业都在力推终端侧AI,以尽可能将需求分流到终端侧。”Alex Katouzian同时表示。
和游戏将迎来AI的拐点一样,PC行业也处于转折点。
“如今PC与智能手机越来越相似,外形更轻薄、外观设计更具吸引力,拥有极高性能的同时需要保持低功耗。其次,AI正在成为PC产品中极为重要的部分,高通投入AI领域已经超过15年。”Alex Katouzian。
生成式AI正在带来巨大的变革,端侧的推理具有更大的市场空间,高通处于端侧AI的桥头。