作者:wetest 小编
商业转载请联系腾讯 WeTest 获得授权,非商业转载请注明出处。
原文链接:https://wetest.qq.com/lab/view/474.html
使命召唤系列作为经典 FPS 游戏,以良好的表现与出色的射击手感,颠覆了玩家对传统第一人称射击的传统观念。同名手游(CODM)10 月份在海外上线,仅一周内下载量就已突破一亿次,更是横扫 139 个国家及地区的 APP Store 免费榜单,无疑是非常成功的一款手游。
为打造高还原、高品质的产品,CODM 研发团队和腾讯 WeTest 测试团队达成合作,针对 CODM 特点及全球化拓展的战略目标,结合其手机端的操作特点,做了一系列适配与优化工作。
手游上线前需要对产品的兼容性、性能等方面做全面的测试。由于测试具有多样性,如使命召唤手游需对不同系统、品牌的手机进行测试,测试场景需要涵盖竞技模式、据点争夺、经典爆破等核心场景。若对产品进行全面测试,利用传统的测试方法需要消耗大量的人力和时间成本。另外使命召唤手游的用户覆盖全球,在测试服务中也需要覆盖到国际化方面。
腾讯 WeTest 除能提供国内外主流设备进行线上调试,自动化测试服务外,还能提供全球范围内用户性能监控、舆情监控服务,满足手游全球化测试需求。
在开发及测试期间,为了保证项目进度,常常面临着任务重与时间紧的难题。CODM 基于其游戏内容的丰富性与复杂性,这个问题显得更加突出。为了更好地满足测试时效性,腾讯 WeTest 在蓝盾平台上提供了触发和集成等能力于一体的 DevOps 自动化测试插件,包含并发功能测试、自动化兼容测试、性能自动化测试以及功能测试,保证项目测试任务的每日构建,使得项目组可进行一站式地自动化触发与任务查看、通讯等内容。
为了实现全自动测试流程,CODM 建设了完善的自动游戏 AI 方案,让 AI 像玩家一样玩游戏,尽可能多的涉及到不同场景,发现游戏中潜在问题。
CODM 游戏地图较大,一局游戏通常持续时间约 30 分钟左右,而且游戏的场景丰富,操作性也很强,这对游戏 AI 的设计方案提出了更高的要求。同时,为了全自动流程的实现,以尽可能释放测试人力,Turing Lab 团队提供游戏异常图片自动化检测服务,并对 CODM 手游做进一步优化,将 CNN 模型分为特征提取网络及分类网络两部分。人工模拟生成异常游戏图像检测,完成异常图像检测模型训练。并通过 Lykan 的 api 实现模型部署,从而实现模型训练部署全自动化流程。游戏 AI 在测试过程中能自动完成跳伞、跳跃、打开背包、驾驶车辆,攻击敌人等复杂操作。
CODM 为了渲染画面的真实感,通过 PBR 材质渲染、实时光阴影、间接光及通用性方法,保证全场景物体统一光照环境。基于这些更高要求带来的种种测试挑战,CODM 通过 WeTest 的 devops 自动测试框架,每日可拉起 TOP200 设备进行测试,能准确涵盖到大部分市场主流设备的测试情况,包含所有测试设备运行的兼容性结果及性能数据。同时把测试结果和基础机器的 backbuffer 做对比,可以发现各种渲染异常,也可以验证游戏 graphic api 的兼容情况。获取的数据也可支撑新渲染特性以及渲染管线的评估。
使命召唤手游项目组对手游性能表现方面也有着极高的要求,为了提升玩家用户体验,项目组借助 APM 线上监控服务,实时监控产品全网性能数据,包含 FPS、CPU、PSS、回扯、场景加载时间、帧时间、流量、网络延时等手游重要性能指标。并可设置个性化的监控机制。若监控超出设定阈值,通过配置的报警推送能及时定位问题场景、机型和用户信息,能帮助项目组及时定位问题原因,快速对问题进行范围影响性评估和问题修复,实现性能问题预警 - 定位 - 解决 - 验证的问题解决闭环。
CODM 作为使命召唤在移动端的重要产品,承担着在全球市场延伸使命召唤影响力的关键任务。基于这一特性,腾讯 WeTest 旗下的企鹅风讯服务提供了针对其产品的全网舆情数据展示、口碑分析、舆情问题报警等相关定制化服务。在国际化方面,企鹅风讯数据源渠道目前已支持 36 个国家及地区,国外渠道已扩充到热门自媒体、直播平台、应用商店和游戏平台,如 discord、Facebook、Google Play 等。
天美工作室群技术副总监郭智在 9 月由腾讯学院举办的第三届 TGDC 大会上分享引擎工作能力建设中,提到通过游戏自动化测试兼容性测试框架,能帮助他们解决不少问题,如解决了性能监控,引擎测试缺少特定的性能信息、干扰多,渲染管线耦合性较高、大量问题反复发作,bug 上报不清等问题。
在不断增强 “平台”、“DevOps 测试中台”、“AI 技术”,“创新” 等能力的同时,腾讯 WeTest 也向所有开发者、测试者们开放服务,并不断向深向外向广探索,不仅为国内市场服务,今后也将向国际化延伸。
腾讯 WeTest 是由腾讯官方推出的一站式品质开放平台。十余年品质管理经验,致力于质量标准建设、产品质量提升。腾讯 WeTest 为移动开发者提供兼容性测试、云真机、性能测试、安全防护、企鹅风讯(舆情分析)等优秀研发工具,为百余行业提供解决方案,覆盖产品在研发、运营各阶段的测试需求,历经千款产品磨砺。金牌专家团队,通过 5 大维度,41 项指标,360 度保障您的产品质量。