出动产物质地治理如何现实？听听行业大咖如何说
6月24日，多多体育WeTest质地云首场专题直播《十年磨一剑，匠心锻造PerfDog》圆满收官。
本次直播，WeTest邀请MTSC中国互联网测试开发大会主席、多多体育资深测试本领总监、明星性能器具PerfDog创举东谈主曹文升（Awen）淳厚，为大家揭秘明星产物背后的发祥、出身、成长故事，并全面解读了PerfDog立异目的的涵义与作用，与线上不雅众共同探讨出动产物质地治理的的前沿本领与哄骗现实。
曹文升（Awen）
多多体育资深测试本领总监 PerfDog创举东谈主
从业17年，早期负责多多体育PC游戏客户端性能、兼容性等测试专项职责，现担任多多体育测试本领中心总监。
领有10年+游戏引擎开发及性能优化、器具平台开发、专项本领测试及游戏开发职责告戒，全程主导PerfDog、PerfSight、CrashSight、Bench3D等多个专项器具平台确立，参与多多体育多款著名开赴轫游名堂性能专项测试职责。
对客户端及游戏引擎本领有久了的认识，极端是在性能测试优化相干专项领域有国民级游戏哄骗实战告戒。
底下让咱们全部往复来，Awen淳厚在直播经过中的精彩演讲吧。
动须相应，十年匠心打磨
PerfDog团队从2010年就运转聚焦游戏引擎，为多多体育游戏提供性能专项管事，伴跟着PC和出动游戏的高速发展，期间，PerfDog团队也推出了PC游戏性能器具“Bench3D”，之后推出了出动全平台性能器具“PerfDog性能狗”，并于19年慎重对外绽开，放抄本年已管事全球10W+企业客户。
PerfDog发祥：痛
PerfDog始于游戏，起因”大吉大利“。2018年，“大吉大利”风靡全球，获胜带动了同庚全球PC硬件销量进步40%。Awen淳厚在直播中先容到：其时，研发团队但愿在保捏玩法不变，领有PC通常体验的情况下将这款游戏作念成出动版，这是团队初次尝试在出动平台上制作次世代画质的游戏，且是初次使用UE引擎，对所有团队齐曲直常大的挑战。
在性能专项测试经过中，团队最初要濒临的就是iOS与Android平台两座大山所带来的测试痛点。作念过iOS专项测试的同学应该了解，iOS平台的Xcode器具，只可在Mac或者Debug环境下进行测试。面对UE引擎游戏的百万级别代码量，在不出现任何舛讹的情况下，编译Debug至少需要一天的时辰，所有测试效劳极低。且无从了解市面上的竞品质能如何？行业表率是什么？
其次是Android环境，Android环境给东谈主的印象是比拟绽开的，因此，天然就会有许多手机厂商推出我方的系统版块，并对应了近千种不同的测试器具，但阛阓上却莫得一款器具能够作念扶持的测试分析。此外，每款测试器具齐可能存在兼容问题和不准确性，成为了其时团队濒临的最大问题，导致了大批复测与分析误导。
Awen淳厚说谈：在遭逢到了千种“痛之后，同感身受，团队产生了一定要处理这些问题的想法，也明晰的显然我方需要的是什么，一款能够复旧出动全平台、极简化、即插即用的测试器具，PerfDog因此应时而生，并在名堂里面取得了可以的成果。其后，PerfDog推行到多个名堂去使用，咱们又发现了些新的问题，名堂中不同职能的东谈主员，包括开发、测试、产物，以致是好意思术齐会有我方的产物需求。面对大批上报的需求，经过团队里面的念念考，咱们将大要50%的需求界说为有用需求，并进一步分类为数个通用需求，经过了大约一年的时辰的打磨，最终成为了19年底对外绽开时，大家所看到的PerfDog的面目。
PerfDog成长：用户体验良性生态闭环
从游戏方角度来说，末端用户玩到的游戏版块一定是研发团队在其时条目下能够作念到的最好体验的版块。其时，出动版的”大吉大利“被公司表里齐认为是一款大作，各大手机厂商也特别爱重，他们会将在研及未发布的机型，或是仍是发布的旗舰机型拿来测锻真金不怕火证游戏在他们的手机上的性能推崇，提前处感性能问题。在这个经过中，咱们发现手机厂商和游戏方一样，也曲直常爱重用户的性能体验，PerfDog也因此自但是然地绽开给手机厂商，两边全部费力为用户提供极致的性能体验。
再其后，咱们发现许多To C用户（举例科技大V、博主）也赓续使用PerfDog作念手机性能评测。Awen淳厚回忆：起先咱们还很狐疑，因为其时评测手机性能推崇的主流情势是通过BenchMark跑分，经过与用户的交流探讨，许多用户暗示手机仅仅BenchMark跑分高并弗周密面的代表果真性能体验，PerfDog可以更好地发现手机性能过失或者Bug。
同期，由于大V带有的粉丝属性，当发现了手机的性能过失，和会过媒体快速地放大，可能会获胜左右用户的购买意向。因此，手机厂商也特别爱重，一朝发现性能问题就会快速的去处理优化。无意候，一些性能问题也不一定是手机厂商的问题，而是一些更底层硬件（GPU、芯片）的问题，当手机出现性能问题，手机厂商也会快速推进硬件厂商去作念升级优化。
最终咱们发现游戏厂商，手机厂商，硬件厂商齐但愿能给用户优秀的性能体验，而科技大V与博主则能推进性能体验向更好、更高地点发展，举座变成了精深的生态闭环。
PerfDog成长：管事更多用户，不限于游戏
PerfDog最早是管事游戏，在推出时也打上了游戏的标签。但在里面使用的经过中，咱们发现许多非游戏的产物也赓续使用PerfDog，PerfDog不仅可以匡助到游戏，也能匡助到许多非游戏的APP，基于此，咱们也徐徐把PerfDog绽开给了一些外部的厂商。再到其后，PerfDog不仅是赋能给手机、芯片厂商，还包括一些IOT开拓厂商，这亦然PerfDog渐渐绽开的一个经过。
在所有绽开经过中，为了给到用户一个安逸、准确专科的使用体验，咱们同期也在不休地进步PerfDog的软性实力，咱们花了大约半年多的时辰去配合国度计量院进行大批的测锻真金不怕火证，最终以高分取得了国度计量院的认证文凭，在秘籍合规方面，咱们也衔接了里面专科的法务团队全部去推行相干的操作与设定。
Awen淳厚坦言：最早的PerfDog，咱们构想的是想作念一款名堂里面好用的器具，之后以为管事公司里面就充足了，再之后以为管事国内厂商就好了。但其后，咱们发现公司有特别多的游戏合营伙伴，比如说Supercell，Roit、EA等全球各地的公司齐但愿可以使用这款器具，之后韩国的三星、SK等公司也但愿可以将PerfDog绽开给他们使用。是以在前年7月份，咱们慎重推出了PerfDog外洋版并慎重面向全球绽开。本年3月，PerfDog亮相全球顶级游戏开发者大会GDC。
除了软实力，PerfDog的产物也一直在进化，从早期的成例器具到PerfDog云平台、云管事，再到PerfDog Service工业化性能管线，从成例测试到行将推出的深度性能处理决策PerfDogPro。同期，咱们也繁衍出了聚焦游戏的全新处理决策：用户游戏性能处理决策PerfSight和用户游戏特别崩溃处理决策CrashSight，感兴味的同学可以点击下方勾通苦求免费试用。
https://wj.qq.com/s2/10356354/7d98/
Awen淳厚暗示：PerfDog畴前将会逃匿更多的末端（手机、腕表、汽车、主机、VR、TV、PC等），同期咱们但愿能够在本年底进行一个全量的升级，使PerfDog更好的复旧APP哄骗的性能专项测试，包括视频、浏览器、弱收罗瓜分析，并为产物研发运营的全人命周期提供复旧，匡助大家滋长出更高品质的产物。
PerfDog目的解读
PerfDog中许多目的齐是笔据团队的告戒总结出来的，或是草创的果真反应性能的目的。在第二顺序中，Awen淳厚选取了大家比拟慈祥的三个目的：Jank卡顿、Smooth稳帧指数、帧能耗（FPower）并逐个解读。
Jank卡顿
在苹果WWDC18年开发者大会上，苹果建议了一个FramePacing的办法，如下图所示:
将左边40帧的画面与右边30帧的画面进行对比，咱们会发现左边的画面彰着出现了一次卡顿，通过FrameTime进一步不雅察，可以看到左边40帧的画面在C帧时出现了一个逾越100ms的单帧耗时，右边30帧的画面则曲直常均匀的33ms/帧。因此，左图天然帧率较高，但予以用户的感知体验是比拟差的。
早期的安卓一直给东谈主卡顿、不通晓的固有印象，为了改动这种景象，13年Google发布了划时期系统Android4.4，同期建议了黄油诡计-Jank，并提供了Jank的计较念念路，以更量化的情势展示系统率略度。
通过上述两个案例可以看出，单看FPS（帧率）无法反应出果真的通晓度与用户体验，需要结合多维度的目的去分析。Awen淳厚指出：其时，咱们团队接管的是FPS与Jank两个目的去分析游戏游戏性能，但咱们发现，统计出的数值和用户体验感知仍存在分手，经过了大批的测试与考据，咱们认为Google的Jank值判断过于严格，是无法果真反应用户果真体验的。
经过团队的更正升级，咱们推出了更正后的PerfDogJank目的并推行绽开给了行业。但很快，咱们遇到了新的问题：19年的开拓广泛是60帧刷新率，最近的旗舰机型齐是在120帧以上的刷新率，行业内硬件开拓的快速进步使用户对性能体验的要求越来越高，即就是眇小的卡顿也可能会被用户感知到，原先的Jank表率也仍是无法吹法螺性能测试的需求。因此，在最新的PerDog版块中，咱们推出了全新的目的SmallJank，可以精确反应出游戏经过中的眇小卡顿，归附果真用户体验。
稳帧指数Smooth
稳帧指数Smooth可以对游戏或者哄骗画面安详度提供更精确的评估。最初看下图的帧率截图可知，举座的帧率基本莫得变化，但当咱们细看FrameTime可以发现，单帧的耗时波动曲直常大的，诠释在帧率莫得变化的场景下，里面仍存在一定的卡顿。且每次卡顿的时长、鸿沟不同所产生卡顿驱散亦然不同的。咱们还可以看到下图右边的毛刺，可以发现依然会存在些眇小卡顿，这么就会导致测试驱散中卡顿次数是一样的，但给用户的感不雅体验却是不同的，这时候就需要更精确的目的去判辨。
因此，咱们推出了Smooth目的（公式如图所示），咫尺已慎重上线新版块PerfDog，处于大限制考据的阶段。Awen淳厚暗示，之后可能会将这个公式绽开给大家，供大家使用。
帧能耗（FPower）
许多名堂团队与咱们换取，暗示但愿可以有更科学、量化的目的来评估功耗推崇，这亦然帧能耗（FPower）的由来。
Awen淳厚先容谈：动作用户，详情但愿游戏/哄骗能够以高帧率、高画质、发烧低、耗电少的状态运行。但这么会导致一运转手机运行通晓，画面、帧数均在想象水平，但随入辖下手机能耗的增长，发烧随之增长例必会导致降频影响帧率，进而影响所有用户体验。咱们再进一步去判辨游戏/哄骗到每一帧的耗时和能耗判辨，如图所示：
咱们可以得知：帧率=恭候+运算，功耗=运算+调治，优化运算智力果真优化功耗。
之前，大家优化能耗可能会选拔降帧等措施，天然缩短了功耗，却影响了用户的体验，弗成算是一个正向的优化。惟有当帧率莫得变化，功耗缩短，或者是帧率进步，功耗莫得变化才是缩短了单帧功耗的正向优化，是以，咱们建议了一个更精确的目的FPower=功率/帧率，这亦然多多体育咫尺作念功耗优化时比拟进犯、精确的目的。
QA顺序
在直播尾声，Awen淳厚与现场不雅众进行了火热的答疑顺序。接下来小编带大家全部回来下精彩答疑顺序~
Q：PerfDog在更底层的目的获取上是否会有一些冲破或者诡计？
Awen：这个是一定会有的，因为咱们也但愿能够给到用户更深度、全面的底层目的信息。当今咱们亦然积极和一些硬件厂商，举例高通、Imagnation等张开合营，驯顺在不久的将来，PerfDog有智商为用户提供硬件、以致是底层驱动的更全面深度的信息，匡助大家更好、更快速地定位性能问题。
Q：在游戏名堂中，各式数值参数对客户端的影响是若何的？以及哪些目的优化是一款新游戏需要慈祥的？
Awen：就从APP的角度来看，游戏曲直常复杂的，仅次于操作系统。在游戏测试经过中，单看某一个或者几个目的是无法反应出果真的游戏性能表率的，之前也有同学提过相似的问题，咱们正常建议是扶持的去看各名堂标。再者，不同的游戏类型的区别曲直常大的，性能目的的分手也特别大，大家在名堂经过中弗成果决去指定一个表率来要求名堂，我建议大家可以适应参考行业内相似竞品的性能目的进行优化，咫尺，PerfDog仍是提供了这个功能，大家可以多多尝试。
Q：请教PerfDog是否考虑更好的复旧APP的哄骗测试？
Awen：是的，其实咱们前边也仍是提到了，大约从前年年头，咱们就仍是运转考虑哄骗的测试了。本年年底，咱们诡计推出一个更好的版蓝本复旧哄骗的测试，并包括弱收罗环境测试等。
Q：PerfDog是否可以收场一个账号同期测试多开拓？
Awen：可能大家莫得夺目到，单个账号在一台电脑上测试多部手机是PerfDog仍是复旧的智商，在PC端屡次启动PerfDog软件，就可以同期测试多台手机了，咫尺复旧一个账号同期测试3台手机。大家可能会问：为什么只复旧3台呢？因为在性能测试过中，PerfDog会裸露大批的性能参数与UI，若是多部手机同期永劫辰测试可能会导致测试驱散末端或者缺失，是以咱们建议最多是在3台手机上进行测试。