<强>前言
近几十年是互联网高速发展的时代。随着互联网行业的发展壮大,必然会出现角色的细分,从而演化出了不同的职能岗位。随着日益激烈的市场竞争,修炼内功,提升产品效果也成为了各公司发展的重要工作。产品效果如何评估?用户体验如何度量?本文试图阐述 <强>评测这一新岗位在高德的主要职责,发展进化过程,以及这一岗位所负责的产品效果评估手段与体系搭建。
当你在各搜索引擎输入评测二字时,看到的相关搜索通常是这样的:
这些问题其实能代表大部分人对评测的了解,就是除了游戏评测,手机评测,汽车评测,生活用品评测之外,人们对评测其实不太了解。互联网公司里的标题是评测的同学又是做什么的呢?也许大家的了解就更少了。
做了三年多的评测,在第一年经常面对的灵魂拷问就是:“你们评测是做什么的?”这种问题回答起来,基本类似于哲学的终极三问了:“你是谁?你从哪儿来?你到哪儿去?”
评测是谁?这是评测的定位问题。评测从哪儿来?这是评测的根基和起源。评测要到哪儿去?这是评测的发展目标和方向。
<强>评测是谁?
简单地说, <强>评测是评估产品效果的团队强。希望能站在用户的角度,在上线前验证需求效果,在上线后通过对自身,用户数据和竞品的全面分析,建立起产品立体的效果评估体系,也就是评测体系。
<强>评测从哪儿来?
要回答这个问题,其实就是,为什么要评测?
如同每个版本更新,我们都会关心性能如何一样,当上线了新的策略时,大家也会同样关心产品的效果。产品效果如何评估?策略相关的需求开发完成之后,研发实现的实际效果是否和产品经理的预期一致?实际效果又是否和用户的预期一致?在理想情况下,这三者应该是无差异的。但我们也应该有衡量它们之间是否有差异的方式,给出效果变化是否正向的结论,以更好地保障用户的使用体验。
此外,即使上线前,所有人都一致给出了正向结论,认为需求上线后一定会给用户体验带来极大提升。真实的产品体验如何,仍然得用户说了算。比较大的修改可以通过AB实验的方式圈出小部分用户,快速收集用户数据,进一步对需求效果是否正向做出评价。或者直接上线,通过对行为数据及用户反馈的分析来完成线上评估。
同时,要在市场上找准自己的位置,对竞品的分析必不可少。
有了这些效果评估及分析的需求,就有了评测团队。
<强>
<>强如何进行评测
上线前的离线效果评测及分析,AB实验及分析,上线后的指标监控及问题分析,问题挖掘,竞品监控和分析是常见的评测手段。
<强>
<强>一、离线评测
上线前,针对产品的需求,评测的职责是通过各种方式分析及验证产品效果,给出是否能达到上线标准的结论,同时分析出头部问题所在。
技术评测团队成立之初,主要建设的部分有:确定合作流程,建设评测专业能力和建设评测工具。
<强>合作流程
对标一个版本开发的项目流程,从需求确定到开发,到测试验证再到上线。评测从需求串讲阶段开始,明确有哪些需求涉及到效果变化。再根据变化情况制定评测方案,同时检查工具是否符合需要,如否则进入工具快速开发阶段。然后获取评测数据,进入评估验证阶段,最后发送报告,给出需求是否通过评测的结论,并对出现的问题进行总结分类。
对于评测介入的不同业务线来说,评测的流程大致相同。但由于业务不同,评测方案与方式会有很大不同。
