从暴走漫画实例谈产品改版效果的衡量
纳尼？！听说暴走王尼玛这一次改版就能把应用启动次数提升1.5倍，单次访问时长提升1.3倍，次日留存提高1.3倍！你坑我吧？！！
暴走漫画作为深受广大年轻人的喜爱的、网民们喜闻乐见的知名动漫品牌，影响力有目共睹，但他们在此基础上仅通过一次改版，就取到如此骄人的改版效果，他们又是如何做到的呢？
让我们来逐步拆解一下这次改版过程吧。
事件回顾——暴漫团队是如何做到的
暴走漫画在做产品迭代的时候提出了这样一个目标：提升用户活跃度。
相关指标：新增用户数、活跃用户数、留存率、使用时长、访问次数。
首先我们选取两周前新增的一批用户，「第一次访问时间」介于「xx月xx日 ~ xx月xx日」之间。并将其按照最近一周的活跃度将用户群细分。我们将最近7天的访问次数大于10次的定义为「活跃用户」，访问次数小于两次的定义为「普通用户」。
对比这两组用户群的差异、选取两群人的不同维度进行对比，包括地区、手机型号、用户行为等方面。最终进过一系列的对比，我们发现了一个有趣的现象:用户在新增的两天内做过浏览分类漫画、加好友（订阅）、我的暴走（订阅的内容流）这三件事的几乎全部成为了活跃用户。
随后，暴漫团队进行了大胆的猜测，小心求证：符合用户兴趣的内容流，是刺激用户活跃的关键！这时，暴漫团队做出了一个重大的决定：对首页面进行了改版。并取得了骄人战绩！
我们来回顾暴漫团队改版的过程：
从暴漫的案例可以看出：
确定产品目标、用户分群、从不同维度进行对比、发现有趣的现象、基于发现的有趣现象提出改版、衡量改版效果、达成目标。这是一个完整的产品改版过程，缺一不可。
在产品正式发布后，PM的大部分工作是围绕升级迭代进行的：我们定义产品，然后跟踪研发，最终面向用户发布——「设计→开发→发布」的过程循环往复……
理想情况下，产品在迭代中不断演化，用户伴随迭代不断增长，直至产品走向成功。但不幸的是，大部分产品最后均以失败告终，排除战略、市场、运营等原因不说，在产品开发循环中缺少「衡量」的反馈环节，也是产品失败的常见原因——很多时候，我们以为产品在迭代中螺旋上升，实际上仅仅在原地转圈（仿佛追逐自己尾巴却浑然不觉的那只汪儿 ；）。
因此，要想成为优秀的产品经理，必须学会在迭代循环中适时进行衡量并确认进展，而这正是本文的内容主旨。
衡量改版效果需要哪些基础数据？
用户行为数据的采集、存储、分析，可以由研发团队构建专门的系统实现。另一个更快、更低成本、更灵活的选择是在您的产品中集成诸葛io之类的第三方分析工具，实现快速分析。（题外话：诸葛io提供的免费版本，足以支撑中小型产品团队的常见分析场景，欢迎评估试用 ）
衡量产品改版（新功能）效果的操作方法
从以下5方面入手，可以衡量产品改版的效果：
1、新功能有多少人用（是否受欢迎）？
一般情况下，一项新功能上线，用的人越多，表示改版更可能是成功的。（当然，某些「垄断+刚需」的产品除外 ：）
衡量指标：功能活跃比（使用了新功能的用户数/同期活跃用户数）
在诸葛io中，您可以直接查看某个功能所对应用户行为的活跃比的变化（比如下图反映的是某产品「点击分享按钮」用户占活跃用户的比例随时间的变化）。
2、用户是否会重复使用（被评估的）新功能？
如果新功能非常糟糕（比如存在严重Bug或体验极差），用户往往在用过一次之后便不会再用第二次。而优秀的功能则可能会受到用户的喜爱，并反复使用之。
衡量指标：功能的重复使用用户比例（用户在首次使用新功能后的第X天，回访用户中使用该功能的比例）
在诸葛io中，您可以通过两个「自定义留存」的分析结果对比得到「重复使用用户比例」，具体如下：
1、进入「自定义留存」，将「初始行为」选择为您要评估功能的对应行为，将「留存行为」选择「任意行为」，这样就得到了「使用新功能的用户在后续的回访情况（留存率）」（如下图）
2、在上一步中，将「留存行为」也选择为您要评估功能的对应行为，就得到了「使用新功能的用户在之后的重复使用情况」（如下图）
3、将上面两步中得到的结果放在一起，就能够计算出用户在首次使用新功能后的第X天，回访用户中使用该功能的比例。（如下图中深色柱子占浅色柱子的比例）
重复使用用户比例越高，说明有越多的用户反复使用该功能。
3、新功能对所处的使用流程是否起到了优化作用？
如果新上线（或优化）的功能处于某个用户使用流程（比如分享到第三方平台的过程、或拍摄并发布照片的过程）中，那么您可能需要评估该功能对流程是否起到了优化的作用。
衡量指标：用户流程的转化率和完成率（对比改版前后的转化率和完成率）
在诸葛io中，您可以通过「漏斗」完成该评估，具体如下：
为用户流程创建漏斗（如分享过程「点击分享按钮→到第三方平台→分享成功」）
分析改版前的漏斗转化率和完成率
- 分析改版后的漏斗转化率和完成率
对比改版前后，漏斗的转化率和完成率的变化，即可评估此次改版功能对用户使用流程的影响——转化率和完成率提升的越多，说明效果越明显。
4、产品改版对用户留存产生了怎样的影响？
一般来说，一次成功的改版（或一项优秀的新功能），会增加用户对产品的喜爱，而让用户频繁的使用产品。
衡量指标：留存率（用户在初始时间后第N天的回访比例，即为N天留存率，同类的常用指标有「次日留存率」、「周（7天）留存率」、「21天留存率」、「月（30天）留存率等」）
在诸葛io中，您可以通过「新增用户留存」衡量产品改版对用户留存的影响。具体如下：
通过对比改版前后，留存率是否发生变化，以及变化的幅度，可以衡量改版对用户留存的影响。
5、了解用户在怎样使用新改版的功能？
新功能上线了，用户是怎样用的？他们的使用方法是否与您的预期一致？用户在使用这个功能前后分别做了什么（场景还原）？
在诸葛io中，您可以：
- 通过「事件」属性的「分组对比」了解用户对新功能的大致使用方法（如下图，展示了用户「分享」的第三方平台分布）
2.通过洞察单个用户的行为记录，详细了解用户的具体用法及场景（如下图）
用户行为数据，为我们提供了一种低成本、便捷的观察用户行为的手段。虽然它不能完全替代产品经理对用户在真实场景中的观察和研究（数据传达的信息没有现场研究多），但如果配合使用，可以极大的提升整体的效率和准确率！
关键字：产品经理, 产品改版, 暴漫, 改版
本文来自互联网用户投稿，文章观点仅代表作者本人，不代表本站立场，不承担相关法律责任。如若转载，请注明出处。 如若内容造成侵权/违法违规/事实不符，请点击【内容举报】进行投诉反馈！