近日,微信订阅号将采用信息流设计的一则消息刷爆了新媒体运营圈,今天,以微信订阅号的改版为例,诸葛君跟大家谈谈产品改版评估这件事。

将传统的折叠方式变为更为直不雅观的feed流模式
一、改版评估的重要性
大多数产品经理对改版评估这件事都比较头疼,要么粗略评估,要么直接扔给运营或数据部门出数据,通常也都只是对比一下新版本的用户增长情况,对比一下新旧版本活跃、留存的影响。要知道,每一次改版都是产品和用户的一次重新认识,改版如果是正向的,可能会带来增长,如果带来的是不增不减还好,可怕的是因为一次改版带来用户体验和信任的降低,造成流失,而这样的案例也太多太多。
所以,对于产品经理来说,上线一个新版虽已身心疲惫,但用数据量化你的成果也是重中之重。评估其实很简单,掌握了方法,用户数据说话,没准以后就可以站着改需求了。
二、如何进行评估
1、明确改版初衷
不是每次都适合看新增、留存、活跃这些统计指标,正确评估的第一步是回到产品设计的初衷,因为每次改版必然是有目的的:优化了购买路径必然是想提升购买转化率,优化了某一页面的设计必然是想提升当前页面的用户体验,体验的提升带来的可以使用户在当前页停留时长的增加,可以是当前页面核心功能点击人数次数的增加,或是社群中核心用户的几句正向反馈。
所以,从改版目的出发,每一次改版都是可以衡量的。我们以微信订阅号信息流的改版为例:
(可能的)改版初衷:
解决目前订阅号被严重折叠,,粉丝图文页打开率低的现状
改版内容:
—— 提升“内容”的显示等级(新版: 1 级;旧版: 2 级);
—— 优化用户从列表到文章详情的路径(新版: 1 步;旧版: 2 步;)
(可能的)改版目的:
—— 提升订阅号入口的打开率
—— 提升原图文的打开率
—— 提升平均每个用户每天在图文页查看公众号的个数
2、明确评估指标
基于改版目的,我们需要提前明确评估指标,通常一次正向改版会带来多项指标的提升,此次评估我们以 3 个最直接的指标来衡量:
指标1:订阅号入口打开率
说明:无论是路径进行了优化,还是界面进行了优化,都会带来用户对这一功能整体好感的提升,必然程度上会提升这一入口的打开率;
指标2:原图文打开率
说明:更多的信息在列表页得以展示,从列表到详情实现了路径最短,用户在订阅号功能模块下的使用效率提升,每一次打开能看的文章数也会增加;
指标3:平均每个用户在图文页查看公众号的个数
说明:同指标 2 的解释,更多的文章得以曝光,也就意味着更多的内容创作者得以曝光。
3、设置实验组和对照组
我们以指标 1 为例,当明确了评估指标,首先是要对当前现状有所量化,这样改版后才能形成对比。
对照组:
通常我们会筛选旧版本一段时间的新增用户,这一段时间可能流量平稳、没有大面积推广、没有全民热点事件,评估这段时间新用户使用这一功能的人数、次数、活跃比(活跃比:当天活跃的人中打开这一功能的百分比),我们假设微信的新增较少,在每一天的活跃都是存量用户,新增活跃几乎可以忽略,而且每一天活跃的用户类型都比较平均。然后查看这一人群在这一段时间的打开率。

对照组
实验组:
新功能上线以后通常会带来用户的一阵新鲜感,基于对照组中我们对微信新增较少而将样本筛选为活跃用户的假设,导致我们需要在上线之后用户讨论热度过后再来衡量,时间跨度和条件与对照组相同。然后对比这一入口在这一段时间的使用人数、次数、活跃比的变革。

实验组
对特定人群的分析也是改版评估非常重要的方法,也即衡量功能对特定人群的影响,可以基于用户环境信息、用户属性维度,甚至用户生命周期去对比。指标2、指标 3 逻辑类似,由于数据了解有限,我们只对分析思维进行阐述。
4、得出结论
得出结论的过程是直接影响我们定义他正向与否的关键,对数据的解读也是重中之重,不能缺少的是明确出我们对样本数据的假设条件。
5、持续验证
相关文章:
广告营销怎么做才能达到良好的效果?建议从这四个方面入手!
流量联盟是真的吗?如何利用流量联盟来赚钱?
网络赚钱月入10万必备的6个基础常识
知乎如何引流?知乎引流的方法
QQ群操作红包引流cppa推广赚钱日赚1000+的运营思路和方法分析!
广告联盟赚钱必知的网站诱惑引流大法,简单又实用!
在App Store上推广app上传审核被拒的几个常见原因!
最新轻松日赚500+的网络淘金项目分享!
互联网广告公司都是怎么通过广告赚钱的呢?主要靠这3点!
这3种人容易在网络淘金的时候被骗,说的是你吗?
网站引流怎么做?网站引流的十大常见方法渠道
如何利用社交app引流做广告联盟交友类产品赚钱?
app推广怎么做?推荐这6个常见的app推广方式!
盘点14个可以通过网络赚钱的网站和平台
联盟赚钱每天收入多少?日赚500+不成问题!
网赚游戏未来将进入3.0时代,想要赚钱的抓紧了!
最适合个人站长赚钱的6大广告联盟推荐!(新手必看)
两种百度知道的引流推广方法,效率杠杠滴!
app用户大量流失?app促活留住用户你需要这么做!
怎么通过问卷调查赚钱?怎样才能真的赚到钱?
网站排名关键词在首页有什么好处?
2021年不能错过的10个实用有效的引流方法
引流之如何利用闲鱼进行引流?
广告常见的七个引流渠道
网页优化怎么做?这五个核心要素的优化必须掌握!
手机赚钱该如何做?手机赚钱的平台哪些比较好?
如何通过免费平台做好微信引流吸粉?教你两个方法!
现在搞什么副业挣钱?上班族十大副业赚钱方法推荐!
2020年适合个人站长们通过网站赚钱的5大网站类型!
影响广告联盟平台上广告价格的因素有哪些?
网赚大神利用猪八戒月入过万的经验分享!
微博推广引流怎么做?这14种非常实用有效的微博推广方法必须掌握!
怎么在网上赚钱?网上赚钱的10个方法和渠道拿走!
5种网站赚钱项目,新手也能轻松操作!
做赚钱有这么多好处,赶紧来看看!
制作单页网站做秀场|直播|推广赚钱教程分享
超全!20大类100多个网上赚钱渠道和平台整理汇总
5大国外广告联盟赚美金项目,诱人的美金在向你招手!
抖音点赞赚钱是真的吗?揭秘抖音点赞骗局的套路!
如何做app推广赚钱?不用网站也能日赚100+的方法!
2021年兼职赚钱的路子有哪些?推荐这6个!
如何利用引流脚本通过广告联盟等渠道收益月入过万?
站长必看:四个关键因素影响网站生死!
网络淘金怎么做?推荐5个比较靠谱的网上赚钱项目
10个微信引流和增粉的方法,让你也成为流量大咖!
seo网站关键词优化该怎么做?如何提升网站排名?
app推广怎么才有效果吸引到大量的用户?
网站优化公司是怎么做网站关键词排名优化的?
广告推广技巧有哪些?如何进行有效的推广?
引流方法大全!100种引流思路方法全在这了!


