精益数据分析

Peter F.Drucker:if you can’t measure it, you can’t manage it.
image

精益数据分析基本方法

基本的分析概念

  • 定性数据:杂乱的、主观的、不精确的,吸纳主观因素
  • 定量数据:跟踪和衡量的数字,排斥主观因素
  • 最小可行化产品:足以向市场传达你所主张的价值最小化产品

8个需要提防的虚荣数据指标(模式)

  • 点击量。——更应统计点击的人数
  • 页面浏览量(PV值)。——除非商业模式是展示广告直接与PV挂钩,否则更应统计(访问的)人数。
  • 访问量。—— 100访问量是一个人访问了100次的用户,还是100个访问了一次的用户。
  • 独立访客数。——只知有多少人访问了网页,不知做什么,为什么停留,是否离开了。
  • 粉丝/好友/赞的数量。——在社交平台上振臂一呼,有多少粉丝会响应,知道这个数字才有意义。
  • 网站停留时间/浏览页数。——两个指标代替客户参与度活活跃度不明智。如在投诉页停留了很长的时间。
  • 收集到的用户邮件地址数量。——先向一部分注册用户发送测试邮件,看是否按照邮件提示的去做。
  • 下载量。——可能影响商店的排行,但更需要了解,应用下载后的激活量、账户创建量。

数据测试方法:市场细分、同期群分析、A/B测试和多变量分析

测试是精益数据分析的灵魂。通常,测试就是通过市场细分、同期群分析或A/B测试来比较两个样本的不同。

  • 细分市场:细分市场就是一群拥有某种共同特征的人。你需要根据一系列的技术、人口信息对访客进行细分,然后比较各个细分市场之间的差异。
  • 同期群分析:比较的是相似群体随时间的变化。产品会随着你的开发和测试而不断迭代,这就导致在产品发布第一周就加入的用户和后来才加入的用户有着不同的体验。
  • A/B测试和多变量测试:
    A/B测试:假设其他条件保持不变,仅考虑体验中的某一属性对被试用户的影响。
    多变量分析法:同时改动产品的多个方面,看哪个与结果的相关性最大。

A/B测试看似简单易行,实则有一个软肋——只有用户流量巨大的大型网站(如微软必应、谷歌)能对单一的因素(如链接颜色、网页速度)进行测试并迅速得到答案。如果没有庞大的用户流量,你将需要测试很多因素。这可能包括网页的色调,触发用户行为的链接文字,图片效果等。

同期群分析eg:
假设你经营着一家网店。你每月能获取1000位新客户,他们每人都会买一些东西。如下图所示前五个月中平均每位客户带来的营收。

1月 2月 3月 4月 5月
客户总数 1000 2000 3000 4000 5000
平均每位客户营收 5美元 4.5美元 4.33美元 4.25美元 4.5美元

从这个表格中,我们是否可以看出网店的生意究竟是日益红火还是每况愈下?这并不容易回答,这个表格中,新客户和5个月前注册的老客户的数据是混在一起的,没有对比新客户和老客户的表现。

我们调整为根据用户在网店上的“店龄”来划分数据。如下表所示:

同期群 使用月份 使用月份 使用月份 使用月份 使用月份
1 2 3 4 5
1月 5美元 3美元 2美元 1美元 0.5美元
2月 6美元 4美元 2美元 1美元
3月 7美元 6美元 5美元
4月 8美元 7美元
5月 9美元
平均值 7美元 5美元 3美元 1美元 0.5

根据表2,我们可以看出,前几个月中用户变现的疲软表现已经损害到了网店营收指标的总体状况。1月份的同期群首页消费了5美元,然后逐月递减,到第五个月消费0.5美元。不过,随着网站的发展,新客户的首月话费有显著增长,接下来的消费下降趋势也有所缓解:4月份的同期群在首月消费8美元,次月消费7美元。

如果只看表1,网店的发展似乎进入了瓶颈,但经过同期群分析得出,实际上网店正在茁壮成长。而且,我们还明白了值得关注的关键数据:在首月注册消费后,客户消费的递减量。

什么是好的数据指标:

  • 好的数据指标是比较性的。通过比较某数据指标在不同的时间段、用户群体、竞争产品之间的表现,可以更好地洞察产品的实际走向。
  • 好的数据指标是简单易懂的。数据指标需要很容易地记住或讨论某指标。
  • 好的数据指标是一个比率。通过查看比率就可对项目基本状况作出判断。

探索正确数据指标的五点注意:

  • 定性指标与定量指标:定性回答“是什么”,定量回答“是多少”。
  • 虚荣指标与可辅助行动的指标:虚荣指标看上去很美很良好,却不能对项目分析产生丝毫帮助。相反,可付诸行动指标可以帮助选择行动方案,从而指导商业行为。
  • 探索性指标与报告性指标:探索性指标是推测性数据,提供对于未知的洞见,帮助在市场中取得先手优势。报告性指标关注日常数据。
  • 先见性指标与后见性指标:先见性指标用于预见未来;后见性指标用于解释过去。

先见性指标可用于预测未来。比如投诉量这个数据指标,如果投诉量增加,很有可能更多的客户会停用你的产品或服务,作为一个先见性指标,客户投诉还能帮你深入了解产品和服务的真实状况,分析投诉量上升的原因,然后解决问题。

后见性指标能提示问题的存在。比如用户流失,不过等到你有机会收集数据,找出问题,往往为时已晚,已流失的用户不会再回头,但是可以通过分析问题避免新的流失。

  • 相关性指标与因果性指标:如果两个指标总是一同变化,则说明它们是相关的;如果一个指标可导致另一个指标的变化,则说明它们是因果关系。

发现相关性可以帮助你预测未来,而发现因果关系意味着你可以改变未来。但仅仅关注单一的关联而不追溯因果关系会导致错误的决定。

举个例子——在加拿大,冬季轮胎的使用率和交通事故的减少量是一对相关数据。人们会在寒冷的冬季换上更软的冬季轮胎,而夏天是交通事故的高发季。这是否意味着我们应该要求加拿大的司机一年司机都装着冬季轮胎?当然不是,因为软轮胎在夏天的刹车性能很差,会导致事故量增加。所以,冬季轮胎的使用率和交通事故的减少量之间的相关性,可以帮助我们预测未来,但是对于决策的价值则有限。

在加拿大夏天交通事故增加的例子中,酒精消费量、新手司机数量、白昼变长和暑假等因素与交通事故增加具有一定的因果关系。通过对因果关系的分析,确定调整策略。

相关性很好,因果性更佳。有时候,你只能找到一些相关性,但你永不应停止寻找因果性

数据分析框架:

阿什·莫瑞亚的精益创业画布

模块 相关指标
问题 调查对象中具有该需求的人数,知道自己具有该需求的人数
解决方案 调查对象中试用了最小可行化产品的人数、用户参与度、流失率、最常被使用的/最不常被使用的功能、愿意付费使用的人数
独家卖点 用户反馈得分、第三方独立评分、情感分析、客户如何描述你的产品、调查问卷、搜索、调研、以及竞争分析
客户群体分类 在该群体中找到潜在客户的难易程度,独特的搜索关键字,从特定源头导入的精准渠道流量
渠道 每个渠道可导入的销售线索及客户量、病毒式传播系数和病毒传播周期、净推介值、打开率、利润率、点入率、网页排名、消息到达率
门槛优势 调查对象对独特卖点的理解、专利、品牌价值、进入壁垒、新入口的数量、独家“关系”
营收分析 客户终生价值,每个用户平均收入(ARPU),转化率,购物车大小,点入率
成本分析 固定成本,客户获取成本,服务第n名客户的成本,客服成本,关键字广告成本

戴夫·麦克卢尔的“海盗指标”即AARRR模型

AARRR模型:获取用户(Acquisition)、提高活跃度(Activation)、提高留存率(Retention)、获取收入(Revenue)、自传播(Refer)

AARRR模型各指标与对应的KPI:

要素 功用 相关指标
获取用户 通过各种各样的手段博取眼球,无论是免费还是付费的方式 流量、提及量、cpc(每次点击费用)、搜索结果、用户获取成本、点开率
提高活跃度 将获取的“过客”式访客转化为产品的真正参与者 注册人数、注册量、新手教程完成量、至少用过一次产品的人数、订阅量
提高留存率 说服用户再次光临,反复使用,表现出粘性行为 用户参与度、距上次登录的时间、日/月活跃使用量、流失率
获取营收 商业活动的产出(不同的商业模式看中不同的产出,如购买量、广告点击量、内容生产量、订阅量,等等) 客户终生价值,(免费到付费)转化率,平均购物车大小,广告点入营收
自传播 已有用户对潜在用户的病毒式传播及口碑传播 邀请发送量、病毒式传播、病毒传播周期

埃里克·莱斯创业增长三大引擎

黏着式增长引擎、病毒式增长引擎、付费式增长引擎
三种增长引擎与对应的KPI:

增长引擎 功用 相关指标
粘性式增长引擎 让用户成为回头客,并且持续使用你的产品 用户参与度、客户留存率、流失率、使用频率、距离上次登录的时间
病毒式增长模式 让声明传播出去 病毒式传播系数、病毒传播周期、用户完成一次邀请所需的时间、病毒性的类别
付费式增长引擎 付费 客户终生价值(CLV)、客户获取成本(CAC)、客户盈亏平衡时间

客户盈亏平衡时间:你收回获取一位客户的成本所需的时间

肖恩·埃利斯的创业增长金字塔

创业增长金字塔(增长黑客的由来)

规模增长:踩住油门,加速占领新的市场、产品及渠道

理清思路:找到一个可防御的、高壁垒的竞争优势、并进一步巩固

产品与市场相契合:决定你该把什么卖给谁,并证明

第一关键指标(OMTM:One Metric That Matters):

数据是庞杂的,数据的形式可能是无规则、无组织的,甚至有的单一的数据并没有实际的意义。我们日常所做的大部分数据统计工作只是将数据进行统计和存储,以供日后需要所用。

而对于数据分析而言,我们需要聚焦于能够指导实践的数据信息——如你的KPI这些核心数据上进行跟踪和分析。如何让自己保持注意力在产品的核心数据上,让自己在正确的时间树立正确的目标,用正确的方法做正确的事情。第一关键指标(OMTM)就是一个很好的方法。

第一关键指标是书中的重点,第一关键指标就是一个在当前阶段高于一切、需要你集中全部注意力的数字。在问题验证阶段关心客户众生价值并没有什么意义,但当你接近产品与时长契合的时候,它可能就是你的专注点。

在项目进行的不同阶段,我们都可以总结出一个高于一切的数据指标并时刻关注,并通过各种方法来提高这个“第一关键指标”。使用第一关键指标可以在实际工作中解决许多问题:

  • 回答了现阶段最重要的问题
  • 促使你得出初始基线并建立清晰的目标
  • 关注的是整个公司层面的健康
  • 鼓励一种实验文化

依据第一关键指标的理论,引出基本的精益数据分析方法:

  • 按照当前状况选择第一关键指标
  • 找到提升第一关键指标的途径
  • 将产品改善方案进行测试
  • 根据数据反馈结果进行决策

在实际的不同项目与时机情况下,会产生不同的衍生精益数据分析方法,接下来从六种商业模式以及五个创业阶段这两个角度进行了详细的讲解。

六种商业模式下的数据分析

商业模式和创业阶段决定了你所关注的数据指标。

  • 不同的商业模式关注的数据指标是不同的,比如一个电子商务平台和一个UGC平台所关注的数据指标是不同的,电子商务平台更关心购买转化率,UGC平台更关心用户活跃度内容输出的频次。
  • 不同创业阶段公司所关心的数据指标也是不同的。比如在创业早期阶段,更关心的是如何获取用户,让用户使用你的产品;而当获取到一定的用户量并且保持了一定的活跃度后,这个阶段关心的就是营收,如何赚钱。

商业模式

商业模式是什么?商业模式是让人们做你希望他们做并能使你从中获利的事。

为什么要了解商业模式?因为你的赚钱方式决定了你应关注的指标。

我们可以将商业模式归为6大类——电子商务、SaaS、免费移动应用、媒体网站、UGC、双边市场

每类商业模式应关注的指标如下:

电子商务要关注的指标及对应的指标基准

数据指标 指标含义
转化率 访客中发生购买行为的比例
年均购买率 每位买家的平均购买次数
平均购物车大小 弃买率
客户获取成本 获取一位客户所需的平均成本
平均每位客户营收 平均每位客户终其一生在该网站消费的总金额
导入流量最多的关键字 大家都在搜的且与你有关的词汇,同时也有助于了解相邻产品或市场
热门搜索词 既包括能带来营收的词汇,也包括没能带来任何结果的词汇
推荐引擎有效性 买家将推荐商品加入购物车的可能性
病毒性 口碑,以及平均每个访问量带来的分享次数
邮件列表有效性 邮件中链接的点击率,以及招揽回头客的能力

SaaS要关注指标及基准

数据指标 指标含义 基准
眼球 网站吸引访客的效果如何
参与度 有多少访客注册成为了免费版或试用版的用户
黏性 有多少客户真正在使用你的产品
转户率 有多少免费的用户最终成为了付费用户
平均每位客户营收 单位时间内平均每位客户带来的营收
客户获取成本 获取一位付费客户的所需成本
病毒性 客户邀请他人或他人推荐公司产品的可能性以及所需时间
追加销售 是什么促使客户支付更多费用,以及这种情况的发生频率
系统正常运行时间和可靠性 公司会面临多少用户投诉、问题升级或服务争端问题
流失率 单位时间内流失的用户和付费客户人数 早起流失率在5%以下;后期流失率应降到2%以下
终身价值 客户使用产品期间的付费总额

免费移动应用要关注的指标及基准

数据指标 指标含义 基准
下载量 应用的已下载数量 初始应用下载大小达到50M以下来最小化下载流失率
客户获取成本(CAC) 获取以为用户和付费客户的所需成本 为每个付费安装支付0.5美元,为每个正常的自然用户花费2.5美元,但是要确保总体的获取成本低于每用户0.75
应用运行率 有多少下载用户真正开启了该项应用,并注册了账户
活跃用户/玩家比例 DAU/MAU
付费用户率 有多少用户曾支付过费用 对于免费增值模式而言,从免费到付费的转化率要达到2%以上;对于一个有应用内购买项目的移动应用或游戏,要假设有大约1.5%的用户会付款购买
用户平均每月营收(ARPU) 购买和广告的收入总和 指标的好坏与游戏的种类高度相关,但要以APPDAU(每日活跃用户的平均营收)高于0.05美元为底线目标
点击率 在应用商店为应用评分或评论的用户比例 付费应用评分率少于1.5%;免费应用评分率少于1%
病毒性 平均每位用户可以邀请多少新用户
流失率 卸载应用或一定时间段内没有开启过应用的用户比例
客户终生价值 用户在使用期间为公司贡献的营收

媒体网站要关注的指标及基准

数据指标 指标含义 基准
访问与流失率 访客人数及忠诚度
广告库存 可供变现的广告展示次数
广告价格 通过广告展示次数而获得的收入
点击率 真正点击广告的访客比例 多数种类的站内广告会获得0.5%~2%的点击率;如果低于0.08%,你一定犯了可怕的错误
内容与广告间的平衡 实现广告库存与媒体内容的平衡,以最大化网站的总体性能

UCG要关注的指标及基准

数据指标 指标含义 基准
活跃访客数 访客回访频率,以及每次来访的停留时间
内容生成 以某种方式与内容进行互动的访客比例,包括生成内容以及顶/踩行为等
参与度漏斗的变化 网站是否有效地增加了用户参与度
生成内容的价值 内容的商业价值
内容分享和病毒性 内容如何被分享的,分享又是如何有利于网站发展的
消息提醒的有效性 看到推送通知、或其他提醒时,给予回应的用户比例
平均每日网站停留时间 如果访客在你的网站上每天平均花费17分钟,就说明网站用户黏性较好

双边市场要关注的指标及基准

数据指标 指标含义 基准
买卖双方的人数增长 买卖双方的人数增长
库存增长 卖家新增库存的速率,以及商品页面的完整性
索索有效性 买家的搜索内容,以及该内容是否与所建库存相匹配
转化漏斗
评分以及欺诈迹象 买卖双方的相互评分、欺诈迹象以及评论语气
定价指标

精益创业的五大阶段

移情、黏性、病毒性、营收和规模性是精益创业的五大阶段。

对于创业公司而言,所选商业模式以及能够证明假设相当准确的相关证据,要远比商业计划书重要得多。

不同阶段关注的指标不同,如移情阶段需要定性分析黏性阶段关注用户参与度病毒性阶段关注产品传播能力营收阶段关注每位客户营收规模化阶段关注比较不同渠道、地域和营销活动内的高阶指标等。

精益分析阶 含义/主要目标 关键指标
移情 深入目标市场,着手解决人们关心的问题,从而促进消费者愿意为你的商品买单 找到一个人们愿意为之付钱的问题
黏性 黏性来自好的产品。你需要了解自己能否找到已发现问题的解决方案 参与度,以用户与你的交互时间以及回访率等作为衡量标准
病毒性 在保证产品或服务的黏性后,即可开始口碑营销 病毒式传播系数,病毒传播周期
营收 此阶段的重点为营收的最大化和优化 客户收益回报-客户获取成本
规模性 盈利后,公司即可从自身发展模式切换至市场扩张模式 开始关心薪酬、API流量、渠道关系以及竞争力
Directory
  1. 1. 精益数据分析基本方法
    1. 1.1. 基本的分析概念
    2. 1.2. 8个需要提防的虚荣数据指标(模式)
    3. 1.3. 数据测试方法:市场细分、同期群分析、A/B测试和多变量分析
    4. 1.4. 什么是好的数据指标:
    5. 1.5. 探索正确数据指标的五点注意:
    6. 1.6. 数据分析框架:
      1. 1.6.1. 阿什·莫瑞亚的精益创业画布
      2. 1.6.2. 戴夫·麦克卢尔的“海盗指标”即AARRR模型
      3. 1.6.3. 埃里克·莱斯创业增长三大引擎
      4. 1.6.4. 肖恩·埃利斯的创业增长金字塔
    7. 1.7. 第一关键指标(OMTM:One Metric That Matters):
  2. 2. 六种商业模式下的数据分析
    1. 2.1. 商业模式
      1. 2.1.1. 电子商务要关注的指标及对应的指标基准
      2. 2.1.2. SaaS要关注指标及基准
      3. 2.1.3. 免费移动应用要关注的指标及基准
      4. 2.1.4. 媒体网站要关注的指标及基准
      5. 2.1.5. UCG要关注的指标及基准
      6. 2.1.6. 双边市场要关注的指标及基准
    2. 2.2. 精益创业的五大阶段