什么是顶级的数据分析方法?

大数据 数据分析
数据分析的方法是非常多的。但为什么很多同学感觉自己没用上方法呢?因为每种方法是和业务场景、领导风格、数据质量、息息相关的。

经常有同学疑惑:

“什么是顶级的数据分析方法”

“面试的时候,被人问:用过什么方法,怎么回答好?”

“为什么我讲的分析方法,会被人嫌弃简单?”

今天系统盘点下数据分析方法,大家也好对号入座,看看自己讲的水平如何。

首先,并不是名字带“分析”俩字的,就是数据分析方法。有很多XX分析,是统计学、运筹学、数学的专业工具,并不直接指向业务问题的答案。当人们在问:“有什么分析方法”的时候,更多期望听到一个能给出结论的方法。

所以想回答好这个问题,要回到:数据分析到底解决哪些业务问题上去。

从业务用途上看,数据分析可以解决5大类问题

1、是多少(数据描述状况)

2、是什么(树立数据标准)

3、为什么(探索问题原因)

4、会怎样(预测业务走势)

5、又如何(综合判断状况)

围绕每个问题场景,有特定的方法组合(如下图)

             

图片图片

              

一、解决“是多少”的方法

用数据描述状况,需要建立完善的数据指标体系。建立数据指标体系,则需要梳理清楚数据指标之间的逻辑。数据指标间有两种基本的逻辑:串行逻辑和并行逻辑,因此衍生出两种基本的分析方法:漏斗分析法&指标拆解法。

图片图片

拆解的业务多了,人们发现,某些数据指标可以固定的组合使用,比如:

用户运营场景:AARRR指标、RFM指标

零售门店场景:人、货、场指标

商品管理场景:进、销、存指标

这些也习惯性被称为:分析模型。但注意,这些都只是在展示数据。数据+判断标准,才有分析结论。有关判断标准的分析,就是:是什么类问题。

二、解决“是什么”问题的方法

判断标准可以很简单,比如领导的指令、KPI要求、过往同期数据,都能作为标准。这些统称为:简单标准。但很多时候,指标走势是否正常,并无明确的KPI约束,甚至KPI达标,但是走势奇特,领导们还是会觉得有问题。这时候就需要找其他参照物。因此衍生出一系列分析方法。

比如:

与业务自身规律比较,判断好坏:生命周期法、自然周期法

与同类型,同期发展的业务比较:同期群分析法

与其他业务个体进行比较:分层分析法

这样对比,即使只有1个数据指标,也能得出好坏判断。如果业务发展违背过往规律,明显比其他个体更差,则可以判定为:不好。

图片图片

当然,也可以使用2个指标,比如经典的矩阵分析法,通过两指标交叉+两指标平均值,分出四类业务,从而得出好坏判断。

图片图片

如果用更多指标也行,比如常用的Kmean聚类,可以先利用多个指标对业务个体聚类,之后再看各类型之间表现优劣。

以上这些方法,都能将业务的好/坏区分出来,从而在一定程度上辅助判断。

三、解决“为什么”问题的方法

“分析下这个问题是什么原因导致的……”是常见的要求,这就是“为什么”问题。解决为什么问题,有两大基本思路:

一:结果推断:问题发生后,用各种数据寻找差异,建立假设。

常见的,比如:

结构分析法:通过结构分析,找到问题发生点

标签分析法:通过打标签,做个体对比,找到问题原因

相关分析法:通过计算指标相关关系,找到相关指标,再形成假设

MECE法:讲多个业务假设,按MECE原则合并成分析逻辑,一一验证

结果推断,可以把业务口中“我觉得这是XX原因”,抽象成一个数据可验证的假设,因此适用范围非常广。但结果推断只是单方面从结果做归纳,有可能有偏颇,还需要实验验证。

图片图片

二:实验推断:先有假设,然后通过实验/分组对比,验证假设。常见的方法,包括ABtest、DID、PSM、RDD、Uplift等方法。

这些方法更接近传统统计学的实验,大部分都要求:

1、开展数据实验,验证假设

2、设参照组/实验组,且参照组/实验组特征相似

3、区分控制变量、环境变量,重点测控制变量的影响

实验推断有统计学依据,计算过程复杂,看起来更量化一些。但是对实验条件要求太高,比如大促销类ALL in的业务,比如商品、店铺这些无法控制环境的业务场景,比如业务员行为、内容传播等难采集数据的领域,都很难用。

理想的状态,肯定是两者结合,事实-假设-验证,不断循环,接近真相。但现实中有很多条件制约。导致我们只能从一个角度切入,慢慢靠近真相。

四、解决“会怎样”问题的方法

预测类问题,是所有人都感兴趣的话题,也是统计学/算法最有可能发挥作用的地方。唯一限制方法使用的,是:到底有多少数据&业务人员要不要参与。

如果业务人员坚持参与预测过程,就只能用业务假设法或者滚动预测法,这些方法把影响结果的参数都列出来,方便业务人员拍脑袋,也能帮他们清晰:我要做多少。

图片图片

如果业务人员不参与,则视数据量的多少。数据少,则使用时间序列预测,数据多,且有影响结果的原因数据,则可以用诸如回归模型一类算法预测。

图片图片

五、解决“又如何”问题的方法

综合评估与分配问题,统称“又如何”问题。这是决策的最后一步,决定是否对业务做动作,做多大动作。有些简单的评估是很容易的,比如销售签了生死状,达不成业绩目标就炒鱿鱼。

但大部分情况,评估很复杂,要考虑方方面面。这里最大的区别,在于要不要考虑领导的主观意见。如果要,果断使用主观评分法!满足领导的打分欲是第一位的。如果不要,再考虑使用有监督的机器学习算法,或者因子分析法,DEA法(求的是相对效率)等客观方法。

至于:做多少,谁来做。就是更复杂的问题了。想做好分配,得先把前边几步分析做完,对每个业务线基础能力有充分认识,才好下判断。这里,线性规划的方法,可以用来做支持。

图片图片

六、为什么感觉没用上方法?

综上可见,数据分析的方法是非常多的。但为什么很多同学感觉自己没用上方法呢?因为每种方法是和业务场景、领导风格、数据质量、息息相关的。

比如因果推断算法大多基于分组测试展开,而实际业务中,很多因果分析是事后再查原因,也不给二次实验的机会。

比如很多公司的分配方案,根本就是领导拍脑袋,一言堂,根本没机会让分析师用算法。

比如预测问题,很多公司根本没有足够数据积累,只有一条销售数据,那撑死了也只能用时间序列法。

这种理想与现实的差距,让很多同学很痛苦。一方面不清楚到底这些方法该如何用,另一方面不了解,自己该如何应对业务需求。面试和工作都很吃力。

责任编辑:武晓燕 来源: 接地气的陈老师
相关推荐

2017-09-28 16:31:02

大数据数据分析漏斗模型

2015-03-04 11:01:36

大数据数据分析分析

2015-07-29 16:19:54

大数据时代分析

2022-05-12 13:44:35

数据分析数据

2017-04-11 09:08:02

数据分析Python

2022-09-16 11:33:40

数据分析MVP

2016-09-30 01:04:45

数据分析数据

2016-09-07 14:41:43

数据分析数据分析方法论

2019-10-14 15:57:36

数据分析多维度二八法

2022-03-29 14:49:14

大数据数据分析

2020-07-16 17:26:05

数据分析转化用户

2020-10-25 08:56:31

数据分析数据大数据

2017-11-29 12:45:37

Apache Spar大数据数据分析

2024-12-09 13:11:22

2022-08-02 11:29:17

数据分析场景RFM

2017-08-08 10:55:03

大数据R语言数据分析

2017-12-13 10:04:05

2022-06-13 08:00:00

数据湖数据仓库大数据

2017-02-27 16:35:00

HDFS大数据分析

2022-09-07 15:47:21

数据分析对比分析大数据
点赞
收藏

51CTO技术栈公众号