“CDA数据分析师系列丛书”依照数据分析师规范化学习体系而定。满足了CDA数据分析师等级认证学习的需要,也兼顾了大数据的热点动态。
从策划之初一直坚持以“读者需求”为主线,结合企业实际案例和业务场景来谈大数据思维和小数据分析。实现技术扎实,业务精通,策略接地气!
《胸有成竹!数据分析的SPSS和SAS EG进阶(第2版)》共5 章,涉及使用SPSS Statistics 和SAS EG 做商业数据分析的主要分析方法。其中,第1章的主要内容为数据分析方法概述;第2 章至第4 章的主要内容为横截面数据分析方法;第5 章的主要内容为时间序列分析方法。每章都根据所涉及的知识点的不同,选取了实用的案例,并为读者准备了相应的思考和练习题。
《胸有成竹!数据分析的SPSS和SAS EG进阶(第2版)》是一本面向商业数据分析初学者的教材,从具体的商业数据分析案例入手,使读者掌握数据分析的目的、理念、思路与分析步骤。本书力图淡化技术,对于方法的介绍也尽量避免涉及过多的数学内容,和高等数学相关的内容只在线形回归和主成分分析这两节中涉及到,而且都辅以图形作形象的展现。因此本书的读者只需要具有高中水平的数学基础即可。
数据分析过程
数据分析的目的是为业务发展答疑解惑。他描述了“过去发生了什么”、“现在正在发生什么”和“未来可能发生什么”。根据分析的级别,分为常规报表、即席查询、多维分析(又称为钻取或者OLAP)、警报、统计分析、预报(或者时间序列预测)、预测型建模(预测性(predictive)模型)和优化
(1)常规报表:常规报表广为人知,它们通常按照一定的周期产生,对过去一段时间、一定范围内所发生的事实进行记录。它们对了解业务现状非常有用,但是却无法据此进行长期决策。标准报表主要用于回答“发生了什么”和“什么时候发生”这样的问题。典型的标准报表包括月度或季度的财务报告。
(2)即席查询:即席查询往往通过对一系列数据(组合)的要求来“回答”一些常见的业务问题。即席报表主要用于解决类似“多少”、“频次如何”和“在哪里”这样的问题。记录每种产品每天销量的定制报表就属于即席报表。
(3)多维分析(又称为钻取或者OLAP 技术):OLAP 技术可以帮助了解更多细节信息,它可以帮助客户自己操纵数据,找出诸如“多少”、“什么”和“哪里”之类问题的答案。OLAP 技术主要解决的是“问题出在哪里”和“我如何找到问题的答案”这样的问题。例如,对不同类型的客户通话行为进行排序,找出他们的通话特征就需要运用到OLAP 技术。
(4)警报:当问题发生时你可以通过告警及时获知,并且可以在将来发生类似情况时引起注意。告警可以通过电子邮件、网络频道、记分卡或者仪表盘的形式给出。警报的过程需要确认的是引起注意的触发点,以及一旦报警需要采取什么行动。比如,销售总监在销售情况与销售目标差距大时会收到告警信息。
(5)统计分析:我们可以运行一些更加复杂的分析。例如,方差分析和回归分析等。我们可以
基于数据提出一些假设,然后再利用数据构建统计分析模型来“回答”这些假设是否成立。统计分析解决的问题主要是“行为/事件为什么发生”和“我失去了怎样的机会”。例如,银行希望了解什么样的人,更可能对他们的房子进行转按揭操作,那么他们就会用到统计分析的方法。
(6)预报(或者时间序列预测):它能够帮助建立恰当的库存,防止脱销和积压库存带来的机会流失或额外成本。时间序列预测主要解决的问题是“未来的趋势会怎样”和“如果这样的趋势继续会怎样”。例如,零售商可以根据销售历史,预测未来特定店铺的特定产品的销售量,而这样的预测过程就是时间序列预测。
(7)预测型建模(预测性模型):如果你有1000 万个客户需要做一次直邮,谁最有可能响应?怎样对现有客户进行有效分群?哪些客户最可能流失?预测性模型可以回答这类问题。预测性模型主要关心的是将来可能发生的情况,以及不同的预测情况对业务的影响。例如,商户可以预测客户可能会对哪种产品更有兴趣,以及哪些客户会对特定产品更有兴趣。
(8)优化:优化往往带来创新,它使企业可以在有限资源下实现利润最大化。优化强调的是更好地利用各种资源的途径。例如,在特定资源条件下,如何安排并使利润最大化,就是优化需要解决的问题。
前4 类分析提供了关于以往和当前情况的描述,让业务人员对历史情况有一个深入的认识。但是这往往是不够的,这就像在驾驶的时候只看两边和后视镜,而挡住前面的玻璃,对前面发生的情况一无所知。第5 类到第7 类分析提供了向前看的途径,可以预测未来发展的情况,及早发现问题,做到提前准备。而最后一类分析是在掌握了未来发展状况之后,对业务进行优化,制订最优的决策方案。
从上面介绍中可以看到,数据分析是和业务紧密联系在一起的,其目的就是满足商业决策的需求。这种决策是以事实和数据分析的结果为基础,结合经验和行业的洞察作出决策。在解读和判断数据模型时,需要融入对业务的理解、融入基于经验的灵感,很多时候是无法用单纯的公式或规则来替代人的智慧和艺术灵感的。因此,数据分析是技术与艺术的结合。如果可以量化分析某些问题,那么就去分析,但别忘记加入你的经验、知识和理性的推断。
第1 章数据分析方法概述 1
1.1 数据分析概述.. 2
1.1.1 数据分析过程 2
1.1.2 数据分析的商业驱动 3
1.2 数据分析与挖掘方法分类介绍. 5
1.2.1 描述性——无监督的学习. 7
1.2.2 预测性——有监督的学习.. 10
1.3 数据分析的方法论. 12
1.3.1 数据挖掘的项目管理方法论:CRISP-DM 13
1.3.2 数据整理与建模的方法论:SEMMA .. 14
1.3.3 SAS EG 和SPSS 任务菜单编排与SEMMA 之间的关系. 16
第2 章描述数据特征.. 19
2.1 认识数据类型 20
2.2 单变量描述统计方法 21
2.2.1 分类变量的描述 21
2.2.2 连续变量的描述 22
2.3 创建频数报表 35
2.4 生成汇总统计量.. 38
2.5 用汇总表任务生成汇总报表 41
2.6 绘制条形图. 46
2.7 绘制地图.. 53
2.8 使用SPSS 进行描述统计.. 55
2.8.1 频率过程.. 56
2.8.2 描述过程.. 57
2.8.3 探索过程.. 58
2.8.4 P-P 图与Q-Q 图 58
2.9 使用SPSS 绘制统计图形.. 60
2.9.1 作图方法.. 60
2.9.2 饼图、柱图与条图.. 64
2.9.3 线图、高低图和双轴图 70
2.9.4 散点图 73
第3 章描述性数据分析/挖掘方法. 75
3.1 客户细分方法介绍. 76
3.1.1 客户细分的意义 76
3.1.2 根据客户利润贡献进行划分. 77
3.1.3 根据个人或公司的生命历程进行划分 78
3.1.4 根据客户的产品偏好进行划分 79
3.1.5 根据客户交易/消费行为进行划分. 80
3.1.6 根据客户的多维行为属性细分 81
3.1.7 展现客户/产品结构的战略细分.. 81
3.1.8 客户细分:综合运用. 82
3.2 连续变量间关系探索与变量约减. 82
3.2.1 多元统计基础. 82
3.2.2 多元变量压缩的思路. 87
3.2.3 主成分分析.. 89
3.2.4 因子分析. 103
3.2.5 对应分析. 112
3.2.6 最优尺度分析.. 119
3.2.7 多维尺度分析.. 124
3.3 聚类分析 133
3.3.1 基本逻辑. 134
3.3.2 系统聚类. 135
3.3.3 快速聚类. 146
3.3.4 两步聚类. 155
第4 章预测性数据分析方法.. 161
4.1 假设检验概念. 162
4.1.1 统计推断基本概念 164
4.1.2 变量分布的图形探索.. 165
4.1.3 均值的置信区间. 167
4.1.4 假设检验基础.. 168
4.1.5 T 检验. 169
4.2 构造对连续变量的预测模型. 174
4.2.1 方差分析(ANOVA) 174
4.2.2 线性回归. 190
4.2.3 线性回归的模型诊断.. 203
4.2.4 线性回归的全流程 211
4.3 构造对二分类变量的预测模型 217
4.3.1 分类变量之间的相关性检验.. 217
4.3.2 逻辑回归. 224
第5 章时间序列.. 240
5.1 时间序列的趋势分解法 241
5.1.1 趋势分解法简介. 241
5.2.2 使用SAS EG 进行时间序列趋势分解.. 242
5.2.3 使用SPSS 进行时间序列趋势分解 244
5.2 平稳时间序列(ARMA)模型设定与识别. 245
5.2.1 平稳时间序列定义 245
5.2.2 平稳时间序列模型建模. 246
5.2.3 ARMA 的模型设定与识别.. 247
5.3 非平稳时间序列(ARIMA)模型设定与识别.. 250
5.4 SAS EG 时间序列建模步骤.. 252
5.5 SPSS 时间序列建模步骤. 258
5.5.1 SPSS 构造ARIMA 模型使用的任务菜单.. 258
5.5.2 “定义日期”任务.. 260
5.5.3 “序列图”任务 261
5.5.4 “自相关”任务 262
5.5.5 “创建模型”任务.. 263
5.5.6 “使用模型”任务.. 267
5.5.7 其他内容. 267
附录A 数据说明.. 271
附录B CDA 数据分析师致力于最好的数据分析人才建设.. 278
参考文献 282