发表于2024-11-28
本书适合人群:
本书是一本面向商业数据分析初学者的教材,从具体的商业数据分析案例入手,使读者掌握数据挖掘的目的、理念、思路与分析步骤。本书力图淡化技术,对于方法的介绍也尽量避免涉及过多的数学内容,和高等数学相关的内容只在线形回归和主成分分析这两节中涉及,而且都辅以图形做形象的展现。因此本书的读者只需要具有高中水平的数学基础即可。但是本书强调每种方法的假设、适用条件都与商业数据分析的主题匹配。在教学实践中,我们发现业务经验丰富和有较好商业模式理解的学员,在学习数据挖掘时有更好的效果,主要原因可能是这类学员有较强的思辨能力、分析能力、学习目的性和质量意识,而不是简单地模仿和套用数学公式。
商业智能时代已经全面到来,分析型人才的岗位数量在就业市场中呈现井喷式增长。无论是从事产品研发的工程师,还是从事产品推广的市场人员、人力资源和财务会计人员,都需要掌握数据分析技术,否则很有可能被人工智能替代。
本书包括 18 章,涉及使用 R 语言做数据分析和数据挖掘的主要分析方法。其中,第 1、 2 章为数据分析方法概述,第 3 章为 R 语言编程基础,第 4 章到第 8 章为统计学习方法,第 9 章到第 16 章为数据挖掘方法,第 17 章为特征工程,第 18 章为 R 文本挖掘。每章都根据所涉及的知识点的不同,选取了实用的案例,并为读者准备了相应的练习题。
本书作为 CDA 数据分析师系列丛书中《如虎添翼!数据处理的 SPSS 和 SAS EG 实现(第 2 版)》和《胸有成竹!数据分析的 SPSS 和 SAS EG 进阶(第 2 版)》的姊妹篇,将前两本书的内容进行整合并做了重大拓展,而且秉承了该系列丛书的特点:内容精练、重点突出、示例丰富、语言通俗。可以作为广大从业人员自学商业数据分析的读物,适合大中专院校师生学习和阅读,同时也可以作为高等院校商科、社会科学及相关培训机构的教材。
常国珍,北京大学会计学博士,中国大数据产业生态联盟专家委员会专家委员。主要从事金融、电信行业客户画像,信用与操作风险识别与防范,客户终生价值预测与价值提升等工作。
曾珂,华中师范大学管理科学工程硕士,现为车贷金融产品部产品经理,精通Python与R语言数据挖掘。曾经就职于华为、国家电网等企业。以金融信用与欺诈风险建模、文本分析、数据可视化等为主要研究方向。
朱江,挪威科技大学工学硕士,现为CDA数据分析研究院课程开发副总监,CDA数据挖掘竞赛的评委。精通R与SAS语言数据挖掘,从事电商与互联网数据分析的教学工作。研究方向为电商推荐系统开发、数据可视化、客户特征提取和客户行为模式发现。
第1 章 商业数据分析基础
1.1 商业数据分析的本质
1.2 商业数据分析中心的建设
第2 章 数据分析的武器库
2.1 数据挖掘简介
2.2 R 语言简介
2.3 R 与RStudio 的下载和安装
2.4 在RStudio 中安装包
2.5 练习题
第3 章 R 语言编程
3.1 R 的基本数据类型
3.2 R 的基本数据结构
3.3 R 的程序控制
3.4 R 的函数
3.5 R 的日期与时间数据类型
3.6 在R 中读写数据
3.7 练习题
第4 章 R 描述性统计分析与绘图
4.1 描述性统计分析
4.2 制图的步骤
4.3 R 基础绘图包
4.4 ggplot2 绘图
4.5 练习题
第5 章 数据整合和数据清洗
5.1 数据整合
5.2 R 中的高级数据整合
5.3 R 中的抽样
5.4 R 的数据清洗
5.5 练习题
第6 章 统计推断基础
6.1 基本的统计学概念
6.2 假设检验与单样本t 检验
6.3 双样本t 检验
6.4 方差分析(分类变量和连续变量关系检验)
6.5 相关分析(两连续变量关系检验)
6.6 卡方检验(二分类变量关系检验)
6.7 练习题
第7 章 客户价值预测:线性回归模型与诊断
7.1 相关性分析
7.2 线性回归
7.3 线性回归诊断
7.4 正则化方法
7.5 练习题
第8 章 Logistic 回归构建初始信用评级
8.1 Logistic 回归的相关关系分析
8.2 Logistic 回归模型及实现
8.3 最大熵模型与极大似然法估计
8.4 模型评估
8.5 练习题
第9 章 使用决策树进行信用评级
9.1 决策树建模思路
9.2 决策树算法
9.3 在R 中实现决策树
9.4 组合算法(Ensemble Learning)
9.5 练习题
第10 章 神经网络
10.1 神经元模型
10.2 人工神经网络模型
10.3 单层感知器
10.4 BP 神经网络
10.5 RBF 神经网络
10.6 神经网络设计与R 代码实现
10.7 练习题
第11 章 分类器入门:最近邻域与贝叶斯网络
11.1 分类器的概念
11.2 KNN 算法
11.3 朴素贝叶斯
11.4 贝叶斯网络
11.5 练习题
第12 章 高级分类器:支持向量机
12.1 线性可分与线性不可分
12.2 线性可分支持向量机
12.3 线性支持向量机
12.4 非线性支持向量机
12.5 R 中的支持向量机
12.6 练习题
第13 章 连续变量的维度归约
13.1 维度归约方法概述
13.2 主成分分析
13.3 因子分析
13.4 奇异值分解
13.5 对应分析和多维尺度分析
13.6 练习题
第14 章 聚类
14.1 聚类分析概述
14.2 聚类算法逻辑
14.3 层次聚类
14.4 k-means 聚类
14.5 基于密度的聚类
14.6 聚类模型的评估
14.7 高斯混合模型(Gaussian Mixture Model)
14.8 客户分群
14.9 练习题
第15 章 关联规则与推荐算法
15.1 长尾理论
15.2 关联规则
15.3 序贯模型
15.4 推荐算法与推荐系统
15.5 练习题
第16 章 时间序列建模
16.1 认识时间序列
16.2 简单时间序列分析
16.3 平稳时间序列分析ARMA 模型
16.4 非平稳时间序列分析ARIMA 模型
第17 章 特征工程(Feature Engineering)(博文视点官方网站下载)
17.1 特征工程概述
17.2 数据预处理(Data Preprocessing)
17.3 特征构造(Feature Construction)
17.4 特征抽取(Feature Extraction)
17.5 特征选择(Feature Selection)
第18 章 R 文本挖掘(博文视点官方网站下载)
18.1 文本挖掘
18.2 文本清洗
18.3 中文分词与文档模型
18.4 文本的特征选择及相关性度量
18.5 文本分类
18.6 主题模型
18.7 综合案例
附录A 数据说明(博文视点官方网站下载)
2.1.4预测性数据挖掘算法模型示例
下面对预测性数据挖掘算法的实际应用做简要的介绍。
1.决策树
如图 2-7 所示的两个树状图展现了不同时代女性相亲的决策行为。同样是相亲, 20 世纪 70 年代的大部分女性依次看重职业、出身和才艺。其中首要决定性变量为职业,如果是军人就可以,如果不是则考虑该男性的出身,如果是“黑五类”便不考虑,相反高干出身则可以。如果都不满足则根据该男性是否有才艺进行选择;而当代大部分女性首要看重的是长相,其他考虑因素依次为专业、年龄差和星座,同意与否都根据相应变量的取值而定。决策树算法模拟了上述的决策行为,按照这些要求,可以对候选相亲男性的数据进行分类预测,然后根据预测结果找出女性心仪的男性。
2. KNN 算法
决策树以女性相亲为例,那么对于一个在婚恋交友网站注册的男性,如何预测该男性的相亲成功率呢?这里使用 KNN 算法(K-NearestNeighor,最邻近算法)进行预测。
这里采用三个变量或属性来描述一个男性,即收入、背景和长相。在已有的数据中,深灰色点代表相亲成功的人,白点代表相亲不成功的人,中间连接线条的黑点代表一个新来的男性, KNN 算法在预测这个新人相亲是否成功时,会找到他和附近的 K 个点,并根据这些点是否相亲成功来设定新人约会成功的概率,比如图 2-8 中黑点与两个深灰色点、一个白点最近,因此该点相亲成功的可能性占 2/3。
KNN 算法属于惰性算法,其特点是不事先建立全局的判别公式或规则。当新数据需要分类时,根据每个样本和原有样本之间的距离,取最近 K 个样本点的众数(Y 为分类变量)或均值(Y 为连续变量)作为新样本的预测值。该预测方法体现了一句中国的老话“近朱者赤,近墨者黑”。
3. Logistic 回归
若每个新注册的男性都要和过去每个男性的相亲经历比较才能预测相亲成功率就太麻烦了,那么有没有一种评分方法,可以根据以前男性相亲成败的数据,创建一种为新人打分的评分机制,再根据分值预测新人是否会约会成功呢?这种评分机制的算法模型是 Logistic 回归。将以往男性相亲是否成功的情况作为标准(打分),分值越高,相亲成功的可能性就越高,这个打分自然和广大女性考虑的重要因素相关,比如收入、长相等因素。
本案例将男生的收入与长相作为自变量,将相亲是否成功作为预测变量,构建 Logistic 回归模型。图 2-9 中白点代表相亲成功,可以看出随着长相与收入的上升,相亲成功的概率越来越高。
这里 Logistic 回归拟合了 P(y=1)的等高线。该值越高,说明相亲成功的概率越高。
4.神经网络
Logistic 回归做出的等高线有可能是不精确的。大家都知道,在相亲决策中,长相和收入不是等比换算的。比如收入很高的男性,只要长相不太差,那么约会成功的可能性非常高;而长相很出色的男性即使收入不高,也会被青睐。为了得到这种精确的预测结果,神经网络被发明和运用。以神经网络为例,该方法不是沿着概率的变化方向做标尺,而是与概率变化方向垂直的方向做划分。如果数据是空间线性可分的,则如图 2-10 左图所示,随机地以一条直线作为模型判断依据。如果数据是空间非线性可分的,则会得到解释因素和结果之间复杂的关系。从图中可以看出,神经网络并不像 Logistic 回归那样对数据进行线性划分,而是对数据进行非线性划分,这也是神经网格的一大特点。
前言
本书有别于其他数据挖掘书籍最大的特点在于参与写作的主要作者均为非理工科背景并具有数据挖掘岗位数年的实际工作经验,且从事 3 年以上的培训工作。这使得本书更贴近实际运用的同时,紧抓初学者的痛点,语言更浅显易懂,操作性更强。当然,这也使得本书在前沿方法的讲解上略显不足。因为一个算法要在商业数据挖掘中得到运用需要大致 3~5 年的时间。所以本书仅适合数据挖掘入门人员使用。而且本系列教材强调追求浅显易懂,只注重运用中是否够用,不关心算法知识的全面性,因此在算法推导过程中降低了难度,不涉及非关键且不易理解的部分。当读者从事数据挖掘 2~3 年后,本书的知识就不能满足其更高的需求了,需要参考内容更深入的书籍,比如更专业的《统计学习方法》、《机器学习》等。
本书按照数据挖掘工程师规范化学习体系而定,对于一名初学者,应该先掌握必要的编程工具、统计理论基础、数据挖掘算法等内容。进而,数据挖掘需要根据业务问题选择合适的方法,按照标准流程,即数据的获取、储存、整理、清洗、归约等一系列数据处理技术,并最终得出果,绘制图表并解读数据,这些内容在本书中进行了详细的讲解和操作分析。本书整体风格是“理论>技术>应用”的一个学习过程,最终目的在于商业业务应用,为欲从事数据挖掘的各界人士提供一个规范化的数据分析师学习体系。
读者对象
本书是一本面向商业数据分析初学者的教材,从具体的商业数据分析案例入手,使读者掌握数
据挖掘的目的、理念、思路与分析步骤。本书力图淡化技术,对于方法的介绍也尽量避免涉及过多的数学内容,和高等数学相关的内容只在线形回归和主成分分析这两节中涉及,而且都辅以图形做形象的展现。因此本书的读者只需要具有高中水平的数学基础即可。但是本书强调每种方法的假设、适用条件都与商业数据分析的主题匹配。在教学实践中,我们发现业务经验丰富和有较好商业模式理解的学员,在学习数据挖掘时有更好的效果,主要原因可能是这类学员有较强的思辨能力、分析能力、学习目的性和质量意识,而不是简单地模仿和套用数学公式。
工具介绍
当前, R 和 Python 等开源软件方兴未艾,但是这类软件学习曲线缓慢,使很多初学者的热情在进入数据分析的核心领域之前就消逝殆尽。商业数据分析的真正目的是为了解决业务的分析需求,构造稳健的数据挖掘模型。数据挖掘产品的质量是通过对分析流程的严格掌控而得以保障的。本书注重实用,直指数据挖掘实施的要点,精选业界使用最广泛的实施方案,为读者节约宝贵的时间。相对于 Python, R 偏向于统计分析、计量经济学和统计内容。 R 不仅在学术研究中拥有广泛的用户基础,而且和 Oracle、 SQL Sever 等数据库软件的结合使其不再受内存的限制,从而在商业上有了一定的用武之地。而且 R 和 Hadoop、 Spark 等大数据分析平台也可以自由连接。
阅读指南
本书包括 18 章,内容涉及使用 R 做数据挖掘的主要分析方法。其中,第 1、 2 章为数据分析方法概述,第 3 章为 R 语言编程基础,第 4 章至第 8 章为统计学习方法,第 9 章至第 16 章为数据挖掘方法,第 17 章为特征工程,第 18 章为 R 文本挖掘。每章都根据涉及的知识点的不同,选取了实用的案例,并为读者准备了相应的思考和练习题。为方便读者学习,本书提供书中案例的源文件下载,请读者进入 CDA 官网(http://cda.cn/view/22045.html)的相应专栏下载数据和源代码。
本书特点
本书作为 CDA 第一本数据挖掘教材,和其他统计软件图书有很大的不同,文体结构新颖,案例贴近实际,讲解深入透彻。这些特点主要表现在以下几方面。
场景式设置
本书对互联网、电商、电信、银行等商业案例进行精心归纳,提炼出各类数据分析的运用场景,方便读者查找与实际工作相似的问题。
开创式结构
本书案例中的“解决方案”环节是对问题的解决思路的解说,结合“操作方法”环节中的步骤让读者更容易理解。“原理分析”环节则主要解释所使用代码的工作原理或者详细解释思路。“知识扩展”环节是对与案例相关的知识点的补充,既能拓展读者的视野,同时也有利于理解案例本身的解决思路。
启发式描述
本书注重培养读者解决问题的思路,以最朴实的思维方式结合启发式的描述,帮助读者发现、总结和运用规律,从而启发读者快速地找出解决问题的方法。
学习方法
俗话说,“打把势全凭架势,像不像,三分样”。只有熟悉数据挖掘的流程,才能实现从模仿到
灵活运用的提升。在产品质量管理方面,对流程的掌控是成功的关键,在数据挖掘过程中,流程同样是重中之重。数据挖掘是一个先后衔接的过程,一个步骤的失误会带来完全错误的结果。一个数据挖掘的流程大致包括抽样、数据清洗、数据转换、建模和模型评估这几个步骤。如果抽样中的取数逻辑不正确,就有可能使因果关系倒置,因而得到完全相反的结论。如果数据转换方法选择不正确,模型就难以得到预期的结果。而且,数据分析是一个反复试错的过程,每一步都要求有详细的记录和操作说明,否则数据挖掘人员很可能迷失方向。学习数据挖掘最好的方法就是动手做一遍,本书语言通俗但高度凝炼,很少有公式,以避免读者麻痹大意。本书按照相关商业数据分析主题提供了相应的练习数据,同时提供相关方面的参考资料,供读者学习。
用商业案例学R语言数据挖掘 下载 mobi pdf epub txt 电子书 格式 2024
用商业案例学R语言数据挖掘 下载 mobi epub pdf 电子书老京东了,很多东西都在京东买,很值得买买买买
评分质量很好,印刷清晰,物流很快
评分物流很快,包装很完整,快递小哥人很好,书也不错!
评分包装很好,里三层,外三层,质量也不错,挺重的
评分我们都是一个人的生活方式是什么时候回来呀,我们的生活方式是
评分还没消化,难度较大,得需要时间详细了解。
评分京东的送货速度很快,这三本书,循序渐进,由浅入深地介绍了数据分析师所需的知识与技能,通过学习,可以掌握用EXCEL,SPSS,SAS进行数据分析,感觉很棒,可惜没有配套的视频!支持人大经管之家,支持京东!
评分京东活动很给力,划算啊。书没毛病。
评分很不错的书 适合进阶选手选看 点个赞 希望这个系列多出一些好书
用商业案例学R语言数据挖掘 mobi epub pdf txt 电子书 格式下载 2024