Python数据分析与应用（第2版 微课版）

第 1章　Python数据分析概述　1
任务1．1　认识数据分析　2
1．1．1　掌握数据分析的概念　2
1．1．2　掌握数据分析的流程　3
1．1．3　了解数据分析的应用场景　4
任务1．2　熟悉Python数据分析的工具　6
1．2．1　了解数据分析常用工具　6
1．2．2　了解Python数据分析的优势　7
1．2．3　了解Python数据分析常用库　7
任务1．3　安装Python的Anaconda发行版　9
1．3．1　了解Python的Anaconda发行版　10
1．3．2　在Windows系统中安装Anaconda发行版　10
1．3．3　在Linux系统中安装Anaconda发行版　13
任务1．4　掌握Jupyter Notebook常用功能　15
1．4．1　掌握Jupyter Notebook的基本功能　15
1．4．2　掌握Jupyter Notebook的高级功能　17
小结　20
课后习题　21
第 2章　NumPy数组计算基础　23
任务2．1　掌握NumPy数组对象ndarray　24
2．1．1　创建数组对象　24
2．1．2　生成随机数　30
2．1．3　通过索引访问数组　31
2．1．4　变换数组的形状　33
任务2．2　掌握NumPy矩阵与通用函数　37
2．2．1　创建NumPy矩阵　37
2．2．2　掌握ufunc函数　39
任务2．3　利用NumPy进行统计分析　43
2．3．1　读/写文件　43
2．3．2　使用函数进行简单的统计分析　45
小结　50
实训　50
实训1　使用数组比较运算对超市牛奶价格进行对比　50
实训2　创建6×6的简单数独游戏矩阵　51
课后习题　51
第3章　pandas统计分析基础　53
任务3．1　读/写不同数据源的数据　54
3．1．1　认识pandas库　54
3．1．2　读/写文本文件　54
3．1．3　读/写Excel文件　58
3．1．4　读/写数据库　60
任务3．2　掌握DataFrame的常用操作　62
3．2．1　查看DataFrame的常用属性　63
3．2．2　查、改、增、删DataFrame数据　64
3．2．3　描述分析DataFrame数据　70
任务3．3　转换与处理时间序列数据　73
3．3．1　转换时间字符串为标准时间　73
3．3．2　提取时间序列数据信息　75
3．3．3　加减时间数据　76
任务3．4　使用分组聚合进行组内计算　78
3．4．1　使用groupby()方法拆分数据　78
3．4．2　使用agg()方法聚合数据　80
3．4．3　使用apply()方法聚合数据　82
3．4．4　使用transform()方法聚合数据　83
任务3．5　创建透视表与交叉表　84
3．5．1　使用pivot_table函数创建透视表　85
3．5．2　使用crosstab函数创建交叉表　87
小结　88
实训　89
实训1　读取并查看某地区房屋销售数据的基本信息　89
实训2　提取房屋售出时间信息并描述房屋价格信息　89
实训3　使用分组聚合方法分析房屋销售情况　90
实训4　分析房屋地区、配套房间数和房屋价格的关系　90
课后习题　91
第4章　使用pandas进行数据预处理　93
任务4．1　合并数据　93
4．1．1　堆叠合并数据　94
4．1．2　主键合并数据　97
4．1．3　重叠合并数据　99
任务4．2　清洗数据　100
4．2．1　检测与处理重复值　100
4．2．2　检测与处理缺失值　104
4．2．3　检测与处理异常值　108
任务4．3　标准化数据　110
4．3．1　离差标准化数据　110
4．3．2　标准差标准化数据　111
4．3．3　小数定标标准化数据　111
任务4．4　变换数据　112
4．4．1　哑变量处理类别型数据　112
4．4．2　离散化连续型数据　114
小结　117
实训　117
实训1　合并年龄、平均血糖和中风患者信息数据　117
实训2　删除年龄异常的数据　118
实训3　离散化年龄特征　118
课后习题　119
第5章　Matplotlib、seaborn、pyecharts数据可视化基础　121
任务5．1　掌握Matplotlib基础绘图　122
5．1．1　熟悉pyplot绘图基础语法与常用参数　122
5．1．2　使用Matplotlib绘制进阶图形　128
任务5．2　掌握seaborn基础绘图　137
5．2．1　熟悉seaborn绘图基础　137
5．2．2　使用seaborn绘制基础图形　153
任务5．3　掌握pyecharts基础绘图　162
5．3．1　熟悉pyecharts绘图基础　162
5．3．2　使用pyecharts绘制交互式图形　166
小结　171
实训　172
实训1　分析学生考试成绩特征的分布与分散情况　172
实训2　分析学生考试成绩与各个特征之间的关系　172
实训3　分析各空气质量指数之间的相关关系　173
实训4　绘制交互式基础图形　174
课后习题　174
第6章　使用scikit-learn构建模型　177
任务6．1　使用sklearn转换器处理数据　178
6．1．1　加载datasets模块中的数据集　178
6．1．2　将数据集划分为训练集和测试集　180
6．1．3　使用sklearn转换器进行数据预处理　182
任务6．2　构建并评价聚类模型　184
6．2．1　使用sklearn估计器构建聚类模型　185
6．2．2　评价聚类模型　187
任务6．3　构建并评价分类模型　189
6．3．1　使用sklearn估计器构建分类模型　190
6．3．2　评价分类模型　192
任务6．4　构建并评价回归模型　194
6．4．1　使用sklearn估计器构建线性回归模型　194
6．4．2　评价回归模型　197
小结　198
实训　198
实训1　使用sklearn处理竞标行为数据集　198
实训2　构建基于竞标行为数据集的K-Means聚类模型　199
实训3　构建基于竞标行为数据集的支持向量机分类模型　200
实训4　构建基于竞标行为数据集的回归模型　200
课后习题　200
第7章　竞赛网站用户行为分析　202
任务7．1　了解竞赛网站用户行为分析的背景和方法　203
7．1．1　了解竞赛网站背景　203
7．1．2　认识用户行为分析　204
7．1．3　熟悉竞赛网站用户行为分析的步骤与流程　204
任务7．2　预处理竞赛网站用户访问数据　205
7．2．1　特征值变换　205
7．2．2　用户识别　207
7．2．3　数据清洗　208
7．2．4　网页分类　211
7．2．5　构造特征　213
任务7．3　对竞赛网站用户进行分群　214
7．3．1　了解K-Means聚类算法　214
7．3．2　使用K-Means聚类算法进行用户分群　215
7．3．3　模型应用　217
小结　218
实训　218
实训1　处理某App用户信息数据集　218
实训2　构建与用户使用信息相关的　特征　219
实训3　构建K-Means聚类模型　219
课后习题　219
第8章　企业所得税预测分析　221
任务8．1　了解企业所得税预测的背景与方法　222
8．1．1　分析企业所得税预测背景　222
8．1．2　了解企业所得税预测的方法　223
8．1．3　熟悉企业所得税预测的步骤与流程　224
任务8．2　分析企业所得税数据特征的相关性　224
8．2．1　了解相关性分析　225
8．2．2　计算Pearson相关系数　225
任务8．3　使用Lasso回归选取企业所得税预测的关键特征　227
8．3．1　了解Lasso回归方法　227
8．3．2　选取关键特征　228
任务8．4　使用灰色预测算法和SVR算法构建企业所得税预测模型　229
8．4．1　了解灰色预测算法　230
8．4．2　了解SVR算法　231
8．4．3　预测企业所得税　232
小结　236
实训　236
实训1　处理英雄联盟游戏数据集　236
实训2　构建游戏胜负预测关键特征　237
实训3　构建SVR模型　238
课后习题　238
第9章　餐饮企业客户流失预测　240
任务9．1　了解餐饮企业客户分析需求　241
9．1．1　了解餐饮企业客户流失预测背景　241
9．1．2　认识餐饮企业客户流失预测　243
9．1．3　熟悉餐饮企业客户流失预测的步骤与流程　243
任务9．2　预处理餐饮企业数据　244
9．2．1　数据探索　244
9．2．2　查看重复值　246
9．2．3　处理异常值　246
9．2．4　处理缺失值　247
9．2．5　构建客户流失特征　248
任务9．3　使用决策树算法和支持向量机算法进行餐饮企业客户流失预测　250
9．3．1　了解决策树算法　250
9．3．2　了解支持向量机算法　252
9．3．3　预测餐饮企业客户流失　253
小结　255
实训　256
实训1　预处理尺码信息数据　256
实训2　构建支持向量机分类模型预测客户
服装尺寸　256
课后习题　257
第 10章　基于TipDM大数据挖掘建模平台实现客户流失预测　259
任务10．1　了解平台的相关概念、特点和功能　260
10．1．1　了解平台的界面、访问方式和特点　260
10．1．2　了解“实训库”模块的功能　261
10．1．3　了解“数据连接”模块的功能　261
10．1．4　了解“实训数据”模块的功能　262
10．1．5　了解“我的实训”模块的功能　262
10．1．6　了解“系统算法”模块的功能　263
10．1．7　了解“个人算法”模块的功能　265
任务10．2　使用平台实现客户流失预测　265
10．2．1　掌握使用平台配置客户流失预测案例的步骤和流程　265
10．2．2　数据源配置　266
10．2．3　数据预处理　268
10．2．4　构建模型　273
小结　275
实训　275
实训　预测客户服装尺寸　275
课后习题　276