数据仓库技术与实现

内容简介

　　数据仓库作为近些年来发展迅速的一种新兴技术，它把收集到的数据转变成有意义的可用在分析和报表等应用程序中的信息。并且通过多步进程执行处理和分析，这些进程包括收集数据、净化数据和存储数据等。本书首先详细介绍了数据仓库技术的理论和实现方法，然后详细阐述数据仓库的解决方案。并且通过实例阐述了如何创建、管理和维护数据仓库。全书内容翔实，示例丰富，结构合理，语言简洁，图文并茂。作为一本数据仓库技术的专著，结合实际系统地讲解了数据仓库技术的理论知识。在说明当前常用数据仓库解决方案的基础上，全面分析了微软和SAS两种数据仓库解决方案的具体操作过程。读者对象：作为有效解决数据仓库技术的最佳参考资料，本书主要面向数据仓库和数据库的系统管理人员，以及从事数据仓库系统应用开发的专业人员。对于从事数据仓库技术理论研究的人员，本书提供了研究数据仓库的理论和方法。本书可作为MIS、计算机科学，以及商务等专业的参考书和数据仓库用户及系统管理员的必备手册。

作者简介

暂缺《数据仓库技术与实现》作者简介

图书目录

第一部分  基础篇
第1章  从数据库到数据仓库 3
1.1  数据仓库的由来 4
1.2  数据仓库的定义 5
1.2.1  数据仓库的基本定义 5
1.2.2  数据仓库从数据库进化而来 7
1.2.3  数据仓库与传统数据库的区别 8
1.3  数据仓库的体系化环境 12
1.3.1  数据仓库的结构 12
1.3.2  多层数据仓库的体系结构 14
1.3.3  数据仓库的实现 14
1.4  数据仓库中的数据组织 15
1.4.1  粒度与分割 16
1.4.2  元数据 17
1.4.3  数据概念模型 17
1.4.4  数据仓库的数据组织方式 18
1.4.5  数据仓库的数据追加 19
1.4.6  “维表—事实表”构成的关系型数据仓库 19
1.4.7  OLAP的数据组织 21
1.5  数据仓库的方法论 22
1.5.1  任务和环境的评估 22
1.5.2  需求的收集和分析 22
1.5.3  构造数据仓库 23
1.5.4  数据仓库技术的培训 23
1.5.5  回顾. 总结再发展 24
1.6  数据仓库工程规划 24
1.6.1  工程规划的重要性 24
1.6.2  制定数据仓库工程规划的过程 25
1.6.3  数据仓库工程规划文档的内容 27
1.6.4  数据仓库体系结构 28
1.7  发展阶段 30
1.8  小结 31
第2章  数据仓库的基本组成 33
2.1  元数据 34
2.1.1  概念 34
2.1.2  元数据的管理功能 36
2.1.3  元数据的标准化和商品化 39
2.2  关系数据库 40
2.2.1  创建和维护数据库概述 40
2.2.2  数据库性能优化概述 41
2.3  数据集市 41
2.4  数据源 42
2.5  维度 43
2.5.1  概述 43
2.5.2  维度层次结构 46
2.5.3  维度特征 48
2.5.4  维度类型 49
2.6  级别和成员 51
2.6.1  “全部”级别和全部成员 52
2.6.2  数据成员 53
2.7  度量值 53
2.8  单元 54
2.8.1  计算单元 55
2.9  多维数据集 56
2.9.1  多维数据集结构 57
2.9.2  多维数据集存储 58
2.9.3  多维数据集处理 58
2.9.4  多维数据集类型 58
2.10  分区和聚合 61
2.10.1  分区 61
2.10.2  分区结构 63
2.10.3  分区存储 63
2.10.4  聚合 64
2.11  成员属性 65
2.12  小结 67
第3章  ODS 69
3.1  ODS的由来与定义 70
3.1.1  由来 70
3.1.2  定义 70
3.1.3  与数据仓库的联系与区别 71
3.2  DB―ODS―DW的体系结构 71
3.3  创建ODS 73
3.3.1  ODS数据模式的形成 73
3.3.2  获取并传输数据 73
3.3.3  从DB向ODS转化的实现机制 74
3.4  实例分析 75
3.4.1  问题的提出 75
3.4.2  技术选型 76
3.4.3  基于ODS药品销售的即时OLAP应用设计 76
3.4.4  数据采集 77
3.4.5  系统用户界面的实现 78
3.4.6  系统的体系结构 78
3.5  小结 78
第4章  OLAP系统 81
4.1  概述 82
4.1.1  由来与定义 82
4.1.2  WebOLAP 84
4.1.3  OLAP+数据挖掘 85
4.2  OLAP的多维数据概念 85
4.2.1  维 85
4.2.2  多维性 86
4.3  OLAP的多维数据结构 88
4.3.1  OLAP结构 88
4.3.2  活动数据的存储 90
4.4  OLAP数据的处理方式 91
4.5  多维数据库 91
4.6  OLAP的实现方式 92
4.6.1  实现中的问题及对策 92
4.6.2  实现技术 95
4.7  OLAP和OLTP的区别 97
4.8  OLAP的新发展——OLAM 99
4.8.1  由来 99
4.8.2  体系结构 99
4.8.3  功能特征 100
4.8.4  OLAM领域的主要发展方向 101
4.9  小结 102
第5章  数据挖掘技术概述 103
5.1  概述 104
5.2  数据挖掘的定义 106
5.2.1  商业角度的定义 107
5.2.2  数据挖掘与传统分析方法的区别 107
5.3  数据挖掘过程 108
5.3.1  工作量 109
5.3.2  过程 109
5.3.3  所需人员 110
5.3.4  5A模型 111
5.3.5  数据挖掘过程模型CRISP-DM 112
5.4  数据挖掘的研究内容及其方法 114
5.4.1  概述 114
5.4.2  数据挖掘的任务及其6种模式 120
5.4.3  关联规则挖掘的常用算法 124
5.4.4  决策树方法 128
5.4.5  粗集方法 129
5.5  Web数据挖掘 131
5.5.1  Web数据挖掘的难点 132
5.5.2  发现序列互信息 133
5.5.3  发现互信息规则 134
5.5.4  发现相关主题域 135
5.5.5  检验规则的有效性 136
5.6  数据挖掘方法论 137
5.6.1  Sample──数据取样 137
5.6.2  Explore──数据特征探索. 分析和预处理 138
5.6.3  Modify──问题明确化. 数据调整和技术选择 138
5.6.4  Model──研发模型及发现知识 138
5.6.5  Assess──模型和知识的综合解释和评价 139
5.7  构造和使用数据挖掘模型 139
5.7.1  创建数据挖掘模型 139
5.7.2  编辑数据挖掘模型 141
5.7.3  培训数据挖掘模型 141
5.7.4  查看数据挖掘模型 142
5.7.5  高级数据挖掘模型操作 143
5.8  小结 143
第二部分  工具篇
第6章  MDX 147
6.1  概述 148
6.1.1  维度. 级别. 成员和度量值 148
6.2  基本概念 148
6.2.1  单元. 元组和集合 149
6.2.2  轴维度和切片器维度 150
6.2.3  计算成员 150
6.2.4  用户定义函数 150
6.2.5  PivotTable服务 150
6.3  比较SQL和MDX 150
6.4  基本MDX 151
6.4.1  基本MDX查询 152
6.4.2  成员. 元组和集合 153
6.4.3  轴维度和切片器维度 156
6.4.4  建立多维数据集上下文 158
6.5  高级MDX 158
6.5.1  创建和使用属性值 158
6.5.2  生成MDX中的命名集 163
6.5.3  生成MDX中的计算成员 166
6.5.4  生成MDX中的高速缓存 168
6.5.5  生成MDX中的计算单元 169
6.5.6  在MDX中创建和使用用户定义函数 170
6.5.7  使用回写 172
6.5.8  使用DRILLTHROUGH 检索源数据 174
6.5.9  理解传递次序和求解次序 174
6.6  小结 179
第7章  数据仓库工具和关键技术 181
7.1  OLAP查询分析工具 182
7.1.1  OLAP特征 182
7.1.2  选择OLAP工具 183
7.2  DSS的分析预测工具 185
7.2.1  DSS和IDSS 186
7.2.2  数据仓库和OLAP的决策支持技术 188
7.2.3  综合DSS 191
7.3  数据挖掘系统设计 192
7.3.1  数据挖掘的过程 193
7.3.2  数据挖掘系统的原型框架 196
7.3.3  数据挖掘面临的问题 198
7.3.4  数据挖掘工具的选择标准 199
7.4  数据仓库体系结构的关键问题 201
7.4.1  数据仓库的组成部分 201
7.4.2  数据仓库体系结构中的关键问题 202
7.5  小结 206

第8章  数据仓库实现和解决方案 207
8.1  数据仓库的数据库设计原则 208
8.1.1  简明数据模式的设计 209
8.1.2  保证数据的一致性 211
8.1.3  提高查询处理速度 213
8.1.4  提高数据装载效率 214
8.2  数据仓库总体设计 214
8.2.1  详细设计数据仓库 214
8.2.2  使用数据仓库 221
8.2.3  维护数据仓库 222
8.2.4  实现数据仓库 224
8.3  数据仓库的优化 226
8.3.1  概述 227
8.3.2  优化设计 228
8.3.3  面向超大型数据库和数据仓库的优化 228
8.3.4  实施数据仓库工程注意事项 232
8.4  数据仓库技术的应用和解决方案 233
8.4.1  数据仓库技术的应用 233
8.4.2  数据仓库解决方案 239
8.5  小结 246
第9章  SQL Server 数据仓库解决方案 247
9.1  Microsoft数据仓库解决方案概述 248
9.1.1  Microsoft数据仓库框架 249
9.1.2  Analysis Services 250
9.2  Microsoft数据仓库设计 258
9.2.1  配置数据仓库环境 258
9.2.2  创建多维数据集前准备 259
9.2.3  生成多维数据集 266
9.2.4  处理多维数据集 268
9.3  管理Microsoft数据仓库 272
9.3.1  创建安全角色 272
9.3.2  管理分区 276
9.3.3  增强和改善维度 280
9.3.4  增强和改善多维数据集 282
9.3.5  更新多维数据集和维度 285
9.4  Microsoft数据仓库数据服务 287
9.4.1  备份和还原数据库 287
9.4.2  复制对象 289
9.4.3  导入. 导出和转换数据 290
9.5  小结 294
第三部分  实例篇
第10章  SQL Server数据仓库挖掘技术 297
10.1  创建和使用数据挖掘模型 298
10.1.1  Microsoft数据挖掘模型简介 298
10.1.2  创建数据挖掘模型 300
10.1.3  编辑数据挖掘模型 302
10.1.4  培训数据挖掘模型 302
10.1.5  查看数据挖掘模型 303
10.1.6  高级数据挖掘模型操作 304
10.2  OLAP数据挖掘模型实例 305
10.2.1  创建揭示客户模式的数据挖掘模型 305
10.2.2  读取客户决策树 307
10.2.3  浏览数据挖掘虚拟维度 310
10.3  创建关系数据挖掘模型 314
10.3.1  创建揭示客户模式的数据挖掘模型 314
10.3.2  读取客户决策树 317
10.3.3  浏览相关性网络 320
10.4  数据仓库高级技术 324
10.4.1  Internet连接 325
10.4.2  多维数据集的调度技术 328
10.5  小结 333
第11章  SAS数据仓库解决方案 335
11.1  SAS数据仓库概述 336
11.1.1  SAS数据仓库 337
11.1.2  SAS数据仓库的组成 337
11.1.3  SAS数据仓库的体系结构 339
11.1.4  开发SAS数据仓库 341
11.1.5  SAS的数据仓库产品——SAS/WA 343
11.1.6  SAS数据仓库方法论 345
11.2  SAS数据挖掘技术 347
11.2.1  挖掘策略 347
11.2.2  挖掘的方法论——SEMMA 348
11.2.3  数据挖掘应用实例 350
11.3  SAS工具 351
11.3.1  SAS核心系统 352
11.3.2  深层数据分析 353
11.3.3  客户端应用软件 360
11.3.4  桌面分析软件 362
11.4  SAS数据仓库设计 365
11.4.1  SAS/Warehouse Administrator概述 366
11.4.2  设置数据仓库环境 369
11.4.3  SAS数据操作 373
11.4.4  创建数据仓库 383
11.5  小结 395
第12章  数据仓库和CRM解决方案 397
12.1  CRM解决方案概述 398
12.1.1  CRM系统的组成 400
12.1.2  CRM的发展和目标 404
12.1.3  CRM的核心技术 405
12.1.4  CRM在我国电信企业的应用 406
12.1.5  电信运营商成功实施CRM的案例 407
12.1.6  CRM软件的选型 410
12.2  CRM实施与评价 411
12.2.1  准备工作 411
12.2.2  实施步骤 412
12.2.3  客户关系管理的评价 415
12.3  电信企业的CRM系统解决方案 416
12.3.1  电信企业的营销管理 416
12.3.2  电信企业的销售管理 418
12.3.3  电信企业的服务管理 419
12.4  数据仓库具体实现 420
12.4.1  实施数据仓库并实现数据分析 420
12.4.2  实施数据仓库详细策略 421
12.4.3  利用呼叫中心收集数据 423
12.4.4  电信企业的呼叫中心 424
12.4.5  广东移动实施数据仓库案例分析 427
12.5  小结 429
参考文献 430