数据仓库项目管理实践

第1章　商业智能、企业级业务逻辑模型与数据质量　1
1.1　商业智能基本概念　2
1.1.1　我们需要商业智能吗　2
1.1.2　商业智能是什么　2
1.1.3　企业信息价值面面观　4
1.1.4　商业智能都能用来做什么　7
1.1.5　怎样实施一个商业智能项目　11
1.2　企业级业务逻辑模型　15
1.2.1　企业信息流模型(Information Flow Model)　15
1.2.2　企业级业务逻辑模型(Business Logical Model)　18
1.2.3　业务规则与业务规则管理系统(Business Rule)　21
1.2.4　数据描述(Data Profiling)　24
1.3　数据质量基本概念　30
1.3.1　为什么需要修正数据质量　30
1.3.2　数据质量的标准是什么　32
1.3.3　数据质量与IT系统之间的关系　32
1.3.4　怎样度量现有数据的数据质量　38
1.3.5　怎样实施一个数据质量管理项目　44
1.4　要点回顾　54
第2章　N层数据仓库体系结构　55
2.1　需要N层体系结构吗　55
2.2　N层数据仓库体系结构的组成　58
2.2.1　用旅行袋把衣服拿到床上去--缓存区　58
2.2.2　把衣服叠好分类放进旅行箱中--数据采集　61
2.2.3　分类存放衣服的旅行箱--数据仓库　64
2.2.4　旅行箱一面是透明的，可以看到里面的衣服--数据集市和数据查询　71
2.2.5　还需要一个旅行袋--外部数据存储结构　76
2.2.6　张小姐的衣服清单--元数据管理　77
2.3　要点回顾　79
第3章　自主建设模型的数据仓库实施方法　80
3.1　系统整体规划阶段　81
3.1.1　阶段任务综述　81
3.1.2　初步确定系统应用边界　83
3.1.3　初步确定技术应用边界　85
3.1.4　确定项目管理边界　87
3.1.5　整理《系统总体规划说明书》　91
3.1.6　阶段任务总结　91
3.2　业务需求分析阶段　92
3.2.1　阶段任务综述　92
3.2.2　回顾以前的解决方案　94
3.2.3　确定业务需求边界　95
3.2.4　项目实施前期培训　96
3.2.5　编写《业务需求分析说明书》　97
3.2.6　阶段任务总结　97
3.3　软件需求分析阶段　98
3.3.1　阶段任务综述　98
3.3.2　建立用于软件需求分析的测试环境　100
3.3.3　准备需求分析会谈　101
3.3.4　实施第一轮需求分析会议　102
3.3.5　组织第二轮需求分析会议　104
3.3.6　确定数据采集需求　105
3.3.7　实施数据质量评估，制定数据质量标准　107
3.3.8　组织第三轮需求分析会议　108
3.3.9　确定数据仓库管理需求　108
3.3.10　确定元数据管理需求　110
3.3.11　制定用户培训计划　111
3.3.12　整理《软件需求分析说明书》及其附件　111
3.3.13　阶段任务总结　111
3.4　数据仓库系统设计阶段　112
3.4.1　阶段任务综述　112
3.4.2　数据仓库模型设计　114
3.4.3　前端呈现部分概要设计　116
3.4.4　设计手工补录和前端用户安全管理结构　118
3.4.5　数据仓库内数据流向设计　118
3.4.6　数据采集程序概要设计　119
3.4.7　设计数据仓库管理程序　122
3.4.8　设计前端整合界面　122
3.4.9　整理《数据仓库系统设计说明书》　123
3.4.10　阶段任务总结　123
3.5　数据仓库系统开发与测试阶段　124
3.5.1　阶段任务综述　124
3.5.2　建立物理数据仓库　125
3.5.3　开发数据采集和补录程序　125
3.5.4　开发前端呈现程序　127
3.5.5　开发数据仓库管理程序　127
3.5.6　执行系统测试　128
3.5.7　编写用户手册　129
3.5.8　编写《数据仓库数据质量报告》　130
3.5.9　阶段总结和风险评估　130
3.6　数据仓库系统的培训和交付阶段　130
3.6.1　阶段任务综述　130
3.6.2　发布测试完成的数据仓库系统　131
3.6.3　实施数据仓库管理　133
3.6.4　数据仓库用户群培训　134
3.6.5　编写《系统交付文档》及其附件　134
3.6.6　项目阶段评估　134
3.7　项目总体评估阶段　135
3.8　要点回顾　135
第4章　引进外部模型的数据仓库实施方法　137
4.1　项目可行性分析　138
4.1.1　确定本次项目的逻辑目标　139
4.1.2　确定本次项目的分析对象　139
4.1.3　确定和量化数据仓库解决方案的风险和收益　140
4.1.4　编写《项目可行性分析报告》　140
4.2　项目业务需求分析　141
4.2.1　确定系统目标用户群　143
4.2.2　项目前期培训　144
4.2.3　分析现有系统和整体需求　144
4.2.4　召开需求收集会议并确定会议成果　145
4.2.5　确定数据仓库逻辑模型　145
4.2.6　确定项目成功的标准　146
4.2.7　确定整体需求，区分需求的顺序　146
4.2.8　编写《业务需求分析说明书》　146
4.3　确定项目整体解决方案　147
4.3.1　确定现有系统的物理环境　148
4.3.2　确定数据采集管理方法　148
4.3.3　确定系统安全结构　150
4.3.4　建立系统命名标准　150
4.3.5　评估数据仓库初始数据容量　151
4.3.6　确定需要的支持过程和角色　151
4.3.7　制定灾难恢复计划　152
4.3.8　制定数据仓库性能计划　152
4.3.9　确定项目技术实施风险　152
4.3.10　制定《项目实施计划》，编写《整体解决方案》　152
4.4　确定项目软件需求　152
4.4.1　确定数据采集需求　153
4.4.2　确定数据仓库管理需求　158
4.4.3　确定元数据管理需求　160
4.4.4　确定产品交付时的实现方式　162
4.4.5　确定数据仓库逻辑体系　165
4.4.6　编写《软件需求分析说明书》　166
4.5　实施数据仓库设计　166
4.5.1　逻辑数据仓库模型设计　166
4.5.2　物理数据仓库模型设计　169
4.5.3　设计数据仓库模型管理流程　169
4.5.4　DBMVS 设计　169
4.6　数据仓库系统开发与测试　170
4.6.1　建立物理数据仓库　171
4.6.2　开发数据采集程序　172
4.6.3　数据仓库性能调整　175
4.6.4　开发数据仓库元数据管理程序　175
4.6.5　开发数据仓库管理程序　177
4.6.6　开发数据装载程序　178
4.6.7　数据仓库系统功能测试　179
4.6.8　执行系统完整性测试　179
4.6.9　制定用户培训计划　181
4.6.10　特定用户群测试　182
4.6.11　编写系统用户手册　183
4.7　数据仓库系统交付和培训　183
4.7.1　提交数据仓库系统　185
4.7.2　实施数据仓库管理方案　185
4.7.3　数据仓库用户培训　186
4.8　项目总体评估　187
4.9　要点回顾　187
第5章　数据仓库系统项目管理　188
5.1　项目组织和角色分工　188
5.1.1　项目高级管理层组织架构　189
5.1.2　项目组正式成员角色组织架构　191
5.1.3　非项目组正式成员组织架构　194
5.2　项目管理机制　195
5.2.1　项目计划管理机制　195
5.2.2　项目配置管理机制　195
5.2.3　项目变更管理机制与项目风险管理机制　196
5.2.4　项目评审制度　196
第6章　数据仓库项目管理文档　197
6.1　封面和次页　197
6.2　数据仓库系统规划说明书　199
6.2.1　引言　199
6.2.2　项目业务目标　199
6.2.3　项目技术应用范围　200
6.2.4　项目实施方法　201
6.2.5　附件　202
6.3　业务需求说明书　202
6.3.1　引言　202
6.3.2　部门总体需求　202
6.3.3　业务需求模板　203
6.3.4　固定报表表样及其栏位说明　204
6.4　软件需求分析说明书　204
6.4.1　引言　204
6.4.2　项目环境概述　205
6.4.3　软件需求描述　206
6.4.4　技术需求描述　208
6.4.5　附件　209
6.5　初级数据质量评估报告　209
6.5.1　引言　209
6.5.2　数据源数据质量分析　209
6.5.3　数据源主表数据质量检查报告　210
6.6　数据采集需求说明书　210
6.6.1　引言　210
6.6.2　数据源分析　211
6.6.3　数据仓库环境分析　212
6.6.4　数据采集程序需求分析　213
6.6.5　附件　214
6.7　数据仓库管理需求分析说明书　214
6.7.1　引言　214
6.7.2　数据仓库管理需求　214
6.7.3　数据仓库元数据管理需求　215
6.8　数据采集程序设计说明书　215
6.8.1　引言　215
6.8.2　数据采集程序设计概述　216
6.8.3　数据采集程序设计　217
6.9　数据仓库模型设计说明书　217
6.9.1　引言　217
6.9.2　数据仓库模型设计概述　217
6.9.3　概念模型设计　218
6.9.4　逻辑模型设计　218
6.9.5　物理模型设计　218
6.9.6　附件　219
6.10　OLAP系统设计说明书　219
6.10.1　引言　219
6.10.2　OLAP数据库设计概述　219
6.10.3　共享维度和度量设计　220
6.10.4　分析模型概要设计　220
6.11　数据仓库管理程序使用手册　221
6.11.1　引言　221
6.11.2　数据仓库运行环境说明　222
6.11.3　数据仓库管理系统使用说明书　222
6.11.4　数据仓库逻辑模型维护流程　222
6.11.5　数据仓库系统维护流程　222
6.11.6　数据仓库数据审计及质量管理流程　223
6.12　数据仓库管理程序设计说明书　223
6.12.1　引言　223
6.12.2　数据仓库运行环境概述　223
6.12.3　本项目数据仓库物理优化设计　224
6.12.4　数据仓库管理、监控策略　225
6.12.5　附件　225
6.13　数据仓库数据质量报告　226
6.13.1　引言　226
6.13.2　数据质量评估工作范围　226
6.13.3　数据质量评估结果　227
6.13.4　数据质量监控维护方案　227
6.14　单元测试报告　227
6.14.1　引言　227
6.14.2　测试计划概述　228
6.14.3　测试结果　228
6.15　手工补录数据设计说明书　228
6.15.1　引言　228
6.15.2　系统概况　229
6.15.3　手工补录需求　229
6.15.4　手工补录数据结构　229
6.15.5　手工补录数据的安全设计　229
6.16　集成测试报告　229
6.16.1　引言　229
6.16.2　测试计划概述　230
6.16.3　测试结果　230
6.17　软件需求变更说明书　230
6.17.1　引言　230
6.17.2　变更内容　231
6.17.3　双方意见　231
6.18　业务需求测试简报　231
6.18.1　引言　231
6.18.2　测试计划概述　232
6.18.3　测试结果　232
6.19　工作总结　232
6.19.1　文件信息　232
6.19.2　本周工作总结　233
6.19.3　下周工作计划　233
6.19.4　本周工作风险汇总　233
6.19.5　项目经理意见　233
6.20　会议纪要　233
6.20.1　会议背景　233
6.20.2　会议计划　233
6.20.3　与会人员　233
6.20.4　会议纪要　233
6.21　培训计划　234
6.21.1　引言　234
6.21.2　培训需求　234
6.21.3　培训计划　234
6.21.4　培训总结　234