软件自动化测试框架设计与实践

第一篇 初级篇——认识自动化测试框架
第1章 将降大任——自动化测试 1
1.1 软件测试面临的困境与迷局 2
1.1.1 软件质量困境 2
1.1.2 软件成本困境 6
1.2 “时势造英雄”——软件测试自动化的异军突起 8
1.2.1 软件自动化测试如何代替手工测试 8
1.2.2 推动软件自动化测试的源动力 12
第2章 “神话”破灭——自动化测试能否担当大任 16
2.1 企业自动化测试实施的情景 17
2.1.1 自动化测试实施背景介绍 17
2.1.2 自动化测试实施场景回放 17
2.2 自动化测试的“神话”破灭 20
2.2.1 昂贵的自动化测试实施成本 20
2.2.2 实际上并不强大的自动化测试脚本 21
2.2.3 自动化测试实施的命门：维护成本 22
第3章 成功之道——如何构建高质量的自动化测试 24
3.1 PERAL模型的实施背景 25
3.2 Purpose：如何建立一个务实明确的自动化测试目标 25
3.2.1 问题1：自动化还是手工测试 26
3.2.2 问题2：如何估算分析自动化测试效益 26
3.2.3 问题3：如何构建高收益成本比自动化测试目标 29
3.3 Evaluation：评估和估算的量化决策指南 37
3.3.1 工具选择定律一：测试界面决定工具类族 38
3.3.2 工具选择定律二：测试项目综合特征确定工具应用方案 41
3.3.3 工具选择实际案例分析 44
3.3.4 总结 47
3.4 Architecture：构建和设计自动化测试 48
3.4.1 自动化测试的最终用户是测试工程师 48
3.4.2 自动化测试的实质是开发一个测试软件 49
3.5 Run and Debug：开发调试 49
3.5.1 高内聚和低耦合的模块实现原则 49
3.5.2 数据驱动原则 53
3.5.3 自动化脚本开发质量优先级 56
3.6 Link with Manual test：自动化测试与手工测试的有效整合 57
3.6.1 自动化测试和手工测试的关系 58
3.6.2 自动化测试与手工测试流程整合 59
3.7 PEARL模型实施成功经验 60
3.7.1 重置目标，长远规划 60
3.7.2 强大的自动化测试框架 61
3.8 总结 62
第4章 组织实施——怎样建立与培养自动化测试团队 63
4.1 测试团队简介 64
4.2 明确自动化测试目标 64
4.2.1 好的目标是自动化测试实施的发动机 64
4.2.2 建立一个高收益并可行的自动化测试实施目标 65
4.3 积极有效的沟通技巧 70
4.3.1 勤汇报，多交流 72
4.3.2 实用为先 74
4.4 培养和建立自动化测试团队 75
4.4.1 手工测试团队的规划 76
4.4.2 自动化测试实施中的团队 78
4.4.3 自动化测试实施后的团队 80
4.5 自动化测试技术储备 81
第二篇 中级篇——自动化测试框架基本原理及实现
第5章 庐山真面目——自动化测试框架 82
5.1 自动化测试框架简介 83
5.2 测试的自动化——以工具为中心 83
5.3 百家争鸣——形形色色的自动化测试框架 85
5.3.1 数据驱动测试框架(The Data-Driven Testing Framework) 85
5.3.2 关键字驱动或表驱动测试框架(The Keyword-Driven or Table-Driven Testing Framework) 89
5.3.3 总结 90
5.4 自动化的测试——测试框架原型 91
5.4.1 框架包括的具体技术 91
5.4.2 框架的用户 92
5.4.3 制定和开发框架 93
5.5 测试框架集大成者——无需人工干预的自动化回归测试 93
第6章 实例研究——单元自动化测试框架解决方案 95
6.1 被测对象介绍 96
6.1.1 背景简介 96
6.1.2 单元测试对象URLEncoder. encode函数介绍 97
6.1.3 对URLEncoder.encode的单元测试案例设计 98
6.2 自动化测试框架逐步实施 100
6.2.1 第一步：单元测试自动化 100
6.2.2 第二步：框架——数据驱动 101
6.2.3 第三步：框架——整合开发测试流程 104
6.2.4 第四步：框架(高级)——定义自动化测试管理策略和规范 107
6.3 单元自动化测试框架实施总结 108
第7章 实例研究——基于UI功能的自动化测试框架解决方案 109
7.1 GUI的软件自动化测试原理与技术基础 110
7.1.1 GUI软件测试简介 110
7.1.2 GUI自动化测试原理与实例演示 114
7.1.3 在构建自动化测试框架时的工具因素 124
7.2 基于QTP的功能自动化测试框架原型的搭建 125
7.2.1 QTP工具简介 125
7.2.2 自动化测试框架预期功能目标 126
7.2.3 自动化测试框架的实现 127
第三篇 高级篇——自动化测试框架案例实战
第8章 自动化测试框架实例——Automation Center(AC) 142
8.1 产品测试案例分析 143
8.1.1 被测软件产品介绍——某大型分布式企业协同组件介绍 143
8.1.2 软件产品测试需求分析 144
8.1.3 测试需求矩阵分析 146
8.1.4 全球化测试需求分析 149
8.2 测试中应用AC的效益分析 153
8.2.1 预期成本计算 154
8.2.2 预期收益计算 154
8.2.3 预期收益比 155
8.2.4 AC实施过程规划 155
8.3 AC框架中脚本开发规范 156
8.3.1 自动化测试中的规范 156
8.3.2 规范应该考虑的因素 157
8.3.3 有效地推行自动化测试规范 159
8.3.4 AC中QTP脚本规范实例 159
8.4 AC框架测试报告格式及规范 163
8.4.1 总览报告 163
8.4.2 细分报告 164
8.4.3 AC测试报告总结 169
8.5 AC框架中客户端自动化测试解决方案 171
8.5.1 AC中QTP Agent介绍 171
8.5.2 “一次编码，多语言运行”的QTP脚本开发思想及实现 172
8.5.3 AC中QTP Agent在企业内部环境的部署 178
8.5.4 AC中QTP Agent收益 183
8.6 AC中安装自动化解决方案 185
8.6.1 Windows下软件安装：默认式安装与交互式安装 185
8.6.2 Linux下软件安装：文本模式与图形化模式 192
8.7 AC中自动化管理与控制平台 199
8.7.1 AC拓扑结构设计 199
8.7.2 AC的工作协作图 202
8.7.3 AC工作流程图 203
8.8 AC应用经验 205
8.8.1 明确而务实的需求 205
8.8.2 有效的人员培训 205
8.8.3 敏捷高效的反馈机制 206
8.9 AC开发技术实例 206
8.9.1 基于事务(transaction)机制的测试案例状态栈的实现 206
8.9.2 测试案例状态轮询Java实现 207
8.9.3 AC与Agent协议原语 208
第9章 开发高质量测试脚本 210
9.1 案例1：脚本开始处首先进行环境检查 211
9.2 案例2：函数入口检查 213
9.3 案例3：使用正则表达式处理字符串 214
9.4 案例4：脚本健壮性出错处理 219
9.5 案例5：测试脚本中参数变量的规范命名 222
9.6 案例6：内存的利用和回收 225
9.7 案例7：数据驱动 228
附录 与自动化测试实施人员的对话实录 232