1、 XX系统测试总结报告 1 引言 1.1 编写目的 编写该测试总结报告主要有以下几个目的 1 通过对测试结果的分析，得到对软件质量的评价 2 分析测试的过程，产品，资源，信息，为以后制定测试计划提供参考 3 评估测试测试执行和测试计划是否符合 4 分析系统存在的缺陷，为修复和预防bug提供建议 1.2 背景 1.3 用户群 主要读者：XX项目管理人员，XX项目测试经理 其他读者：XX项目相关人员。 1.4 定义 严重bug：出现以下缺陷，测试定义为严重bug 系统无响应，处于死机状态，需要其他人工修复系统才可复原。 点击某个菜单后出现“The page cannot be displayed
2、”或者返回异常错误。 进行某个操作（增加、修改、删除等）后，出现“The page cannot be displayed” 或者返回异常错误 当对必填字段进行校验时，未输入必输字段，出现“The page cannot be displayed” 或者返回异常错误 系统定义不能重复的字段输入重复数据后，出现“The page cannot be displayed” 或者返回异常错误 1.5 测试对象 略 1.6 测试阶段 系统测试 1.7 测试工具 Bugzilla缺陷管理系统 1.8 参考资料 XX需求和设计说明书 XX数据字典 XX后台管理系统测试计划 XX后台管理系统测试用例 XX
3、项目计划 2 测试概要 XX后台管理系统测试从2007年7月2日开始到2007年8月10日结束，共持续39天，测试功能点174个，执行2385个测试用例，平均每个功能点执行测试用例13.7个，测试共发现427个bug，其中严重级别的bug68个，无效bug44个，平均每个测试功能点2.2个bug。 XX总共发布11个测试版本，其中 B1B5为计划内迭代开发版本（针对项目计划的基线标识），B6B8 为回归测试版本。计划内测试版本，B1B4 测试进度依照项目计划时间准时完成测试并提交报告，其中 B4版本推迟一天发布版本，测试通过增加一个人日，准时完成测试。B5版本推迟发布2天，测试增加2个人日，准
4、时完成测试。 B6B11为计划外回归测试版本，测试增加5个工作人日的资源，准时完成测试。 XX测试通过Bugzilla缺陷管理工具进行缺陷跟踪管理，B1B4测试阶段都有详细的bug分析表和阶段测试报告。 2.1 进度回顾 版本/时间 计划开始时间 实际开始时间 计划完成时间 实际完成时间 加班 增加资源 B1 2007.7.2 2007.7.2 2007.7.5 2007.7.5 否 否 B2 2007.7.16 2007.7.16 2007.7.19 2007.7.19 否 否 B3 2007.7.23 2007.7.23 2007.7.25 2007.7.24 否 2个人日 B4 2007
5、.7.28 2007.7.29 2007.7.31 2007.7.31 1个人1天 2个人日 1个人2天 B5 2007.8.1 2007.8.2 2007.8.6 2007.8.3 否 2个人日 B6 2007.8.4 2007.8.4 2个人1天 2个人日 B7 2007.8.5 2007.8.5 1个人1天 1个人日 B8 B9 2007.8.9 2007.8.9 2007.8.10 2007.8.10 否 2个人日 B10 合计 1个人6天 11个人日 2.2 测试执行 此次测试严格按照项目计划和测试计划执行，按时完成了测试计划规定的测试对象的测试。针对测试计划规定的测试策略，在测试
6、执行中都有体现，在测试执行过程中，依据测试计划和测试用例，对系统进行了完整的测试 2.3 测试用例 2.3.1 功能性 系统实现的主要功能，包括查询，添加，修改，删除。 系统实现的次要功能，包括为用户分配酒店，为用户分配权限，渠道酒店绑定，渠道RATE绑定，权限控制菜单按钮。 需求规定的输入输出字段，以及需求规定的输入限制 2.3.2 易用性 操作按钮提示信息正确性，一致性，可理解性 限制条件提示信息正确性，一致性，可理解性 必填项标识 输入方式可理解性 中文界面下数据语言与界面语言的一致性 3 测试环境 3.1.1 软硬件环境 硬件环境 应用服务器 数据库服务器 客户端 硬件配置 CPU：
7、Intel(R) Celeron(R) CPU 2.40GHz stepping 01 Memory： 1048256k HD：ST380817AS 80G SATA CPU ： Intel(R) Celeron(R) CPU 2.40GHz stepping 01 Memory： 1048256k HD：ST380817AS 80G SATA CPU：Intel(R) Celeron(R) CPU 2.40GHz stepping 01 Memory： 1048256k HD：ST380817AS 80G SATA 软件配置 OS：CentOS 4.2 JDK 1.5.0_06 Apache
8、 2.2.0 Tomcat 5.5.15 OS：CentOS 4.2 MySQL 5.0.17 Linux Window 2000 Professional （ SP2 ）IE6.0.2900.2180.xpsp_sp2 网络环境 10M LAN 10M LAN 10M LAN 3.1.2 网络拓扑 以太网应用服务器、数据库服务器 客户端 4 测试结果 4.1 Bug趋势图 此次黑盒测试总共发布11个版本，B1B5为计划内迭代开发版本（针对项目计划的基线标识），B6-B11为进行的回归测试版本，bug版本趋势图如下图所示： 第一阶段，增量确认测试。 时间从2007年7月2日到2007年8月3日
9、。从Bug趋势图中可以看出，每个版本的bug数基本维持在60个左右。 B1：从图中看到B1共有33个BUG，因为B1版本有一个功能模块在B2版本才开始测试，B1测试模块相对较少，所以B1版本bug相对较少。 B2：由于B1中的一个功能模块增加到Build 2中进行测试，这一版本除了对B1中的BUG进行验证同时对B1进行了回归测试，所以B2中的bug数相对B1出现了明显的增长趋势， B3：B3 版本因为有 B2 版本的 bug验收测试，以及B1,B2 的回归测试，共发现 67 个bug，和B2基本保持一致。 B4：B4 版本 bug 数有一个下降的趋势，是因为 B4版本推迟发布，新增加了测试人员
10、参与测试，对系统不够熟悉，以及测试时间紧张，部分测试用例没有执行，测试覆盖度不够， 所以发现bug数呈下降趋势。 B5：B5版本bug数又有一个增加的趋势，主要是由于开发功能模块多，该版本需求定义不明确。 第二阶段，BUG验证和功能回归确认测试。 时间从2007年8月4日到2007年8月14日。B6和 B7进行了回归测试，B8没有进行回归测试，只验证了B1B7的bug。 B6 ：进行第一轮回归测试，发现的 bug 数为 33 个，遗留一个问题，为数据字典种类默认值问题 B7 ：进行第二轮回归测试，第一次回归测试没有涉及到权限控制菜单按钮的测试，在本次回归测试的时候，重点进行了这个方面的测试，又
11、发现了大量的权限相关的bug。 B8 ：B8没有进行全面的回归测试，只验证了B1B7未通过验证的bug，所以该版本的bug数明显比较少。 B9 ：B9 版本进行了全面的回归测试，同时重点测试了权限控制，所以发先的 bug 数又呈现上升的趋势。测试发现44个bug，严重级别的bug为14个，严重级别的bug集中在权限控制上，功能性严重bug没有发现，说明权限控制依旧不稳定，但是系统功能已经稳定。 B10：B10版本验证了B9版本发现得bug，没有进行全面的回归测试。B10版本在验证bug的时候，重现打开Bug6个，新增bug2个，重新打开bug有5个为严重级别bug，是关于权限控制的bug，而新
12、发现的bug，1个为严重级别的bug，也是属于权限控制的。说明，权限控制还存在着问题，需要修改权限管理bug，重新发布版本后进行全面的回归测试。B10版本新发现的bug详细分析见遗留bug分析。 B11：B11中验证了B1B10未验证的bug，重点测试了权限控制，同时进行了查询，添加，删除，修改的功能测试，测试过程中未发现bug。 4.2 Bug严重程度 测试发现的bug主要集中在normal和minor 阶段，属于一般性的缺陷，但是测试的时候，出现了68个严重级别的bug，出现严重级别的bug主要表现在以下几个方面 系统主要功能没有实现 添加数据代码重复后，出现的找不到页面的错误 多语言处
13、理，未考虑非语种代码的情况 数据库设计未考虑系统管理员角色，导致用系统管理员进行操作的时候出现找不到页面错误 权限控制异常 严重级别bug按版本分布如下： 由严重bug版本分布图可以看出，严重级别的bug版本趋势和bug版本趋势基本是一致的，但是，在B7和B9版本中年，严重级别的bug明显增多，主要原因是B7和B9版本测试了权限控制按钮功能，权限问题出现的严重级别的bug比较多。 权限bug主要表现： 具有相应按钮操作的权限，页面无相应按钮，无法执行该功能 无相应按钮操作权限，页面有相应按钮，点击按钮能出现权限异常错误 有相应按钮操作权限，有相应按钮，执行该功能出现权限异常错误 4.3 Bug引入阶段 由上图可以看出，主要为前台编码和页面设计方面的bug，占到了全部bug的2/3。 4.4 Bug引入原因 由上图可以看出，主要为前台编码和易用性方面的bug，占到了全部bug的2/3。
