2010年软考软件评测师测试工作管理与规范(10)

　　二、测试执行

　　工作效率相关指标

　　执行效率利用测试用例文档页数除于此次系统测试执行的时间总和(不包含用例文档编写时间)。补充指标方法是用例的个数除于此次系统测试的时间总和。用于获得工作中测试人员每小时执行测试的速度。

　　公式：∑测试用例文档页数(页)/∑执行系统测试的有效时间(小时)

　　∑测试用例数(个)/∑执行系统测试的有效时间(小时)

　　参考指标：平均0.53页/小时，1.95个用例/小时。即测试人员每小时执行半页测试用例或者每小时执行2个测试用例。通过横向比较，容易知道那位成员的执行效率较高。注意：执行效率高的不代表测试质量也高，甚至执行效率和测试质量成反比，所以后面工作质量的指标会补充这一部分的偏离。实际结果表明，用例执行效率高的成员，其缺陷发现率往往偏低，考核如果不将此纳入进来也可以将其作为测试改进的一项重要数据进行收集。

　　进度偏离度检查计划时间和实际时间的进度，方法是计划时间差额减去实际时间差额除于实际工时总和，用于考察测试人员进度情况，监控测试是否按照日程进行，是否满足了工程的进度要求。

　　公式：∑(计划开始时间-实际开始时间)+∑(计划结束时间-实际结束时间)/总工时

　　参考指标：15%进度偏离是个相对的指标，可能偏离了20个工作日，但是对于一个长达半年时间的测试而言偏离天数比上整体测试所需天数不足15%，可能偏离了3个工作日，但是对于一个只有1星期时间的测试已经超过了整个测试阶段所需天数的60%。

　　注意：计算时分子分母要保持一致，即开始或结束时间已经去除了非工作日时间，则总工时也要去除非工作日时间。因为制定计划时是根据每个公司的工作日来制定的，也就是说，考虑了非正常工作日的日程。

　　测试进度也是考核很重要的一步，如果没有进度保证，所有的测试都存在风险，第一种方法是测试人员可以采用自下而上的方式向测试经理报告计划用时，这种方式风险比较少，个人根据自己能力大小确定，但是缺点是存在测试人员虚报可能性。另一种方法是测试经理进行估算后分配工作日程，这时估算是很重要的前提，除了依赖于测试经理的经验外，对评估结果进行同行评审是很客观可取的方法。

　　缺陷发现率测试人员各自发现的缺陷数总和除于各自所花费的测试时间总和。由于执行效率不能足够代表测试人员是否认真工作，那么，每小时发现的缺陷数就是重要的考核指标，你的工作可以通过这项指标得到反馈。

　　公式：∑缺陷数(系统测试)(个)/∑执行系统测试的有效时间(小时)

　　参考指标：平均1.1个缺陷/小时假使有位测试人员没有达到1小时发现1个缺陷，那么，除非产品质量高、模块较小，否则，就是他的缺陷发现能力不如其他测试人员。当然，详细分类中可以根据发现重要缺陷的多少来定义缺陷发现能力。

　　工作质量相关指标

　　有效缺陷数/率被拒绝和删除的缺陷数总和，或者被拒绝和删除的缺陷数总和除于缺陷总数。这项指标用于考察测试人员发现的、被确认为缺陷的缺陷数高低或者百分比，数和比率越低测试质量越高。

　　公式：∑缺陷数(系统测试中被拒绝和删除的)(个)

　　∑缺陷数(系统测试中被拒绝和删除的)(个)/∑缺陷数(系统测试)(个)

　　参考指标：平均21.9%(测试人员发现的每100个缺陷中平均有22个缺陷不被开发组确认、认为不是“缺陷”或者错误录入缺陷)。有效缺陷比率容易给出，但是有效缺陷数具体数据要根据项目情况，无法给出可参考的数值。

　　注意：这项指标可能有不正确的情况，假使缺陷被拒绝和被删除的原因不是因为测试人员误操作和需求理解等自身错误引起，而是系统本身不能实现或者数据错误引起的，那么就要考虑剔除这部分。对于测试人员发现系统框架根本性的、初始化参数设置错误引发的、错误数据、错误环境等而开发人员因无法修正、可以通过改变环境而无需修改程序、重新导入数据、再次发布从而拒绝或删除的缺陷，应给予此测试人员奖励。

　　严重缺陷率这个比例用于弥补缺陷发现率的不足。主要是根据严重程度分类的缺陷数比全部缺陷或者有效缺陷数。一般而言，每个公司基本把缺陷严重程度分为严重、一般和微小，或者更细(通常等级数为奇数)。另外，可以对缺陷严重程度进行折算(严重：一般：微小=1：3：5)通过折算可以得出权重，然后在计算测试人员分值，在此不冗述

　　公式：∑严重/一般/微小/∑缺陷数

　　∑严重/一般/微小/∑有效缺陷数

　　参考指标：严重~10%一般~70%微小~20%。当测试人员发现的缺陷中严重错误比率越高，说明测试质量相对就好，通常严重程度缺陷数的分布呈正态分布。

　　模块缺陷率这个指标主要是根据一个单独测试模块的缺陷数除于模块本身功能点数得出来的。假使一个模块是单独测试的话，很容易可以和其他模块进行指标横向对比，参照对应的测试人员，得出所测试模块的缺陷数，可以考察测试人员测试水平，也为开发考核提供数据。

　　公式：∑缺陷数(系统测试(个)/功能点(个)

　　∑缺陷数(系统测试(个)/子功能点(个)

　　参考指标平均3.74个缺陷/功能点1个缺陷/子功能点

　　注意：有些功能点没有子功能点，计算子功能点时要进行说明。