2008年3月3日做同行评审的培训,讲解同行评审方法花费了3小时,练习时间为1小时,点评时间为45分钟。参加培训的人员为20人,19人参与了练习,划分成了3个小组练习。3个小组对同一个需求进行了同行评审,该需求为一个实际项目需求的一部分,仅有1页纸,但是质量比较差。
这3个小组的练习结果如下表所示:
|
第1组
|
第2组
|
第3组
|
被评审文档的规模(页)
|
1
|
1
|
1
|
累计确认的bug数
|
13
|
17
|
4
|
工作量(分钟)
|
225
|
480
|
95
|
效率(bug数/小时)
|
3.47
|
2.13
|
2.53
|
个人评审的平均速率(页/小时)
|
4
|
2
|
6
|
缺陷密度(bug数/页)
|
13
|
17
|
4
|
个人评审阶段发现的bug数
|
10
|
12
|
2
|
会议中发现的bug数
|
3
|
5
|
2
|
个人评审阶段发现的bug数/会议中发现的bug数
|
3.33
|
2.40
|
1.00
|
参与评审的人数(包括作者、记录员与主持人)
|
6
|
8
|
5
|
需求评审检查中的检查项个数
|
12
|
8
|
10
|
对上述的度量数据分析、点评如下:
(1) 第3组发现的BUG数及投入的工作量明显少于其他2个组,个人评审的速率最快,准备阶段发现的缺陷数与会议中发现的缺陷数比例比较小,说明该组对评审的投入不够、评审的质量不高。
(2) 第2组投入的工作量最大,参与的人数最多,评审的效率最低,没有很好的控制人员的个数,一般而言,应该控制在3-7人为宜。
(3) 第1组的效率最高,准备阶段发现的缺陷数与会议中发现的缺陷数比较比较大,说明该组的个人评审做的比较充分,效果比较好。
(4) 尽管第2组发现的缺陷最多,但是第2组比第组多发现4个缺陷,工作量却多花费了255分钟,相比而言,投入产品很不合适。
(5) 第1组和第2组的工作量的度量数据可能存在统计口径不一致的现场,否则在同样是花费了1小时的时间做练习,投入的工作量不会差别那么大,应为对度量元的准确定义进行约束。
(6) 个人评审的平均速率越快,发现的缺陷越少,个人评审的速率越慢,发现的缺陷越多。
(7) 同会议中发现的BUG数相比,个人评审阶段发现的BUG越多评审效率越高。
针对上述练习,各小组总结的经验教训归纳如下:
(1) 主持人与作者要首先对检查中的检查项达成一致的理解
(2) 在评审完毕后,要分析检查单中每个检查项的命中率,针对没有发现问题的检查项要进行分析,看是真没有问题还是在评审时漏考虑了。
(3) 在评审中专家对某个问题是否是一个问题存在争议,进行了激烈讨论,主持人应控制会议节奏,避免在一个问题上花费时间太多,降低效率。
(4) 记录员对问题的记录与评审员的想法不一致,花费了较长的时间进行了沟通。
(5) 有的小组没有对评审员细分角色,导致评审的效率偏低。
(6) 有的小组在评审时,采用了模拟用户使用场景的方法,效果很好。
(7) 需要实时采集度量数据,保证度量数据的准确性。
分享到:
相关推荐
同行评审
作为cmm的一个重要关键域,评审与同行评审是质量保证的重要阶段
CMMI3-同行评审专题研讨-培训资料 CMMI3-同行评审专题研讨-培训资料
CMMI3认证培训 同行评审计划.doc 学习资料 复习资料 教学资源
同行评审资料,介绍同行评审的实施,组织等
软件 CMMI 评审中,组织级代码同行评审
技术(同行)评审,课程目标:理解和开展同行评审 王友元
同行评审--方式一检验(手册) 外文教材
很好的一个需求测试文档,重要的资料,对于测试人员,尤其是对于需求测试不太清晰的人,是很重要的!
公评审稿系统 -- 传统同行评审系统的一个替代性方案,张学新,,学术论文评价目前普遍采用的同行评审系统,存在严重缺陷。具体表现为,审稿效率低下、发表周期漫长,审稿人权责不相称,有损平等
有时候评审员长篇大论的意见会让你很难判断要回答的点有哪些,所以在一收到评审意见的时候,要仔细来回看过,读第一次的时候你可能会觉得评审员没有那么理解你的研究或是评审员的意见不合理,有时候你甚至会感到被...
验证/同行评审的目的是为了及早地和高效率地消除软件工作产品中的缺陷。一个重要的伴随结果是对软件工作产品及可防止的缺陷得到更好的了解。 验证/同行评审涉及工作产品作者的同行对软件工作产品的规范化的检查,...
CMMI-L3-培训-同行评审最新精选PPT课件.pptx
(1)为什么需要同行评审?第一个原因:技术工作之所以需要接受同行评审就好比铅笔需要橡皮一样,请记住:凡人皆有错!我们离不开同行评审的第二个原因是:尽管人们善于找出自己所犯的部分错误,但是相对于其他任何...
四川省政府采购评审专家培训教材.pdf
软件企业提高产品质量的手段,已经不仅仅是通过软件测试人员(SQC)的努力,而是越来越多的按照“测试前行”的理念配合同行评审(PeerReview)来提高软件产品的质量。其目的是为了及早和高效地从软件工作产品中识别...
财政投资评审业务培训课件.pptx
同行评议中专家评审的可信度问题的讨论与分析,张金焕,,在以专家评审为主体的同行评议中,专家评审的可信度直接影响到评审结果的公平与公正。同行评议中专家评审的可信度取决于评审专家
软件同行评审归纳.pdf
软件项目同行评审报告.doc