为了让一项考试要想达到严格的测试行业标准,就不能随意选择通过分数(分数线)。评分方法必须有助 于实现有效、可靠且公平的整体测试目标。 最后,它必须能够将达标考生与不达标考生区分开来。
利用标准制定原则来确定通过分数的方法有很多种,包括测试法、书签法和安戈夫法。在划定分数线时,Scaled Agile, Inc. 采用了修改后的安戈夫法和以项目为中心的方法,然后监控考试成绩,以确保所设定的分数可靠且有效。
如何应用
经学科专家 (SME) 小组编写并审核完考题后,根据考试对最低合格考生的整体定义,对每道题(每个项目)打分。此过程通常涉及多项因素,其中包括目标能力水平(Scaled Agile 采用类似于德雷福斯模型的 1 到 5 级成长模型)和评分标准(p 值 = 0-100)。
对于安戈夫法来说,能力水平和最低合格考生的定义至关重要。将分数线定为 75% 对于技能 4 级(高级)和技能 2 级(新手)来说完全不同。技能水平在尚未编写考题之前就已经确定了,由此保证了整个过程的一致性。
SME 在执行安戈夫法之前,不会得到一个预先确定的分数线。分数线由分数本身自然形成。因此,我们会发现有些 Scaled Agile 考试的分数线为 75%,有一些则是 78%。
SME 是决定评分过程是否成功的关键。SME 必须始终以目标考生为中心,抛开自己在目标考生可能知道什么与目标考生应该知道什么方面的主观性和偏见。抱着考生“应该”知道什么的想法,会导致偏见。SME 在对项目打分时,不会进行任何讨论,记录分数后才会提供问题答案。打分的同时提供答案容易使分数出现偏差。如果分数范围大于 30 分,则会进行集体复核,并做必要调整。
示例数据 – 部分
项目 | 1 号 SME | 2 号 SME | 3 号 SME | 4 号 SME | 5 号 SME | 6 号 SME | 7 号 SME | 安戈夫平均分 | 最高分 | 最低分 | 差值 | 状态(>30,复核) |
456.1.1.1 | 80 | 90 | 70 | 90 | 90 | 90 | 90 | 86 | 90 | 70 | 20 | - |
456.1.1.2 | 90 | 90 | 80 | 75 | 90 | 60 | 90 | 82 | 90 | 75 | 15 | - |
456.1.1.4 | 85 | 70 | 90 | 70 | 80 | 70 | 50 | 74 | 90 | 50 | 40 | 复核 |
456.1.1.5 | 60 | 60 | 70 | 60 | 60 | 60 | 70 | 63 | 70 | 60 | 10 | - |
456.1.1.7 | 50 | 70 | 50 | 45 | 60 | 50 | 70 | 56 | 70 | 45 | 25 | - |
456.1.1.8 | 90 | 90 | 95 | 80 | 80 | 80 | 80 | 85 | 95 | 80 | 15 | - |
456.1.2.1 | 95 | 70 | 70 | 60 | 90 | 80 | 70 | 76 | 95 | 60 | 35 | 复核 |
平均分 > | 79 | 77 | 75 | 69 | 79 | 70 | 74 | 75 |
|
|
|
|
考试公布后,整体通过率应与既定分数线基本一致。换句话说,如果分数线设为 75%,则实际通过率应在 75% 上下小幅浮动。对在用考试进行复核是维护标准考试的一个组成部分。复核期间会对非成绩项进行调整。
因此,如果您想知道某项 Scaled Agile 考试的当前通过率,直接看分数线即可!
