如何在 excel 中计算类内相关系数
类内相关系数(ICC) 用于确定不同评分者是否可以对项目(或主题)进行可靠评分。
ICC 的值范围为 0 到 1,其中 0 表示评分者没有可靠性,1 表示完全可靠性。
本教程提供了如何在 Excel 中计算 ICC 的分步示例。
第 1 步:创建数据
假设请四位不同的评委来评估 10 场不同的高考质量。结果如下所示:
第 2 步:拟合方差分析
为了计算这些评级的 ICC,我们首先需要拟合方差分析:无复制的双因素。
为此,请突出显示单元格 A1:E11,如下所示:
为此,请单击顶部功能区中的“数据”选项卡,然后单击“分析”组下的“数据分析”选项:
如果此选项不可用,您必须首先加载分析工具库。
在出现的下拉菜单中,单击方差分析:无复制的双因素,然后单击确定。在出现的新窗口中,提供以下信息,然后单击“确定” :
将出现以下结果:
步骤3:计算类内相关系数
我们可以使用以下公式来计算评分者之间的ICC:
组内相关系数 (ICC) 为0.782 。
根据Koo & Li 的说法,以下是如何解释类内相关系数的值:
- 小于0.50:可靠性差
- 0.5 到 0.75 之间:中等可靠性
- 0.75至0.9之间:可靠性良好
- 大于0.9:可靠性极佳
因此,我们得出的结论是,ICC 为0.782表明不同评分者可以对考试进行“良好”可靠性评分。
计算ICC的注意事项
可以计算多种不同版本的 ICC,具体取决于以下三个因素:
- 模型:单向随机效应、双向随机效应或双向混合效应
- 关系类型:一致性或绝对一致
- 单位:单个评估者或评估者的平均值
在前面的示例中,我们计算的 ICC 使用以下假设:
- 模型:双向随机效应
- 关系类型:绝对一致
- 单位:单一评估员
有关这些假设的详细解释,请参阅这篇文章。