Excel でクラス内相関係数を計算する方法
クラス内相関係数(ICC) は、アイテム (またはトピック) がさまざまな評価者によって確実に評価できるかどうかを判断するために使用されます。
ICC の値は 0 ~ 1 の範囲で、0 は評価者間で信頼性がないことを示し、1 は完全な信頼性を示します。
このチュートリアルでは、Excel で ICC を計算する方法を段階的に説明します。
ステップ 1: データを作成する
4 人の異なる裁判官が 10 の異なる大学入学試験の質を評価するように依頼されたとします。結果を以下に示します。
ステップ 2: ANOVA を当てはめる
これらの評価の ICC を計算するには、まずAnova: Two-Factor Without Replicationを当てはめる必要があります。
これを行うには、次のようにセル A1:E11 を強調表示します。
これを行うには、上部のリボンで[データ]タブをクリックし、 [分析]グループの下にある[データ分析]オプションをクリックします。
このオプションが使用できない場合は、最初にAnalysis ToolPak をロードする必要があります。
表示されるドロップダウン メニューで、 [Anova: Two-Factor Without Replication]をクリックし、 [OK]をクリックします。表示される新しいウィンドウで次の情報を入力し、 [OK]をクリックします。
次の結果が表示されます。
ステップ 3: クラス内相関係数を計算する
次の式を使用して、評価者間の ICC を計算できます。
クラス内相関係数 (ICC) は0.782であることがわかりました。
Koo と Liによると、クラス内相関係数の値を解釈する方法は次のとおりです。
- 0.50未満:信頼性が低い
- 0.5 ~ 0.75: 中程度の信頼性
- 0.75 ~ 0.9:良好な信頼性
- 0.9以上:優れた信頼性
したがって、ICC が0.782であれば、試験はさまざまな評価者によって「良好な」信頼性で採点できることを示していると結論付けられます。
ICC 計算に関する注意事項
次の 3 つの要素に応じて、計算できる ICC にはいくつかの異なるバージョンがあります。
- モデル:一方向ランダム効果、双方向ランダム効果、または双方向混合効果
- 関係のタイプ:一貫性または完全な合意
- 単位:単一の評価者または評価者の平均
前の例では、次の仮定を使用して ICC を計算しました。
- モデル:双方向ランダム効果
- 関係の種類:絶対的な合意
- 単位:単一の評価者
これらの前提条件の詳細な説明については、この記事を参照してください。