Hoe de intraclass-correlatiecoëfficiënt in excel te berekenen

Een intraclass correlatiecoëfficiënt (ICC) wordt gebruikt om te bepalen of items (of onderwerpen) betrouwbaar kunnen worden beoordeeld door verschillende beoordelaars.

De waarde van een ICC kan variëren van 0 tot 1, waarbij 0 duidt op geen betrouwbaarheid onder de beoordelaars en 1 op perfecte betrouwbaarheid.

Deze tutorial biedt een stapsgewijs voorbeeld van hoe u ICC in Excel kunt berekenen.

Stap 1: Creëer de gegevens

Stel dat aan vier verschillende juryleden wordt gevraagd de kwaliteit van tien verschillende toelatingsexamens voor universiteiten te beoordelen. De resultaten worden hieronder weergegeven:

Stap 2: Pas een ANOVA toe

Om de ICC voor deze beoordelingen te berekenen, moeten we eerst een Anova: Two-Factor Without Replication passen.

Om dit te doen, markeert u de cellen A1:E11 als volgt:

Om dit te doen, klikt u op het tabblad Gegevens in het bovenste lint en klikt u vervolgens op de optie Gegevensanalyse onder de groep Analyse :

Als deze optie niet beschikbaar is, moet u eerst Analysis ToolPak laden .

In het vervolgkeuzemenu dat verschijnt, klikt u op Anova: twee-factoren zonder replicatie en klikt u vervolgens op OK . Geef in het nieuwe venster dat verschijnt de volgende informatie op en klik vervolgens op OK :

De volgende resultaten verschijnen:

Stap 3: Bereken de correlatiecoëfficiënt binnen de klasse

We kunnen de volgende formule gebruiken om de ICC onder beoordelaars te berekenen:

De intraclasscorrelatiecoëfficiënt (ICC) bleek 0,782 te zijn.

Zo interpreteer je de waarde van een correlatiecoëfficiënt tussen klassen, volgens Koo & Li :

• Minder dan 0,50: slechte betrouwbaarheid
• Tussen 0,5 en 0,75: matige betrouwbaarheid
• Tussen 0,75 en 0,9: Goede betrouwbaarheid
• Groter dan 0,9: uitstekende betrouwbaarheid

We zouden dus kunnen concluderen dat een ICC van 0,782 aangeeft dat examens door verschillende beoordelaars met “goede” betrouwbaarheid kunnen worden gescoord.

Een opmerking over het berekenen van ICC

Er zijn verschillende versies van een ICC die kunnen worden berekend, afhankelijk van de volgende drie factoren:

• Model: willekeurige effecten in één richting, willekeurige effecten in twee richtingen, of gemengde effecten in twee richtingen
• Type relatie: consistentie of absolute overeenstemming
• Eenheid: enkele beoordelaar of gemiddelde van beoordelaars

In het vorige voorbeeld werd bij de door ons berekende ICC gebruik gemaakt van de volgende aannames:

• Model: willekeurige effecten in twee richtingen
• Type relatie: Absolute overeenkomst
• Eenheid: enkele beoordelaar

Voor een uitgebreide toelichting op deze aannames verwijzen wij u naar dit artikel .