{"id":521,"date":"2023-07-29T15:27:38","date_gmt":"2023-07-29T15:27:38","guid":{"rendered":"https:\/\/statorials.org\/nl\/praktische-statistische-significantie\/"},"modified":"2023-07-29T15:27:38","modified_gmt":"2023-07-29T15:27:38","slug":"praktische-statistische-significantie","status":"publish","type":"post","link":"https:\/\/statorials.org\/nl\/praktische-statistische-significantie\/","title":{"rendered":"Een eenvoudige uitleg van statistisch versus praktisch belang"},"content":{"rendered":"

<\/p>\n

\n

Een statistische hypothese<\/strong> is een aanname over een populatieparameter<\/strong> . We kunnen bijvoorbeeld aannemen dat de gemiddelde lengte van een man in een bepaalde provincie 68 inch is. De hypothese met betrekking tot lengte is de statistische hypothese<\/em> en de werkelijke gemiddelde lengte van een man in de Verenigde Staten is de populatieparameter<\/em> .<\/span><\/p>\n

Een hypothesetest<\/strong> is een formele statistische test die we gebruiken om een statistische hypothese al dan niet te verwerpen. Om hypothesetoetsen uit te voeren,<\/span> nemen we een willekeurige steekproef uit de populatie en bepalen we of de gegevens in de steekproef waarschijnlijk hebben plaatsgevonden, gegeven het feit dat de nulhypothese inderdaad waar is.<\/span><\/p>\n

Als de steekproefgegevens onder deze hypothese voldoende onwaarschijnlijk zijn, kunnen we de nulhypothese verwerpen en concluderen dat er een effect bestaat.<\/span><\/p>\n

De manier waarop we bepalen of de steekproefgegevens \u2018onwaarschijnlijk genoeg\u2019 zijn, ervan uitgaande dat nul waar is, is door een bepaald significantieniveau in te stellen (meestal gekozen op 0,01, 0,05 of 0,10) en vervolgens te controleren of de p-waarde van de hypothesetest kleiner is. dan dit significantieniveau.<\/span><\/p>\n

Als de p-waarde kleiner is dan het significantieniveau, dan zeggen we dat de resultaten statistisch significant<\/strong> zijn. Het betekent alleen dat er een bepaald effect bestaat, maar het betekent niet noodzakelijkerwijs dat dit effect ook daadwerkelijk praktisch is in de echte wereld. De resultaten kunnen statistisch significant zijn zonder praktisch significant<\/strong> te zijn.<\/span><\/p>\n

Gerelateerd:<\/strong><\/span> Een uitleg van P-waarden en statistische significantie<\/p>\n

Praktisch belang<\/strong><\/span><\/h2>\n

Het is mogelijk dat het testen van hypothesen statistisch significante resultaten oplevert, ondanks een kleine effectgrootte. Er zijn twee belangrijke manieren waarop kleine effectgroottes lage (en daarom statistisch significante) p-waarden kunnen opleveren:<\/span><\/p>\n

1. De variabiliteit van de bemonsterde gegevens is zeer laag.<\/strong> Als uw steekproefgegevens weinig variabel zijn, kan een hypothesetest nauwkeurigere schattingen van het populatie-effect opleveren, waardoor de test zelfs kleine effecten kan detecteren.<\/span><\/p>\n

Stel dat we bijvoorbeeld een onafhankelijke t-test met twee steekproeven willen uitvoeren op de volgende twee steekproeven die de testscores van 20 leerlingen van twee verschillende scholen tonen om te bepalen of de gemiddelde testscores significant verschillen tussen de scholen:<\/span><\/p>\n

 sample 1: 85 85 86 86 85 86 86 86 86 85 85 85 86 85 86 85 86 86 85 86\nsample 2: 87 86 87 86 86 86 86 86 87 86 86 87 86 86 87 87 87 86 87 86<\/strong><\/pre>\n
 Het gemiddelde van monster 1 is 85,55<\/strong> en het gemiddelde van monster 2 is 86,40<\/strong> .<\/span> Wanneer we een onafhankelijke t-test met twee steekproeven uitvoeren, blijkt dat de teststatistiek -5,3065<\/strong> is en de overeenkomstige p-waarde <0,0001<\/strong> . Het verschil tussen de testresultaten is statistisch significant.<\/span><\/p>\n
 Het verschil tussen de gemiddelde testscores voor deze twee steekproeven is slechts 0,85<\/strong> , maar de lage variabiliteit in testscores voor elke school resulteert in een statistisch significant resultaat. Merk op dat de standaardafwijking van de scores 0,51<\/strong> is voor steekproef 1 en 0,50<\/strong> voor steekproef 2.<\/span><\/p>\n
 Deze lage variabiliteit zorgde ervoor dat de hypothesetest het kleine verschil tussen scores kon detecteren en ervoor zorgde dat de verschillen statistisch significant waren.<\/span><\/p>\n
 De onderliggende reden waarom een lage variabiliteit tot statistisch significante conclusies kan leiden, is dat de t-<\/em> toetsstatistiek voor een onafhankelijke t-toets met twee steekproeven als volgt wordt berekend:<\/span><\/p>\n
 teststatistiek t<\/em><\/strong> = [ ( x 1<\/sub><\/span> \u2013 x 2<\/sub><\/span> ) \u2013 d ] \/ (\u221a s 2<\/sup> 1<\/sub> \/ n 1<\/sub> + s 2<\/sup> 2<\/sub> \/ n 2<\/sub><\/span> )<\/span><\/p>\n
 waarbij s 2<\/sup> 1<\/sub> en s 2<\/sup> 2<\/sub> de monstervariatie voor respectievelijk monster 1 en monster 2 aangeven. Merk op dat wanneer deze twee getallen klein zijn, de noemer van het gehele getal van de t-<\/em> teststatistiek klein is.<\/span><\/p>\n
 En als je deelt door een klein getal, krijg je een groot getal. Dit betekent dat de t-<\/em> teststatistiek groot zal zijn en de overeenkomstige p-waarde klein, wat tot statistisch significante resultaten zal leiden.<\/span><\/p>\n
 2. De steekproefomvang is erg groot.<\/span><\/strong> Hoe groter de steekproefomvang, hoe groter de statistische kracht van een hypothesetest, waardoor zelfs kleine effecten kunnen worden gedetecteerd. Dit kan tot statistisch significante resultaten leiden, ondanks kleine effecten die mogelijk geen praktische betekenis hebben.<\/span><\/p>\n
 Stel dat we bijvoorbeeld een onafhankelijke t-test met twee steekproeven willen uitvoeren op de volgende twee steekproeven die de testscores van 20 leerlingen van twee verschillende scholen tonen om te bepalen of de gemiddelde testscores significant verschillen tussen de scholen:<\/span><\/p>\n
 Sample 1: 88 89 91 94 87 94 94 92 91 86 87 87 92 89 93 90 92 95 89 93\nSample 2: 95 88 93 87 89 90 86 90 95 89 91 92 91 88 94 93 94 87 93 90<\/strong><\/pre>\n
 Als we voor elk voorbeeld een boxplot maken om de verdeling van de scores weer te geven, kunnen we zien dat ze erg op elkaar lijken:<\/span><\/p>\n
 Het gemiddelde van monster 1 is 90,65<\/b> en het gemiddelde van monster 2 is 90,75<\/b> . De standaardafwijking voor monster 1 is 2,77<\/strong> en de standaardafwijking voor monster 2 is 2,78<\/strong> .<\/span> Wanneer we een onafhankelijke t-test met twee steekproeven uitvoeren, blijkt dat de teststatistiek -0,113<\/strong> is en de overeenkomstige p-waarde 0,91<\/strong> . Het verschil tussen de gemiddelde testscores is niet statistisch significant.<\/span><\/p>\n
 Bedenk echter of de steekproefomvang van de twee steekproeven beide 200<\/strong> was. In dit geval zou een onafhankelijke t-test met twee steekproeven onthullen dat de teststatistiek -1,97<\/strong> is en de overeenkomstige p-waarde net onder 0,05<\/strong> ligt. Het verschil tussen de gemiddelde testscores is statistisch significant.<\/span><\/p>\n
 De onderliggende reden waarom grote steekproeven tot statistisch significante conclusies kunnen leiden, gaat opnieuw terug naar de t-<\/em> toetsstatistiek voor een onafhankelijke t-toets met twee steekproeven:<\/span><\/p>\n
 teststatistiek t<\/em><\/strong> = [ ( x 1<\/sub><\/span> \u2013 x 2<\/sub><\/span> ) \u2013 d ] \/ (\u221a s 2<\/sup> 1<\/sub> \/ n 1<\/sub> + s 2<\/sup> 2<\/sub> \/ n 2<\/sub><\/span> )<\/span><\/p>\n
 Merk op dat wanneer n 1<\/sub> en n 2<\/sub> klein zijn, de gehele noemer van de t<\/em> -teststatistiek klein is. En als je deelt door een klein getal, krijg je een groot getal. Dit betekent dat de t-<\/em> teststatistiek groot zal zijn en de overeenkomstige p-waarde klein, wat tot statistisch significante resultaten zal leiden.<\/span><\/p>\n
 Gebruik inhoudelijke expertise om het praktische belang te beoordelen<\/strong><\/h2>\n
 Om te bepalen of een statistisch significant resultaat van een hypothesetest praktisch betekenisvol is, is vakkennis vaak noodzakelijk.<\/span><\/p>\n
 In de voorgaande voorbeelden, toen we testten op verschillen tussen testscores van twee scholen, zou het nuttig zijn om de expertise te hebben van iemand die op de scholen werkt of die dit soort tests afneemt, om ons te helpen bepalen of een gemiddeld verschil van 1 punt bestaat of niet. heeft praktische implicaties.<\/span><\/p>\n
 Een gemiddeld verschil van 1 punt kan bijvoorbeeld statistisch significant zijn op het alpha = 0,05-niveau, maar betekent dit dat de school met de laagste scores het programma dat de school met de hoogste scores hoger gebruikt, hoger moet adopteren? Of zou het te veel administratieve kosten met zich meebrengen en te duur\/te snel te implementeren zijn?<\/span><\/p>\n
 Het feit dat er een statistisch significant verschil is in toetsscores tussen twee scholen betekent niet dat de effectgrootte van het verschil groot genoeg is om enige vorm van verandering in het onderwijssysteem te veroorzaken.<\/span><\/p>\n
 Betrouwbaarheidsintervallen gebruiken om de praktische betekenis te beoordelen<\/strong><\/span><\/h2>\n
 Een ander nuttig instrument om de praktische betekenis te bepalen is het betrouwbaarheidsinterval<\/strong><\/a> . Een betrouwbaarheidsinterval geeft ons een bereik van waarden waarbinnen de werkelijke populatieparameter waarschijnlijk zal liggen.<\/span><\/p>\n
 Laten we bijvoorbeeld terugkeren naar het voorbeeld van het vergelijken van het verschil in toetsscores tussen twee scholen. Een directeur kan verklaren dat een gemiddeld scoreverschil van minimaal 5 punten noodzakelijk is om de school een nieuw programma te laten adopteren.<\/span><\/p>\n
 In \u00e9\u00e9n onderzoek kunnen we zien dat het gemiddelde verschil tussen testscores 8 punten bedraagt. Het betrouwbaarheidsinterval rond dit gemiddelde kan echter [4, 12] zijn, wat aangeeft dat 4<\/em> het werkelijke verschil tussen de gemiddelde testresultaten zou kunnen zijn. In dit geval kan de directeur concluderen dat de school het programma niet zal veranderen, omdat het betrouwbaarheidsinterval aangeeft dat het werkelijke verschil kleiner dan 5 zou kunnen zijn.<\/span><\/p>\n
 In een ander onderzoek kunnen we echter zien dat het gemiddelde verschil tussen testresultaten wederom 8 punten is, maar het betrouwbaarheidsinterval rond het gemiddelde kan [6, 10] zijn. Omdat dit interval geen 5<\/em> bevat, zal de regisseur waarschijnlijk concluderen dat het werkelijke verschil tussen de testscores groter is dan 5 en zo vaststellen dat het zinvol is om het programma aan te passen.<\/span><\/p>\n
 Conclusie<\/strong><\/span><\/h2>\n
 Concluderend is dit wat we hebben geleerd:<\/span><\/p>\n