Co to jest analiza niezawodności? (definicja – przykład)

W statystyce termin niezawodność odnosi się do spójności pomiaru.

Jeśli mierzymy coś takiego jak inteligencja, wiedza, produktywność, efektywność itp. wielokrotnie, nie jesteśmy w stanie tego zmierzyć. u poszczególnych osób, czy pomiary są spójne?

Idealnie byłoby, gdyby badacze chcieli, aby test był wysoce niezawodny, ponieważ oznacza to, że zapewnia spójne pomiary w czasie, co oznacza, że można ufać wynikom testu.

Okazuje się, że istnieją cztery sposoby pomiaru niezawodności:

1. Metoda niezawodności połówkowej – określa stopień błędu w wynikach testu wynikający ze złej konstrukcji testu, np. źle sformułowanych pytań lub mylących instrukcji.

Ta metoda wykorzystuje następujący proces:

• Podziel test na dwie połowy. Na przykład jedna połowa może składać się z pytań parzystych, a druga z pytań nieparzystych.
• Podawaj każdą połówkę tej samej osobie.
• Powtórz dla dużej grupy osób.
• Oblicz korelację pomiędzy wynikami obu połówek.

Im wyższa korelacja między obiema połówkami, tym wyższa spójność wewnętrzna testu lub ankiety. W idealnym przypadku korelacja między połówkami powinna być wysoka, ponieważ oznacza to, że wszystkie części testu w równym stopniu przyczyniają się do mierzonej wartości.

2. Metoda wiarygodności test-retest – Określa stopień błędu wyników testu wynikający z problemów administracyjnych – np. hałaśliwe otoczenie, słabe oświetlenie, brak czasu na wykonanie testu.

Ta metoda wykorzystuje następujący proces:

• Przeprowadź test wśród grupy osób.
• Odczekaj określoną ilość czasu (dni, tygodnie lub miesiące) i przeprowadź ten sam test tej samej grupy osób.
• Oblicz korelację pomiędzy wynikami obu testów.

Ogólnie rzecz biorąc, korelacja wiarygodności testu-powtórnika wynosząca co najmniej 0,80 lub więcej wskazuje na dobrą niezawodność.

3.Metoda wiarygodności form równoległych – określa stopień błędu w wynikach testu, który jest spowodowany efektami zewnętrznymi – na przykład tym, że uczniowie mają dostęp do pytań z wyprzedzeniem lub uczniowie uzyskują wyższe wyniki, co po prostu prowadzi do więcej.

Ta metoda wykorzystuje następujący proces:

• Podaj jedną wersję testu grupie osób.
• Przeprowadź alternatywną, ale równie trudną wersję testu tej samej grupie osób.
• Oblicz korelację pomiędzy wynikami obu testów.

4. Metoda wiarygodności między oceniającymi – określa, jak konsekwentnie każdy element testu mierzy prawdziwy mierzony konstrukt – na przykład, czy wszystkie pytania są jasno przekazane i istotne dla mierzonego konstruktu?

Metoda ta polega na tym, że kilku przeszkolonych oceniających lub sędziów ocenia każdy element testu, a następnie oblicza ogólny procent zgodności między oceniającymi lub sędziami.

Im wyższy procent zgodności między sędziami, tym wyższa rzetelność testu.

Rzetelność a ważność

Rzetelność odnosi się do spójności miary, a trafność odnosi się do zakresu, w jakim test lub skala mierzy konstrukt, który ma mierzyć.

Dobry test lub skala to taka, która charakteryzuje się zarówno wysoką wiarygodnością, jak i trafnością. Może się jednak zdarzyć, że test lub skala będą wiarygodne, choć nie będą ważne.

Załóżmy na przykład, że dana waga do ważenia pudeł stale waży o 10 funtów więcej niż ich rzeczywista waga. Skala ta jest wiarygodna, ponieważ jej pomiary są spójne, ale jest nieważna, ponieważ nie mierzy prawdziwej wartości masy.

Rzetelność i błąd standardowy pomiaru

Współczynnik rzetelności można również wykorzystać do obliczenia standardowego błędu pomiaru , który szacuje różnicę wokół „prawdziwego” wyniku danej osoby w przypadku powtarzanych pomiarów.

Oblicza się go w następujący sposób:

SE _m = s√ 1-R

Złoto:

• s: odchylenie standardowe pomiarów
• Odp.: Współczynnik rzetelności testu

Szczegółowe wyjaśnienie standardowego błędu pomiaru można znaleźć w tym artykule .