Definicja

Istotność statystyczna

Inne nazwy: wynik istotny, poziom istotności, alfa. Kategoria: wnioskowanie statystyczne.

Wynik jest istotny statystycznie, gdy wartość p jest mniejsza od ustalonego przed analizą poziomu α, na przykład 0,05. To decyzja w ramach określonego testu i jego założeń, a nie miara pewności, że efekt istnieje. Nie określa wielkości efektu ani jego znaczenia praktycznego.

Jak czytać wynik. Wynik istotny nie oznacza „ważny”, „duży” ani „udowodniony”. Oznacza, że dane są niezgodne z modelem zerowym w stopniu przekraczającym przyjęty próg testu. Ta sama różnica bywa istotna w dużej próbie i nieistotna w małej, więc obok istotności zawsze podaje się wielkość efektu. Amerykańskie Towarzystwo Statystyczne zaleca wprost, żeby wniosków naukowych nie opierać wyłącznie na przekroczeniu progu przez wartość p.

Częsty błąd. Zdanie „różnica okazała się bardzo istotna” albo „wysoce istotna”. Istotność nie ma stopni. Drugi błąd to opisywanie wyniku nieistotnego jako dowodu, że grupy są takie same.

Przykład syntetyczny. W badaniu satysfakcji zawodowej pielęgniarek, skala 10 do 50 punktów, porównano zmianę dzienną i nocną. Przy n = 150 w każdej grupie M = 34,3; SD = 6,0 wobec M = 31,2; SD = 6,8, a wynik był istotny, t(298) = 4,25; p < 0,001; d = 0,49. W podpróbie pierwszych 30 osób z każdej grupy ta sama zmienna dała M = 32,0; SD = 6,4 wobec M = 31,4; SD = 6,8 i wynik nieistotny, t(58) = 0,36; p = 0,724; d = 0,09. W tym przykładzie zmieniły się zarówno liczebność, jak i oszacowanie efektu (d = 0,49 wobec 0,09). Nie jest to porównanie izolujące wpływ samej liczebności.

Jak to zapisać w pracy. Różnica w satysfakcji zawodowej między zmianą dzienną a nocną była istotna statystycznie, t(298) = 4,25; p < 0,001; d = 0,49, przy czym znaczenie tej różnicy wymaga odniesienia do skali i kontekstu badania. W konwencji tego słownika wartości p poniżej 0,001 zapisujemy jako p < 0,001, pozostałe zaokrąglamy do trzech miejsc.

Dane przykładu są syntetyczne; obliczenia odtwarza skrypt docs/dane/przyklady-slownik.py.

Powiązane hasła: Wartość p, Hipoteza zerowa i alternatywna, Wielkość efektu, Liczebność próby

Jeśli wynik wyszedł nieistotnie i nie wiesz, co z nim zrobić w dyskusji, Wyceń projekt.