Definicja

Test permutacyjny

Inna nazwa: test randomizacyjny. Kategoria: rzetelna analiza i raportowanie.

Test permutacyjny porównuje statystykę obliczoną w danych z jej rozkładem po wszystkich albo wielu dozwolonych przetasowaniach etykiet lub znaków. Wartość p mówi wtedy, jak często przy założeniu zamienności danych otrzymalibyśmy statystykę co najmniej tak skrajną jak obserwowana.

Kluczowe założenie. Sposób permutowania musi odpowiadać projektowi i hipotezie zerowej. W parach można permutować znaki różnic, a przy randomizacji grup etykiety przydziału tylko w zakresie dozwolonym przez schemat losowania. Test nie zwalnia z definicji statystyki, kierunku alternatywy ani kontroli wielokrotnych porównań.

Częsty błąd. Dowolne mieszanie wierszy w danych z klastrami albo pomiarami powtarzanymi, co niszczy strukturę zależności.

Przykład syntetyczny. Dwie grupy po cztery osoby miały średnie 9,50 i 5,50, więc różnica wyniosła 4,00. Spośród 70 wszystkich podziałów na grupy dwa były co najmniej tak skrajne, co daje dokładną dwustronną p = 0,0286.

Jak to zapisać w pracy. Różnicę średnich oceniono dokładnym testem permutacyjnym z 70 dopuszczalnymi podziałami: różnica = 4,00, p = 0,029, dwustronnie.

Dane są syntetyczne; obliczenia odtwarza docs/dane/przyklady-slownik-g10.py.

Powiązane hasła: Wartość p, randomizacja, Test t Welcha, Dokładny test Fishera

Jeśli projekt wymaga testu zgodnego z mechanizmem losowania, Wyceń projekt.