Poziom istotności 0,05, 0,01 czy 0,001? Jak wybrać α w pracy dyplomowej

Poziom istotności to próg, który ustalasz przed analizą danych. Decyduje o tym, kiedy uznasz wynik za istotny statystycznie. W większości prac dyplomowych z nauk społecznych i ekonomicznych standardem jest α = 0,05. Ostrzejsze progi, 0,01 i 0,001, stosuje się wtedy, gdy pomyłka byłaby kosztowna albo gdy wykonujesz wiele testów naraz.

Jeśli piszesz rozdział empiryczny i widzisz w wynikach SPSS-a „Sig.” albo „p”, a promotor pyta, jaki poziom istotności przyjęłaś, ten artykuł jest dla Ciebie. Bez wzorów, za to tak, żebyś umiała to wyjaśnić na obronie.

Czym jest wartość p? Wyjaśnienie bez wzorów

Wartość p mówi, jak zaskakujący byłby Twój wynik, gdyby badanego efektu w ogóle nie było. Formalnie to prawdopodobieństwo uzyskania takiego wyniku (lub jeszcze bardziej skrajnego) przy założeniu, że hipoteza zerowa (H₀) jest prawdziwa.

Przykład. Sprawdzasz, czy studenci pracujący zawodowo mają inną średnią ocen niż studenci niepracujący. Hipoteza zerowa brzmi: średnie w obu grupach są takie same. Test daje p = 0,03. To znaczy, że gdyby różnicy naprawdę nie było, tak duża (lub większa) różnica pojawiałaby się rzadko, mniej więcej w 3 na 100 takich badań.

Im mniejsze p, tym trudniej wytłumaczyć wynik samym przypadkiem. Wartość p nie mówi jednak, jakie jest prawdopodobieństwo, że hipoteza zerowa jest prawdziwa. Nie mówi też, jak duży jest efekt. O tym więcej w sekcji o błędach.

Poziom istotności α: 0,05 to umowa, a nie prawo natury

Poziom istotności (α) to próg, z którym porównujesz wartość p. Zasada decyzji jest prosta:

• p < α: odrzucasz hipotezę zerową, wynik jest istotny statystycznie.
• p ≥ α: brak podstaw do odrzucenia hipotezy zerowej.

α to także ryzyko, które świadomie akceptujesz: że uznasz efekt za prawdziwy, choć go nie ma. Taką pomyłkę nazywa się błędem I rodzaju. Przy α = 0,05 godzisz się, że w sytuacji, gdy efektu naprawdę nie ma, średnio w 5 na 100 badań wynik i tak wyjdzie istotny.

Wartość 0,05 nie wynika z żadnego prawa matematyki. To konwencja, która przyjęła się w nauce w XX wieku i jest dziś punktem odniesienia w wielu dziedzinach. Najważniejsze: α wybierasz przed analizą, a nie po zobaczeniu wyników. Dopasowanie progu do wyniku to poważny błąd metodologiczny.

Kiedy stosuje się poziom istotności 0,01 lub 0,001?

Ostrzejszy próg ma sens w dwóch sytuacjach.

1. Gdy pomyłka dużo kosztuje. Wyobraź sobie, że badasz w firmie, czy nowy system premii zwiększa zaangażowanie pracowników. Wychodzi p = 0,04, czyli poniżej progu 0,05. W pracy magisterskiej to dobry wynik i sygnał, że warto badać temat dalej. Gdyby jednak na tej podstawie zarząd miał zmienić wynagrodzenia 2000 osób, fałszywy alarm kosztowałby dużo więcej. Przy wysokiej stawce (pieniądze, zdrowie, ważne decyzje) chcesz mocniejszych dowodów.

2. Gdy wykonujesz wiele testów naraz. Przy 20 testach i α = 0,05 średnio jeden może wyjść „istotny” czystym przypadkiem, nawet jeśli żaden z badanych efektów nie istnieje. Dlatego przy wielu porównaniach stosuje się korektę, np. Bonferroniego. Polega ona na podzieleniu α przez liczbę testów: przy 20 testach próg dla każdego z nich wynosi 0,05 / 20 = 0,0025. To typowa sytuacja przy dużych macierzach korelacji albo porównaniach wielu grup.

Dlaczego ostrzejszy próg nie zawsze jest lepszy?

Zaostrzając α, zmniejszasz ryzyko fałszywego alarmu, ale zwiększasz ryzyko, że przeoczysz efekt, który naprawdę istnieje. Taką pomyłkę nazywa się błędem II rodzaju. Przy tej samej liczbie badanych oba ryzyka działają jak huśtawka: gdy jedno spada, drugie rośnie.

W pracy dyplomowej ma to duże znaczenie, bo próby są zwykle niewielkie, często 50–150 osób. Przy takiej liczebności α = 0,001 może sprawić, że nawet realne różnice nie wyjdą istotne. Celem nie jest więc najmniejsze możliwe α, tylko α dopasowane do badania.

Jak wybrać poziom istotności do pracy dyplomowej?

Zanim policzysz pierwszy test, odpowiedz sobie na cztery pytania:

1. Co się stanie, jeśli się pomylisz? Im wyższa stawka, tym mocniejszych dowodów potrzebujesz.
2. Ile testów wykonujesz? Przy wielu porównaniach porozmawiaj z promotorem o korekcie na wielokrotne testowanie.
3. Czego oczekuje Twoja dziedzina i promotor? Przejrzyj kilka obronionych prac ze swojej katedry i artykuły, na których się opierasz.
4. Ilu masz badanych? Przy małej próbie bardzo ostre α utrudni wykrycie efektu.

W większości prac licencjackich i magisterskich z nauk społecznych i ekonomicznych standardem jest α = 0,05.

Jak opisać poziom istotności w rozdziale metodologicznym?

Wystarczy jedno zdanie w części o analizie danych, np.:

We wszystkich analizach przyjęto poziom istotności α = 0,05.

Jeśli stosujesz korektę, dopisz ją:

Ze względu na liczbę porównań zastosowano korektę Bonferroniego, przyjmując skorygowany poziom istotności α = 0,0025.

Jak zapisać wynik w rozdziale empirycznym?

Studenci pracujący zawodowo uzyskali istotnie niższą średnią ocen niż studenci niepracujący, t(118) = 2,21; p = 0,029; d = 0,40.

Podawaj dokładną wartość p, a nie tylko „p < 0,05”. Jeśli SPSS pokazuje „0,000”, w pracy zapisz p < 0,001, bo wartość p nigdy nie wynosi dokładnie zero. Zawsze dodaj też wielkość efektu (np. d Cohena, r, η²). To, czy dziesiętne zapisujesz przecinkiem czy kropką, sprawdź w wytycznych swojej uczelni i trzymaj się jednego zapisu w całej pracy.

Najczęstsze błędy w interpretacji wartości p

„p = 0,03, więc jest 3% szans, że hipoteza zerowa jest prawdziwa.” Nie. Wartość p mówi, jak rzadki byłby taki wynik, gdyby H₀ była prawdziwa. Nie podaje prawdopodobieństwa samej H₀.

„p = 0,12, czyli udowodniłam, że różnicy nie ma.” Brak istotności oznacza tylko brak podstaw do odrzucenia H₀. Efekt może istnieć, ale Twoje badanie, np. przez małą próbę, mogło go nie wykryć.

„p = 0,001, więc efekt jest bardzo silny.” Niska wartość p nie oznacza automatycznie dużego efektu. Przy dużej próbie nawet niewielka różnica da bardzo niskie p. O sile efektu mówi wielkość efektu, nie wartość p.

Zmiana α po zobaczeniu wyników. Jeśli wyszło p = 0,07, nie możesz nagle przyjąć α = 0,10. Próg ustala się przed analizą i opisuje w rozdziale metodologicznym.

FAQ: poziom istotności w pracy dyplomowej

Jaki poziom istotności przyjąć w pracy magisterskiej? W większości prac z nauk społecznych i ekonomicznych przyjmuje się α = 0,05. Ostrzejszy próg wybierz, jeśli wykonujesz wiele testów albo jeśli tego wymaga Twoja dziedzina lub promotor.

Co oznacza p < 0,05? Oznacza, że gdyby badanego efektu nie było, wynik tak skrajny jak Twój (lub bardziej) pojawiałby się rzadziej niż w 5 na 100 badań. Przy α = 0,05 uznajesz taki wynik za istotny statystycznie.

Czy p = 0,06 to „prawie istotny” wynik? Nie warto tak pisać. Jeśli przyjęłaś α = 0,05, wynik p = 0,06 jest nieistotny statystycznie. Możesz za to podać wielkość efektu i zaznaczyć, że warto sprawdzić go na większej próbie.

Co zrobić, gdy SPSS pokazuje p = 0,000? W pracy zapisz p < 0,001. Wartość p nigdy nie wynosi dokładnie zero, program po prostu zaokrągla ją do trzech miejsc po przecinku.

Czym różni się poziom istotności od wartości p? Poziom istotności (α) to próg, który ustalasz przed analizą. Wartość p to wynik testu, który porównujesz z tym progiem.

Podsumowanie

Poziom istotności to umowa, a nie prawo natury. Wybierasz go przed analizą i dopasowujesz do stawki oraz liczby testów. W większości prac dyplomowych standardem jest α = 0,05. Do tego zawsze podawaj dokładną wartość p i wielkość efektu, bo samo „istotne” nie mówi, jak ważny jest Twój wynik.