Signifikansnivå, Statistisk signifikans, level of significance, alfa, α

• I en statistisk test er sannsynligheten for å forkaste en sann nullhypo­tese (type I-feil). Et vanlig valg av signifikansnivå er a = 0,05, eller 5 %. Den maksimale risiko en forsker er villig til å løpe for å forkaste en sann nullhypotese (begå en type I feil).
• Signifikansnivået er konvensjonelt bestemt til 1 av 100 (0,01) eller 5 av 100 (0,05).

Signifikans

• Som grunnlag for vurdere om null-hypotesen er sann, velges et signifikansnivå. Det signifikansnivået som velges forteller hvor stor sannsynlighet for å gjøre en feilslutning man kan akseptere. Som regel velges et signifikansnivå mellom 1-5%.
• når man skal finne ut om en H0 eller en HA skal benyttes etter forsøket, kommer det an på om resultatene vi får kommer innenfor et signifikansnivå. Dette resultatet (et nivå som forteller hvor stor sjanse det er for at H0 kan forkastes, også kalt for forkastelsesnivå). De mest vanlige signifikansnivåene er 5 % (.05) og 1 % (.01). Dersom vi kommer innenfor signifikansnivået, vil det være en sjanse for at vi begår en Type I feil, det vil si at vi ser bort fra H0 og benytter HA selv om H0 er sann. Dette kan vi prøve å motarbeide ved å øke signifikansnivået fra 5 % til 1 %. Men da er det større sjanse for at vi begår en Type II feil, at man beholder H0 selv om den er feil. At den er "feil" vil si at den ikke gir et riktig bilde av populasjonen, men at det i realiteten er den alternative hypotesen som burde bli beholdt.
  Signifikanstesten sier noe om hvorvidt gjennomsnittene er ulike hverandre, ikke hva ulikhetene skyldes. Dette under forutsetning av at testen er pålitelig. Først etter at resultatene er klarert på denne måten kan man føle seg rimelig trygg på at det er umaken verd å diskutere dem nærmere. Absolutt sikre kan man naturlig nok aldri være, det er alltid et visst rom for å få slike tendenser ved tilfeldigheter.

Statistisk signifikans

Et statistisk signifikant utfall av en statistisk test vil si at nullhypotesen (H₀) må forkastes. I moderne varianter betyr statistisk signifikans at f.eks. en korrelasjon har en signifikanssannsynlighet (p-verdi) som er mindre enn signifikansnivået, oftest 0,05.