Hüpoteesi testimine on laialt levinud teaduslik protsess, mida kasutatakse kõigis statistika- ja sotsiaalteadustes. Statistiliste andmete uurimisel saavutatakse hüpoteesikatses statistiliselt oluline (või statistilise olulisusega) tulemus, kui p-väärtus on väiksem kui määratletud olulisuse tase. p-väärtus on tõenäosus saada testistatistika või valimi tulemus võimalikult ekstreemne või äärmuslikum kui vaadeldud uuringus, samas kui olulisuse tase või alfa ütleb teadlasele, kui ekstreemsed tulemused peavad olema, et seda ümber lükata nullhüpotees. Teisisõnu, kui p-väärtus on määratletud olulisuse tasemega (tavaliselt tähistatud kui 1) või väiksem α järgi) võib teadlane ohutult eeldada, et vaadeldud andmed on vastuolus eeldusega, et nullhüpotees on tõsi, mis tähendab, et nullhüpoteesi või eelduse, et testitud muutujate vahel pole seost, saab tagasi lükata.
Nullhüpoteesi tagasilükkamise või ümberlükkamisega järeldab teadlane, et sellele on olemas teaduslik alus veendumus on muutujate vahel mingil määral seos ja tulemused ei tulenenud valimivigadest või võimalus. Kuigi enamiku teadusuuringute keskne eesmärk on nullhüpoteesi tagasilükkamine, on oluline seda märkida nullhüpoteesi ümberlükkamine ei ole samaväärne uurija alternatiivi tõestamisega hüpotees.
Statistiliselt olulised tulemused ja olulisuse tase
Statistilise olulisuse mõiste on hüpoteesi testimisel põhiline. Uuringus, mis hõlmab juhuvalimi võtmist suuremast populatsioonist, püüdes tõestada mõnda tulemust, mida saab rakendada - populatsiooni kohta tervikuna, on uuringuandmete pidev potentsiaal tuleneda valimivigadest või lihtsast kokkusattumusest või - võimalus. Tähtsustaseme määramise ja p-väärtuse testimisega selle alusel saab teadlane nullhüpoteesi kindlalt kinnitada või tagasi lükata. Tähtsustase on kõige lihtsamini öeldes nullhüpoteesi ebaõige tagasilükkamise läve tõenäosus, kui see on tegelikult tõene. Seda nimetatakse ka I tüüpi viga määra. Tähtsuse tase või alfa seostatakse seetõttu testi üldise usaldusnivooga, mis tähendab, et mida suurem on alfa väärtus, seda suurem on usaldus testi suhtes.
I tüüpi vead ja olulisuse tase
I tüüpi viga või esimest tüüpi viga ilmneb siis, kui nullhüpotees lükatakse tagasi, kui see tegelikult on tõene. Teisisõnu, I tüüpi viga on võrreldav valepositiivse veaga. I tüüpi vigu kontrollitakse asjakohase olulisuse taseme määratlemisega. Teadusliku hüpoteesi testimise parim tava nõuab olulisuse taseme valimist enne andmete kogumise algust. Kõige tavalisem olulisuse tase on 0,05 (või 5%), mis tähendab, et tõelise nullhüpoteesi tagasilükkamisel on 5% tõenäosusega, et test kannab I tüüpi viga. See olulisuse tase tähendab vastupidiselt 95% enesekindluse tase, mis tähendab, et hüpoteesitestide seeria korral ei anna 95% I tüüpi viga.