Ein Fehler erster Art tritt auf, wenn die Nullhypothese fälschlicherweise abgelehnt wird, obwohl sie eigentlich wahr ist. Ein Fehler zweiter Art tritt auf, wenn die Nullhypothese beibehalten wird, obwohl sie eigentlich falsch ist. Die Wahrscheinlichkeit, einen Fehler erster Art zu machen, wird als alpha-Fehler bezeichnet, während die Wahrscheinlichkeit, einen Fehler zweiter Art zu machen, als beta-Fehler bezeichnet wird.