Betrouwbaarheid (consistentie) en geldigheid (nauwkeurigheid) zijn distincte psychometrische eigenschappen. Een instrument kan hoog betrouwbaar maar volledig ongeldig zijn.
Een "depressieschaal" levert consistent dezelfde score voor een persoon over herhaalde administraties (hoge betrouwbaarheid). Echter, als de items daadwerkelijk angst meten in plaats van depressie, is de schaal ongeldig – het meet iets, maar niet de beoogde construct.
Betrouwbaarheid is noodzakelijk maar niet voldoende voor geldigheid. Consistente meting van het verkeerde ding maakt het niet goed. Het vaststellen van geldigheid vereist apart bewijs: inhoudsgeldigheid, criteriumgeldigheid, constructgeldigheidsstudies die bevestigen dat de instrument de doelconstruct vangt.
In onderzoek en assessering, verifieer altijd beide.