Technical Note 17 — June 2012

Validation Parameters 

5.1 

Repeatability/reproducibility (i.e. reliability) 

Subjective test methods can be said to be valid if the analyst or examiner repeatedly obtains correct results 

for positive and negative known tests. Evidence of repeatability could include providing evidence of: 

-The level of agreement between two different analysts or examiners who have assessed the same evidence 

of performance for a particular method (i.e. inter-analyst or examiner reliability); or 

-The level of agreement of the same analyst or examiner who has assessed the same evidence of 

performance but at different times (i.e. intra-analyst or examiner reliability). 

 

Other forms of reliability that should be considered include the internal consistency of a test (i.e. internal 

reliability) as well as the equivalence of alternative assessment tests (i.e. parallel forms).