Technical Note 17 — June 2012

5.2 

Probability of detection and/or potential error rate 

When validating or verifying subjective qualitative test methods the probability of detection (POD) and 

potential rate of error need to be considered. In addition to the POD and potential rate of error, sensitivity 

and selectivity are also identified as critical performance characteristics in the validation of qualitative identity 

methods. The POD and potential error rate are expressed as a percentage. The POD is the likelihood that a 

test methodology will correctly identify the measurand. Empirical determination of POD for new situations is 

not always practical due to lack of time, test specimens and other limited resources. Physical models can 

provide a useful alternative to empirical determination for quantifying POD in situations when data is limited 

but may not account for all factors and sources of variability. Statistical methods can be used to quantify and 

adjust for systematic biases and sources of variability that are not accounted for in the physical model. 

Hence, combining physical models with an empirical adjustment has the potential to provide a workable 

methodology. 

 

The potential error rate, often determined through the participation in proficiency testing studies, is also 

known both as the “level of confidence” of the hypothesis test and as the level of statistical significance of the 

test’s results. It has no uniform definition. It can mean false positive rate, which is the percentage of false 

positives divided by the combination of true negatives and false positives; percentage false positives, which 

---

Technical Note 17 - Guidelines for the validation and verification of quantitative and qualitative test methods 

 

 

June 2012 

Page 23 of 32 

is the percentage of false positives divided by the combination of true positives and false positives; or any 

number of different possibilities that may vary greatly even within one sample.