La contre validation est une étape de la construction des tests (parfois oubliée). Elle permet de s'assurer que les résultats observés lors de la sélection et l'analyse des items ne sont pas les conséquences d'un échantillon particulier. En effet, les résultats de l'analyse d'items reposent sur des données issues d'un premier échantillonnage. Après avoir sélectionné et modifié éventuellement des items, on obtient une nouvelle épreuve. Pour s'assurer que les résultats ne sont pas spécifiques à l'échantillon, on doit à nouveau administrer l'épreuve à un échantillon différent de celui qui a servi à réaliser l'analyse d'items (on parle parfois d'échantillon de contre-validation). Cette seconde phase de construction d'un test est ce qu'on appelle la contre-validation.