Для корректного применения теста на новой популяции или в новых целях (от целей зависит установка испытуемых в ситуации тестирования) психолог должен провести серию предварительных психометрических экспериментов, направленных на перепроверку надежности, валидности и репрезентативности теста в новых условиях. Перенесение теста с одной популяции на другую без проверки как минимум однородности распределения тестовых баллов (устойчивости тестовых норм) может приводить к серьезным диагностическим ошибкам или к непроизводительным затратам на бесполезную психодиагностику. К немалым ошибкам может приводить попытка прогноза по результатам теста, не проверенного на прогностическую валидность, – в этом случае психолог должен ограничиться лишь текущим диагнозом.

Строгое следование требованиям психометрики особенно необходимо при переносе тестов, разработанных за рубежом. В условиях недостаточной разработки отечественных методик многие психологи склонны рассматривать в качестве готовых зарубежные методики, тогда как реальные языковые и социокультурные различия бывают столь сильны, что полная эмпирическая адаптация зарубежной методики по своему объему не уступает разработке оригинальной методики. Это прежде всего относится к шкалам ценностных ориентаций, к характерологическим опросникам и другим личностным тестам. В настоящем руководстве читатели познакомятся с процедурами, позволяющими проверить эмпирическую корректность тестовых диагностических шкал. Для того чтобы убедиться в пригодности того или иного зарубежного теста, психолог должен уметь повторить процедуру, с помощью которой конструировался и обосновывался этот тест его авторами. Если при конструировании многомерного теста использовался факторный анализ, то нельзя считать адаптированным тест, прошедший проверку только на устойчивость тестовых норм, нужно обязательно перепроверить устойчивость самих тестовых шкал (т. е. повторить факторный анализ).

В традиционной теории тестов одним из основных критериев качества теста является его надежность. Р. Кэттелл [337] предложил обоснованное требование, чтобы одним из основных критериев качества психодиагностического метода считалась точность, т. е. понятие, которое лучше выражает, что имеется в виду мера безошибочности. Термин «надежность» Кэттелл предлагает употреблять для одного из видов точности.

Понятие «точность» является интуитивным понятием. Оно выражает требование к психодиагностическому методу безошибочно выявлять то, что он выявляет. К точному методу у нас больше доверия, чем к методу, точность которого не гарантирована или неизвестна. С субъективной точки зрения точность – это степень доверия тому, что полученные результаты представляют реальную величину изучаемой характеристики личности.

Математически точность оценивается степенью соответствия между двумя (или несколькими) намерениями, осуществленными с помощью одного и того же метода. Значит, если мы спустя определенное время применяем метод к тем же испытуемым, то должны получить те же или почти те же результаты.

Точность можно представить и с помощью приблизительного определения, в какой степени полученные результаты близки по своему качеству «истинной» величине изучаемой характеристики. Здесь, однако, есть гносеологически сложная проблема: как определить эту «истинную» величину характеристики, если мы узнаем о ней только посредством величины индикаторов? Можно исходить из предположения, что бесконечное количество повторений измерения элиминирует ошибку до минимума и приблизит наши измерения к этой «истинной» величине. Определение точности в большой степени влияет на интерпретацию результатов, полученных с помощью метода на практике. Если нам известна точность, которая чаще всего выражена коэффициентом корреляции или в виде отношения ошибочной и настоящей дисперсии, мы в каждом конкретном исследовании можем вычислить, какой приблизительно является ошибка нашего измерения или в каком интервале надежности находится «настоящая» величина исследуемой характеристики испытуемого. Психолог, применявший на практике знания о точности теста перцептивной скорости, не скажет об испытуемом, что он получил 35 баллов, а скажет, что его результат находится в интервале от 31 до 39 баллов с вероятностью 99 % (35 + 4).