В науке, психологии, экономике и даже при разработке сайтов мы постоянно сталкиваемся с необходимостью проверять — действительно ли то, что мы измеряем или создаем, соответствует заявленным целям. Именно здесь вступает в силу понятие валидность. Разберемся, что это такое простыми словами, какие виды валидности существуют и почему без нее невозможно получить достоверные результаты.
Что такое валидность: определение и происхождение термина
Валидность (от лат. validus — сильный, здоровый, достойный; от фр. valide — законный, действительный) — это мера соответствия методики и результатов исследования поставленным задачам. Простыми словами, валидность показывает, насколько инструмент измеряет именно то, что он должен измерять.
Например, если мы создаем тест на интеллект, валидность этого теста будет означать, что он измеряет именно интеллект, а не память, эрудицию или что-то другое. Известный специалист в области психометрии Анна Анастази определяла валидность как критерий качества теста, указывающий, «что тест измеряет и насколько хорошо он это делает».
Русскоязычными синонимами валидности являются достоверность, обоснованность, адекватность.
Почему валидность нельзя установить раз и навсегда
Важная особенность валидности — её нельзя установить единожды и использовать это доказательство как финальный аргумент «за» качество того или иного эксперимента или методики. Валидность необходимо постоянно обосновывать новыми данными, перепроверять в независимых исследованиях.
В психологии и статистике валидное измерение — такое измерение, которое измеряет то, что оно должно измерять. Эта узкая трактовка является наиболее популярной, но на практике она соответствует понятию «конструктная валидность».
Когда говорят о степени валидности, рассматривается то, насколько результаты исследования соответствуют поставленным задачам. При этом валидность не измеряется в каких-либо условных единицах — это качественная, а не количественная характеристика.
Основные виды валидности
В разных источниках можно встретить различные классификации видов валидности, что может создавать определенную путаницу. Рассмотрим основные из них.
По контексту исследования
В контексте исследования выделяются два ключевых типа:
Внутренняя валидность отражает то, в какой степени наблюдаемые результаты обусловлены рассматриваемыми причинами, а не какими-либо иными факторами или случайными событиями. Проще говоря, это уверенность в том, что именно независимая переменная (например, новая методика обучения) вызвала изменения в зависимой переменной (успеваемости), а не что-то другое.
Внешняя валидность показывает, насколько результаты исследования можно обобщить и распространить на другие группы, условия и временные периоды.
В контексте измерений
В контексте измерений существует несколько типов валидности.
Конструктная валидность — это степень обоснованности того, что методика действительно измеряет заданные и при этом научно обоснованные конструкты (теоретические понятия). Например, если мы измеряем «эмоциональный интеллект», нужно доказать, что это понятие существует в теории и наша методика отражает именно его.
В рамках конструктной валидности выделяют два подвида:
- Конвергентная валидность — проверка ожидаемой связи результатов конкретной методики с показателями других методик, измеряющих сходные характеристики. Если два теста на интеллект дают схожие результаты, они конвергируют друг с другом.
- Дискриминантная (дивергентная) валидность — доказательство того, что тест не измеряет никакой черты, с которой он теоретически не должен быть связан.
Содержательная валидность — степень соответствия содержания заданий методики той реальной деятельности, в которой проявляется измеряемое свойство. Частным случаем содержательной валидности является очевидная валидность — степень соответствия методики ожиданиям оцениваемых. Для большинства методик важно, чтобы участнику оценки была очевидна связь между содержанием процедуры и той реальной деятельностью, которая является объектом оценки.
Критериальная валидность — это определенная статистическими методами степень соответствия результатов методики заранее определенным внешним критериям. В качестве таких критериев могут выступать независимые от результатов методики непосредственные меры исследуемого качества или показатели социально значимых результатов деятельности.
Одним из видов критериальной валидности является прогностическая валидность, которая показывает, насколько результаты методики позволяют предсказывать будущее поведение или достижения человека.
В зависимости от способа установления
В литературе также встречается деление на непосредственную (первичную) и производную (вторичную) валидность.
Внутри непосредственной валидности выделяют внешнюю и внутреннюю валидность в том смысле, как они определялись выше.
Производная валидность, в свою очередь, включает оценочную (экспертную) валидность, основанную на корреляции между оценками по тесту и показателями оценочных суждений экспертов.
Проблемы валидности на практике
В реальных исследованиях и аудитах часто возникают проблемы, угрожающие валидности результатов. Рассмотрим некоторые из них.
Проблемы операционной валидности (точность измерения)
Некорректная операционализация возникает, когда интересующая характеристика не поддается прямому измерению, и используются неточные показатели-заменители (прокси). Например, показатель «доход ниже уровня прожиточного минимума» может быть некорректным прокси-показателем бедности, если исследователя интересуют ограничения доступа к различным благам.
Преднамеренное или непреднамеренное искажение информации также угрожает валидности. Люди могут сознательно искажать факты, чтобы скрыть проблему, или ошибаться из-за проблем с памятью.
Проблема стремления к социальной приемлемости возникает, когда респондент говорит то, что, по его мнению, интервьюер хочет услышать для получения одобрения, а не то, что есть на самом деле.
Проблема отложенного эффекта связана с тем, что результаты могут проявляться значительно позже момента их измерения.
Изменение определений и методик расчета делает данные, собранные в различные периоды времени, несопоставимыми.
Проблемы внутренней валидности (причинно-следственные связи)
Вмешательство иных событий — наблюдаемые изменения могут быть связаны не с исследуемой мерой, а с каким-либо иным фактором или произошедшим событием.
Изменения во времени — участники исследования могут меняться естественным образом (взрослеть, накапливать опыт), что может быть ошибочно приписано воздействию изучаемого фактора.
Регрессия к среднему — явление, при котором экстремальные значения показателя при повторном измерении имеют тенденцию приближаться к среднему, что может быть ошибочно истолковано как результат воздействия.
Валидность в разных сферах
Понятие валидности широко используется не только в науке, но и в различных прикладных областях.
В психодиагностике и психологии
В психологии валидность — фундаментальное понятие экспериментальной психологии, организационной психологии и психодиагностики. Психолог должен быть уверен, что его тест измеряет именно то психическое свойство, которое заявлено. Если валидность теста не установлена, его результаты нельзя считать достоверными и использовать для выводов о человеке.
В экономике и социологии
В экономических исследованиях валидность означает надежность информации, отсутствие в ней ошибок, обусловленных несовершенством методики сбора данных. Экономисты должны быть уверены, что их показатели действительно отражают изучаемые экономические явления.
Интересно, что в экономической сфере термин «валидность» имеет и второе значение — устойчивое положение валюты на денежном рынке.
В тестировании программного обеспечения
В IT-сфере валидация (проверка) — это определение соответствия разрабатываемого программного обеспечения ожиданиям и потребностям пользователя. Здесь часто проводят различие между:
- Верификацией — проверкой, соответствует ли продукт спецификации (правильно ли мы создаем продукт)
- Валидацией — проверкой, соответствует ли продукт потребностям пользователя (тот ли продукт мы создаем)
В веб-разработке
В контексте веб-технологий валидность означает соответствие документа (HTML-кода) официальным стандартам и спецификациям. Валидный код правильно отображается в браузерах и лучше индексируется поисковыми системами.
Заключение
Валидность — это ключевое понятие для любой деятельности, связанной с измерением, оценкой и исследованием. Она отвечает на главный вопрос: действительно ли мы измеряем то, что собирались измерить, и насколько наши выводы соответствуют реальности?
Без обеспечения валидности любые результаты исследований, тестов или оценок теряют свою ценность. Именно поэтому профессиональные разработчики методик должны обосновывать все виды валидности и вести постоянный сбор свидетельств в пользу валидности их инструментов.
Помните: валидность — это не раз и навсегда установленная характеристика, а постоянный процесс подтверждения того, что ваш инструмент работает правильно и измеряет именно то, что нужно.
