Прогностическая достоверность
В психометрии прогностическая достоверность — это степень, в которой оценка по шкале или тесту предсказывает результаты по некоторому критерию. [1] [2]
Например, достоверность когнитивного теста на производительность труда определяется корреляцией между результатами тестов и, например, рейтингами производительности руководителя. Такой когнитивный тест имел бы прогностическую ценность, если бы наблюдаемая корреляция была статистически значимой.
Прогностическая валидность имеет сходство с параллельной валидностью в том смысле, что обе они обычно измеряются как корреляция между тестом и некоторой критериальной мерой. При исследовании параллельной валидности тест проводится одновременно с определением критерия. Это распространенный метод получения доказательств достоверности тестов при приеме на работу: тест проводится для действующих сотрудников, затем оценка эффективности работы этих сотрудников получается или уже получена независимо от теста (часто, как отмечалось выше, в форме рейтинга руководителя). Обратите внимание на возможность ограничения диапазона как результатов тестов, так и показателей производительности: действующие сотрудники, вероятно, будут более однородной и более эффективной группой, чем группа кандидатов в целом.
При строгом изучении прогностической достоверности в первую очередь собираются результаты тестов. Затем, через некоторое время, собирается критериальная мера. Таким образом, с точки зрения прогностической достоверности пример теста на трудоустройство немного отличается: тесты проводятся, возможно, соискателям работы, а затем, после того как эти люди проработают на этой должности год, их результаты тестов коррелируют с их оценками эффективности работы за первый год. Еще одним подходящим примером являются результаты SAT : они проверяются путем сбора баллов в старшем классе и средней школе, а затем ожидания года (или более), чтобы сопоставить баллы со средним баллом за первый год обучения в колледже . Таким образом, прогностическая валидность предоставляет несколько более полезные данные о валидности теста, поскольку она более точно соответствует реальной ситуации, в которой тест будет использоваться. В конце концов, большинство тестов проводятся для того, чтобы узнать что-то о будущем поведении.
Как и во многих аспектах социальных наук, величина корреляций , полученных в результате исследований прогностической достоверности, обычно невелика. [3] Типичная прогностическая достоверность теста на трудоустройство может иметь корреляцию в районе r = 0,35. Иногда встречаются более высокие значения, а более низкие значения встречаются очень часто. Тем не менее, полезность (то есть выгода, получаемая при принятии решений с использованием теста), обеспечиваемая тестом с корреляцией 0,35, может быть весьма существенной. Дополнительную информацию и объяснение взаимосвязи между дисперсией и прогностической достоверностью можно найти здесь. [4]
Прогностическая валидность в современной теории валидности
[ редактировать ]Новейшие стандарты образовательного и психологического тестирования [5] отражают Сэмюэля Мессика модель валидности [6] и не используйте термин «прогностическая достоверность». Скорее, Стандарты описывают поддерживающие достоверность «доказательства, основанные на взаимосвязях [между результатами тестов и] другими переменными».
Прогностическая валидность предполагает тестирование группы испытуемых на наличие определенной конструкции, а затем сравнение их с результатами, полученными в какой-то момент в будущем.
Ссылки
[ редактировать ]- ^ Кронбах, Л.Дж., и Мил, Ч.П. (1955). Конструируйте валидность психологических тестов. Психологический вестник , 52 , 281–302. [1]
- ^ Совет по стандартам подотчетности в маркетинге (MASB) одобряет это определение в рамках своего текущего проекта «Общий язык в маркетинге» .
- ^ «Там, где прогностическая валидность может не добиться успеха» .
- ^ «Работают ли психометрические тесты?» .
- ^ Американская ассоциация исследований в области образования, Американская психологическая ассоциация и Национальный совет по измерениям в образовании. (1999). Стандарты образовательного и психологического тестирования . Вашингтон, округ Колумбия: Американская ассоциация исследований в области образования.
- ^ Мессик, С. (1995). Валидность психологической оценки: проверка выводов на основе ответов и действий людей как научное исследование значения оценок. Американский психолог, 50 , 741–749.