Исследуется диагностическая валидность, которая отражает способность теста дифференцировать испытуемых по изучаемому признаку. Реальная валидность раскрывается только в результате накопления значительного опыта работы с тестом.
На основе рассчитанных в ходе стандартизации вторичных показателей (стенов), по выбранным шкалам опросников каждый студент составляет описание своих индивидуально-психологических особенностей (предполагая, что используемая выборка является выборкой стандартизации). Составленный таким образом индивидуальный портрет отражает только возможности опросников (точнее – отдельных шкал опросников) и может в чём-то соответствовать или не соответствовать реальным психологическим чертам и качествам человека.
Для получения доказательств адекватности составленного по результатам опроса портрета испытуемого с его реальным образом (или получения доказательств в пользу валидности диагностических шкал) проводится сравнение данного портрета с психологическим описанием реального поведения. Данное описание может быть составлено с использованием разнообразных источников информации (на основе наблюдений за испытуемым, мнений других людей и пр.).
В ходе сопоставления отдельных черт портрета личности, полученного на основе диагностических методик и реального поведения испытуемого, выявляются характерные значимые несоответствия, следствием которых является отсутствие валидности соответствующих шкал опросников. Таким образом, выявляются шкалы, валидность которых для конкретного испытуемого подтверждается (или, иными словами, укрепляется доверие экспериментатора к диагностической возможности шкалы).
В целом, процедура оценки шкал на их диагностическую валидность (отражающую способность теста дифференцировать испытуемых по изучаемому признаку) осуществляется по следующей схеме:
– в первую очередь оцениваются те шкалы, по которым стены выходят за диапазон нормы в ту или иную сторону (3, 2, 1 или 8, 9, 10 стенов), и по которым, во многом, составляется индивидуальный портрет испытуемого (акцентуации характера и т. п.). В этом случае осуществляется сравнение стенов по шкалам, близким по психологическому содержанию (например, экстраверсия, сила нервной системы, подвижность нервных процессов, уравновешенность нервных процессов и др.). Экспериментатор определяет шкалы, которым он «доверяет» и шкалы, которым он «не доверяет» (то есть, те шкалы, по которым, в данном конкретном индивидуальном случае, подтверждается или не подтверждается валидность теста);
– во вторую очередь, сопоставляются шкалы, по которым оценки испытуемого не вышли за пределы нормы, но являются крайними значениями (4 и 7 стенов). Совпадение стенов по шкалам между собой и совпадение их психологического описания с реальным образом личности также являются основанием подтверждения валидности теста в данном конкретном случае;
– в третью очередь должны быть оценены остальные шкалы выбранных опросников (со стенами 5 и 6). Однако, учитывая неопределённость в степени выраженности психологических характеристик, стоящих за этими шкалами, условно принимается решение об их диагностической невалидности для конкретного испытуемого.
Лабораторная работа № 2 (часть 1, часть 2). «Технологии валидизации»
[8]Оценка конструктной валидности (часть 1 лабораторной работы № 2).
Цель работы:
Оценка конструктной валидности каждой данной конкретной тестовой психодиагностической методики.
Методические указания
Процедура работы:
В качестве исследуемого теста-опросника выбран «Опросник ФДСИ» В.М. Русалова.
Этапы проведения работы.
1. Выбор методик с известным конструктным материалом. В качестве теста-опросника с известным конструктным содержанием выбран опросник для выявления черт личности 16-PF Кеттелла Р.
2. Проведение опроса на одной и той же выборке респондентов.
3. Обработка результатов. Получение первичных показателей по шкалам опросников.
4. Расчёт корреляций шкал первого опросника со всеми шкалами второго опросника (с использованием стандартных статистических компьютерных программ или электронных таблиц «Excel»)
5. Формирование корреляционной таблицы (матрицы взаимных корреляционных связей всех шкал первого и второго опросника).
6. Для каждой шкалы тестируемого опросника проводится выявление шкал базового опросника с которыми имеются значимые корреляции. Психологический конструкт по шкалам, с которыми выявлены такие корреляции, принимается в качестве конструкта для исследуемой шкалы опросника.
7. Осуществляется сравнение теоретически предполагаемого конструкта исследуемого опросника с конструктом, полученным в ходе исследования. При этом делаются три возможных вывода.
– Теоретический конструкт совпадает с реальным.
– Теоретический конструкт не совпадает с реальным (при наличии корреляции).
– Вообще отсутствуют корреляции данной шкалы со шкалами базового опросника.
Оценка критериальной валидности (часть 2 лабораторной работы № 2).
Цель работы:
Оценка конструктной валидности для заданной методики. Метод контрастных групп.
Методические указания
Процедура работы:
Валидизация будет осуществляться методом контрастных групп. При этом в качестве критерия используется одно из личностных качеств, выявленных в методике, например «общительность – замкнутость», – фактор А по тесту-опроснику Р. Кеттелла. Подбирается группа студентов с высокими баллами по данной шкале и группа студентов с низкими (полярными) баллами, то есть с выраженным или невыраженным исследуемым качеством.
Данные группы проходят тестирование по новой методике, критериальная валидность которой исследуется. Рассчитывается среднее значение балла, полученного в первой и во второй группах и оценивается т. н. доверительная вероятность полученного различия между этими двумя средними значениями. Оценка осуществляется при помощи статистического теста, – t-критерия Стьюдента.
Анализ и обсуждение результатов:
В том случае, если доверительная вероятность меньше 0,05, – то делается вывод о том, что различия между двумя средними показателями достоверны, и новая методика, в связи с этим, обладает критериальной валидностью, то есть, – диагностирует степень выраженности того психологического качества личности, по которому она проверялась и, главное, для измерения которого она предназначена.
Тематический раздел № 6
«Структура психодиагностического обследования»[9] Лабораторные работы №№ 3–4
Лабораторная работа № 3 (часть 1, часть 2). «Рисуночные проективные методики»
Методика «Автопортрет» (часть 1 лабораторной работы № 3).
Цель работы:
Знакомство с методикой «Автопортрет» с целью выявления особенностей личности и использование полученного результата для перекрёстной валидизации с другими диагностическими методиками (апробация процедур валидизации).
Методические указания
Процедура работы и обработка результатов.
Перед началом работы студенты знакомятся с инструкцией по выполнению рисунка и выполняют рисунок. Каждый студент осуществляет обработку своего рисунка в соответствии с нижеследующими указаниями, а также пользуясь работой Романовой Е.С. Графические методы в практической психологии. – СПб.: Речь, 2001.
Процедура перекрёстной оценки валидности принципиально предполагает прямое соотнесение между собою различных моделей: моделей обработки данных рисуночного теста (например, тип по Г. Риду), психологических моделей типов личности (например, тип по К.Г. Юнгу). Так же, процедура перекрёстной оценки валидности допускает возможность соотнесения отдельных признаков личности (в моделях личности Р. Кеттелла, К. Леонгарда и др.) и признаков рисунка, выделенных в рисуночных тестах.