2) экспертные методы, или методы
понимания (по традиции, они часто фигурируют
под названием «клинические методы»).
Относятся проективные и диалоговые методы.
Экспертные методы в большей
степени рассчитаны на профессиональный
опыт, психологическую интуицию самого
психодиагноста. Эти методы оказываются
незаменимыми везде, где не разработаны
(или неизвестны) стандартизованные процедуры.
Если эти методы применяет эксперт высокой
квалификации, они оказываются более надёжным
средством в случае индивидуальной диагностики.
Кроме того, не следует забывать, что глубокий
экспертный анализ - необходимый первичный
этап в разработке всякой стандартизованной
процедуры. По мере стандартизации экспертные
методы также подлежат количественному
обоснованию.
Специфика психодиагностических
процедур, по сравнению с обычными физическими
измерениями, заключается в том, что здесь
сама процедура измерения взаимодействует
с «объектом» измерения, более того, рождается
в этом взаимодействии, зависит от его
характеристик и «портится», если эти
характеристики меняются. В физических
измерениях объект в значительных пределах
пассивен и не влияет со своей стороны
на физический прибор. Человек, напротив,
всегда активен и может применять такую
тактику, которую психодиагност при разработке
методики вовсе не предусматривал. Диапазон
«срабатывания» теста довольно узок и
фактически сводится к той популяции,
на которой происходила эмпирико-статистическая
разработка теста, обеспечивающая его
надежность, валидность, репрезентативность
тестовых норм. Узость этого диапазона
можно сравнить со свойствами пружинного
динамометра из мягкого металла: достаточно
тяжелый груз, выходящий по весу за допустимые
пределы, порождает в пружине необратимые
деформации и нарушает изометричность
шкалы.
Для корректного применения
теста на новой популяции или в новых целях (от целей зависит установка
испытуемых в ситуации тестирования) психолог
должен провести серию предварительных
психометрических экспериментов, направленных
на перепроверку надежности, валидности
и репрезентативности теста в новых условиях.
Строгое следование требованиям
психометрики особенно необходимо при переносе тестов, разработанных за рубежом.
В условиях недостаточной разработки
отечественных методик многие психологи
склонны рассматривать в качестве готовых
зарубежные методики, тогда как реальные
языковые и социокультурные различия
бывают столь сильными, что полная эмпирическая
адаптация зарубежной методики по своему
объему не уступает разработке оригинальной
методики. Это прежде всего относится
к шкалам ценностных ориентации, к характерологическим
опросникам и другим личностным тестам.
9 Понятие о репрезентативности
тестовых норм.
Порядок работы
по проверке репрезентативности
полученных результатов.
Репрезентативность – это свойство выборочной совокупности
представлять характеристики генеральной
совокупности. Репрезентативность означает,
что распределение признака в выборочной
совокупности соответствует его реальному
распределению – генеральной совокупности.
Репрезентативность(от фр. – показательный) – одна из ключевых психометрических характеристик теста. Она свидетельствует о возможности
использования тестовых норм, выработанных на выборке стандартизации
при разработке теста, для всей генеральной
совокупности испытуемых, для которых
данный тест предназначен.
Репрезентативность означает,
что с некоторой определенной статистически
погрешностью можно считать, что представленное
в выборочной совокупности распределение
изучаемых психических свойств соостветствует
их реальному распределению.
Для оценки репрезентативности проводится анализ распределения
тестовых баллов, полученных при пилотажном
тестировании на выборке стандартизации.
Обычно при получении кривой нормального
распределения делается вывод о том, что
тестовые обладают репрезентативностью.
Для проверки нормальности распределения
используются различные статистические
критерии, например критерий Колмогорова-Смирнова.
Но нормальность не является необходимым
условием репрезентативности. Репрезентативность
тестовых норм может достигаться и в отсутствие
нормального распределения. Если распределение
тестовых баллов отличается от нормального,
то для проверки репрезентативности необходимо
решить вопрос об устойчивости тестовых
норм. Для этого производится расщепление
выборки пополам и сравнение распределений
тестовых баллов в первой и второй половине
выборки. Если не выявлено различий, то
распределение тестовых баллов является
устойчивым, а тестовые нормы репрезентативными.
Репрезентативность тестовых
норм - это возможность использования
тестовых норм, полученных по результатам
выборочного тестирования, для оценки
генеральной совокупности испытуемых.
Тест репрезентативен тогда, когда использованная
при его разработке выборка обоснована
и присущие ей характеристики достаточно
равномерно распределены в генеральной
совокупности. Чем шире обследованная
выборка, чем точнее она отражает структуру
генеральной совокупности (по полу, возрасту,
уровню образования и т.п.), тем выше репрезентативность
тестовых норм.
Репрезентативность
позволяет классифицировать результаты
тестирования - выделять высокий, средний
и низкий уровни выраженности психических
свойств. Если тест не репрезентативен,
то предлагаемые им оценки выраженности
свойств будут неприменимы за пределами
выборки стандартизации.
P.S.
Генеральная совокупность – это множество элементов, объединенных
общей характеристикой, которая указывает
на принадлежность их к определенной системе.
Выборочные совокупности – часть элементов генеральной совокупности.
Нормальное распределения – это такое распределение,
когда средние значения встречаются чаще
(68%), крайние – редко (по 18%).
Норма теста – средний диапазон значений на шкале
измеряемого свойства характерный для
испытуемых определенной группы.Их меняют
каждые 5 лет.
Стандартизация – это деятельность по установлению
норм. Например, если тест проходил
стандартизацию на студентах, то перед
его применением на школьниках следует
вначале произвести рестандартизацию,
то есть снова собрать тестовые нормы
на представительной выборке, сформированной
именно из школьников. В противном случае
диагностические выводы, произведенные
по неадекватным тестовым нормам, будут
неточны и неверны.
Выборка - группа людей.
Операции по анализу
распределения тестовых баллов, построению
тестовых норм и проверке их репрезентативности.
1. Сформировать выборку стандартизации
(случайную или стратифицированную
по какому-либо параметру) из той
популяции, на которой предполагается
применять тест.
Провести на каждом испытуемом из выборки
тест в сжатые сроки (чтобы устранить иррелевантный
разброс, вызываемый внешними событиями).
Интервал определяется величиной: размах,
деленный на количество интервалов равнозначности
(градаций шкалы).
3. Построить распределение частот
тестовых баллов (для заданных
интервалов) в виде таблицы и
в виде соответствующих графиков
гистограммы и кумуляты.
4. Произвести расчет среднего
и стандартного отклонений, а
также асимметрии и эксцесса
с помощью компьютера. Проверить
гипотезы значимости асимметрии
и эксцесса. Сравнить результаты
проверки с визуальным анализом
кривых распределения.
5. Произвести проверку нормальности
одного из распределений с помощью
критерия Колмогорова (при n<200 с помощью
более мощных критериев) или произвести
процентильную нормализацию с переводом
в стандартную шкалу, а также линейную
стандартизацию и сравнить их результаты
(с точностью до целых значений).
6. Если совпадения не будет
– нормальность отвергается, тогда
произвести проверку устойчивости
распределения расщеплением выборки
на 2 случайные половины. При совпадении
нормализованных баллов для половины
и для целой выборки, можно
считать нормализованную шкалу
устойчивой.
7. Проверить однородность распределения
по отношению к варьированию
заданного популяционного признака
(пол, профессия и т.п.) с помощью
критерия Колмогорова. Построить в
совмещенных координатах графики гистограммы
и кумуляты для полной и частной выборок.
При значимых различиях разбить выборки
на разнородные подвыборки.
8. Построить таблицы процентильных
и нормализованных тестовых норм
(для каждого интервала равнозначности
«сырого балла»). При наличии разнородных
подвыборок для каждой подвыборки должна
быть своя таблица.
9. Определить критические точки
(верхнюю и нижнюю) для доверительных
интервалов (на уровне значимости
< 0,01) с учетом стандартной ошибки
в определении среднего значения.
10. Обсудить конфигурацию полученных
распределений с учетом предполагаемого
механизма решения того или
иного теста.
11. В случае негативных результатов
– отсутствия устойчивых норм
для шкалы с заданным числом
градаций (с заданной точностью
прогноза критериальной деятельности)
– осуществить обследование более широкой
выборки или отказаться от плана использования
данного теста.
.
10 Понятие валидности
в психодиагностике. Основные типы валидности.
Деятельность психолога по проверке валидности
теста.
Валидность (от англ. valid – «действительный,
пригодный, имеющий силу»)
Валидность теста – понятие, указывающее нам, что
тест измеряет и насколько хорошо он это
делает (А. Анастази). Валидность по своей сути
– это комплексная характеристика, включающая,
с одной стороны, сведения о том, пригодна
ли методика для измерения того, для чего
она была создана, а с другой стороны, какова
её действенность, эффективность, практическая
полезность.
По этой причине не существует какого-то
единого универсального подхода к определению
валидности. В зависимости от того, какую
сторону валидности хочет рассмотреть
исследователь, используются и разные
способы доказательства. Другими словами,
понятие валидности включает в себя разные
ее виды, имеющие свой особый смысл. Проверка валидности методики
называется валидизацией.
Валидность – соответствие конкретного
исследования принятым стандартам (безупречному
эксперименту).
Валидность в первом ее понимании имеет
отношение к самой методике, т.е. это валидность
измерительного инструмента. Такая проверка
называется теоретической валидизацией.
Валидность во втором ее понимании уже
относится не столько к методике, сколько
к цели ее использования. Это прагматическая
валидизация.
При теоретической валидизации
исследователя интересует само свойство,
измеряемое методикой.
Так как для определения теоретической
валидизации тяжело найти какой-нибудь
независимый критерий, лежащий вне методики,
и поэтому раньше принимались на веру
голословные утверждения о валидности
этой методики. Так как теоретическая
валидизация направлена на доказательство
того, что методика измеряет именно свойство,
которое она должна измерить. Для теоретической
валидизации кардинальной проблемой является
отношение между психологическими явлениями
и их показателями, по средствам которой
эти психологические явления пытаются
познать. Она показывает, что замысел автора
и результаты методики совпадают.
Не столь сложно осуществить теоретическую
валидизацию новой методики, если для
измерения данного свойства уже имеется
методика с известной, доказанной валидностью.
Наличие корреляции между новой и аналогичной
старой методиками указывает на то, что
разработанная методика измеряет то же
психологическое качество, что и эталонная.
Для проверки теоретической валидности
важно, с одной стороны, установить степень
связи с родственной методикой (конвергентная
валидность), а с другой – отсутствие этой
связи с методиками, имеющими другое теоретической
основание (дискриминантная валидность).
Важную роль для понимания того, что методика
измеряет, играет сопоставление ее показателей
с практическими формами Деятельности.
Важно чтобы методика была проработана
в теоретическом плане.
Прагматическая валидизация
Проверяется практическая эффективность,
значимость, полезность методики, так
как методикой можно пользоваться только
тогда, когда доказано, что измеряемое
свойство проявляется в определенных
видах Деятельности.
Для проверки прагматической валидности
используется независимый внешний критерий – показатель
проявления изучаемого свойства в повседневной
жизни. В качестве такого критерия могут
выступать успеваемость (для тестов способностей
к обучению, тестов достижений, тестов
интеллекта), производственные достижения
(для методик профессиональной направленности),
эффективность реальной Деятельности
– рисования, моделирования и так далее
(для тестов специальных способностей),
субъективные оценки (для тестов Личности).