Понятие валидности

2) Эффект последовательности - влияние одного из условий  эксперимента на следующее за ним.

3) Эффект Розенталя (Пигмалиона) - психологический феномен, заключающийся  в том, что ожидания личностью  реализации пророчества во многом  определяют характер её действий  и интерпретацию реакций окружающих, что и провоцирует самоосуществление  пророчества. Может проявиться  на любой стадии исследования  и в любой науке: и при  проведении процедуры эксперимента, и при обработке результатов,  и при интерпретации результатов исследования, и т. д.

4) Эффект Хоторна - это  условия, в которых новизна,  интерес к эксперименту или  повышенное внимание к данному  вопросу приводят к искажённому,  зачастую слишком благоприятному  результату. Участники эксперимента  действуют иначе, более усердно,  чем обычно, только благодаря  осознанию того, что они причастны к эксперименту.

Хоторнский эффект имеет  двоякую трактовку: позитивные изменения  в поведении людей, вызванные  оказанным им вниманием, которое  сами люди истолковывают как благожелательное участие, а в экспериментальной  психологии — изменения в наблюдаемом  явлении, происходящие вследствие самого факта наблюдения.

5) Эффект плацебо - вещество  без явных лечебных свойств,  используемое в качестве лекарственного  средства, лечебный эффект которого  связан с верой самого пациента  в действенность препарата. Иногда  капсулу или таблетку с плацебо  называют пустышкой. В качестве  вещества для плацебо часто используют лактозу.

Кроме того, термином эффект плацебо называют само явление улучшения  здоровья человека благодаря тому, что он верит в эффективность  некоторого воздействия, в действительности нейтрального. Кроме приёма препарата  таким воздействием может быть, например, выполнение некоторых процедур или упражнений, прямой эффект которых не наблюдается. Степень проявления плацебо-эффекта зависит от внушаемости человека и внешних обстоятельств «лечения» — например, от размера и яркого цвета таблетки, степени доверия врачу, авторитета клиники.

6) Эффект аудитории (эффект  Зайонца, эффект фасилитации)  — влияние постороннего присутствия  на поведение человека. Этот эффект  необходимо учитывать при проведении  психологических исследований.

7) Эффект первого впечатления  — влияние мнения о человеке, которое сформировалось у субъекта  в первые минуты при первой  встрече, на дальнейшую оценку  деятельности и личности этого человека.

Этот эффект позволяет  выносить быстрое и обобщенное впечатление  о вновь встреченном человеке и использовать это впечатление  для построения дальнейшего общения. Первое впечатление может формироваться  субъектом намеренно или непроизвольно. Факторами этого впечатления  могут выступать особенности  внешнего облика и поведения человека, о котором субъект формирует  мнение. Первое впечатление зависит  в большой степени и от личностных особенностей самого воспринимающего  субъекта и поэтому может быть более обобщенным или конкретным, исчерпывающим или поверхностным, доброжелательным или негативным и т. д. [5].

8) Эффект Барнума (эффект  Форера, эффект субъективного подтверждения)  — общее наблюдение, что люди  крайне высоко оценивают точность  таких описаний их личности, которые,  как они предполагают, созданы  индивидуально для них, но которые  на самом деле неопределённы  и достаточно обобщены, чтобы  их можно было с таким же  успехом применить и ко многим  другим людям. Эффектом Барнума  многие учёные частично объясняют  феномен широкой популярности  астрологических гороскопов, хиромантии и других псевдонаук.

9) Сопутствующее смешение  — на зависимую переменную  обычно влияют различные нерелевантные  стимулы, от которых принципиально  невозможно избавиться. В задачи  исследователя входит определение  степени влияния этих стимулов на зависимую переменную, чтобы быть уверенным в том, какое влияние на неё оказывает изменение независимой переменной, интересующей экспериментатора [4].

10) Факторы выборки [1]:

- неправильная селекция (неэквивалентность групп по составу,  вызывающая систематическую ошибку в результатах);

- статистическая регрессия  (частный случай ошибки селекции, когда группы отбираются на основе крайних показателей);

- экспериментальный отсев  (неравномерное выбывание испытуемых  из сравниваемых групп, приводящее  к неэквивалентности групп по составу);

- естественное развитие (общее свойство живых существ к изменению; ср. онтогенез)

И др.

Приведем пример нарушения  внутренней валидности. Допустим, мы хотим  проверить лекарство, от которого люди будут становиться выше. Допустим, для своих исследований мы отбираем в качестве испытуемых 13-летних подростков, измеряем их рост, и даём им лекарство. Два года спустя мы возвращаемся к  теперь уже 15-летним детям и фиксируем  их текущий рост. Несомненно то, что  они стали выше, но без сомнения и то, что мы не можем сделать  из этого вывод, что эффект роста  был вызван лекарством, так как  мы не учли в своём теоретическом  эксперименте естественных процессов  взросления. Здесь внутренняя валидность нарушена следующим образом: мы не учли побочного для нашего исследования влияния других (в данном случае — очевидных) факторов, тогда как надо было их учитывать.

Внутренняя валидность включает в себя по крайней мере пять элементов:

1) Концептуальная (теоретическая)  валидность — теоретическое обоснование  возможности измерения исследуемого  свойства данным психодиагностическим средством;

2) Содержательная валидность — степень репрезентативности содержания заданий теста измеряемой области психических свойств, т.е. характеризует тест по степени его соответствия предметной области;

Согласно А.Анастази, содержательная валидность означает систематическую  проверку содержания теста, с тем  чтобы установить, соответствует  ли оно репрезентативной выборке  измеряемой области поведения. Такая  процедура валидизации обычно применяется для тестов достижений.

Содержательная валидность необязятельно означает полноту  отображения изучаемой дисциплины. Например, для нормативно-ориентированного теста, полнота охвата всех тем может  быть меньше, чем для критериально-ориентированного. Здесь важнее глубина проработки отдельных подтем, вопросов. Это  позволит с большей эффективностью дифференцировать обучаемых. Под содержанием  понимается не только совокупность фактов, понятий, терминов, но и умение применять  имеющиеся знания, оценивать информацию, выполнять действия, соответствующие  верхним уровням таксономии Блума.

Для обеспечения содержательной валидности необходим детальный  анализ учебных программ, на основании  чего составляется спецификация теста. Спецификация содержит перечень учебных  тем, их важность, количество и тип  тестовых заданий. Оценка содержательной валидности выполняется экспертом в данной предметной области.

Согласно П.Клайну содержательная валидность определяется следующим образом:

1) указать категорию лиц,  для которой предназначен тест;

2) составить список знаний, умений, навыков, подлежащих тестированию;

3) выполнить внешнюю экспертизу  полученного списка на предмет его полноты и обоснованности;

4) на основе списка составить перечень заданий;

5) выполнить внешнюю экспертизу полученных заданий;

6) после проверки преобразовать  их в задания в тестовой  форме. В дальнейшем, на этой  основе создать тестовые задания,  образующие тест, который будет содержательно валидным.

 

3) Конструктная валидность — степень репрезентативности исследуемого психологического конструкта в результатах теста ("...на сколько результаты теста рассматриваются в качестве меры исследуемого психологического конструкта — фактора, свойства" – А. Анастази).

Конструктная валидность, обоснованная Л.Кронбахом в 1955г., характеризуется  способностью теста к измерению  такой черты, которая была обоснована теоретически (как теоретический  конструкт). Когда сложно найти адекватный прагматический критерий, может быть выбрана ориентация на гипотезы, сформулированные на основе теоретических предположений  об измеряемом свойстве. Подтверждение  этих гипотез свидетельствует о  теоретической обоснованности методики. Сначала необходимо, насколько возможно полно, содержательно описать конструкт, для измерения которого предназначен тест. Это достигается за счет формулирования гипотез о нем, предписывающих, с  чем данный конструкт должен коррелировать, а с чем не должен. После чего данные гипотезы проверяются. Это наиболее эффективный способ валидизации  для личностных опросников, для которых  установление единственного критерия их обоснованности является затруднительным.

Конструктная валидность является наиболее комплексным и  сложным видом валидности. Вместо одного результата (прежде всего прагматического) необходимо учитывать множество (чаще всего собственно психологических). Конструктная валидность имеет отношение  к попыткам обозначения любых  аспектов эксперимента. Опасности нарушения  конструктной валидности заключаются  в неправильном обозначении причины и эффекта с помощью абстрактных терминов, терминов, взятых из обыденного языка или формальной теории.

4) Операциональная валидность  — степень репрезентативности  в конкретных экспериментальных  операциях реальных операциональных  условий психической деятельности;

Операциональная валидность — частный случай внутренней валидности, степень соответствия методики и  плана эксперимента проверяемой гипотезе.

Операциональная валидность определяет степень соответствия используемой экспериментальной методики (экспериментальных  утверждений) теоретическим положениям, которые положены в основу организации  и проведения данного эксперимента.

Частью операциональной  валидности можно считать конструктную валидность [1].

5) Эмпирическая валидность  — совокупность характеристик  валидности теста, полученная  сравнительным статистическим способом  оценивания, среди них очевидная  и критериальная виды валидности.

Идея эмпирической валидности заключается в определении способности  теста служить индикатором или  предсказателем строго определенной психической  особенности или формы поведения  человека. Для измерения эмпирической валидности теста вычисляется коэффициент  корреляции тестового результата с внешним критерием — R(X,T).

Очевидная валидность —  это представление о тесте, сфере  его применения, результативности и  прогностической ценности, которое  возникает у испытуемого и  другого лица, не располагающего специальными сведениями о характере использования и целях методики.

Она означает то впечатление  о предмете измерения, которое формируется  у испытуемого при знакомстве с инструкцией и материалом теста. Очевидная валидность играет важную роль в процессе тестирования, поскольку  именно она в первую очередь определяет отношение испытуемых к обследованию. В.А. Аванесов приводит пример отказа от выполнения теста испытуемыми из-за отсутствия у теста очевидной валидности. Во время социологического опроса моряков рыболовного флота он столкнулся со случаем отказа заполнять анкету под предлогом того, что анкета составлена "не для моряков", в ней нет вопросов, относящихся к морякам, "на морские темы". Если бы опросник содержал "морские термины", то он бы казался "своим" и вызывал больше доверия у испытуемых. Именно в силу этого обстоятельства очевидную валидность иногда называют также доверительной валидностью.

Критериальная валидность —  комплекс характеристик, включающий текущую  и прогностическую валидности методики и отражающий соответствие диагноза и прогноза определенному кругу  критериев развития измеряемого  свойства. Критериальная валидность оценивается величиной связи, корреляции показателя теста с "внешним критерием".

Текущая (диагностическая  или конкурентная) валидность —  мера способности теста дифференцировать испытуемых по изучаемому признаку. Текущая  валидность теста определяется исходя из его "трудности" и меры изменчивости измеряемого признака.

Определяется с помощью  внешнего критерия, по которому информация собирается одновременно с экспериментами по проверяемой методике. Другими  словами, собираются данные, относящиеся  к настоящему времени успеваемость в период испытания, производительность в этот же период и т д. С ним  коррелируют результаты успешности по тесту.

Трудностью теста называется отношение количества решенных и нерешенных заданий методики [2]. Уровень трудности характеризуется коэффициентом трудности (ТТ), который вычисляется по формуле:

ТТ = (NP / NH) 100%; (1)

где NP – количество решенных заданий теста; NH – количество нерешенных заданий теста.

Оптимальная «трудность теста» должна колебаться в пределах 50%, однако, как признают многие психологи, достичь  такого положения крайне затруднительно. Трудность всей тестовой батареи  должна колебаться в пределах 50%, а  трудность входящих в неё тестов – находится в пределах «умеренного  разброса». Видимо этот «умеренный разброс» будет равен d, т.е. 16 %. (Следует также  учитывать 5% ошибку вычислений).