Глава з i Психометрические основы психодиагностики: основные этапы конструирования теста

Задача методики заключается не только в том, чтобы научиться измерять, но и в том, чтобы видеть, мыслить, связывать...

Л. С. Выготский

Абсурд может найти свое выражение как в словесной, так и в цифровой форме. Однако знание логики является надежной гарантией от некритического принятия словесного абсурда, а знание статистики представляет собой лучшую защиту от абсурда цифрового.

Дж. Гласе, Дж. Стэнли

В многочисленных учебниках и пособиях по психодиагностике, изданных на разных языках, всегда присутствует глава, посвященная статистическим методам, наиболее широко используемым при разработке тестов, их стандартизации, а также для оценки надежности и валидности. Кроме того, сегодня существует множество легкодоступных работ по математической статистике для психологов. Исходя из этого мы не сочли необходимым повторение таких азбучных для психолога статистических понятий, как «нормальная кривая», «мода», «медиана» и т. д. Напомнить читателю об основных психометрических процедурах мы решили на примере основных этапов конструирования теста, а также рассмотрения конкретного случая изучения надежности русскоязычной версии одного из весьма популярных у нас опросников — опросника 16 факторов Кеттелла.

Как известно, психологический тест может быть охарактеризован как эффективный в том случае, если он удовлетворяет следующим основным условиям:

1) использование шкалы интервалов;

2) надежность;

3) валидность;

4) дискриминативность;

5) наличие нормативных данных.

Разумеется, конструирование тестов, относящихся к разным диагностическим подходам (о подходах см. гл. 2), име-

3.1. Определение количества заданий (спецификация теста) 1 51

ет, несмотря на необходимость соблюдения общих требований к этому процессу, определенную специфику. В этой главе мы обратимся к рассмотрению основных проблем конструирования личностных опросников, которые относятся к наиболее употребительным инструментам психологической диагностики.

Обычно выделяются три главные стратегии в конструировании личностных опросников: дедуктивная, индуктивная и экстернальная (Burisch, 1984). Дедуктивная или содержательная стратегия базируется на теоретических представлениях о личности, ее структуре и функционировании. Разработчик теста конструирует задания, с помощью которых, как предполагается, будет оцениваться определенный психологический конструкт. Вторая стратегия — индуктивная, предполагает использование факторного анализа или других статистических процедур, основанных на корреляционных связях. Главная особенность индуктивной стратегии состоит в том, что исследователь как бы позволяет данным говорить самим за себя. Экстернальная стратегия эмпирична по своей сути и основывается на сравнении контрастных групп. Ни одна из названных стратегий не может быть рассмотрена как предпочтительная. Вполне естественно, что многие разработчики личностных опросников комбинируют эти стратегии, стремясь, например, сочетать возможности оценки личности, достигаемые дедуктивной стратегией, с широким использованием разнообразных процедур анализа заданий (индуктивная стратегия).

3.1. Определение количества заданий (спецификация теста)

Прежде чем приступать к созданию теста, необходимо четко знать, для чего он нужен. Ясный ответ на этот вопрос — необходимое условие для работы. Поэтому первым шагом будет формулирование цели будущего теста. После этого следует обратиться к разработке спецификации будущего теста. Наиболее удобно сделать это в виде таблицы, в которой по горизонтали будут располагаться содержательные области, которые предполагается измерять, а по вертикали — их манифестации, или пути, по которым содержательные области могут проявляться.

Например, при конструировании «опросника супружеского статуса» Дж. Руст и С. Голомбок (Rust, Golombok, 1988) основывались на опросе экспертов, в качестве которых выступали семейные терапевты и консультанты, а также на данных, полученных от клиентов этих специалистов. Экспертов просили назвать те области взаимоотношений между мужчиной и женщиной, которые они полагали наиболее важными для гармоничного брака. Информация от клиентов позволила обнаружить те проблемные зоны семейной жизни, в которые супруги хотели бы внести изменения. На этой основе были выделены такие содержательные области, как «совместные интересы и степень зависимости—независимости», «вербальная и невербальная коммуникации», «доверие и уважение» и др. Ясное понимание цели будущего теста, естественно, облегчает построение перечня того, что предстоит измерять. При спецификации манифестаций важно обеспечить выделение различных форм их реализации. Так, при конструировании вышеупомяну-

152 Глава 3. Психометрические основы психодиагностики: основные этапы...

того опросника «установки и чувства, проявляющиеся в отношениях» рассматривались как манифестации «вербальных и невербальных коммуникаций» между супругами.

Из практических соображений обычно по каждой оси разрабатывается от 4 до 7 категорий. Меньшее число категорий часто приводит к созданию слишком узкого опросника, а большее может сделать обременительным процесс конструирования опросника. В итоге получается своего рода решетка, количество ячеек в которой будет равно количеству планируемых для изучения параметров, умноженному на количество их поведенческих манифестаций (табл. 3.1).

Таблица 3.1

Спецификация будущего опросника

Манифестации

Содержательные области

При разработке опросников обычно считают, что решетка размером от 16 до 25 ячеек (например, 4x4, 4x5, 5x4 или 5x5) считается идеальной для той длины теста, который вполне реально сконструировать, предъявить и обработать.

Далее необходимо определить, сколько заданий, например вопросов, должно быть создано для каждой из ячеек. При решении этой задачи следует руководствоваться тем, насколько важным представляется исследователю измерение одного из параметров сравнительно с другим или другими. В решетке, приведенной в табл. 3.2 (Rust, Golombok, 1989), допускается, что содержательным областям, обозначенным как Л и В, следует приписать 40-%-ный вес, а Си D — 10-%-ный. В то же время каждой манифестации А, В, С и D приписывается 25-%-ный вес. Необходимо обратить внимание на то, что в целом процентный вес всех содержательных областей (по горизонтали) и всех манифестаций (по вертикали) должен составлять 100 %. Такое расположение процентных весов подскажет, какую часть от всех заданий следует создать для каждой ячейки. Следующий шаг состоит в том, чтобы решить, какое количество заданий должно быть включено в тест. При этом необходимо учитывать такие факторы, как размер решетки и время, предполагаемое для выполнения заданий. Хорошо известно, что в определении количества заданий перед исследователем возникает дилемма: обеспечение, с одной стороны, надежности теста, что требует увеличения заданий, а с другой стороны — минимизация количества заданий для обеспечения эффективной работы испытуемого с ними, подразумевающей прежде всего поддержание концентрации внимания в ходе обследования. Так, для достижения удовлетворительной надежности опросника требуется не менее 20 заданий, выполнение которых обычно занимает не более 10 минут. Наконец, важную роль в определении количества заданий теста играют особенности того контингента, который предполагается обследовать. Обыч-

3.2. Разработка заданий 1 53

но при проводимом разработчиками пилотажном исследовании количество заданий предварительного варианта теста должно быть по крайней мере на 50 % больше числа тех, которые будут включены в окончательную версию.

После того как определен процентный вес каждой из ячеек решетки и установлено общее количество заданий для пилотажной версии теста, нетрудно подсчитать, сколько заданий должно быть разработано для каждой ячейки. Нижеприведенная решетка (Rust, Golombok, 1989) содержит то количество заданий для каждой ячейки, которое необходимо для пилотажного исследования с помощью опросника, состоявшего из 80 вопросов (табл. 3.2).

Таблица 3.2

⇐ Предыдущая 15 16 17 18 192021 22 23 24 Следующая ⇒