Расчёт надёжности по формуле Рюлона.

⇐ ПредыдущаяСтр 3 из 4Следующая ⇒

А) Есть два способа проверки надёжности двух эквивалентных половин теста: С помощью коэфициента корреляции и по формуле Рюлона.

Б) Нужно разделить вопросы (пункты) теста(шкалы) на 2 равные по количеству пунктов половины случайным образом (например, чётные вопросы – в одну группу, а нечётные – в другую.

В) Затем посчитать дисперсию разностей результатов одной и другой половины.

Г) Затем посчитать дисперсию всего теста (шкалы)

Д) Затем полученные значения подставить в следующую формулу:

Где: S_d – дисперсия различий результатов каждого испытуемого по первой и второй половине;

S_х – дисперсия результатов всего теста.

Формула расчёта дисперсии:

Чем выше значение r, тем выше показатель надёжности теста. Минимальное удовлетворительное значение r = 0, 7

Виды надёжности.

1. Индекс сложности заданий (пунктов). Показывает частоту встречаемости ответов, совпадающих с ключём. Таких ответов по каждому пункту в нормативной выборке должно быть не менее 20% и не более 80%. В противовном случае пункт признаётся непригодным, поскольку он недостаточно хорошо дифференцирует испытуемых. Идеальное соотношение ответов: 50% на 50%.

4. Индекс дискриминативности заданий. Обозначает степень (силу) связи каждого пункта с итоговым показателем. Расчитываватся как коэфициент корреляции пункта с итоговым показателем. Чем выше значение коэфициента, тем лучше пункт «вписывается» в соответствующую шкалу. Минимальное допустимое значение = 0, 2. В противном случае делается вывод, что этот пункт измеряет какое-то другое свойство, не имеющее отношения к разрабатываемой шкале.

3. Ретестовая нажёжность. На одной и той же выборке проводят диагностику с помощью одного и того же теста с интервалом от 2-х недель до полугода. Различия в полученных результатах должны быть минимальными. Процедура сравнения результатов производится с помощью корреляционного анализа. Чем выше полученное значение коэфициента корреляции, тем надёжней (устойчивей во времени) признаётся методика. Минимальное допустимое значение = 0, 7. В противном случае методика(шкала) признаётсянедостаточно надёжной.

4. Надёжность частей теста. Методика (шкала) разбивается на 2 равные по количеству вопросов половины. Затем с помощью корреляционного анализа сравнивают, насколько схожими являются их результаты. Чем выше полученное значение коэфициента корреляции, тем надёжней признаётся методика. Минимальное допустимое значение = 0, 7. В противном случае методика(шкала) признаётсянедостаточно надёжной. Альтернативный метод здесь – расчёт надёжности по формуле Рюлона.

5. Внутренняя согласованность. Основной метод проверки и расчёта внутренней согласованности (гомогенности) методики – коэфициент Альфа Кронбаха. Он расчитывается по формуле:

Где: - Сумма дисперсий для отдельных вопросов (пунктов)

- Дисперсия по всему тесту.

Минимальным удовлитворительным значение для альфа Кронбаха = 0, 6. В противном шлучае шкала признаётся несогласованной (негомогенной).

ТЕМА5. ВАЛИДНОСТЬ.

Определение валидности

Другим после надежности ключевым критерием оценки качества методик является валидность. Вопрос о валидности методик решается лишь после того, как установлена достаточная ее надежность, поскольку ненадежная методика без знания ее валидности является практически бесполезной.

Валидность теста — понятие, указывающее нам, что тест измеряет и насколько хорошо он это делает (А. Анастази: ).

Валидность – это комплексная характеристика, включающая, с одной стороны, сведения о том, пригодна ли методика для измерения того, для чего она была создана, а с другой стороны, какова ее действенность, эффективность. (Гуревич).

Валидность – комплекс сведений о том, относительно каких психологических свойств личности могут быть сделаны выводы с помощью методики, а также о степени их обоснованности. (Словарь-справочник по психодиагностике).

Виды валидности.

Выделяют три основных вида валидности (Словарь-справочник по психодиагностике):

1 Конструктная валидность. Один из основных типов валидности, отражающий степень репрезентации исследуемого психологического теста в результатах методики. Основной способ проверки – теоретическое предположение определённой связи исследуемого конструкта с конструктом, содержание которого уже хорошо известно и эмпирическая проверка этого предположения с помощью корреляционного анализа. Исследуемый признак в проверяемой методике должен умеренно коррелировать с уже известным в диапазоне от 0, 4 до 0, 6. Выделяют 3 основных вида конструктной валидности.

А) Конвергентная валидность. Установление прямой или обратной связи исследуемого конструкта с уже известным (Например, положительная корреляция тревожности с нейротизмом)

Б) Дивергентная валидность. Установление отсутствия связи с конструктом, где предположительно связи быть не должно (например, отсутствие связи между тревожностью и доброжелательностью).

В) Инкрементная валидность. Выражает практическую ценность методики при проведении отбора. Показывает эффетивность методики при проведении отбора.

2. Критериальная валидность. Отражает соответствие диагноза и прогноза определённому кругу объктивных критериев измеряемого явления. В качестве критериев валидизации выступают независимые от результатов тестирования непосредственные меры исследуемого качества: успешность профессиональной или учебной деятельности, уровень способностей, независимые экспертные оценки исследуемого качества. Выделяют 3 основных вида критериальной валидности.

А) Диагностическая (текущая). В результатах теста должно точно отражаться текущее объективное состояния дел.

Б) Прогностическая. Опираясь на результаты теста необходимо дать достаточно точной прогноз поведения и состояния дел испытуемого в будущем (Пр: быстро ли он решит свою проблему, будет ли он успешен в определённой сфере деятельности)

В) Ретроспективная валидность.

3 Очевидная валидность. Представление о тесте, сфере его применения, результативности и прогностической ценности, которое возникае у испытуемого или другого лица, не располагающего специальными сведениями о характере использования и целях методики. Эта валидно выступает в качестве фактора, побуждающего испытуемого к более серьёзному и ответсвенному отношению к работе по выполнению заданий теста и к заключениям, формулируемым психологом.

ТЕМА 6. ДОСТОВЕРНОСТЬ

⇐ Предыдущая 1 234 Следующая ⇒