Валидность процедуры тестирования. Приемы ее обеспечения.

Валидность – понятие, указывающие на то, что измеряет тест и насколько хорошо он это делает.

=> для теста это - действит-ая способность теста измерять ту психологич.хар-ку, для диагностики кот. он заявлен.Один из осн. (наряду с надежностью, репрезентативностью, объективностью, достоверностью и эффективностью) критер.оценки тестовых рез-ов

Вал-ть тестовых рез-ов - хар-ка, показывающая пригодность тестовых рез-ов. Зависит от кач-ва заданий, их числа, полноты охвата содержания дисциплины, распределения заданий по сложности, метода отбора заданий в тест, интерпретации рез-ов тестирования, совокупности испытуемых.

Необходимо знать факторы:1 гр. факторов – у испытуемого м.б представления о: свойственно ему или нет поведенческое поведение, какое псих. св-во скрывается у психолога за той или иной формулировкой, как св-ва соотносятся с общепринятыми моральными нормами и формулой успеха.

2 гр. Факторов – соц. желательности – обуславливает тенденции испытуемого давать о себе соц. одобрительную инф-ию. Этот фактор будет сильнее, чем ближе испытуемый подойдет к загадкам исследования. (Если испытуемый получает большой балл по шкале – его протокол бракуется (опросник Айзенка). Высокие баллы свидетельствуют лишь о том, что испытуемый был неискренен)

3 гр. Факторов -  на ответ испытуемого влияют представления о себе.1. введение особых шкал силы ПД, такие шкалы состоят из вопросов-ловушек. 2. введение в тест-опросник шкал коррекции.3.Используется на этапе обработки – прием инструкции на преднамеренную фальсификацию рез-ов.

 

45.Требования к процедуре адаптации зарубежных тестов.

Адаптация теста – комплекс мероприятий, обеспечивающих адекватность теста в новых условиях его применения. В отеч пд особую актуальность приобретает адаптация зарубежных тестов.

Можно выделить следующие основные этапы адаптации тестов:анализ исходных теоретических положений авторов теста;перевод теста и инструкций к нему на язык пользователя, завершаемый экспертной оценкой соответствия оригиналу;проверка надежности и валидности теста, осуществляемая в соответствии с психометрическими требованиями;стандартизация теста на соответствующих выборках.

Особые проблемы возникают в связи с адаптацией разных видов опросников, а также вербальных субтестов, входящих в состав тестов интеллекта. Основные препятствия для исследователя связаны с языковыми и социокультурными различиями между народами разных стран. Отражающимся в языке особенностям культуры того общества, в котором создавался тест, трудно, а порой и невозможно найти эквиваленты в другой культуре. Полная эмп адаптация теста во многих случаях не уступает по сложности разработке оригинальной методики.

Обратимся к проблеме перевода зарубежной методики с целью достижения идентичности фактора задач. Наиболее часто используется вариант процедуры, предложенный О. Вернером и Д. Кэмпбеллом (1970). Его суть в двойном переводе методики – с языка оригинала на язык принимающей участие в исследовании группы испытуемых, а затем второй независимый переводчик осущ-т обратный перевод на язык оригинала.

Рекомендации для формулирования пунктов опросника и изменения уже существующих.

1)Используйте короткие, простые предложения, содержащие не более 16 слов.2)Предпочитайте активный залог пассивному, т.к. его легче понять.3)Вместо использования местоимений повторяйте имена существительные.4)Избегайте использования метафор и разговорных оборотов.5)Избегайте использования сослагательного наклонения ("мог бы", "был бы").6)Добавляйте в текст слова, необходимые для оптимизации понимания ключевых идей.7)Избегайте глагольных форм с неопределенностью места и времени события.8)Избегайте использования притяжательных форм, поскольку они могут затруднить понимание принадлежности.9)Старайтесь использовать не общие, а конкретные термины и понятия. Например, люди, являющиеся членами семьи, значительно варьируют от культуры к культуре.

В 60-70-х гг. адаптация зарубежных тестов в нашей стране понималась упрощенно. Ее нередко сводили к переводу той или иной зарубежной методики, в лучшем случае ограничиваясь повторением нормативного распределения тестовых показателей. Теоретические концепции авторов тестов не анализировали, данные об их надежности и валидности, установленные зарубежными психологами для оригинальных версий, принимали за истинные. Кроме перевода методики, должна проводиться специальная психометрическая работа по адаптации переводного тест-опросника. Она включает в себя ряд процедур.1. Анализ внут согласованности пунктов, из кот составлен тест-опросник. 2. Проверка устойчивости к перетестированию, или ретестовой надежности.3.Анализ корреляций с релевантным критерием. Этот этап адаптации совершенно необходим, если тест изначально разрабатывался как критериально-ориентированный.4. Проверка или рестандартизация тестовых норм. 5.Специфичный для многомерных тестов этап – проверка воспроизводимости структуры взаимоотношений между шкалами. В случае тестов, при разработке которых использовался факторный анализ, необходима проверка вопроизводимости факторной структуры на отечественной популяции.

Вопрос 49

 КОМПЬЮТЕРНАЯ ПСИХОДИАГНОСТИКА, ИСТОРИЯ И АКТУАЛЬНОСТЬ.

1 этап развитие информац. технологий в 60гг. Т.к. компы были еще хреновые, то использовались они только для статистич.обработок и подачи простых стимулов. Компы были чисто вспомогат-ми, но это послужило зачатком машинной интерпретации рез-ов.

2 этап появление компьют.диагностики. Из-за потребности в оперативном анализе, развиваются комп. средства обработки инф-ии, разрабатываются средства спец прогр.обеспечения. Компьютер стал выступать в роли «эксп-ра».3 этап развития ИТ начался с 1970-х гг. Появляются комп. ПД системы на базе ПЭВМ, был ускорен процесс внедрения в практику автоматизированных тестовых методик. Общение испытуемого с ЭВМ приобретает форму «диалога». Появились первые тесты созданные для компьютерной среды. Развитие этих тестов создало предпосылки адаптивного тестирования, с приспособлением заданий к особенностям ответов испытуемого. 4 этап В конце 20 – начале 21 века компы набирают популярность. И сейчас все ПД исследования реализуются на быстродейсвующих ПК. Компьютерная ПД- исследования, связанные с использов. вычислит. техники обследования или/и анализе рез-ов, а также с разработкой комп.тестов. Использование компа в ПД обследованиях определяет степень стандартизации процедуры. Самые выигрышные методики - объективные тесты, стандартизированный самоотчет.В настоящее время создание комп.тестов осущ-ся в рамках т.н. адаптивного тестирования, особенностью кот.явл-ся управление компа основными этапами ПД процесса. Это означает, что должен поддерживаться постоянный и адекватный режим диалога между компом и обследуемым. Адаптивное тестирование это последовательность предъявляемых испытуемому заданий зависит от рез-ов его ответов на предыдущие задания. Адаптивность компьютерного теста может выражаться не только в непосредственном изменении порядка предъявления тестовых стимулов. В зависимости от текущего рез-та тестирования в последовательность стимулов могут включаться спец.сообщения, оказывающие корректирующее психологич.воздействие на испытуемого.

Вопрос 50.Компьютерная психодиагностика, современное состояние

Комп. ПД – направл-е ПД иссл-й, связ. с испол. средств вычисл. техники при провед. обслед-я или/и анализе его резул-ов, + с разраб. и применением комп-ных тестов. Бурлачук предлагает различать 2 типа комп. ПД методов: специально создан. в комп-рном режиме, и переведенные в компьютерный режим.Компьютерные методики – специально созд-ся в комп-ной среде, и невозможные в испол. без компьютера.Компьютеризированные методики – адаптированные на компьютерный язык из традиционной ПД.
Возможность испол-я компьютера на разл. этапах ПД обследования опред-ся степенью стандартизации процедуры обследования и обработки резул-ов. В наиболее выигрышном свете находятся психофизиол. методики, объективные тесты, стандартиз. самоотчет.В наст. время создание комп-ных тестов осущ-ся в рамках т.н. адапт. тестирования, важнейшей особенностью которого явл-ся управление со стороны компьютера осн. этапами ПД процесса. Это означает, что должен поддерживаться постоянный и адекватный режим диалога м/ду компьютером и обследуемым.
Адапт. Тестирование. Суть: последовательность предъявл-ых испыт-мому заданий зависит от резул-ов его ответов на предыд. задания. Адаптивность комп-ного теста может выраж-ся не только в непосред. изменении порядка предъявл-я тестовых S. В зависимости от текущего результата тестирования в последовательность S могут вкл-ся спец. сообщения, оказывающие корректирующее психол. воздействие на испыт-мого.
Перспективы. По мнению В.А. Дюка, 3 осн. направления, способных привести к более высокому уровню психол. иссл-й: 1) создание развитых баз ПД данных;2) разработка новых методов анализа ПД данных;3) конструирование интелл. диагнос. sis.
Информационные базы данных – это спец. sis хранения разнородной инфо и реализации процедур ее сортировки и поиска по запросам различной сложности. (необходимы д/эффект. использования разл. видами информации, используемой в ПД:а) собственно психол. инфо: данные ПД обследования, данные наблюдения психолога за поведением испыт-го при обследовании, данные психол. анамнеза;б) конституционально-биологической инфо: пол, возраст, тип конституции, тип ВНД и др.;в) мед. информации: клинические данные, резул. дополнит. методов иссл-я (ЭЭГ, рентгенограмма, анализ крови и др.);г) соц.-демограф. инфо: образование, профессия, СП, место проживания и т.д.
Базисн. Инфо: психолог. данные, на основе которых принимаются ПД решения.
Исп-е баз данных дает след преимущества: быстрое обращение к старой инфо, дополнение ее новыми данными либо обработка ее по новым алгоритмам, сопоставление с др данными, анализ динамики изменения психол. показателей как по одному человеку в теч. длит. времени, так и по группе людей.
2. Разработка компьютерных методов анализа ПД данных.В основном анализ-ся взаимосвязи результирующих показателей ПД методик (диагн. шкал, психол. факторов и т.п.).
Применение компьютеров дает возможность испол более совершенные подходы:дисперсионный анализ; корреляционный; регрессионный; факторный; дискриминантный; кластерный; методы теории распознавания образов.
3. Конструирование интелл. ПД sis. Они предназначены д/выполн. на компьютере таких практ. задач, которые назыв. интелл., если они выполняются людьми.

В ПД сущ. 3 осн. направления разработки интелл. ПД sis.1. Интелл. информационно-поисковые sis. Они дост. «умны» для того, чтобы понять недостаточно четко сформул. вопросы, т.к. способны формировать адекватные ответы на запросы пользователя, которые не носят прямого хар-ра.2. Обучающие sis. => в психологии лишь небольшая часть проф. знаний поддается формализации, обучающие sis организуются так, чтобы учитывать частичную структур-ть этих знаний и быть открытыми для углубления базы знаний.
3. Экспертные sis. - предназначены для решения практ. задач, возн. у специалиста, работающего в слабо структ-нной и трудно формализуемой предметной области. В ее стр-ре:A. База знаний. (основа эксп. Sis, знания о законах предметной области и способах разрешения задач).B. Логический блок (решатель). C. Блок общения (интеллектуальный интерфейс). –взаимодействие с экспр. sis в удобной форме.D. Блок объяснения.(объясн. инфо).

 

Вопрос 51.
Психодиагностические возможности компьютерных игр.

В кач-ве негативн.последствий комп.игр специалисты указыв.сужение круга интересов подростков, стремление к создан.собств.мира, уход от реальности. Наблюдение за тем, как ребенок играет в комп.игры, дает очень много информации для понимания его психич.склада. В ходе такого наблюд.психолог должен обратить внимание на след. особен.поведен.ребенка.(проективная методика)

Отношен.к репертуару. Агрессивные:он стремится преодолеть страх перед какими-то явлениями или людьми. Отношен.к рекордам - если ребенок сосредоточен на достижен.наилучшего рез-та повышенная мотивация достижения, или соревноват.мотивация.Отнош.к темпу.(переключаемость внимания). Отнош.к трудности. (эмоц-й лабильностью) Отнош.к проблемам.(если активизируется поисковая активность, то это симптом активно-импульсивного когнитивного стиля.) Если ребенок стремится тщательно перечитать инструкцию к игре, вернуться к прежним сценам и изучить опыт прежн. собств.действий, это активно-рефлексивный стиль. Др.важным ПД потенциалом комп.игр является возм-ть изучать психич.феномены, кот.недоступны в рамках традиционных эксперимент.парадигм. К таким феноменам относятся, например, непосредств. эмоцион. переживания. 

Классификация предложена А.Г. Шмелевым (1988):1. Игры, стимулирующие преимущественно формально-логическое, комбинаторное мышление («Мастер Майнд», «Кубик Рубика», компьют.вар-ты шахмат или шашек).

2. Азартные игры, кот. в противовес логич.требуют от игрока интуитивного, иррационального мышления («компьютерный» покер, игры с тотализатором и т.п.).3. Спорт.игры, кот.апеллируют к ловкости и проворству игрока, сенсомоторной координации, концентрации внимания («Теннис», «Футбол», «Бильярд»).4. Военные игры и игры-единоборства («Комбат», «Коммандос», «Карате»). Они содержат, как правило, реалистич.картины разрушений, а также эл-ты жесткого единоборства или насилия.Ттакие игры противопоказ. для лиц с неустойчивой психикой. В то же время при правильном использов.военных игр они могут способствовать развитию эмоцион.устойчивости к неудачам, настойчивости в реализации собстве. целей, а также служить в кач-ве соц. приемлемого инструмента разрядки агрессив.импульсов. 5. Игры типа преследование–избегание.6. Авантюрные игры (игры-приключения, или «Аркады») явл-ся неоднородным классом с психологич.т.зр. Здесь выделяется подкласс игр типа «зрительный лабиринт». «Зрит.лабир.» требует от игрока преимущественно наглядно-действенного мышл., локомотор. навыков.7. Игры-тренажеры («Боинг 747», «Ралли») трудно описать с т. зр. какого-л.доминирующего психич.св-ва, кот.необходимо включено в игровой процесс. Эти св-ва прямо зависят от структуры проф. деят-ти или конкретного проф.навыка, кот.развивает игра.

 

 

Вопрос 52

 Преимущества и ограничения компьютерного психологиеского тестирования.

Достоинства современных компьютеризированных:1. Обеспечивает постоянство условий тестирования за счет единообразного инструктирования 2. Точность и однозначность регистрации множества всевозможных реакций испытуемого. 3. Возможность проследить последовательность действий испытуемого.4. Единые банки данных, устанавливаются эмпирически обоснованные тестовые нормы для разных групп обследуемых. 5. Автоматизированное конструирование тестов.6. Психолог освобождается от трудоемкой работы 7. Автоматизация операций повышает уровень стандартизации, точность и скорость получения диагностических данных 8. Расширение практики группового тестирования и тиражирования методик. Оперативность обработки позволяет проводить в сжатые сроки массовые обследования 9. Применения сложных алгоритмов обработки данных и мощного мат.стат. аппарата их анализа, упрощается разработка новых процедур анализа.10. Конфиденциальность результатов.11. Упрощается хранение данных.12. Применение экспресс-методик.13. Минимизирует негативные воздействия, возникающие в ситуации межличностного взаимодействия. 14. Преимущества в формулировке заключения. Сопровождения текста графиками. Сохранение текста дает возможность психологу в любое время к нему вернутся и дополнить. Возможность тиражирования материала.15. Актуализация «игровой» мотивации, привлекательный тест повышает достоверность.16. Решается проблема, возникающая как результат несовместимости концептуальных схем интерпретации различных методик. 17. Проведение анализа поведения в ходе обследования, учета организации диалога (адаптивное тестирование).18. Испытуемый обеспечивается быстрой интерпретирующей обратной связью по результатам тестирования.19. «Ручные» методики позволяют предъявлять испытуемому только статические стимулы в виде текстов и рисунков.20. Компы позволяют применять и развивать тесты с переменным порядком предъявления тестовых стимулов.21. Исследуемый может устанавливать требуемый темп тестирования. 22. Организация интеллектуального интерфейса пользователя.23. Тесная связь психодиагностики с решением практических задач.

Ограничения:1. Отсутствие наблюдения испытуемого 2. У испытуемых обнаруживается «феномен компьютерной тревожности».3. Некоторые тесты в принципе не могут компьютеризованны. 4. Для ряда тестов их компьютеризация ведет к изменению их диагностических качеств, надежности и валидности. 5. Распространение доступных систем тестирования не способствует преодолению сложившегося разрыва между теорией и практикой. 6. Двоякий эффект интерпретации 7. Популярные тесты выдают стереотипные заключения 8. Несанкционированное распространение и применения тестов.

 

 

Вопрос 53.

Анализ этапов компьютеризированной психодиагностики.
Этап подготовки компьютеризированной пд. В традиционной системе этап подготовки пд иссл-я включает опр-е целей тестирования, подбор и/или разработку соответствующих им тестов, формирование контингента обследуемых и средств тестирования. Подготовка к компьютеризированному тестированию включает формирование передаваемых компьютеру алгоритмов: инструктирования обследуемого, предъявления ему тестового материала и обработки данных. На подготовительном этапе может быть также разработан новый алгоритм интерпретации данных с помощью компьютера, которого нет в традиционном тесте.

Проведение пд исследования в традиционной системе включает инструктирование обследуемого, его работу с тестом, количественную обработку и интерпретацию тестовых данных, проведение уточняющей беседы с обследуемым, при необходимости дополнительное тестирование и вынесение заключения по тесту. В условиях компьютеризации передача функций инструктирования обследуемого по работе с тестом компьютеру облегчает работу психодиагноста, Использование компьютера ускоряет подсчет итогов и избавляет от значительного количества ошибок. Однако психодиагност должен доверять компьютеру в очень строгих пределах! Абсолютной прерогативой психолога остаются его индивидуальный опыт, интуиция, эмоции наблюдения, целенаправленность и селективность при восприятии и анализе новой информации.
Проведение беседы с обследуемым является необходимым. Игнорирование этого требования может приводить к негативным явлениям «сверхдоверия» к компьютерным данным и принятия на этой основе ошибочных решений. Психодиагносты сообщают обследуемым о результатах тестирования в основном устно, избирательно, с учетом целей тестирования, особенностей личности обследуемого, ситуации, в которой проводится беседа, и т.д.

 

Вопрос 54 .Позитивные и негативные последствия компьютеризации пд деятельности. (КПД)
Применение компов направлено на повышение эффективности проведения тестирования, тем не менее внедрение связано трудностями разработки КП систем и их реализацией. Основным критерием оценки является повышение ее продуктивности или снижение. О.К. Тихомировым и Л.П. Гурьевой предложены следующие критерии: 1) позитивные и негативные последствия: а) позитивные – с повышением ее продуктивности и с увеличением значимости ее результата,б) негативные – пс-е изменения, хотя и включенные в процесс достижения продуктивного результата, но выступающие в качестве вспомогательных, менее значимых, усложняющие процесс достижения продуктивного результата; 2) реальные и потенциальные последствия: а) реальные –новообразования,возникающие при работе с компьютером, от которых зависит продуктивность, б) потенциальные – прогнозируются на будущее и выступают как некоторые идеальные представления о возможных психологических новообразованиях, связанных с продуктивностью КПД; 3): а) управляемые; б) неуправляемые – те, которые на данном уровне развития компьютеризации и в ближайшем будущем пока не могут быть преобразованы.

О.К. Тихомиров и Л.П. Гурьева анализируют психологические последствия компьютеризации 1.Изменения мотивации КПД. Реальные Позитивные изменения мотивации: выступают в качестве смыслообразующих, доверие к компьютеру при решении некоторых психодиагностических задач. Реальные Негативные : может привести к возникновению мотивационных смысловых образований «психологического барьера» или, наоборот, «сверхдоверия» к компьютерным данным.. Потенциальные позитивные изменения: идеальные психические новообразования, к которым могли бы стремиться разработчики при создании компьютеризированных психодиагностических систем: Потенциальные негативные: Формирование неадекватных мотивов, связанных с неверной оценкой значимости применения компьютеров. 2.Изменения целеобразования в КПД. Реальные негативные изменения целеобразования. виды целей, связанные регулированием и контролем результатов работы поскольку имеют менее значимый, вспомогательный характер. Потенциальные позитивные изменения. Преобладание творческих компонентов КПД над шаблонными Потенциальные негативные. виды идеальных целей, которые недостаточно обоснованы и служат неадекватными ориентирами, направляющими реальное целеобразование. 3.Изменения операционального состава КПД Реальныепозитивные изменения операционального состава. Формирование новых видов более совершенных операций при решении некоторых типов псих. задач.Реальныенегативные изменения: Появление новых видов операций, выступающих в качестве вспомогательных работ, имеющих низкую социальную ценность, Потенциальныенегативные изменения: Возможность формирования и широкого распространения неадекватных компьютерных операций, что может привести к принятию на их основе ошибочных психодиагностических решений.

 

Вопрос 55.

Компьютерная психодиагностика и изучение субъект-объектного образа компьютера. Феномен компьютерной тревожности.
Комп тревожность-ситуативное переживание,возникающее при исп-и,обдумывании (обсуждении) возможности использования ЭВМ. Отрицательные эмоции, психологический дискомфорт выступают в качестве индикатора диссонанса взаимодействующих элементов ситуации. Уход от дискомфорта двух типов: избегание, внутреннее изменение (мотивации, установки)

Виды компьютерной тревожности: 1) боязнь испортить, сломать что-либо; 2) ощущение незнания, неумения; 3) боязнь техники, математики; 4) боязнь за свое здоровье; 5) боязнь нового, незнакомого;

Др вид компьютерной тревожности можно характеризовать как ощущение дефицита времени, когда кажется, что за данное время невозможно все понять и запомнить, решить поставленную задачу. Обычно преобладает один вид тревожности, а другие сопутствуют и усугубляют дискомфортное состояние. Еще одной причиной возникновения комп тревожности является неправильный подбор учебного содержания.

Согласно Дорониной, создание адекватной мотивации, заинтересованности, помощь в опр-и места компьютера в собственной жизнед-ти, начальный практический этап в доступной, упрощенной форме способствуют снятию страха перед компьютером, формируют положительную мотивацию учения.

Изучения объект-субъектного образа компьютера у испытуемого связана с неоднозначным отношением людей к компьютеру как средству д-ти. Здесь имеет быть персонификация (наделение человеческими качествами), придание ему личностных свойств, уподобление живому существу, оценка качества его интеллекта (умный – глупый) и.т.д.
Методика «Компьютер: кто он? (автор Ходош) (дайте 20 ответов)» предназначена для изучения объект-субъектного образа компьютера и может быть применяема как самостоятельно, так и в составе батареи эксп-х и диагностических пс-х методов.Методика включает в себя:1) процедуру проведения опроса;2) категориальную систему для классификации полученных ответов;3) измерительные процедуры для вычисления количественных характеристик образа компьютера (генеральных оценок);4) тестовые нормы для сопоставления генеральных оценок с ними.

 

 

Вопрос 56.

⇐ Предыдущая123456789

Поделиться: