Методология разработки и применения

ПЕДАГОГИЧЕСКИЕ ТЕСТЫ

Методология разработки и применения

Пособие для преподавателей

Днепропетровск

ГИПОпром

УДК 37.016

Педагогические тесты. Методология разработки и применения: Пособие для преподавателей / Хохлова Т.С., Потап О.Е., Ступак Ю.А., Чернявский В.Г., Плискановский С.А. –Днепропетровск: ГИПОпром, 2005. - 63 с.

Рекомендовано к печати Ученым советом Национальной металлургической академии Украины ___.___.2005, протокол №_____.

Рассмотрены отдельные положения теории педагогических измерений, назначение педагогических тестов, сферы их применения, методология проектирования и особенности использования для различных целей. Особое внимание уделено заданиям в тестовой форме, принципам их составления и последующего отбора для включения в тесты. Приведены примеры заданий различной формы, которые могут быть полезны разработчикам тестов различного назначения.

Пособие подготовлено с учетом теории и практики педагогических измерений (тестирования) в Украине, России и странах дальнего зарубежья, а также с учетом требований к составляющей отраслевых стандартов высшего образования «Засоби діагностики...» (приложение 1 к приказу Министерства образования и науки Украины №285 от 31.07.98).

Рассчитано на преподавателей-разработчиков тестов, методистов, организаторов учебного процесса, программистов.

Составители: Хохлова Татьяна Станиславовна,

к.т.н., доцент, проректор ГИПОпром

Потап Олег Ефимович,

к.т.н., доцент кафедры АПП НМетАУ

Ступак Юрий Александрович,

к.т.н., нач. информационно-методического отдела ГИПОпром

Чернявский Валерий Григорьевич,

нач. учебного отдела ГИПОпром

Плискановский Станислав Александрович,

методист отдела повышения квалификации ГИПОпром

Редактор: Потап Олег Ефимович,

к.т.н., доцент кафедры АПП НМетАУ

Рецензенты: Аванесов Вадим Сергеевич,

доктор педагогических наук,

профессор МГУ (Москва, Россия)

Аврахов Иван Александрович,

канд. философских наук, доцент каф. философии НМетАУ

При подготовке пособия с любезного разрешения автора использованы материалы из работ проф. Аванесова В.С., указанных в списке литературы.

Ó Хохлова Т.С., Потап О.Е., Ступак Ю.А., Чернявский В.Г., Плискановский С.А.,

ГИПОпром, 2005 г.

СОДЕРЖАНИЕ

Стр.

ВВЕДЕНИЕ.................................................................................................... 4

1. ПЕДАГОГИЧЕСКИЕ ТЕСТЫ КАК СРЕДСТВО

ПЕДАГОГИЧЕСКИХ ИЗМЕРЕНИЙ. ОСНОВНЫЕ ОПРЕДЕЛЕНИЯ 6

1.1. Задания в тестовой форме........................................................... 6

1.2. Тестовые задания......................................................................... 8

1.3. Педагогический тест.................................................................... 9

2. формы тестовых заданий.......................................................... 10

2.1. Задания с выбором правильного ответа.................................... 11

2.1.1. Принципы подбора ответов к заданиям....................... 12

2.1.2. Принципы подбора содержания заданий..................... 16

2.1.3. Задания с выбором нескольких правильных ответов 20

2.2. Задания открытой формы............................................................ 23

2.3. Задания на установление соответствия..................................... 28

2.4. Задания на установление правильной последовательности.... 30

2.5. Нетестовые задания..................................................................... 32

3. ПОРЯДОК РАЗРАБОТКИ ПЕДАГОГИЧЕСКИХ ТЕСТОВ И

ТЕХНОЛОГИЯ ПРОВЕДЕНИЯ ТЕСТОВЫХ ИСПЫТАНИЙ ………. 33

3.1. Подготовка заданий в тестовой форме и пробное

тестирование................................................................................. 33

3.2. Анализ результатов пробного тестирования и отбор

тестовых заданий …………………………................................. 43

3.2.1. Матрица тестовых результатов..................................... 43

3.2.2. Статистический анализ тестовых результатов и

отбор заданий для включения в тесты......................... 44

3.3. Принципы компоновки педагогических тестов ……................ 47

3.4. Общие рекомендации по проведению тестирования............... 48

4. анализ И интерпретация тестовых результатов......... 50

4.1. Сферы применения тестов и особенности интерпретации

тестовых результатов................................................................... 50

4.2. Надежность тестовых результатов............................................. 56

5. ПрИМЕНЕНИЕ ЗАДАНИЙ В ТЕСТОВОЙ ФОРМЕ ДЛЯ

КОНТРОЛЯ УСПЕВАЕМОСТИ ………………………………………. 58

ЛИТЕРАТУРА............................................................................................... 63

ВВЕДЕНИЕ

Педагогический контроль, являясь неотъемлемой частью образовательного процесса и профессиональной подготовки специалистов, должен находиться в органической связи с другими элементами педагогической системы. Не заменяя собой дидактических средств обучения, он должен помогать выявлению ее достижений и недостатков. Это возможно только при условии применения научно обоснованной системы измерения и оценивания знаний, умений и навыков.

В теории педагогических измерений исходным является понятие «педагогическое задание». Оно может быть представлено такими средствами, как вопрос, задача, учебная проблема и т.п. Педагогические задания могут формулироваться как в тестовой, так и в нетестовойформе.

Мировая практика подготовки высококвалифицированных специалистов свидетельствует о том, что наиболее эффективной и корректной формой педагогических измерений являются задания в тестовой форме и сформированные из них по определенной методике педагогические тесты. В сочетании с использованием современных компьютерных средств тестовые методики позволяют существенно сократить временные и финансовые затраты на организацию и проведение контрольных мероприятий. Благодаря объективизации процедуры педагогического контроля, они обеспечивают значительное повышение ответственности за свою деятельность как обучаемых, так и преподавателей.

Можно утверждать, что создание системы объективной тестовой оценки знаний и умений, которую можно было бы использовать при всех видах педагогического контроля и которая основывалась бы на современных технологиях педагогических измерений, требует от разработчиков не только высокой квалификации в соответствующей предметной области, но также определенных знаний теории тестирования и ее составляющих. В последних, обычно, приходится наблюдать заметные пробелы. Именно восполнение этих пробелов является целью настоящего пособия.

Предлагаемый материал базируется, в первую очередь, на работах профессора В.С. Аванесова (Россия) [1-3], одного из ведущих специалистов в области педагогических измерений, теоретика и идеолога тестовых методик. В многочисленных трудах этого ученого привлекает четкость формулировок, ясность аргументации и системный подход к проблеме. Следует особо отметить, что основные положения научно-методических разработок В.С. Аванесова не противоречат методическим указаниям и нормативным документам Министерства образования и науки Украины [4] по разработке средств диагностики как неотъемлемой составляющей отраслевых стандартов высшего образования.

Материал пособия представлен в пяти главах. В первой рассматриваются основные понятия из области тестирования: задание в тестовой форме, тестовое задание, педагогический тест, тестирование. Обсуждается назначение педагогических тестов и границы их применимости в педагогической практике, определяется последовательность действий при их разработке.

Вторая, наибольшая по объему, глава посвящена четырем формам тестовых заданий: заданиям с выбором одного или нескольких правильных ответов, заданиям на установления соответствия, заданиям на установление правильной последовательности и заданиям в открытой форме. Здесь рассмотрены особенности применения каждой из форм, основные элементы и принципы формулирования заданий. Значительное внимание уделено конкретным примерам.

Далеко не каждое задание в тестовой форме может быть использовано в тесте. Соответствие одной из описанных во второй главе форм не является достаточным условием для включения его в педагогический тест. Для этого необходима экспериментальная апробация задания в ходе тестирования с последующей проверкой его соответствия определенным статистическим критериям. Вот почему в методических целях третья глава посвящена методике отбора тестовых заданий для включения в тесты. В ней обсуждаются вопросы определения трудности и дифференцирующей способности тестовых заданий, корреляции баллов отдельного задания с общим тестовым баллом, рассмотрены порядок подготовки педагогических тестов и основные принципы проведения тестирования.

Четвертая глава пособия посвящена особенностям анализа и интерпретации тестовых результатов, затрагиваются вопросы надежности тестовых результатов.

В связи с важностью для практики такого вида педагогических измерений, как текущий и итоговый контроль успеваемости, этому вопросу посвящена отдельная глава пособия. Поскольку контроль успеваемости лежит вне сферы применения тестов, в пятой главе рассмотрены особенности использования для этой цели заданий в тестовой форме и приведены конкретные рекомендации по компоновке соответствующих комплектов заданий.

ПЕДАГОГИЧЕСКИХ ИЗМЕРЕНИЙ. ОСНОВНЫЕ ОПРЕДЕЛЕНИЯ

Ядро понятийного аппарата педагогических измерений составляют три основных соподчиненных понятия:

1) задание в тестовой форме;

2) тестовое задание;

3) педагогический тест.

Задания в тестовой форме

Сегодня в отечественном образовании преимущественно используются задания в нетестовой форме. Обычно – это вопросы, задачи и упражнения, которые в тестах не используются. Эти задания и ответы на них зачастую бывают столь неопределенными и многословными, что для выявления истинности требуются большие затраты интеллектуальной энергии. В то время как применение заданий в тестовой форме предполагает четкую и быструю дифференцируемость правильных и неправильных ответов.

Помимо технологичности заданиям в тестовой форме присущи:

- краткость , которая достигается тщательным подбором слов, символов и графиков, исключением повторов, малопонятных и редко употребляемых символов и слов, обеспечивая максимальную ясность смыслового содержания задания;

- логическая форма, которая дает возможность превратить ответ студента в истинное иди ложное высказывание, исключая возможность появления ошибочных ответов по формальным признакам вследствие неудачного формулирования;

- одинаковость правил оценки ответов, которые определяются заранее и абсолютно одинаково применяются ко всем испытуемым;

- унифицированность формы, что придает заданиям структурную целостность и определенность, внешнюю организованность.

Свободное владение тестовой формой является важнейшей предпосылкой разработки тестов и обязательным требованием к разработчикам. Только отсутствием навыков разработки заданий в тестовой форме объясняются существующие педагогические заблуждения, относящиеся к тестированию.

Первое такое заблуждение касается необоснованного деления наук на «подходящие» для применения тестовых форм и на «не подходящие» для этого. В действительности формы тестовых заданий и принципы их разработки инвариантны к учебным дисциплинам.

Второе заблуждение касается связи форм с контролируемыми уровнями знаний. Например, считается, что задания с выбором одного правильного ответа из числа предложенных позволяют проверить знания только «низшего» уровня, «распознать» правильный ответ, в то время как знания более высоких уровней надо проверять заданиями других форм. Однако, измеряемый уровень подготовленности зависит не столько от формы, сколько от трудности содержания заданий. С формой же в большей мере связаны виды проверяемых знаний.

Третье заблуждение касается числа используемых форм. Реально их всего четыре. Остальные являются либо вариантами одной из четырех, либо нежелательным смешением двух и более форм.

Если к заданиям даются готовые варианты ответов на выбор, то такие задания называются заданиями с выбором правильного ответа. Это первая из форм. Ее разновидностями являются задания с выбором одного правильного ответа и задания с выбором нескольких правильных ответов.

Во второй форме задание сформулировано так, что готового ответа нет. Каждому испытуемому предлагается во время тестирования вписать ответ самому в отведенном для этого месте. Такие задания называются заданиями открытой формы. После дополнения задания определенным ответом получается истинное или ложное высказывание.

Задания третьей формы формулируются в виде требования поставить элементы одного множества в соответствие элементам другого множества. Такие задания называются заданиями на установление соответствия.

В тех случаях, когда требуется установить правильную последовательность вычислений, действий, шагов, операций, терминов в определении понятий и т. п. используются задания четвертой формы на установление правильной последовательности.

Выбор той или иной формы должен определяться, прежде всего, содержанием задания и видом контролируемых знаний; но зачастую зависит от уровня подготовленности преподавателей в области методики тестового контроля.

1.2. Тестовые задания

Педагогический тест состоит не из заданий в тестовой форме, а из тестовых заданий.

Задания в тестовой форме только внешне похожи на тестовые задания, но этого недостаточно для их включения в тест. Нужна еще проверка статистических свойств каждого задания.

Тестовое задание – это составная единица теста, отвечающая требованиям к заданиям в тестовой форме и, кроме того, статистическим требованиям. Основными статистическими требованиями к тестовым заданиям являются требования:

1) известной трудности;

2) дифференцирующей способности;

3) положительной корреляции баллов задания с суммарными баллами по всему тесту.

Трудность задания может определяться двояко:

а) умозрительно, на основе предполагаемого числа и характера умственных операций, необходимых для успешного выполнения задания;

б) после эмпирического опробования заданий, с подсчетом доли неправильных ответов (чем она выше, тем труднее задание).

Слишком легкие задания, на которые правильно отвечают все испытуемые, равно как и слишком трудные, на которые никто не может ответить, не пригодны для включения в тест. Задания с неизвестной мерой трудности также не могут быть использованы, поскольку, как будет показано ниже, в тесте их следует размещать в порядке возрастания трудности.

Под дифференцирующей способностью тестового задания понимают его способность разделить слабых и сильных испытуемых. Очевидна связь между этим показателем и трудностью задания. Тестовое задание должно разделить испытуемых на две (в общем случае не равные по количественному составу) группы: правильно и неправильно ответивших. При этом соотношение количества испытуемых в группах должно зависеть от трудности задания. Чем труднее задание, тем малочисленней и меньшей в процентном отношении должна быть группа правильно ответивших.

Если результат решения того или иного тестового задания не оказывает значимого влияния на результаты тестирования в целом, то, видимо, ценность такого задания для проведения педагогических измерений невелика и без него можно обойтись. В определении степени такого влияния и состоит смысл требования положительной коррелированности баллов задания с суммарными тестовыми баллами.

Из рассмотрения перечисленных требований вытекает обязательность экспериментальной проверки тестовых заданий на выборочной совокупности испытуемых и применения статистических методов обработки результатов эксперимента перед включением их в тест. Порядок такой проверки см. в §§3.1 и 3.2.

Педагогический тест

Педагогический тест наиболее полно определяется как система репрезентативных параллельных заданий возрастающей трудности, специфической формы, которая позволяет качественно и эффективно измерить уровень и структуру подготовленности испытуемых.

Возрастающую трудность заданий можно образно сравнить с барьерами на беговой дорожке стадиона, где каждый последующий барьер выше предыдущего. Пробежать дистанцию и успешно преодолеть все барьеры сможет только тот, кто лучше подготовлен. Поскольку в педагогическом тесте задания упорядочиваются по принципу возрастающей трудности, одни испытуемые " заваливаются" уже на самом легком, первом задании, другие - на последующих заданиях. Студенты среднего уровня подготовленности могут ответить правильно примерно на половину заданий теста и, наконец, только самые знающие в состоянии дать правильный ответ на задания самого высокого уровня трудности, расположенные в конце теста.

О репрезентативности и параллельности тестовых заданий, а также об особенностях контроля структуры и уровня подготовленности более подробно речь пойдет в последующих главах. Пока же следует остановиться на вопросе о границах применимости тестов в педагогической практике.

Традиционный тест представляет собой метод диагностики испытуемых, в котором они отвечают на одинаковые задания, в одинаковое время, в одинаковых условиях и с одинаковыми критериями оценки. При такой ориентации задача определения точного объема и структуры освоенного учебного материала отступает, по необходимости, на задний план. В тест отбирается такое минимально достаточное количество заданий, которое позволяет сравнительно точно определить, образно говоря, не " кто что знает", а " кто знает больше". Интерпретация результатов тестирования ведется преимущественно на языке тестологии, с опорой на так называемые процентильные нормы, показывающие - сколько процентов испытуемых имеют тестовый результат хуже, чем у любого взятого для анализа испытуемого с его тестовым баллом. Такая интерпретация называется нормативно-ориентированной. Здесь результатом является рейтинг испытуемого, его место или ранг в тестируемой группе.

Итак, педагогические тесты могут использоваться в педагогической практике в следующих целях:

- ранжирование испытуемых в пределах тестируемой группы;

- профессиональный или другой отбор по заданному критерию;

- выявление пробелов в знаниях (недостаточно усвоенных разделов (тем) дисциплины, неправильного профиля знаний).

Что же касается задач текущего и итогового контроля успеваемости, а также аттестации выпускников, то речь может идти не о тестах, а о комплектах заданий в тестовой форме, особенности применения которых рассмотрены в пятой главе настоящего пособия.

Формы ТЕСТОВЫХ ЗАДАНИЙ

Как отмечалось выше, известны четыре основные формы тестовых заданий (см. рис. 2.1). Рассмотрим их особенности.

Рис. 2.1 - Формы тестовых заданий

Задания с выбором правильного ответа

Если к заданиям даются готовые ответы на выбор, то такие задания называют заданиями с выбором правильного ответа . Эти задания больше других распространены в тестовой практике, что объясняется их простотой и технологичностью.

К недостаткам этих заданий относят возможность запоминания правильных ответов и достаточно высокую вероятность их угадывания. Вероятность угадывания правильного ответа зависит от общего числа ответов к каждому заданию и от степени привлекательности каждого неправильного ответа*[1].

Любое задание с выбором правильного ответа(ов) должно содержать правильный ответ(ы), что придает однозначность замыслу самого задания и не допускает противоречивых мыслей у испытуемых. Налагается запрет на применение таких «ответов», как «правильного ответа нет», «все ответы правильные» или «все ответы неправильные», которые в практике все еще встречаются. Иногда в тестах предлагается указать номер неправильного ответа, что также нежелательно.

Тестовые задания с выбором правильного ответа должны содержать такие обязательные элементы: инструкцию по выполнению задания; вопросительную (содержательную) часть; ответы (см. рис. 2.2).

Обвести кружком номер правильного ответа:

1. Ядро атома состоит из

1) нейтронов и протонов

2) протонов и электронов

3) электронов и нейтронов

Рис. 2.2 - Основные элементы задания

Как видно из рис. 2.2, этим заданиям обязательно предшествует инструкция для испытуемых: «Обвести кружком номер правильного ответа: », что указывает на требуемую деятельность. Не менее важно, чтобы текст инструкции отличался от основного текста задания (наклон шрифта, цвет и т.п.) и был отделен от него двоеточием.

Задания в тесте нумеруются арабскими цифрами, нумерация заданий – сквозная. Ответы к заданию должны располагаться симметрично. При наличии 4-х и более ответов их целесообразно разместить в две колонки.

Содержание задания выделяется прописными буквами или цветом. Как уже отмечалось выше, содержание задания должно быть кратким и лаконичным, сформулированным, как правило, в утвердительной форме.

2.1.1. Принципы подбора ответов к заданиям

Задания с одним правильным ответом формулируются на основе нескольких принципов. Использование (сочетание) этих принципов при составлении заданий в тестовой форме позволяет существенно расширить возможности тестов различного назначения.

Рекомендуемое количество ответов к каждому заданию этой формы – не более 5-6, хотя на практике не всегда удается подобрать педагогически корректные и привлекательные дистракторы. При подборе дистракторов следует тщательно проверять – не является ли дистрактор «частично правильным» ответом, что иногда встречается на практике и что может привести к затруднительной ситуации при апелляции не сдавшего тест.

Альтернативные задания создаются с использованием принципов противоречивости и противоположности. Эти задания используются при проверке умения правильно воспроизводить полученные знания, принимать правильные решения и др. Примеры:

Обвести кружком номер правильного ответа:

2. Утверждение о том, что с увеличением температуры

газа эффективный диаметр молекул уменьшается

1) верно

2) не верно

3. Отбрасывание конечного числа членов на

сходимость ряда

1) влияет 2) не влияет

4. соединение с формулой NaCl это

1) кислота

2) соль

3) щелочь

5. Повышение содержания кремния в чугуне - следствие

1) похолодания доменной печи

2) горячего хода

3) ухудшения качества кокса

6. при движении тягового органа конвейера реле

скорости

1) включено

2) отключено

3) заблокировано

В заданиях, составленных с использованием принципа однородности, подбираются ответы, которые относятся к одному роду (классу). Этот принцип также называют принципом классификации. Примеры:

Обвести кружком номер правильного ответа:

7. электронное устройство, имеющее два устойчивых

состояния

1) диод

2) триггер

3) транзистор

8. наиболее опасными для экологического равновесия

являются удобрения

1) азотные 3) фосфатные

2) калийные 4) органические

При создании заданий по принципу однородности существенным фактором усиления их эффективности является использование сходных по написанию или звучанию слов, словосочетаний, цифр, знаков и т.д. Это позволяет подобрать наиболее правдоподобные дистракторы и уменьшает вероятность угадывания правильного ответа. Например:

9. тип питания тионовых бактерий

1) фотоавтотрофный 3) фотогетеротрофный

2) хемоавтотрофный 4) хемогетеротрофный

Кумуляция. Этот принцип означает, что содержание второго ответа включает в себя (кумулирует) содержание первого, содержание третьего - второго и т.д. ответов. Здесь в ответах нередко используется союз «и» и запятые. Примеры:

Обвести кружком номер правильного ответа:

10. герундий обладает свойствами

1) глагола

2) глагола и существительного

3) глагола, существительного и наречия

11. в месте заделки балки действует

1) сила реакции

2) сила реакции и реактивный момент

3) сила реакции, реактивный момент и сила тяжести

При ответе на такие вопросы студенты достаточно часто выбирают последний ответ, считая его наиболее полным. В связи с этим полезно иметь вопросы, построенные по принципу кумуляции, в которых правильные ответы располагаются не на последнем месте.

Тестовые задания, в ответах на которые использован принцип кумуляции, целесообразно применять для проверки полноты знаний и умений.

Сочетание. В заданиях по этому принципу используется сочетание слов (знаков) по два или по три, реже – по четыре. Возможны три варианта заданий с использованием этого принципа.

В первом варианте сочетаются более-менее однородные и правдоподобные пары ответов. Примеры:

Обвести кружком номер правильного ответа:

12. ОСНОВНЫЕ продукты ДОМЕННОЙ ПЛАВКИ

1) агломерат и кокс

2) доменный газ и природный газ

3) чугун и шлак

13. рудные тела медно-молибденовых месторождений

представлены

1) штоками и линзами

2) штокверками и жилами

Во втором варианте сочетается одно слово (понятие) с несколькими другими:

Обвести кружком номер правильного ответа:

14. механическая работа, совершенная телом, зависит от

1) силы и времени

2) силы и перемещения

3) силы и пройденного пути

В третьем варианте ответы сочетаются по правилу цепочки, когда последнее слово в первом ответе становится первым во втором ответе, последнее во втором – первым в третьем и т.д. Этот способ подбора ответов называют также принципом цикличности . Примеры:

Обвести кружком номер правильного ответа:

15. вода, очищенная в аптеке, ежедневно анализируется

на содержание

1) хлоридов и сульфатов

2) сульфатов и нитратов

3) нитратов и хлоридов

16. горючесть ряда полезных ископаемых объясняется

наличием в их составе

1) углерода и кислорода

2) кислорода и водорода

3) водорода и углерода

Градуирование. Этот принцип используется в заданиях с тремя и большим числом вариантов ответов. Примеры:

Обвести кружком номер правильного ответа:

17. растворимость газов при повышении температуры

1) увеличивается

2) остается без изменений

3) уменьшается

18. при увеличении силы тока и неизменном

сопротивлении, напряжение

1) уменьшается

2) остается без изменений

3) увеличивается

Удвоенное противопоставление. Этот принцип, называемый также принципом двойной альтернативы, применяется преимущественно в заданиях с четырьмя вариантами ответов. Примеры:

Обвести кружком номер правильного ответа:

19. у стали по сравнению с чугуном

1) выше содержание углерода и выше содержание серы

2) выше содержание углерода, но ниже содержание серы

3) ниже содержание углерода, но выше содержание серы

4) ниже содержание углерода и ниже содержание серы

20. скорость реакции зависит от температуры

1) прямо пропорционально, линейно

2) обратно пропорционально, линейно

3) обратно пропорционально, нелинейно

4) прямо пропорционально, нелинейно

Задания с выбором нескольких правильных ответов

Как уже отмечалось выше, задания с выбором одного правильного ответа, несмотря на их технологичность и простоту, имеют существенный недостаток, критикуемый многими педагогами. Это – высокая вероятность угадывания правильных ответов, особенно при небольшом числе вариантов. Наиболее эффективным способом снижения этой вероятности является подбор правдоподобных дистракторов. В общем случае дистрактор можно считать удачно подобранным, если он привлекает процент незнающих испытуемых, соответствующий вероятности угадывания: для заданий с двумя вариантами ответа – 50%, с тремя – 33%, с четырьмя – 25%, с пятью – 20%. В этом смысле более эффективными являются задания с выбором нескольких правильных ответов из числа предложенных, в которых вероятность угадывания всех правильных ответов существенно ниже.

Задания с выбором нескольких правильных ответов являются более трудными по сравнению с заданиями с выбором одного правильного ответа. Такие задания обеспечивают более полную и точную проверку знаний, так как испытуемым приходится дополнительно проверять полноту своих ответов.

Рекомендуемое количество ответов к таким заданиям – от 5 до 12. Соотношение правильных и неправильных ответов устанавливается по усмотрению разработчика, но при одном условии – среди ответов хотя бы один должен быть неправильным. Испытуемые должны быть осведомлены о том, что сочетание правильных и неправильных ответов в любом задании различно. Такие задания можно применять при проверке знаний по любой дисциплине.

Инструкция для испытуемых в таких заданиях формулируется так: «Вашему вниманию предлагаются задания, в которых могут быть один, два, три и большее число правильных ответов. Обведите кружком номера всех правильных ответов».

Или более кратко: «Обведите кружком номера всех правильных ответов».

При автоматизированном контроле (самоконтроле) инструкция может быть сформулирована иначе: «Нажимайте на клавиши с номерами всех правильных ответов» или «Щелкните мышью по всем правильным ответам» и т.п.

Примеры:

Обведите кружком номера всех правильных ответов:

32. «О» ПИШЕТСЯ В СЛОВОСОЧЕТАНИЯХ

1) упл…тнить график 5) сл…жить полномочия

2) р…птать на судьбу 6) прил…скать кота

3) угрожать р…справой 7) усл…жнить жизнь

4) обн…жить пороки 8) с…бираться на работу

33. ГЛАГОЛЫ

1) production 5) furnace

2) create 6) communicate

3) factory 7) come

4) car 8) particle

34. ЭЛЕМЕНТАРНЫЕ АРИФМЕТИЧЕСКИЕ ДЕЙСТВИЯ

1) дифференцирование 5) возведение в степень

2) умножение 6) сложение

3) интегрирование 7) разложение в ряд

4) деление 8) вычитание

35. ЭЛЕМЕНТЫ ПРОФИЛЯ ДОМЕННОЙ ПЕЧИ

1) кольцевой воздухопровод 7) шахта

2) колошник 8) наклонный мост

3) чугунная летка 9) распар

4) огнеупорная кладка 10) распределитель шихты

5) горн 11) уровень засыпи

6) фурменная амбразура 12) заплечики

Как видно из представленных примеров, содержательную основу таких заданий составляют, главным образом, классификационные знания, что также позволяет при их разработке использовать фасеты. Пример:

Обведите кружком номера всех правильных ответов:

36. МЕТАЛЛЫ

1) Cr 3) Mg 5) Cu 7) Fe

2) Zn 4) Ag 6) Ba 8) Na

Задания с выбором нескольких правильных ответов удобно использовать для проверки знаний типа «что для чего». Знания такого типа присутствуют во всех без исключения учебных курсах. Особенно важна проверка таких знаний в инженерных науках. Примеры:

Обведите кружком номера всех правильных ответов:

37. ПРИ ДВИЖЕНИИ

РАССЧИТЫВАЮТ ПО ФОРМУЛАМ

1) 6)

2) 7)

3) 8)

4) 9)

5) 10)

38. АГРЕГАТАМИ ДЛЯ ПРОИЗВОДСТВА МОГУТ БЫТЬ

1) агломашина 5) вагранка

2) доменная печь 6) кислородный конвертер

3) миксер 7) электродуговая печь

4) мартеновская печь 8) методическая печь

Не рекомендуется отрицательная формулировка заданий, когда спрашивается о том, что не используется, не делается, не относится и т.п. Как правило, для таких заданий множество отрицательных ответов всегда больше множества положительных. При положительной формулировке возрастает определенность задания, его конкретность.

Что касается оценивания ответов на такие задания, то здесь могут быть разные подходы. Более предпочтительным, на наш взгляд, является подход, при котором за полностью правильное решение выставляется один балл, т.е. случай, когда отмечены все правильные ответы и не отмечен ни один из неправильных. Если не отмечен хотя бы один из всех правильных ответов или отмечен хотя бы один из неправильных, выставляется ноль баллов. Такой подход более технологичен и, как будет показано далее, позволяет избежать искажения результатов педагогического измерения.

Второй подход, предлагаемый как вариант в [1], предполагает такую шкалу: за полностью правильное решение давать три балла, за одну допущенную ошибку снимать один балл, за две – два, за третью – снимать последний балл. За последующие допущенные ошибки баллы не снимаются, т.е. за три и более допущенных ошибок испытуемому выставляется ноль баллов, что позволяет избежать нежелательных отрицательных оценок.

Задания открытой формы

Задания открытой формы не содержат готового ответа. Каждому испытуемому ответ приходится вписывать самому, во время тестирования, в отведенном для этого месте. После дополнения задания определенным ответом получается истинное или ложное высказывание. Инструкция к таким заданиям записывается так: «Дополнить: ». Примеры:

Дополнить:

39. ПЕРИОДИЧЕСКАЯ СИСТЕМА ЭЛЕМЕНТОВ НАЗВАНА

В ЧЕСТЬ _______________________.

40. ПОЛОЖИТЕЛЬНЫЙ ЭЛЕКТРОД В ЭЛЕКТРОЛИЗЕ

НАЗЫВАЕТСЯ _________________.

41. ЧУГУНОМ НАЗЫВАЮТ СПЛАВ ЖЕЛЕЗА С СОДЕРЖАНИЕМ

УГЛЕРОДА БОЛЕЕ ____ %.

42. В ГЛАВНОЙ ЛИНИИ ПРОКАТНОГО СТАНА ОСНОВНЫМ

ЭЛЕМЕНТОМ ПЕРЕДАТОЧНОГО МЕХАНИЗМА, ПЕРЕДАЮЩИМ

ВРАЩЕНИЕ ВАЛКАМ, ЯВЛЯЕТСЯ _____________________ КЛЕТЬ.

Основными рекомендациями при составлении заданий этой формы являются следующие:

- все утверждения формулируются как можно короче;

- испытуемый должен добавлять только одно слово;

- желательно, чтобы добавляемое слово располагалось в конце задания;

- формулировка задания не должна быть двусмысленной. Задание должно быть логически определенным, т.е. предполагать однозначный ответ.

Важность последней рекомендации можно продемонстрировать на следующих примерах:

Неправильно:

Дополнить:

43. СТАЛЬ ВЫПЛАВЛЯЮТ В _______________________.

12 3 4 5 6 7 Следующая ⇒