Архитектура Аудит Военная наука Иностранные языки Медицина Металлургия Метрология Образование Политология Производство Психология Стандартизация Технологии |
Функционирование подсистемы. Описание подсистемы дизайнера тестов. Описание подсистемы дизайнера тестов
Для объектов подсистемы действуют области видимости. Элементы подсистемы обмены информацией, лежащие за пределами установленной области видимости, недоступны пользователю. Подсистема реализует механизм модерирования, позволяющий уполномоченным сотрудникам системы изменять либо полностью блокировать сообщения, не отвечающие принятым правилам общения. По умолчанию полномочия модератора предоставлены только администраторам. Последние по необходимости могут назначать ведущих форумов (модераторов) из числа тьюторов или организаторов. Механизм модерирования не предотвращает появление некорректных сообщений, но позволяет своевременно принимать меры по исправлению ситуации. Описание подсистемы дизайнера тестов Общие положения Подсистема дизайнера тестов следует главному принципу СДО «Прометей»: максимальная простота освоения без уменьшения доступной функциональности. Задаваемые по умолчанию параметры минимизируют трудозатраты пользователя. Но пользователь может изменять эти значения при возникновении такой необходимости. Дизайнер тестов – это инструмент тьютора, позволяющий создавать и редактировать тесты для самопроверки и экзаменационные тесты. Подсистема реализует проверку формальной корректности теста, тогда как семантическая корректность остается за тьютором. В дизайнере тестов необходимо указать следующие параметры (они считаются обязательными): 1) курс, с которым связан тест; 2) название теста; 3) проходной балл; 4) время, отведенное на выполнение теста; 5) тип теста (для самопроверки, тренинг или экзамен). Кроме того, здесь можно ввести текстовое описание теста, задать перемешивание секций теста, сделать данный вариант теста окончательным. Текстовое описание должно отражать назначение теста и содержать информацию о том, какие учебные достижения им проверяются. Когда задано перемешивание секций теста, подсистема тестирования будет случайным образом менять порядок подачи секций слушателю при каждой попытке тестирования. Указание считать тест окончательным означает, что тьютор завершил создание теста и предполагает, что его без коррективов можно применять для проверки учебных достижений или тренинга. Наличие отметки окончательного варианта позволяет тьюторам выдавать допуски на тест, а слушателям тестироваться, но запрещает вносить изменения в тест. Чтобы отредактировать тест, отметку необходимо снять. Таким образом, наличие допуска к тесту – условие необходимое, но не достаточное. Чтобы слушатель мог начать тестирование, пометка окончательного варианта должна быть проставлена на момент начала тестирования. Если тьютор обнаружил неточность в тесте уже после выдачи допуска и приступил к правке, система предупредит слушателя, получившего допуск, о недоступности теста. Тест станет вновь доступным, когда тьютор завершит редактирование и вновь проставит отметку окончательного варианта. Тест состоит из секций, или тематических разделов. Каждая секция содержит ряд вопросов, объединенных общей темой или подтемой (Рисунок 5). Рисунок 5 . Общая структура теста Вопрос имеет тип (Таблица 4), формулировку и необязательное описание правильного ответа (пояснение, которое слушатель увидит в отчете о попытке самотестирования или при нажатии на кнопку «Ответ» в режиме тренинга). При необходимости в описание разрешается добавить ссылки на учебные материалы. Вопрос может включать иллюстративный материал и разметку HTML. Таблица 4. Типы вопросов
Веса Вопросу теста всегда соответствует вес, или коэффициент сложности. По умолчанию веса всех вопросов равны единице. Однако тьютор в процессе создания или изменения теста может указывать для каждого вопроса в отдельности вес, более точно отражающий уровень сложности. Вариантам ответов также разрешается присваивать веса, или коэффициенты точности (в процентах от веса вопроса). По умолчанию сумма весов правильных ответов равна 100% от веса вопроса. Тьютор может указывать веса для вариантов ответов. Вопросу теста соответствует значение порога. Порог – это минимальная сумма весов вариантов ответов, которую необходимо набрать, чтобы система засчитала ответ в качестве верного. Если порог достигнут или превышен, слушатель получает долю от общего веса вопроса, соответствующую сумме коэффициентов точности (в процентах) для указанных вариантов. По умолчанию, когда вариантам ответов не присвоены веса, все верные ответы считаются равнозначными, неверные имеют нулевые веса (коэффициенты точности), а порог вопроса равен 100%. То есть слушатель должен указать все без исключения верные варианты и ни одного неправильного, чтобы ответ был засчитан в качестве верного. В процессе создания теста тьютору необходимо выбрать для каждого вопроса схему обработки. Простая схема подразумевает расстановку по умолчанию весов для вариантов ответов и порогов для вопросов. Сложная схема позволяет задавать веса и значения порогов вручную. Чтобы реализовать простую схему, достаточно указать для каждого вопроса только верные варианты ответов. Сложная схема требует явного определения коэффициентов точности для вариантов ответов и значения порога для вопроса. Чтобы ответ на вопрос сложной схемы был засчитан в качестве верного, сумма коэффициентов сложности должна быть больше или равна значению порога. Вопросы типов Да/Нет и Упорядочение можно обрабатывать только по простой схеме, а вопрос типа Развернутый ответ вообще подразумевает отсутствие вариантов ответов и не проверяется системой в автоматическом режиме (в зависимости от установленных параметров системы засчитывается как верный либо неверный). В последнем случае обязательно участие тьютора при принятии решения о правильности или неправильности ответа. Веса вопросов, или коэффициенты сложности, измеряются в баллах. Веса ответов, или коэффициенты точности, – в процентах от веса вопроса. Пороги определяются в процентах от веса вопроса. Рассмотрим несколько примеров. Первый вопрос, созданный по простой схеме. - Тип: Один из многих; - Вес: 1; - Формулировка: Каков результат операции сложения: 22 + (-22)?; - Варианты ответов: 44 (неверный), -44 (неверный), 22 (неверный), -22 (неверный), 0 (верный). Создавая этот вопрос, тьютор указал только его тип, формулировку и верный ответ (0). По умолчанию прочие ответы считаются неверными, а вопросу присваивается вес (коэффициент сложности), равный 1. Правильно ответив на вопрос, слушатель получит 1 балл. В противном случае – 0 баллов. Второй вопрос, созданный по простой схеме: - Тип: Многие из многих; - Вес: 3; - Формулировка: В каком случае разрешается эксплуатация автомобиля? (отметьте все правильные ответы); - Варианты ответов: Неисправен стеклоподъемник (верный), Присутствует стук в амортизаторах подвески (верный), Двигатель неустойчиво работает на холостых оборотах (верный), Неисправна рабочая тормозная система (неверный), Неисправен гидроусилитель руля (неверный), Отсутствует аптечка (неверный), Отсутствует огнетушитель (неверный), Отсутствует знак аварийной остановки (неверный). Создавая этот вопрос, тьютор указал его тип, вес (3, вместо 1 по умолчанию), формулировку, правильные варианты ответов. Выбрав все верные варианты, слушатель получит 3 балла. Выбрав хотя бы один неверный или пропустив один из верных, - 0 баллов. Рассмотрим этот же вопрос, созданный тьютором по сложной схеме: - Тип: Многие из многих; - Вес: 3; - Порог: 55%; - Формулировка: В каком случае разрешается эксплуатация автомобиля? (отметьте все правильные ответы); - Варианты ответов: Неисправен стеклоподъемник (вес 20%), Присутствует стук в амортизаторах подвески (вес 35%), Двигатель неустойчиво работает на холостых оборотах (вес 45%), Неисправна рабочая тормозная система (неверный), Неисправен гидроусилитель руля (неверный), Отсутствует аптечка (неверный), Отсутствует огнетушитель (неверный), Отсутствует знак аварийной остановки (неверный). В данном случае тьютор посчитал, что слушателю достаточно выбрать два любых ответа из верных, чтобы вопрос был засчитан в качестве верного. При этом все так же запрещается выбирать неверные варианты ответов, однако конечный результат для слушателя представлен большим числом вариантов. Выбрав только правильные ответы с весами 20% и 35%, слушатель получит 55% от общего веса вопроса, то есть 3/100*55 = 1,65 балла. Выбрав только правильные ответы с весами 20% и 45%, слушатель получит 65% от общего веса вопроса, то есть 3/100*65 = 1,95 балла. Выбрав только правильные ответы с весами 35% и 45%, слушатель получит 80% от общего веса вопроса, то есть 3/100*80 = 2,4 балла. Наконец, выбрав все правильные ответы, слушатель получит 100% от общего вида вопроса, то есть 3 балла. |
Последнее изменение этой страницы: 2019-05-06; Просмотров: 45; Нарушение авторского права страницы