книги / Работа с ресурсами портала гуманитарного факультета рекомендации по созданию электронного курса
..pdf
личных отзыва, например, для студентов, получивших менее 6 баллов за попытку; студентов, получивших менее 8 баллов, и студентов, у которых 10 баллов за попытку.
Рис. 59. Случайный вопрос
Рис. 60. Итоговый отзыв
В отличие от отзыва на вариант ответа, который зависит от типа вопроса и того, как студент ответил на вопрос, общий отзыв показывается всем студентам.
51
11.3. Типы тестовых вопросов
Типы вопросов отображаются пиктограммами.
Множественный выбор. Студенту предлагается несколько вариантов ответа на заданный вопрос. При этом возможны только один или несколько правильных ответов. В первом случае правильный ответ отмечается в кружочке; во втором – в квадратиках.
Настройка ответов
100 % в графе «Отзыв» свидетельствует, что ответ правильный
(рис. 61).
Рис. 61. Настройка ответов
Если на вопрос предусмотрено, например, два правильных ответа, около каждого варианта указывается 50 %, три – 33,33 % и т.д. Отзыв может быть развернутым и включать в том числе графические изображения. В процессе настройки они не отображаются, а видны только при просмотре теста (рис. 62).
52
Рис. 62. Отзыв на неправильный ответ
Для сохранения вопроса следует нажать кнопку «Сохранить».
Верно/Неверно. Этот тип представляет собой простую форму вопроса «Множественный выбор» и предполагает только два вопроса «Верно» или «Неверно».
Эссе – это единственный тип вопроса, который требует ручного оценивания преподавателем (рис. 63). Включение открытого вопроса в тест способствует более объективной оценке знаний студентов. Преподаватель может предусмотреть более высокий балл за открытый вопрос и при ручном оценивании варьировать значения в зависимости от полноты и качества ответа.
Рис. 63. Настройки эссе
Если ответ на вопрос предполагает возможность включения вложений, например, подготовленного реферата, следует разрешить вложение. Если предполагается ответ в виде простого текста – нужно указать возможное количество строк.
53
Для оценивания ответа на вопрос эссе следует войти в режим редактирования теста и выбрать опцию «Оценивание вручную» (рис. 64).
Рис. 64. Оценивание вручную (фрагмент)
Преподаватель, проверив ответ, может оставить комментарий и указать балл (рис. 65). В результате этот балл будет включен в общую оценку за тест.
Рис. 65. Оценивание ответа
За неправильные варианты ответов ставятся отрицательные значения, чаще всего так, чтобы их сумма составля-
ла 100 %.
При вычислении итоговой оценки все положительные и отрицательные значения суммируются. Отрицательный результат обнуляется.
11.4. Результат тестирования
Для вывода отчета следует войти в режим редактирования теста и выбрать опцию «Результаты» (рис. 64). Если тест не включает во-
54
просы эссе или эти вопросы были оценены, то отчет будет включать по каждому студенту затраченное время и оценку (рис. 66).
Рис. 66. Отчет по результатам тестирования (фрагмент)
По каждому студенту можно просмотреть ответы и переопределить балл, оставив соответствующий комментарий.
Для студентов, получивших низкий балл, преподаватель может назначить повторную попытку. Для этого предназначены опции меню настроек «Переопределение групп» и «Переопределение пользователей».
На рис. 67 показан фрагмент окна переопределения пользователя. Из раскрывающегося списка «Найти» выбираем студента, изменяем время и вводим пароль, который необходимо сообщить студенту. Количество попыток следует увеличить, иначе студенту тест не будет открыт.
Рис. 67. Окно переопределения пользователя (фрагмент)
Для оценивания повторной попытки следует выбрать опцию «Оценивание вручную». В появившемся окне «Вопросы, требующие оценки» будет список необходимых вопросов.
55
Редактирование теста
На странице дисциплины выберите тест и в появившемся окне войдите в режим редактирования теста (иконка шестеренки справа).
Рис. 68. Режим редактирования теста
Около каждого вопроса находятся иконки, позволяющие его редактировать, просматривать и переопределять балл (рис. 69). Через кнопку «Добавить» можно включить новый вопрос или выбрать его из базы вопросов.
Рис. 69. Редактирование вопросов теста
Если уже были попытки пройти тест, добавлять или удалять вопросы к нему нельзя. В этом случае следует создать новый тест, выбирая вопросы из базы или добавляя новые.
Просмотр результатов прохождения теста
В окне редактирования теста (см. рис. 68) следует выбрать опцию «Результаты». Появится окно с результатами прохождения теста по каждому студенту. Фрагмент окна с результатами приведен на рис. 70.
56
Рис. 70. Результат прохождения теста (фрагмент)
Ведомость с полученными за тест оценками можно скачать в файл excel (рис. 71).
Рис. 71. Окно преобразования результатов оценки
Преподаватель может разрешить группе или отдельному студенту пройти тест повторно. Для этого в окне настроек следует выбрать опцию «Переопределение» (рис. 72). В процессе настройки следует указать пароль и передать его группе или студенту.
Рис. 72. Окно настройки переопределения
12. Анализ качества тестовых заданий
Для анализа качества тестовых вопросов и процента студентов, которые ответили на них правильно, т.е. усвоили соответствующий материал дисциплины, можно воспользоваться опцией «Статистика»
57
из меню настроек теста. Фрагмент статистической обработки результатов прохождения теста на рис. 73.
Используемые статистические параметры рассчитываются в соответствии с классической теорией тестирования.
Индекс легкости – является отношением среднего значения баллов, набранных всеми тестируемыми при выполнении конкретного тестового задания, к максимальному количеству баллов за это задание. Оптимально включать в тест задания разного уровня сложности, чем ближе индекс легкости к 100 %, тем легче задание.
Стандартное отклонение – этот показатель измеряет разброс баллов, полученных испытуемыми при ответе на конкретное задание теста. Если ответы были одинаковыми, то отклонение будет равно нулю. Чем больше отклонение, тем больше разброс оценок. Согласно педагогической теории измерений, показатель ниже 30 % свидетельствует о недостаточной дифференцирующей способности тестового задания.
Балл случайного угадывания в вопросах закрытого типа зависит от количества правильных вариантов. Для вопроса с двумя вариантами ответа (например, для вопросов типа верно/неверно) балл будет равняться 50 %. Для снижения вероятности случайного угадывания в вопросах закрытого типа можно стараться формулировать вопрос таким образом, чтобы использовать большое количество правильных и неправильных ответов.
Намеченный вес – вес, назначенный данному вопросу преподавателем, рассчитанный в процентах.
Эффективный вес – определяет фактическую долю вопроса в итоговой оценке. Эта характеристика дает возможность преподавателю изменить вес вопроса.
Индекс дискриминации – дает возможность оценить качество вопроса и тем самым выделить сильных и слабых студентов. Все студенты по результатам ответов делятся на сильных, слабых и средних. Сам индекс рассчитывается по формуле: сумма правильных ответов студентов сильной группы – сумма правильных ответов студентов слабой группы. Значение индекса может находиться в диапазоне от +100 до –100.
58
Рис. 73. Статистика результатов прохождения теста (фрагмент)
59
59
Например, +100 означает, что на данный вопрос все сильные студенты дали правильный, а все слабые – неправильный ответ. Нулевое значение индекса дискриминации говорит о том, что на данный вопрос сильные и слабые студенты ответили одинаково. Если вопрос имеет отрицательный индекс дискриминации, то он, скорее всего, содержит ошибку, так как показывает, что слабые студенты дали ответы лучше, чем сильные.
Считается, что вопрос обладает достаточной дифференцирующей способностью, если значение данного коэффициента 30 % и больше.
Коэффициент дискриминации – тоже основан на сравнении от-
ветов сильных и слабых студентов, но при расчетах принимаются во внимание результаты всей группы студентов. Этот коэффициент дает более точные результаты за счет корреляции между суммой баллов, набранных в данном вопросе и в тесте в целом.
Для наглядного представления результатов теста в программе выводится график (рис. 74).
Рис. 74. График по статистике
Сравнение показателей разных ответов представлено на рис. 752.
2 Пример взят с портала электронного обучения БГУ: http://e.bsu.ru/mod/forum/discuss.php?d=405
60