Создание тестовых заданий при организации дистанционного обучения

1. Создание тестовых заданий при организации дистанционного обучения МАОУ лицей № 102 г. Челябинска

2. Эффективный тест • Тест (в пер. с англ. – проверка, испытание) • – это инструмент, предназначенный для оценивания качестви свойств личности, которые могут быть изменены в процессе обучения, и состоящий из • квалиметрически выверенной системы тестовых заданий • стандартизованных процедур предъявления заданий • обработки и анализа результатов Эффективным является такой тест,который«лучше, чем другие тесты, измеряет знания обучающихся интересующего уровня подготовленности, с меньшим числом заданий, качественнее, быстрее, и все это – по возможности одновременно»В.С. Аванесов

3. Педагогический тест Это система заданий специфической формы,позволяющая измерить уровень обученности студентов, совокупность их представлений, знаний и навыковна той или иной области содержания Тест состоит не из вопросов и задач,а из тестовых заданий!

4. NB! Специфическая форма тестовых заданий отличается тем, что задания теста представляют собойне вопросы и не задачи, а задания, сформулированные в форме высказываний, истинных или ложных, в зависимости от ответов. Традиционные вопросы, напротив, истинными или ложнымине бывают, а ответы на них нередко настолько неопределенныи многословны, что для выявления их правильности требуются заметные, в суммарном исчислении, затраты интеллектуальной энергии преподавателей. В этом смысле традиционные вопросы и ответы нетехнологичныи поэтому их лучше не включать в тест. В.С.Аванесов

5. Достоверность и ошибки контроля* • Источники ошибки: • Вероятность положительного результата при неосвоении материала (верный ответ при отсутствии знания = угадывание) • Вероятность отрицательного результата при освоении материала (неверный ответ при наличии знания = ошибка при составлении задания) • Достоверность контроля (вероятность истинности результата) Р ист. = 1 – Р угад. – Р ош.задан *Из презентации к вебинару проф. Ю.В. Тихомирова (МГТУГА)«Компьютерное тестирование уровня освоения учебного материала» 11.05.2010, e-LearningPRO

6. Вероятность угадывания правильных ответов • Зависит от формы представления тестового здания (ТЗ): • в ТЗ закрытой формы – обратно пропорциональна количеству вариантов ответов • в ТЗ на упорядочение списка или конструирование ответа – стремится к нулю • В ТЗ открытой формы – стремится к нулю • Может быть обусловлена некорректной формулировкой ТЗ (подсказки)

7. Формы тестовых заданий • Закрытая • одиночный выбор • множественный выбор • альтернативные задания • Открытая • На установление соответствия • На установление правильной последовательности

8. NB! • Одни и те же задания могут быть представленыв различных формах. Следует выбирать ту из них,в которой вопрос формулируется более краткои понятно, а вероятность угадывания правильных ответов меньше • Если задания в различных формах выглядят в равной степени эффективными, то следует выбирать из них тот тип, который менее всего представлен в тесте

9. Этапы подготовки банка ТЗ Определение структуры учебной дисциплины Отбор содержания учебного материала Формулировка тестовых заданий (ТЗ) Экспертиза качества ТЗ Определение целей тестирования Конструирование технологической матрицы и ее экспертиза Построение выборки для предварительного испытания теста Апробация теста и изучение результатов Стандартизация теста Подготовка учебных материалов для публикации

10. NB! Составление тестовых заданий для компьютерноготестирования в соответствии с требованиямипозволяет снизить вероятность ошибки при тестовом контролеи повысить достоверность результата Основы e-learning для преподавателя вуза

11. Требования к составлению тестовых заданий для компьютерного тестирования • Официально утвержденных Министерством образования стандартных требований к составлению тестовых заданий на сегодняшний день нет • Приказ МО РФ от 17.04.2000 1122 «О сертификации качества педагогических тестовых материалов» • Рассматриваемые далее Требования* • разработаны сотрудниками Центра образовательных коммуникаций и тестирования профессионального образования (ЦОКиТПО) МГУП (http://ctve.ru) • носят рекомендательный характер • обусловлены спецификой компьютерного тестирования *Источник: Васильев В.И., Киринюк А.А., Тягунова Т.Н. Требованияк программно-дидактическим тестовым материалам и технологиям компьютерного тестирования. М.: Изд-во МГУП, 2005.

12. Специфика ТЗ для компьютерного тестирования • Объём текста ТЗ должен быть примерно на 30% меньше аналогичного по содержанию ТЗ для бланочного тестирования • Задание должно быть составлено с учетом того, что среднее время его предъявления на экране составляет около одной минуты

13. Заповедь №1для разработчика тестов • Думать не только о содержании тестового задания, но и о том, сколько времени студент потратитна его восприятие • Его важнейшая обязанность – экономия драгоценного времени обучающегося

14. Требования к составлению тестовых заданийдля компьютерного тестирования • Краткость и логичность суждения • Однозначность заключения • Повествовательная форма логического высказывания • Грамматическая согласованность частей ТЗ • Узнаваемость формы ТЗ

15. Требования к составлению тестовых заданийдля компьютерного тестирования • Отсутствие: • прямых или скрытых подсказок • заведомо ложных, а также явно выделяющихся ответов • вводных слов и предложений • слов, в которых содержится двусмысленностьили противоречие • отрицания в формулировке ТЗ • повторов • Лучше «длинный» вопрос и «короткие» ответы,чем наоборот

16. Требования к составлению тестовых заданийдля компьютерного тестирования • Недопустимо: • использовать ответы типа: все вышеперечисленное верно, все указанные ответы неверны и т.д. • начинать формулировку с предлога, частицы, союза • использовать повелительное наклонение (выберите, вычислите, укажите и т.д.) • Рекомендуется: - при составлении ТЗ из возможных формулировок выбрать ту, в которой количество слов наименьшее

17. NB! Чем лаконичнее задание,тем лучше оно воспринимается! • «Лишние» слова, не несущие смысловой нагрузки, должны быть из ТЗ удалены • На первое место в формулировке необходимо выносить ключевое слово, в котором содержится основной смысл задания

18. Основные показатели качества тестовых заданий при экспертизе • Компактность формулировки ТЗ и вариантов ответов • Логичность (формулировка ТЗ в виде суждения) • Корректность (отсутствиелишних слов) • Достаточность (необходимое количество вариантов ответов) • Содержательность (соответствие ТЗ содержанию ГОС или учебной программе) • Значимость (уровень значимости содержания ТЗ) • Время вывода заключения(ответа) • Однозначность ТЗ • Ясность смысла тестовой ситуации

19. Примерынаиболее типичных ошибокпри составлении тестовых заданий

20. 1. Формулировка задания в форме вопроса

21. Предложите Ваш вариант корректной формулировки задания: Что является одной из ключевых функций управления: +планирование производство сбыт снабжение ПРАВИЛЬНО: Ключевая функция управления: +планирование производство сбыт снабжение

22. Предложите Ваш вариант корректной формулировки задания: Какой из перечисленных источников права является основным в странах англосаксонской правовой системы? нормативный правовой акт правовой обычай +юридический прецедент ПРАВИЛЬНО: Основной источник права в странах англосаксонской правовой системы: нормативный правовой акт правовой обычай +юридический прецедент

23. 2. Повторяющиеся слова или словосочетания Слайд23

24. Предложите Ваш вариант корректной формулировки задания: Формула Дюпона характеризует: +экономическую рентабельность активов экономическую рентабельность собственных средств экономическую рентабельность оборотных средств экономическую рентабельность основных средств ПРАВИЛЬНО: Формула Дюпона характеризует экономическую рентабельность: +активов собственных средств оборотных средств основных средств средств Слайд24

25. Предложите Ваш вариант корректной формулировки задания: Анализ безразличия прибыли на акцию – это анализ: +влияния различных источников финансирования влияния структуры капитала влияния постоянных и переменных затрат влияния структуры производства ПРАВИЛЬНО: Анализ безразличия прибыли на акцию – это анализ влияния: +различных источников финансирования структуры капитала постоянных и переменных затрат структуры производства Слайд25

26. 3. Лишние слова в формулировке ТЗ

27. Предложите Ваш вариант корректной формулировки задания: Из приведенных ниже утверждений выберите то, которое наиболее точно характеризует принцип определения количества голосов страны в совете управляющих МВФ: … ПРАВИЛЬНО: Принцип определения количества голосов страны в совете управляющих МВФ: …

28. ПРАКТИКУМ

29. Какие ошибки допущены? • Ваш вариант корректной формулировки задания Какой налог из перечисленных ниже налогов относится к федеральным налогам? +налог на добавленную стоимость налог на имущество организаций налог на имущество физических лиц ПРАВИЛЬНО: Федеральным является налог на: +добавленную стоимость имущество организаций имущество физических лиц

30. Какие ошибки допущены? • Ваш вариант корректной формулировки задания Какой из следующих показателей следует отнести к показателям движения кадров? +коэффициент постоянства кадров средний уровень квалификации степень дифференциации работников по уровню зарплаты коэффициент текучести кадров ПРАВИЛЬНО: Показатель движения кадров: +коэффициент постоянства кадров средний уровень квалификации степень дифференциации работников по уровню зарплаты коэффициент текучести кадров

31. Какие ошибки допущены? • Ваш вариант корректной формулировки задания Какие из перечисленных функций относятся к внутренним функциям государства: +охранительная +воспитательная духовная социальная политическая экономическая экологическая ПРАВИЛЬНО: Внутренние функции государства: …

32. Какие ошибки допущены? • Ваш вариант корректной формулировки задания Для автоматизированного производства наиболее характерна следующая система оплаты труда: +повременная сдельная сдельно-прогрессивная комиссионная ПРАВИЛЬНО: Система оплаты труда, характерная для автоматизированного производства: +повременная сдельная сдельно-прогрессивная комиссионная

33. Какие ошибки допущены? • Ваш вариант корректной формулировки задания Из перечисленных ниже долговых обязательств укажите инструменты денежного рынка: I. Казначейские векселя; II. Коммерческие векселя;III. Коммерческие бумаги; IV.Депозитные сертификаты. a) верно I и II; b) верно I, II и III; c) верно I и III; d) все верно + ПРАВИЛЬНО: Долговые обязательства, являющиеся инструментами денежного рынка: +казначейские векселя +коммерческие векселя +коммерческие бумаги +депозитные сертификаты … …

34. Какие ошибки допущены? • Ваш вариант корректной формулировки задания Социальные потребности (чувство духовного родства, любовь) относят: +к третьей ступени иерархии потребностей по А. Маслоу ко второй ступени иерархии потребностей по А. Маслоу к четвертой ступени иерархии потребностей по А. Маслоу к пятой ступени иерархии потребностей по А. Маслоу ПРАВИЛЬНО: Ступень иерархии потребностей по А. Маслоу, к которой относят социальные потребности (чувство духовного родства, любовь): вторая +третья четвертая пятая

35. Практическое задание Предлагаем Вам закрепить полученные навыки редактирования формулировок тестовых заданий на специально подготовленном материале. Успехов! 