190 likes | 337 Views
Обработка результатов тестирования Тестирование компетентности в области использования информационно-коммуникационных ( ИК) технологий с помощью тестовых заданий, основанных на реальных жизненных ситуациях. С.М.Авдеева.
E N D
Обработка результатов тестированияТестирование компетентности в области использования информационно-коммуникационных (ИК) технологий с помощью тестовых заданий, основанных на реальных жизненных ситуациях С.М.Авдеева Разработка инструмента осуществляется при поддержке Минфина России и при участии Всемирного Банка
Автоматическая обработка результатов тестирования: сети Байеса
Процедура установки тестовых стандартов
Результаты тестирования школьников
О результатах психометрических исследований
Исследование валидности (конвергентной, дивергентной, текущей, очевидной) Корреляционный анализ Факторный анализ Анализ внутренней согласованности Анализ параметров заданий Анализ DIF (различного функционирования заданий) Анализ функционирования сети Байеса (modelcriticism) Психометрические исследования
Конвергентная, дивергентная и текущая валидность
Факторный анализ • Эксплораторный и конфирматорный факторный анализ: • ФА на уровне наблюдаемых переменных • ФА на уровне заданий Факторная структура отражает контекст заданий Превалирует решение с одним фактором ИКТ-компетентность – сложный конструкт, части которого связаны между собой; Использование единого показателя ИКТ-компетентности оправдано.
61-64 наблюдаемых переменных: • Альфа Кронбаха0.72-0.95 • Метод расщепления с коррекцией 0.65-0.86 Надежность (внутренняя согласованность) • 16 заданий: • Альфа Кронбаха0.35-0.86 • Метод расщепления с коррекцией 0.38-0.86 rtc.imerae@gmail.com WWW.RTC-EDU.RU
Дополнительные измерения, Белоруссия 2013 rtc.imerae@gmail.com WWW.RTC-EDU.RU
Weaver’s surprise index • Logarithmic and quadratic loss • Spherical payoff • Error rate • Confusion matrix • Calibration table • Test sensitivity Model criticism rtc.imerae@gmail.com WWW.RTC-EDU.RU
Переход к адаптивному тестированию • Администрирование с параллельным обучением сети Дальнейшее развитие инструмента rtc.imerae@gmail.com WWW.RTC-EDU.RU
Процедура установки тестовых стандартов
Что думают школьники о тестировании ИК- компетентности