Итоги Интернет –тестирования (ФЭПО -4 )

1. Итоги Интернет –тестирования (ФЭПО-4)

2. В начале 2009 года (ориентировочно февраль-март) ОГУ будет проходить процедуру комплексной оценки деятельности (КОД), которой будут предшествовать: • Самообследование (С) • Аттестационное тестирование (АТ) 2008 г. 2009 г. С АТ КОД Октябрь - декабрь Февраль - март

3. Программа оценки содержания и качества подготовки при самообследовании • Все аттестуемые ООП • Все циклы дисциплин по каждой ООП • Важнейшие дисциплины цикла: • не менее 3-х по циклам ГСЭ и ЕН • не менее 5-и по циклам ОПД и СД • Студенческие группы, завершившие изучение дисциплины не позднее чем за год до самообследования

4. Аттестационное тестированиепроводится для целей аттестации образовательных программ в процедурах комплексной оценки и внеплановых проверок образовательных учреждений

5. Цель аттестационного тестирования оценка соответствия содержания, уровня и качества подготовки выпускников учебного заведения требованиям государственных образовательных стандартов высшего профессионального образования (ГОС ВПО).

6. ОСНОВНЫЕ ПРИНЦИПЫ ПРОВЕДЕНИЯ АТТЕСТАЦИОННОГО ТЕСТИРОВАНИЯ • до выезда в вуз комиссии по аттестационной экспертизе; • одновременно в группе вузов; • по федеральным компонентам ГОС циклов ГСЭ, ЕН, ОПД, СД, ДПП; • в присутствии ответственного, назначаемого Рособрнадзором.

7. Особенности контроля знаний студентов для целей аттестации образовательных программ • По объекту оценивания – учебные достижения группы, курса, всех студентов ООП (но не индивидуальные достижения) • По уровню подготовки – базовый уровень подготовки (уровень, заданный в ГОС) • По содержанию контроля – оценка всех элементов содержания дисциплины по ГОС • По шкале оценивания – бинарная оценка (усвоил – не усвоил) • По характеру процедуры – массовое оценивание в ограниченные сроки (технологический подход)

8. ВЫБОР Образовательных Программ • Осуществляется Управлением лицензирования аккредитации и надзора в образовании • Количество ООП не превышает 10 • Обязательно указываются в Распоряжении Рособрнадзора

9. ВЫБОР ДИСЦИПЛИН ДЛЯ ТЕСТИРОВАНИЯ ПО ООП • Выбор дисциплин осуществляется на основании учебных планов, предварительно прошедших экспертизу в Информационно-методическом Центре аттестации (ИМЦА); • По каждой образовательной программе тестирование проводится по 5 дисциплинам

10. ВЫБОР ДИСЦИПЛИН ДЛЯ ТЕСТИРОВАНИЯ

11. ВЫБОР ДИСЦИПЛИН ДЛЯ ТЕСТИРОВАНИЯ • Вариант 1(при наличии тестов по ОПД, СД): • ГСЭ- 1 дисциплина, • ЕН - 1 дисциплина, • ОПД, СД – 3 дисциплины • Вариант 2(при отсутствии тестов по ОПД, СД): • ГСЭ- 2 (3) дисциплины, • ЕН – 3 (2) дисциплины.

12. Технологически тестирование разделено на 2 группы: • дисциплины циклов ЕН и ГСЭ тестируются по технологии Интернет-экзамена (ФЭПО) - www.fepo.ru, att.nica.ru • тестирование студентов по дисциплинам блоков ОПД, СД, ДПП осуществляется по технологии АСТ - www.ctve.ru., www.ast-centre.ru

13. Модель аттестационного педагогического измерительного материала (ФЭПО) Название дисциплины Дисциплина Контролируемые в АПИМ дидактические единицы дисциплины Дидактическая единица №1 Дидактическая единица №2 Дидактическая единица №k ……… Задание 1 Задание 1 Задание 1 Задания АПИМ Задание 2 Задание 2 Задание 2 Задание N Задание N Задание N Критерий освоения ДЕ дисциплины : не менее 50% правильно решенных заданий из N

14. Содержание ГОС дисциплины «Философия» для ООП 060800«Экономика и управление на предприятии (по отраслям)»

15. Фрагмент структуры АПИМ по дисциплине «Философия»

16. Количество заданий (ФЭПО) • Количество заданий определяется количеством ДЕ и тем в ДЕ • Время, отводимое на выполнения – от 40 до 80 минут

17. ПРАВИЛО ПРИНЯТИЯ РЕШЕНИЙ ПРИ АТТЕСТАЦИИ ДИСЦИПЛИН (ФЭПО)

18. АСТ По любой дисциплине - 60 заданий Время на работу с тестом 60 минут

19. ПРАВИЛО ПРИНЯТИЯ РЕШЕНИЙ ПРИ АТТЕСТАЦИИ ДИСЦИПЛИН (АСТ)

20. 1 0,8 0,6 0,4 0,2 доля вузов Зона успеха 0 10 20 30 40 50 60 70 80 90 100 средний балл решенных заданий CХЕМА ОПРЕДЕЛЕНИЯ ПОРОГОВОГО ЗНАЧЕНИЯ ПО ДИСЦИПЛИНЕ ДЛЯ ПРИНЯТИЯ РЕШЕНИЯ(утверждено на 6-ой коллегии (Октябрь) 2004 г.) Критериальное(пороговое) значение

21. Пороговые значения • Пороговые значения зоны успеха для учебных дисциплин ежегодно утверждаются аккредитационной коллегией Рособрнадзора. • Утвержденные показатели публикуются на сайте www.ctve.ruв разделе «Тестирование Вузов» / «Информация для руководства вузов» / «Критериальные значения результатов тестирования»: http://www.ctve.ru/info/testingvuz/info_for_vuz/kriteriali_znacheniya_rezoylit

22. Критериальные значения результатов дидактического тестирования студентов при оценке деятельности образовательного учреждения Утверждены на Аккредитационной коллегии от 05.10.2006 г.

23. ПРАВИЛО ФОРМИРОВАНИЯ ВЫБОРКИ СТУДЕНТОВ • В тестировании участвуют студенты 2-5 курсов обучения • Выборка составляет 25 студентов из курса, вне зависимости от принадлежности к группе курса. • Если на курсе < 25 человек, то тестируются все студенты курса • Обучение по дисциплине должно быть завершено не более 1 года назад • Один студент тестируется не более чем по трем дисциплинам и не более 2 раз в день

24. ПРАВИЛО ПРИНЯТИЯ РЕШЕНИЯ ПО РЕЗУЛЬТАТАМ ТЕСТИРОВАНИЯ(утверждено на 6-ой коллегии (Октябрь) 2005 г.) - по дисциплине не преодолено пороговое значение - результат тестирования выше порогового значения

25. Результаты Интернет –тестирования (ФЭПО-4)(12 декабря 2006 г. – 25 января 2007 г.) по данным информационно-аналитической картырезультатов педагогических измерений

26. 010501.65 Прикладная информатика и математика

27. 031001.65 Филология

28. 031801.65 Религиоведение

29. 120303.65 Городской кадастр

30. 140106.65 Энергообеспечение предприятий

31. 190702.65 Организация и безопасность движения

32. Дисциплина: Математика процент студентов, полностью освоивших все контролируемые ДЕ дисциплины

33. Дисциплина: Информатика

34. Дисциплина: Концепции современного естествознания

35. Дисциплина: Математика и информатика

36. Дисциплина: Физика

37. Дисциплина: Отечественная история

38. Дисциплина: Философия

39. Дисциплина: Политология

40. Дисциплина: Культурология

41. Дисциплина: Экология

42. Дисциплина: Теоретическая механика

43. Карта коэффициентов решаемости заданий Дисциплина: Философия ООП: 010501.65 «Прикладная математика и информатика» Группа: 04ПриМ • Карта коэффициентов решаемости позволяет оценить уровень подготовки испытуемых по отдельным темам измерительных материалов • По данному графику можно выявить темы, оказавшиеся трудными для студентов контролируемой группы (коэффициент решаемости менее 0,4) на очень низком уровне выполнены задания по следующим темам: №22 «Развитие науки» информационно-аналитическая карта результатов педагогических измерений

44. Карта коэффициентов освоения ДЕ Дисциплина: МатематикаООП: 140106.65 «Энергообеспечение предприятий» Группа: 04ЭОП • График позволяет оценить степень освоения тематических разделов дисциплины • Наглядно выявляются разделы, освоенные на недостаточном уровне (коэффициент освоения менее 0,7) Карта коэффициентов освоения ДЕ дисциплины показывает, что данным контингентом студентов на недостаточном уровне освоена следующая дидактическая единица: №8 «Дифференциальные уравнения» информационно-аналитическая карта результатов педагогических измерений

45. Ранжирования показателей освоения дисциплин для ООП ОГУ относительно вузов-участников Интернет-экзамена в статусе университет или академия

46. Статистика результатов Интернет-экзамена • По России из 372 тыс. результатов, свидетельствующих об уровне подготовки студентов вузов, полностью соответствуют требованиям ГОС 171 тыс. (46%) • По ОГУ 45% результатов 197 из 443 полностью соответствует требованиям ГОС Соответствуют 54% 46% 45% 55%

47. Проблемы • Расплывчатость описания содержания дисциплины в ГОС, неоднозначно трактуемая разными преподавателями, включая разработчиков тестов • Несоблюдение требований ГОС к обязательному минимуму содержания по дисциплинам • Недостаточно активная работа отдельных преподавателей по подготовке к тестированию групп студентов • Недостаточно производительный интернет-канал

48. Дисциплины Интернет-экзамена на май –июнь 2007 г.

49. Из письма заместителя руководителя Федеральной службы по надзору в сфере образования и науки Е.Н. Геворкян от 10 марта 2006 г. • ... Результаты тестирования могут быть использованы вузом в отчете по самообследованию, а также при проведении мониторинга качества подготовки студентов во внутривузовских системах менеджмента качества • ... При регулярном участии вуза в Интернет-экзамене (не менее, чем по трем дисциплинам каждого цикла) результаты тестирования могут быть зачтены в качестве официальных при комплексной оценки вуза.

50. СПАСИБО ЗА ВНИМАНИЕ