Лекция 8. Угрозы психометрическому качеству теста

1. Лекция 8.Угрозы психометрическому качеству теста Лекции проф. А. А. Алексеева по психометрике Arthur Robert Jensen (August 24, 1923 – October 22, 2012)

2. Типы установок на ответ • Установка на согласие (установка на положительный или отрицательный ответ) • Установка на крайние ответы и установка на промежуточные ответы • Установка на социальную желательность • Симуляция неблагополучия • Бездумные или случайные ответы • Угадывание

3. Ответы на утверждения исходных тестов:1. Я действительно доволен своей работой2. Работа дает мне возможность самореализации3. В целом я удовлетворен повседневным ходом своей работы4. Я бы поменял лишь незначительные моменты в моей работе

4. Установка на выбор крайних ответов

5. Возможные причины установки на социальную желательность • 1. Содержание теста • 2.Ситуация тестирования • 3. Личностные особенности

6. Пример зависимости результатов исследования от наличия установки на социально желательные ответы

7. Методы борьбы с установками на ответ

8. Ответы на утверждения исходных тестов:1. Я действительно доволен своей работой2. Моя работа не соответствует моим интересам и склонностям3. В целом я удовлетворен повседневным ходом своей работы4. Я бы многое хотел поменять в своей работе

10. Виды необъективности теста • Необъективность в значении теста (неадекватность конструкта) • Необъективность в использовании теста (прогностическая ошибка)

11. Методы выявления неадекватного конструкта • Вычисление индексов дискриминативности пунктов теста • Факторный анализ • Анализ дифференциального функционирования пунктов теста • Ранжирование

15. Определение прогностической ошибки: пример использования линейной регрессии (1) • Уравнение линейной регрессии: • a = 56,03, b = 0,58, • = 96,05 • = 96,63

16. Определение прогностической ошибки: пример использования линейной регрессии(2)

17. Систематическая ошибка свободного члена регрессии • b = 0,58, • Прогнозируемое значение критериальной переменной для мужчин = 58,03 + 0,58(70), • Прогнозируемое значение критериальной переменной для мужчин = 98,63, • Прогнозируемое значение критериальной переменной для женщин = 54,03 + 0,58(70), • Прогнозируемое значение критериальной переменной для женщин = 94,63.

18. Графики линейной регрессии в группах мужчин и женщин по сравнению с графиком общего регрессионного уравнения (иллюстрация систематической ошибки свободного члена регрессии)

19. Графики линейной регрессии в группах мужчин и женщин по сравнению с графиком общего регрессионного уравнения

20. Систематическая ошибка углового коэффициента регрессии • a = 56,03, b = 0,58 , • Прогнозируемое значение критериальной переменной для мужчин = 56,03 4 +0,53(70). • Прогнозируемое значение критериальной переменной для мужчин = 93,13. • Прогнозируемое значение критериальной переменной дли женщин = 56,03 + 0,63(70). • Прогнозируемое значение критериальной переменной для женщин = 100,13. • Прогнозируемое значение критериальной переменной для мужчин = 56,03 + 0,53(60). • Прогнозируемое значение критериальной переменной для мужчин = 87,83. • Прогнозируемое значение критериальной переменной для женщин = 56,03 + 0,63(60). • Прогнозируемое значение критериальной переменной для женщин = 93,83.

21. Графики линейной регрессии в группах мужчин и женщин по сравнению с графиком общего регрессионного уравнения (иллюстрация систематической ошибки наклона линии регрессии)