760 likes | 1.19k Views
Centro de Investigación Educativa y Profesionalización Institucional. Patricia Frola y Jesús Velásquez. Elaboración de reactivos para pruebas objetivas . El examen “sorpresa”. Piensa en un seudónimo para tí y
E N D
Centro de Investigación Educativa y Profesionalización Institucional Patricia Frolay Jesús Velásquez Elaboración de reactivos parapruebas objetivas CIECI Elaboración de reactivos
El examen “sorpresa” • Piensa en un seudónimo para tí y • Responde las preguntas del examen diagnóstico (anexo 1) que se encuentra en la página 69 de tu manual. • Cuentas con 15 minutos. CIECI Elaboración de reactivos
Objetivo General del taller • Proporcionar información que permita a los participantes enriquecer y reorientar sus prácticas evaluativas relacionadas con la elaboración de reactivos para pruebas objetivas, a partir de elementos conceptuales, metodológicos y lineamientos estandarizados.
Elaboración de reactivos para pruebas objetivas I. El Proceso evaluativo Conceptos y fundamentación IV. Elaboración y validación de reactivos II. Tipos de instrumentos de medición III. Metodología para la elaboración de reactivos - Medición - Calificación - Evaluación del aprendizaje de las competen -cias - De respuesta estructurada - De respuesta no estructurada - Validez, confiabilidad y objetividad - Estándares de calidad - Reactivo de opción múltiple - Tipos y formatos -Propósito de la prueba -Perfil referencial - Nivel Cognoscitivo - Tabla de especificaciones -Lineamientos -Validación - Estudio psicométrico * Producción de reactivos - retroalimentación colegiada -validación a priori - El proceso y sus fases - Tipos - Funciones - Vinculación curricula/planeación/ evaluación
Tema I. El proceso evaluativo, conceptos y fundamentación • ¿Qué es evaluación? El proceso psicológico superior, inherente al ser humano, se relaciona con la capacidad de juicio que toda persona desarrolla a lo largo de su vida y le permite sobrevivir y resolver necesidades. CIEPI Elaboración de reactivos
Fig. 2 El proceso genérico de evaluación [1] Evaluación Proceso • . 1. Obtener 3. Tomar 2.Formular Decisiones Información Juicios [1] Stufflebeam, D.L. y Shinkfield, A.J. (1993). Evaluación Sistemática. Guía teórica y práctica. Paídos-Madrid. MEC
Evaluación educativa • Proceso para obtener información sobre cualquier componente del sistema educativo, emitir juicios de valor referidos a ciertos criterios y llegar a una toma de decisiones que lleven a la mejora . • Funcional, sistemática, continua, integral, orientadora y cooperativa. • Componentes: • la planta física, el proceso administrativo, • la gestión directiva, el proceso de titulación, • rendimiento escolar estatal, municipal o nacional .
Evaluación del aprendizaje(en canevá) Proceso ______, ________, ________, _________, Que recaba_______ para emitir______, con base en el logro de los _____________ curriculares, que permita la __________ de ____________ educativas tales como: • _____________ • _____________ • Acreditación • Programas remediales
Medición • Medir es recabar información y ordenarla a partir de sus características cuantitativas o numéricas, es asignar un numeral a partir de su comparación con una unidad o escala previamente definida o convenida. [1] [1] Santibáñez, R. J. (2001) Manual para la evaluación del aprendizaje estudiantil. Trillas. México
Es el procedimiento para establecer una correspondencia entre la escala numérica y rangos o categorías cualitativas, por ejm. Muy bien = 100 y 90; Bien =70 y 80; Regular = 60; No aprobado= 50 Calificación
1 2 3 4 Diseño del INSTRUMENTO PREPARACIÓN PLANEACION APLICACION Calibración de los reactivos estudio psicométrico Estudio de la versión utilizada 6 5 7 PUNTUACIÓN USO DE LA INFORMACIÓNRESULTANTE RESULTADOS Fases del proceso evaluativo
Instrumentos de evaluación se pueden clasificar Por la interpretación de sus resultados Por su función Por su temporalidad Diagnóstica Formativa Sumativa Inicial Intermedia Final Con referencia a la norma Con referencia al criterio
Vinculación contenidos-planeación-evaluación • Asegurar que existe concordancia metodológica entre la currícula, la planeación, lo que se realiza en clase, los materiales, y el instrumento de evaluación.
Son herramientas que se diseñan para medir o valorar atributos identificados en un contexto determinado. Un cuestionario, una encuesta, una prueba, una escala , un inventario, lista de verificación. Atributos Validez Confiabilidad Objetividad Estándares de calidad Utilidad Equidad Factibilidad Exactitud Reactivos como ejemplos y contraejemplos de los principios Tema II. Los instrumentos de evaluación
Validez Confiabilidad Objetividad Que mida lo que pretende, para lo que fue diseñado Que al replicar el instrumento se encuentren resultados estables Que esté libre de sesgos emotivos del evaluador Los atributos de un instrumento • Definir en cada equipo V-C-O • Analicemos la actividad el examen Dx • con base en estos principios
Utilidad Factibilidad Equidad Exactitud Debe Servir para una mejora continua Ser viable, ejecutable Ofrecer condiciones equitativas para el acceso al instrumento a todos los evaluados Ofrecer resultados lo más exactos y precisos posible, al seguir una metodologíaadecuada Los estándares de calidad
Instrumento de evaluación cerrado conformado por: Reactivos de opción múltiple cuya respuesta correcta es única Con distractores que deben ser plausibles pero incorrectos Permite hacer comparaciones entre grupos y son susceptibles de tratamiento estadístico Exploran una muestra representativa del aprendizaje logrado por el estudiante Pueden aplicarse a gran escala Cumplen con reglas de diseñoy calificación estandarizadas Se realizan con base en los estándares de calidad Proporcionan información relevante sobre el nivel de aprendizaje conceptual del programa; Sus resultados deben apoyar la toma de decisiones educativas Qué es una Prueba Objetiva
Ventajas Desventajas Pruebas objetivas
Tema III. Metodología para la elaboración de reactivos El paso a paso para elaborar reactivos de opción múltiple
Para elaborar reactivos debes saber: • El reactivo de opción múltiple • Tipos • Formatos • Lineamientos para su elaboración • El sustento de los reactivos • Taxonomía cognoscitiva • Correspondencia curricular • Perfil de referencia (PR) • Tabla de especificaciones • Validación del reactivo • Por pares, academia o colegiado • Estudio piloto • Estudio cuantitativo a posteriori
El examen de ladrillos IActividad didáctica • Fila A • Escribe Qué es un ladrillo _______________________ • Fila B • ¿Cuál es la función de un ladrillo?_________________ • Fila C • Describe brevemente la etapas de fabricación de un ladrillo ______________________________________ • Fila D • Explica brevemente el proceso de comercialización del ladrillo en México desde un enfoque economía dependiente ______________________________________________ CIEPI Elaboración de reactivos
¿Qué es? Es un planteamiento que puede presentarse en forma de pregunta o de afirmación, a la cual el examinado debe elegir de entre 4 o 5 opciones,únicamente la correcta, sin oportunidad de escribir o expresar más allá. . El reactivo de opción múltiple ( ROM)
Componentes de un reactivo Elige la opción que completa correctamente la siguiente afirmación: • la instrucción • la base • las opciones La evaluación como proceso psicológico superior es: • Común a los seres vivos • Inherente al ser humano • Inherente a procesos biológicos • inherente a la conciencia social
Tipos y formatos del reactivo de opción múltiple • Tipos • Reactivo simple • Multireactivo • Formatos • Respuesta directa y canevá • Ordenamiento • Relación de columnas • Opción alterna F-V • Selección de elementos
Tipos • El reactivo simple • El multirreactivo
El multirreactivo La base o planteamiento • . CIEPI Elaboración de reactivos
Reactivo dependiente 1 • El nombre de la gráfica anterior es: • Histograma • Polígono • Dispersión • Circunferencia
Reactivo dependiente 2 • ¿Cuál es la media de ingreso entre los años 1992 y 2000? • 250 • 200 • 150 • 300
Reactivo dependiente 3 3. De acuerdo con los datos de la gráfica, ¿qué afirmación es correcta? 300 • El ingreso de alumnos en los tres últimos años aumentó en forma directamente proporcional • Cada dos años aumenta el número de alumnos que admite la escuela • Cada dos años disminuye el número de alumnos que admite la escuela • Las variaciones en el número de alumnos que ingresa no son directamente proporcionales
Formatos • Cuestionamiento directo o canevá • Ordenamiento y jerarquización • Relación de columnas • Selección de elementos • Opción alterna falso-verdadero
Respuesta directa y canevá Elije la frase que completa correctamente la siguiente afirmación: • Si un coche circula por un camino recto a velocidad constante, la fuerza es __________________. • cero o continuamente cero • una suma que no es cero pero es constante • Cero, una constante, después mayor a cero y luego otra vez cero • Continuamente variable
Canevá Elija las palabras que completen correctamente el siguiente enunciado. 1. Claire is _____pretty ______Polly • as -- as • the same -- as • same -- as • as -- same
Jerarquización u ordenamiento Elige la combinación que representa correctamente la secuencia cronológica de hechos históricos 2. La secuencia en la que suceden cronológicamente los acontecimientos de la vida política de Benito Juárez es 1 Derrocó a Santa Ana 2 Se convirtió en gobernador de Oaxaca. 3 Fue desterrado a Cuba y Nueva Orleáns. 4 Contribuyó a la caída de Maximiliano. • 2,3,1,4 • 1,2,4,3 • 3,4,2,1 • 4,1,3,2
Jerarquización Instrucciones: Elija la opción que combine correctamente los siguientes elementos de la lista. • Ordene, los niveles de aprendizaje propuestos por B. Bloom en el dominio cognoscitivo, empezando por el más elemental. • Comprensión • Evaluación • Aplicación • Análisis • Conocimiento • Síntesis Opciones: • 2 - 6 - 4 - 3 - 1 -5 • 6 - 2 - 4 - 5 - 3 -2 • 5 - 1 - 3 - 4 - 2 -6 • 2 - 1- 3 - 4 - 6 - 5 CIEPI Elaboración de reactivos
Autores Shakespeare Chaucer Orwell Hardy Huxley Obras A. 1984 B. Jude, the obscure C. Crome Yellow D. Hamlet E. The Canterbury Tales Relación de columnas I. Señala la opción que represente correctamente la relación entre cada autor con su obra • Opciones • 1- D, 2-A, 3- B, 4-C, 5-E • 1- B, 2-A, 3- D, 4-C, 5-E • 1- E, 2-A, 3- B, 4-C, 5-D • 1- E, 2-A, 3- D, 4-C, 5-B
Exponentes 1. Smirnov 2. Watson 3. Adler 4. Wundt 5. Thorndike Aportaciones A. Precursor del conductismo B. Perteneciente a la escuela psicoanalítica. C. Exponente de la corriente reflexológica. D. Especialista en psicología del aprendizaje. E. Creador del primer laboratorio de psicología. F. Creador de la escala de autorrealización I. Señala la opción que represente correctamente la relación entre cada exponente con su teoría. • Opciones • a). 1-C, 2-A, 4-E, 5-D, 3-B • b). 1-C, 2-A, 4-E, 3- F, 5-B • c)., 4-D, 3-E, 5-B, 1-A, 2-C • d). 4-D, 3-F, 5-B, 1-C, 2-A
Opción alterna falso - verdadero La Odisea es una epopeya F ( ) V ( ) La toma de la Bastilla tuvo lugar en 1790 F ( ) V ( ) Pasteur descubrió la penicilina F ( ) V ( )
Selección de elementos I. Elige la combinación correcta de elementos del listado que complete la afirmación Los estándares de calidad son : • Utilidad • Exactitud • Confiabilidad • Dificultad • Equidad • Factibilidad • Objetividad Opciones • 3,4,6 y 7 • 1,2,3 y 5 • 1,2,5 y 6 • 1,3, 6 y 7 CIEPI Elaboración de reactivos
El acta de nacimiento de un reactivo CIEPI Elaboración de reactivos
Lineamientos para elaborar reactivos • Del contenido • De la base • De las opciones
El sustento metodológico del examen Diseño • El propósito del examen(preguntas) • Definir el perfil de referencia PR • Contenidos del bloque curricular (objeto de medida) • Contenidos representativos, sustanciales, básicos, suficientes • Definición operacional de sus elementos • Asignar niveles taxonómicos • Definir manifestaciones operacionales de los conocimientos • Validar el PR (ver formato) • Estructura del examen • Extensión, formas de calificación, organización lógica de componentes temáticos • Plan de verificación de los reactivos • Por el colegiado, verificación a priori • Estudio cuantitativo
Taxonomía de los objetivos educacionales (Benjamín S.Bloom, J. Thomas Hasting and George F. Madaus) Afectivo Cognitivo Psicomotriz Examenobjetivo
complejo Evaluación implicación Síntesis Análisis Aplicación simple Comprensión Conocimiento taxonomía cognoscitiva Tomado de manual del participante.taller de reactivos CENEVAL 2007.
Supone la evocación o recuerdo de información concreta Conocimientos generales El enunciar o listar métodos, procesos, estructuras y modelos recuerdo y la memoria. Ejemplos Identificación de fechas históricas Definición de conceptos Términos de diferentes disciplinas Convenciones Clasificaciones Enunciar o enlistar los diferentes pasos de un proceso Conocimiento
Reactivos tipo • ¿Qué enunciado define el término de...? • Observa la siguiente imagen e identifica... • ¿En qué año se descubrió...? • ¿Cuál es la fórmula de...? • ¿Cuáles son las características de...? • ¿Qué enunciado expresa el principio de...? • ¿Cuál es el objeto de estudio de…? • ¿Cuál es el principio de…? • ¿Cómo se define el concepto de…? • ¿Cuál es la clasificación de…?
Nivel primario del entendimiento, El individuo descifra, traduce, decodifica puede utilizar el material para devolver una respuesta sin conocer sus implicaciones totales. Ejemplos Ejemplificación las relaciones que guardan entre sí los elementos . Comprensión de las relaciones de jerarquía de los elementos de un grupo Comprensión de un caso específico con procedimientos generales. Comprensión de casos diferentes con procedimientos particulares. Explicar los elementos de una imagen El significado de palabras en otro idioma Comprensión CIEPI Elaboración de reactivos