¿Cómo construir una óptima prueba escrita?

1. ¿Cómo construir una óptima prueba escrita? Elementos previos: • Tener claridad sobre los objetivos “que se espera evaluar en los estudiantes”. • Tomar decisiones sobre qué niveles del dominio cognoscitivo se medirán: comprensión de contenidos, resolución de problemas, análisis, capacidad de síntesis, etc. • Pensar en la finalidad de la aplicación de este instrumento, es decir, para qué se recogerá esta información: para comenzar una nueva unidad, para diagnosticar dificultades y problemas en los alumnos al inicio o durante el desarrollo de la unidad, etc. • Será relevante construir una prueba equilibrada y para ello existe un instrumento que si bien es tradicional, contribuye justamente a estos fines (Tabla de especificaciones). • Una vez construida la tabla de especificaciones, se deben construir los ítemes, en correspondencia con esta tabla. • Finalmente, se debe elaborar una pauta de evaluación (instrumento) para registrar la información que nos permita asignar una calificación.

2. Tabla de especificaciones Es un plan en donde se establece en una doble dimensión la competencia que se espera del alumno y el contenido a través del cual se evaluará esa competencia. Por ahora veamos, como ejemplo, el siguiente formato: Competencias Contenidos Análisis 35% Aplicación 40% Total 100% Comprensión 25% Contenido A 15% 1 1 2 4 Contenido B 20% 1 2 2 5 Contenido C 30% 2 2 3 7 Contenido D 35% 2 3 3 8 6 8 10 24 ítemes

3. ¿Cómo se construye una tabla de especificaciones? • Se intentará explicitarla describiendo cada paso. ¡Veamos! 1. Establecer el número total de ítemes que tendrá la prueba. 2. Se decide cuáles son las competencias que serán evaluadas y se ubican en la tabla. Para este ejemplo vamos a suponer que hemos decidido comprensión - análisis - aplicación. 3. Se determinan los contenidos a través de los cuales serán evaluadas las competencias. Éstos dependerán de cada subsector. ¡Con estas tres primeras sugerencias, así nos va quedando la tabla!...

4. Competencias Contenidos Comprensión Análisis Aplicación Total Contenido A Los medios de comunicación. Contenido B Lenguaje publicitario. Contenido C Componentes periodísticos más importantes. Contenido D Estructura de una noticia. Totales 24 ítemes

5. 4. Establecer el porcentaje que se le dará a cada competencia, por ejemplo, un 25% para comprensión, un 35% para análisis, un 40% para aplicación. 5. Calcular el número de ítemes para cada dominio cognoscitivo. • Para saber cuántas preguntas asignar a comprensión, se debe calcular el 25% de 24 ítemes = 6. • Para determinar cuántas preguntas asignar a análisis, debemos calcular el 35% de 24 = 8 • Para saber cuántas preguntas se deben elaborar para aplicación, corresponde calcular el 40% de 24 = 10 ¡De acuerdo a lo que hemos avanzado, nuestra tabla estaría resultando de este modo!...

6. Competencias Contenidos Comprensión 25% Análisis 35% Aplicación 40% Total 100% Contenido A Los medios de comunicación. Contenido B Lenguaje publicitario. Contenido C Componentes periodísticos más importantes. Contenido D Estructura de una noticia. Totales 6 8 10 24 ítemes ¡Continuemos!...

7. 6. Ahora corresponde dilucidar qué importancia le daremos a cada contenido, vamos a suponer que lo hemos asignado de esta manera: • Contenido A: 15%. • Contenido B: 20%. • Contenido C: 30%. • Contenido D: 35%. 7. Es el momento de calcular cómo se traduce lo anterior en número de preguntas en la prueba. Para ello se debe calcular el porcentaje de cada contenido en relación al número de ítemes que ya conocemos en cada dominio cognoscitivo o competencia. ¡De esta manera hemos concluido la elaboración de la tabla de especificaciones y así ha resultado!… Revísela...

8. Competencias Contenidos Comprensión 25% Análisis 35% Aplicación 40% Total 100% Contenido A Los medios de comunicación.15% 1 1 2 4 Contenido B Lenguaje publicitario.20% 1 2 2 5 Contenido CComponentes periodísticos más importantes. 30% 2 2 3 7 Contenido D Estructura de una noticia. 35% 2 3 3 8 Totales 6 8 10 24 ítemes

9. TAXONOMÍA DEL DOMINIO COGNITIVO SITUACIONES PRESENTADAS AL ESTUDIANTE PROCESO PSICOLÓGICO COMPORTAMIENTOS EVIDENCIADOS CATEGORÍAS Evocación por memo-rización o reconoci-miento de: - Datos específicos. - Modos de operar con los datos. - Abstracciones. Se pide, a través de señales o indica-ciones, reproducir la información adquiri-da y almacenada, casi en la misma forma en que se aprendió. Esta categoría puede manifestarse a través de los siguientes comportamientos: nombrar, repetir, enu-merar, definir, descu-brir, identificar, reco-nocer, distinguir, anunciar e indicar. 1. Conocimiento. 2. Comprensión. Aprehensión del men-saje literal contenido en una comunicación pre-sentada en forma verbal, figurativa o simbólica. Este enten-dimiento implica hacer uso de los materiales o ideas que están siendo comunicadas, en forma de:

10. Continuación... SITUACIONES PRESENTADAS AL ESTUDIANTE PROCESO PSICOLÓGICO COMPORTAMIENTOS EVIDENCIADOS CATEGORÍAS Conversión del conoci-miento de la comunica-ción de un nivel de abstracción a otro de una forma verbal o simbólica a otra. Transformando una idea abstracta en términos concretos, o una comunicación extensa en símbolos más sucintos o más abstractos. Esta subcategoría puede manifestarse al: traducir, dominar, decir con sus pala-bras, transformar, representar, ilustrar, parafrasear, expresar, organizar. 2.1. Traducción 2.2. Interpretación Explicando o resu-miendo la comunica-ción; presentando el material, ya sea en una disposición o en un orden diferente, o bien, desde un nuevo punto de vista. Comportamientos de esta subcategoría son: establecer, expli-car, demostrar, reor-ganizar, resumir, con-densar, abreviar... Reordenamiento de las ideas de una comuni-cación en una nueva configuración.

11. Continuación... SITUACIONES PRESENTADAS AL ESTUDIANTE PROCESO PSICOLÓGICO COMPORTAMIENTOS EVIDENCIADOS CATEGORÍAS Determinación del al-cance, las secuencias, los corolarios, las influencias… de las condiciones descritas en la comunicación original. Proyectando las ten-dencias o secuen-cias más allá de los datos entregados. Comportamientos pro-pios de esta sub-categoría serían: pre-decir, estimular, antici-par, inferir, concluir, prever. 2.3. Extrapolación. Utilización de las abstracciones apropia-das en situaciones nuevas, particulares y concretas (ideas gene-rales, reglas, procedi-mientos, principios, teo-rías). Se pide seleccionar, de la información que ya se posee, la adecuada para usar-se en la resolución de una situación problemática nueva. En esta categoría los comportamientos aceptados son: ele-gir, emplear, usar, transferir, resolver, demostrar, reconocer, puntuar. 3. Aplicación.

12. Continuación... SITUACIONES PRESENTADAS AL ESTUDIANTE PROCESO PSICOLÓGICO COMPORTAMIENTOS EVIDENCIADOS CATEGORÍAS Separación de los elementos o partes constitutivas de una comunicación tanto en el contenido como en la forma. Este fracciona-miento puede hacerse para determinar: Se pide descubrir la organización y la estructura de una comunicación, ya sea: 4. Análisis. Comportamientos esperados: distinguir, identificar, discriminar, reconocer, clasificar, categorizar, determi-nar. Jerarquía relativa de las ideas. Identificando elementos. 4.1. De elementos. 4.2. De relaciones, reconocer, diferenciar. Conexiones e interac-ciones entre las partes. Comparar, contrastar, reconocer, diferenciar, relacionar. Determinando las conexiones e inter-acciones entre los elementos.

13. Continuación... SITUACIONES PRESENTADAS AL ESTUDIANTE PROCESO PSICOLÓGICO COMPORTAMIENTOS EVIDENCIADOS CATEGORÍAS Configuración y estruc-tura que unifican la comunicación total. Estableciendo los principios que orien-taron la organización lógica de una comu-nicación. 4.3. De principios de organización. Distinguir, detectar, deducir, inferir, reco-nocer. Reunión de elementos para formar un todo nuevo. De acuerdo al producto elaborado, se distingue. Se pide reunir elementos de diver-sas fuentes y orga-nizarlos creativa-mente en una estructura nueva, que puede ser: 5. Síntesis. Esta subcategoría se manifiesta en los siguientes comporta-mientos: escribir, narrar, relatar, pro-ducir, crear. Una obra personal. Que intenta transmitir ideas, sentimientos y/o experiencias a los otros. 5.1. Producción de una comunicación.

14. Continuación... SITUACIONES PRESENTADAS AL ESTUDIANTE PROCESO PSICOLÓGICO COMPORTAMIENTOS EVIDENCIADOS CATEGORÍAS Que propone un conjunto de opera-ciones que satisface ciertos requisitos. Un plan de trabajo. 5.2. Producción de un plan de acción. Planificar, proponer, producir, proyectar, especificar. Producir, derivar, desa-rrollar, organizar, dedu-cir, formular. 5.3. Derivación de un conjunto de relaciones abstractas. Que intenta clasificar o explicar datos o fenó-menos específicos, o bien, deducir proposi-ciones de otras propo-siciones. Un set de generali-zaciones (hipótesis a ser verificadas o deducciones). Formulación de juicios de valor utilizando criterios, suministrados o no, sobre información más o menos nueva. Los comportamientos usualmente evidencia-dos en esta categoría son: juzgar, argumen-tar, validar, deducir. 6. Evaluación. Se pide emitir juicios basándose en patro-nes de evaluación, que pueden ser:

15. Continuación... SITUACIONES PRESENTADAS AL ESTUDIANTE PROCESO PSICOLÓGICO COMPORTAMIENTOS EVIDENCIADOS CATEGORÍAS Se evalúa la exactitud de una comunicación a partir de evidencias tales como la precisión lógica, la coherencia y otras. Propios de trabajo (lógica interna). 6.1. Evidencia interna. Se evalúa el material con referencia a criterios seleccionados o evocados. Externos a la comu-nicación. Juzgar, argumentar, considerar, comparar, contrastar, estandari-zar. 6.2. Criterios externos.

16. Universidad de Concepción. Facultad de Educación. Departamento de Currículum e Instrucción Profesora Verónica Yáñez Monje. Taller N°6: “Construcción de prueba escrita”. Dividiremos este taller en dos actividades esenciales, por tal razón trabajaremos en dos sesiones: Se sugiere analizar las preguntas adjuntas y establecer qué dominios se evalúan a través de ellas. I Se solicita construir una prueba escrita para la unidad “Comprendo y Aprendo” de la campaña LEM (tercera unidad cuarto básico) a través de los siguientes pasos: II

17. Universidad de Concepción. Facultad de Educación. Departamento de Currículum e Instrucción Profesora Verónica Yáñez Monje. Continuación… • Indicar él o los aprendizajes esperados que evaluará. • Elaborar la tabla de especificaciones. • Preocuparse de evaluar distintos dominios (no olvidar equilibrio de la prueba). • Otorgar un adecuado nivel de importancia en la cantidad y tipo de preguntas a los contenidos ,según su relevancia para el aprendizaje del alumno. • Elabore pautas de corrección para los diferentes reactivos de la prueba. • Establezca claramente el puntaje ideal para cada ítem y que éste sea congruente con la importancia de cada reactivo. Finalmente, comparta el trabajo desarrollado con sus pares (validación). III