RESULTADOS DE SABER 5° y 9°

1. RESULTADOS DE SABER 5° y 9° Dirección de Evaluación

2. Contenido • Ciclo de la evaluación • Principales características de SABER 5° y 9° • Resultados • 2009 – nacionales • Comparación entre puntajes promedio y niveles socioeconómicos

3. Objetivo de la evaluación Contribuir al mejoramiento de la calidad de la educación colombiana mediante la realización de medidas periódicas del desarrollo de competencias de los estudiantes en los distintos niveles, como indicador de calidad del sistema educativo

4. 1. Ciclo de la evaluación

5. Contenido • Ciclo de la evaluación • Principales características de SABER 5° y 9° • Resultados • 2009 – nacionales • Históricos • Comparación entre puntajes promedio y niveles socioeconómicos

6. Antecedentes • Década de los 90: evaluaciones muestrales • Desde 2001: obligatoriedad de evaluaciones censales, periódicas (3 años) y comparables • Se han llevado a cabo tres aplicaciones censales • 2002 - 2003 • 2005 -2006 • 2009 • Los resultados son públicos y buscan aportar información útil para fortalecer los procesos de autoevaluación institucional y diseño de estrategias de mejoramiento

7. A quiénes evalúa La calidad de la educación impartida por los establecimientos educativos - oficiales y privados, urbanos y rurales - mediante la aplicación periódica de pruebas de competencias básicas a los estudiantes de quinto y noveno grados, así como de cuestionarios que recogen información para identificar los factores que inciden en los resultados En concordancia con los principios de la educación inclusiva, en SABER 5º y 9º participan los estudiantes que presentan discapacidades físicas, sensoriales y cognitivas El carácter censal de SABER 5º y 9º permite que cada colegio tenga información acerca de sus fortalezas y debilidades, y da elementos para el diseño, ejecución y evaluación de los planes de mejoramiento institucional

8. Qué se evalúa • Evaluación alineada con los estándares básicos de competencia del MEN • Resultados posibilitan el monitoreo de los avances en el tiempo y son un insumo para el diseño de estrategias específicas de mejoramiento • Evalúa las competencias en lenguaje, matemáticas y ciencias naturales que han desarrollado los estudiantes hasta 5° grado (ciclo de básica primaria) y hasta 9° grado (ciclo de básica secundaria). • Prueba estandarizada de “lápiz y papel” • No es posible evaluar todas la competencias establecidas en los estándares • Pruebas estructuradas bajo la metodología conocida como diseño de especificaciones basado en el modelo de evidencias.

9. Competencias evaluadas • Competencia: “saber hacer flexible que puede actualizarse en distintos contextos … capacidad de usar los conocimientos en situaciones distintas de aquellas en las que se aprendieron” (MEN)

10. Componentes evaluados • Componentes: categorías conceptuales o los tópicos propios del área o la disciplina

11. Metodología para la construcción de las pruebas • Garantiza la elaboración de instrumentos de evaluación con igualdad de características durante un período largo de tiempo • Asegura la comparabilidad de lo que se evalúa y de los resultados obtenidos en cada aplicación • Permite dar información explícita sobre lo que los estudiantes pueden o no hacer • En el diseño de las pruebas participaron docentes de básica en ejercicio, profesores universitarios y expertos en evaluación. En mesas de trabajo se definió, a partir de los estándares básicos de competencias, lo que debería ser evaluado en cada una de las áreas

12. Proceso de elaboración de las pruebas a través de la metodología Diseño de especificaciones basado en el modelo de evidencias

13. Metodología para la construcción de las pruebas Ejemplo: ciencias naturales, quinto Identifico estructuras de los seres vivos que les permiten desarrollarse en un entorno y que puedo utilizar como criterios de clasificación Estándar Competencia Uso del conocimiento científico • El estudiante: • Analiza algunas diferencias y semejanzas de las características de los seres vivos • Comprende que los seres vivos atraviesan diferentes etapas durante su ciclo de vida Afirmaciones

14. Instrumentos • Pruebas: se aplicaron pruebas en matemáticas, lenguaje y ciencias, en 5° y 9° grado, para un total de 6 pruebas. Cada una de estas pruebas se califica separadamente, aunque siguiendo los mismos patrones de procesamiento. • Cada estudiante contestó pruebas de dos de las tres áreas evaluadas. • 5° grado respondieron 84 o 96 ítems, en una sesión de 180 minutos • 9° grado respondieron 108 ítems, en una sesión de 180 minutos de duración. • Todas las preguntas utilizadas en las pruebas son de selección múltiple con única respuesta.

15. InstrumentosFactores asociados

16. AplicacionesOperativo censal • Cobertura: • 90% de los establecimientos educativos de todo el territorio nacional • 95% de las hojas de respuesta procesadas

17. AplicacionesOperativo muestral

18. Tipos de resultados • Puntajes promedio • Desviación estándar • Niveles de desempeño • Fortalezas y debilidades • Desagregaciones • Sector (Oficial, No oficial) • Zona (Urbano, Rural) • Interacción sector-zona (Oficiales urbanos, oficiales rurales y no oficiales) • Género • Nivel socioeconómico (Cuatro categorías)

19. Niveles de desempeño • Tipo de resultados que permiten observar la clasificación a los estudiantes según el desempeño alcanzados en cada una de las áreas evaluadas. • Describen las competencias de los estudiantes en cuanto a lo que saben y saben hacer según la prueba en cada área evaluado y grado.

20. ¿Cómo se calcularon los niveles de desempeño para SABER 2009? INICIO Convocatoria y Selección de Docentes Inducción para los docentes FINAL Elaboración de Descriptores Revisión estándares y lineamientos Cálculo puntos de corte por grado y área evaluada STANDARD SETTING Descripción inicial de niveles de desempeño Ajuste de nivelesde desempeño Panel dediscusiónMétodo de Angoff

21. Características de los niveles de desempeño • Globales: • Se encuentran definidos para la prueba total y no para competencias y componentes específicos. • Jerárquicos: • Significa que tienen complejidad creciente. Por tanto, el nivel avanzado es más complejo que el satisfactorio y, a su vez, este último es más complejo que el mínimo. • Inclusivos • Para ubicarse en un nivel determinado es necesario superar los niveles precedentes

22. Descripción general de los niveles de desempeño

23. Ejemplo. Lenguaje quinto grado

24. Ejemplo. Lenguaje noveno grado

25. Resultados SABER 5° y 9° • Resultados censales: • Retroalimentar a los establecimientos educativos y las administraciones municipales y departamentales, dando elementos para la formulación y/o reorientación de sus planes de mejoramiento. • Resultados muestrales: • Estimar con márgenes de error bajos el estado de las competencias de los estudiantes de educación básica y secundaria y las diferencias entre diversos grupos • Consolidar una línea de comparación hacia el futuro que facilitará el seguimiento de los avances en la calidad de la educación colombiana. • Resultados históricos • Establecer una comparación entre resultados de aplicaciones anteriores

26. Reportes disponibles

27. Tipos de resultados

28. Comparaciones que NO se pueden realizar con los resultados SABER 2009 • Entre el puntaje promedio de un establecimiento educativo en una determinada área y grado y el puntaje promedio de esa institución en otra área o grado • Entre la desviación estándar de un establecimiento educativo en una determinada área y grado y la desviación estándar de esa institución en otra área o grado • Entre el promedio de los establecimientos educativos de una entidad territorial en un área y grado y el promedio de los establecimientos educativos de esa u otra entidad territorial, en otra área o grado • Entre las desviaciones estándar de los establecimientos educativos de una entidad territorial en un área y grado y las desviaciones estándar de las instituciones de esa entidad territorial, en otra área o grado • Entre el número de estudiantes de una determinada sede-jornada según rangos de puntaje y niveles de desempeño con el porcentaje de estudiantes del establecimiento educativo o de la entidad territorial a la que pertenece, en una determinada área y grado, o en áreas y grados diferentes

29. Contenido • Ciclo de la evaluación • Principales características de SABER 5° y 9° • Resultados • 2009 – nacionales • Comparación entre puntajes promedio y niveles socioeconómicos

30. Desempeño en lenguaje • El 35% de los estudiantes de quinto y el 40% de los de noveno alcanzan o superan las competencias exigibles en lenguaje: • Logran comprensión global de los textos que leen, valoran y relacionan sus contenidos con los de otras fuentes, explican las intenciones de los textos, hacen inferencias, categorizan información, identifican secuencias de las ideas y evalúan la pertinencia de los escritos en cuanto a propósito, contenido y contexto

31. Desempeño en lenguaje • Principales dificultades: • Leer comprensivamente textos complejos (ensayos, crónicas periodísticas, poemas) • Localizar información implícita en los textos y realizar inferencias • Establecer relaciones entre la información contenida en dos o más textos (comparar, identificar puntos de vista distintos) • Integrar información de varios textos con su conocimiento propio, y aplicarla a diferentes situaciones de su vida • Evaluar críticamente los contenidos de los textos, construir hipótesis y establecer puntos de vista propios y argumentados sobre diferentes temas

32. Desempeño en matemáticas El 25% de los estudiantes de quinto y el 22% de los de noveno alcanzan o superan las competencias exigibles en matemáticas Utilizan las propiedades de las operaciones para solucionar problemas, usan expresiones y representaciones gráficas para modelar situaciones, hacen conjeturas sobre fenómenos aleatorios, comparan diferentes atributos de figuras y sólidos y establecen relaciones entre ellos, estiman probabilidades sobre eventos sencillos, entre otros

33. Desempeño en matemáticas • Principales dificultades: • Resolver problemas complejos que requieren combinar datos y desarrollar estrategias de manejo de la información • Hacer generalizaciones a partir de una determinada secuencia de datos • Resolver problemas que requieran el manejo de conceptos geométricos (propiedades de figuras geométricas, ángulos, paralelismo, perpendicularidad) • Hacer interpretaciones argumentadas sobre los hallazgos y comunicar los resultados

34. Desempeño en ciencias naturales El 26% de los estudiantes de quinto y el 30% de los de noveno alcanzan o superan las competencias exigibles en ciencias naturales Relacionan estructuras con funciones en sistemas vivos y físicos; reconocen diversas formas y fuentes de energía, diferencian entre materiales naturales y aquellos fabricados por el hombre, evalúan hipótesis a partir de evidencias derivadas de investigaciones científicas, elaboran conclusiones y predicciones, entre otros

35. Desempeño en ciencias • Principales dificultades: • Plantear interrogantes científicos relevantes • Relacionar más de un concepto científico para explicar o predecir un resultado • Identificar y explicar diferencias y semejanzas entre conjuntos de datos y sacar conclusiones basadas en la evidencia • Utilizar conocimientos científicos que requieren un alto grado de abstracción y transferirlos a otros tipos de situaciones • Identificar las variables que se deben medir y alterar en una investigación

36. Diferencias por género Lenguaje: los puntajes promedio de las niñas son más altos que los de los niños, en ambos grados

37. Diferencias por género Matemáticas: los puntajes promedio de los niños son más altos que los de las niñas, en ambos grados

38. Diferencias por género Ciencias: los puntajes promedio de los niños son más altos que los de las niñas, en ambos grados

39. Diferencias por sector-zona Lenguaje

40. Diferencias por sector-zona Matemáticas

41. Diferencias por sector-zona Ciencias naturales

42. Contenido • Ciclo de la evaluación • Principales características de SABER 5° y 9° • Resultados • 2009 – nacionales • Comparación entre puntajes promedio y niveles socioeconómicos

43. Nivelsocioeconómico (NSE) • Los estudiantes reportaron información de: • Educación de los padres • Hacinamiento • Servicios sanitarios • Material de los pisos de la vivienda • Cálculo de un Índice de Nivel Socioeconómico (INSE) para cada estudiante a partir de los ponderadores del Índice de Calidad de Vida (ICV) para esas variables • A cada institución se le asocia el promedio del índice de sus estudiantes

44. Comparaciones entre puntajes promedio y niveles socioeconómicos • Cada punto representa a un establecimiento educativo y los colores identifican el sector y zona a los que pertenece, así: • Azul: instituciones oficiales rurales • Rojo: instituciones oficiales urbanas • Verde: instituciones no oficiales • La línea horizontal: Promedio nacional • La recta diagonal: representa el puntaje que se esperaría para el conjunto de establecimientos educativos de la entidad territorial, dado el nivel socioeconómico de los mismos. • La línea punteada: representa el puntaje promedio que se esperaría para el conjunto de establecimientos educativos de todo el país, dado su nivel socioeconómico.

45. Cómo interpretar la información de los gráficos • Los establecimientos educativos que están por encima de la recta diagonal continua tienen un puntaje promedio mayor al que se esperaría de ellos, si se tiene en cuenta su nivel socioeconómico. • Cuando la recta nacional (punteada) está por encima de la de la entidad territorial (continua), quiere decir que el conjunto de los establecimientos ubicados en esa entidad territorial obtuvo puntajes promedio menores a los que se esperarían para los establecimientos del país, dado su nivel socioeconómico.

46. Comparaciones entre puntajes promedio y niveles socioeconómicos. Córdoba

47. Comparaciones entre puntajes promedio y niveles socioeconómicos. Montería

48. Comparaciones entre puntajes promedio y niveles socioeconómicos. Sahagún

49. Comparaciones entre puntajes promedio y niveles socioeconómicos. Lorica