Antonio Pulido Julián Pérez

1. Almería, 19/20 de junio de 2003 Propuesta metodológica para la evaluación de la calidad docente e investigadora:Planteamiento y experimentación Antonio Pulido Julián Pérez

2. Fases de la aplicación • Listado de actividades a valorar en un profesor universitario • Ponderación de actividades por un panel de expertos • Análisis de ponderaciones: peculiaridades y sesgos • Elaboración del banco de datos sobre curricula de profesores universitarios • Transformación de banco de curricula a banco de datos de indicadores • Simulación de resultados según ponderaciones alternativas • Análisis de simulaciones, ordenaciones de profesores y umbrales de calidad

3. Actividades a valorar enun profesor universitario • Hemos considerado 54 actividades agrupadas en 12 componentes y 3 grandes bloques • Bloque 1: Investigación • Publicaciones • Proyectos de investigación • Congresos • Transferencia de resultados • Formación de investigadores • Premios y distinciones

4. Actividades a valorar enun profesor universitario • Bloque 2: Docencia • Clases y tutorías • Programas y material docente • Participación en actividades docentes • Bloque 3: Gestión • Gestión de la investigación • Gestión de la docencia • Otras tareas de gestión

5. Ponderaciones de primer y segundo nivel

6. Ponderaciones finales ordenadas (porcentajes del total)

7. Ponderaciones finales ordenadas (porcentajes del total)

8. Ponderaciones finales ordenadas (porcentajes del total)

9. Ponderaciones finales ordenadas (porcentajes del total)

10. Ponderaciones finales ordenadas (porcentajes del total)

11. Ponderaciones finales ordenadas (porcentajes del total)

12. Composición del panel de expertos para ponderación

13. Composición del banco de datos de curricula de profesores

14. Paso del dato del curriculum a índices simples y a indicador de calidad = Nota obtenida por el individuo m en la actividad k-ésima, de la componente j-ésima del bloque i-ésimo = Nota máxima de todos los individuos observados = Ponderación otorgada a la actividad ijk obtenida como ponderación en cadena Wi*Wij* Wijk = Índice de calidad/esfuerzo del profesor m

15. Resultados docencia/investigación • Escasa relación entre esfuerzo docente e investigador • ¿Un buen investigador no necesariamente es un buen docente y viceversa? • ¿Los profesores que se centran más en investigación dedican menos tiempo a la docencia? • Posible relación entre algunas actividades docentes y algunas actividades investigadoras • Los profesores mejor valorados por sus clases parecen tener alguna relación con premios recibidos, realización de proyectos o formación de postgrado

16. Resultados docencia • De los 10 profesores más valorados en su conjunto (13 actividades) según ponderaciones de expertos, sólo la mitad están entre los 10 primeros en valoración de alumnos • De los 10 profesores con menor nota global sólo uno se encuentra en ese grupo por la encuesta a alumnos. Incluso la mitad pertenecen al 50% de los más valorados en encuestas • La valoración de profesores por parte de los alumnos muestra relación con el esfuerzo en material educativo y la cantidad de clases impartidas

17. Resultados investigación • Existen grandes diferencias en la ordenación de profesores según que se consideren, 1) el conjunto de actividades, 2) sólo publicaciones, 3) sólo transferencia de resultados (contratos y patentes), 4) proyectos y congresos • De los 50 investigadores mejor valorados en conjunto, 42 (el 84%) estarían en la lista de los mejor valorados por publicaciones • Los 50 investigadores peor clasificados en conjunto, también se encontrarían en ese grupo en cuanto a publicaciones • La participación de Economía en los investigadores de cabecera es proporcionalmente similar a las otras áreas (Ciencias y Tecnología o Sociales y Humanidades) • Los más afectados en la ordenación son la mayoría de profesores con nota intermedia y además según edades y años de experiencia (años desde título de doctor)

18. Principales conclusiones • La evaluación de calidad es imprescindible, debe garantizar un proceso transparente y debe proporcionar a los afectados la información y estímulos para su progresivo perfeccionamiento • Las Agencias de Evaluación deberían considerar diversos aspectos de la actividad de un profesor a fin de evitar injusticias comparativas • Es necesario realizar una evaluación pormenorizada de la relación entre actividades que conducen a la calidad conjunta en docencia e investigación • La ponderación de actividades de un profesor universitario no tiene una solución única, dependiendo del entorno, objetivos institucionales y los propios fines de la evaluación

19. Almería, 19/20 de junio de 2003 Propuesta metodológica para la evaluación de la calidad docente e investigadora:Planteamiento y experimentación Antonio Pulido Julián Pérez