390 likes | 532 Views
Santander, 2 de junio de 2011. VIII FORO SOBRE LA EVALUACIÓN DE LA CALIDAD DE LA INVESTIGACIÓN Y DE LA EDUCACIÓN SUPERIOR. EVALUACIÓN DE INSTITUTOS UNIVERSITARIOS DE INVESTIGACIÓN. Carlos Guerra Rodríguez, Sonia Martín Cerro, Elena Tejedor Viñuela y Miguel Valcarcel Cases.
E N D
Santander, 2 de junio de 2011 VIII FORO SOBRE LA EVALUACIÓN DE LA CALIDAD DE LA INVESTIGACIÓN Y DE LA EDUCACIÓN SUPERIOR EVALUACIÓN DE INSTITUTOS UNIVERSITARIOS DE INVESTIGACIÓN Carlos Guerra Rodríguez, Sonia Martín Cerro, Elena Tejedor Viñuela y Miguel Valcarcel Cases http://www.acsucyl.es
GUÍA DE LA PRESENTACIÓN AGENCIA PARA LA CALIDAD DEL SISTEMA UNIVERSITARIO DE CASTILLA Y LEÓN • Funciones. • Política de calidad. • Actuaciones de evaluación de la investigación. • Objetivos estratégicos y operativos. • Modelo y criterios de evaluación. • Procedimientos de evaluación. • Órganos de evaluación. • Difusión de información. EVALUACIÓN DE INSTITUTOS UNIVERSITARIOS DE INVESTIGACIÓN
AGENCIA PARA LA CALIDAD DEL SISTEMA UNIVERSITARIO DE CASTILLA Y LEÓN • Órgano de evaluación externa del Sistema Universitario de Castilla y León. Creada en 2001. • Tiene como objeto la evaluación, acreditación y certificación de la calidad en el ámbito de las Universidades y de los centros de investigación y de educación superior de Castilla y León. Asimismo, la Agencia podrá colaborar en las actividades de evaluación, acreditación y certificación en el ámbito de las Universidades y centros de educación superior de fuera de la Comunidad de Castilla y León en el contexto del Espacio Europeo de Educación Superior. • Fines de interés general: • Potenciar la mejora de la actividad docente, investigadora y de gestión de las Universidades y de los centros de investigación y de educación superior, favoreciendo la mejora de la competitividad y el desarrollo económico de Castilla y León. • Proporcionar información adecuada sobre el sistema universitario a las Administraciones públicas, al sector productivo y a la sociedad en general para la toma de decisiones en sus ámbitos de actuación. • Ley 12/2010, de 28 de octubre, por la que se modifica la Ley 3/2003, de 28 de marzo, de Universidades de Castilla y León.
POLÍTICA DE CALIDAD DE ACSUCYL • Respetar y hacer cumplir los principios establecidos en el Código Ético que determinan la conducta de las personas que trabajan o que actúan en nombre de ACSUCYL • Garantizar la autonomía e independencia de los órganos de evaluación en el ejercicio de sus funciones. • Garantizar la transparencia en todas las actividades desarrolladas. • Establecer mecanismos de responsabilidad para la propia rendición de cuentas con fines de mejora.
ACTUACIONES DE ACSUCYL EN EL ÁMBITO DE LA EVALUACIÓN DE LA INVESTIGACIÓN • Institutos Universitarios de Investigación (creación o adscripción, y evaluaciones periódicas cada cinco años). • Grupos de Investigación de Excelencia (GIE). • Proyectos de Investigación. • Evaluación Ex – Post de los proyectos de investigación. • Ayudas para la contratación de Personal Investigador de Reciente Titulación. • Evaluación de los resultados de investigación de los investigadores. • Evaluación de Congresos, Simposios y Reuniones Científicas.
EVALUACIÓN DE INSTITUTOS UNIVERSITARIOS DE INVESTIGACIÓN OBJETIVOS ESTRATÉGICOS • Favorecer la existencia de Institutos Universitarios de alta calidad científico-técnica tanto en investigación como en transferencia de conocimiento. • Apoyar las líneas prioritarias de I+D+I de Castilla y León. • Favorecer las sinergias entre grupos de investigación. • Apoyar la multidisciplinariedad. • Potenciar la capacidad de captación de recursos externos. • Favorecer la calidad de las enseñanzas de postgrado (Másteres y Doctorados).
EVALUACIÓN DE INSTITUTOS UNIVERSITARIOS DE INVESTIGACIÓN OBJETIVOS OPERATIVOS • Establecer un sistema externo de evaluación riguroso y transparente tanto para la creación/adscripción como para la evaluación periódica de Institutos Universitarios de Investigación. • Facilitar la labor tanto de los solicitantes como de los evaluadores externos mediante el apoyo a través de Manuales de Evaluación claros, amigables y prácticos.
DOCUMENTOS (1) • Manual de evaluación de solicitudes de creación/adscripción de Institutos Universitarios de Investigación. • Manual de evaluación periódica de Institutos Universitarios de Investigación.
DOCUMENTOS (2) ESTRUCTURA DE CADA DOCUMENTO • Contextualización. • Proceso de evaluación. • Modelos normalizados de solicitud y currículum vítae. • Memoria para las solicitudes de creación o renovación de IUI. • Protocolo de evaluación de solicitudes de creación o renovación de IUI.
MANUALES DE EVALUACIÓN DE INSTITUTOS UNIVERSITARIOS DE INVESTIGACIÓN • Modelo y criterios de evaluación. • Procedimiento de evaluación: • Verificación de requisitos mínimos. • Evaluación de la Memoria y emisión de informe. • Órganos de evaluación.
MODELO DE EVALUACIÓN DE INSTITUTOS UNIVERSITARIOS DE INVESTIGACIÓN ORIENTACIÓN RECURSOS PROCESOS BÁSICOS RESULTADOS Personal y grupos de investigación Actividades científicas Interés Resultados de investigación de carácter académico Actividades de formación y divulgación Relaciones externas Oportunidad PROCESOS DE SOPORTE Transferencia de conocimiento y tecnología Infraestructura y recursos materiales Estructura y órganos de gobierno Plan plurianual de actividades Distinciones científicas Sistema de gestión y garantía de la calidad Financiación Autoevaluación
CRITERIOS DE EVALUACIÓN DE INSTITUTOS UNIVERSITARIOS DE INVESTIGACIÓN (I) ORIENTACIÓN Interés científico-técnico-artístico, social y económico de la temática y enfoque del Instituto. Oportunidad del Instituto en cuanto a los objetivos estratégicos de las entidades implicadas en él y el contexto en el que se imbrica. Plan plurianual de actividades: pertinencia, coherencia, concreción y viabilidad del plan previsto para los próximos cinco años.
CRITERIOS DE EVALUACIÓN DE INSTITUTOS UNIVERSITARIOS DE INVESTIGACIÓN (II) RECURSOS • Personal y grupos de investigación: • Calidad científico-técnico-artística • Grado y calidad de la colaboración • Capacidad de gestión de la investigación • Grado de dedicación y equilibrio en su composición • - Antecedentes históricos Relaciones externas con otras entidades, empresas, redes, grupos, etc. Infraestructura y recursos materiales. Financiación:
CRITERIOS DE EVALUACIÓN DE INSTITUTOS UNIVERSITARIOS DE INVESTIGACIÓN (III) PROCESOS BÁSICOS Actividades científicas: Proyectos de investigación competitivos, contratos de investigación, comités científicos, estancias en centros de investigación, etc. Actividades de formación y divulgación: Estudios de posgrado, formación continua, seminarios, etc. PROCESOS DE SOPORTE Estructura y órganos de gobierno: organigrama funcional, adecuación al funcionamiento del Instituto. Sistema de gestión y garantía de la calidad: procedimientos establecidos, certificaciones obtenidas.
CRITERIOS DE EVALUACIÓN DE INSTITUTOS UNIVERSITARIOS DE INVESTIGACIÓN (IV) RESULTADOS Resultados de investigación de carácter académico: Artículos científicos, libros y capítulos, contribuciones en congresos, tesis y trabajos fin de máster, etc. Resultados de investigación: transferencia de conocimiento y tecnología: Contratos de transferencia, creación de empresas de base tecnológica, patentes y modelos de utilidad en explotación, actividades asistenciales, etc. Distinciones científicas: Carácter regional, nacional o internacional; relevancia y número.
CRITERIOS DE EVALUACIÓN DE INSTITUTOS UNIVERSITARIOS DE INVESTIGACIÓN (V) AUTOEVALUACIÓN
PONDERACIÓN DE LOS CRITERIOS DE EVALUACIÓN ORIENTACIÓN RECURSOS PROCESOS BÁSICOS RESULTADOS Actividades científicas 12 % Resultados de investigación de carácter académico 24 % Personal y grupos de investigación 12 % Interés 3 % Actividades de formación y divulgación 6 % Relaciones externas 4 % Oportunidad 3 % PROCESOS DE SOPORTE Transferencia de conocimiento y tecnología 12% Infraestructu-ra y recursos materiales 4 % Estructura y órganos de gobierno 3 % Plan plurianual de actividades 4% Sistema de gestión y garantía de la calidad 3 % Distinciones científicas 10 % Financiación 6 % Autoevaluación 4 %
PROCEDIMIENTO DE EVALUACIÓN CREACIÓN / ADSCRIPCIÓN DE INSTITUTOS UNIVERSITARIOS DE INVESTIGACIÓN
PROCEDIMIENTO DE EVALUACIÓN FASE A. VERIFICACIÓN DE REQUISITOS MÍNIMOS • La Comisión de Evaluación de la Investigación constata que la propuesta cumple los requisitos mínimos: • Grupos de investigación involucrados - Personal investigador • Actividad de I+D+I - Resultados de I+D+I Creación / Adscripción de IUI ¿Se cumplen? No Sí Nombramiento Panel Científico Continua Proceso Evaluación: Fase B: Análisis Memoria Solicitud Informe Desfavorable Notificación Informe a Universidad Notificación Informe a DGUI
PROCEDIMIENTO DE EVALUACIÓN. FASE A: VERIFICACIÓN DE REQUISITOS MÍNIMOS REQUISITOS MÍNIMOS QUE HA DE CUMPLIR LA PROPUESTA DE IUI El personal investigador del Instituto pertenece a un solo Instituto de Investigación de la Comunidad de Castilla y León*. El Instituto está formado por investigadores procedentes de al menos dos grupos de investigación activos como mínimo durante los últimos cinco años. El número de investigadores del Instituto, con una dedicación de al menos 1/3 de su actividad (investigadora, docente o profesional), es igual o mayor de 20**. Como mínimo, el 50% de ellos son doctores con un contrato estable***. Excepcionalmente, podrá obviarse este requisito siempre que la calidad y el contexto de la propuesta lo justifiquen. El personal investigador doctor del Instituto acredita una media de al menos dos “tramos de investigación”, o una actividad investigadora claramente equiparable a los mismos (en las correspondientes áreas de conocimiento). Si el Instituto tiene como eje fundamental de su actividad la transferencia de tecnología y/o conocimiento, o la actividad asistencial, esta media podrá ser de uno. * Salvo casos excepcionales debidamente justificados. ** Tanto si se trata de un Instituto de una única universidad como si es de carácter interuniversitario, mixto, etc. *** Contrato estable: aquel que suponga una permanencia en la institución a medio-largo plazo y perspectivas de incorporación a la misma con carácter indefinido. Creación / Adscripción de IUI
PROCEDIMIENTO DE EVALUACIÓN. FASE A: VERIFICACIÓN DE REQUISITOS MÍNIMOS REQUISITOS MÍNIMOS QUE HA DE CUMPLIR LA PROPUESTA DE IUI Se acredita una colaboración previa entre el personal investigador de los diferentes grupos de investigación que se integran en el Instituto, que se traduce en haber realizado al menos cinco trabajos (proyectos y/o contratos de investigación/transferencia, publicaciones, etc.) conjuntos en los últimos cinco años. Se acredita que al menos tres investigadores del Instituto figuran como Investigadores Principales en otros tantos proyectos y/o contratos de investigación/transferencia (especialmente relevantes) concedidos o firmados en los últimos cinco años. El personal investigador doctor del Instituto cuenta con una media (en los últimos cinco años) de al menos cinco publicaciones, y/o aportaciones de transferencia de tecnología y/o conocimiento, de nivel medio-alto dentro de su área o ámbito de conocimiento*. *En las áreas donde existe tradición de publicar especialmente en libros de carácter científico (humanidades, campos de las ciencias sociales y jurídicas, etc.), la autoría de un libro completo o una edición crítica de nivel medio-alto podrá considerarse como equivalente a cinco publicaciones de otra naturaleza. Igualmente, si el Instituto tiene como eje fundamental de su actividad la transferencia de tecnología y/o conocimiento, una patente en explotación podrá considerarse como equivalente a cinco publicaciones. Creación / Adscripción de IUI
PROCEDIMIENTO DE EVALUACIÓN FASE B. EVALUACIÓN DE LA MEMORIA Y EMISIÓN DE INFORME UNIVERSIDAD DGUI ACSUCYL Informes Externos del Panel Científico CEI: Entrevista Promotor/es IUI Subsanación disconformidades. Reelaboración de la propuesta Creación / Adscripción de IUI Recepción Notificación Subsanación CEI: Informe de Evaluación Pendiente Subs. Disconformidades CEI: Análisis Subsanación Recepción Informe Favorable Informe Desfavorable Recepción Informe de Evaluación Recepción Informe Recepción alegaciones Elaboración alegaciones CEI: Revisión alegaciones Recepción Informe Final Recepción Informe Final Informe Final CEI
PROCEDIMIENTO DE EVALUACIÓN. FASE B: EVALUACIÓN DE LA MEMORIA Y EMISIÓN DE INFORME CRITERIOS CUYA VALORACIÓN MÍNIMA HA DE SER ACEPTABLE PARA OBTENER UN INFORME FAVORABLE Creación / Adscripción de IUI ORIENTACIÓN RECURSOS PROCESOS BÁSICOS RESULTADOS Personal y grupos de investigación Resultados de investigación de carácter académico* Actividades científicas Interés Actividades de formación y divulgación Relaciones externas Oportunidad PROCESOS DE SOPORTE Transferenciade conocimiento y tecnología* Infraestructura y recursos materiales Estructura y órganos de gobierno Plan plurianual de actividades Distinciones científicas Sistema de gestión y garantía de la calidad Financiación Autoevaluación * La valoración mínima requerida ha de ser ‘Aceptable’ en uno de los dos criterios.
PROCEDIMIENTO DE EVALUACIÓN EVALUACIÓN PERIÓDICA DE INSTITUTOS UNIVERSITARIOS DE INVESTIGACIÓN
EVALUACION PERIÓDICA DE INSTITUTOS UNIVERSITARIOS DE INVESTIGACIÓN Información sobre el inicio del proceso de evaluación: • Cada año, la Agencia comunicará el inicio del proceso a los Institutos Universitarios de Investigación a los que corresponda ser evaluados por haber transcurrido cinco años desde su creación/adscripción o desde su última evaluación. • Se comunicará con una antelación de seis meses al inicio del proceso. • Se proporcionará información sobre el mismo. Evaluación periódica de IUI
PROCEDIMIENTO DE EVALUACIÓN FASE A. VERIFICACIÓN DE REQUISITOS MÍNIMOS • La Comisión de Evaluación de la Investigación constata que la propuesta cumple los requisitos mínimos: • Grupos de investigación involucrados - Personal investigador • Actividad de I+D+I - Resultados de I+D+I Evaluación periódica de IUI ¿Se cumplen? No Sí Nombramiento Panel Científico Continua Proceso Evaluación: Fase B: Análisis Memoria Solicitud Informe Desfavorable* Notificación Informe a Universidad Notificación Informe a DGUI * Ver régimen transitorio para los Institutos que sean evaluados en 2011 y 2012.
PROCEDIMIENTO DE EVALUACIÓN. FASE A: VERIFICACIÓN DE REQUISITOS MÍNIMOS REQUISITOS MÍNIMOS QUE HA DE CUMPLIR EL IUI El personal investigador del Instituto pertenece a un solo Instituto de Investigaciónde la Comunidad de Castilla y León*. El Instituto está formado por investigadores procedentes de al menos dos grupos de investigación activoscomo mínimo durante los últimos cinco años. El número de investigadoresdel Instituto, con una dedicación de al menos 1/3 de su actividad (investigadora, docente o profesional), es igual o mayor de 20**. Como mínimo, el 50% de ellos son doctorescon un contrato estable***. Excepcionalmente, podrá obviarse este requisito siempre que la calidad y el contexto de la propuesta lo justifiquen. El personal investigador doctor del Instituto acredita una media de al menosdos “tramos de investigación”, o una actividad investigadora claramente equiparable a los mismos (en las correspondientes áreas de conocimiento). Si el Instituto tiene como eje fundamental de su actividad la transferencia de tecnología y/o conocimiento, o la actividad asistencial, esta media podrá ser de uno. * Salvo casos excepcionales debidamente justificados. ** Tanto si se trata de un Instituto de una única universidad como si es de carácter interuniversitario, mixto, etc. *** Contrato estable: aquel que suponga una permanencia en la institución a medio-largo plazo y perspectivas de incorporación a la misma con carácter indefinido. Evaluación periódica de IUI
PROCEDIMIENTO DE EVALUACIÓN. FASE A: VERIFICACIÓN DE REQUISITOS MÍNIMOS REQUISITOS MÍNIMOS QUE HA DE CUMPLIR EL IUI Se acreditan tres proyectos de investigación competitivos(o contratos de investigación/transferencia especialmente relevantes), con distinto Investigador Principal, concedidos en los últimos cinco años al Instituto o a grupos de investigadores donde al menos el 50% de sus investigadores son miembros del Instituto. El número de publicaciones y/o aportaciones de transferencia de tecnología y/o conocimientodel Instituto, en los últimos cinco años, de nivel medio-alto(en la correspondiente área o ámbito de conocimiento), es igual o mayor al resultado de multiplicar el número de investigadores doctores del Instituto por cinco*. En las publicaciones y en las aportaciones de transferencia figura el Instituto o, en su defecto, son publicaciones y aportaciones de los miembros del Instituto que se insertan claramente en las líneas de investigación del mismo. *En las áreas donde existe tradición de publicar especialmente en libros de carácter científico (humanidades, campos de las ciencias sociales y jurídicas, etc.), la autoría de un libro completo o una edición crítica de nivel medio-alto podrá considerarse como equivalente a cinco publicaciones de otra naturaleza. Igualmente, si el Instituto tiene como eje fundamental de su actividad la transferencia de tecnología y/o conocimiento, una patente en explotación podrá considerarse como equivalente a cinco publicaciones. Evaluación periódica de IUI
PROCEDIMIENTO DE EVALUACIÓN FASE B. EVALUACIÓN DE LA MEMORIA Y EMISIÓN DE INFORME UNIVERSIDAD DGUI ACSUCYL Informes Externos del Panel Científico Visita del Panel al IUI Informe conjunto del Panel Evaluación periódica de IUI CEI: Entrevista Director/es IUI Subsanación disconformidades. Reelaboración de la Memoria CEI: Informe de Evaluación Recepción Notificación Subsanación Pendiente Subs. Disconformidades CEI: Análisis Subs. Recepción Informe Favorable Informe Desfavorable Recepción Informe de Evaluación Recepción Informe Recepción alegaciones Elaboración alegaciones CEI: Revisión alegaciones Recepción Informe Final Recepción Informe Final Informe Final CEI
PROCEDIMIENTO DE EVALUACIÓN. FASE B: EVALUACIÓN DE LA MEMORIA Y EMISIÓN DE INFORME CRITERIOS CUYA VALORACIÓN MÍNIMA HA DE SER ACEPTABLE PARA OBTENER UN INFORME FAVORABLE Evaluación periódica de IUI ORIENTACIÓN RECURSOS PROCESOS BÁSICOS RESULTADOS Personal y grupos de investigación Resultados de investigación de carácter académico* Actividades científicas Interés Actividades de formación y divulgación Relaciones externas Oportunidad PROCESOS DE SOPORTE Transferenciade conocimiento y tecnología* Infraestructura y recursos materiales Estructura y órganos de gobierno Plan plurianual de actividades Distinciones científicas Sistema de gestión y garantía de la calidad Financiación Autoevaluación * La valoración mínima requerida ha de ser ‘Aceptable’ en uno de los dos criterios.
ÓRGANOS DE EVALUACIÓN COMISIÓN DE EVALUACIÓN DE LA INVESTIGACIÓN • Nombramiento: la Dirección de la Agencia • Número de miembros: diez • Perfil: preferentemente, académicos y profesionales de reconocido prestigio, con una significativa trayectoria docente e investigadora, y experiencia en gestión y en procesos de evaluación de la calidad en el ámbito universitario (tres sexenios) • Composición: en su designación, se procura el equilibrio entre los diferentes ámbitos de conocimiento. • Procedencia: externa al Sistema Universitario de Castilla y León. • Periodo de nombramiento: un plazo máximo de 4 años.
ÓRGANOS DE EVALUACIÓN COMISIÓN DE EVALUACIÓN DE LA INVESTIGACIÓN* * Publicada en BOCYL nº 29, 12 de febrero de 2009, p. 4166.
ÓRGANOS DE EVALUACIÓN PANELES CIENTÍFICOS • Nombramiento: la Dirección de la Agencia. • Número de miembros: tres. • Perfil: académicos y profesionales que pertenezcan a alguna de las áreas e conocimiento relacionadas con la actividades investigadoras y docentes del Instituto (tres sexenios). • Composición: en su designación, se procura el equilibrio entre diferentes perfiles y áreas de conocimiento. • Procedencia: externa al Sistema Universitario de Castilla y León. • Nombramiento: ad hoc para cada una de las solicitudes de evaluación.
DOCUMENTACIÓN PARA LA EVALUACIÓN PERIÓDICA DE IUI GUÍA DEL EVALUADOR • CONTENIDO: • Contextualización y objetivos. • Órganos de evaluación. • Fases y criterios. • Herramienta del evaluador. • Programa estándar de visita. • Documentación (evidencias) que el IUI pone a disposición del Panel. • Agenda de entrevistas el Panel.
EVALUACIÓN DE INSTITUTOS UNIVERSITARIOS DE INVESTIGACIÓN • Web de la Agencia: • Manuales de procedimiento. • Modelos normalizados de: • Solicitud. • Currículum Vítae. • Memoria. • Disponibilidad para cualquier consulta relacionada con el Modelo: • Presentación de la documentación. • Aplicación de los criterios. • Proceso de evaluación.
Santander, 2 de junio de 2011 VIII FORO SOBRE LA EVALUACIÓN DE LA CALIDAD DE LA INVESTIGACIÓN Y DE LA EDUCACIÓN SUPERIOR • Gracias por su atención • Carlos Guerra Rodríguez, Sonia Martín Cerro, • Elena Tejedor Viñuela y Miguel Valcarcel Cases • carlos@acsucyl.essonia@acsucyl.es • www.acsucyl.es EVALUACIÓN DE INSTITUTOS UNIVERSITARIOS DE INVESTIGACIÓN http://www.acsucyl.es