Indicios de calidad de las publicaciones científicas: citas, factor de impacto y otros indicios

1. Indicios de calidad de las publicaciones científicas: citas, factor de impacto y otros indicios Campo 6. Ingenierías y Arquitectura Diciembre de 2013

2. La publicación científica • La evaluación de la actividad investigadora de profesores e investigadores universitarios se basa fundamentalmente en la calidad y prestigio de sus publicaciones. • La publicación científica es el medio de difusión reconocido y avalado por la comunidad científica internacional: • Establece la prioridad en los descubrimientos. • Calidad científica de lo publicado mediante la evaluación por pares, peer review • Da a conocer a los autores. • Las citas a los trabajos publicados suponen una forma de reconocimiento • Asegura la preservación de lo escrito

3. CNEAI • COMISION NACIONAL EVALUADORA DE LA ACTIVIDAD INVESTIGADORA • Realiza la evaluación de la actividad investigadora de los • profesores universitarios y del personal de las escalas • científicas del CSIC, con el objeto de que les sea • reconocido un complemento de productividad (sexenio). • Finalidad: incentivar la actividad investigadora • Importancia del reconocimiento: permite dirigir tesis, formar parte • de tribunales, obtener proyectos de investigación… • La evaluación se convoca todos los años, en diciembre • Los investigadores deben presentar trabajos científicos • realizados en un periodo no inferior a 6 meses • Cuenta con Comités Asesores formados por expertos que • realizan el estudio técnico de los expedientes • Los miembros de los Comités se eligen entre científicos • que han obtenido tres o más sexenios • Se distinguen once campos científicos y numerosas áreas. • Diferentes para Universidades y CSIC

4. Campos científicos CNEAI Campo 0. Transferencia del Conocimiento e Innovación.

5. Campo 0. Transferencia del conocimiento e innovación • Creado por la Resolución de 23 de Noviembre de 2010 • Para solicitar la evaluación en este campo, es necesario haber obtenido previamente la evaluación positiva de un sexenio en alguno de los otros 10 campos. • Indicar en la solicitud en qué otro campo desearía ser evaluado si el comité asesor del campo 0 considera que no debe ser evaluado en éste. • Deberá destacar en su curriculum vitae las cinco aportaciones ordinarias que presenta, junto con los indicios de calidad. • Aportaciones preferentes: • Participación directa en creación de empresas basadas en transferencia de conocimiento derivada de la actividad investigadora • Patentes en explotación con contrato de compraventa o licencia • Contratos con agentes socioeconómicos, que hayan generado productos comerciales, prototipos funcionales innovadores • Publicaciones derivadas que describan productos, prototipos…de extraordinaria singularidad • Contribuciones a estándares de carácter industrial o comercial

6. CNEAI. Criterios de evaluación para todos los campos • Resolución de 18 de noviembre de 2009 de CNEAI • Aportaciones que supongan progreso real del conocimiento. No se valorarán los trabajos meramente descriptivos. • El solicitante debe haber participado activamente como director o ejecutor. El número de autores no será evaluable, pero deberá estar justificado. • Para obtener una evaluación positiva son necesarias cinco aportaciones en el currículum vitae abreviado. Excepción: menos aportaciones si tienen una extraordinaria calidad y repercusión científica o técnica Citas • A continuación, CNEAI establece criterios específicos para cada uno de los campos, teniendo en cuenta la distinta tipología documental.

7. Para Ingeniería y Arquitectura: • Sólo se valoran las aportaciones que significan progreso real del conocimiento o desarrollo tecnológico • El número de autores no será evaluable, pero si deberá estar justificado por el tema, su complejidad y extensión • Diferencias según las subcategorías respecto al tipo de aportaciones y valoración. Los criterios para subcampos 6.1 y 6.2 muy similares • Cinco aportaciones ordinarias: los libros, capítulos de libros, prólogos, introducciones y anotaciones a textos de reconocido valor científico en su área de conocimiento, los artículos de valía científica y las patentes o modelos de utilidad, con impacto económico demostrable

8. CNEAI. Valoración de las aportaciones Ingeniería y Arquitectura • Patentes • En explotación, demostrada mediante contrato de compraventa o contrato de licencia • ¡Impacto económico demostrable! • Patentes concedidas por la Oficina Española de Patentes y Marcas (OEPM) mediante el Sistema de examen previo • Incluir en la solicitud un fichero pdf con la concesión • A tener en cuenta la extensión de la patente • Nacional • Europea • Internacional • Mismos criterios para los tres subcampos

9. CNEAI. Valoración de las aportaciones Ingeniería y Arquitectura • Artículos • Se valora preferentemente los publicados en revistas de reconocida valía aceptándose como tales las que ocupen posiciones relevantes en los listados por ámbitos científicos en el SubjectCategoryListingdel JournalCitationReports(JCR), ScienceCitationIndex • Las revistas electrónicas, se valoran las recogidas en WOK • En el campo 6.3: Arquitectura, Ingeniería Civil, Construcción y Urbanismo: • Se considera también JCR, Social ScienceCitationIndex • Revistas indizadas en bases de datos internacionales de Ingeniería: Avery, TRIS, etc. y en Arts and HumanitiesCitationIndex • Las revistas electrónicas, se valoran las recogidas en WOK o que cumplan los criterios de calidad del Apéndice 1 de la convocatoria. • Se excluyen aportaciones que estén publicadas en medios de reconocida valía pero no tengan una mínima extensión

10. CNEAI. Valoración de las aportaciones Ingeniería y Arquitectura • Congresos • No se mencionan en el Subcampo 6.1 ni en 6.3 • Subcampo6-2. Ingenierías de la Comunicación, Computación y Electrónica • Los trabajos publicados en las actas de congresos que posean un sistema de revisión externa por pares, cuando estas actas sean vehículo de difusión del conocimiento comparable a las revistas que ocupan posiciones relevantes en el ScienceCitationIndex. • No se considerarán los pósters, ni los trabajos presentados en los Workshops ligados a los congresos.

11. CNEAI. Valoración de las aportaciones Ingeniería y Arquitectura • Desarrollos tecnológicos • Con aspectos innovadores y reconocidos por la comunidad científica • Para el subcampo 6.3 (Arquitectura, Ing Civil, Construcción y urbanismo) los desarrollos arquitectónicos • Libros y capítulos de libros • De carácter investigador (en 6.1 y 6.2) • Número y calidad de las citas • Prestigio internacional de editorial (6.1 y 6.2) y reconocido prestigio (6.3) • Importancia de editores, colección, etc. • Reseñas en revistas científicas especializadas • No recopilaciones de revistas o congresos. • En 6.3, los libros son particularmente relevantes en áreas arquitectónicas • Proceso riguroso de selección y evaluación de originales por parte de la editorial • No: libros de texto...ni apuntes editados… • CNEAI tiene en cuenta quién ha editado el libro…penaliza si es la misma institución en la que trabaja el investigador

12. CNEAI. Valoración de las aportaciones Ingeniería y Arquitectura • Criterios específicos del Subcampo 6.3 • Arquitectura, Ingeniería Civil, Construcción y Urbanismo • Proyectos singulares arquitectónicos, urbanísticos o de ingeniería, que serán valorados por su carácter innovador, constatado por los premios y distinciones recibidos, por su impacto en la literatura especializada nacional e internacional o por haber sido mostrados en exposiciones relevantes con catálogo. • La participación en exposiciones de prestigio ylas de carácter monográfico dedicadas a un solo autor. También se considerará la participación como comisario de las mismas, siempre que se publique catálogo con repercusión en los medios especializados nacionales e internacionales.

13. Mínimo, para obtener una evaluación positiva: 6.1 Tecnologías Mecánicas y de la Producción: a) tres sean patentes (en la convocatoria anterior eran dos); b) o tres artículos publicados en revistas de impacto alto en los listados del JCR, Science Citation Index 6.2 Ingenierías de la Comunicación, Computación y Electrónica: 1.a) dos sean patentes; o bien, dos sean artículos publicados en revistas con posiciones relevantes en JCR, Science Citacion Index o bien, en congresos con revisión externa por pares 1.b) Y una de relevancia menor de artículos o ponencias de congresos 2.a) una patente o un artículo SCI o un congreso con revisión por pares 2.b) Y tres de relevancia menor, pero suficiente 3) Cinco aportaciones con menor pero suficiente relevancia 6.3 Arquitectura, Ingeniería Civil, Construcción y Urbanismo: En trayectorias tecnológicas: a) tres sean patentes; o artículos publicados en revistas SCI, SSCI… o libros (en la convocatoria anterior eran dos) En trayectorias no tecnológicas a) dos patentes, o artículos publicados en revistas SCI, SSCI… o libros b) Y una de cualquier otra tipología contemplada en la resolución.

14. Solicitud de evaluación en CNEAI • Información de la convocatoria: • https://sede.educacion.gob.es/catalogo-tramites/organismos/sexenios-cneai.html • Documentos a presentar • Impreso de solicitud firmado • Currículum vitae abreviado con las aportaciones que considere más relevantes, hasta un máximo de cinco con las citas de todas las aportaciones donde consten los datos que sean necesarios para su localización e identificación. • Cada aportación llevará: • un breve resumen, con los objetivos y resultados más sobresalientes de la investigación • los “indicios de calidad” de la investigación • En el caso de varios autores, cada autor deberá hacer mención expresa en el resumen del alcance de su contribución personal al trabajo colectivo. • En las patentes, deberá incorporarse el informe sobre el estado de la técnica. • Currículum vitae completo • Hoja de servicios

15. 1.Indicios de calidad de las revistas: rankings • Factor de impacto, Posición de la revista en su área, Cuartil. • Journal Citation Reports (JCR),Thomson Scientific, antes ISI • Dominio mundial • Integrada en la plataforma Web of Knowledge • Suscrita por el Ministerio de Economía y Competitividad • En línea desde 1997. Años anteriores en papel. • Accesoremoto propio, también a través del UVUS • Scimago Journal and Country Rank (SJR) • Se basa en los contenidosde Scopus • Ofrece un ranking por revistas, países y categorías • Dominio mundial, más revistas que JCR • En línea desde 1999. Acceso libre • In-Recs, In-Recj y RESH • para las Ciencias Sociales y Humanidades • Dominio España • CIRC, para Ciencias Sociales y Humanidades (año 2012) • Para las Ciencias Sociales y Humanidades

16. El Factor de Impacto. Concepto En Journal Citation Reports, JCR • Es la media de veces que, en un año determinado, son citados los artículos publicados por esta revista en los dos años anteriores. Ejemplo, factor de impacto de una revista en 2010: Citas que han recibido el año 2010 los artículos publicados en 2008 y 2009 -------------------------------------------------------------------------------------- Nº de artículos publicados entre 2008 y 2009 • Atención: las revistas con cambio de título en 2011, ver proceso de cálculo del factor de impacto en https://www.accesowok.fecyt.es/?page_id=3953 • En Scimago Journal Rank, SJR, se calcula sobre tres años. También muestra el impacto de dos años • Atención: El factor de impacto de las revistas cambia cada año. Hay que buscar el que corresponde al año de publicación del artículo. Si no se ha publicado aún elegir el del año anterior.

17. Los cuartiles Si el listado de revistas de una determinada categoría temática se ordena de mayor a menor impacto y se divide en cuatro partes iguales, cada una de ellas es un cuartil. Las revistas con el factor de impacto más alto se sitúan en el primer cuartil. En Ingeniería y Arquitectura, se considera Alto factor de impacto el Primer cuartil • ¿Dónde localizo a qué cuartil pertenece una revista? • JournalCitationReport: • elegir la edición: Scienceedition o Social Scienceedition • seleccionar Searchfor a specificJournal • escribir los datos de la revista y pulsar Submit • pulsar en el nombre de la revista • buscar el icono • ScimagoJournal and Country Rank • realizar la búsqueda en JournalSearch • Pulsar en el título de la revista • Seleccionar Subjectarea • Seleccionar Subjectcategory

18. Journal Citation Reports. Búsqueda de Factor de impacto, ranking y cuartil • Entre en Journal Citation Reports, JCR • Seleccione la edición (Science o Social Sciences) y el año • Marque Search for a specific journal y pulse Submit • Escriba el título o ISSN de la revista • Le aparecerá un listado con el/los títulos. Pulse sobre el título que busca • Pulse en Factor de impacto Cuartil Posición en la categoría

19. Otros indicios de calidad Journal Citation Reports EINGENFACTOR: • El laboratorio Bergstrom del Departamento de Biología de la Universidad de Washington ha creado este índice incorporado en el JCR. • Mide la influencia total de una revista sobre la literatura científica o el valor total proporcionado por todos los artículos de una revista determinada • Los cálculos consideran 5 años de actividad de citas usando el JCR • Excluye las autocitas • Tiene en cuenta las diferencias entre las materias a la hora de citar, haciendo más fácil las comparaciones entre revistas de materias diferentes o interdisciplinares. Se basa en dos datos fundamentales: • El (AI) o ArticleInfluence que mide el prestigio de la revista en citas por artículo y es comparable al Factor de Impacto. • El (EF) o valor global proporcionado por todos los artículos publicados en una revista determinada en un año. • En 2012 la revista con Eigenfactor Score más alto fue Nature

20. Scimago Journal and Country Rank Búsqueda de Factor de impacto, ranking y cuartil • Entre en Scimago Journal & Country Rank • Pulse en Journal Search • Escriba el título o ISSN de la revista • Pulse sobre el título • Pulse sobre Subject Category • Obtendrá el factor de impacto (SJR), ranking y cuartil

21. 2. Indicios de calidad: Número de citas Importantes para todas las áreas y tipologías documentales • Recursos de búsqueda: • Web of Science, de Thomson, antes ISI • Integrado en la plataforma Web of Knowledge • Suscrita por el Ministerio de Economía y Competitividad • Acceso remoto propio, también a través del UVUS • Ámbito internacional, preferencia de revistas lengua inglesa • Scopus • Multidisciplinar • Ámbito internacional, mayor cobertura de revistas europeas • Google Scholar/Google Académico • Multidisciplinar • Todas las tipologías documentales • Internacional y nacional

22. Indicios de calidad: Número de citas • Web of Science, dos formas de búsqueda que pueden dar resultados distintos • Realizamos la búsqueda en el formulario de entrada de la base de datos. Obtenemos la referencia del artículo y si ha recibido citas aparecerá el número precedido de Times cited • Sólo obtenemos resultados si se ha publicado en una revista indexada en Web of Science • Pulsamos en la pestaña CitedreferenceSearchy realizamos la búsqueda por autor, escribiendo las posibles variaciones. A continuación selecciono el título abreviado de la revista y puedo añadir volumen • Encuentra citas a artículos, libros, etc… si ha sido citado desde revistas indizadas en Web of Science

23. Web of Science (Web of Knowledge) Para saber número de citas de un artículo pulsar en la pestaña Cited Reference Search Es conveniente buscar los autores en el índice o escribir las distintas formas en las que aparece escrito y unirlas con el operador OR Añadir el título abreviado de la revista, copiarlo de journal abbreviation list

24. Indicios de calidad: Número de citas • Contextualizar las citas: • Buscando las citas que ha recibido ese año la revista y viendo qué lugar ocupa nuestro artículo. • Consultando EssentialScienceIndicators, pulsando en Baselines /Percentiles • Se puede comprobar el año y el área de investigación y ver que peso tiene nuestro artículo

25. Apéndice 1 de la Resolución… criterios formales mínimos • Criterios de calidad de las fuentes impacto de lo publicado • A. Calidad informativa de la revista • Identificación de miembros de comités editoriales • Instrucciones a los autores • Información sobre proceso de evaluación y selección de manuscritos • Traducción del sumario, títulos, resúmenes... en revistas y congresos • B. Calidad del proceso editorial • Periodicidad de revistas y regularidad y homogeneidad de la línea editorial para las editoriales de libros. • Anonimato en la revisión • Comunicación motivada de la decisión editorial • Existencia de consejo asesor de reconocida solvencia, sin vinculación institucional con la revista o editorial • C. Criterios sobre la calidad científica de las revistas • Porcentaje de artículos de investigación (más del 75%) • Autoría: grado de endogamia editorial (más del 75%) • Indexación de las revistas en bases de datos internacionales especializadas

26. 3. Indicios de calidad. Presencia en bases de datos • ¿Cómo sé qué base de datos contiene una revista? • ULRICHSWEB • Base de datos en línea suscrita por la Biblioteca • Información detallada sobre más de 300.000 revistas • Ámbito mundial y multidisciplinar • Latindex • Ámbito iberoamericano y multidisciplinar • DICE / CSIC y ANECA • Ámbito español y área social y humanidades • MIAR: matriz de información para la evaluación de revistas • Ámbito internacional y área de ciencias sociales • Master List: las bases de datos ofrecen listado de las revistas indexadas • Ejemplo: Master JournalList, de Thomson: http://science.thomsonreuters.com/mjl/ • La propia revista ofrece a veces esta información

27. 3. Indicios de calidad. Cumplimiento de criterios • Latindex • Ámbito iberoamericano y multidisciplinar • Revistas incluidas en catálogo: 25 criterios mínimos • DICE / CSIC y ANECA • Ámbito español y área social y humanidades • RESH, CIRC, ERIH • Área de ciencias sociales y humanidades • Revistas con sello de calidad Fecyt • 110 revistas • Renovable cada dos años • 5. SPI:ScholarlyPublishersIndicators • Área de ciencias sociales y humanidades • Prestigio de las editoriales • Mencionado en la actual Convocatoria CNEAI para Campo 10: Historia, Geografía y Artes

28. Criterios Latindex y presencia en catálogo Latindex • Latindexes un sistema de información sobre las revistas de investigación científica, técnico-profesionales y de divulgación científica y cultural que se editan en los países de América Latina, el Caribe, España y Portugal • Ofrece tres bases de datos: • Directorio con datos de todas las revistas registradas • Catálogo, que incluye únicamente las revistas, impresas o electrónicas, que cumplen los criterios de calidad editorial diseñados por Latindex • Enlace a revistas electrónicas • CNEAI mencionaLatindexcomo criterio de calidad para las Áreas de Economía y empresariales, Historia y Expresión artística, Filosofía, Educación, etc. • Muy útil para ciencias sociales y para buscar indicios de calidad de revistas latinoamericanas

29. Criterios y metodología de evaluación Para ser ingresadas al Catálogo, las revistas deben cumplir con todas las características básicas y con al menos 17 de los restantes parámetros listados. Globalmente cada revista debe cubrir 25 parámetros. Estas características son certificadas mediante revisión de los tres últimos fascículos publicados de cada revista

30. Criterios y metodología de evaluación II

31. Libros y capítulos de libros • Número de citas generadas: • Web of Science: integrada en la plataforma Web of Knowledge • Scopus: base de datos multidisciplinar • Google BooksyGoogle Scholar/Google Académico • Reseñas en las revistas científicas especializadas, máster, libros • Bases de datos de la especialidad • Bases de datos multidisciplinares • Google • Dialnet • Inclusión en catálogos internacionales y nacionales • En España: Rebiun • Internacionales: Barton, Worldcat, COPAC, etc. • Prestigio de la editorial • SPI, para el área de ciencias sociales y humanidades • Riguroso proceso de selección de originales • Documentos internos de la propia editorial

32. Sobre los autores • Importancia de normalizar la “firma”: • Para facilitar la recogida de datos • Para aumentar la visibilidad • Existen recomendaciones sobre cómo firmar • Recomendaciones de Fecyt • Algunas bases de datos permiten unificar en línea nombres • Web of Science • Scopus • Existen herramientas de ayuda: • Iralis: es un sistema de estandarización de las firmas de los autores científicos. Su objetivo es crear un registro de autoridades. • ResearcherID: para agrupar todo lo que ha publicado aunque esté firmado de distinta forma • La Biblioteca te ayuda

33. Acceso a los recursos

34. Ayudas para localizar citas e impacto En nuestra Web: http://bib.us.es/ingenieros/ Índice de citas / Factor de impacto

35. Ayudas para localizar citas e impacto En nuestra Web: http://bib.us.es/ingenieros/

36. Ayudas para localizar citas e impacto Guías de apoyo a la investigación Acreditación y sexenios

37. Fin de la presentación Biblioteca de Ingeniería http://bib.us.es/ingenieros/ Encuesta evaluación de la sesión https://opina.us.es/c/3364