1 / 59

Nova proposta de Qualis Impacto no Processo de Avaliação Dr. João Pereira Leite

Nova proposta de Qualis Impacto no Processo de Avaliação Dr. João Pereira Leite Universidade de São Paulo Campus Ribeirão Preto. 2ª etapa do Projeto de aperfeiçoamento do Qualis periódicos. Parte I A idéia original 2 do Qualis. Indicador da produção bibliográfica

manasa
Download Presentation

Nova proposta de Qualis Impacto no Processo de Avaliação Dr. João Pereira Leite

An Image/Link below is provided (as is) to download presentation Download Policy: Content on the Website is provided to you AS IS for your information and personal use and may not be sold / licensed / shared on other websites without getting consent from its author. Content is provided to you AS IS for your information and personal use only. Download presentation by click this link. While downloading, if for some reason you are not able to download a presentation, the publisher may have deleted the file from their server. During download, if you can't get a presentation, the file might be deleted by the publisher.

E N D

Presentation Transcript

  1. Nova proposta de Qualis Impacto no Processo de Avaliação Dr. João Pereira Leite Universidade de São Paulo Campus Ribeirão Preto

  2. 2ª etapa do Projeto de aperfeiçoamento do Qualis periódicos

  3. Parte I A idéia original2 do Qualis

  4. Indicador da produção bibliográfica antes da implantação do Qualis:

  5. Área: X Artigos publicados em periódicos – 1993-95

  6. Necessidade identificada: • Incorporar informação sobre a • qualidade ao indicador. • Alternativa encontrada (QUALIS): • qualificar os periódicos nos quais os • trabalhos foram publicados; • ponderar a quantidade de trabalhos pelo • grau de qualidade atribuído ao periódico • em que o trabalho foi publicado.

  7. Estratificação adotada: • 3 níveis de Circulação: • Internacional; • Nacional; • Local • 3 níveis de Qualidade: • A • B • C Níveis (3x 3)  9 estratos

  8. Indicador da produção bibliográfica depois da implantação do Qualis:

  9. %

  10. Artigos em equivalente nível I Artigos/docente/ano (em equivalente artigo nível I)

  11. Sem Qualis 1,20 1,50 1,00 0,60 1,20 %

  12. Parte II A 1ª etapa do projeto de aperfeiçoamento do Qualis

  13. Exemplo: 1 único ISSN  29 registros em 24 áreas de avaliação: Dados Triênio 2001-03 Trabalho iniciado em 2004

  14. Principais deficiências identificadas no processo (2004): • a) Baixa qualidade da informação coletada, determinada por: • inexistência de uma tabela de títulos de periódicos, comum • a todas as 45 áreas de avaliação, para ser utilizada nos • aplicativos Coleta (entrada de dados) e Qualis (padronização e • qualificação dos periódicos)  Tabela Coleta (5 mil  21 mil tit.); • inexistência de um mecanismo, no Coleta, que reduza a • entrada de dados inconsistentes  Controle antipático na coleta; • b) Aplicativo Qualis defasado do ponto de vista tecnológico  WebQ. • Conseqüências: trabalho de padronização DUPLICADO [*/] e • ESTAFANTE pelas Comissões e de ALTO CUSTO. • ._________________________________________________________. • [*/] Mesmo periódico padronizado em paralelo por “n” comissões.

  15. Parte III Estágio atual do Qualis periódicos

  16. Dados utilizados I) Dados brutos (por área de avaliação; 45 áreas): a) Planilha com mais de 30 mil registros (CGINF/DAD); b) 197 mil artigos completos; c) Periódicos com pelo menos 1 artigo completo publicado no Triênio 2004-06; d) Dados: código da área; issn; título do periódico; estrato Qualis (Categoria/Nível); total de artigos publicados no Triênio 2004-06. II)Limpeza dos dados: Base referencial: Tabela Coleta com mais de 21 mil títulos; Dados adicionais: Fator de impacto 2006 (JCR/ISI); Índice h (SCImago/Elsevier); Pesos utilizados pelas áreas (SIR ou “Cadernos”) Não foram considerados os registros com: a) ISSN em branco; b) Título não integrante da Tabela Coleta; c) ISSN pertencente à Tabela Coleta mas título de outro periódico; d) Título pertencente à Tabela Coleta mas cessado; e) Registro sem informação sobre C/N ou parcial. II) Planilha final (~32 mil linhas): ~ 10.800 periódicos; ~ 190 mil artigos completos; + Dados adicionais referidos acima + Indicadores apresentados adiante.

  17. 50% ou + 35 a 49% 25 a 34% 15 a 24% 7 a 14%

  18. 50% ou + 35 a 49% 25 a 34% 15 a 24% 7 a 14%

  19. Rank: q Anexo: demais áreas.

  20. 4 indicadores: P :índice de concentração do periódico/área; q :rank atual com base na Circulação/Nível e Q ; j :fator de impacto (JCR), j* e J*; h:índice h (SCImago), h* e H*

  21. Índice P

  22. Índice P P é um índice de concentração. Baseia-se na QUANTIDADE de artigos completos publicados pelos programas de uma determinada área de avaliação. Base de cálculo: total [1/] do triênio anterior, 2004-06; Permite identificar em quais periódicos se concentra a parcela mais significativa de artigos publicados pelos programas de uma área. P: representa o % acumulado da quantidade de artigos publicados em um determinado subconjunto de periódicos, classificando-os segundo a quantidade de artigos (ordem decrescente).

  23. Exemplo:P=18% Se o índice P de um determinado periódico for igual a 18, significa que aquele periódico está entre aqueles poucos que, em conjunto, concentram 18% do total de artigos publicados pela área. Quanto menor P maior a importância relativa do periódico para a área de avaliação, do ponto de vista QUANTITATIVO. P serviu de base para identificar os poucos periódicos que, em conjunto, abrigam significativa parcela dos artigos publicados por uma determinada área de avaliação.

  24. 13,8% dos Periódicos (125/903) concentram 81,3% dos Artigos (11.014/13.546); (15 ou mais artigos/periódico) Artigos: 13.546 Princípio de Pareto Periódicos: 903 Exemplo: Área de avaliação 42 - Ciências Agrárias I

  25. O índice P foi levado em conta para estratificar os periódicos em 3 estratos (“Princípio de Pareto”): P1 (P até 79%); P2 (P entre 79 a 90%); P3 (P maior do que 90%). Os dois limites, 79% e 90% foram fixados de forma empírica. Arbitrariamente. Pareto

  26. Área: Ciências Agrárias I Pareto P1 NP1 =104 P2 NP2 =127 N =903 (periódicos) Artigos (Total):13.546 continua ...

  27. ... continuação. Pareto P3 NP3 =672 Artigos (Total):13.546

  28. Detalhamento por área de avaliação: continua ...

  29. ... continuação.

  30. Indicadores qeQ

  31. Ramos da ciência: H = Humanidades = Humanas + Sociais Aplicadas + Lingüística, Letras e Artes; V=Vida= Saúde + Biológicas + Agrárias; E=Exatas & Engªs; M=Multidisciplinar e Ensino de Ciências e Matemática.

  32. Rank: q Anexo: demais áreas.

  33. C/N atual: Ia = 2; Ia = 2; Na = 5; Nb =2; Lc = 2 q:#9=1; #8,5=1; #8=1; #7,5=2; #7=4; #6=1; #5=1; #3,5=1; #1=1

  34. Apenas P1 Q = média aritmética ponderada de “q”

  35. “Área-madrinha”: Critério: 1º) o maior nº de artigos (absoluto); 2º) o menor P, quando os nºs de artigos forem iguais. QHumanidades = (15x9 + 8x8,5 + 25x7,0)/(15+8+25) = 7,88

  36. j (fator de impacto) e h (índice h)

  37. Indicadores j (fator de impacto); j* e J* Base: fator de impacto JCR/ISI.

  38. Área: Ecologia - 124 periódicos P1 Ver J*

  39. Área: Biológicas II Ver J*

  40. J* = média aritmética ponderada de “j*”. “Área-madrinha”

  41. Indicadores h (índice h); h* e H* Análogos a j, j* e J*: Base: SCImago/Elsevier. H* = média aritmética ponderada de “h*”.

  42. Medianas do fator de impacto e do índice h, por área de avaliação. Universo: periódicos classificados como P1.

  43. Inserção no JCR/ISI e SJR/Elsevier, por área de avaliação: continua ...

  44. ... continuação.

  45. Periódicos classificados em P1 (sem dupla contagem): 4.328 (4.328/10.803 = 40%); 2.010 indexados JCR ou SCImago; 2.318 não indexados. % b/a continua ...

  46. ... continuação.

  47. Planilha de trabalho

  48. 2 planilhas para cada área de avaliação Ordem: total artigos; decrescente. 1.1) apenas periódicos P1; 1.2) P2 + P3. Parte I continua ...

  49. ... continuação. Parte II continua ...

More Related