Compreendendo os principais indicadores bibliométricos

Transcrição

1 Compreendendo os principais indicadores bibliométricos conceitos e aplicações nas diversas áreas Rogério Mugnaini Universidade de São Paulo Escola de Artes, Ciências e Humanidades (EACH) Escola de Comunicações e Artes (ECA) mugnaini@usp.br

2 Sumário Bibliometria: história Principais indicadores: Fator de Impacto, Índice de Obsolescência Índice h Contextualização de indicadores nacional versus internacional diversidade das áreas Produção científica nacional indexação de periódicos análise de fontes de informação Bases de dados para geração de indicadores Web of Science Scopus Google Acadêmico SciELO

3 Bibliometria: história Primeira aplicação por Cole e Eales Lei de Lotka Gross & Gross: medida de impacto de revista Lei de Bradford Lei de Zipf Garfield publica artigo sobre Índice de Citação Déc Criação do termo Bibliometria por Pritchard Uso para análise da ciência por Price Science Citation Index Déc Informática, bases de dados, novas técnicas Demanda de indicadores de C&T Déc Recuperação de informação, mapeamento, modelagem Subsídio à Política Científica Narin e Moll, 1977; White e McCain, 1989; Barré, 1990; Araújo,2006; Archambault & Larivière, 2007

4 Bibliometria: escopo Relação entre conceitos de análise quantitativa da ciência e indicadores de C&T Indicadores de CT&I Indicadores de output Indicadores de produção científica Bibliometria Cientometria Informetria, Webometria

5 Consagração do Fator de Impacto A rtigo s so bre F ato r de Impacto na Wo S Originalmente desenvolvido para desenvolvimento de coleções, não para avaliação Incomparabilidade, dadas as especificidades entre áreas Assimetria entre elementos contados no numerador e denominador Janela de citação de dois anos Estabelecimento da língua inglesa e centralização americana Archambault & Larivière, 2007

6 Aspectos metodológicos Impacto Obsolescência Citações recebidas pelas revistas SciELO, na própria SciELO, segundo idade do artigo citado

7 Fator de impacto formula FI Ano (X) = Cits. + Ano (X a X-1) Arts. + Ano (X-1) Cits. Ano (X a X-2) Arts. Ano (X-2)

8 Fator de impacto a média não é uma medida adequada para distribuições assimétricas Citações aos artigos do PSYCHOLOGICAL BULLETIN em Citações Citações Idade das pessoas num berçário Citações aos artigos da ANAIS DA ACADEMIA BRASILEIRA DE CIENCIAS em Artigos Média: 60,7 Mediana: 44 Média: 3,7 Mediana: Artigos Média: 3,8 Mediana: 0,6

9 Fator de impacto Assimetria entre elementos contados no numerador e denominador Considera citações a qualquer tipo de documento FI Ano (X) = Cits. + Ano (X a X-1) Arts. + Cits. Ano (X a X-2) Arts. Ano (X-1) Inclui: artigos originais e de revisão Não inclui: editoriais, cartas, etc pois, geralmente, não são citados Ano (X-2)

10 Fator de impacto Janela de citação de dois anos FI Ano (X) = Cits. + Ano (X a X-1) Cits. + Ano (X a X-2) Cits Ano (X a X-3) Cits. Ano (X a X-n) Arts. + Ano (X-1) Arts. + Ano (X-2) Arts Ano (X-3) Arts. Ano (X-n) Impacto Obsolescênci a

11 Fator de impacto Janela de citação de dois anos Gráfico 5.2: Histograma das porcentagens de cobertura das janelas de citações utlizada e do FI 100 Jan. citações utilizada Jan. fat. Impacto 80 Freqüência Porcentagem Porcentagem garantida pela janela de citações de 2 anos e janela de tamanho variável (de acordo com a Vida Média)

12 Aspectos metodológicos obsolescência Fonte: Larivière et al., 2007

13 Aspectos metodológicos obsolescência Fonte: Larivière et al., 2007

14 Aspectos metodológicos índice h Pesquisador em início de carreira Pesquisador em fim de carreira

15 Aspectos metodológicos índice h (Mugnaini, R.; Packer, A.L.; Meneghini, R., 2008)

16 Contextualização de indicadores nacional versus internacional SciELO Brasil: Coleção com 100% de revistas Brasileiras (150) 6 mil Tamanho da audiência potencial? MacRoberts; MacRoberts, 1996

17 Contextualização de indicadores nacional versus internacional Metodologia para avaliação de revistas científicas brasileiras Total de aprox. 150 revistas SciELO amostra de 39 revistas Ciências da Vida Análise multivariada considerando alguns indicadores de impacto Mugnaini, 2006

18 3 Gráfico AA1: Citações a 39 revistas SciELO (Ciências da Vida) - ano de 1,05 Fator 2 0,7 FI 2004 rs p IndInf citsall cs p hb 0,35 abb rbb rs bm t jped cs c rlae rbgo ne rbepid abo 0 0 rn rbp ram b abc acb hcs m bjb abem bjid rboto ag babt rb bjpp gm b rbhh is z s pm j bjm rhc jbpm l -0,35 anp aabc rim ts p IndInf_ISI m ioc c its All_ISI FI_ISI -0,25 0 0,25 0,5 0, Fator 1 bjm br 1-0,7 4 Análise Fatorial do impacto (SciELO e ISI) das 39 revistas de Ciências da Vida ano de 2004

19 Contextualização de indicadores nacional versus internacional The weight of local journals in Latin America and Caribbean research on epidemiology (Mugnaini et al., 2009) Núcleo de Bradford # of journals First zone Total Total Articles LA&C Subset ,822 3,955 4,

20 Contextualização de indicadores nacional versus internacional The weight of local journals in Latin America and Caribbean research on epidemiology (Mugnaini et al., 2009) Núcleo de Bradford (AL&C) LA&C subset Journal Cadernos de Saude Publica 2 1 Revista de Saude Publica Revista Panamericana de Salud Publica 3 3 Salud Publica de Mexico Revista Sociedade Brasileira de Medicina Tropical 8 5 Memorias Instituto Oswaldo Cruz American Journal of Tropical Medicine and Hygiene Arquivos de Neuropsiquiatria 8 Revista Neurologia 9 Revista Instituto de Medicina Tropical de Sao Paulo Jornal de Pediatria (Rio de Janeiro) 11 Revista Medica de Chile 12 Biomedica 13 Transplant Proceedings 14 Boletin de la Oficina Sanitaria Panamericana* 5 Bulletin of the Pan American Health Organization * 6 West Indian Medical Journal 8

21 Contextualização de indicadores nacional versus internacional The weight of local journals in Latin America and Caribbean research on epidemiology (Mugnaini et al., 2009) Publicação nacional, regional e internacional World LA&C Brazil Jamaica Mexico Chile Venezuela Argentina Colombia Peru Uruguay Cuba 0% 20% 40% 60% 80% 100% Domestic LA&C* SPAIN UNITED STATES ENGLAND other

22 Contextualização de indicadores diversidade das áreas 2 Factor2 Agricultural Sciences 1,5 Engineering 1 proceedings thesis 0,5 article Exact and Earth Sciences Factor1 0-1,5-1 -0,5 0 0,5 1 1,5 2 Health Sciences Biological Sciences -0,5-1 Human Sciences book Applied Social Sciences Linguistics, Letters and Arts Fonte: Mugnaini et al., 2007 Análise Fatorial entre área citante e tipo documento citado - SciELO 2004

23 Contextualização de indicadores diversidade das áreas Health Sciences Ex & Ear Sci Factor2 Eng Hum Sci Agricultural Sciences Biological Sciences Factor1-1,5-1 -0,5 0 0,5 1 1,5 2 2,5-1 Linguistics, Letters and Arts Applied Social Sciences -2 Fonte: Mugnaini et al., 2007 Análise Fatorial entre área citante e ano do documento citado - SciELO 2004

24 Contextualização de indicadores diversidade das áreas Category Median Aggregate Aggregate (linked to category inform ation) Impact Immediacy Cited Total Cites Factor Index Half-Life # Journals Articles BIOCHEMISTRY & MOLECULAR BIOLOGY MEDICINE, GENERAL & INTERNAL BIOLOGY PHYSICS, APPLIED COMPUTER SCIENCE, INFORMATION SYSTEMS AGRICULTURE, DAIRY & ANIMAL SCIENCE LINGUISTICS ECONOMICS > ANTHROPOLOGY SOCIAL SCIENCES, INTERDISCIPLINARY HISTORY >

25 Contextualização de indicadores diversidade das áreas áreas títulos artigos referências citações Fator de Impacto Índice de Imediatez Vida Média # ref. / artigo # cits. / artigo Linguística, Letras e Artes >10,0 23,59 4,09 Humanas ,1202 0,0115 >10,0 30,36 9,64 Sociais Aplicadas ,1191 0,0073 >10,0 27,83 10,54 Agrárias ,2812 0,0426 >10,0 23,16 14,86 Engenharias ,0859 0,0205 >10,0 22,63 15 Exatas e da Terra ,2161 0,0515 >10,0 27,97 21,76 Saúde ,2921 0,0539 >10,0 27,06 22 Biológicas ,2576 0,0675 >10,0 31,29 25,38

26 Contextualização de indicadores diversidade das áreas (Mugnaini, R.; Packer, A.L.; Meneghini, R., 2008)

27 Contextualização de indicadores diversidade das áreas Revista de Saúde Pública 100% rev_isi rev_scielo/isi 75% rev_scielo rev_outr 50% 25% 0% rev_bra livro_outr livro_cap livro anais tese

28 Contextualização de indicadores diversidade das áreas Revista da Associação Médica Brasileira 100% rev_isi rev_scielo/isi 75% 50% 25% rev_scielo rev_outr rev_bra livro_outr livro_cap livro 0% anais tese

29 Contextualização de indicadores diversidade das áreas Brazilian Journal of Physics 100% rev_isi rev_scielo/isi 75% 50% 25% rev_scielo rev_outr rev_bra livro_outr livro_cap livro 0% anais tese

30 Contextualização de indicadores diversidade das áreas Ciência da Informação 100% 75% 50% 25% 0% rev_isi rev_scielo/isi rev_scielo rev_outr rev_bra livro_outr livro_cap livro anais tese

31 Bases de dados para geração de indicadores bibliométricos Contexto atual Oferta de bases de dados Facilidade de análise bibliométrica Novos indicadores Resultados Complexidade na análise Capacitação usuários

32 Indicadores Bibliométricos Web of Science

33 Indicadores Bibliométricos Scopus

34 Indicadores Bibliométricos Google Scholar

35 Indicadores Bibliométricos

36 Referências Bibliográficas ARAÚJO, C. A. Bibliometria: evolução histórica e questões atuais. Em Questão, Porto Alegre, v. 12, n. 1, p , ARCHAMBAULT, E.; LARIVIÈRE, V. Origins of measures of journal impact: historical contingencies and their consequences on current use. Proceedings of the 11th International Conference of the International Society for Scientometrics and Informetrics. Madrid: CINDOC-CSIC; p BARBALHO, C. R. S. Periódico científico: parâmetros para avaliação de qualidade. In: FERREIRA, S. M. S. P.; TARGINO, M. G. (Org.). Preparação de revistas científicas: teoria e prática. São Paulo: Reichmann& Autores, p BARRÉ, R. Prefácio. In: COURTIAL, J. P. Introduction à la scientométrie. Paris: Anthropos, GARCIA-ZORITA, J. C. La actividad científica de los economistas españoles, en función del ámbito nacional o internacional de sus publicaciones: estudio comparativo basado en un análisis bibliométrico durante el período Espanha f. Tese (Doutorado em Documentação) - Universidad Carlos III de Madrid, Madrid, GARFIELD E. Citation indexes for science. Science 1955; 122: LARIVIÈRE, V;ARCHAMBAULT, E; GINGRAS, Y. Long-term patterns in the aging of the scientific literature, Proceedings of the 11th International Conference of the International Society for Scientometrics and Informetrics. Madrid: CINDOC-CSIC; p LÓPEZ ORNELAS, M.; CORDERO ARROYO, G. Um intento por definir las características generales de las revistas académicas electrónicas. Razón y Palabra, México, D. F., n.43, feb./marzo MACROBERTS, M. H.; MACROBERTS, B. R. Problems of citation alysis. Scientometrics, v. 36, n. 3, p , MUGNAINI, R. Caminhos para adequação da avaliação da produção científica brasileira: impacto nacional versus internacional. São Paulo, p. Tese (Doutorado em Ciência da Informação) - Escola de Comunicações e Artes. Universidade de São Paulo. MUGNAINI R, MENEGHINI R, PACKER AL. Citation profiles in Brazilian journals of the SciELO database in different scientific areas. Proceedings of the 11th International Conference of the International Society for Scientometrics and Informetrics. Madrid: CINDOC-CSIC; p MUGNAINI, R. ; LETA, J. ; GOLDBAUM, M. ; CASTRO, R. C. F. ; TARDELLI, A. O. ; PACKER, A. L.. The weight of local journals in Latin America and Caribbean research on epidemiology. In: 12th International Conference on Scientometrics and Informetrics, 2009, Rio de Janeiro. Proceedings of ISSI the 12th International Conference of the International Society for Scientometrics and Informetrics. São Paulo : CAPES, v. 1. p MUGNAINI, R., PACKER, A.L. e MENEGHINI, R. Comparison of scientists of the Brazilian Academy of Sciences and of the National Academy of Sciences of the USA on the basis of the h-index. Braz J Med Biol Res [online]. 2008, vol. 41, no. 4 [citado ], pp Disponível em: < MULLER, S. O círculo vicioso que prende os periódicos nacionais. DataGramaZero - Revista de Ciência da Informação, Rio de Janeiro, n. zero, dez Disponível em: < Acesso em: 20 jun NARIN, F.; MOLL, J. K. Bibliometrics. Annual Review of Information Science and Technology, vol. 12, p , ROSTAING, H. La bibliométrie et ses techniques. Marseille : Sciences de la Société, WEITZEL, S. da R. E-prints: modelo da comunicação científica em transição. In: FERREIRA, S. M. S. P.; TARGINO, M. G. (Org.). Preparação de revistas científicas: teoria e prática. São Paulo: Reichmann& Autores, p WHITE, H. D.; McCAIN, K. W. Bibliometrics. Annual Review of Information Science and Technology, vol. 24, p , 1989.

37 Obrigado!!! Rogério Mugnaini