BASES DE DADOS E FATOR DE IMPACTO NA AVALIAÇÃO DE PERIÓDICOS: PERSPECTIVAS E IMPLICAÇÕES. Mário Sacomano Neto

Transcrição

1 BASES DE DADOS E FATOR DE IMPACTO NA AVALIAÇÃO DE PERIÓDICOS: PERSPECTIVAS E IMPLICAÇÕES Mário Sacomano Neto msacomano@ufscar.br

2 Porque devemos estudar índices de impacto?

3 CAMPO DA PRODUÇÃO CIENTÍFICA Capes Centros de pesquisa Universidades Pos-graduação Bases de dados Sociedade Avanço da ciência e do conhecimento Autor Coleta, analisa, produz ideias e publica Periódicos Co-autores Alunos Avaliadores Leitores Professores

4 PROBLEMAS... Ciência e resultados da ciência; Hegemonia da língua inglesa; Organização dos periódicos; Bases de dados e fator de impacto; Avaliação de periódicos e programas de pós-graduação DORA (Declaration on Research Assessment). Fator de impacto não considera um conjunto complexo de atividades prévias e correlatas

5 AGENDA Fator de impacto e avaliação de periódicos; Principais métricas de impacto (JCR): fator de impacto, índice de imediatez, meia vida das citações, EigenFactor e Article Influence Novos indicadores bibliométricos Recomendações

6 INDICADORES DE IMPACTO WEB OF KNOWLEDGE inclui artigos da web of science e diversas métricas de impacto (JCR) SCOPUS - utiliza métricas similares mas com algorítimos distintos. Inclui o Altimetrics for Scopus (blogs, social media) SCIMAGO JOURNAL AND COUNTRY RANK - serviço livre que utiliza o Scopus para calcular o SCImago Journal Rank (SJR) e o Source Normalized Impact per Paper (SNIP) GOOGLE SCHOLAR CITATIONS serviço livre do google e permite calcular o índice h e o i10 index. Google Schoolar Metrics PUBLISH OR PERISH. Programa livre que calcula o índice h, citações entre outras métricas similares ao Google

7 JOURNAL OF CITATION REPORT

8 JOURNAL OF CITATION REPORT O JCR publica dados de citação de mais de revistas de mais de 25 milhões de referências a cada ano (Science Edition e Social Science Edition) Todas as revistas com o JCR estão indexadas na Web of Science

9 INDICADORES DE IMPACTO (JCR) - FATOR DE IMPACTO (impactfactor) - razão entre o número de citações feitas (no corrente ano) a itens publicados neste periódico nos últimos 2 anos e o número de artigos publicados nos mesmos 2 anos pelo mesmo periódico - FATOR DE IMPACTO DE 5 ANOS - citações feitas no ano em curso do material publicado nos 5 anos anteriores - ÍNDICE DE CITAÇÃO IMEDIATA (immediacyindex) número de vezes que um artigo de um periódico específico é citado durante o ano em que foi publicado

10 INDICADORES DE IMPACTO (JCR) - Meia-vida das citações (cited Half-Life) - tempo (em anos) para que 50% das citações recebidas por um periódico apareçam na literatura -Eigenfactor-EigenFactor utiliza a estrutura da rede para avaliar a impôrtancia de cada revista -ArticleInfluence - É a medida do prestígio do periódico por artigo. O Engeinfactor é dividido pela fração de artigos publicados no periódico

11 FATOR DE IMPACTO NO JCR FI razão entre o número de citações feitas no corrente ano a itens publicados neste periódico nos últimos dois anos e o número de artigos (itens fonte) publicados nos mesmos dois anos pelo mesmo periódico (Journal Citation Reports

12 FATOR DE IMPACTO DE 5 ANOS O Fator de Impacto tradicional se baseia em citações feitas no ano em curso a material publicado nos dois anos anteriores. O Fator de Impacto de 5 anos se baseia em citações feitas no ano em curso a material publicado nos 5 anos anteriores. Biochemistry & Molecular Biology

13 COMPORTAMENTO DAS % citações Mathematics Economics CITAÇÕES Genetics & Heredity 12% 10% 8% 6% 4% 2% 0%

14 FI E AS ÁREAS DO CONHECIMENTO (STREHL, 2005)

15 DIAGRAMA EM CAIXA (IMPACTO POR ÁREA DO CONHECIMENTO)

16 PERCENTAGEM DE AUTOCITAÇÕES (Permite comparar as taxas de autocitações entre revistas e a sua influência no cálculo do Fator de Impacto).

17 EIGENFACTOR E ARTICLE INFLUENCE Essas métricas são desenvolvidas no projeto Eigenfactor (The Eigenfactor Project ) do laboratorio Bergstrom no Departamento de Biología da Universidade de Washington (

18 EIGENFACTOR As referências conectam as revistas numa rede de citação (5 anos de citações utilizando dados do JCR). O EigenFactor utiliza a estrutura da rede completa para avaliar a impôrtancia de cada revista. As autocitações são excluidas. Corresponde com um modelo de pesquisa no qual os leitores vão seguindo cadeias de citações As revistas são consideradas influentes quando são citadas por outras revistas consideradas influentes.

19 ARTICLE INFLUENCE Como no caso do Eigenfactor, o Article influence utiliza a rede completa de citação para avaliar a importancia de cada revista em função dos dado do JCR. Não considera as autocitações. O cálculo do score da Influência de Artigo incorpora o score do Eigenfactor. O score de Influência de Artigo mede a influência de artigos individuais de uma mesma revista, indicando asím a importancia do artigo publicado nessa revista. Porque a influência de Artigo é medida a nivel de artigo sendo mais parecida com o Fator de Impacto que o score Eigenfactor. Lembre-se que a metodologia para o calculo do Article Influence é diferente da ultilizada para o Fator de Impacto e por tanto oferece uma perspectiva diferente e complementaria a este último.

20 JCR Home Page Science and Social Science editions must be searched separately Before starting, click on Information for New Users and read Using the JCR Wisely. The Notices link will include useful information about titles changes and title suppressions in this years edition.

21 Select one or more categories of journals to view.

22 Journal Summary List Use the drop down to select how you would like the journals arranged, then click Sort Again

23 Full Journal Record

24 Subject Category Impact Data

25 Median and Aggregate Impact Factor Data The Median Impact Factor for the subject category of Agronomy is.993 The Aggregate Impact Factor for Pediatrics is The Aggregate Impact Factor is calculated by dividing all the 2011 citations (21513) to items published in 2009 and 2010 (14848) in this category but the total number of articles and reviews published in 2009 and 2010

26 Five Year Impact Factor Trend Graph Entry point into JCR from Web of Science Indicates the Journal s Impact Factor over the latest five years

27 Outros indicadores bibliométricos

28 INDICADORES DE IMPACTO ALTMETRICS.ORG. serviço livre envolvendo novas métricas bibliométricas das redes sociais IMPACT STORY serviço livre que suporta a agregação de dados do Google, DOIs e o PubMed Ids (desde bases populares até bases acadêmicas) PLOS ARTICLE LEVEL METRICS Public Library of Science opera como repositório. Combina fator de impacto do artigo baixado e citado em blogs e redes sociais READERMETER. Ferramenta livre que utiliza dados das nuvens para processar informações do Mendeley. Baseado em leitura e não em citação.

29 INDICADORES DE IMPACTO ACADEMIA.EDU - Plataforma livre de troca de artigo para aumento de visibilidade das publicações entre os pares da rede MENDELEY - Combina gerenciamento de citações dos pares da rede através de um portal (downloads, associar-se a grupos e verificar artigos mais populares) SOCIAL SCIENCE RESEARCH NETWORK (SSRN). Repositório de artigos on line (400,000 abstracts e uma ampla coleção de artigos) VIVO - Ferramenta livre para análise semântica para facilitar a pesquisa e a colaboração dentro e entre instituições. LATTES, DATACAPES E PATENTES análise do desempenho de programas, pesquisadores e patentes (NIT/UFSCar)

30

31

32

33

34 Participação percentual do número de artigos brasileiros publicados em periódicos científicos indexados pela Thomson/ISI e Scopus em relação ao mundo, (MCTI, 2013) Fonte(s): SCImago. (2007). National Science Indicators (NSI) da Thomson Reuters Scientific INC e SJR SCImago Journal & Country Rank. Acesso em 21/11/2012,

35 Número de artigos brasileiros publicados em periódicos científicos indexados pela Thomson/ISI e Scopus, (MCTI, 2013) Fonte(s): SCImago. (2007). National Science Indicators (NSI) da Thomson Reuters Scientific INC e SJR SCImago Journal & Country Rank. Acesso em 21/11/2012,

36 PRODUÇÃO DE ARTIGOS CIENTÍFICOS (LOPES, 2010)

37 FATOR DE IMPACTO ENTRE OS BRICS (Davidovich, 2011)

38 RECOMENDAÇÕES... Apoio aos periódicos nacionais; Criar bases e indicadores de impacto nacionais (Spell e Scielo); Reformular critérios de avaliação da pósgraduação; Multicritérios de impacto (DataCapes, Lattes...) Utilização de índices de impacto do google acadêmico, publish or perish entre outros; Associar patentes com avanços científicos

39 FATOS CURIOSOS...

42 M2 FATOR DE IMPACTO: PERIÓDICOS E PESQUISADORES

43 Slide 42 M2 Governos, instituições e a regulação Comunidade acadêmica Bases de dados Periódicos Bibliometria e cientometria Pesquisadores (composição da revisão de literatura e publicação de artigos) Mário; 01/08/2013

44 REFERÊNCIAS ADAMS, D. The couting house. Nature, v. 415, p , Feb AMIN, M.; MABE, M. Impact factors: use and abuse. Perspectives in publising, Amsterdam, n. 1, p. 1-6, Oct BROOKES, B. C. The growth, utility, and obsolescence of scientifi c periodical literature. Journal of Documentation, London, v. 23, n. 4, p , Dec BURTON, R. E.; KLEBER, R.W. The half-life of some scientifi c and technical literatures. American Documentation, v. 2, n. 1, p , Jan COLE, Jonathan; COLE, Stephen. Measuring the quality of scientifi c research. In:. Social stratifi cation in science. Chicago: The University of Chicago Press, c1973. cap. 2, p DHAWAN, S. M.; PHULL, S. K.; JAIN, S. P. Selection of scientifi c journal: a model. JournalofDocumentation, London, v. 36, n. 1, p , Mar GARFIELD, Eugene. Citation analysis as a tool in journal evaluation: journals can be ranked by frequency and impact of citations for science policy studies. Science, Washington, v. 178, n. 4060, p , Nov Citation indexes for science: a new dimension in documentation through association of ideas. Science, Washington, v. 122, n. 3159, p , July Citation indexing: its theory and application in science, technology, and humanities. New York: Wiley & Sons, Dispelling a few common myths about journal citation impacts. The Scientist, v. 11, n. 3, p. 11, Feb Disponível em: < scientist.com/yr1997/ feb/comm_ html>. Acesso em: 27 dez Journal impact factor: a brief review. Canadian Medical Association Journal, v. 161, n. 8, p , Oct Disponível em: < Acesso em: 9 jul Use of Journal Citation Reports and Journal Performance Indicators in measuring short and long term journal impact. Croatian Medical Journal, Lengerich, v. 41, n. 4, p , Disponível em: < >. Acesso em: 16 out ; SHER, I. H. New factors in the evaluation of scientifi c literature through citation indexing. American Documentation, New York, v. 14, n. 3, p , July GÓMEZ CARIDAD, Isabel; BORDONS CANGAS, María. Limitaciones en el uso de los indicadores bibliométricos para la evaluación científi ca. In: POLITICA Cientifi ca. Madrid: Comission Internacional de Ciencia Y Tecnología, v. 46, p HAMILTON, David. Publishing by and for? the numbers. Science, Washington, v. 250, n. 4986, p , Dec Research papers: who s uncited now. Science, Washington, v. 251, n. 25, p. 25, Jan * A base de dados do SciELO está disponível em: ** Ci.