Minicurso INDICADORES BIBLIOMÉTRICOS DE PESQUISA. Carla Nascimento Colaboração: Aline Frascareli 2017

Minicurso INDICADORES BIBLIOMÉTRICOS DE PESQUISA Carla Nascimento Colaboração: Aline Frascareli 2017

Objetivos Apresentar o conceito e usos da bibliometria; Apresentar os indicadores científicos; Apresentar os recursos bibliométricos disponíveis nas bases de dados WoS, Scopus, SciELO e Google Scholar; Apresentar as ferramentas de análise bibliométrica CiteScore, Scival e InCites; Indicar softwares de análise bibliométrica.

BIBLIOMETRIA: CONCEITOS E USOS

O que é bibliometria? É uma técnica quantitativa e estatística de medição dos índices de produção e disseminação do conhecimento científico Fonte: ARAÚJO, Carlos Alberto Ávila. Bibliometria: evolução histórica e questões atuais. Em Questão, Porto Alegre, v. 12, n. 1, p. 11-32, jan.-jun. 2006.

Técnica quantitativa Fonte: MUGNAINI, Rogério. Compreendendo os principais indicadores bibliométricos: conceitos e aplicações nas diversas áreas. [Apresentação], 2013. Disponível em: http://www.eventos.bvsalud.org/agendas/oficinasessp/public/documents/mugnainir-160513.pdf.

Usos da bibliometria Identificar as tendências e o crescimento do conhecimento em uma área; Identificar as revistas do núcleo de uma disciplina; Mensurar a cobertura das revistas secundárias; Identificar os usuários de uma disciplina; Prever as tendências de publicação; Estudar a dispersão e a obsolescência da literatura científica; Identificar a produtividade de autores individuais, organizações e países; Medir o grau e padrões de colaboração entre autores; Analisar os processos de citação e cocitação; Determinar o desempenho dos sistemas de recuperação da informação; Avaliar os aspectos estatísticos da linguagem, das palavras e das frases; Avaliar a circulação e uso de documentos em um centro de documentação; Medir o crescimento de determinadas áreas e o surgimento de novos temas. Fonte: VANTI, Nadia Aurora Peres. Da bibliometria à webometria: uma exploração conceitual dos mecanismos utilizados para medir o registro da informação e a difusão do conhecimento. Ciência da Informação, Brasília, v. 31, n. 2, p. 152-162, maio/ago. 2002.

INDICADORES CIENTÍFICOS

Categoria Concentração dispersão (núcleo básico de revistas e densidade de informação) Modelo Modelo matemático de Bradford (Lei da dispersão) Índice de densidade de documentos de Zakutina e Piyenikova Índice de concentração de Pratt Vida média de Burton y Kebler Índice de obsolescência de Price TIPOS DE INDICADORES Uso e obsolescência Impacto e visibilidade Atividade científica Conexão entre autores Associações temáticas Índice de isolamento idiomático de Yitzhaki Modelo matemático de Brookes Índice de atualidade temática de Kidd Fator de impacto Índice de imediatez Índice de visibilidade de Platz Índice de influencia das revistas de Pinski e Narin Índice de atração de Frame Índice e importância das revistas Índice de posição relativa de revistas Número e distribuição de publicações Produtividade dos autores de Lotka Colaboração em publicações Número e distribuição de referências Linhas de pesquisa e colégios invisíveis Análise de referências comuns Análise de palavras comuns (Leis de Zipf)

ANÁLISE DE CITAÇÕES Tem origem no século XVII para evidenciar a relação entre dois documentos. É parte da bibliometria que investiga as relações entre os documentos citantes e os documentos citados, no todo ou em suas diversas partes: autor, título, origem geográfica, ano, idioma de publicação, etc.

Importante Evidenciam os aspectos quantitativos e não qualitativos da produção científica As citações mostram a visibilidade, uso, difusão do autor, artigo ou revista e não a qualidade

INDICADORES CIENTÍFICOS Produção científica (scholarly outputs): Número total acumulado de itens publicados em um dado período. Mede o volume, a produtividade: - quantas publicações foram produzidas por um autor, grupo de pesquisadores, instituição, país ou conjunto de países em dado período. Contagem de citações (citation count): Indica o total de citações que as publicações de um autor, instituição ou país acumularam ao longo de um determinado período.

Indicadores mais utilizados Citações por publicação (citation per publication): Indica o número de citações recebidas por artigo publicado. Indica o impacto médio de citação das publicações. WoS Fator de Impacto = Mede quantas vezes um artigo foi citado em relação ao total de artigos publicados em uma revista em um período de dois anos (JCR/Clarivate)

Indicadores mais utilizados WoS WoS Fator de Impacto do periódico sem auto-citações (journal impact factor without self cites) = é o mesmo que FI, mas com uma importante exceção: Quaisquer citações para uma publicação que provêm da própria publicação (ou seja, auto-citações) são excluídas do cálculo Produção / publicações nos top percentis (outputs / publications in the top percentiles) = Indica o grau em que publicações de uma instituição, grupo ou país estão presentes nos percentis mais citados de um universo de dados: quantas produções estão no topo de 1%, 5%, 10% ou 25% das publicações mais citadas

Indicadores mais utilizados Pontuação Eigenfactor (Eigenfactor score) = Baseia-se no número de citações a artigos publicados em revistas nos últimos 5 anos Considera a importância da revista onde a citação foi realizada, de tal modo que revistas mais influentes (mais citadas) têm um maior peso que os revistas menos influentes WoS

Indicadores mais utilizados Índice de lmediaticidade = Mensura o quão imediatamente um artigo de uma revista é citado logo após ter sido publicado WoS Meia vida ou vida média = Mede quantos anos depois um artigo publicado em um periódico ainda é citado. Varia de acordo com as características da área de conhecimento, seus padrões de pesquisa e publicação. Geralmente, a meia vida é inversamente proporcional ao fator de impacto WoS

Indicadores mais utilizados Citações por publicação Scopus SJR - Scimago Journal Rank - resulta em maior valor da citação em áreas de pesquisa com menor probabilidade de citações (Scopus) - utiliza o algoritmo do PageRank do Google para a classificação SJR = Nº médio de citações ponderadas recebidas no ano Nº documentos publicados nos 3 anos anteriores Veja como é calculado: http://www.scimagojr.com/scimagojournalrank.pdf

Indicadores mais utilizados Scopus Impacto de citação ponderado por campo [de conhecimento] (Field-weighted citation impact) Indica o nº de citações recebidas por publicação comparada com o nº médio de citações recebidas por todas as outras publicações similares no universo de dados > 1,00 = citação maior que a média mundial < 1,00 = citação menor que a média mundial Ex: pontuação 1,44 = citação 44% maior do que o esperado pontuação 0,85 = citação 15% menor do que a média

Indicadores mais utilizados Scopus SNIP (Source Normalized lmpact per Paper) = Mede o impacto de citações contextualizadas por revistas com base no número total de citações em uma área do conhecimento. Ajuda a fazer comparações diretas entre periódicos em diferentes áreas

Indicadores mais utilizados Scopus CiteScore = Mensura o impacto da citação de revistas. Calcula o número médio de citações recebidas em um ano por todos os itens publicados nessa revista nos 3 anos anteriores

Indicadores mais utilizados Índice H = Indica um equilíbrio entre a produtividade (produção científica) e a visibilidade (contagem de citações) de publicação ou pesquisador Ex: Índice H de 12 indica que, no conjunto de dados, 12 artigos foram citados pelo menos 12 vezes cada um

Outros indicadores Impacto das visualizações ponderado pelo campo de conhecimento (field weighted views impact) = média mundial esperada de visualizações para o campo de conhecimento/assunto, tipo de publicação e ano de publicação Colaboração e Impacto das colaborações = Indica o número de publicações de uma instituição, grupo ou pesquisador produzidas em coautoria internacional, nacional ou institucional, e autoria única

Métricas alternativas Altmetria Área de estudo da comunicação científica que analisa a disseminação de documentos científicos por meio das ferramentas sociais da Internet como blogs, redes sociais, gerenciadores de referências, etc. Identifica a atenção recebida Fonte: SOUZA, I.V.P. ; ALMEIDA, C.H.M. Introdução à altmetria : métricas alternativas da comunicação científica. In: ENCONTRO NACIONAL DE PESQUISA EM CIÊNCIA DA INFORMAÇÃO, 14., 2013, Florianópolis. Anais eletrônicos... Disponível em <http://enancib.sites.ufsc.br/index.php/enancib2013/xivenancib/paper/viewfile/252/289>. Acesso em 17 jul.2017.

Métricas alternativas Altmetrics Cada cor do donnut representa uma mídia diferente Pontuação calculada por algoritmo de contagem ponderada www.altmetric.com

https://www.altmetric.com/details/569124

Métricas alternativas PlumX Metrics 5 categorias: Uso, Capturas, Menções, mídias sociais e citações Quanto maior o círculo, maior a métrica da categoria http://plumanalytics.com

Obs.: Métrica incorporada a Scopus

Snowball Indicadores institucionais Iniciativa: 2010 Desenvolvidas por universidades do Reino Unido, EUA, Austrália e Nova Zelândia para garantir que seus resultados sejam de uso prático Não estão vinculadas a nenhum fornecedor específico de dados ou ferramentas Utilizam metodologias robustas e claramente definidas, permitindo comparações confiáveis cobrindo todo o espectro de atividades de pesquisa de uma universidade As metodologias acordadas e testadas estão disponíveis gratuitamente para serem usadas por qualquer instituição Incorporadas pela Elsevier

Fonte: Snowball Metrics Recipe Book. Recuperado de : https://www.snowballmetrics.com/wp-content/uploads/snowball-recipe-book_hr.pdf

Resumindo...

INDICADORES PARA REVISTAS Contagem de citações Contagem de documentos Índice H CiteScore SJR (SCImago Journal Rank ) SNIP Pontuação Eigenfactor Meia vida ou vida média Impacto de citação ponderado por campo [de conhecimento] (Fieldweighted citation impact) Fator de Impacto Fator de Impacto do periódico sem auto-citações Fator de impacto do periódico em 5 anos Publicações nos percentis top de periódicos (outputs in the top percentiles) Autocitação em periódicos Pontuação de influência do artigo IPP Impact per Publication

INDICADORES PARA ARTIGOS Contagem de citações Contagem de documentos Impacto de citação ponderado por campo [de conhecimento] (Field-weighted citation impact) Produção nos top percentis (outputs in the top percentiles) Percentile benchmark Produção online Comentários da produção online Citações em mídias sociais Citações na mídia de divulgação

INDICADORES PARA AUTOR Contagem de documentos Índice H Colaboração Impacto da colaboração Porcentagem de Internacionalização Obs.: Docentes da USP podem verificar a própria produção, dos colegas e da Unidade através do DataUSP / WeR-USP. O sistema agrupa a coleta de dados da WoS, Scopus e Google Scholar, além de dados sobre a internacionalização da Universidade.

Fonte para consulta Para relembrar e conhecer outros indicadores, acesse o site do SIBi USP: www.sibi.usp.br

RECURSOS DISPONÍVEIS NAS BASES DE DADOS

Formas de acesso Acesso restrito (rede USP ou VPN) Acesso aberto (Internet comum) Web of Science JCR InCites Scopus CiteScore Metrics SciVal Scimago SJR SciELO PePSIC Google Acadêmico

Importante As diferenças entre os valores das citações encontradas nas bases de dados, dependem da cobertura de cada base, ou seja, depende da quantidade de títulos disponíveis e abrangência de datas

Web of Science

RANKING DE REVISTAS

Total de revistas de Psicologia: 663 Psicologia geral 77 Psicobiologia 80 Psicologia aplicada 80 Psicologia clínica 121 Psicologia do desenvolvimento 70 Psicologia educacional 58 Psicologia experimental 84 Psicologia matemática 13 Psicologia multidisciplinar 128 Psicologia social 62 Psicanálise 13

Única revista brasileira de Psicologia no JCR 2016

Recursos nas bases de dados

Scopus https://www-scopus-com.ez67.periodicos.capes.gov.br/search/form.uri?display=basic

www.scimagojr.com Scimago

RANKING DE REVISTAS Total de revistas de Psicologia: 1.075 Psicologia geral 229 Psicologia aplicada 193 Psicologia clínica 253 Psicologia educacional 276 Psicologia experimental e cognitiva 119 Psicologia social 230 Neuropsicologia 57

Estrutura da Psicologia no SJR Interconexões entre subáreas da Psicologia pela posição das revistas no SJR 401 revistas

Viz Tools Exemplo: Índice H da Psicologia junto às outras áreas do conhecimento

Viz Tools Exemplo: Índice H das subáreas da Psicologia no Brasil no período de 2015-2016 Nº documentos: 1.302 Neuropsicologia Psicologia experimental

Exemplo: Índice H das subáreas da Psicologia nos EUA no período de 2015-2016 Nº documentos: 24.051 Psicologia aplicada Exemplo: Índice H das subáreas da Psicologia na França no período de 2015-2016 Nº documentos: 2.640

www.scielo.org Recursos nas bases de dados

Obs.: Apresenta a classificação das revistas estrangeiras da área de Psicologia. O Google Metric possibilita a seleção por idiomas, apresentando todas as revistas em português, mas não é possível conhecer a classificação apenas das revistas brasileiras de Psicologia.

FERRAMENTAS DE ANÁLISE BIBLIOMÉTRICA

Scopus https://www-scopus-com.ez67.periodicos.capes.gov.br/search/form.uri?display=basic

Análise de revistas

CiteScore Metrics (Scopus) O que é? Guia para pesquisadores sobre o que ler e onde publicar, possibilitando aos pesquisadores avaliar mais títulos e encontrar a revista certa em um campo específico ou nicho de pesquisa. Como é calculado? n. de citações em 2016 / n. doctos em 2013 a 2015 Abrangência = 22.600 títulos (revistas científicas, séries de livros, conferência e revistas comerciais) Lançamento = 2016 Indicadores apresentados: CiteScore Percentil Contagem de citações Scholarly Output Porcentagem de citações Área e Subárea acadêmica Quartil Top 10% (CiteScore Percentile) Subárea N. de títulos Psicologia do Desenvolvimento e da Educação 269 Psicologia Clínica 247 Psicologia Social 232 Psicologia Geral 214 Psicologia Aplicada 194 Psicologia Experimental e Cognitiva 121 Neuropsicologia e Psicologia Fisiológica 55 Total de títulos de Psicologia 1.332

CiteScore Metrics (Scopus) Revistas brasileiras Title CiteScore Percentile Citation Count Scholarly Output Percent Cited RANK Scopus Sub-Subject Area Quartile 1 Psicologia: Reflexão e Critica 0,44 31 124 284 31 123 Psicologia Geral Quartile 3 2 Paideia 0,38 27 50 130 27 131 Psicologia Geral Quartile 3 3 Psicologia e Sociedade 0,37 19 110 295 30 186 Psicologia Social Quartile 4 4 Psicologia: Teoria e Pesquisa 0,36 25 57 160 26 134 Psicologia Geral Quartile 3 5 Estudos de Psicologia 0,29 20 39 133 22 143 Psicologia Geral Quartile 4 6 Estudos de Psicologia (Campinas) 0,28 19 19 69 20 145 Psicologia Geral Quartile 4 7 Psicologia Escolar e Educacional 0,25 12 40 158 22 203 Psicologia social e educacional Quartile 4 8 Temas em Psicologia 0,19 15 29 153 15 153 Psicologia Geral Quartile 4 9 Revista Brasileira de Orientacao Profissional 0,19 6 14 72 17 181 Psicologia aplicada Quartile 4 10 Arquivos Brasileiros de Psicologia 0,18 14 18 101 10 155 Psicologia Geral Quartile 4 11 Psicologia Clinica 0,15 14 11 71 10 211 Psicologia Clínica Quartile 4 12 Revista Latinoamericana de Psicopatologia Fundamental 0,11 11 18 158 9 219 Psicologia Clínica Quartile 4 13 Psicologia USP 0,11 6 13 118 8 168 Psicologia Geral Quartile 4 14 Avaliacao Psicologica 0,10 6 5 48 8 169 Psicologia Geral Quartile 4 15 Psicologia em Estudo 0,09 5 19 203 8 170 Psicologia Geral Quartile 4 16 Tempo Psicanalitico 0,05 4 5 95 5 234 Psicologia Clínica Quartile 4 17 Agora 0,01 1 1 88 1 177 Psicologia Geral Quartile 4

CiteScore Metrics (Scopus) Cambridge University Press 3% Emerald 3% Editores de revistas Springer Nature 9% APA 7% Taylor & Francis 32% SAGE 13% Wiley-Blackwell 16% Elsevier 17%

CiteScore Metrics (Scopus) Livros Title CiteScore Citation Count Annual Review of Psychology 24,69 2.000 Advances in Experimental Social Psychology 7,90 237 Advances in the Study of Behavior 2,75 66 Psychology of Learning and Motivation - Advances in Research and Theory 2,45 108 Advances in Motivation and Achievement 1,25 15 Advances in Child Development and Behavior 0,98 83 Educational and Child Psychology 0,74 25 Nebraska Symposium on Motivation 0,53 19 International Review of Research in Developmental Disabilities 0,51 27 Research in the Sociology of Sport 0,36 10 Contemporary Perspectives in Family Research 0,28 12 Research on Professional Responsibility and Ethics in Accounting 0,12 3 Research in Ethical Issues in Organizations 0,11 7 Human-Animal Studies 0,08 1 Advances in Special Education 0,06 6

http://scival.com SciVal (Scopus)

SciVal (Scopus) Permite realizar análises bibliométricas da produção científica de uma determinada instituição, país, região, autor ou grupos de autores e revistas, desde que o material esteja indexado na base de dados Scopus e Science Direct Possui 4 módulos: Overview - panorama do desempenho da instituição (Summary, Collaboration, Published, Viewed, Cited, Economic Impact, Authors, Competencies) Benchmarking comparação entre instituições Collaboration colaborações reais e potenciais Trends

SciVal (Scopus)

Colaboração SciVal (Scopus)

Potenciais colaborações SciVal (Scopus)

Tendências SciVal (Scopus)

https://incites.thomsonreuters.com InCites (Clarivate)

InCites (Clarivate) InCites é uma ferramenta analítica que permite avaliar a produtividade científica entre instituições. Utiliza como fonte de dados as publicações indexadas na base de dados Web of Science. Módulos: Explore InCites Data Permite a geração de Tabelas, Gráficos e Relatórios personalizados: People, Organizations, Regions, Research Areas, Journals, Books, Conference Proceedings, Funding Agencies. InCites System Reports Permite a geração de Relatórios pré-definidos

InCites (Clarivate)

10 autores mais citados da Psicologia InCites (Clarivate)

InCites (Clarivate)

Instituições com publicações mais citadas InCites (Clarivate)

InCites (Clarivate)

SOFTWARES PARA BIBLIOMETRIA

Portal da Escrita Científica www.escritacientifica.sc.usp.br/gerenciadores-bibliometricos/

É um software de desktop gratuito Lançado em 2006 Extrai dados do Google Scholar para análises de estatísticas sobre o impacto da pesquisa Suporte e desenvolvimento são pagos Utiliza Indice H e suas variações como métrica https://harzing.com/resources/publish-or-perish

Software de construção e visualização de redes bibliométricas Podem ser construídas com base em co-citação, agrupamento bibliográfico ou relações de coautoria Funcionalidades de mineração de texto www.vosviewer.com

É um software de mineração e análise de dados que permite realizar análises bibliométricas e estudos relacionados à produção científica. Permite a importação de dados de várias bases. USP possui a licença para uso.

Importante A qualidade das informações e a rigorosidade do levantamento são fundamentais para obtenção de dados confiáveis. Padronização do nome do autor e instituição.

Referências ARAÚJO, Carlos Alberto Ávila. Bibliometria: evolução histórica e questões atuais. Em Questão, Porto Alegre, v. 12, n. 1, p. 11-32, jan.-jun. 2006. HARZING, A. Publish or perish. Disponível em <https://harzing.com/resources/publish-or-perish>. Acesso em 20 jul. 2017. MUGNAINI, Rogério; CARVALHO, Telma de; CAMPANATTI-OSTIZ, Heliane. Indicadores de produção científica: uma discussão conceitual. In: POBLACION, Dinah Aguiar ; WITTER, Geraldina Porto; SILVA, José Fernando Modesto da. Comunicação e produção científica: contexto, indicadores e avaliação. Angellara, 2006. p.313-340. Portal de escrita científica. Disponível em <http://www.escritacientifica.sc.usp.br/gerenciadores-bibliometricos/>. Acesso em 20 jul. 2017. SISTEMA INTEGRADO DE BIBLIOTECAS. Indicadores de Pesquisa. Disponível em <http://www.sibi.usp.br/apoio-pesquisador/indicadores-pesquisa/>. Acesso em 20 jun. 2017. SOUZA, I.V.P. ; ALMEIDA, C.H.M. Introdução à altmetria : métricas alternativas da comunicação científica. In: ENCONTRO NACIONAL DE PESQUISA EM CIÊNCIA DA INFORMAÇÃO, 14., 2013, Florianópolis. Anais eletrônicos... Disponível em <http://enancib.sites.ufsc.br/index.php/enancib2013/xivenancib/paper/viewfile/252/289>. Acesso em 17 jul.2017. VANTAGE POINT. Disponível em <https://www.thevantagepoint.com/>. Acesso em 20 jul. 2017. VANTI, Nadia Aurora Peres. Da bibliometria à webometria: uma exploração conceitual dos mecanismos utilizados para medir o registro da informação e a difusão do conhecimento. Ciência da Informação, Brasília, v. 31, n. 2, p. 152-162, maio/ago. 2002.

Obrigada! Contato: carlacn@usp.br frascareli@usp.br

Por gentileza, responda o questionário de avaliação do minicurso através do link abaixo: https://docs.google.com/forms/d/e/1faipqlsdtw2oxctlax2nt4dz0cvsxdv0pb 60I_7Dt6U31Xb-TPnhAQA/viewform?c=0&w=1 Obrigada pela sua participação!