Métricas Alternativas

Transcrição

1 Métricas Alternativas & periódicos científicos Andréa Gonçalves do Nascimento Mestranda do Programa de Pós-Graduação em Biblioteconomia da UNIRIO I Simpósio Internacional Universitário de Editoração Científica UNIRIO 29 abril 2015

2

3 Cenário Avaliação de impacto da produção científica é tema de constante discussão na comunidade acadêmica Índices tradicionais de impacto são alvo de questionamentos e críticas sobre a sua validade e atualidade Comunidade acadêmica busca maneiras alternativas de medir, avaliar e dar significado à produção acadêmica Produção acadêmica cada vez mais vinculada aos meios eletrônicos no que tange à produção, publicação, disseminação e validação

4 Altmetrics NÃO é... O fator de impacto do Facebook Um substituto das métricas tradicionais Somente para periódicos de acesso aberto (Algo a ser desprezado...)

5

6 Indicadores Bibliometria Geração de indicadores a partir de dados bibliográficos e de citação Altmetria Geração de indicadores a partir de dados de ambientes e ferramentas na web

7 Múltiplas dimensões IMPACTO USO Downloads Visualizações REVISÃO POR PARES Opinião de especialistas CITAÇÕES ALTMETRICS Favoritos Conversas Compartilhamentos Adaptado de altmetrics.org

8 Altmetrics: a manifesto / Jason Priem, Dario Taraborelli, Paul Groth, Cameron Neylon (2010) Uma alternativa para a crise dos filtros da ciência revisão por pares, contagem de citações, fator de impacto de periódicos

9

10 Article-level Metrics (ALM) ALM é muitas vezes confundido com altmetrics ALM busca medir o impacto de um artigo usando fontes de dados tradicionais e alternativas Incorporar fontes de dados alternativas fornece uma imagem mais rica sobre como esse artigo está sendo discutido, compartilhado e usado

11 ALM vs. altmetrics Altmetrics = tipo de fontes de dados ALMs = nível de agregação de dados

12 O que se mede? Dado Descrição Fontes Shares / Mentions Post público para compartilhar notícias de um artigo ou resultado de pesquisa Twitter, Topsy, Facebook, reddit, artigos de notícias, blog posts, Google+, YouTube, Figshare, Mendeley Saves / Captures Salvo em um site de bookmark social ou marcado como favorito em um site de mídia social ou gestor de referência Mendeley, CiteULike, Delicious, Github, Twitter, and Slideshare Reviews / Social Media Adaptations Views / Usage Discutido com inclusão de um comentário adicional Criação de trabalhos derivados usando um artigo ou outro resultado de pesquisa Downloads ou visualizações na web e em sites de mídia social Faculty of 1000 (F1000), blog posts, comentários de artigos, comentários no Facebook Github Figshare, Slideshare, Dryad, Facebook, YouTube, LinkedIn Cites Citações em literatura acadêmica Pubmed, Scopus, Web of Science Adaptado de: KONKIEL, S. Altmetrics: A 21st-Century Solution to Determining Research Quality. Online searcher, v. 37, n. 4, p , 2013; e TANAMBAUM, G. Article-Level metrics: a SPARC primer

13

14 Redes sociais & comunicação científica, periódicos, altmetrics

15 As pesquisas que abordam como o conjunto de redes sociais pode ser usado para fortalecer e aprimorar a comunicação científica e, em particular, os periódicos científicos brasileiros são praticamente inexistentes PRINCIPE, E. Comunicação científica e redes sociais. In: ALBAGLI, S. (org.). Fronteiras da ciência da informação. Brasília, DF: IBICT, p

16

17 Artigos da área de Ciências da Saúde recebem uma quantidade desproporcional de atenção online. Figura 1. Porcentagem de tweets apontando para artigos de revistas em cada grande área de pesquisa (segundo as áreas definidas pelo Australian Research Council). LOACH, T. Analysing Attention. Altmetric.com Blog. 16 mai Disponível em: <

18 Social media provide excellent opportunities to disseminate our work beyond our peers, and thus almetrics provide a very nice way of measuring the impact of scientific activities among a wider audience. Fernando T Maestre, Professor, Biology and Geology Department, Universidad Rey Juan Carlos, Madrid, Spain Fonte:

19 Exemplo: artigo de autores da USP

20

21

22

23

24 Prós Complemento aos métodos tradicionais de avaliação Diversidade: métricas diversas, produtos diversos, captura múltiplas dimensões do impacto científico Velocidade: Apuração quase imediata da atenção recebida por um trabalho científico Colaboração: participação em discussões sobre o artigo em blogs e sites de mídia social Visibilidade: permite acompanhar a repercussão online dos trabalho e entender melhor sua audiência Implementação: dados abertos e múltiplas ferramentas disponíveis para desenvolvimento

25 Contras Heterogeneidade e efemeridade das fontes, indicadores e ferramentas Falta de credibilidade: medida de impacto ou de popularidade? Métodos limitados de identificação única de artigos Dificuldades técnicas e tecnológicas para implementação Direcionamento das fontes de coleta de citações Possibilidade de manipulação dos dados Necessidade de contexto/significado

26 Para pensar... O atual ciclo de pesquisa não termina com a publicação, mas com o compartilhamento Altmetrics permitem que o pesquisador/editor veja onde o trabalho está sendo visualizado, compartilhado e discutido na web É responsabilidade do autor/editor buscar visibilidade e uso para seu trabalho

27 Andréa Gonçalves do Nascimento