Qualis: Avaliação de Periódicos na Medicina II

Transcrição

1 Qualis: Avaliação de Periódicos na Medicina II Rodrigo T. Calado Faculdade de Medicina de Ribeirão Preto Universidade de São Paulo Coordenador da área Medicina II da CAPES

2 CIÊNCIA E DESENVOLVIMENTO Programas Acadêmicos e Profissionais PROGRAMAS ACADÊMICOS PROGRAMAS PROFISSIONAIS CIÊNCIA BÁSICA PESQUISAA TRANSLACIONAL ENSAIOS CLÍNICOS APLICAÇÃO SOCIEDADE/ INDÚSTRIA/ PACIENTES

3 Pós-graduação Cenário de avaliação Voltada para a estruturação e avaliação de grupos de pesquisa

4 Pós-graduação Cenário de avaliação Trigo FR, 2017

5 A fixação da métrica Not everything that can be counted counts, and not everything that counts can be counted W.B. Camareon, 1963

6 A fixação da métrica Baseada em 4 conceitos: Relação entre medidas e melhorias ( If you cannot measure it, you cannot improve it ); Crença de que é possível e desejável subs`tuir o julgamento subje`vo, adquirido pela experiência pessoal, por indicadores numéricos de performance compara`va; Crença de que tal métrica pública (transparência) assegura que as ins`tuições estão cumprindo o seu papel; Crença de que a melhor forma de mo`var pessoas nessas ins`tuições é por meio de prêmios e penalidades de acordo com sua performance de acordo com a métrica. J.Z. Müller, 2018

7 A fixação da métrica Resultados: Ressen`mento Manipulação de dados para melhorar indicadores Fabricação de dados para melhorar indicadores Mais indicadores para evitar manipulação! Whenever reward is Fed to measured performance, metric fixafon invites gaming J.Z. Müller, 2018

8 A fixação da métrica Lei de Campbell (1975): Quanto mais qualquer indicador social é usado para a tomada de decisões sociais, mais sujeito ele estará à corrupção e mais provavelmente capaz de distorcer e corromper os processos sociais que ele, o indicador, pretendia monitorar. D. Ravitch, 2010

9 Planejamento futuro Foco na formação do discente/egresso D. Ravitch, 2010

10 Planejamento futuro Formação: Matriz curricular Infraestrutura de ensino-aprendizagem e pesquisa Binômio aluno/orientador Produção discente D. Ravitch, 2010

11 Planejamento futuro Indicadores: use com moderação! Seleção de 5 produtos por docente? Produção discente? Corpo docente? Qualis único? Baseado nos quar`s ISI para a área de conhecimento Baseado nos percen`s Scopus para a área de conhecimento

12 Qualis Desenvolvido para a avaliação da produção de programas de PG! - Não avalia ar`gos - Não avalia periódicos

13 Qualis único Manutenção de status de qualificação de produção em periódicos para todas as áreas de avaliação Buscar critério de semelhança entre indicadores de qualidade Reconhecer a heterogeneidade no processo de indexação Cada periódico um único Qualis

14 Qualis único Pressões: Externas dificuldade de compreensão da variação de classificações entre áreas de avaliação Internas comparabilidade entre áreas reduzida; forte subje`vidade de algumas classificações

15 Qualis: 2 grupos de áreas Áreas que se u`lizam apenas ou principalmente de métricas quan`ta`vas de indexadores internacionais (IF-JCR; SJR; percen`s do JIF; etc) Áreas que u`lizam principalmente a variedade de bases indexadores ou métricas quan`ta`vas abertas (H5 Scholar) y = 44,062ln(x) - 104,25 R² = 0, y = 1,064e 0,0152x R² = 0,7908 Percentis y = 1,4207x - 4,5207 R² = 0,7967 FIp y = 0,0321x - 0,0989 R² = 0, H5 H5

16 Qualis:

17 Qualis:

18 Indicadores WeR_USP (Prof. Carlox)

19 Indicadores: WeR_USP: Medicina II

20 Indicadores: WeR_USP: Medicina II

21 Indicadores: WeR_USP: Medicina II

22 Indicadores: WeR_USP: Medicina II

23 RESUMO Foco na formação do discente/egresso Flexibilidade aos programas para demonstrarem suas qualidades Redução do número de indicadores (com parcimônia) 5 produtos/docente Qualis único

24