Avaliacão CAPES e Classificacão Qualis em Odontologia

Transcrição

1 Avaliacão CAPES e Classificacão Qualis em Odontologia Isabela Almeida Pordeus Maio 2009 Evolução do qualis e impacto na produção quantitativa e qualitativa da Pós-Graduação na Área de Odontologia Flávio Fernando Demarco - UFPel 1

2 Avaliação CAPES e Qualis CA Odontologia: Papel indutor na qualificação dos periódicos brasileiros? 2

3 A Produção Científica Brasileira Publicação Científica Brasileira (JCR) ( , ISI) (MCT, 2006) 3

4 Os 20 países mais produtivos (2005) País Produção Científica Mundial (%) 1. EUA Japão Alemanha Inglaterra China França Canadá Italia Espanha Austrália Brasil (15. Brasil ) 1.8 (2.0) (Revista Fapesp, 2006; 16 Feb 2008) Os 20 países mais produtivos (2007) Web of Science Citações País Artigos 1. USA 2,864,275 39,027, Japão 777,992 6,612, Alemanha 738,067 7,935, Inglaterra 653,177 7,955, França 529,636 5,414, China 471,890 1,894, Canadá 393,143 4,377, Brasil 137, ,131 (Feb 15, 2008) 4

5 Os 20 países mais produtivos (2007) Web of Science Citaçoes País Artigos 1. USA 2,864,275 39,027, Inglaterra 653,177 7,955, Alemanha 738,067 7,935, Japão 777,992 6,612, França 529,636 5,414, Canadá 393,143 4,377, Finlandia 82, ,501 Brasil 137, ,131 (Feb 15, 2008) Brasil é o 13º entre os maiores produtores de conhecimento Publicada por Assessoria de Imprensa da Capes Terça, 05 de Maio de :03 O Brasil alcançou a 13ª posição na classificação mundial em produção científica em ultrapassou a Rússia (15ª) e a Holanda (14ª). De artigos em 2007, essa produção subiu para publicações em Estados Unidos, China, Alemanha, Japão e Inglaterra são os cinco primeiros colocados, seguidos da França, Canadá, Itália, Espanha, Índia, Austrália e Coréia do Sul. Com esse aumento na produção científica, o Brasil passa a contribuir com 2,12% dos artigos de todos os 183 países. O desempenho alcançado pelo Brasil é resultado da atuação das universidades e centros de pesquisa que atuam na pós-graduação universitária. Outro fator relevante no desempenho científico brasileiro é o apoio das agências federais no fomento à pesquisa e na formação de recursos humanos nos últimos anos, por meio da concessão de bolsas de estudo para cursos de pós-graduação stricto sensu e a disponibilidade do acesso livre ao conhecimento gerado mundialmente, oferecido pelo Portal de Periódicos da Coordenação de Aperfeiçoamento de Pessoal de Nível Superior (Capes). 5

6 Fatores Responsáveis Processo de avaliação Portal Periódicos Crescimento da Pós- Graduação Programa forte de IC Financiamento Público Peso? Produçã o Instrument o? AVALIAÇÃO DA QUALIDADE 6

7 O Impacto da Avaliação Capes na Produção Científica e Qualidade das Revistas Brasileiras na Área Médica Prof. Dr. Jair de Jesus Mari Coordenador da Pós Graduação da UNIFESP/EPM Pressupostos A pós-graduação é reconhecidamente o componente mais bem sucedido do sistema educacional brasileiro. Esse êxito deve-se em grande parte ao fato de as ações governamentais voltadas para o desenvolvimento desse nível de ensino terem-se calcado, no decorrer das duas últimas décadas, em um processo sistemático e bem conduzido de acompanhamento e avaliação do desempenho dos cursos de mestrado e de doutorado existentes no país. 7

8 Avaliação da Pós-Graduação n Avaliar o Processo ou o Produto? n Avaliação por Pares or Avaliação Independente? n Uniformidade ou Homogeneidade? n Regras Intransponíveis ou Diretrizes? A Produção Científica Brasileira: Área da Saúde 8

9 (Zorzetto et al., 2006) (Zorzetto et al., 2006) 9

10 A Pós-Graduação em Odontologia Evolução da Pesquisa Odontológica Brasileira 1. O numero de publicações Medline relacionando affiliation, Dentistry, Brazil no triênio (758) foi maior que a de todo o século passado (423); 2. Neste triênio, em termos de ISI Web of Science, relacionando address, article, Dent*, Brazil*, houve mais publicações no triênio 2001/03 (898) que em todo século XX (854). Na minha opinião, estes números refletem a reação da Odontologia Brasileira aos parâmetros de qualidade estabelecidos, pois houve empenho para atingir as metas. Por outro lado, o reflexo disto não é só no sentido que hoje podemos sonhar com o que queremos ser no futuro. Sonhar com justiça nas competições universitárias, nos estimula a lutar mais, a crescer, enfim viver! Cury JA. The evolution of dental research in Brazil. Pesqui Odontol Bras 18(2),

11 OBJETIVOS DO QUALIS n Realizar tratamento mais sistemático e qualitativo da produção científica dos Programas de Pós-graduação, visando aperfeiçoar os indicadores que subsidiam a avaliação desses Programas BASE DE INFORMAÇÃO QUALIS: os títulos classificados no Qualis correspondem a todos e exclusivamente a periódicos que contém a produção relatada nos respectivos períodos de avaliação dos Programas Infocapes,10(2),2002 Evolução dos Programas: Odontologia Evolução do Programas de Pós-Graduação em Odontologia: período

12 Produção Intelectual: Odontologia 2 1,5 1 0,5 Nacional Internacional Produção intelectual anual por docente durante o período (Braga, 2002; Cury & Pordeus, 2007) Produção Intelectual: Odontologia / Internacional Nacional Produção intelectual docente total durante o triênio 98/00 e anos 2001 a 2006 (Cury & Pordeus, 2007) 12

13 Rank do Brasil nas áreas do Deluxe NSI período no Mundo: somente da 10ª posição em diante. Nº Área Posição no Mundo Nº Artigos 1 Veterinary Zoology Dentistry, Oral Surgery & Medicine Biology Psychiatry Parasitology Entomology Agriculture, Multidisciplinary Agriculture, Dairy & Animal Science Medicine, Research & Experimental Tropical Medicine Toxicology Agriculture, Soil Science Mycology Biodiversity Conservation Materials Science, Characterization & Testing Integrative & Complementary Medicine Agricultural Engineering Education, Scientific Disciplines Microscopy Psychology, Psychoanalysis Literature, African, Australian, Canadian 9 7 Fonte: ISI - Institute for Scientific Information. National Science Indicators, USA. Base Deluxe - SCI (2007). Produção Intelectual: internacional Odontologia 1,8 1,6 1,4 1,2 1 0,8 98/ ,6 0,4 0,2 0 Pat Clin Orto/Ped S.Col Dent Cir Produção internacional por docente total durante o triênio 98/00 e anos 2001 a 2006 (Cury & Pordeus, 2007) 13

14 Produção Intelectual: nacional Odontologia 2,5 2 1,5 1 98/ ,5 0 Pat Clin Orto/Ped S.Col Dent Cir Produção nacional por docente total durante o triênio 98/00 e anos 2001 a 2006 (Cury & Pordeus, 2007) Produção Científica Odontologia IA IB IC NA NB NC

15 Produção Odontologia IC-NC; IA-IB; Artigos por docente - evolução ISI-Medline 2,21 1,17 0,

16 Teses & Dissertações - Odontologia Teses Dissertacoes CONCLUSÕES n O VENENO NÃO MATOU O DOENTE n HOJE ELE CONHECE OS MECANISMOS PARA CONTROLAR A DOENÇA USANDO DOSES HOMEOPÁTICAS n ELE TEM CONHECIMENTO PARA TER ALTA QUALIDADE DE VIDA n VENENOS MAIS POTENTES PODEM SER NECESSÁRIOS NO FUTURO DEVIDO AO CONHECIDO FENOMENO DE RESISTÊNCIA OU DESEQUILÍBRIO ECOLÓGICO Cury JA 16

17 Conclusões É bem verdade que ao longo desses mais de 30 anos de pós-graduação, um grande número de soluções criativas foram encontradas de maneira que vemos, por todo o país, programas de pós-graduação de bom nível. O sistema de avaliação e seu progressivo aprimoramento tem contribuído sobremaneira para o incremento da produção científica de qualidade no país. Jair Mari Conclusões Com a valorização da produção científica no país, houve uma maior disponibilidade de artigos científicos de bom nível, refletindo na melhora da qualidade das revistas científicas brasileiras. O número de revistas na base Medline práticamente cresceu em 2001 havia 17 títulos brasileiros e em 2008 são 38 títulos na base Medline. Na base JCR em 2001 havia 17 e hoje são

18 Conclusões A avaliação Capes ao hierarquizar a produção científica através dos bancos de literatura, tem contribúido para que os editores de revistas científicas busquem um melhor nível de indexação de revistas, provendo maior visibilidade da ciência produzida na área da saúde no país. Jair Mari Odontologia nas Bases de Dados LILACS SCIELO MEDLINE SCOPUS WEB OF SCIENCES 18

19 FICHA DE AVALIAÇÃO Triênio PROPOSTA EM DISCUSSÃO O que avaliar? Capacidade de qualificar docentes e formar pesquisadores Produção científica (qualidade e impacto) Inserção social 19

20 Processo de Avaliação: 2 fases FASE 1: Avaliação dos quesitos Conceitos 1-5 Proposta do Programa Corpo Docente (20%) Corpo Discente, Teses e Dissertações (30%) Produção Intelectual (40%) Inserção Social (10%) FASE 2: Perfil de excelência Conceitos 6-7 IV Produção Intelectual (40%) 1 Publicações qualificadas do Programa por Docente Permanente (50%) 2 Distribuição de publicações qualificadas em relação ao corpo docente permanente (40%) 3 Outras produções consideradas relevantes: produção técnica, patentes, produtos, etc (10%) Atributos: Muito Bom/Bom/Regular/Fraco/Deficiente 20

21 Expectativa QUALIS Que os estratos (6 nas avaliações anteriores) diferenciassem as publicações de forma QUALITATIVA 21

22 Triênio Proposta estratificação QUALIS 1.IA 2.IB 3.IC 4.NA 5.NB 6.NC 1. A1 2. A2 3. B1 4. B2 5. B3 6. B4 7. B5 8. C 22

23 23

24 24

25 Expectativa QUALIS n Aspectos observados (CTC-ES/CAPES, em 04/03/2009): 1. O percentual de periódicos classificados no estrato A1 é menor do que ao dos classificados em A2; 2. A soma dos percentuais dos periódicos classificados no estrato A1 e A2 não ultrapassa 26%; 3. Pelo menos cinco estratos sejam representativos 4. O número de artigos em periódicos classificados como C fique próximo a zero, pois esses serão excluídos no cálculo dos percentuais mencionados acima 25

26 ODONTOLOGIA: Proposta QUALIS A1 A2 B1 B2 B3 B4 B5 C Periódicos com valores j* e h* 1,43 (j 3,08 e h 52) Periódicos com valores j* e h* entre 1,15 e 1,42 (j entre 2,02-3,07 e h entre 34-51) Periódicos com valores j* e h* entre 1,01 e 1,14 (j entre 1,54-2,01 e h entre 26-33) Periódicos com valores j* 1,0 (j 1,53) e h* entre 0,77 e 1,0 (h entre 15-25) Periódicos com valores h* 0,76 (h 14) ou periódicos catalogados em pelo menos uma das seguintes bases: Medline, PubMed, International Pharmaceutical Abstracts (IPA), SciELO Periódicos indexados em pelo menos uma das bases: LILACS, EMBASE, EXCERPTA MÉDICA, PSYCLIT Periódicos indexados na base BBO ou que sejam editados por sociedades científicas nacionais representativas da Área Periódicos considerados impróprios ou que não atendam aos critérios explicitados anteriormente ODONTOLOGIA: Proposta QUALIS Ocorrendo discrepância entre os indicadores (j e h), tomou-se como critério de decisão os seguintes pontos de corte: 1. Em caso de um nível de discrepância, adotou-se o estrato superior, 2. Quando da discrepância com dois níveis, adotou-se o estrato intermediário, 3. Quando da discrepância com três níveis, adotou-se o estrato imediatamente inferior ao indicador mais alto. 26

27 ODONTOLOGIA: Proposta QUALIS PERIÓDICOS: ano base 2007 (n = 799) ODONTOLOGIA: Proposta QUALIS ARTIGOS: ano base 2007 (n=3439) 27

28 Critérios para variação da classificação durante o período de Avaliação(Triênio) Os periódicos somente serão reclassificados para uma classificação superior, nunca para inferior, evitando-se dessa forma mudanças bruscas na classificação e prejuízos aos Programas, o que não é desejável. Gerard Piel 28

29 Recebemos seu último artigo... Por que nos mandou? O que fizemos para você? Seu trabalho foi recusado para publicação?... Não se desespere!!! BMJ 1979: de 1551 artigos submetidos sucessivamente, 1223 (79%) foram recusados!!!... 68% destes (836 de 1223) foram publicados... em outras revistas Portanto... mesmo sendo recusado... a estatística nos favorece!!! 29

30 O tolo coleta os fatos; o homem sábio os seleciona... (W. Powell, 1888) UNIVERSIDADE FEDERAL DE PELOTAS FACULDADE DE ODONTOLOGIA n Flavio F. Demarco Graduado em Odontologia UFPel Doutor em Dentística USP 1998 Pós-Doutor área Engenharia de Tecidos - UMICH 2008 Professor Associado UFPel Pesquisador 1C CNPq Coordenador do Programa de Pós-Graduação em Odontologia UFPel Membro da Comissão de Avaliação Área de Odontologia - CAPES flavio.demarco@pq.cnpq.br Engenharia tecidual aplicada a Odontologia (Disciplina de PG 8 a 12 de dezembro 30

31 The Growing Competition in Brazilian Science n The discrepancy between the scarcity of funds and the need for publication is leading to the publish or perish condition experienced in the USA during the seventies, with the difference that in the USA this occurred at a time when science was well established, while in Brazil it is taking place at an early stage of its scientific development. n Thus, if this pattern is not reversed in the near future, Brazilian science may go from growth to decay without ever realizing its full potential. n De Meis et al. (2003). The growing competition in Brazilian science: rites of passage, stress and burnout. Braz J Med Biol Res, 36;(9):

32 Teses Dissertacoes - Odontologia Teses Dissertacoes