REVISTAS CIENTÍFICAS DA UFRGS: CONSIDERAÇÕES ACERCA DA AVALIAÇÃO DO QUALIS CAPES

Transcrição

1 PÔSTER REVISTAS CIENTÍFICAS DA UFRGS: CONSIDERAÇÕES ACERCA DA AVALIAÇÃO DO QUALIS CAPES Ana Gabriela Clipes Ferreira, Sonia Elisa Caregnato Resumo: O trabalho analisa a classificação Qualis CAPES revistas pertencentes ao Portal de Periódicos Científicos da Universidade Federal do Rio Grande do Sul. Classifica as subáreas dos periódicos de acordo com a tabela do CNPq. Analisa os Documentos de Área da CAPES, apontando as tendências das grandes áreas através da observação dos documentos de cada subárea. Observa o estrato em que há mais ocorrências de periódicos classificados, bem como as áreas das revistas que recebem os maiores estratos. Finaliza com considerações sobre as diferenças entre as áreas do conhecimento e o quanto essas podem influenciar no recebimento do estrato. Palavras-chave: Periódico Científico. Avaliação de Periódicos. Qualis/CAPES. 1 INTRODUÇÃO O processo de avaliação das revistas científicas é um importante fator que credita reconhecimento e visibilidade às publicações. Uma revista bem classificada pelas agências responsáveis pela avaliação recebe reconhecimento pela comunidade científica, atraindo maior número de leitores e autores. Do mesmo modo, uma revista bem vista pela comunidade cientifica a que pertence tende a ser melhor avaliada. Os primeiros registros na literatura latino-americana sobre estudos de avaliação de periódicos surgiram em 1964, a partir dos resultados de estudos da Organização das Nações Unidas para a Educação, Ciência e Cultura (UNESCO) que visavam analisar características das revistas latinas, como que incluía itens como apresentação física, duração, regularidade, periodicidade, indexação, entre outras (KRZYZANOWSKI; FERREIRA, 1998; BARBALHO, 2005). Os atores envolvidos no processo de avaliação de periódicos são as agências de fomento, sistema nacional de programas de Pós-Graduação, órgãos indexadores nacionais e internacionais e os portais de periódicos (BARBALHO, 2005). Entre esses, o sistema Qualis Periódicos da Coordenação de Aperfeiçoamento de Pessoal de Nível Superior (CAPES) é, atualmente, o que mais incita discussões devido à sua importância nacional. GT7 2398

2 O Qualis Periódicos é o método utilizado pela CAPES para estratificar a qualidade da produção intelectual dos programas de Pós-Graduação. Essa estratificação é realizada de forma indireta, através da análise da qualidade dos veículos, ou seja, dos periódicos científicos. A atribuição dos estratos (A1, A2, B1, B2, B3, B4, B5 e C) é feita conforme os critérios de cada área do conhecimento, especificados na documentação relativa aos últimos três triênios (2001 a 2003; 2004 a 2006; e 2007 a 2009), que está disponível no site da instituição 1. O mesmo periódico pode ser classificado em mais de uma área do conhecimento e receber diferentes avaliações, possibilitando assim expressar o valor da pertinência do conteúdo veiculado (CAPES, 2010). Mattos e Fraga (2010) avaliaram as revistas de Administração, Ciências Contábeis e Turismo classificados no Qualis entre 2007 e A pesquisa das autoras permitiu verificar aumento em 212% de novos títulos classificados, títulos em comum em dois anos e a mobilidade no estrato de qualificação, com 75% de aumento dos estratos. Desses títulos, 54% estão no Portal de Periódicos da CAPES. Tanto as críticas como as sugestões evidenciam, segundo as autoras, a preocupação da comunidade científica em melhorar e reconhecer a qualidade dos periódicos nacionais. A UFRGS é uma grande instituição de ensino superior, com reconhecimento nacional e internacional. Assim, as revistas editadas na Universidade buscam divulgar não só a produção intelectual da instituição, mas sim oferecer à comunidade acadêmica em geral veículos para a disseminação dos resultados das pesquisas de qualidade e que contribuam com o crescimento da ciência. Assim, o objetivo deste trabalho foi analisar a classificação das revistas da Universidade Federal do Rio Grande do Sul (UFRGS) no Qualis. Especificamente optou-se por: (a) analisar os documentos de área da CAPES; (b) relacionar os critérios das áreas com os resultados dos estratos Qualis em que as revistas estão classificadas; (c) tecer considerações acerca do processo de avaliação das revistas científicas de uma maneira geral. 2 MÉTODOS Primeiramente, realizou-se a análise dos Documentos de Área do Qualis, disponíveis no site da CAPES, divididos em 48 áreas do conhecimento. Para otimizar a análise do conjunto de documentos, optou-se por agrupá-los de acordo com a tabela do Conselho Nacional de Desenvolvimento Científico e Tecnológico (CNPq) das áreas do conhecimento. Os periódicos selecionados para este trabalho são os presentes no Portal de Periódicos Científicos da UFRGS 2 e editados exclusivamente pela Universidade. Por meio do portal, foi possível acessar as informações relativas a cada um deles. Adicionalmente, o estrato Qualis de cada periódico foi buscado no WebQualis (sistema de consulta aos resultados da classificação de veículos, da CAPES), sendo considerado o da área de conhecimento da publicação. As revistas foram classificadas por grandes áreas do conhecimento e estas subdivididas nas subáreas. 1 Documentos da área: GT7 2399

3 3 RESULTADOS A partir da análise dos Documentos de Área da Capes, observou-se que nas Ciências Agrárias, o uso do Journal Citation Reports (JCR) e do fator de impacto é presente em todas as subáreas. Indicam-se bases de dados específicas para cada área, internacionais e nacionais. Nas Ciências Biológicas, o JCR também é predominantemente utilizado. Nas Ciências da Saúde predomina o uso do fator de impacto medido pelo JCR. Além disso, o índice H (Scopus) também é utilizado. A indexação em fontes específicas da área, Medline por exemplo, é um fator importante para a Medicina e Saúde Coletiva, sendo que a circulação e o impacto são os critérios gerais. Nas Ciências Exatas e da Terra, a subárea da Ciência da Computação dá ênfase e reconhecimento para artigos publicados em eventos e as fontes de informação mais relevantes são o ISI, Scopus, mediana dos três índices de impacto (JCR, índice H do Scopus e índice H do Google Acadêmico) ACM, IEEE, SpringerLink, InterScience). Nas demais subgráreas, o fator de impacto predomina e na Química é a única métrica utilizada. Nas Ciências Humanas, os documentos enfatizam a importância da exogenia dos autores dos artigos e não apontam para a utilização do fator de impacto. A grande área recomenda a inserção numérica em fontes nacionais e internacionais. Em diversas subáreas, o documento prioriza a explicação e os métodos utilizados para minimizar as discrepâncias entre as disciplinas. Parte das Ciências Sociais Aplicadas também utilizam o JCR (Administração, Ciências Contábeis e Turismo), e a Economia ainda utiliza o ranking de Barrett, Olia e Bailey, porém não sendo o principal critério. A avaliação é feita de maneira qualitativa e quantitativa e leva em conta as avaliações anteriores. As discrepâncias entre as subáreas são relatadas. Há indicação de determinadas fontes de informação e também quantidade delas e de artigos com autores com diversidade institucional, ou seja, exogenia. Há avaliação de porcentagem de autores-doutores. Presença em fontes de informação do tipo ISI, SCOPUS ou SCIELO possibilita estratificação mais alta. Fontes do tipo Latindex pontuam também, embora não de maneira tão significativa. Nas Engenharias, o JCR é utilizado largamente para atribuir a estratificação. Para as revistas não presentes no ISI, considera-se a circulação internacional. Scopus e SciELO também são indicadas como as principais fontes de informação para pontuar. Na área de Linguística, Letras e Artes é salientado que a avaliação é qualitativa, não possuindo tradição na utilização de bases de dados bibliográficas ou fator de impacto. O número de artigos por edição e a exogenia são fatores importantes, além da circulação eletrônica e impressa, com aquisições realizadas em especial por permuta. A última grande área, a Interdisciplinar, possui apenas duas subáreas. A documentação da área de materiais é baseada na Engenharias II, ou seja, utiliza como métrica o JCR. A área interdisciplinar também considera o JCR e outras fontes de informação. A presença no Portal da CAPES pontua positivamente. No Quadro 1, são organizadas as áreas do conhecimento do CNPq, a subárea na qual a revista está classificada, o título da publicação e o estrato recebido na sua subárea. GT7 2400

4 Áreas CNPq Subárea das revistas Títulos das revistas Estrato Ciências Agrárias Veterinária Acta Scientiae Veterinariae B4 Ciências Biológicas Biociências Revista Brasileira de Biociências B4 Ciências da Saúde Ciências Exatas e da Terra Ciências Humanas Ciências Sociais Aplicadas Linguística, Letras e Artes Interdisciplinar Educação Física Movimento B1 Enfermagem Revista Gaúcha de Enfermagem B1 Farmácia Caderno de Farmácia C Medicina Revista HCPA B5 Odontologia Revista da Faculdade de Odontologia Geociências Para Onde!? C Geociências Pesquisas em Geociências B2 Informática Revista de Informática Teórica e Aplicada Antropologia Debates do NER B3 Antropologia Espaço Ameríndio B4 Antropologia Horizontes Antropológicos A1 Educação Cadernos do Aplicação B4 Educação Educação & Realidade A2 Filosofia e Ciências Humanas Episteme B3 Filosofia e Ciências Humanas Revista Debates B2 História Anos 90 B1 Psicologia Psicologia: reflexão e crítica A1 Sociologia Sociologias A1 Administração REAd: Revista Eletrônica da Administração Arquitetura Arqtexto B2 Biblioteconomia e Comunicação Em Questão B2 Biblioteconomia e Comunicação Intexto B2 Ciências Econômicas Análise Econômica B3 Ciências Econômicas ConTexto - Revista do Núcleo de Estudos e Pesquisas em Contabilidade Letras Contingentia B5 Letras Nau Literária B3 Música Em Pauta A2 Artes visuais Porto Arte B1 Teatro Cena B5 Interdisciplinar Interdisciplinar Estudos Interdisciplinares sobre o Envelhecimento Informática na Educação: teoria & prática Interdisciplinar Produto e Produção B3 Quadro 1 Estrato Qualis das Revistas (na subárea de conhecimento do periódico) B4 B3 B2 C B3 B2 GT7 2401

5 Tendo em vista que um título pode receber diversos estratos de diferentes áreas do conhecimento, considerou-se o Qualis referente à subárea do periódico. Das revistas que não possuem avaliação na própria área do conhecimento, foi considerado o maior estrato. Essas revistas não foram avaliadas na sua subárea porque não publicaram artigos de docentes ligados aos PPGs da respectiva área. Para a revista da área de Medicina, essa situação é explicada pela preferência de publicação em revistas internacionais. A subárea utiliza tradicionalmente o fator de impacto, considerando-o primordial para o reconhecimento da qualidade do periódico pelos autores e leitores. Para evitar endogenia, não é aconselhável que autores do próprio PPG publiquem na revista. Os estratos estão assim divididos entre as revistas da UFRGS: A1 (8,82%); B2 (5,89%); B1 (11,78); B2 (20,58%); B3 (20,58); B4 (14,71%); B5 (8,82%); e C (8,82%). Há concentração maior de revistas nos estratos B2 e B3. As revistas da área de Ciências Sociais Aplicadas são a maioria, nesse caso, porém as duas interdisciplinares também estão nesse intervalo. As duas primeiras grandes áreas, Ciências Agrárias e Biológicas possuem apenas um título representando cada uma delas. Como visto na análise da documentação de área, para o recebimento de estratos maiores, possuir fator de impacto é fundamental. Nas Ciências da Saúde, os estratos variam entre as revistas, sendo o mais alto B1 o menor C. Nas revistas das Ciências Exatas e da Terra, as da mesma subárea recebem estrato diferente, porém, se analisadas as publicações, verifica-se que possuem características distintas, em especial o tempo de existência. As subáreas de conhecimento dos títulos que obtiveram avaliação A1 e A2 são Antropologia, Sociologia e Psicologia (A1); e Educação e Música (A2). Aquelas revistas que receberam estrato C são novas ou não atendem às exigências da área durante o triênio vigente. Pode haver críticas ao sistema Qualis da CAPES pelos pesquisadores das áreas em que as exigências são mais rigorosas, como a presença em fontes de abrangência internacional. Enquanto isso, os documentos de outras áreas são mais flexíveis quanto ao tipo de fontes e consideram outras características do título na avaliação, qualitativas ou não. 4 CONSIDERAÇÕES FINAIS Periódicos bem avaliados têm visibilidade devido à credibilidade que a publicação ganha diante da comunidade científica. Os autores mais renomados passam a enviar os resultados das suas pesquisas para esses veículos, na forma de artigos, que são avaliados por um comitê de pareceristas a fim de assegurar que a publicação do artigo contribuirá para o avanço da ciência. Possivelmente o artigo será citado em estudos similares, e o número de acessos contribuirá para aumentar a visibilidade, pois um artigo muito acessado pode ser considerado um documento relevante de alguma forma para a ciência. Os editores das revistas não avaliadas na sua área do conhecimento podem buscar, através de convites, editais e chamadas especiais, qualificar a revista perante a avaliação do Qualis CAPES e a fim de atender aos critérios das fontes de informação. GT7 2402

6 Os critérios de avaliação de periódicos pelo Qualis CAPES recebem muitas críticas, assim como processos avaliativos de qualquer natureza, inclusive o peer review das revistas. Porém, é válido lembrar que esses critérios visam melhorias para as publicações, exigindo que elas atinjam elevados patamares de qualidade para receber estratos mais altos. Os documentos de área são de fácil acesso para a consulta, com informações sobre o processo de avaliação e os coordenadores de área, além de elementos indispensáveis para o conhecimento dos editores e das equipes. Não são documentos permanentes ou definitivos, ou seja, são adaptados e melhorados conforme a realidade da área a cada triênio. Assim, as deficiências observadas durante um triênio podem ser corrigidas no próximo, bem como os pontos positivos podem ser observados e incorporados à avaliação. Além disso, os coordenadores de cada área são os próprios pares de sua comunidade científica, ou seja, é formado por pessoas interessadas no avanço da pesquisa na área. Abstract: This study examines the classification Qualis CAPES assigns to journals belonging to the Web Portal of Scientific Journals of Universidade Federal do Rio Grande do Sul. Firstly, journals are categorized according to the disciplines of knowledge they belong, using a classification scheme from CNPq. It analyses the Qualis CAPES documentation, pointing out the trends of major areas of knowledge. It also examines atch the strata in which more instances of journals are classified, as well as the areas of journals that receive the highest strata. It ends with considerations about the differences between areas of knowledge and how these may influence the evaluation of journals and the classification they receive. Keywords: Scientific Journals. Journal Evaluation. Qualis/CAPES REFERÊNCIAS BARBALHO, Célia Regina. Periódico Científico: parâmetros para avaliação de qualidade. In: Ferreira, Sueli S. P.; TARGINO, Maria das Graças. Preparação de revistas científicas: teoria e prática. São Paulo: Reichmann & Autores, 2005, p KRZYZANOWSKI, Rosaly Fávero; FERREIRA, Maria Cecília Gonzaga. Avaliação de Periódicos Científicos e Técnicos Brasileiros. Ciência da Informação, v. 27, n. 2, p , maio/ago Disponível em: < Acesso em: 10 jun CAPES. Qualis Periódicos Disponível em: < Disponível em: 30 abr MATTOS, Ana Maria; FRAGA, Tânia. Avaliação de Periódicos na Área de Administração, Ciências Contábeis e Turismo. In: SEMINÁRIO NACIONAL DE BIBLIOTECAS UNIVERSITÁRIAS, 16., Anais... Rio de Janeiro: UFRJ, GT7 2403