Sistema de Avaliação da Capes na área de Administração. Prof. Dr. Emerson Antonio Maccari

Transcrição

1 Sistema de Avaliação da Capes na área de Administração Prof. Dr. Emerson Antonio Maccari

2 ANÁLISE DOS RESULTADOS Sistema de Avaliação da CAPES CRITÉRIOS Proposta do programa DESDOBRAMENTO DE CADA QUESITO Áreas de concentração, linhas de pesquisa e projetos em andamento (pesquisa, desenvolvimento e extensão). Coerência, consistência e abrangência da estrutura curricular. Infra-estrutura para ensino, pesquisa e extensão. Atividades inovadoras e diferenciadas de formação de docentes. AVALIAÇÃO M. BOM BOM REGULAR FRACO DEFICIENTE AVALIAÇÃO QUALITATIVA 15% Formação dos docentes permanentes. > 80% 70-79% 60-69% 50-59% < 50% Corpo Docente 25% Adequação da dimensão, composição e dedicação dos docentes permanentes. > 70% 61-70% % < 40% 20% Perfil do corpo permanente em relação à proposta do programa. > 80% 70-79% 60-69% 50-59% < 50% 10% Atividade docente permanente na pós-graduação. > 90% 80-89% 70-79% 60-69% < 60% 10% Atividade docente permanente na graduação. > 90% 80-89% 70-79% 60-69% < 60% 20% 20% Participação dos docentes em pesquisa e desenvolvimento de projetos. > 90% 80-89% 70-79% 60-69% < 60% Corpo Discente 20% Percentual de defesas mestrado/doutorado em relação ao total do corpo dicente. > 40% 25% 36-39% 22-24% 30-35% 18-21% 15% Adequação e compatibilidade da relação orientador/discente. < 8 < 8 10% Participação de discentes autores da pós-graduação e graduação. 20% Dissertações/teses vinculadas a publicações. > 25% > 40% > 50% > 80% 20-24,9% 30-39,9% 40-50% 60-80% 15-19,9% 20-29,9% 30-40% 40-60% 20% Qualidade das teses e dissertações. AVALIAÇÃO QUALITATIVA 35% 15% Tempo médio de titulação de mestres e doutores. < < ,9% 10-19,9% 50% Publicações qualificadas do programa por docente permanente. > < 12 Produção Distribuição de publicações qualificadas em relação ao corpo docente Intelectual 20% > 80% 70-80% 50-70% 20-50% < 20% permanente. 15% Produção técnica ou tecnológica. AVALIAÇÃO QUALITATIVA 35% 15% Produção de alto impacto. > < 25 Impacto Social 60% Inserção e impacto regional e/ou nacional do programa. 30% Integração e cooperação com outros programas. 10% 10% Visibilidade ou transparência do programa. AVALIAÇÃO QUALITATIVA FONTE: MACCARI, % 30-40% < 30% < 18% < 10% < 20% < 30% > 33 > 56

3 Organização da Estrutura de Pesquisa - Modelo CAPES Área de concentração Linhas de Pesquisa Estrutura Curricular Projetos de Pesquisa Produção Intelectual Dissertações e Teses FONTE: MACCARI, 2008

4 Sistema de Avaliação da Pós-Graduação Corpo discente Estrutura do Programa Área de Concentração Estrutura Curricular Linhas de Pesquisa Projetos (eixo) Acesso a Recursos Corpo Docente Stakeholders Resultados Produção Científica e Tecnológica Egresso Inserção Social Visão FONTE: MACCARI, 2008

5 Estruturação do PPGA/USP Triênios , , E

6 Área de Concentração e Linhas de Pesquisa - LP Administração As linhas de pesquisa pertencem ao Programa e é por meio delas que os docentes se conectam para desenvolver suas atividades.

7 Linhas de Pesquisa e Projetos de Pesquisa Diminuição da linhas de pesquisa de 12 para 8 48 docentes (mínimo de 4 por linha) Linhas de pesquisa do professor e não do programa Projeto eixo de pesquisa máximo 2 por docente participação em 1 como colaborador

8 Projeto Eixo de Pesquisa DOCENTE

9 Docentes Premiação para os mais produtivos (produção Intelectual) Curso de Lattes Auxílio na elaboração de projetos de pesquisa Requisitos para participar do corpo docente permanente (Produção, Disciplina, Orientação e projeto financiado); Desempenho docente (Produção Intelectual, Orientação, projeto financiado, produção em parceria (ou não) com o discente e egresso, grupo de pesquisa)

10 Gestão do processo de entrada no Programa A entrada é regulada pela saída (controle de estoque) Entrada por linha de pesquisa (capacidade de orientação do ocente) Aumento da entrada de doutores M e 37 D = M e 65 D = 110

11 Discentes Publicação em periódico vale créditos. Cada artigo em periódico Qualisficado = 4 créditos Artigos em congresso = 2 créditos Pode acumular 8 créditos (2 disciplinas) Sistema de acompanhamento discente: 1) Adequado; 2) Alerta; 3) Risco. Curso de Lattes

12 O processo de Gestão da Informação Sistema Fênix - Pós Graduação da USP Seção Pós-Graduação da FEA Secretaria do PPGA Preenchime nto e Conferência dos Dados Discentes, Participantes Externos e Teses/Dissert a-ções Coordenação do Programa Equipe Coleta Disciplinas Turmas Produção docente, Produção Discente/ Egressos Área de Concentração Linhas de Pesquisa Projetos de Pesquisa Auxílio no preenchimento do Currículo Lattes -CNPq Colegiado do PPGA Docentes Discentes e Egressos

13 Resultados TIPOS DE PRODUÇÃO CORRIGIDO EVOLUÇÃO BIBLIOGRÁFICA Artigos em Periódico % Livros/Capítulos % Trabalhos em Anais % Artigo em Jornais e Revistas % Outro tipo de produção bibliográfica % TÉCNICA Serviços Técnicos % Curso curta duração % Desenvolvimento de Aplicativo % Desenvolvimento de Material Didático % Desenvolvimento de técnica % Editorial % Organização de Eventos % Programa de Rádio/TV % Relatório de Pesquisa % Outro tipo de produção técnica % Apresentação de Trabalhos % TOTAL % MACCARI, E. et al. Sistema de avaliação da pós-graduação da capes: pesquisa-ação em um programa de pós-graduação em administração. RBPG. Revista Brasileira de Pós-Graduação, 2008.

14 Novo Qualis

15 Critérios para indexação Scielo: Scopus: ISI: DOAJ:

16 Estrato Pontuação A1 100 A2 80 B1 60 B2 50 B3 30 B4 20 B5 10 C 0

17 COMPOSIÇÃO DOS ESTRATOS A1 = 12% A2 = 13% B1 = 25% B2 + B3 + B4 + B5 = 50% Travas A1 < A2 A1 + A2 < B1 % A1 + A2 + B1 < (B2 + B3 + B4 + B5)

18 Estrutura dos Mestrados e Doutorado em Administração - UNINOVE Lattes Site Revistas

19 Novo Qualis

20 Definição dos estratos B5 Atendimento dos mínimos estabelecidos para avaliação e padrão de qualidade regular (compatível com o que atualmente se caracteriza como Local C) B4 Atendimento dos mínimos estabelecidos para avaliação, padrão de qualidade bom (compatível com o que atualmente se caracteriza como Local B, Local A ou Nacional C), publicação de no máximo 45% dos artigos com autores vinculados a uma mesma instituição, por volume B3 Atendimento dos mínimos estabelecidos para avaliação, padrão de qualidade muito bom (compatível com o que atualmente se caracteriza como Nacional B), publicado por tempo de vida superior a 4 anos, publicação de no máximo 40% dos artigos com autores vinculados a uma mesma instituição, por volume B2 Atendimento dos mínimos estabelecidos para avaliação, padrão de qualidade excelente (compatível com o que atualmente se caracteriza como Nacional A), publicado por tempo de vida superior a 4 anos, publicação de no máximo 35% dos artigos com autores vinculados a uma mesma instituição

21 Definição dos estratos (cont.) B1 Atendimento dos mínimos estabelecidos para avaliação, padrão de qualidade excelente (compatível com o que atualmente se caracteriza como Nacional A ou Internacional C), publicado por tempo de vida superior a 8 anos, publicação de no máximo 30% dos artigos com autores vinculados a uma mesma instituição, indexado no Scielo, se periódico editado no Brasil, ou indexador equivalente, se periódico editado fora do Brasil A2 Atendimento dos mínimos estabelecidos para avaliação, padrão de qualidade excelente (compatível com o que atualmente se caracteriza como Nacional A, Internacional B ou A), indexado no ISI ou na base Scopus A1 Atendimento dos mínimos estabelecidos para avaliação, padrão de qualidade excelente (compatível com o que atualmente se caracteriza como Nacional A, Internacional B ou A), indexado no ISI com fator de impacto publicado no JCR igual ou superior a 0,5, ou indexado na base Scopus/SCImago com índice H igual ou superior a 5

22 Critérios para indexação Scielo: Scopus: ISI: DOAJ:

23 Estrato Pontuação A1 100 A2 80 B1 60 B2 50 B3 30 B4 20 B5 10 C 0

24 COMPOSIÇÃO DOS ESTRATOS A1 = 12% A2 = 13% B1 = 25% B2 + B3 + B4 + B5 = 50% Travas A1 < A2 A1 + A2 < B1 % A1 + A2 + B1 < (B2 + B3 + B4 + B5)

25 Povoamento dos Estratos pelas Áreas na CAPES Prof. Dr. Emerson Maccari

26 Áreas Sem Programas com Conceito 7 Nome da Área Número de Programas Arquitetura e Urbanismo 41 Interdisciplinar 236 Ensino 73 Biotecnologia 40 Ciências Sociais Aplicadas I 57 Nutrição 20 Direito 75 Materiais 27 (CAPES, 2013a) Das 48 áreas da CAPES, 8 não possuem programas povoando o estrato conceito 7.

27 Distribuição dos Programas (CAPES, 2013b)

28 Distribuição dos Programas ,3% ,5% ,5% ,9% ,6% (CAPES, 2013b) 3

29 Distribuição dos Programas (CAPES, 2013b) 4 3

30 Distribuição dos Programas ,2% % ,9% ,5% ,6% (CAPES, 2013b)

31 Evolução da produção em Artigos A1 e A2 triênios 2010 e 2013 Indicadores Evolução Artigos A % Artigos A % Fonte: (CAPES, 2010; 2013a) Dentre as 48 áreas avaliadas pela CAPES a área de Administração, Ciências Contábeis e Turismo foi a 12º na produção em A1 e 13º na produção em A2 na trienal 2013 que mais cresceu.

32 Evolução de programas de doutorado e titulação de doutores A área de Administração foi, percentualmente, a 8ª área que mais aumentou o número de programas de doutorado e a 5ª que mais ampliou a titulação de doutores ao se comparar o triênio 2010 com o Indicadores Evolução Programas % Doutorado Doutores Titulados % Fonte: (CAPES, 2010; 2013a)

33 Povoamento dos Conceitos 6 e 7 nos triênios 2010 e 2013 Administração, C. Contábeis e Turismo 2010 (96) % Média áreas % 2013 (119) % Média Áreas % Conceito 7 2 2,1 6,2% 2 1,7 5,8% Conceito 6 3 3,1 8,7% 3 2,5 8,6% Fonte: (CAPES, 2010; 2013a) Dos 119 programas que compõem a área de Administração, Ciências Contábeis e Turismo, na trienal de 2013, 1,7 % (2 Programas) povoam o estrato do conceito 7 e 2,5% (3 Programas) povoam o estrato conceito 6. Na avaliação de 2010, eram 2,1% (2 Programas) Conceito 7 e 3,1% (3 Programas) Conceito 6.

34 Produção artigos A1 e A2 per capta por programa e povoamento do estrato 6 e 7 trienal 2013 Áreas Total Conceito 7 %7 Conceito 6 %6 A1 A2 Pa1 Pa2 Arquitetura e Urbanismo ,0% 1 2,4% Economia ,5% 5 9,1% Filosofia/Teologia: ,4% 7 11,9% Planejamento Urbano-Regional e Demografia ,9% 3 8,8% Direito ,0% 8 10,7% Ciência da Computação ,4% 3 4,4% Serviço Social ,3% 4 13,3% Ciências Sociais Aplicadas I ,0% 5 8,8% Administração, Ciências Contábeis e Turismo ,7% 3 2,5% Fonte: (CAPES, 2013a) A área de Administração, Ciências Contábeis e Turismo, possui a melhor média per capta de produção de artigos A1 e A2, porém, é praticamente a pior na ocupação dos Estratos 6 e 7.

35 Povoamento da Área no Estrato Conceito 7 Posição Conceito Área Programas 7 % 36º Administração, Ciências Contábeis e Turismo ,7% 37º Zootecnia e Recursos Pesqueiros ,7% 38º Ciências Ambientais ,6% 39º Odontologia ,0% 40º Biodiversidade ,8% Fonte: (CAPES, 2013a) Na trienal finalizada em 2013, das 40 áreas que possuem programas com conceito 7, a área de Administração, Ciências Contábeis e Turismo apresentou o 36º pior povoamento do estrato 7. Somente quatro áreas tiveram, percentualmente, um desempenho inferior. Destaca-se que destas quatro áreas, duas áreas (Ciências Ambientais e Biodiversidade) são novas, foram criadas neste triênio.

36 Povoamento da Área de Administração Conceito 6 Das 48 áreas que possuem Programas com conceito 6 somente a área de Arquitetura e Urbanismo apresentou um desempenho inferior. Posição Área Programas Conceito 6 % 47º Administração, Ciências Contábeis e Turismo ,5% 48º Arquitetura e Urbanismo ,4% Fonte: (CAPES, 2013a)

37 Evolução de programas com doutorado e titulação de doutores A área de Administração, Ciências Contábeis e Turismo foi, percentualmente, a 8ª área que mais aumentou o número de programas de doutorado e a 5ª que mais ampliou a titulação de doutores ao se comparar o triênio 2010 com o Indicadores Evolução Programas Doutorado Doutores Titulados % % Fonte: (CAPES, 2010; 2013a)

38 Evolução de programas com doutorado e titulação de doutores Estratos (notas) Administração, Ciências Contábeis e Turismo Todas as Áreas Proposta para a Área Programas % Programas % Programas % 7 2 1, ,2 5 4, , ,1 10 8, , , , , , , , ,1 Total Fonte: (CAPES, 2013b)

39 Sugestão para a Área ,7% 4,2% ,5% 8% ,3% 17,9% ,3% 36,5% (CAPES, 2013b) Resultado da Avaliação trienal ,1% 31,6%

40 Sugestão para a Área Realizar uma avaliação comparada com as outras áreas da CAPES de modo a calibrar a régua das exigências do sistema de avaliação para a área; Dar mais importância aos itens de output do sistema, como por exemplo: a) formação de discentes; b) Produção Intelectual (científica e técnica-tecnológica) de seus docentes, discentes e egressos; c) Inserção Social do Programa; Ajustar a ocupação dos estratos dos programas que solicitaram recursos utilizando-se como balizador o percentual de ocupação dos estratos de todas as áreas; Elaborar um planejamento de estimulo à evolução dos programas por meio de reuniões direcionadas aos blocos de programas de cada um dos estratos; Considerar não somente a média em percentual dos indicadores de um programa, mas sim sua efetiva contribuição no que diz respeito a formação de alunos (mestres e doutores), produção intelectual docente e discente (qualidade e volume) e inserção social; Atribuir pontuação para a formação de cada mestres e cada doutor. Isto estimulará os programas a ofertarem mais vagas e ampliarem o seu corpo de docentes permanentes; Fazer uma divulgação comparada de todos os programas nos estratos específicos com destaque aos itens de output. Assim, os programas podem visualizar sua posição em relação aos outros programas. Isto diminuirá as dúvidas no processo de avaliação.

41 REFERÊNCIAS: CAPES. Resultados Finais Trienal Disponível em Acesso em 10 de Dez, CAPES. Resultados Avaliação Trienal 2013 Planilha de Notas Disponível em Acesso em 10 de Dez. 2013a. CAPES. Resultados Avaliação Trienal 2013 Apresentação dos Resultados Disponível em Acesso em 10 de Dez. 2013b. MACCARI, E. et al. Sistema de avaliação da pós-graduação da capes: pesquisa-ação em um programa de pós-graduação em administração. RBPG. Revista Brasileira de Pós-Graduação, MACCARI, E. A.. Contribuições à gestão dos programas de pós-graduação stricto sensu em administração no Brasil com base nos sistemas de avaliação norte americano e brasileiro. São Paulo: USP, 2008 (Tese). MACCARI, E. A. ; ALMEIDA, Martinho Isnard Ribeiro de ; NISHIMURA, A. T. ; RODRIGUES, L. C.. A Gestão dos Programas de Pós-Graduação em Administração com Base no Sistema de Avaliação da CAPES. REGE. Revista de Gestão USP, v. 16, p. 1-16, 2009