RESULTADOS E RELATÓRIOS DO ENADE O que podemos aprender com eles?

Transcrição

1 RESULTADOS E RELATÓRIOS DO ENADE 2014 O que podemos aprender com eles?

2 Sistema Nacional de Avaliação da Educação Superior - SINAES Lei nº de 2004 Objetivos: 1. Melhorar a qualidade da educação superior, orientar a expansão da oferta; 2. Identificar mérito e valor das instituições, áreas, cursos e programas nas dimensões de ensino, pesquisa, extensão, gestão e formação; 3. Promover a responsabilidade social das IES, respeitando a identidade institucional e a autonomia.

3 Assegura o processo nacional de avaliação nos termos do art. 9o, VI, VIII e IX da LDB. O Sinaes envolve a participação de toda a comunidade educativa, sob a gestão do INEP, com diretrizes e instrumentos aprovados pela CONAES e promove o processo de avaliação da qualidade das(os): IES autoavaliação e avaliação institucional (comissões in loco) para fins de credenciamento e recredenciamento. Atribui o Conceito Institucional (CI). Cursos de graduação avaliação dos cursos de graduação (comissões in loco) para fins de autorização, reconhecimento e renovação de reconhecimento. Atribui o Conceito de Curso (CC). Estudantes avaliação de desempenho dos estudantes ENADE.

4 Indicadores de Qualidade da Educação Superior (2015) Conceito ENADE Calculado para o curso da IES, localizada em um município, considerada uma área de avaliação. A nota do curso inclui o desempenho dos alunos nas provas de formação geral e componente específico. Conceito de Curso - CC Resulta da visita in loco no momento de Reconhecimento ou Renovação dos cursos. O Conceito Preliminar de Curso (CPC) O CPC consubstancia diferentes variáveis que traduzem resultados da avaliação de desempenho de estudantes, infraestrutura e instalações, recursos didático-pedagógicos e corpo docente. Índice Geral de Cursos Avaliados da Instituição (IGC) O IGC é resultado da média ponderada dos Conceitos Preliminares de Curso (CPC) da graduação no triênio de referência e dos Conceitos da Capes dos programas de pós-graduação stricto sensu da Instituição de Educação Superior.

5 O CONCEITO ENADE Conforme estabelece a Portaria Normativa nº 40 de 12 de dezembro de 2007, é um indicador de qualidade da educação superior que avalia o desempenho dos estudantes a partir dos resultados obtidos no Enade. A Nota dos Concluintes no Enade é a média ponderada das notas padronizadas da respectiva unidade de observação, sendo 25% o peso da Formação Geral e 75% o peso do Componente Específico da nota final.

6 Características do ENADE É componente curricular obrigatório dos cursos de graduação; Aplicação trienal a concluintes das áreas e cursos superiores de tecnologia conforme o ciclo do Enade; É composto de uma Prova e Questionário Socioeconômico, cujo preenchimento é obrigatório; Admite procedimentos amostrais, mas é censitário desde 2009; Ingressante é inscrito mas não faz o exame desde 2011 (uso de resultados ENEM); É vetada a identificação nominal: resultado individual acessado exclusivamente pelo estudante; Regulamentação: feita a cada ano por meio de Portarias de Diretrizes para a prova (por área avaliada), Portarias de Designação de Comissões Assessoras de Área e Portaria Ministerial com normatização do Exame (Portaria Normativa MEC nº 5, 10/3/2016).

7 Importância do Enade: constância da capacidade do Estado brasileiro avaliar a ES Aprimoramento tecnológico na aplicação dos instrumentos e metodologia de cálculo; Produção e disseminação de conhecimento sobre avaliação via aprimoramento de relatórios e estudos sobre os resultados da avaliação; Integração de Bases de Dados (de dentro e de fora do INEP): ampliação de medidas de qualidade; Avança na promoção de uma cultura avaliativa dos cursos e IES, provocando a participação e a reflexão dos diversos atores institucionais; Cumpre o papel de aferir qualidade e de subsidiar a regulação, apoiando a política de promover o aperfeiçoamento da ES. Nesse sentido, o ENADE serve de base para formação do CPC!

8 Composição do CPC e pesos das suas dimensões e componentes

9 CONCEITO PRELIMINAR DE CURSO CPC ARQUITETURA E URBANISMO Bacharelado CPC 2014 Nº de concluintes inscritos 49 Nº de participantes 45 Nota Bruta FG 66,9711 Nota Bruta CE 59,7467 Nota Bruta Geral 61,5622 Nota contínua do ENADE 4,6923 Nota Bruta Org. Did. Pedagógica 5,3022 Nota Padronizada Org. Did. Pedagógica 3,2212 Nota Bruta infraestrutura e inst. Físicas 5,2253 Nota Padronizada e inst. Físicas 3,6415 Nota Bruta Oport. de ampliação de formação 5,5435 Nota Padronizada Oport. de ampliação de formação 4,2864 Concluintes participantes no ENEM 6 Percentual de concluintes participantes com nota ENEM 13,3% Nota bruta IDD x Nota Padronizada IDD 4,6923 Nº de docentes - 43 Nº de matrículas 257 Nota Bruta Mestres 0,9070 Nota Padronizada Mestres 4,2248 Nota Bruta doutores 0,6512 Nota Padronizada Doutores 3,7035 Nota Bruta Regime de trabalho 1,0000 Nota Padronizada Regime de Trabalho 5,0000 CPC contínuo 4,3590 CPC faixa 5

10 CONCEITOS E ÓRGÃOS DE CONTROLE Controladoria Geral da União Solicitação de Auditoria: / adote providências com vistas a identificar as causas e evitar que cursos da UFRN obtenham baixo conceito nas avaliações do Enade, conforme se verificou nas edições 2008, 2009, 2010 e 2011 do referido exame. Solicitação de Auditoria: /09 Do esclarecimento prestado pela Universidade, por meio do Anexo III do Memorando Eletrônico Nº 8/2016 PROPLAN, DE 13 DE Abril de 2016, depreende-se que, em relação ao desempenho, houve foco em cursos que obtiveram baixo conceito em anos anteriores e que melhoraram, no entanto, as providências citadas não foram suficientes para evitar que outros cursos obtivessem baixo conceito nas avaliações do Enade e o desempenho geral da UFRN diminuísse, não sendo demonstradas providências efetivas e que englobem toda a instituição no sentido de impedir que uma parte fique em situação menos favorecida, mas que também não seja afetada a parcela que ainda se mantém como núcleo de excelência, prejudicando como um todo a qualidade de ensino da Universidade.

11 Instrumentos aplicados pelo ENADE (em 2014) 1 - Questionário do Estudante (68 questões): obtém informações socioeconômicas e a avaliação das IES referentes à infra estrutura e instalações físicas; organização didáticopedagógica e oportunidades de ampliação da formação acadêmica e profissional ) suas condições de formação acadêmica (preenchido na internet). 2 - Prova (40 questões) Formação Geral: 10 questões (8 questões de múltipla escolha; 2 discursivas); Componente Específico da área avaliada: 30 questões (27 questões de múltipla escolha e 3 questões discursivas). 3 - Questionário de percepção sobre a prova (9 questões): aplicado junto com a prova. 4 - Questionário das Licenciaturas (13 questões): aplicado junto com a prova. 5 - Questionário do Coordenador (74 questões): obtém informações de perfil do coordenador e sua percepção sobre a formação oferecida pelo curso (coletado nos quinze dias subsequentes à prova, via internet).

12 ENADE Arquitetura e Urbanismo 2. Engenharia Civil 3. Engenharia Elétrica 4. Engenharia de Computação 5. Engenharia Mecatrônica 6. Engenharia Mecânica 7. Engenharia Química 8. Engenharia de Alimentos 9. Engenharia de Produção 10. Engenharia Ambiental 11. Engenharia Florestal 12. Engenharia (Aquicultura, Biomédica, Petróleo, Telecomunicações, Têxtil e Materiais) Bacharelados e licenciaturas em: Ciência da Computação; Ciências Biológicas; Ciências Sociais; Filosofia; Física (L/B); Geografia; História; Letras Português; Matemática (L/B) e Química (L/B). Licenciaturas: Artes Visuais; Educação Física; Letras Português e Espanhol, Letras- Português e Inglês, Música e Pedagogia.

13 MATERIAL DE DIVULGAÇÃO DO ENADE 2014

14 PANORAMA DOS CURSOS DO CT E EAJ - ENADE CURSOS CONCEITO ENADE Arquitetura e Urbanismo Engenharia Química Engenharia Civil Engenharia Elétrica Engenharia da Computação Engenharia Mecatrônica * Engenharia Mecânica Engenharia de Produção Engenharia Ambiental Engenharia de Alimentos - SC 4 3 Engenharia Florestal Engenharia Mecatrônica, foi enquadrado como Controle e automação, obtendo conceito 5, mas não teve CPC; Engenharia de Software não faz ENADE.

15 PANORAMA DOS CURSOS DO CT E EAJ - ENADE Cursos Ano da Avaliação/Conceito ENADE Aquicultura ENGENHARIAS Biomédica Petróleo Telecomunicações Têxtil SC 1-3 Materiais PORTARIA NORMATIVA N 8, DE 14 DE MARÇO DE 2014 Todos os cursos de Engenharia que não se enquadram nas Engenharias discriminadas devem ser enquadrados na grande área Engenharia conforme determina a portaria normativa do INEP. O enquadramento dos cursos é de responsabilidade das instituições de educação Superior-IES.

16 CONSIDERAÇÕES SOBRE OS CURSOS DO CT E EAJ ENADE O curso com menor conceito ENADE (faixa contínua) dessa área foi Engenharia Elétrica - 2,100; 2. Os cursos que tiveram 100% de presença no ENADE 2014 Engenharia Ambiental (3,987) e Eng. Mecatrônica (4,126), ambos com conceito 5. Este último teve o maior conceito faixa contínua da área de Engenharia; 3. O curso com maior percentual de ausência no ENADE 2014 foi Engenharia Mecânica (34%) e obteve ENADE faixa contínua 2,780 conceito 3; 4. O grupo das Engenharias teve um percentual de ausência de 15,08% e ENADE faixa contínua de 2,401 conceito 3; 5. O curso de Arquitetura obteve conceito 5, sendo a maior nota em faixa contínua desse ciclo 4,692.

17 PANORAMA DOS CURSOS DO CT E EAJ - CPC CURSOS CONCEITO CPC Arquitetura e Urbanismo Engenharia Química Engenharia Civil Engenharia Elétrica Engenharia da Computação - 5* SC 4 Engenharia Mecatrônica - - -? Engenharia Mecânica - 3 SC 4 Engenharia de Produção Engenharia Ambiental Engenharia de Alimentos - SC SC** 4 Engenharia Florestal * Inscreveu os estudantes em Tecnologia em Automação Industrial (Tecnólogo) ** Não teve o resultado do CPC divulgado em 2011, solicitar ao INEP.

18 PANORAMA DOS CURSOS DO CT E EAJ - CPC ENGENHARIAS Cursos Ano da Avaliação/Conceito CPC Aquicultura Biomédica Petróleo Telecomunicações Têxtil Materiais - 3 SC 3 *Os cursos enquadradas na área de Engenharia receberam CPC 3, embora no INEP não apareça o CPC de Aquicultura, Biomédica e Telecomunicações.

19 REGULAÇÃO DOS CURSOS DO CT E EAJ (CC) CURSOS CONCEITO CPC Arquitetura e Urbanismo* RRA _ Sistema da Informação* RRA _ Engenharia Civil* RRA _ Engenharia Elétrica*** RRA _ Engenharia da Computação** _ 4 Engenharia Mecatrônica** 4 _ Engenharia Mecânica** _ 4 Engenharia de Produção*** _ RRA Engenharia Ambiental* RRA _ Engenharia Florestal* RRA _ * Esses cursos não receberam avaliação in loco de Reconhecimento ou Renovação tiveram Renovação de Reconhecimento automática. ** Os cursos de Engenharia Mecatrônica, Engenharia da Computação e Engenharia Mecânica receberam visita em 2015 e tiveram suas portarias de reconhecimento renovadas em dez/2015 para o primeiro e em jul/2016 para os dois últimos. ***Os cursos de Engenharia de Produção e Engenharia Elétrica não tiveram Renovação Automática, portanto poderão ter processo de avaliação aberto.

20 REGULAÇÃO DOS CURSOS DO CT E EAJ (CC) ENGENHARIAS Cursos Conceito de Curso Aquicultura** Biomédica** Petróleo* - - RRA - Telecomunicações** Têxtil*** Materiais** * O curso de Engenharia do Petróleo não recebeu avaliação in loco e teve Renovação de Reconhecimento automática. ** Os cursos de Engenharia da Aquicultura, Engenharia Biomédica, Engenharia Telecomunicações e Engenharia Materiais receberam visita e tiveram suas portarias de renovação/reconhecimento renovadas. ***O curso de Engenharia Têxtil não teve Renovação Automática, portanto poderá ter processo de avaliação aberto.

21 Questionário do Estudante (Obrigatório, respondido antes da prova) As questões de 01 a 26 tratam de informações mais gerais, como, estado civil, etnia, nacionalidade, escolarização dos pais, renda, auxílios e oportunidades acadêmicas até questões de motivação. Alguém em sua família concluiu um curso superior? Quantas horas por semana, aproximadamente, você dedicou aos estudos, excetuando as horas de aula? Qual o principal motivo para você ter escolhido este curso? Qual a principal razão para você ter escolhido a sua instituição de Educação Superior?

22 Questionário do Estudante Questão 27 a 68 Organização didático-pedagógica, infraestrutura e oportunidades de ampliação da formação acadêmica e profissional. Considera-se o grau de concordância, segundo a escala que varia de 1 (discordância total) a 6 (concordância total). As opções Não sei responder e Não se aplica destinam-se à situações de não pertinência ou quando não há condições de avaliar o item. 27. As disciplinas cursadas contribuíram para sua formação integral, como cidadão e profissional. 28. Os conteúdos abordados nas disciplinas do curso favoreceram sua atuação em estágios ou em atividades de iniciação profissional. 30. O curso propiciou experiências de aprendizagem inovadoras. 38. Os planos de ensino apresentados pelos professores contribuíram para o desenvolvimento das atividades acadêmicas e para seus estudos. 41. A coordenação do curso esteve disponível para orientação acadêmica dos estudantes. 64. A biblioteca dispôs das referências bibliográficas que os estudantes necessitaram. 65. A instituição contou com biblioteca virtual ou conferiu acesso a obras disponíveis em acervos virtuais.

23 Questionário do Estudante ENGENHARIAS * ENADE 2014 Questões 38 e 47 referentes à organização didático-pedagógico 90,6% é o percentual de concordância dos estudantes do curso; 93,3% a média de concordância nacional. 89,3% é o percentual de concordância dos estudantes do curso; 89,8% a média de concordância nacional. *Aquicultura, Materiais, Têxtil, Biomédica, Petróleo, Telecomunicações.

24 Questionário do Estudante ENGENHARIAS * ENADE 2014 Questões 38 e 47 referentes à organização didático-pedagógico 71,2% percentual de concordância dos estudantes do curso; 76,1% a média nacional. 75,3% grau de concordância dos estudantes do curso; 84,7% a média nacional. *Aquicultura, Materiais, Têxtil, Biomédica, Petróleo, Telecomunicações,

25 Questionário do Estudante Engenharia de Alimentos ENADE 2014 Questões 44 e 46 referentes a oportunidades de ampliação da formação acadêmica e profissional Questão 44. Foram oferecidas oportunidades para os estudantes participarem de Projetos de iniciação científica e de atividades que estimularam a investigação acadêmica. 75,0% foi o percentual de concordância dos estudantes do curso em relação a questão 44, enquanto que 87,4% foi a média de concordância nacional. Questão 46. A instituição ofereceu oportunidades para os estudantes atuarem como representantes em órgãos colegiados. 57,2% foi o percentual de concordância dos estudantes do curso em relação a questão 46, enquanto que 70,6% foi a média de concordância nacional. OBS: Para calcular o componente Nota referente às oportunidades de ampliação da formação acadêmica e profissional (NAj), obtém-se, excluindo-se os itens com resposta (Não sei responder/não se aplica), a média das respostas dos itens 43, 44, 45, 46, 52, 53 e 67 do Questionário do Estudante.

26 RELATÓRIO DE CURSOS RESULTADO DO QUESTIONÁRIO Distribuição das respostas às questões do Questionário do Estudante para os concluintes da IES. Os percentuais em negrito coincidem com as categorias de repostas escolhidas pelo coordenador

27 Cálculo da Notas - Questionário do Estudante Obtém-se a média das respostas dos itens 27 a 68 do Questionário para cada estudante i da unidade de observação j. Em seguida, calcula-se a média das notas do componente geradas para cada estudante i da unidade de observação j, obtendo-se, assim, a Nota referente à organização didático-pedagógica e Infra estrutura da unidade de observação j, em sua forma bruta. OBSERVAÇÕES: 1. os itens com resposta Não sei responder e Não se aplica são excluídos do cálculo das médias das respostas por estudante e, consequentemente, por unidade de observação. 2. Contribuem na composição do CPC, organização didático-pedagógica (7,5); infraestrutura (5,0) e oportunidades de ampliação da formação acadêmica e profissional (2,5).

28 Algumas questões da prova - Enade 2014 Formação Geral ENADE 2014

29 Conhecimentos Específicos Engenharia de Produção - ENADE 2014

30 Estatística das questões das Provas Engenharia Civil ENADE 2014

31 RELATÓRIO DE CURSO RESULTADOS Eng. de Alimentos ENADE 2014

32 RELATÓRIO DE CURSO RESULTADOS Eng. Elétrica ENADE 2011/ Concluintes 2011 *57 concluintes inscritos e 49 participantes. 28,6% diferente abordagem do conteúdo 23,8 % desconhecimento do conteúdo 14,3% falta de motivação 26,2% não teve dificuldade Conceito ENADE contínuo 3,0202 -FAIXA 4 Concluintes *111 concluintes inscritos e 72 participantes 36,4% diferente abordagem do conteúdo 19,5% desconhecimento do conteúdo 18,2 % falta de motivação 16,9% Não teve dificuldade Conceito ENADE contínuo 2,100 - FAIXA 3

33 RELATÓRIO DE CURSO RESULTADOS Eng. Elétrica ENADE

34 QUESTIONÁRIO PERCEPÇÃO DA PROVA ENADE 2014 (Questões de 01 a 09) Questão 7 - Você se deparou com alguma dificuldade ao responder à prova. Qual? Concluintes de ARQUITETURA 11,1% desconhecimento de conteúdo 44,4% diferente abordagem do conteúdo 28,9% falta de motivação para fazer a prova Concluintes de Eng. Civil 18,5% desconhecimento do conteúdo 36,1% diferente abordagem do conteúdo 29;6% falta de motivação para fazer a prova Concluintes de Eng. Elétrica 12,7% desconhecimento de conteúdo 31,0% diferente abordagem do conteúdo 39,4% falta de motivação para fazer a prova

35 Questão 7 - Você se deparou com alguma dificuldade ao responder à prova. Qual? Concluintes de Eng. de Alimentos 25,0% desconhecimento do conteúdo 42,9% diferente abordagem do conteúdo 21,4% falta de motivação Concluintes de Produção 19,5% desconhecimento do conteúdo 36,4% diferente abordagem do conteúdo 18,2% falta de motivação Concluintes de Ambiental 18,2% desconhecimento do conteúdo 50,0% diferente abordagem do conteúdo 9,1% falta de motivação Concluintes de Eng. Florestal 58,3% desconhecimento do conteúdo 12,5% diferente abordagem do conteúdo 25,0% falta de motivação

36 Questão 7 - Você se deparou com alguma dificuldade ao responder à prova. Qual? Concluintes de Eng. de Computação 25,0% desconhecimento do conteúdo 30,0% diferente abordagem do conteúdo 30,0% falta de motivação Concluintes de Eng. Mecatrônica 14,3% desconhecimento do conteúdo 28,6% diferente abordagem do conteúdo 28,6% falta de motivação Concluintes de Eng. Mecânica 25,8% desconhecimento do conteúdo 24,7% diferente abordagem do conteúdo 30,1% falta de motivação Concluintes de Eng. Química 32,7% desconhecimento do conteúdo 14,5% falta de motivação para fazer a prova 43,6% diferente abordagem do conteúdo

37 Questão 7 - Você se deparou com alguma dificuldade ao responder à prova. Qual? Concluintes de Engenharias* (Aquicultura, Biomédica, Petróleo, Telecomunicações, Têxtil, Materiais) 37,7% desconhecimento do conteúdo 32,2% diferente abordagem do conteúdo 17,8% falta de motivação *179 inscritos/152 participantes

38 Relatórios de Curso, de IES e Síntese de Área Como vimos, os relatórios compreendem uma série de informações estatísticas agrupadas por curso, por IES e por área de avaliação participante do Enade. O que podemos aprender com os Relatórios de Cursos?

39 O Relatório de Curso é publicado 01 ano após o Exame e apresenta os resultados da prova e alguns resultados do questionário de impressões da prova e do Questionário do Estudante. Os dados relativos aos resultados da prova e a opinião dos estudantes podem ser úteis para orientar as ações pedagógicas e administrativas da Instituição e do curso. Confrontar os conteúdos das provas com as ementas dos componentes dos cursos, identificando os conteúdos que podem ser inseridos. Agregar os dados e informações dos Relatórios de Curso e Diretrizes do ENADE às discussões de atualização do Projeto Pedagógico de Curso.

40 ANÁLISE DE RESULTADOS EXPERIÊNCIA DE TRABALHO Curso de Química Prof. Fabiano do Espírito Gomes

41 Alguns dados dos cursos do CT Atualização do PP dos Cursos do CT que fazem Enade CURSOS ANO DO PP ANO ESTRUTURA CURRICULAR E. DE ALIMENTOS E. DE PRODUÇÃO E. AMBIENTAL E. FLORESTAL E. DE AQUICULTURA ENG. BIOMÉDICA E. DE PETRÓLEO

42 Alguns dados dos cursos do CT Atualização do PP dos Cursos do CT que fazem Enade CURSOS ANO DO PP ANO ESTRUTURA CURRICULAR ARQUITETURA ENGENHARIA CIVIL E. ELÉTRICA E. DE COMPUTAÇÃO E. MECATRÔNICA E. MECÂNICA E. QUÍMICA

43 Alguns dados dos cursos do CT Atualização do PP dos Cursos do CT que fazem Enade E. DE TELECOMUNICAÇÕES E. TÊXTIL E. DE MATERIAIS E. BIOMÉDICA E. DE PETRÓLEO E. AMBIENTAL E. DE ALIMENTOS E. DE PRODUÇÃO

44 Situação dos cursos do CT em relação aos projetos de ensino Tipo do Projeto Monitoria Pamqeg PET Tutoria Quantidade executados Quantidade de discentes envolvidos PROJETO PIBID Interdisciplinar (Qui./Fis/Biol.) Física Matemática Química Nº BOLSISTAS TOTAL 136