RESULTADOS E RELATÓRIOS DO ENADE O que podemos aprender com eles?

Transcrição

1 RESULTADOS E RELATÓRIOS DO ENADE 2014 O que podemos aprender com eles?

2 Sistema Nacional de Avaliação da Educação Superior - SINAES Lei nº de 2004 Objetivos: 1. Melhorar a qualidade da educação superior, orientar a expansão da oferta; 2. Identificar mérito e valor das instituições, áreas, cursos e programas nas dimensões de ensino, pesquisa, extensão, gestão e formação; 3. Promover a responsabilidade social das IES, respeitando a identidade institucional e a autonomia.

3 Assegura o processo nacional de avaliação nos termos do art. 9o, VI, VIII e IX da LDB. O Sinaes envolve a participação de toda a comunidade educativa, sob a gestão do INEP, com diretrizes e instrumentos aprovados pela CONAES e promove o processo de avaliação da qualidade das(os): IES autoavaliação e avaliação institucional (comissões in loco) para fins de credenciamento e recredenciamento. Atribui o Conceito Institucional (CI) Cursos de graduação avaliação dos cursos de graduação (comissões in loco) para fins de autorização, reconhecimento e renovação de reconhecimento. Atribui o Conceito de Curso (CC). Estudantes avaliação de desempenho dos estudantes ENADE

4 Indicadores de Qualidade da Educação Superior (2015) Índice Geral de Cursos Avaliados da Instituição (IGC) O IGC é resultado da média ponderada dos Conceitos Preliminares de Curso (CPC) da graduação no triênio de referência e dos Conceitos da Capes dos programas de pósgraduação stricto sensu da Instituição de Educação Superior. O Conceito Preliminar de Curso (CPC) O CPC consubstancia diferentes variáveis que traduzem resultados da avaliação de desempenho de estudantes, infraestrutura e instalações, recursos didáticopedagógicos e corpo docente. Conceito ENADE Calculado para o curso da IES, localizada em um município, considerada uma área de avaliação. A nota do curso inclui o desempenho dos alunos nas provas de formação geral e componente específico. Conceito de Curso - CC Resulta da visita in loco no momento de Reconhecimento ou Renovação dos cursos.

5 O CONCEITO ENADE Conforme estabelece a Portaria Normativa nº 40 de 12 de dezembro de 2007, é um indicador de qualidade da educação superior que avalia o desempenho dos estudantes a partir dos resultados obtidos no Enade. A Nota dos Concluintes no Enade é a média ponderada das notas padronizadas da respectiva unidade de observação, sendo 25% o peso da Formação Geral e 75% o peso do Componente Específico da nota final.

6 Características do ENADE É componente curricular obrigatório dos cursos de graduação; Aplicação trienal a concluintes das áreas e cursos superiores de tecnologia conforme o ciclo do Enade; É composto de uma Prova e Questionário Socioeconômico, cujo preenchimento é obrigatório; Admite procedimentos amostrais, mas é censitário desde 2009; Ingressante é inscrito mas não faz o exame desde 2011 (uso de resultados ENEM); É vetada a identificação nominal: resultado individual acessado exclusivamente pelo estudante; Regulamentação: feita a cada ano por meio de Portarias de Diretrizes para a prova (por área avaliada), Portarias de Designação de Comissões Assessoras de Área e Portaria Ministerial com normatização do Exame (Portaria Normativa MEC nº 5, 10/3/2016).

7 Importância do Enade: constância da capacidade do Estado brasileiro avaliar a ES Aprimoramento tecnológico na aplicação dos instrumentos e metodologia de cálculo; Produção e disseminação de conhecimento sobre avaliação via aprimoramento de relatórios e estudos sobre os resultados da avaliação; Integração de Bases de Dados (de dentro e de fora do INEP): ampliação de medidas de qualidade; Avança na promoção de uma cultura avaliativa dos cursos e IES, provocando a participação e a reflexão dos diversos atores institucionais; Cumpre o papel de aferir qualidade e de subsidiar a regulação, apoiando a política de promover o aperfeiçoamento da ES. Nesse sentido, o ENADE serve de base para formação do CPC!

8 Composição do CPC e pesos das suas dimensões e componentes

9 CONCEITO PRELIMINAR DE CURSO CPC Química Bacharelado CPC 2014 Nº de concluintes inscritos 91 Nº de participantes 72 Nota Bruta FG 54,0083 Nota Bruta CE 33,5431 Nota Bruta Geral 38,6736 Nota contínua do ENADE 1,9401 Nota Bruta Org. Did. Pedagógica 4,8310 Nota Padronizada Org. Did. Pedagógica 2,2822 Nota Bruta infraestrutura e inst. Físicas 4,8375 Nota Padronizada e inst. Físicas 2,7746 Nota Bruta Oport. de ampliação de formação 4,7560 Nota Padronizada Oport. de ampliação de formação 2,8506 Concluintes participantes no ENEM 44 Percentual de concluintes participantes com nota ENEM 61,1% Nota bruta IDD 0,4122 Nota Padronizada IDD 1,8178 Nº de docentes Nº de matrículas 173 Nota Bruta Mestres 0,9524 Nota Padronizada Mestres 4,2063 Nota Bruta doutores 0,8762 Nota Padronizada Doutores 4,3810 Nota Bruta Regime de trabalho 1,0000 Nota Padronizada Regime de Trabalho 5,0000 CPC contínuo 2,7530 CPC faixa 3

10 CONCEITOS E ÓRGÃOS DE CONTROLE Controladoria Geral da União Solicitação de Auditoria: / adote providências com vistas a identificar as causas e evitar que cursos da UFRN obtenham baixo conceito nas avaliações do Enade, conforme se verificou nas edições 2008, 2009, 2010 e 2011 do referido exame. Solicitação de Auditoria: /09 Do esclarecimento prestado pela Universidade, por meio do Anexo III do Memorando Eletrônico Nº 8/2016 PROPLAN, DE 13 DE Abril de 2016, depreende-se que, em relação ao desempenho, houve foco em cursos que obtiveram baixo conceito em anos anteriores e que melhoraram, no entanto, as providências citadas não foram suficientes para evitar que outros cursos obtivessem baixo conceito nas avaliações do Enade e o desempenho geral da UFRN diminuísse, não sendo demonstradas providências efetivas e que englobem toda a instituição no sentido de impedir que uma parte fique em situação menos favorecida, mas que também não seja afetada a parcela que ainda se mantém como núcleo de excelência, prejudicando como um todo a qualidade de ensino da Universidade.

11 Instrumentos aplicados pelo ENADE (em 2014) 1 - Questionário do Estudante (68 questões): obtém informações socioeconômicas e a avaliação das IES referentes à infra estrutura e instalações físicas; organização didáticopedagógica e oportunidades de ampliação da formação acadêmica e profissional ) suas condições de formação acadêmica (preenchido na internet). 2 - Prova (40 questões) Formação Geral: 10 questões (8 questões de múltipla escolha; 2 discursivas); Componente Específico da área avaliada: 30 questões (27 questões de múltipla escolha e 3 questões discursivas). 3 - Questionário de percepção sobre a prova (9 questões): aplicado junto com a prova. 4 - Questionário das Licenciaturas (13 questões): aplicado junto com a prova. 5 - Questionário do Coordenador (74 questões): obtém informações de perfil do coordenador e sua percepção sobre a formação oferecida pelo curso (coletado nos quinze dias subsequentes à prova, via internet).

12 ENADE Bacharelado em Arquitetura e Urbanismo 2. Sistema de Informação 3. Engenharia Civil 4. Engenharia Elétrica 5. Engenharia de Computação 6. Engenharia Mecatrônica 7. Engenharia Mecânica 8. Engenharia Química 9. Engenharia de Alimentos 10. Engenharia de Produção 11. Engenharia Ambiental 12. Engenharia Florestal 13. Engenharia Bacharelados e licenciaturas em: Ciência da Computação; Ciências Biológicas; Ciências Sociais; Filosofia; Física (L/B); Geografia; História; Letras,Português; Matemática (L/B) e Química (L/B). Licenciaturas: Artes Visuais; Educação Física; Letras; Português e Espanhol, Letras- Português e Inglês, Música e Pedagogia.

13 PANORAMA DOS CURSOS DO CCET - ENADE CURSOS CONCEITO ENADE Matemática L Matemática B Química L Química B Física L Física B Ciência da Computação

14 CURSO CONCEITO PRELIMINAR DE CURSO - CPC Matemática L Matemática B Química L Química B Física L Física B Ciência da Computação PANORAMA DOS CURSOS DO CCET - CPC Nenhum dos cursos citados recebeu avaliação in loco de Reconhecimento ou Renovação. O Curso de Química do Petróleo optou por fazer ENADE juntamente com o curso de Química Bacharelado e recebeu visita in loco para reconhecimento de curso em 2012, obtendo o conceito 5. Os cursos de Física (B/L), Ciência da Computação e Química (L) tiveram Renovação de Reconhecimento automática, em dezembro de 2015, sem necessidade de visita in loco, por ter obtido CPC 4. Os cursos de Matemática (B/L) e Química (B) não tiveram Renovação Automática, portanto poderão ter processo aberto.

15 Questionário do Estudante (Obrigatório, respondido antes da prova) As questões de 01 a 26 tratam de informações mais gerais, como, estado civil, etnia, nacionalidade, escolarização dos pais, renda, auxílios e oportunidades acadêmicas até questões de motivação. Alguém em sua família concluiu um curso superior? Quantas horas por semana, aproximadamente, você dedicou aos estudos, excetuando as horas de aula? Qual o principal motivo para você ter escolhido este curso? Qual a principal razão para você ter escolhido a sua instituição de Educação Superior?

16 Questionário do Estudante Questão 27 a 68 Organização didático-pedagógica, infraestrutura e oportunidades de ampliação da formação acadêmica e profissional. Considera-se o grau de concordância, segundo a escala que varia de 1 (discordância total) a 6 (concordância total). As opções Não sei responder e Não se aplica destinam-se à situações de não pertinência ou quando não há condições de avaliar o item. 27. As disciplinas cursadas contribuíram para sua formação integral, como cidadão e profissional. 28. Os conteúdos abordados nas disciplinas do curso favoreceram sua atuação em estágios ou em atividades de iniciação profissional. 30. O curso propiciou experiências de aprendizagem inovadoras. 38. Os planos de ensino apresentados pelos professores contribuíram para o desenvolvimento das atividades acadêmicas e para seus estudos. 41. A coordenação do curso esteve disponível para orientação acadêmica dos estudantes. 64. A biblioteca dispôs das referências bibliográficas que os estudantes necessitaram. 65. A instituição contou com biblioteca virtual ou conferiu acesso a obras disponíveis em acervos virtuais.

17 Questionário do Estudante Ciência da Computação ENADE 2014 Questões 38 e 47 referentes à organização didático-pedagógico 69,8 % é o percentual de concordância dos estudantes do curso; 83,4% a média de concordância nacional. 85,7% é o percentual de concordância dos estudantes do curso; 84,2% a média de concordância nacional.

18 Questionário do Estudante Ciência da Computação ENADE 2014 Questões 63 e 64 sobre infraestrutura 72,1% percentual de concordância dos estudantes do curso; 83% média de concordância nacional. 86,1% grau de concordância dos estudantes do curso; 87,4% média de concordância nacional.

19 Questionário do Estudante Ciência da Computação ENADE 2014 Questões 44 e 46 referentes a oportunidades de ampliação da formação acadêmica e profissional Questão 44. Foram oferecidas oportunidades para os estudantes participarem de Projetos de iniciação científica e de atividades que estimularam a investigação acadêmica. 90,7% foi o percentual de concordância dos estudantes do curso em relação a questão 44, enquanto que 81,4% foi a média de concordância nacional. Questão 46. A instituição ofereceu oportunidades para os estudantes atuarem como representantes em órgãos colegiados. 60,5% foi o percentual de concordância dos estudantes do curso em relação a questão 46, enquanto que 62,4% foi a média de concordância nacional. OBS: Para calcular o componente Nota referente às oportunidades de ampliação da formação acadêmica e profissional (NAj), obtém-se, excluindo-se os itens com resposta (Não sei responder/não se aplica), a média das respostas dos itens 43, 44, 45, 46, 52, 53 e 67 do Questionário do Estudante.

20 RELATÓRIO DE CURSOS RESULTADO DOS QUESTIONÁRIOS Distribuição das respostas às questões do Questionário do Estudante para os concluintes da IES. Os percentuais em negrito coincidem com as categorias de repostas escolhidas pelo coordenador

21 Cálculo da Notas - Questionário do Estudante Obtém-se a média das respostas dos itens 27 a 68 do Questionário para cada estudante i da unidade de observação j. Em seguida, calcula-se a média das notas do componente geradas para cada estudante i da unidade de observação j, obtendo-se, assim, a Nota referente à organização didático-pedagógica e Infra estrutura da unidade de observação j, em sua forma bruta. OBSERVAÇÕES: 1. os itens com resposta Não sei responder e Não se aplica são excluídos do cálculo das médias das respostas por estudante e, consequentemente, por unidade de observação. 2. Contribuem na composição do CPC, organização didático-pedagógica (7,5); infraestrutura (5,0) e oportunidades de ampliação da formação acadêmica e profissional (2,5).

22 Questionário das Licenciaturas ENADE 2014 (todos os cursos de licenciatura) 13 questões estudantes respondentes Gráfico 8- Percentual referente à resposta dada a seguinte pergunta: Quantas horas de estágio curricular obrigatório você integralizou?

23 Questionário das Licenciaturas ENADE 2014 (todos os cursos de licenciatura)

24 Algumas questões da prova - Enade 2014 Formação Geral ENADE 2014

25 Conhecimentos Específicos Química (B) ENADE 2014

26 Estatística das questões das Provas Ciência da Computação ENADE 2014

27 RELATÓRIO DE CURSO RESULTADOS FÍSICA ENADE 2014

28 RELATÓRIO DE CURSO RESULTADOS FÍSICA ENADE 2011 Concluintes de Física (B) 2014 *07 concluintes inscritos e participantes. 85,6% diferente abordagem do conteúdo 14,3% desconhecimento do conteúdo 0,0% falta de motivação O curso aparece com a 22ª melhor nota. Concluintes de Física (B) 2011 *11 concluintes inscritos e 10 participantes 33,3% diferente abordagem do conteúdo 16,7% espaço insuficiente para responder às questões 50,0% falta de motivação O curso aparece com a 43ª melhor nota.

29 QUESTIONÁRIO PERCEPÇÃO DA PROVA ENADE 2014 (Questões de 01 a 09) Questão 7 - Você se deparou com alguma dificuldade ao responder à prova. Qual? Concluintes de QUÍMICA (B) 26,1% desconhecimento de conteúdo 31,9% diferente abordagem do conteúdo 33,3% falta de motivação para fazer a prova Concluintes de QUÍMICA (L) 26% desconhecimento do conteúdo 39% diferente abordagem do conteúdo 23,4% falta de motivação para fazer a prova Concluintes de MATEMÁTICA (B) 16,7% desconhecimento de conteúdo 16,7% diferente abordagem do conteúdo 66,7% falta de motivação para fazer a prova

30 Questão 7 - Você se deparou com alguma dificuldade ao responder à prova. Qual? Concluintes de Matemática (L) 21,9% desconhecimento do conteúdo 40,6% diferente abordagem do conteúdo 29,7% falta de motivação Concluintes de Física (B) 14,3% desconhecimento do conteúdo 85,6% diferente abordagem do conteúdo 0,0% falta de motivação Concluintes de Física (L) 20% desconhecimento do conteúdo 28% diferente abordagem do conteúdo 44,% falta de motivação Concluintes de Ciência da Computação 39% falta de motivação para fazer a prova 31,7% desconhecimento do conteúdo 7,3% diferente abordagem do conteúdo

31 Relatórios de Curso, de IES e Síntese de Área Como vimos, os relatórios compreendem uma série de informações estatísticas agrupadas por curso, por IES e por área de avaliação participante do Enade. O que podemos aprender com os Relatórios de Cursos?

32 O Relatório de Curso é publicado 01 ano após o Exame e apresenta os resultados da prova e alguns resultados do questionário de impressões da prova e do Questionário do Estudante. Os dados relativos aos resultados da prova e a opinião dos estudantes podem ser úteis para orientar as ações pedagógicas e administrativas da Instituição e do curso. Confrontar os conteúdos das provas com as ementas dos componentes dos cursos, identificando os conteúdos que podem ser inseridos. Agregar os dados e informações dos Relatórios de Curso e Diretrizes do ENADE às discussões de atualização do Projeto Pedagógico de Curso.

33 ANÁLISE DE RESULTADOS EXPERIÊNCIA DE TRABALHO Curso de Química Prof. Fabiano do Espírito Gomes

34 Alguns dados dos cursos do CCET Atualização do PP dos Cursos do CCET que fazem Enade CURSOS ANO DO PP ANO ESTRUTURA CURRICULAR MATEMÁTICA L MATEMÁTICA B CIÊNCIAS DA COMPUTAÇÃO QUÍMICA L QUÍMICA B FÍSICA L FÍSICA B

35 Situação dos cursos do CCET em relação aos projetos de ensino Tipo do Projeto Quantidade executados Quantidade de discentes envolvidos Monitoria Pamqeg PET 55 Tutoria 1 105/35 vagas por ano PROJETO PIBID Nº BOLSISTAS Interdisciplinar (Qui./Fis/Biol.) 36 Física 40 Matemática 41 Química 19 TOTAL 136