Elaboração de Itens para o ENEM

Transcrição

1 Elaboração de Itens para o ENEM

2 1.O ENEM 2.AVALIAÇÃO 3.ELEBORAÇÃO DO ÍTEM

3 1.O ENEM

4 ENEM (Exame Nacional do ensino Médio) Criado em 1998 e realizado anualmente, tem como objetivo fundamental avaliar o desempenho do indivíduo ao término da escolaridade básica, para aferir o desenvolvimento de competências fundamentais ao exercício pleno da cidadania.

5 OBJETIVOS Referência para auto-avaliação; Acesso aos cursos profissionalizantes, pós-médios e à Educação Superior; Acesso a programas governamentais. Certificação de jovens e adultos no nível de conclusão do ensino médio; Avaliação do desempenho acadêmico dos estudantes ingressantes nas Instituições de Educação Superior;

6 USO DO ENEM PELAS IES como fase única; como primeira fase; como fase única para as vagas ociosas, após o vestibular; combinado ao vestibular da instituição. (a universidade define o percentual da nota do Enem a ser utilizado para a construção de uma média junto com a nota da prova do vestibular)

7 PROVA A Prova É composta por quatro testes, um para cada área do conhecimento com 45 questões de múltipla escolha cada: Linguagens, Códigos e Suas Tecnologias (Língua Portuguesa, Redação, Literatura; Educação Física; Artes; Língua Estrangeira Inglês ou Espanhol ; Tecnologias da Informação e Comunicação) Ciências Humanas e Suas Tecnologias (História,Geografia, Filosofia e Sociologia). Ciências da Natureza e Suas Tecnologias (Química, Física e Biologia) Matemática e Suas Tecnologias (Matemática)

8 No primeiro dia de provas serão realizadas as provas de Ciências Humanas e suas Tecnologias e de Ciências da Natureza e suas Tecnologias, com duração de 4 horas e 30 minutos. No segundo dia de provas, serão realizadas as provas de Linguagens, Códigos e suas Tecnologias, Redação e Matemática e suas Tecnologias, com duração de 5 horas e 30 minutos

9 2.AVALIAÇÃO

10 Como medir? Medidas concretas: Instrumentos de medidas: fita métrica, termômetro, etc Escalas padrões: Distância: metros, quilômetros, centímetros, etc Peso: quilogramas Medidas abstratas: Desenvolvimento de instrumentos de medida que faça manifestar em termos comportamentais um construto latente. Não há escalas padrões, mas há algumas escalas de referência.

11 Como avaliar o desempenho de um estudante? Desenvolvimento de uma prova de conhecimentos. Ao se fazer uso de um teste, o comportamento é quantificado de alguma forma a fim de que se obtenha um escore numérico. Teoria Clássica dos Testes (TCT) O escore de um indivíduo em um teste é composto essencialmente pela quantidade de acerto. Desenvolver uma escala (TRI) É um conjunto de modelos matemáticos que considera o item como unidade básica de análise e postula que o desempenho de um avaliado em um teste pode ser predito (ou explicado) por um conjunto de fatores chamados traços latentes ou habilidades.

12 Todos concordam que provas com o mesmo objetivo devem medir a mesma característica ou habilidade; Uma prova discursiva, seria,na verdade, uma forma de fazer tal avaliação. O problema ocorre quando queremos fazer avaliação em larga escala. A Teoria da Resposta ao Item surgiu a partir de discussões teóricas sobre a viabilidade de se comparar as habilidades e os conhecimentos de pessoas submetidas a provas diferentes. A Teoria Clássica dos Testes tem reconhecidamente grandes dificuldades de comparar habilidades e conhecimentos de pessoas submetidas a provas diferentes

13 A TRI, conjunto de modelos matemáticos usados no Enem, permite que os exames tenham o mesmo grau de dificuldade. Na TRI, o foco é no item, como é chamada cada questão, e não no total de acertos. A teoria é o conjunto de modelos que relacionam uma ou mais habilidades com a probabilidade de a pessoa acertar a resposta.

14 Probabilidade de acerto 1,0 0,9 0,8 0,7 0,6 0,5 0,4 0,3 0,2 0,1 0,0 P(X Teoria da Resposta ao Item (curva característica do ítem) 1 1,a,b,c) c (1 c) 1 e Curva Característica do Item c=0,11 b=0,4 a( b) a=0, Proficiência ( )

15 O parâmetro a está relacionado com a derivada da tangente da curva no ponto de inflexão. Assim, itens com a negativo não são esperados sob esse modelo, uma vez que indicariam que a probabilidade de responder corretamente o item diminui com o aumento da habilidade. Baixos valores de a indicam que o item tem pouco poder de discriminação (alunos com habilidades bastante diferentes têm aproximadamente a mesma probabilidade de responder corretamente ao item) e valores muito altos indicam itens com curvas características muito íngremes, que discriminam os alunos basicamente em dois grupos: os que possuem habilidades abaixo do valor do parâmetro b e os que possuem habilidades acima do valor do parâmetro b.

16 TCT (Teoria Clássica dos testes) X TRI(Teoria da Resposta ao Ìtem TCT Escore; Nº de acertos; Dependente do teste. TRI Proficiência; Escala; Probabilístico e depende do tipo de item. O domínio do estudante está relacionado ao número de acertos. O domínio do estudante está relacionado ao padrão de resposta e às características dos itens: dificuldade, discriminação e acerto ao acaso

17 Item Nível de Avaliado * dificuldade , , , , , , , , , , , , , , , , , , , , , Escore Proficiência 382,1 449,0 500,0 589,4

18 A Teoria de Resposta ao Item, ou TRI, teve suas origens antes da segunda guerra mundial. Em meados da década de 50, nomes como Richadson e Frederic Lord, entre outros, se destacaram. A partir daí, nas décadas posteriores, a teoria foi desenvolvida e consolidada. Podemos então ver que a TRI é um campo estudado há muitos anos, mas nos últimos 10 anos no Brasil é que suas aplicações têm acontecido.

19 3.ELABORAÇÃO DOS ÍTENS

20 ÍTEM O ítem é a unidade básica do teste. O ENEM adota itens objetivos do tipo múltipla escolha (O participante escolhe entre alternativas a resposta correta).

21 CARACTERÍSTICAS DO ÍTEM Contempla uma habilidade da Matriz de Referência. Explicita uma situação-problema. É contextualizado. Oferece informações necessárias à sua resolução. Evita exigência de informações simplesmente decoradas, como fórmulas, datas, termos, nomes, enfim, detalhes que não avaliam a habilidade, mas privilegiam a memorização.

22 SITUAÇÃO-PROBLEMA Desafio que reporta o participante a um contexto reflexivo e instiga-o a tomar decisões. Situação-problema deve ser contextualizada, explora situações vivenciadas, hipotéticas ou reais.

23 Matriz de Referência Instrumento norteador para a construção de itens. Estruturada a partir de competências e habilidades que se espera que os participantes do teste tenham desenvolvido em uma determinada etapa da educação. Diferenciada do currículo, que é muito mais amplo. Referência tanto para aqueles que irão participar do teste, garantindo transparência ao processo e permitindo-lhes uma preparação adequada, como para a análise dos resultados do teste aplicado.

24 Competência Capacidade de mobilizar recursos cognitivos, socioafetivos ou psicomotores com vistas a estabelecer relações com e entre objetos, situações, fenômenos e pessoas para resolver, encaminhar e enfrentar situações complexas. Habilidades Decorrem das competências e referem-se ao plano do saber fazer.

25 Composição das Matrizes de Referência do ENEM Estão estruturadas a partir de eixos cognitivos comuns a todas as áreas do conhecimento: Dominar linguagens. Compreender fenômenos. Enfrentar situaçõesproblema. Construir argumentação. Elaborar propostas.

26 Matriz de Referência Matemática e suas Tecnologias 5 eixos cognitivos norteiam as competências e habilidades 7 competências agrupam entre 3 e 5 habilidades 30 habilidades no total

27 Competência 1 - Construir significados para os números naturais, inteiros, racionais e reais. H01 Reconhecer, no contexto social, diferentes significados e representações dos números e operações - naturais, inteiros, racionais ou reais. H02 Identificar padrões numéricos e princípios de contagem. H03 Resolver problema envolvendo conhecimentos numéricos. H04 Avaliar a razoabilidade de um resultado numérico na construção de argumentos sobre afirmações quantitativas. H05 Avaliar propostas de intervenção na realidade utilizando conhecimentos numéricos.

28 Competência 2 - Utilizar o conhecimento geométrico para realizar a leitura e a representação da realidade e agir sobre ela. H06 Interpretar a localização e a movimentação de pessoas/objetos no espaço tridimensional e sua representação no espaço bidimensional. H07 Identificar características de figuras planas ou espaciais. H08 Resolver situação-problema que envolva conhecimentos geométricos de espaço e forma. H09 Utilizar conhecimentos geométricos de espaço e forma na seleção de argumentos propostos como solução de problemas do cotidiano.

29 Competência 3 - Construir noções de grandezas e medidas para a compreensão da realidade e a solução de problemas do cotidiano. H10 Identificar relações entre grandezas e unidades de medida. H11 Utilizar a noção de escalas na leitura de plantas ou mapas. H12 Resolver situação-problema que envolva medidas de grandezas. H13 Avaliar o resultado de uma medição na construção de um argumento consistente. H14 Avaliar proposta de intervenção na realidade utilizando conhecimentos geométricos relacionados a grandezas e medidas.

30 Competência 4 - Construir noções de variação de grandezas para a compreensão da realidade e a solução de problemas do cotidiano. H15 Identificar a relação de dependência entre grandezas. H16 Resolver situação-problema envolvendo a variação de grandezas, direta ou inversamente proporcionais. H17 Analisar informações envolvendo a variação de grandezas como recurso para a construção de argumentação. H18 Avaliar propostas de intervenção na realidade envolvendo proporcionalidade.

31 Competência 5 - Modelar e resolver problemas que envolvem variáveis socioeconômicas ou técnico-científicas, usando representações algébricas. H19 Identificar representações algébricas que expressem a relação entre grandezas. H20 Interpretar gráfico cartesiano que represente relações entre grandezas. H21 Resolver situação-problema cuja modelagem envolva conhecimentos algébricos. H22 Utilizar conhecimentos algébricos/geométricos como recurso para a construção de argumentação. H23 Avaliar propostas de intervenção na realidade utilizando conhecimentos algébricos.

32 Competência 6 - Interpretar informações de natureza científica e social obtidas da leitura de gráficos e tabelas, realizando previsão de tendência, extrapolação, interpolação e interpretação. H24 Utilizar informações expressas em gráficos ou tabelas para fazer inferências. H25 Resolver problema com dados apresentados em tabelas ou gráficos. H26 Analisar informações expressas em gráficos ou tabelas como recurso para a construção de argumentos.

33 Competência 7 - Compreender o caráter aleatório e nãodeterminístico dos fenômenos naturais e sociais e utilizar instrumentos adequados para medidas, determinação de amostras e cálculos de probabilidade para interpretar informações de variáveis apresentadas em uma distribuição estatística. H27 Calcular medidas de tendência central ou de dispersão de um conjunto de dados expressos em uma tabela de freqüências de dados agrupados (não em classes) ou em gráficos. H28 Resolver situação-problema que envolva conhecimentos de estatística e probabilidade. H29 Utilizar conhecimentos de estatística e probabilidade como recurso para a construção de argumentação. H30 Avaliar propostas de intervenção na realidade utilizando conhecimentos de estatística e probabilidade.

34 ESTRUTURA DO ÍTEM Texto-base Enunciado Alternativas Gabarito Distratores Justificativas

35 TEXTO-BASE Motiva ou compõe a situação-problema e deve apresentar as informações necessárias para a sua resolução. Apenas um item poderá ser formulado para cada texto-base. ESPECIFICAÇÕES DO TEXTO-BASE A formulação de textos, imagens, esquemas, tabelas pelo próprio elaborador, para o contexto do item, só é válida para a construção de uma situação hipotética e é aceita apenas para as áreas de matemática e de ciências da natureza; O uso de publicações implica a citação da fonte, mesmo daquelas de domínio público, conforme as normas da ABNT. As publicações não podem ser de autoria do próprio elaborador, pois isso pode ser interpretado como autopromoção; não pode ser utilizado livro didático como fonte para o texto-base, pois isso associaria a avaliação em larga escala a uma editora ou a um autor ou a uma publicação.

36 ENUNCIADO Uma ou mais orações com instrução expressa como pergunta ou um período a ser completado pela alternativa certa. Preferencialmente não deve apresentar informações adicionais ao texto-base, apenas considerar as informações oferecidas.

37 ALTERNATIVAS Gabarito Indica, inquestionavelmente, a única alternativa CERTA que responde à situação-problema proposta. Distratores Alternativas ERRADAS. Devem ser plausíveis, ou seja, parecem corretos para quem não desenvolveu a habilidade. Um distrator plausível deve retratar hipóteses de raciocínio na busca da solução da situação-problema. Não devem ser criadas situações capazes de induzir o participante ao erro.

38 JUSTIFICATIVAS Fazem parte do item embora não apareçam no teste. Devem ser formuladas separadamente para cada uma das alternativas. Indicam se a alternativa está CERTA ou ERRADA, explicando-a. Devem possuir fundamentação própria e distinta para cada alternativa. São proibidas justificativas repetidas e tautológicas.

39 ETAPAS PARA ELABORAÇÃO DO ITEM 1. Selecione uma habilidade da Matriz de Referência 2. Construa a situação-problema 3. Dê preferência a fontes primárias, originais e sem adaptações, caso utilize textosbase, estes devem ser referenciados, de acordo com as normas da ABNT. 4. Use, preferencialmente, textos que abordem temas atuais adequados ao públicoalvo. 5. Evite textos extensos. 6. Elabore itens inéditos (não publicados, divulgados ou utilizados em sala de aula). 7. Elabore apenas 1 (um) item para cada texto-base. 8. Evite abordagens de temas que suscitem polêmicas. 9. Evite situações e detalhes que possam induzir o participante ao erro ( pegadinhas ).

40 10. Na elaboração do enunciado: use termos impessoais: considere-se, calcula-se, argumenta-se ; não utilize: falso, exceto, incorreto, não, errado ; não utilize termos absolutos: sempre, nunca, todo, totalmente, absolutamente, completamente, somente etc.; não utilize sentenças como: Pode-se afirmar que, É correto afirmar que. 11. Construa as alternativas: Com paralelismo sintático e semântico, extensão equivalente e coerência com o enunciado; Independentes, não excludentes e que não sejam semanticamente muito próximas; Dispostas de maneira lógica (seqüência narrativa, alfabética, crescente/decrescente, etc.); Sem repetição de palavras do enunciado; Evite alternativas longas; Não use: todas as anteriores, nenhuma das anteriores ; O gabarito não deve ser mais atrativo que os distratores; Distratores não devem ser absurdos em relação à situação-problema apresentada.

41 12. Pontue as alternativas e observe as regras para sua redação, de acordo com a área de conhecimento (existem regras para cada área) 13. Construa as justificativas para as alternativas com argumentação consistente que explique o erro ou o acerto, de maneira que não sejam tautológicas. 14. Estime o nível de dificuldade do item (fácil, médio ou difícil) com base na sua experiência docente. 15. Indique três palavras-chave: 15.1 campo de conhecimento (exemplo: ); 15.2 objeto do conhecimento (conteúdo abordado); 15.3 contexto/tema. 16. Observe as especificações de formatação do item.

42 Mário tem 19 canecas e Luis tem 37. Quantas canecas Mário necessita para ter a mesma quantidade que tem Luis? (A) 56 (B) 28 (C) 22 (D) 18 (E) 37

43 Mário tem 19 canecas e Luis tem 37. Quantas canecas a mais Mário necessita para ter a mesma quantidade que tem Luis? (A) 56 (B) 28 (C) 22 (D) 18 (E) 37

44 A fotografia a seguir mostra uma turista aparentemente beijando a esfinge de Gizé, no Egito. A figura a seguir mostra como, na verdade, foram posicionadas a câmera fotográfica, a turista e a esfinge. posição da esfinge posição da turista posição da câmera d d c a b

45 Medindo-se com uma régua diretamente na fotografia, verifica-se que a medida do queixo até o alto da cabeça da turista é igual a 2/3 da medida do queixo da esfinge até o alto da sua cabeça. Considere que essas medidas na realidade são representadas por d e d, respectivamente, que a distância da esfinge à lente da câmera fotográfica, localizada no plano horizontal do queixo da turista e da esfinge, é representada por b, e que a distância da turista à mesma lente, por a. A razão entre b e a será dada por (A) (B) (C) (D) (E) b d a c b 2d a 3c b 3d a 2c b 2d a 3c b a d 2 c H22

46 FLUXO DA ELABORAÇÃO DOS ÍTENS IES Elaborador Aprovado R 1 e R 2 revisores pertencentes a outras IES diferentes da que elaborou o item. Aceitam Rejeitam INEP Revisor Discordam Descarte Revisor do Inep ou BNC R 3 Rejeita Aceita

47 OBRIGADO