Guia para elaboração de itens da Educação de Jovens e Adultos Introdução objetivos do material Este guia tem o objetivo de apresentar a metodologia para elaboração de itens para avaliação do Ensino de Jovens e Adultos (EJA) da Fundação Bradesco. Para tanto, serão apresentados procedimentos técnicos e pedagógicos, que servem para garantir a confiabilidade do item e de sua capacidade avaliativa. Vale lembrar que a construção dos itens avaliativos requer muita cautela, pois sendo um instrumento de coleta de dados, permite medir e analisar os resultados do desempenho dos alunos durante o processo educacional para criar variadas situações de aprendizagem que lhes subsidiem e enriqueçam a construção do conhecimento. Desse modo, esse material contribui para que os elaboradores e os revisores de itens sigam uma direção em comum quanto à padronização dos itens avaliativos, de maneira que atenda particularidades das quatro áreas do conhecimento, bem como especificidades do público da EJA. As Matrizes de Referência para a produção de itens Antes de iniciar a elaboração de itens, é fundamental a compreensão das Matrizes de Referência para Avaliação da Educação de Jovens e Adultos estruturadas a partir do conjunto de competências e habilidades que se espera que o aluno da EJA desenvolva em cada etapa de sua escolaridade, em cada área do conhecimento. As matrizes estão no centro do processo pedagógico da Educação de Jovens e Adultos da Fundação Bradesco, norteando estratégias didáticas, práticas pedagógicas e o processo de avaliação. Por esse motivo, a construção de itens de avaliação deve atender a requisitos específicos, já que com as matrizes, cada item construído deve ter o propósito de avaliar uma habilidade. Etapas para elaboração de itens Existem dois tipos básicos de itens: os itens de resposta livre, em que o aluno elabora uma resposta, e os itens de resposta orientada, também chamados de itens objetivos ou itens de múltipla escolha, que permitem ao estudante escolher uma resposta dentre um conjunto de alternativas oferecidas. Para a realidade dos alunos da Fundação Bradesco, o primeiro tipo de item é o mais comum nas atividades do dia a dia escolar e o segundo tipo de item é o que caracteriza as avaliações do segmento, sejam as avaliações internas ou a Avaliação Institucional. A estrutura de um item de múltipla escolha é, basicamente, a seguinte: 1
Área: Códigos e Linguagens Ensino Fundamental Habilidade: H41 Enunciado Leia a tirinha: Suporte SCOTT, Jerry and BORGMAN, Jim. Zits. Disponível em: <http://www.washingtonpost.com/wp-srv/ artsandliving/comics/king.html?name=zits&date=20130905>. Acesso em: 13 set. 2013. 13h 55min. Comando Vocabulário: To get up: levantar(-se). To shake: agitar. A fala da mãe Get up! encontra-se no modo imperativo porque tem o objetivo de Alternativas de respostas a) dar uma ordem para o filho levantar-se. b) incentivar o rapaz a continuar a dormir. c) indicar uma dúvida sobre a atitude do jovem. d) perguntar se o filho deseja ficar na cama. e) saber se o adolescente consegue acordar cedo. As etapas para a elaboração de itens estão descritas a seguir: 1. Seleção, na Matriz de Referência, da habilidade que será avaliada. Fazer a identificação da competência, do tema a ser exigido pelo item que será proposto e analisar a operação mental que envolve a habilidade. 2. Definição da situação-problema a ser trabalhada no item e elaboração do texto-base, considerando a realidade cotidiana do público-alvo. A utilização de situações alheias ao cotidiano dos alunos pode fazer com que um item de boa qualidade técnica não seja respondido adequadamente. Ao elaborar itens, deve-se ter o cuidado de torná-los significativos, interessantes e atrativos aos alunos, utilizando acontecimentos autênticos para aumentar o grau de realidade no que está sendo avaliado. É certo que 2
as situações apresentadas nos itens de uma avaliação nem sempre são totalmente verdadeiros, porém a linguagem e o material utilizados devem conservar alguma relação com a vida do aluno fora da escola. Esta verossimilhança pode ser alcançada com a utilização de material de jornais, revistas, atlas, sites ou outros que possam interessar aos alunos. 3. Elaboração do enunciado, atentando para fornecer todas as informações necessárias para que o aluno responda ao item. Sempre que o enunciado tiver um comando como: observe, leia, analise, compare, etc., deve terminar com :. Exemplo: Analise a figura: A estrutura do enunciado de um item pode ser de dois tipos: a) O enunciado do item pode solicitar que o aluno, após a leitura do texto-base, resolva a situação-problema proposta para, em seguida, identificar a alternativa que contém a resposta certa. Veja o exemplo: Área: Ciências da Natureza I Ensino Fundamental Habilidade: H7 Laís trabalha no setor de embalagens de uma fábrica de chocolates. A garota precisa embalar 60 barras de chocolate e deve realizar esse trabalho de maneira que cada embalagem contenha a mesma quantidade de barras. Tentando saber qual era o número de barras de chocolate que deveria ter em cada embalagem, Laís realizou os seguintes cálculos: Se dividir 60 por 10, terei 6 barras de chocolate em cada embalagem. Se dividir 60 por 5, terei 12 barras de chocolate em cada embalagem. Se dividir 60 por 6, terei 10 barras de chocolate em cada embalagem. Após os primeiros cálculos, Laís percebeu que, para saber o número possível de barras de chocolate em cada embalagem, bastaria saber quais eram os divisores do número 60. De acordo com os cálculos realizados por Laís, pode-se afirmar que a) a garota está correta e o número de barras em cada embalagem poderá ser qualquer divisor de 60. b) a garota está correta em afirmar que o número de barras em cada embalagem será um divisor de 60, mas não está correta quando apresenta o número 10 como divisor de 60. c) a garota não está correta, pois o número 30 não é divisor de 60 e esse número poderá ser a quantidade de barras em cada embalagem. d) a garota não está correta, pois apresenta o número 5 como divisor de 60. e) a garota não está correta, pois o número 16 não é divisor de 60 e esse número poderá ser a quantidade de barras em cada embalagem. 3
b) O item pode solicitar ao aluno que analise cada alternativa, individualmente, de acordo com o enunciado (que pressupõe a leitura do texto-base), para identificar a correta. Veja o exemplo: Área: Ciências Humanas Ensino Fundamental Habilidade: H2 Assim como todos os planetas do Sistema Solar, a Terra é dinâmica e está em constante movimento. Observe a imagem: Disponível em: <http://professoralexeinowatzki.webnode.com.br/astronomia/movimentos-da-terra/>. Acesso em: 10 set. 2013. 9h45min. Os dois principais movimentos que a Terra realiza são conhecidos por translação (movimento que a Terra realiza em torno do Sol) e rotação (movimento que a Terra realiza em torno do seu eixo). O movimento de translação dura aproximadamente 365 dias, e é responsável direto pela definição a) das estações do ano. b) dos dias e das noites. c) dos fusos horários. d) das eras geológicas. e) dos pontos cardeais. Seja qual for o tipo escolhido, é importante redigir o enunciado de maneira clara e objetiva, procurando evitar que o aluno erre o item porque não compreendeu o que estava sendo perguntado. Eis alguns procedimentos que contribuem para a redação de enunciados: A compreensão do enunciado deve ser independente da leitura de todas as alternativas. O enunciado deve conter apenas dados ou informações funcionais. Expressões numéricas, textos, fórmulas, figuras, tabelas etc. só podem ser incluídos se forem necessários à resolução do problema proposto. Os elementos meramente ilustrativos ou que sejam desnecessários para a resolução da situação-problema podem resultar em baixos índices de acerto do item. 4
Termos impessoais devem predominar na redação dos enunciados. Exemplos: considere-se, calcula-se, argumenta-se etc. Não se aconselha empregar termos negativos, como EXCETO, INCORRETO, NÃO, ERRADO, FALSO. Deve-se preferir a formulação de itens positivos. Devem-se evitar termos generalizantes, como SEMPRE, NUNCA, TODO, TOTALMENTE, ABSOLUTAMENTE, COMPLETAMENTE, SOMENTE etc. Veja o exemplo: O item deve testar a habilidade desenvolvida pelo aluno e não a sua capacidade de memorização. Evitar palavras ou expressões como ABAIXO, A SEGUIR, [leia] COM ATENÇÃO, para se referir ao texto ou à imagem que virá na sequência do enunciado. Área: Ciências da Natureza II Ensino Médio Habilidade: H61 Através da ingestão de leguminosas, como feijão e soja, obtém-se o micronutriente nitrogênio, necessário para a nutrição humana. A maior parte desse elemento químico, entra no ecossistema através da ação de micro-organismos capazes de absorvê-lo da atmosfera e fixá-lo nas raízes dessas plantas, formando nódulos, conforme mostra a figura: Disponível em: <http://www.grupocultivar.com.br/sistema/uploads/noticias/gd_941_07-11_inoculante.jpg>. Acesso em: 16 Abr. 2015. 10h42min. Esses micro-organismos são denominado(a)s de nitrogênio. Assinale a alternativa que completa corretamente a lacuna: a) insetos predadores b) fungos decompositores c) vermes parasitas d) bactérias fixadoras e) vírus seletores 5
4. Elaboração das alternativas. Deve haver apenas uma resposta correta para a situaçãoproblema proposta no enunciado. Cabe observar que os distratores (as alternativas incorretas) devem ser respostas plausíveis, aceitáveis, que podem, inclusive, atrair os alunos com pouco conhecimento do conteúdo ou habilidade não desenvolvida, ou ainda, aqueles que tentam adivinhar (ou chutar ) a resposta correta. Os distratores são as alternativas com aparência de resposta correta, mas que são inquestionavelmente incorretas em relação ao enunciado, embora seu conteúdo deva ser possível, se considerado independentemente do problema formulado no enunciado. Para elaborar as alternativas de um item, é importante considerar os seguintes procedimentos: Elaborar alternativas que apresentem a mesma estrutura (paralelismo sintático e semântico) e sejam igualmente bem construídas. Esse cuidado evitará que o aluno identifique a alternativa correta ou incorreta apenas pela observação do seu tamanho, ou por qualquer outra diferença de formato em relação às demais. Abordar os conteúdos com homogeneidade, isto é, as alternativas devem tratar da mesma categoria, espécie, abrangência, ordem de grandeza, etc. Incluir todas as informações necessárias na alternativa correta, para que não haja dúvidas quanto à sua correção. Evitar detalhes irrelevantes e conteúdos absurdos. As informações devem ser coerentes com o enunciado e com o conteúdo. Evitar a repetição de palavras que aparecem no enunciado. Evitar afirmações demasiadamente longas. Construir alternativas de maneira a possibilitar que o aluno recorra ao procedimento contido na habilidade proposta, evitando assim, que ele acerte o item por exclusão. Não utilizar alternativas como todas as anteriores ou nenhuma das anteriores. Evitar que a resposta correta seja mais atrativa do que os distratores. 5. Revisar o item algum tempo após tê-lo escrito, para certificar-se de que ele está realmente de acordo com a habilidade escolhida, é coerente e há apenas uma única resposta correta. 6. Quando houver a elaboração de gabarito comentado do item, citar a resposta correta e comentar a questão de modo a justificar por que a alternativa selecionada é a certa e as demais alternativas estão erradas. Além dos passos descritos, outras recomendações técnicas devem ser levadas em consideração para a elaboração dos itens. São elas: 6
Com relação aos textos 1 utilizados como texto-base ou como alternativas: Dar preferência a textos oriundos de fontes primárias, originais e sem adaptações, fazendo a devida referência à fonte de onde foi extraído. Com relação aos direitos autorais não adaptar textos por se tratar de prerrogativa do autor. Além disso, atentar-se para autores e/ou materiais de uso proibido na Fundação Bradesco. Se o texto não for integral, deve-se identificá-lo como fragmento. A indicação poderá ser feita no enunciado (exemplo: No fragmento de texto a seguir... ). Todo texto deve conter o título, ainda que seja fragmento, que deve constar no enunciado, no topo do texto ou em sua referência. Sempre que for feita a referência aos títulos dos textos, tirinhas ou imagens, estes devem ser escritos em itálico. Essa orientação cabe tanto para a referência que aparece no enunciado quanto no fim do suporte. Caso o título do texto apareça em seu topo, deverá estar em negrito. Com relação aos aspectos textuais que envolvem a elaboração do item: Verificar a redação e a apresentação do item. Seguir as regras de ortografia, gramática e sintaxe de acordo com a norma padrão da língua portuguesa. Cuidar para que os conceitos, fatos, terminologia, etc. tenham caráter universal. Elaborar itens com vocabulário, objetos e situações conhecidos nacionalmente. Para inserir o significado de palavras desconhecidas utilizar um Vocabulário após o suporte. Exemplo: Vocabulário: Munganga: expressão facial cômica ou zombeteira; careta. Ao utilizar palavras estrangeiras, verificar se estas são aportuguesadas, caso contrário escrevê-las em itálico. Utilizar pontuação correta. Seguem algumas recomendações: se o enunciado for uma frase incompleta a ser corretamente completada pelas alternativas, estas devem começar com letras minúsculas e terminar com o ponto apropriado para a frase (ponto final, interrogação, exclamação etc.), não sendo necessário incluir os dois pontos :. caso o enunciado seja uma pergunta, deve terminar com uma interrogação e as alternativas devem começar com letras maiúsculas e terminar com ponto final, independente da quantidade de palavras que houver na frase; 1 Aqui, considera-se texto em seu sentido amplo, como qualquer organizado de sentido que tenha como finalidade estabelecer comunicação. Nesse contexto, estão incluídos os textos verbais e os não-verbais: narrativas, poemas, notícias, quadrinhos, charges, imagens, tabelas, infográficos, gráficos, fórmulas, linhas do tempo, mapas etc. 7
alternativas que expressam números, grandezas e representações químicas, quando acompanhadas de unidade de medida: espaçar nº da unidade de medida e não pontuar. Ex.: 10 km para o item anterior, cabe exceção quando as alternativas completarem o enunciado de frases. Veja o exemplo: Área: Ciências da Natureza II Ensino Médio Habilidade: H26 Dada a fórmula estrutural do linalol, substância encontrada no óleo de alfazema: A fórmula molecular desse composto é a) C 11 H 18 O. b) C 10 H 17 O 2. c) C 10 H 19 O. d) C 10 H 17 O. e) C 10 H 18 O. Com relação ao tema abordado no item: Evitar a abordagem de temas ou a citação de elementos (afirmações, situações, usos, exemplos, vocabulário, objetos, informações etc.) que suscitem polêmicas ou que possam caracterizar-se como: viés cultural, discriminação ou preconceito em relação a gêneros, etnias, profissões, etc.; apologia a comportamentos e condutas em desacordo com preceitos educativos e legais, por exemplo: drogas, bebidas, aborto, crime, arma ou incitação à violência e a danos ou destruição de bem público ou privado e da natureza; questões de cunho religioso, que não estejam diretamente ligados a fatos históricos, que justifiquem a abordagem do tema. Com relação à indicação de fonte: A indicação de fonte em um item, deve constar ao final do suporte, alinhado à sua direita. Para se fazer uma citação formal, completa, é preciso nome do autor, nome do artigo (se houver), nome da revista ou livro, cidade, editora, ano e página. Alguns exemplos: 8
Livro: PERRENOUD, Philippe. Construir as competências desde a escola. Porto Alegre: Artes Médias Sul, 1999. p. 45. NOVO TELECURSO. Artes Plásticas: Ensino Médio. 1 ed. Rio de Janeiro: Fundação Roberto Marinho, 2008. Aula 1. p. 12-22. Revista: RITTO, Cecília; PRADO, Amanda. Um para todos. Veja, São Paulo, ed. 2447, n. 41, p. 92-95, 14 out. 2015. Padrão para informar sites e portais para a indicação de quaisquer textos ou imagens: Disponível em: <http://fsicafascinante.blogspot.com.br/p/1-ano.html>. Acesso em: 10 out. 2015. 13h52min. Histórias em quadrinhos/ Tirinhas: Deve estar acompanhada do nome de seu autor/ilustrador. Caso seja retirado de um site ou jornal deve acompanhar a citação, como nos exemplos a seguir: Site: DAVIS, Jim. Disponível em: < http://www1.folha.uol.com.br/ilustrada/cartum/cartunsdiarios/#13/10/2015>. Acesso em: 13 out. 2015. 11h53min. Jornal impresso: DAVIS, Jim. Garfield. Folha de S. Paulo, São Paulo, 12 out. 2015. Folha Ilustrada, Caderno 7. Tanto os textos quanto as imagens utilizadas como suporte para elaboração dos itens devem conter a indicação de sua respectiva fonte. Porém, os suportes cuja produção seja da própria equipe do SEJA, fica isenta sua indicação. Com relação a outros materiais que não sejam itens para avaliação A equipe do SEJA também elabora materiais didáticos com diferentes formatos, como Cadernos de Exercícios, Exercícios on-line, Sequências didáticas, entre outros. Para esses materiais de apoio pedagógico e/ou administrativo há maior flexibilidade com relação a sua construção, como a linguagem que pode ser menos formal e deixar de ser impessoal. Porém, alguns critérios como as referências, por exemplo, devem ser mantidos. FUNDAÇÃO BRADESCO DEPEJA Setor de Educação de Jovens e Adultos 9
Referências BRADESCO, FUNDAÇÃO. Matrizes de Referência para Avaliação da Educação de Jovens e Adultos: 6º ao 9º ano e Ensino Médio. Osasco, 2013. CAEd/UFJF. Guia de Elaboração de itens. Disponível em: <http://www.portalavaliacao.caedufjf.net/wp-content/uploads/2012/02/guia_de_- Elabora%C3%A7%C3%A3o_De_Itens_LP.pdf>. Acesso em: 24 set. 2015. HOUAISS, Antônio. Dicionário eletrônico Houaiss da Língua Portuguesa. Rio de Janeiro: Editora Objetiva, 2009. BRASIL. Instituto Nacional de Estudos e Pesquisas Educacionais Anísio Teixeira. Guia de Elaboração e Revisão de Itens. Disponível em: <http://portal.inep.gov.br/guia-de-elaboracaoe-revisao-de-itens#topopagina>. Acesso em: 25 set. 2015. 10h25min. 10