Prova Brasil: Descritores de Avaliação de Matemática Isabel Cristina Ribeiro Mary Ângela Teixeira Brandalise Resumo O trabalho apresenta um estudo sobre os descritores de avaliação de matemática propostos na Prova Brasil, para a avaliação do conhecimento matemático dos alunos relativos aos quatro blocos de conteúdos matemáticos: Números e Operações, Espaço e Forma, Grandezas e Medidas, Tratamento da Informação. A pesquisa, de cunho qualitativo, analisou os documentos oficiais da Prova Brasil. As questões de matemática da Prova Brasil definidas para o 9º ano do Ensino Fundamental, foram analisadas conforme os seguintes critérios: se as questões estavam realmente de acordo com os descritores definidos, se os descritores estão propostos nos Parâmetros Curriculares Nacionais - PCNs, o nível de dificuldade da questão e o tipo de formulação textual. Os documentos analisados revelaram que 72% das questões são contextualizadas, a maioria é de dificuldade intermediária e descritores de matemática são adequados aos objetivos propostos nos PCNs. Palavras-chave: Prova Brasil, avaliação em larga escala, descritores de matemática. Abstract Prova Brasil: descriptor of mathematics evaluation This paper shows a study about descriptors of mathematics evaluation suggested at Prova Brasil to measure the mathematical knowledge of students
that encompass four areas: numbers and operations, space and shape, magnitudes and measures, information handling. The research, using a quantitative analysis, analysed Prova Brasil official documents. Questions applied to 9º grade of Fundamental School were analysed concerning this points: if questions were really concerning with descriptors, and if descriptors were suggested at Nacional Curricular Parameters - PCNs, difficulty level and question formulation. Documents analysis has showed that 72 % of the questions are in context, and the most have intermediate difficulty level and descriptors of mathematics evaluation are suitable to goals suggested at PCN. Keywords: Prova Brasil, evaluation in large scale, descriptors of mathematics.
Introdução Universidade Tecnológica Federal do Paraná - UTFPR Os resultados das avaliações em larga escala da educação brasileira apresentam um quadro bastante preocupante em relação à proficiência matemática dos estudantes desde os anos iniciais da educação básica até o ensino superior. O Sistema de Avaliação a Educação Básica - SAEB e a Prova Brasil são programas nacionais do INEP Instituto Nacional de Estudos e Pesquisas Educacionais Anísio Teixeira os quais se destinam a avaliar a proficiência dos estudantes nas áreas de Língua Portuguesa e Matemática no Ensino Fundamental. A Prova Brasil é elaborada com base nos Parâmetros Curriculares Nacionais (PCNs), que, em Matemática, destacam quatro blocos de conteúdos: Espaço e Forma, Números e Operações, Grandezas e Medidas e Tratamento da Informação. Foram criados 37 descritores para a avaliação da prova de matemática, os quais descrevem as habilidades e competências a serem testadas nos alunos relativas a esses quatro blocos de conteúdos de matemática. Para medir os níveis de aprendizagem, a avaliação propõe questões com diferentes graus de dificuldade mesmo dentro de um mesmo descritor. As questões são distribuídas de forma equilibrada, são de múltipla escolha e os alunos têm que indicar a correta entre quatro ou cinco alternativas Além dos descritores, há uma Matriz de Referência de Avaliação de Matemática do SAEB/PROVA BRASIL, recorte da Matriz Curricular de Matemática, que foi pensada com a finalidade de possibilitar itens de avaliação que usem contextos que favoreçam aos estudantes explorar, de modo significativo, conceitos, procedimentos e habilidades matemáticas consideradas básicas para o final da 8ª série/9º ano do Ensino Fundamental. Elas possibilitam explorar uma grande variedade de idéias matemáticas, não apenas numéricas, mas, também, aquelas relativas à geometria, às medidas e à estatística, além de apontarem a necessidade de incorporar situações que explorem diferentes contextos, não somente o matemático. Enfim, a Prova Brasil avalia capacidades apresentadas por meio de descritores que explicitam o que os estudantes precisam dominar ao concluírem o final de uma etapa de aprendizagem. A Prova Brasil destina-se a avaliar o sistema de ensino e não o aluno. Formulada por especialistas da área, as questões são classificadas com base no grau de complexidade em médias, fáceis e difíceis, considerando-se os raciocínios que os alunos necessitam para resolvê-las.
O resultado é divulgado por escola, sendo utilizada uma escala de 0 (zero) a 500 (quinhentos) pontos para a avaliação do desempenho dos alunos. A posição de cada escola é dada em valores médios, os quais podem ser comparados com o desempenho médio de estudantes de outras instituições do município, do estado e do Brasil. Os resultados obtidos devem ser analisados pelas escolas e professores, principalmente para identificação das habilidades já conquistadas, as que estão em processo de construção e aquelas que precisam ser retomadas ou ainda trabalhadas. A avaliação externa, do sistema educacional brasileiro e das escolas, proposta na Prova Brasil é uma política de avaliação implantada recentemente no meio educacional, razão pela qual há necessidade de estudos e pesquisas que avaliem a sua eficácia e efetividade para melhoria da qualidade do processo ensino-aprendizagem no Ensino Fundamental. Considerando-se, também: a importância dessa avaliação em larga escala para as escolas e para os formuladores das políticas educacionais; a necessidade de melhoria do rendimento dos alunos em matemática nas séries finais do Ensino Fundamental e a necessidade de aprofundar e refletir sobre as habilidades básicas avaliadas pela Prova Brasil/SAEB é que se propôs a presente pesquisa. Metodologia A investigação foi desenvolvida numa abordagem qualitativa, revestindo-se de um caráter bibliográfico e interpretativo, uma vez que o estudo realizado tem como questão norteadora: Quais são as habilidades e competências dos descritores de matemática propostos na Prova Brasil, para a avaliação do conhecimento matemático de alunos de 8ª série/9º ano do Ensino Fundamental relativos aos quatro blocos de conteúdos matemáticos: Números e Operações, Espaço e Forma, Grandezas e Medidas, Tratamento da Informação? E como elas estão postas nas questões das provas? A análise documental foi o procedimento metodológico adotado. Os documentos oficiais disponíveis sobre a Prova Brasil e a produção acadêmica sobre avaliação em larga escala e de sistemas educacionais foram os documentos analisados. Os PCNs de matemática foram também objeto de análise envolvendo cada um dos blocos de conteúdos: Números e Operações, Espaço e Forma, Grandezas e Medidas, Tratamento da Informação, relacionados às habilidades e competências dos descritores definidos para a Prova Brasil. Para a análise dos descritores da avaliação de matemática foi analisado se as questões coletadas neste estudo estavam realmente
de acordo com os descritores, e se os descritores estão propostos nos PCNs, o grau de dificuldade e o tipo de formulação da questão. Considerando-se os critérios de avaliação a adotados nesta investigação foi possível observar uma diversidade de informações sobre os descritores de matemática da Prova Brasil presentes nas questões analisadas. Resultados e Discussões 1- Quanto às questões disponibilizadas oficialmente Inicialmente fez-se a análise das 26 questões publicadas na Revista Nova Escola. Em seguida foram analisadas: as 37 questões disponíveis na página oficial da Prova Brasil, as 72 questões do Caderno de Atividades, desenvolvida pela Secretaria de Estado da Educação do Paraná (Seed - PR) e as 37 questões disponibilizadas pelo Mec Ministério de Educação no documento PDE Prova Brasil, totalizando assim 172 questões analisadas na investigação. Na tabela 1 está apresentada as questões analisadas por documentos e por blocos de conteúdos: Tabela 1 - Quantidade de questões analisadas por Blocos de Conteúdos. Blocos de Conteúdos Revista Site Seed - Pr Mec Total Espaço e Forma 7 11 18 11 47 Grandezas e Medidas 1 4 8 4 17 Números e Operações 16 20 40 20 96 Tratamento da Informação 2 2 6 2 12 Total por documentos 26 37 72 37 172 Fonte: Dados da pesquisa O bloco Números e Operações é o que apresenta maior número de questões, o que não poderia ser diferente já que todas as questões estão de acordo com os descritores e este é o bloco de conteúdos com mais descritores logo também é o bloco com maior numero de questões.
2- Quanto ao grau de dificuldade das questões Tabela 2 Grau de dificuldade das questões analisadas. Blocos de Conteúdos Básico Intermediário Avançado Espaço e Forma 17 18 12 Grandezas e Medidas 8 9 0 Números e Operações 37 46 13 Tratamento da Informação 1 7 4 Total 63 80 29 Fonte: Dados da pesquisa Na tabela acima, pode-se observar que a maioria das questões de todos os blocos tem o grau de dificuldade intermediário. E apenas o bloco Tratamento da Informação apresenta mais questões com o grau de dificuldade avançado do que o grau básico.
3- Quanto à formulação das questões Gráfico 1 Formulação das questões analisadas. (Fonte: Dados da Pesquisa) De acordo com o gráfico acima mais de 70% das questões tem seus textos contextualizados. E destas questões contextualizadas mais de 47% é de dificuldade média. Já das questões sem contextualização são pouco mais 28%, destas há um equilíbrio em as questões de dificuldade básicas e intermediárias. 4- Quanto a presença dos descritores nos documentos analisados Todos os descritores propostos estavam presentes nos documentos analisados sendo contemplado pelo menos uma vez em cada documento, houve um descritor o D26- Resolver problema com números racionais envolvendo as operações (adição, subtração, multiplicação,
divisão, potenciação). que apresentou nove questões, ou seja, em média duas questões por documento. 5- Quanto a análise de um modelo de prova aplicada Apenas o documento da Revista Nova Escola é um modelo de prova aplicada, os demais são modelos de questões para a preparação dos alunos para realizarem a avaliação. Na análise realizada neste modelo pode-se observar o reduzido número de questões que foram abordadas no bloco de conteúdo Grandezas e Medidas apenas uma questão para todo o bloco, sendo que há quatro descritores para este bloco de conteúdo. Outra fragilidade encontrada é que a maioria das questões apresenta-se como exercício a ser resolvido, e não como problemas contextualizados. Também observou-se que a maioria das questões tem o grau de dificuldade básico. Considerações Finais A pesquisa permite concluir que os descritores de matemática propostos para a Prova Brasil estão adequados aos objetivos propostos nos PCNs, que todas as questões foram elaboradas conforme com os descritores definidos nos documentos oficiais da Prova Brasil. Nos documentos analisados 72% das questões são contextualizadas, sendo que a maioria deles é de dificuldade intermediária. Já no modelo de prova analisado, uma grande fragilidade observada é o reduzido número de questões do bloco de conteúdos Grandezas e Medidas. Outro aspecto frágil, percebido na análise, é que a maioria das questões apresenta-se como exercício a ser resolvido, e não como problema contextualizado. Sugere-se que nos próximos exames as questões sejam distribuídas de forma a contemplar de modo igualitário os quatro blocos de conteúdos matemáticos e que as questões tenham suas formulações mais adequadas e contextualizadas, e atendam os princípios propostos nos Parâmetros Curriculares Nacionais. Referências BRASIL. Ministério da Educação e do Desporto. Secretaria Fundamental de Educação. Parâmetros Curriculares Nacionais. Brasília. MEC/SEF, 1998.
BRASIL. Ministério da Educação e do Desporto/INEP. Prova Brasil: avaliação do rendimento escolar. Disponível em http://provabrasil.inep.gov.br/. Acesso em 17/11/2009. BRASIL. Ministério da Educação e do Desporto. PDE: Plano de Desenvolvimento da Educação: Prova Brasil: ensino fundamental: matrizes de referência, tópicos e descritores. Brasília: MEC, SEB; Inep, 2008. REVISTA NOVA ESCOLA. PROVA BRASIL. Edição Especial nº 26, Editora Abril. São Paulo, ago. 2009. SECRETARIA DE ESTADO DA EDUCAÇÃO DO PARANÁ. Caderno de atividades- Matemática- Anos finais do Ensino Fundamental. 2009. Isabel Cristina Ribeiro. Acadêmica do Curso de Licenciatura em Matemática da UEPG e integrante do BIC Programa Institucional de Bolsas de Iniciação Científica. isa_bel.cristina@hotmail.com Mary Ângela Teixeira Brandalise. Professora Doutora do Departamento de Matemática e Estatística da UEPG e do Mestrado em Educação, e orientadora do projeto de pesquisa BIC cadastrado na Pró-reitoria de Pesquisa e Pós-graduação da UEPG. maryangela@uepg.br