OFICINA DE APROPRIAÇÃO DE RESULTADOS Carolina Augusta Assumpção Gouveia

Transcrição

1 OFICINA DE APROPRIAÇÃO DE RESULTADOS 2011 Carolina Augusta Assumpção Gouveia

2 Objetivo Analisar e interpretar os resultados do SAEPI para (re)planejamento das ações pedagógicas implementadas em sala de aula, a serem definidas pelas escolas envolvidas no processo de avaliação.

3 Seção 1 Matriz de Referência

4 O CAEd e o SAEPI Nessas avaliações, utilizam-se instrumentos chamados de testes de proficiência e também questionários contextuais aplicados aos estudantes, professores e diretores das unidades escolares, com o objetivo de oferecer à sociedade uma medida do desempenho escolar.

5 Como são construídos os testes de proficiência que permitem medir o desempenho escolar?

6 Como são construídos os testes de proficiência que permitem medir o desempenho escolar? Os testes são construídos com base na matriz de referência!

7 Aspectos a serem considerados em uma Matriz Constitui um parâmetro de orientação; Apresenta o objeto da avaliação; Orienta a elaboração de itens; Caráter de universalidade (alunos).

8 Aspectos a serem considerados em uma Matriz Ressaltamos que as matrizes de referência não englobam todo o currículo escolar. Um recorte é feito com base no que é possível aferir por meio do tipo de instrumento de medida utilizado na avaliação e que, ao mesmo tempo, é representativo do que está contemplado nos currículos. Vejamos um exemplo:

9 Tema: Tratamento da Informação Exemplo: D27 - Ler informações e dados apresentados em tabelas. Tema para simulação de Pesquisas Construção de Tabelas Tabelas Elaboração e aplicação de questionários Organização dos dados coletados Construção de Gráficos Gráficos D28 - Ler informações e dados apresentados em gráficos

10 A Matriz de Matemática está estruturada em quatro temas: Espaço e Forma Grandezas e Medidas Números, Operações e Álgebra Tratamento da Informação cada tema apresenta conteúdos com base nos quais são elaborados descritores que expressam habilidades.

11 E o que se entende por habilidades? Competências e Habilidades Competências referem-se às diferentes modalidades estruturais da inteligência que compreendem determinadas operações que o sujeito utiliza para estabelecer relações com e entre os objetos físicos, conceitos, situações, fenômenos e pessoas. As habilidades instrumentais referem-se especificamente ao plano do saber fazer e decorrem, diretamente, do nível estrutural das competências já adquiridas e que se transformam em habilidades. PERRENOUD, P. Práticas pedagógicas, profissão docente e formação. Lisboa: Dom Quixote, 1993

12 E o que são descritores?

13 Aspectos a considerar sobre Descritores Os descritores têm origem na associação entre os conteúdos curriculares e as operações mentais desenvolvidas pelo aluno que se traduzem em certas habilidades; Constituem uma sumária descrição das habilidades esperadas ao final de cada período escolar avaliado; Implicam, como fundamento, aspectos conceituais ou teóricos relacionados a diferentes áreas do conhecimento a serem avaliadas.

14 Aspectos a considerar sobre Descritores A função dos descritores é, portanto, indicar as habilidades que serão objeto de avaliação, no conjunto de itens que compõe o teste em cada período de escolaridade. Os descritores: - pretendem indicar quais as habilidades que se espera que os alunos tenham desenvolvido; - constituem a referência para a elaboração dos itens que devem compor o teste de desempenho. É a matéria-prima para elaboração dos itens.

15 Matriz de Referência de Matemática - 5º ano EF Tema: Números e Operações Álgebra e Funções Descritor: D19 - Resolver problema com números naturais, envolvendo diferentes significados da adição ou subtração: Item

16 O QUE É UM ITEM? É uma questão do teste de larga escala. Avalia uma única habilidade, portanto o item é unidimensional. Obtém um resultado por estudante, que permite avaliar as hipóteses levantadas por ele.

17 O que devemos considerar em um item Grau de Dificuldade Está relacionado ao percentual de estudantes que respondem corretamente ao item. Assim, quanto menor o percentual de acerto, maior a dificuldade do item. Discriminação Capacidade do item de discriminar, entre os estudantes, aqueles que desenvolveram habilidades e os que não desenvolveram.

18 O ITEM E SUAS PARTES Suporte Comando Distratores Gabarito

19 Atividade 1: Os Itens do Teste Resolvam os itens. Identifiquem a habilidade avaliada pelo item em análise. Elaborem hipóteses cognitivas para os distratores (alternativas erradas).

20

21

22

23

24

25

26

27

28

29

30 Estadual 100,0 Acertos por descritor SAEPI Matemática 5EF 90,0 88,0 89,4 80,0 70,0 62,4 70,9 67,8 60,0 50,0 40,0 53,5 54,9 34,5 33,0 42,5 45,7 42,2 52,0 42,6 55,1 51,2 37,6 43,6 54,1 36,4 49,3 34,6 30,0 20,0 17,0 28,3 28,8 25,6 28,3 21,0 10,0 0,0 D01 D02 D03 D04 D05 D06 D07 D08 D09 D10 D11 D12 D13 D14 D15 D16 D17 D18 D19 D20 D21 D22 D23 D24 D25 D26 D27 D28 Espaço e Forma Grandezas e medidas Números e Operações Tratamento da Inform

31 D01: Identificar a localização/movimentação de objeto em mapas, croquis e outras representações gráficas. 100,0 90,0 D05: Reconhecer a conservação ou modificação de medidas dos lados, do perímetro, da área em ampliação e/ou redução de figuras poligonais usando malhas quadriculadas. 88,0 89,4 80,0 70,0 62,4 70,9 67,8 60,0 50,0 40,0 53,5 54,9 34,5 33,0 42,5 45,7 42,2 52,0 42,6 55,1 51,2 37,6 43,6 54,1 36,4 49,3 34,6 30,0 20,0 17,0 28,3 28,8 25,6 28,3 21,0 10,0 0,0 D01 D02 D03 D04 D05 D06 D07 D08 D09 D10 D11 D12 D13 D14 D15 D16 D17 D18 D19 D20 D21 D22 D23 D24 D25 D26 D27 D28 Espaço e Forma Grandezas e medidas Números e Operações Tratamento da Inform

32 D01: Identificar a localização/movimentação de objeto em mapas, croquis e outras representações gráficas.

33 Os estudantes deveriam observar que um retângulo foi dividido em 20 retângulos menores, nos quais estão desenhadas algumas figuras geométricas e, a partir daí, associar o primeiro elemento do par ordenado com a coluna correspondente e o segundo elemento com a linha correspondente. Em seguida eles deveriam identificar a figura que está no cruzamento dessa linha com essa coluna, ou seja, o círculo. Os estudantes que marcaram a alternativa C, possivelmente, consideraram apenas uma das referências, a letra S ou o número 3. Já os estudantes que optaram pela alternativa B, possivelmente, fizeram uma leitura incorreta da linha ou da coluna correspondente.

34 D08: Estabelecer relações entre unidades de medida de tempo. 100,0 D09: Estabelecer relações entre o horário de início e término e/ou o intervalo da duração de um evento ou acontecimento. 90,0 88,0 89,4 80,0 70,0 62,4 70,9 67,8 60,0 50,0 40,0 53,5 54,9 34,5 33,0 42,5 45,7 42,2 52,0 42,6 55,1 51,2 37,6 43,6 54,1 36,4 49,3 34,6 30,0 20,0 17,0 28,3 28,8 25,6 28,3 21,0 10,0 0,0 D01 D02 D03 D04 D05 D06 D07 D08 D09 D10 D11 D12 D13 D14 D15 D16 D17 D18 D19 D20 D21 D22 D23 D24 D25 D26 D27 D28 Espaço e Forma Grandezas e medidas Números e Operações Tratamento da Inform

35 D09: Estabelecer relações entre o horário de início e término e/ou o intervalo da duração de um evento ou acontecimento.

36 Os estudantes devem identificar o início e a duração do evento esportivo citado no enunciado para, em seguida, verificar que o horário de término corresponde à adição de 8h + 3h30min. O cálculo mental e o algoritmo da adição surgem como as principais estratégias para a resolução desse problema, que não necessita da conversão entre as medidas de tempo hora e minuto. A alternativa B (12,4%) indica que esses estudantes confundiram o horário de início com o horário de término do evento, associando o horário de término às 8h, e incluindo o horário de 8h no cálculo. Já aqueles que marcaram a alternativa C (11,2%), provavelmente, realizaram a contagem incluindo o horário de início (8h).

37 D11: Resolver problema envolvendo o cálculo do perímetro de figuras planas, desenhadas em malhas quadriculadas. 100,0 D12: Resolver problema envolvendo o cálculo ou estimativa de áreas de figuras planas, desenhadas em malhas quadriculadas. 90,0 88,0 89,4 80,0 70,0 62,4 70,9 67,8 60,0 50,0 40,0 53,5 54,9 34,5 33,0 42,5 45,7 42,2 52,0 42,6 55,1 51,2 37,6 43,6 54,1 36,4 49,3 34,6 30,0 20,0 17,0 28,3 28,8 25,6 28,3 21,0 10,0 0,0 D01 D02 D03 D04 D05 D06 D07 D08 D09 D10 D11 D12 D13 D14 D15 D16 D17 D18 D19 D20 D21 D22 D23 D24 D25 D26 D27 D28 Espaço e Forma Grandezas e medidas Números e Operações Tratamento da Inform

38 D12: Resolver problema envolvendo o cálculo ou estimativa de áreas de figuras planas, desenhadas em malhas quadriculadas.

39 D12: Resolver problema envolvendo o cálculo ou estimativa de áreas de figuras planas, desenhadas em malhas quadriculadas. Avançado: Os estudantes devem examinar a figura e observar a indicação da medida dos lados do quadradinho no alto à direita da malha para concluírem que a medida de sua área equivale a 1 cm². Em seguida, devem contar os quadradinhos pintados de cinza, considerando que alguns são pintados pela metade, percebendo que em cada hexágono que compõem esta figura há 3 quadradinhos coloridos de cinza, obtendo um total de 12 quadradinhos.como a medida da área de cada quadradinho é igual 1 cm², a medida da área de doze quadradinhos será igual a 12 cm²

40 D25: Resolver problema com números racionais expressos na forma decimal envolvendo diferentes significados da adição ou subtração. 100,0 90,0 D23: Resolver problema utilizando a escrita decimal de cédulas e moedas do sistema monetário brasileiro. 88,0 89,4 80,0 70,0 62,4 70,9 67,8 60,0 50,0 40,0 53,5 54,9 34,5 33,0 42,5 45,7 42,2 52,0 42,6 55,1 51,2 37,6 43,6 54,1 36,4 49,3 34,6 30,0 20,0 17,0 28,3 28,8 25,6 28,3 21,0 10,0 0,0 D01 D02 D03 D04 D05 D06 D07 D08 D09 D10 D11 D12 D13 D14 D15 D16 D17 D18 D19 D20 D21 D22 D23 D24 D25 D26 D27 D28 Espaço e Forma Grandezas e medidas Números e Operações Tratamento da Inform

41 D23: Resolver problema utilizando a escrita decimal de cédulas e moedas do sistema monetário brasileiro.

42 D23: Resolver problema utilizando a escrita decimal de cédulas e moedas do sistema monetário brasileiro. Básico: Para resolvê-lo, os estudantes devem considerar o preço da revista e a forma de pagamento por meio de duas notas de 5 reais. Os estudantes que marcaram a alternativa B (24,6%), provavelmente, consideraram apenas uma nota de 5 reais e realizaram a subtração tirando 5 de 8 reais. Este tipo de raciocínio demonstra que eles, possivelmente, não se apropriaram do contexto do item.

43 Resolver problema com números naturais, envolvendo diferentes significados da adição ou subtração Calcular o resultado de uma adição ou subtração de números naturais. 100,0 90,0 88,0 89,4 80,0 70,0 62,4 70,9 67,8 60,0 50,0 40,0 53,5 54,9 34,5 33,0 42,5 45,7 42,2 52,0 42,6 55,1 51,2 37,6 43,6 54,1 36,4 49,3 34,6 30,0 20,0 17,0 28,3 28,8 25,6 28,3 21,0 10,0 0,0 D01 D02 D03 D04 D05 D06 D07 D08 D09 D10 D11 D12 D13 D14 D15 D16 D17 D18 D19 D20 D21 D22 D23 D24 D25 D26 D27 D28 Espaço e Forma Grandezas e medidas Números e Operações Tratamento da Inform

44 Calcular o resultado de uma adição ou subtração de números naturais.

45 D17: Calcular o resultado de uma adição ou subtração de números naturais. Básico: Para resolver esta subtração, os estudantes podem ter desenvolvido estratégias, como por exemplo, a contagem regressiva de 42 até 33, recorrendo à contagem nos dedos ou ao uso do algoritmo da subtração, alinhando os números à direita de modo que os algarismos de cada ordem fiquem posicionados verticalmente, dentre outros procedimentos. Esses processos de resolução demandam o conhecimento do Sistema de Numeração Decimal com relação à composição e decomposição numérica.

46 100,0 D20 - Resolver problema com números naturais, envolvendo diferentes significados da multiplicação ou divisão. D18 - Calcular o resultado de uma multiplicação ou divisão de números naturais. 90,0 88,0 89,4 80,0 70,0 62,4 70,9 67,8 60,0 50,0 40,0 53,5 54,9 34,5 33,0 42,5 45,7 42,2 52,0 42,6 55,1 51,2 37,6 43,6 54,1 36,4 49,3 34,6 30,0 20,0 17,0 28,3 28,8 25,6 28,3 21,0 10,0 0,0 D01 D02 D03 D04 D05 D06 D07 D08 D09 D10 D11 D12 D13 D14 D15 D16 D17 D18 D19 D20 D21 D22 D23 D24 D25 D26 D27 D28 Espaço e Forma Grandezas e medidas Números e Operações Tratamento da Inform

47 D20 - Resolver problema com números naturais, envolvendo diferentes significados da multiplicação ou divisão.

48 D20 - Resolver problema com números naturais, envolvendo diferentes significados da multiplicação ou divisão. Adequado: Os estudantes devem compreender que o contexto do problema sugere o agrupamento de carros em 7 fileiras, tendo cada uma, 18 carros. Os estudantes dessa etapa de escolarização devem ser capazes de reconhecer os diferentes significados da multiplicação, como a proporcionalidade, a adição de parcelas iguais, a configuração retangular ou a ação combinatória.

49 D20 - Resolver problema com números naturais, envolvendo diferentes significados da multiplicação ou divisão. Avançado: A ação operatória envolvida é multiplicativa com significado de proporcionalidade. A proporção é de 4 cadeiras para cada mesa. É importante que os estudantes ao final da 4ª série/5º ano do Ensino Fundamental sejam capazes de mobilizar cognitivamente estratégias de cálculos atreladas a compreensão dos diferentes significados da multiplicação aplicadas nas diversas áreas do conhecimento de modo a avançarem no estudo de Matemática.

50 Reconhecer a decomposição de números naturais nas suas diversas ordens. 100,0 Reconhecer a composição e a decomposição de números naturais em sua forma polinomial. 90,0 88,0 89,4 80,0 70,0 62,4 70,9 67,8 60,0 50,0 40,0 53,5 54,9 34,5 33,0 42,5 45,7 42,2 52,0 42,6 55,1 51,2 37,6 43,6 54,1 36,4 49,3 34,6 30,0 20,0 17,0 28,3 28,8 25,6 28,3 21,0 10,0 0,0 D01 D02 D03 D04 D05 D06 D07 D08 D09 D10 D11 D12 D13 D14 D15 D16 D17 D18 D19 D20 D21 D22 D23 D24 D25 D26 D27 D28 Espaço e Forma Grandezas e medidas Números e Operações Tratamento da Inform

51 Reconhecer a decomposição de números naturais nas suas diversas ordens. Adequado: Na 4ª série/5º ano espera-se que os estudantes demonstrem compreensão da estrutura do Sistema de Numeração Decimal, sendo capazes de reconhecer a decomposição de números com 5 ordens e descrever os agrupamento de base dez, ou seja, 10 unidades formando 1 dezena, 10 dezenas formando 1 centena e assim por diante. A decomposição de números é uma das habilidades requeridas para a aprendizagem significativa das operações fundamentais.

52 100,0 90,0 88,0 89,4 80,0 70,0 62,4 70,9 67,8 60,0 50,0 40,0 53,5 54,9 34,5 33,0 42,5 45,7 42,2 52,0 42,6 55,1 51,2 37,6 43,6 54,1 36,4 49,3 34,6 30,0 20,0 17,0 28,3 28,8 25,6 28,3 21,0 10,0 0,0 D01 D02 D03 D04 D05 D06 D07 D08 D09 D10 D11 D12 D13 D14 D15 D16 D17 D18 D19 D20 D21 D22 D23 D24 D25 D26 D27 D28 Espaço e Forma Grandezas e medidas Números e Operações Tratamento da Inform

53 D26: Resolver problema envolvendo noções de porcentagem (25%, 50%, 100%).

54 D26: Resolver problema envolvendo noções de porcentagem (25%, 50%, 100%). Avançado: Para resolver este item, é fundamental que os estudantes reconheçam que 25% corresponde à fração 25/100 que na forma simplificada equivale a 1/4. Portanto, quando calculamos 25% de um valor estamos calculando a quarta parte desse valor. Assim, estes estudantes calculam a quarta parte de ou ainda, efetuam a multiplicação de por 0,25. O estudo de porcentagem é primordial devido a suas diversas aplicações em situações do cotidiano.

55 D28: Ler informações e dados apresentados em gráficos (particularmente em gráficos de colunas). 100,0 90,0 88,0 89,4 80,0 70,0 62,4 70,9 67,8 60,0 50,0 40,0 53,5 54,9 34,5 33,0 42,5 45,7 42,2 52,0 42,6 55,1 51,2 37,6 43,6 54,1 36,4 49,3 34,6 30,0 20,0 17,0 28,3 28,8 25,6 28,3 21,0 10,0 0,0 D01 D02 D03 D04 D05 D06 D07 D08 D09 D10 D11 D12 D13 D14 D15 D16 D17 D18 D19 D20 D21 D22 D23 D24 D25 D26 D27 D28 Espaço e Forma Grandezas e medidas Números e Operações Tratamento da Inform

56 D28: Ler informações e dados apresentados em gráficos (particularmente em gráficos de colunas).

57 Os estudantes devem compreender que o maior número informado na tabela corresponde ao município que possui o maior gasto médio por pessoa. Devem mobilizar esquemas de ordenação desses números racionais, de forma a identificar o número decimal 68,23 como o maior dentre os informados na tabela. A escolha da alternativa A (5,8%) indica que esses estudantes, possivelmente, ao analisarem os dados da tabela, desconsideraram as informações relativas ao município de Niterói ou, ainda, equivocaram-se na ordenação dos números.

58 Acertos por descritor SAEPI Matemática 5EF Municipal 100,0 90,0 80,0 83,9 84,4 70,0 60,0 50,0 40,0 30,0 20,0 57,4 47,3 50,7 33,0 31,2 39,0 44,9 38,8 16,3 48,4 27,7 27,6 24,7 40,1 52,5 64,1 48,5 34,4 40,0 50,1 32,8 45,9 28,5 27,1 20,2 62,0 10,0 0,0 D01 D02 D03 D04 D05 D06 D07 D08 D09 D10 D11 D12 D13 D14 D15 D16 D17 D18 D19 D20 D21 D22 D23 D24 D25 D26 D27 D28 Espaço e Forma Grandezas e medidas Números e Operações Tratamento da Inform

59 Seção 2 Interpretação pedagógica dos resultados

60 Escala de Proficiência

61

62

63

64

65 Competências

66

67 Competências

68 Nível de Proficiência

69

70

71

72

73 Padrões de Desempenho

74 Padrão de Desempenho: Adequado

75 Abaixo do Básico

76 Básico

77 Adequado

78 Padrão de Desempenho: Adequado

79 Formas de Apresentação dos Resultados Proficiência média médias comparadas Participação Distribuição do percentual de alunos por nível de proficiência e padrão de desempenho Evolução do percentual de alunos por padrão de desempenho

80 Vamos observar a escala... Vamos localizar as proficiências médias na escala de proficiência? Como você interpreta a posição de sua escola?

81

82 Participação Como você interpreta a participação do Estado e de sua Escola? O que significa cada um desses dados numéricos?

83 Participação Se 38 fosse o número de estudantes que NÃO participaram da avaliação na GRE e na Escola? Como seria esse percentual?

84 Participação De que forma você acha que a participação pode interferir nos resultados de nossa escola? Pense em aspectos positivos e negativos!

85

86 Quais são as habilidades desenvolvidas por aproximadamente 19,6% dos estudantes? E por 46,2% dos estudantes? E por 27% dos estudantes? E por 7,1% dos estudantes?

87

88

89

90

91 Distribuição do percentual de alunos por nível de proficiência e padrão de desempenho Observe o desenvolvimento de algumas habilidades referentes a padrões de desempenhos diferentes. Cite algumas habilidades, em cada padrão de desempenho, mostrando o desenvolvimento do grau de complexidade em cada uma delas.

92 De acordo com o número de alunos que participaram da avaliação da rede Estadual, referente ao Estado do Piauí, calcule: Quantos alunos estão em cada Padrão de Desempenho

93 De acordo com o número de alunos que participaram da avaliação da rede Estadual, referente ao Estado do Piauí, calcule o número de alunos em cada Padrão de Desempenho

94 Número de Alunos Percentual %? 19,6% 1752

95 Distribuição do percentual de alunos por nível de proficiência e padrão de desempenho Cálculo... variação proporcional direta? = x 9841/100 = x/19,6 x = 1752 Número de Alunos Percentual %? 19,6%

96 1752 Vamos realizar o cálculo para os demais Padrões de Desempenho!

97

98

99 4 2

100 Caracterização do desempenho escolar Grau de realização das ações educacionais Políticas públicas voltadas à promoção da equidade Estabelecimento e monitoramento das metas de qualidade educacional Padrões de desempenho estudantil Identificação do percentual de alunos em risco pedagógico (evasão, reprovação ou abandono)

101 Uso dos Resultados 1. Gestor De Rede: Planejamento e execução de políticas públicas; Criação de metas de qualidade e equidade educacionais; Implementação de medidas de responsabilização; Políticas de incentivos diretos ou indiretos; Ações de formação continuada de professores. De Escola: Elaboração do projeto da escola Monitoramento da qualidade de ensino Subsídio para avaliação institucional

102 Uso dos Resultados 2. Professor Intervenção pedagógica Elaboração de projetos especiais Foco nos estudantes com dificuldades Ações de reforço escolar Planejamento das ações de sala de aula Visão proativa quanto ao desenvolvimento de habilidades e competências ao longo da educação básica

103 Uso dos Resultados 3. estudante Acompanhamento individual do desempenho escolar pelos estudantes e seus familiares Informações sobre a qualidade dos serviços educacionais oferecidos

104 Vamos localizar as proficiências médias na escala de proficiência? Qual é o percentual de estudantes do ESTADO que estão ABAIXO DO BÁSICO, BÁSICO, ADEQUADO e AVANÇADO? Qual é a quantidade de estudantes do MUNICÍPIO em cada padrão de desempenho? Qual é o percentual de estudantes da sua ESCOLA que estão ABAIXO DO BÁSICO, BÁSICO, ADEQUADO e AVANÇADO? Qual é a quantidade de estudantes da sua escola em cada padrão de desempenho? Como você interpreta a posição de sua escola em relação ao resultado do ESTADO? Como você interpreta a participação de alunos no ESTADO e em sua escola? Essa participação é representativa? Qual é o percentual de estudantes do ESTADO nos intervalos anteriores ao padrão de desempenho Básico? E na sua escola? 104

105 Quais ações pedagógicas podemos implementar em sala de aula para o desenvolvimento de habilidades nesses grupos de estudantes?

106 OFICINA DE APROPRIAÇÃO DE RESULTADOS 2011