Oficina de apropriação de resultados SABE Avalie Ensino Médio Matemática

Transcrição

1 Oficina de apropriação de resultados SABE Avalie Ensino Médio Matemática Dayane Tinoco Analista de Instrumento de Avaliação

2 Centro de Políticas Públicas e Avaliação da Educação

3 Objetivo Realizar a análise pedagógica dos resultados das avaliações de desempenho, aplicadas na Bahia no SABE Avalie Ensino Médio para o (re) planejamento de ações pedagógicas.

4 Avaliação Educacional Testes de Proficiência Oferecer uma medida Desempenho Escolar Questionários Contextuais

5 Matriz de Referência

6 Testes de Proficiência Os testes de proficiência têm como objetivo aferir habilidades que são esperadas dos alunos em diferentes etapas de escolarização. Essas habilidades são descritas por descritores. Um conjunto de descritores formam a Matriz de Referência.

7 Habilidades Ao falarmos da relação Testes, Habilidades, Descritores e Matriz de referência pensamos: O que compreendemos por Habilidades?

8 Habilidades Segundo Perrenoud (1999), competências referem-se ao domínio prático de um tipo de tarefas e de situações. Tais domínios práticos só podem ser alcançados se junto com eles forem desenvolvidos as habilidades dos alunos, o que só se pode realizar a partir da compreensão do conteúdo que explica aquele domínio. Vamos ver dois exemplos? PERRENOUD, P. Avaliação: da excelência à regulação das aprendizagens, entre duas lógicas. Porto Alegre: Artmed, 1999.

9 Habilidades Exemplo 1: desenvolver o domínio prático da Matemática nas tarefas cotidianas dos alunos. Para tal, precisamos desenvolver as habilidades numéricas desses alunos, introduzindo conceitos sobre número, quantidade, agrupamento, etc... Exemplo 2 (matriz de referência): a capacidade de medir grandezas, requer o desenvolvimento de habilidades como: resolver problema envolvendo o calculo de perímetro de figuras planas; resolver problema envolvendo o calculo de área de figuras planas; resolver problema envolvendo volume de um sólido.

10 Matriz de Referência A Matriz de Referência apresenta o objeto de uma avaliação. Tem caráter de universalidade. Orienta na elaboração de itens.

11 Matriz de Referência para Avaliação Elemento base de origem dos testes utilizados no SABE. Garante legitimidade e transparência à avaliação. É formada por um conjunto de descritores que, agrupados em tópicos/temas, apresentam as habilidades consideradas básicas e possíveis de serem aferidas por meio do instrumento utilizado em avaliações em larga escala. Não abarca todo currículo escolar. Por isso, não pode ser confundida com parâmetros curriculares, Base Curricular Comum - BCC, procedimentos ou estratégias de ensino ou Orientações Teórico-Metodológicas - OTM, nem com o conteúdo a ser trabalhado pelo professor em sala de aula.

12 Vejamos um exemplo Conteúdo: Tratamento da Informação Ler tabelas e/ou Gráficos Simulação de Pesquisas Elaboração e aplicação de questionários Organização dos dados Interpretação dos resultados da Pesquisa Construção de gráficos e /ou tabelas Ler e interpretar informações e dados apresentados em tabelas. Ler e interpretar informações e dados apresentados em gráficos de coluna.

13 Vejamos um exemplo para a sala de aula Pesquisa sobre time de futebol Separar alunos em grupo e pedir que façam um questionário com questões sobre o assunto da pesquisa Após coleta dos dados, fazer a análise criando gráficos e tabelas A partir dos resultados encontrados, elaborar problemas envolvendo os dados coletados pelos alunos, pedir que resolvam e discutir com eles Pedir os alunos que apliquem o questionário na escola com professores e alunos Pedir que os alunos apresentem o trabalho Como avaliar?

14 Vejamos um exemplo para uma avaliação em larga escala

15 Matriz de Referência É formada por um conjunto de tópicos ou temas que representam uma subdivisão de acordo com conteúdo, competências de área e habilidades. Cada tema apresenta um conjunto de habilidades Cada habilidade é descrita por um descritor.

16 Matriz de Referência

17 Espaço e Forma Grandezas e Medidas Números e Operações Tratamento da Informação

18 Matriz de Referência CONJUNTO DE DESCRITORES conteúdo programático na área de conhecimento a ser avaliada nível de operação mental necessário para a aprendizagem Descritores originados do cruzamento entre conteúdos programáticos e as habilidades e competências cognitivas que lhes são próprias. 4

19 Matriz de Referência Em Matemática, as competências englobam três níveis. Veja um exemplo em Geometria. Conceituação - Firmar conceitos e reconhecer figuras geométricas planas ou espaciais. Manipulação - Mobilizar conceitos e propriedades geométricas para estabelecer relações ou efetuar cálculos envolvendo elementos de uma figura. Aplicação - Utilizar conceitos e propriedades geométricas para resolver problemas.

20 Matriz de Referência Vamos conhecer, em seguida, a Matriz de Referência para a Avaliação do estado da Bahia.

21

22

23

24

25

26

27

28

29

30 Teste e itens

31 Itens É uma questão do teste de larga escala. Avalia uma única habilidade, portanto o item é unidimensional. Obtém um resultado por estudante, que permite avaliar as hipóteses levantadas por ele (distratores).

32 Partes do Item Enunciado Suporte Comando Gabarito Distratores

33 Itens Esse exemplo não é um item, pois ele avalia mais de uma habilidade. O estudante tem de realizar o cálculo do perímetro e ainda fazer uma conversão de unidade (m/km).

34 Itens Este NÃO é um exemplo de Item Referência:

35

36 Itens Vamos observar e analisar alguns itens.

37 Atividade 1: Os Itens do Teste 1) Resolvam os itens. 2) Elaborem hipóteses cognitivas para os distratores (alternativas erradas). 3) Identifiquem a habilidade avaliada pelo item em análise. 4) Identifiquem o domínio

38 Vamos analisar as alternativas de resposta! Qual a alternativa correta? Justifique os distratores... A: 8,9% B: 8,0% C: 51,7% D: 28,7%

39 Vamos analisar as alternativas de resposta! Qual a alternativa correta? Justifique os distratores... A: 10,3% B: 54,3% C: 11,2% D: 16,2% E: 7,4%

40 Vamos analisar as alternativas de resposta! Qual a alternativa correta? Justifique os distratores... A: 41,6% B: 25,3% C: 16,5% D: 14,7%

41 A: 34,8% B: 12,9% C: 9,2% D: 28,3% E: 14,3% Vamos analisar as alternativas de resposta! Qual a alternativa correta? Justifique os distratores...

42 A: 15,5% B: 29,0% C: 41,4% D: 12,1% Vamos analisar as alternativas de resposta! Qual a alternativa correta? Justifique os distratores...

43 Padrão de desempenho

44 Padrão de Desempenho

45 Padrão de Desempenho Mas qual o significado desses intervalos? Vamos fazer a leitura dos Padrões de Desempenho para o 2º ano...

46

47

48

49

50

51

52

53

54

55

56

57 Interpretação Pedagógica dos Resultados

58 Como os resultados podem ser interpretados?

59 Resultados Avalie BA Participação Proficiência média médias comparadas Distribuição do percentual de alunos por nível de proficiência e Padrão de Desempenho Percentual de acerto por descritor

60 Vejamos a interpretação de um resultado (fictício) de Matemática.

61

62

63

64 Participação Quando o percentual de participação está acima de 80%, podemos generalizar este resultado para toda a turma/ou município/ ou projeto. Quando o percentual estiver abaixo de 80%, vamos considerar apenas os alunos que efetivamente realizaram o teste.

65 Participação De que forma você acha que a participação pode interferir nos resultados?

66 Padrões de desempenho

67 Padrões de Desempenho Grau de realização das ações educacionais Caracterização do desempenho escolar Políticas públicas voltadas à promoção da equidade Estabelecimento e monitoramento das metas de qualidade educacional Padrões de desempenho estudantil Identificação do percentual de alunos em risco pedagógico (evasão, reprovação ou abandono)

68

69

70

71

72

73

74

75

76

77

78

79

80