Oficina de Apropriação de Resultados de 2012 Sistema Baiano de Avaliação Educacional (Sabe)

Transcrição

1 Oficina de Apropriação de Resultados de 2012 Sistema Baiano de Avaliação Educacional (Sabe) Avalie Ensino Médio Ciências da Natureza Esteban Moreno e Márcia Hara

2 Objetivo Realizar a análise pedagógica dos resultados das avaliações de desempenho, aplicadas na Bahia no SABE Avalie Ensino Médio para o (re) planejamento de ações pedagógicas.

3 Seção 1 Matriz de Referência

4 Matriz de Referência para Avaliação Elemento base de origem dos testes utilizados no SABE. Garante legitimidade e transparência à avaliação. É formada por um conjunto de descritores que, agrupados em tópicos/temas, apresentam as habilidades consideradas básicas e possíveis de serem aferidas por meio do instrumento utilizado em avaliações em larga escala. Não abarca todo currículo escolar. Por isso, não pode ser confundida com parâmetros curriculares, Base Curricular Comum - BCC, procedimentos ou estratégias de ensino ou Orientações Teórico-Metodológicas - OTM, nem com o conteúdo a ser trabalhado pelo professor em sala de aula.

5 Como a Matriz de Referência dá origem aos testes? Constitui um parâmetro de orientação; Apresenta o objeto da avaliação; Caráter de universalidade; Orienta a elaboração de itens.

6 Competências e Habilidades Algumas interpretações teóricas Competências referem-se às diferentes modalidades estruturais da inteligência que compreendem determinadas operações que o sujeito utiliza para estabelecer relações com e entre os objetos físicos, conceitos, situações, fenômenos e pessoas. As habilidades instrumentais referem-se especificamente ao plano do saber fazer e decorrem, diretamente, do nível estrutural das competências já adquiridas e que se transformam em habilidades. PERRENOUD, P. Práticas pedagógicas, profissão docente e formação. Lisboa: Dom Quixote, 1993

7 A Matriz de Ciências Humanas está estruturada em Domínios: I Matéria e Energia; II Terra e Universo; III Vida e Ambiente; IV Ser Humano e Saúde; V Tecnologia e Sociedade;

8 Aspectos a considerar sobre Descritores Os descritores têm origem na associação entre os conteúdos curriculares e as operações mentais desenvolvidas pelo aluno que se traduzem em certas habilidades. Constituem uma sumária descrição das habilidades esperadas ao final de cada período escolar avaliado.

9 Das Matrizes aos itens dos testes de proficiência Agrupa as habilidades passíveis de avaliação em um teste de proficiência. Representa uma subdivisão de acordo com o conteúdo, competênci as de área e habilidades. Matriz Domínio Item Descritor Avalia apenas uma única habilidade Descreve cada uma das habilidades da Matriz

10 O QUE É UM ITEM? É uma questão do teste de larga escala. Avalia uma única habilidade, portanto o item é unidimensional. Obtém um resultado por estudante, que permite avaliar as hipóteses levantadas por ele.

11 Grau de Dificuldade diz respeito à adequação entre a formulação do item e a capacidade de resposta do estudante. Considerar Discriminação capacidade do item de distinguir estudantes com diferentes níveis de habilidade.

12 O ITEM E SUAS PARTES Enunciado Comando Suporte Distrator Gabarito Distrator Distrator

13 Enunciado Distrator Comando Distrator Distrator Gabarito

14 - enfocar uma única situação-problema; - incluir no enunciado uma figura, um recorte de jornal ou revista, uma fotografia,ua elaboração; - redigir o enunciado de forma direta e afirmativa; - utilizar vocabulário adequado ao nível de escolaridade do estudante;

15 - excluir qualquer referência discriminatória quanto a etnia; religião, gênero ou orientação sexual; - observar as normas da ABNT na apresentação de textos e figuras; - não utilizar pegadinhas nem dicas ; - não utilizar termos como sempre, nunca, todo, totalmente.

16 estar diretamente relacionada a um único descritor da Matriz de Referência; formular de maneira positiva; a tarefa desejada em conexão com o problema proposto.

17 Quanto à Redação Enunciado: deve ser claro, preciso e conciso. Gabarito: exclusivamente um. Distratores: devem ser plausíveis. Suportes: devem conter informações relevantes.

18 Atividade 1: Os Itens do Teste 1) Resolvam os itens. 2) Elaborem hipóteses cognitivas para os distratores (alternativas erradas). 3) Identifiquem a habilidade avaliada pelo item em análise. 4) Identifiquem o domínio

19 Apresentem os itens! Vamos montar a nossa matriz!

20 Matriz de Referência Agora vamos relacionar a nossa matriz com a matriz de Avaliação do SABE! Percebem as semelhanças?

21

22

23

24

25

26

27

28

29

30 Resultado do percentual de acerto por descritor

31 Resultado do percentual de acerto por descritor

32 Vamos olhar para cada descritor e observar o percentual de acerto! Questões: Os resultados encontrados correspondem ao que observamos na sala de aula? Os menores percentuais são de descritores referente a conteúdos que os alunos tem mais dificuldades em sala de aula?

33 Vamos olhar para cada descritor e observar o percentual de acerto! Questões: Podemos relacionar o percentual de acerto de um descritor com outro um descritor? Ou seja, podemos dizer que se algum descritor tem percentual baixo, logo o outro também terá? Podemos dizer que se um descritor tem percentual baixo porque o percentual de acerto de um outro descritor também foi baixo? Tente identificar! Podemos dizer que um percentual de acerto de um descritor foi alto porque a habilidade é mais simples?

34 Vamos olhar para cada descritor e observar o percentual de acerto! Vamos observar os percentuais de acerto para Química, Biologia e Física. Como fizemos anteriormente, tentem levantar interpretações pedagógicas que auxiliem o trabalho do professor na sala de aula.

35 Seção Interpretação Pedagógica dos Resultados

36 Resultados Avalie BA Participação Proficiência média médias comparadas Distribuição do percentual de alunos por nível de proficiência e Padrão de Desempenho Percentual de acerto por descritor

37 Vejamos a interpretação de um resultado (fictício) de Química.

38

39 Vamos ver cada uma dessas partes!

40 Resultado de participação

41 Participação De que forma você acha que a participação pode interferir nos resultados?

42 Participação Quando o percentual de participação está acima de 80%, podemos generalizar este resultado para toda a turma/ou município/ ou projeto. Quando o percentual estiver abaixo de 80%, vamos considerar apenas os alunos que efetivamente realizaram o teste.

43 Resultado de desempenho Vamos pensar nos resultados de Bahia, DIREC e Escola, quais as primeiras considerações extraídas desse resultado? Tente comparar!

44 Resultado de Padrão de Desempenho

45 No slide anterior, vamos pensar nos resultados dos Padrões de Desempenho, mas o que são esses Padrões?

46 Padrões de desempenho

47 Padrões de Desempenho Grau de realização das ações educacionais Caracterização do desempenho escolar Políticas públicas voltadas à promoção da equidade Estabelecimento e monitoramento das metas de qualidade educacional Padrões de desempenho estudantil Identificação do percentual de alunos em risco pedagógico (evasão, reprovação ou abandono)

48

49

50

51

52

53

54

55

56

57

58

59

60

61

62 Resultado de Padrão de Desempenho

63 E se relacionarmos o percentual com o número de estudantes em cada padrão? Veja como realizar este cálculo:

64 100% dos alunos são 8804 alunos que realizaram a avaliação. Então, 13,9% (Padrão Muito Crítico) são quantos alunos? 100X = 8804*13,9 X = % ,9 % X Aproximadamente 1224 alunos do estado estão no Padrão Inicial.

65 Vamos realizar o cálculo para os Padrão Crítico: demais Padrões? Padrão Básico: Padrão Avançado:

66 Podemos, ainda, comparar os resultados de 2011 e 2012

67 Vejam, por outra representação, a distribuição dos alunos por padrão de desempenho

68 Atividade Prática Em grupos, analisem os resultados de Ciências da Natureza: - Identifique as proficiências médias. - Compare as proficiências médias do ano atual com as proficiências da avaliação do ano anterior. O que podemos dizer dessa comparação? - Compare a proficiência média da escola com a proficiência da Bahia e da Direc.

69

70

71

72

73

74