OFICINA DE APROPRIAÇÃO DE RESULTADOS 2011

Transcrição

1 OFICINA DE APROPRIAÇÃO DE RESULTADOS 2011

2 O CAEd Centro de Políticas Públicas e Avaliação da Educação, da UFJF, é uma instituição que elabora e desenvolve programas de avaliação sobre o rendimento escolar dos alunos de escola públicas, promovidos pelas Secretarias Estaduais de Educação. Também cria e promove cursos de formação, qualificação e aprimoramento aos profissionais da Educação de diversos Estados do Brasil, além de desenvolver software para a gestão de escolas públicas (como por exemplo, os projetos SisLame e SIMADE) com o objetivo de modernizar a gestão educacional. O CAEd também presta serviços de apoio para o desenvolvimento de projetos educacionais promovidos por iniciativas privadas, a exemplo de algumas ações da Fundação Roberto Marinho, do Instituto Unibanco e da Fundação Oi Futuro.

3

4 AVALIAR É refletir sobre uma determinada realidade, a partir de dados e informações, e emitir um julgamento que possibilite uma ação.

5 Tipos de Avaliação Avaliação Interna Processo de Aprendizagem Diversos Instrumentos de Avaliação Avaliação Formativa Teoria Clássica dos Testes (Nota) Avaliação Externa Produto (habilidades) Teste de Múltipla Escolha Teoria de Resposta ao Item (TRI)

6 Por que avaliar um sistema educacional Obter informações sobre o nível de desenvolvimento das habilidades dos estudantes com vistas à implementação de políticas públicas e à organização dos processos de ensino e de aprendizagem

7 Algumas características do SABE Quais são os objetivos do Sistema Baiano de Educação? O que o Avalie Ensino Médio avaliou em sua edição de 2011? Você acha que os resultados dessa avaliação podem ser utilizados para a melhoria da educação em nossa escola? Se sim, como?

8 Rede Estadual e Municipal Avalie Alfa: Língua Portuguesa e Matemática 2º ano EF. Rede Estadual Avalie Ensino Médio: Linguagens e Códigos, Matemática, Ciências Humanas e Ciências da Natureza 1ª SÉRIE DO ENSINO MÉDIO; 2ª SÉRIE DA EDUCAÇÃO PROFISSIONAL INTEGRADA AO ENSINO MÉDIO.

9 Alguns objetivos do Avalie Ensino Médio Desempenho escolar; Análise dos resultados possibilita intervenção pedagógica; Dados do Avalie Ensino Médio devem fazer parte da proposta de melhoria da qualidade da educação ofertada pela escola.

10 O CAEd e o Sistema Baiano de Educação Nessas avaliações, utilizam-se instrumentos chamados de testes de proficiência e também questionários contextuais aplicados aos estudantes, professores e diretores das unidades escolares, com o objetivo de oferecer à sociedade uma medida do desempenho escolar.

11 Como são construídos os testes de proficiência que permitem medir o desempenho escolar?

12

13 Objetivo Analisar e interpretar os resultados do SABE para (re)planejamento das ações pedagógicas implementadas em sala de aula, a serem definidas pelas escolas envolvidas no processo de avaliação.

14 Seção 1 Matriz de Referência

15 Como a Matriz de Referência dá origem aos testes? Constitui um parâmetro de orientação; Apresenta o objeto da avaliação; Caráter de universalidade; Orienta a elaboração de itens.

16 Ressaltamos que as matrizes de referência não englobam todo o currículo escolar. Um recorte é feito com base no que é possível aferir por meio do tipo de instrumento de medida utilizado na avaliação e que, ao mesmo tempo, é representativo do que está contemplado nos currículos.

17 A Matriz de Ciências Humanas está estruturada em tópicos: I. Memória e Representações II. Formas de conhecer e suas apropriações III. Sujeitos, identidades e alteridades IV. Relações e formas de poder V. Instituições e ordem social VI. Espacialidades, temporalidades e suas dinâmicas VII. Natureza, ambiente e cultura VIII. Trabalho, economia e sociedade IX. Ética, cidadania e direito

18 Matriz de Referência para Avaliação Elemento base de origem dos testes utilizados no Avalie Ensino Médio. Garante legitimidade e transparência à avaliação. É formada por um conjunto de descritores que, agrupados em tópicos/temas, apresentam as habilidades consideradas básicas e possíveis de serem aferidas por meio do instrumento utilizado em avaliações em larga escala. Não abarca todo currículo escolar. Por isso, não pode ser confundida com parâmetros curriculares, Base Curricular Comum - BCC, procedimentos ou estratégias de ensino ou Orientações Teórico- Metodológicas - OTM, nem com o conteúdo a ser trabalhado pelo professor em sala de aula.

19 MATRIZ DE REFERÊNCIA Conjunto de descritores Conteúdo programático na área de conhecimento a ser avaliada Nível de operação mental necessário para a aprendizagem Descritores originados do cruzamento entre conteúdos programáticos e as habilidades e competências cognitivas que lhes são próprias.

20 Algumas interpretações teóricas Competências e Habilidades Competências referem-se às diferentes modalidades estruturais da inteligência que compreendem determinadas operações que o sujeito utiliza para estabelecer relações com e entre os objetos físicos, conceitos, situações, fenômenos e pessoas. As habilidades instrumentais referem-se especificamente ao plano do saber fazer e decorrem, diretamente, do nível estrutural das competências já adquiridas e que se transformam em habilidades. PERRENOUD, P. Práticas pedagógicas, profissão docente e formação. Lisboa: Dom Quixote, 1993

21 Aspectos a considerar sobre Descritores Os descritores têm origem na associação entre os conteúdos curriculares e as operações mentais desenvolvidas pelo aluno que se traduzem em certas habilidades. Constituem uma sumária descrição das habilidades esperadas ao final de cada período escolar avaliado.

22 Aspectos a considerar sobre Descritores

23 O QUE É UM ITEM? É uma questão do teste de larga escala. Avalia uma única habilidade, portanto o item é unidimensional. Obtém um resultado por estudante, que permite avaliar as hipóteses levantadas por ele.

24 Das Matrizes aos itens dos testes de proficiência Agrupa as habilidades passíveis de avaliação em um teste de proficiência. Matriz Tema Tópico Representa uma subdivisão de acordo com o conteúdo, competências de área e habilidades. Item Descritor Avalia apenas uma única habilidade Descreve cada uma das habilidades da Matriz

25 Grau de Dificuldade diz respeito à adequação ent re a formulação do it em e a capacidade de resposta do estudante. Considerar Discriminação capacidade do item de dist inguir est udant es com diferentes níveis de habilidade.

26 Enunciado Suporte Comando Gabarito Distrator Distrator Distrator Distrator

27 - redigir o enunciado de forma direta e afirmat iva; - utilizar vocabulário adequado ao nível de escolaridade do estudante;

28 - enfocar uma única situaçãoproblema; - incluir no enunciado uma figura, um recorte de j ornal ou revista, uma fotografia,sua elaboração; - redigir o enunciado de forma direta e afirmativa; - utilizar vocabulário adequado ao nível de escolaridade do estudante;

29 - excluir qualquer referência discriminatória quanto a etnia; religião, gênero ou orientação sexual; - observar as normas da ABNT na apresentação de textos e figuras; - não utilizar pegadinhas nem dicas ; - não utilizar termos como sempre, nunca, todo, totalmente.

30 estar diretamente relacionada a um único descritor da Matriz de Referência; formular de maneira positiva; a tarefa desej ada em conexão com o problema proposto.

31 Quanto à Redação Enunciado: deve ser claro, preciso e conciso. Gabarito: exclusivamente um. Distratores: devem ser plausíveis. Suportes: devem conter informações relevantes.

32 Atividade 1: Os Itens do Teste Resolvam os itens. Identifiquem a habilidade avaliada pelo item em análise. Elaborem hipóteses cognitivas para os distratores (alternativas erradas).

33 HISTÓRIA

34

35

36

37

38

39

40

41

42

43

44

45

46

47

48

49

50

51 GEOGRAFIA

52

53

54

55

56

57

58

59

60

61

62

63

64

65

66

67 FILOSOFIA

68

69

70

71 SOCIOLOGIA

72

73

74

75

76

77

78

79

80

81 Acerto por descritores

82 100,0 1ª SÉRIE EM - HISTÓRIA Rede Estadual 90,0 80,0 70,0 60,0 50,0 40,0 30,0 20,0 32,9 33,3 33,7 31,9 22,6 44,8 35,2 40,4 42,6 40,1 26,0 33, ,6 39,2 34,7 35,1 10,0 14,6 0,0 D01 D02 D09 D10 D18 D19 D26 D29 D30 D34 D35 D36 D39 D40 D41 D45 D47 Média Total

83 100,0 2ª SÉRIE EDUCACAO PROFISSIONAL INTEGRADO HISTÓRIA - Rede Estadual 90,0 80,0 70,0 60,0 50,0 40,0 30,0 20,0 36,8 37,1 38,0 38,4 25,5 52,7 41,4 49,5 50,2 47,4 30,3 39, ,5 46,5 42,4 41,1 10,0 0,0 16,5 D01 D02 D09 D10 D18 D19 D26 D29 D30 D34 D35 D36 D39 D40 D41 D45 D47 Média Total

84 100,0 1ª SÉRIE EM - GEOGRAFIA Rede Estadual 90,0 80,0 70,0 60,0 50,0 40,0 30,0 36,0 46,7 35,8 41,5 46,2 34,9 47,1 42, ,2 20,0 10,0 20,2 21,4 27,1 23,9 24,4 21,8 0,0 D03 D04 D05 D11 D12 D20 D21 D22 D27 D31 D37 D38 D42 D43 D46 Média Total

85 100,0 2ª SÉRIE EDUCACAO PROFISSIONAL INTEGRADO GEOGRAFIA - Rede Estadual 90,0 80,0 70,0 60,0 50,0 40,0 30,0 20,0 10,0 44,0 52,8 40,7 47,9 21,8 24,9 34,4 56,6 41,0 28,0 56,0 25,8 49, ,6 39,6 0,0 D03 D04 D05 D11 D12 D20 D21 D22 D27 D31 D37 D38 D42 D43 D46 Média Total

86 Objetivos da oficina Nessa etapa da nossa oficina, iremos: Apresentar a descrição dos Intervalos de Proficiência de Ciências Humanas e a sua relação com as Matrizes de Referência para a Avaliação. Interpretar os Intervalos de Proficiência de Ciências Humanas considerando os agrupamentos de seus intervalos (Padrões de Desempenho Estudantil). Analisar e interpretar pedagogicamente os resultados.

87 Seção 2 Interpretação pedagógica dos resultados

88

89

90

91

92

93

94

95

96

97

98

99

100

101

102

103

104

105

106 Os padrões de desempenho estudantil são os balizadores dos diferentes graus de realização educacional alcançados pela escola. Por meio deles é possível analisar a distância de aprendizagem entre o percentual de estudantes que se encontra nos níveis mais altos de desempenho e aqueles que estão nos níveis mais baixos. A distância entre esses extremos representa, ainda que de forma alegórica, o abismo existente entre aqueles que têm grandes chances de sucesso escolar e, consequentemente, maiores possibilidades de acesso aos bens materiais, culturais e sociais; e aqueles para os quais o fracasso escolar e a exclusão social podem ser mera questão de tempo, caso a escola não reaja e promova ações com vistas à promoção da equidade.

107

108 Formas de Apresentação dos Resultados Proficiência média médias comparadas Participação Distribuição do percentual de alunos por nível de proficiência e padrão de desempenho Evolução do percentual de alunos por padrão de desempenho

109

110 Como você interpreta a participação?

111 Número de Alunos Percentual %? 22,7% Cálculo... variação proporcional direta? = x ,7 = 100.x 1.452,8 = 100.x 1.452,8/100 = x 14,528= x X= 14,5

112 Se fosse 20 o número de estudantes que NÃO participaram da avaliação, como seria esse percentual?

113 Participação De que forma você acha que a participação pode interferir nos resultados de nossa escola? Pense em aspectos positivos e negativos! Tempo para os participantes pensarem e apontarem esses aspectos... Apontar percentual suficiente para retratar a realidade da escola. Exemplo (próximo slide)

114

115 Quais são as habilidades desenvolvidas por aproximadamente 15,7% dos estudantes? E por 44,1% dos estudantes? E por 28,4% dos estudantes? E por 11,8% dos estudantes?

116

117

118 Caracterização do desempenho escolar Grau de realização das ações educacionais Políticas públicas voltadas à promoção da equidade Estabelecimento e monitoramento das metas de qualidade educacional Padrões de desempenho estudantil Identificação do percentual de alunos em risco pedagógico (evasão, reprovação ou abandono)

119 Vamos localizar as proficiências médias nos níveis de proficiência? Qual é o percentual de estudantes do ESTADO que estão MUITO CRÍTICO, CRÍTICO, BÁSICO e AVANÇADO? Qual é a quantidade de estudantes do ESTADO em cada padrão de desempenho? Qual é o percentual de estudantes da sua ESCOLA que estão MUITO CRÍTICO, CRÍTICO, BÁSICO e AVANÇADO? Qual é a quantidade de estudantes da sua escola em cada padrão de desempenho? Como você interpreta a posição de sua escola em relação ao resultado do estado? Como você interpreta a participação de estudante no ESTADO e em sua escola? Essa participação é representativa? 119

120 Uso dos Resultados 1. Gestor De Rede: Planejamento e execução de políticas públicas; Criação de metas de qualidade e equidade educacionais; Implementação de medidas de responsabilização; Políticas de incentivos diretos ou indiretos; Ações de formação continuada de professores. De Escola: Elaboração do projeto da escola Monitoramento da qualidade de ensino Subsídio para avaliação institucional

121 Intervenção pedagógica Uso dos Resultados 2. Professor Elaboração de projetos especiais Foco nos estudantes com dificuldades Ações de reforço escolar Planejamento das ações de sala de aula Visão proativa quanto ao desenvolvimento de habilidades e competências ao longo da educação básica

122 Uso dos Resultados 3. Estudante Acompanhamento individual do desempenho escolar pelos estudantes e seus familiares Informações sobre a qualidade dos serviços educacionais oferecidos

123 Muito obrigado! João Dulci Marcio Fagundes Rosilene Perlatto