OFICINA DE APROPRIAÇÃO DE RESULTADOS 2011

Transcrição

1 OFICINA DE APROPRIAÇÃO DE RESULTADOS 2011

2 O CAEd Centro de Políticas Públicas e Avaliação da Educação, da UFJF, é uma instituição que elabora e desenvolve programas de avaliação sobre o rendimento escolar dos alunos de escola públicas, promovidos pelas Secretarias Estaduais de Educação. Também cria e promove cursos de formação, qualificação e aprimoramento aos profissionais da Educação de diversos Estados do Brasil, além de desenvolver software para a gestão de escolas públicas (como por exemplo, os projetos SisLame e SIMADE) com o objetivo de modernizar a gestão educacional. O CAEd também presta serviços de apoio para o desenvolvimento de projetos educacionais promovidos por iniciativas privadas, a exemplo de algumas ações da Fundação Roberto Marinho, do Instituto Unibanco e da Fundação Oi Futuro.

3

4 AVALIAR É refletir sobre uma determinada realidade, a partir de dados e informações, e emitir um julgamento que possibilite uma ação.

5 Tipos de Avaliação Avaliação Interna Processo de Aprendizagem Diversos Instrumentos de Avaliação Avaliação Formativa Teoria Clássica dos Testes (Nota) Avaliação Externa Produto (habilidades) Teste de Múltipla Escolha Teoria de Resposta ao Item (TRI)

6 Por que avaliar um sistema educacional Obter informações sobre o nível de desenvolvimento das habilidades dos estudantes com vistas à implementação de políticas públicas e à organização dos processos de ensino e de aprendizagem

7 Algumas características do SABE Quais são os objetivos do Sistema Baiano de Educação? O que o Avalie Ensino Médio avaliou em sua edição de 2011? Você acha que os resultados dessa avaliação podem ser utilizados para a melhoria da educação em nossa escola? Se sim, como?

8 Rede Estadual e Municipal Avalie Alfa: Língua Portuguesa e Matemática 2º ano EF. Rede Estadual Avalie Ensino Médio: Linguagens e Códigos, Matemática, Ciências Humanas e Ciências Naturais 1ª SÉRIE DO ENSINO MÉDIO; 2ª SÉRIE DA EDUCAÇÃO PROFISSIONAL INTEGRADA AO ENSINO MÉDIO.

9 Alguns objetivos do Avalie Ensino Médio Desempenho escolar; Análise dos resultados possibilita intervenção pedagógica; Dados do Avalie Ensino Médio devem fazer parte da proposta de melhoria da qualidade da educação ofertada pela escola.

10 O CAEd e o Sistema Baiano de Educação Nessas avaliações, utilizam-se instrumentos chamados de testes de proficiência e também questionários contextuais aplicados aos estudantes, professores e diretores das unidades escolares, com o objetivo de oferecer à sociedade uma medida do desempenho escolar.

11 Como são construídos os testes de proficiência que permitem medir o desempenho escolar?

12

13 Objetivo Analisar e interpretar os resultados do SABE para (re)planejamento das ações pedagógicas implementadas em sala de aula, a serem definidas pelas escolas envolvidas no processo de avaliação.

14 Seção 1 Matriz de Referência

15 Como a Matriz de Referência dá origem aos testes? Constitui um parâmetro de orientação; Apresenta o objeto da avaliação; Caráter de universalidade; Orienta a elaboração de itens.

16 Ressaltamos que as matrizes de referência não englobam todo o currículo escolar. Um recorte é feito com base no que é possível aferir por meio do tipo de instrumento de medida utilizado na avaliação e que, ao mesmo tempo, é representativo do que está contemplado nos currículos.

17 A Matriz de Matemática e suas tecnologias está estruturada em Temas: I. Espaço e Forma; II. Grandezas e Medidas; III. Números e Operações, Álgebra e Funções; IV. Tratamento de Informações.

18 Destes temas selecionados: Espaço e Forma, Grandezas e Medidas, Números e Operações e Tratamento da Informação temos cada um deles representando conteúdos com base nos quais são elaborados descritores que expressam habilidades em Matemática.

19 Matriz de Referência para Avaliação Elemento base de origem dos testes utilizados no Avalie Ensino Médio. Garante legitimidade e transparência à avaliação. É formada por um conjunto de descritores que, agrupados em tópicos/temas, apresentam as habilidades consideradas básicas e possíveis de serem aferidas por meio do instrumento utilizado em avaliações em larga escala. Não abarca todo currículo escolar. Por isso, não pode ser confundida com parâmetros curriculares, Base Curricular Comum - BCC, procedimentos ou estratégias de ensino ou Orientações Teórico- Metodológicas - OTM, nem com o conteúdo a ser trabalhado pelo professor em sala de aula.

20 Conteúdo: Probabilidade e Estatística Exemplo: Tabelas Construção de Tabelas Simulação de Pesquisas Gráficos Construção de Gráficos Elaboração e aplicação de questionários Interpretação dos resultados da Pesquisa Resolver problemas envolvendo informações apresentadas em Gráficos e Tabelas Ler, selecionar e interpretar informações em Gráficos

21 MATRIZ DE REFERÊNCIA Conjunto de descritores Conteúdo programático na área de conhecimento a ser avaliada Nível de operação mental necessário para a aprendizagem Descritores originados do cruzamento entre conteúdos programáticos e as habilidades e competências cognitivas que lhes são próprias.

22 Algumas interpretações teóricas Competências e Habilidades Competências referem-se às diferentes modalidades estruturais da inteligência que compreendem determinadas operações que o sujeito utiliza para estabelecer relações com e entre os objetos físicos, conceitos, situações, fenômenos e pessoas. As habilidades instrumentais referem-se especificamente ao plano do saber fazer e decorrem, diretamente, do nível estrutural das competências já adquiridas e que se transformam em habilidades. PERRENOUD, P. Práticas pedagógicas, profissão docente e formação. Lisboa: Dom Quixote, 1993

23 Aspectos a considerar sobre Descritores Os descritores têm origem na associação entre os conteúdos curriculares e as operações mentais desenvolvidas pelo aluno que se traduzem em certas habilidades. Constituem uma sumária descrição das habilidades esperadas ao final de cada período escolar avaliado.

24 Aspectos a considerar sobre Descritores

25 O QUE É UM ITEM? É uma questão do teste de larga escala. Avalia uma única habilidade, portanto o item é unidimensional. Obtém um resultado por estudante, que permite avaliar as hipóteses levantadas por ele.

26 Das Matrizes aos itens dos testes de proficiência Agrupa as habilidades passíveis de avaliação em um teste de proficiência. Matriz Tema Tópico Representa uma subdivisão de acordo com o conteúdo, competências de área e habilidades. Item Descritor Avalia apenas uma única habilidade Descreve cada uma das habilidades da Matriz

27 Grau de Dificuldade diz respeito à adequação ent re a formulação do it em e a capacidade de resposta do estudante. Considerar Discriminação capacidade do item de dist inguir est udant es com diferentes níveis de habilidade.

28 O ITEM E SUAS PARTES Enunciado Suporte Distratores Distrator GABARITO Distrator Comando Comando

29 - redigir o enunciado de forma direta e afirmat iva; - utilizar vocabulário adequado ao nível de escolaridade do estudante;

30 - enfocar uma única situaçãoproblema; - incluir no enunciado uma figura, um recorte de j ornal ou revista, uma fotografia,sua elaboração; - redigir o enunciado de forma direta e afirmativa; - utilizar vocabulário adequado ao nível de escolaridade do estudante;

31 - excluir qualquer referência discriminatória quanto a etnia; religião, gênero ou orientação sexual; - observar as normas da ABNT na apresentação de textos e figuras; - não utilizar pegadinhas nem dicas ; - não utilizar termos como sempre, nunca, todo, totalmente.

32 estar diretamente relacionada a um único descritor da Matriz de Referência; formular de maneira positiva; a tarefa desej ada em conexão com o problema proposto.

33 Quanto à Redação Enunciado: deve ser claro, preciso e conciso. Gabarito: exclusivamente um. Distratores: devem ser plausíveis. Suportes: devem conter informações relevantes.

34 Atividade 1: Os Itens do Teste Resolvam os itens. Identifiquem a habilidade avaliada pelo item em análise. Elaborem hipóteses cognitivas para os distratores (alternativas erradas).

35

36

37

38

39 100,0 90,0 80,0 70,0 60,0 50,0 40,0 30,0 20,0 10,0 0,0 1ª SÉRIE EM - MATEMÁTICA Rede Estadual 49,4 42,3 37,3 31,0 28,9 31,2 26,2 27,1 28,6 23,0 23,5 25,5 28,0 23,5 15,9 49,0 41,0 32,7 35,3 35,8 29,9 24,6 25,4 26,1 25,4 26,3 24,9 26,1 21,9

40 100,0 90,0 80,0 70,0 60,0 50,0 40,0 30,0 20,0 10,0 0,0 2ª SÉRIE EDUCACAO PROFISSIONAL INTEGRADO 57,4 58,2 48,8 51,2 42,0 38,9 40,4 42,0 36,0 34,3 35,4 29,4 21,7 24,7 27,9 31,1 30,5 30,8 33,1 33,6 26,5 28,5 28,8 28,3 25,5 25,5 22,5 22,3 17,4

41 Objetivos da oficina Nessa etapa da nossa oficina, iremos: apresentar a descrição dos Intervalos de Proficiência de Matemática, e a sua relação com as Matrizes de Referência para a Avaliação. interpretar os Intervalos de Proficiência de Matemática considerando os agrupamentos de seus intervalos (Padrões de Desempenho Estudantil). analisar e interpretar pedagogicamente os resultados

42 Seção 2 Interpretação pedagógica dos resultados

43

44

45

46

47

48

49

50

51

52

53

54

55

56

57

58

59

60

61

62

63 Os padrões de desempenho estudantil são os balizadores dos diferentes graus de realização educacional alcançados pela escola. Por meio deles é possível analisar a distância de aprendizagem entre o percentual de estudantes que se encontra nos níveis mais altos de desempenho e aqueles que estão nos níveis mais baixos. A distância entre esses extremos representa, ainda que de forma alegórica, o abismo existente entre aqueles que têm grandes chances de sucesso escolar e, consequentemente, maiores possibilidades de acesso aos bens materiais, culturais e sociais; e aqueles para os quais o fracasso escolar e a exclusão social podem ser mera questão de tempo, caso a escola não reaja e promova ações com vistas à promoção da equidade.

64

65 Formas de Apresentação dos Resultados Proficiência média médias comparadas Participação Distribuição do percentual de alunos por nível de proficiência e padrão de desempenho Evolução do percentual de alunos por padrão de desempenho

66

67 Como você interpreta a participação?

68 Se 50 fosse o número de estudantes que NÃO participaram da avaliação na ESCOLA? Como seria esse percentual?

69 Participação De que forma você acha que a participação pode interferir nos resultados de nossa escola? Pense em aspectos positivos e negativos! Tempo para os participantes pensarem e apontarem esses aspectos... Apontar percentual suficiente para retratar a realidade da escola. Exemplo (próximo slide)

70

71 Quais são as habilidades desenvolvidas por aproximadamente 48,1% dos estudantes? E por 34,4% dos estudantes? E por 16,4% dos estudantes? E por 1,1 % dos estudantes?

72 Número de alunos Percentual %? 22,7%

73 Número de Alunos Percentual %? 48,1% Cálculo... variação proporcional direta? = x 216x 48,1 = 100.x = 100.x /100 = x 104= x X= 104

74

75

76

77 Como você interpreta a participação?

78 Participação De que forma você acha que a participação pode interferir nos resultados de nossa escola? Pense em aspectos positivos e negativos! Tempo para os participantes pensarem e apontarem esses aspectos... Apontar percentual suficiente para retratar a realidade da escola. Exemplo (próximo slide)

79

80 Quais são as habilidades desenvolvidas por aproximadamente 30,8% dos estudantes? E por 50,0% dos estudantes? E por 15,4% dos estudantes? E por 3,8 % dos estudantes?

81

82 Número de Alunos Percentual %? 30,8% Cálculo... variação proporcional direta? = x 26x 30,8 = 100.x 800,8 = 100.x 800,8/100 = x 8 = x X= 8

83

84

85 Caracterização do desempenho escolar Grau de realização das ações educacionais Políticas públicas voltadas à promoção da equidade Estabelecimento e monitoramento das metas de qualidade educacional Padrões de desempenho estudantil Identificação do percentual de alunos em risco pedagógico (evasão, reprovação ou abandono)

86 Vamos localizar as proficiências médias nos níveis de proficiência? Qual é o percentual de estudantes do ESTADO que estão MUITO CRÍTICO, CRÍTICO, BÁSICO e AVANÇADO? Qual é a quantidade de estudantes do ESTADO em cada padrão de desempenho? Qual é o percentual de estudantes da sua ESCOLA que estão MUITO CRÍTICO, CRÍTICO, BÁSICO e AVANÇADO? Qual é a quantidade de estudantes da sua escola em cada padrão de desempenho? Como você interpreta a posição de sua escola em relação ao resultado do estado? Como você interpreta a participação de estudante no ESTADO e em sua escola? Essa participação é representativa? 86

87 Uso dos Resultados 1. Gestor De Rede: Planejamento e execução de políticas públicas; Criação de metas de qualidade e equidade educacionais; Implementação de medidas de responsabilização; Políticas de incentivos diretos ou indiretos; Ações de formação continuada de professores. De Escola: Elaboração do projeto da escola Monitoramento da qualidade de ensino Subsídio para avaliação institucional

88 Intervenção pedagógica Uso dos Resultados 2. Professor Elaboração de projetos especiais Foco nos estudantes com dificuldades Ações de reforço escolar Planejamento das ações de sala de aula Visão proativa quanto ao desenvolvimento de habilidades e competências ao longo da educação básica

89 Uso dos Resultados 3. Estudante Acompanhamento individual do desempenho escolar pelos estudantes e seus familiares Informações sobre a qualidade dos serviços educacionais oferecidos

90 Muito obrigado! Raquel Carvalho Gravina