Oficina de Apropriação de Resultados Professores. SPAECE e SPAECE-Alfa 2014

Oficina de Apropriação de Resultados Professores SPAECE e SPAECE-Alfa 2014

Momentos de formação 1º Momento: Avaliação e Fatores Contextuais 2º Momento: Resultados Gerais - o trabalho da equipe pedagógica 2

2º Momento: Resultados Gerais - o trabalho da equipe pedagógica 3

O Acesso aos Resultados Fazer a leitura dos resultados do SPAECE, apropriar-se desses dados, além disso, compreendê-los e elaborar planos de ação/intervenção na escola/rede é uma tarefa que exige o conhecimento dos instrumentos da Avaliação Externa e em Larga Escala. 4

O Acesso aos Resultados Boletim do Sistema de Avaliação Tem como objetivo fornecer aos gestores de rede e das unidades regionais informações condensadas, referentes aos resultados da avaliação em larga escala do SPAECE e do SPAECE-Alfa, que possam balizar as políticas a serem implementadas para a rede de ensino. Apresenta a trajetória do SPAECE e do SPAECE-Alfa, bem como textos que abordam os fundamentos da avaliação em larga escala e artigos sobre temas educacionais, voltados para a gestão e o uso da avaliação. São apresentados os resultados alcançados na avaliação, organizados por rede de ensino, CREDE e escola, indicando a evolução da proficiência média dos alunos ao longo do tempo, por meio de mapas e tabelas. 5

O Acesso aos Resultados Boletim do Sistema de Avaliação Disponível em http://www.spaece.caedufjf.net/wpcontent/uploads/2015/03/spaece-alfa-rs-mr-web.pdf 6

O Acesso aos Resultados Boletim da Gestão Escolar Destinado ao gestor escolar e, neste exemplar, são informados o resultado da escola em todas as disciplinas e etapas avaliadas, possibilitando o acesso, de forma objetiva, ao desempenho da escola na avaliação, assim como apresenta o resultado das informações contextuais da unidade escolar. Para cada disciplina e etapa, os resultados da escola são exibidos da seguinte forma: ano da edição da avaliação, proficiência média e desvio padrão, número previsto de estudantes para a avaliação, número efetivo de estudantes avaliados, percentual de participação e percentual de estudantes por padrão de desempenho. Este boletim traz, ainda, textos que levam a refletir sobre as práticas e desafios do diretor na busca por um ensino de qualidade e equânime. 7

O Acesso aos Resultados Boletim da Gestão Escolar Disponível em http://www.spaece.caedufjf.net/wpcontent/uploads/2015/03/spaece-alfa-rg-mr-web.pdf 8

O Acesso aos Resultados Boletim Pedagógico Veicula o resultado da escola, em cada disciplina, por etapa de escolaridade avaliada, e tem como público-alvo o professor dessas etapas e a equipe pedagógica da unidade escolar. Apresenta informações pedagógicas sobre a avaliação, as Matrizes de Referência, o desenho do teste, as metodologias utilizadas na avaliação Teoria da Resposta ao Item (TRI) e Teoria Clássica dos Testes (TCT), a Escala de Proficiência e os Padrões de Desempenho, acompanhados por análises pedagógicas de itens. Com o objetivo de enriquecer a reflexão pedagógica sobre a avaliação em larga escala, são apresentados artigos que tratam de temas da área avaliada. 9

O Acesso aos Resultados Boletim Pedagógico Os resultados são apresentados e interpretados, com base em uma escala de proficiência, por meio do detalhamento dos níveis e padrões de desempenho. Os resultados da escola participação, proficiência e percentual de estudantes por padrão de desempenho quando avaliados de modo censitário, são divulgados, estabelecendo um comparativo com os resultados do estado e da CREDE. O principal objetivo dessa publicação é contribuir para que a escola, com base na interpretação e análise dos seus resultados, possa estabelecer um planejamento pedagógico voltado à sua realidade. 10

O Acesso aos Resultados Boletim Pedagógico [VER BOLETIM] 11

O Acesso aos Resultados Boletim Pedagógico É importante compreender a diferença entre Teoria da Resposta ao Item (TRI) e Teoria Clássica dos Testes (TCT): resultado de proficiência, dada pela TRI; é diferente do resultado de percentual de acerto, dada pela TCT; 12

O Acesso aos Resultados As escolas (equipe gestora e pedagógica) têm acesso aos seus resultados gerais (proficiência), por turma e aluno (percentual de acerto por descritor) que são encaminhados por meio dos Boletins e dos resultados divulgados no Portal da Avaliação; 13

O Acesso aos Resultados Nos boletins Boletim Pedagógico No site http://www.spaece.caedufjf.net 14

Resultado por escola: 19

O Uso dos Resultados Equipe gestora Conhecer os resultados gerais da escola; Orientar a equipe pedagógica para acesso e uso dos resultados. 26

O Uso dos Resultados Equipe pedagógica Conhecer os resultados gerais da escola, os resultados das turmas e dos estudantes; Relacionar os resultados com habilidades e competências desenvolvidas pelos estudantes (TRI e TCT); Reformular e implementar, sempre que preciso, metodologias e práticas pedagógicas para o melhor desenvolvimento dos estudantes. 27

Os Desafios da Avaliação Externa na Escola Maior participação de gestores e professores nas discussões sobre apropriação e utilização dos resultados pelas escolas. Melhor alinhamento entre as propostas curriculares e a avaliação e participação dos professores na definição dos Padrões de Desempenho. Canais de comunicação efetivos e constantes com gestores, professores, pais, alunos e sociedade sobre a qualidade da educação e responsabilidade de todos. 28

Conhecendo os resultados Equipe Pedagógica Os resultados gerais da escola: 1. Todas as etapas avaliadas e o percentual de participação; 2. Todas as etapas avaliadas e a proficiência média em cada disciplina; 3. Todas as etapas avaliadas, a proficiência média e a distribuição por padrão de desempenho em cada disciplina. 29

2º EF Conhecendo os resultados 30

2º EF 31

2º EF 32

Conhecendo os resultados É importante que os gestores saibam identificar o que representa cada um dos dados divulgados pelo sistema: As tabelas de leitura auxiliam nesse processo. 33

Conhecendo os resultados 1 2 3 4 5 6 7 8 9 REVISTA PEDAGÓGICA 1 Preencher com etapa avaliada (p. ex. 2º EF) - CAPA 2 Preencher com disciplina avaliada (p. ex. LP) - CAPA 3 Preencher com número de alunos efetivo PÁGINA DE RESULTADOS (FINAL) 4 Preencher com % de participação - PÁGINA DE RESULTADOS (FINAL) 5 Preencher com Proficiência Média - PÁGINA DE RESULTADOS (FINAL) 6 Preencher com Padrão de Desempenho Médio - VERSO DA PÁGINA DE RESULTADOS (FINAL)/RÉGUA PRETA PONTILHADA APONTA PADRÃO MÉDIO 7 Identificar principais habilidades desenvolvidas de acordo com Padrão Médio (n.6) - SEÇÃO PADRÕES DE DESEMPENHO 34

Conhecendo os resultados 1 2 3 4 5 6 7 8 9 REVISTA PEDAGÓGICA 8 Identificar principais habilidades a serem desenvolvidas de acordo com Padrão seguinte ao Padrão Médio (n.6) - SEÇÃO PADRÕES DE DESEMPENHO 9 Verificar se o Padrão de Desempenho com maior percentual de alunos - PÁGINA DE RESULTADOS (FINAL) corresponde ao Padrão de Desempenho Médio (n.6) 35

Conhecendo os resultados Etapas avaliadas e percentual de participação Refletir sobre o percentual de participação (acima ou abaixo de 80%); Pensar em intervenções que podem ser feitas pela equipe de docente da escola: Apresentar o sistema aos alunos; Inserir o sistema no contexto escolar; Conhecer os resultados; [Outras possibilidades]. 36

Conhecendo os resultados Etapas avaliadas e proficiência média em cada disciplina Observar a proficiência média; Alocar esse dado na escala de proficiência/níveis de proficiência. 37

Escala de Proficiência DOMÍNIOS Apropriação do Código Alfabético Procedimentos de Leitura Implicações do Suporte 38

Escala de Proficiência COMPETÊNCIAS Reconhece letras diferenciando-as de outros sinais gráficos Reconhece convenções gráficas Decodifica palavras 39

Escala de Proficiência Diferenciam letras de outros sinais gráficos, mas podem encontrar dificuldades na identificação de letras do alfabeto, quando solicitados a reconhecêlas pelo nome. 40

Escala de Proficiência Diferenciam letras de outros sinais gráficos, mas podem encontrar dificuldades na identificação de letras do alfabeto, quando solicitados a reconhecêlas pelo nome. Começam a desenvolver a habilidade de reconhecer letras do alfabeto. 41

Escala de Proficiência Diferenciam letras de outros sinais gráficos, mas podem encontrar dificuldades na identificação de letras do alfabeto, quando solicitados a reconhecêlas pelo nome. Começam a desenvolver a habilidade de reconhecer letras do alfabeto. Diferenciam letras de outros sinais e, ainda, são capazes de reconhecer qualquer letra do alfabeto, nomeando-as corretamente. 42

Escala de Proficiência 43

Conhecendo os resultados Etapas avaliadas e proficiência média em cada disciplina Observar a proficiência média; Relacionar a proficiência média com o padrão desempenho; Identificar habilidades e competências desenvolvidas (com base nesse padrão de desempenho). 44

Conhecendo os resultados Etapas avaliadas e proficiência média em cada disciplina Refletir sobre o desempenho alcançado no teste e o resultado esperado pela escola: Qual o desempenho alcançado pelos estudantes em relação ao esperado? Quais habilidades e competências devem ser trabalhadas com o objetivo de alcançar o desenvolvimento esperado dos estudantes? 45

Conhecendo os resultados Etapas avaliadas e proficiência média em cada disciplina Relacionar o resultado alcançado com as ações/intervenções de gestão e pedagógicas implementadas na escola: O que escola tem feito? O que foi modificado e o que foi mantido no trabalho das equipes gestoras e pedagógica? O resultado alcançado representa o trabalho da escola? 46

Conhecendo os resultados Etapas avaliadas e proficiência média em cada disciplina Compreender o desenvolvimento dos estudantes de uma etapa de escolaridade para outra: Qual a proficiência média e o padrão de desempenho (continua o mesmo de uma etapa para outra)? Como está a distribuição dos estudantes em cada padrão? Os padrões de desempenho mais baixos tem recebido mais estudantes em etapas de escolaridade mais avançadas? 47

Conhecendo os resultados Com base nesse resultado, podemos fazer as seguintes inferências: Como possibilitar que os estudantes, os quais chegarão a esta etapa, desenvolvam as habilidades esperadas? Como recuperar os estudantes que já passaram pela etapa avaliada para que, ao final dos Anos Iniciais do Ensino Fundamental, tenham desenvolvido habilidades e competências esperadas? 48

Conhecendo os resultados Como recuperar os estudantes que já passaram pela etapa avaliada para que, ao final dos Anos Iniciais do Ensino Fundamental, tenham desenvolvido habilidades e competências esperadas? Para responder este questionamento, vamos compreender como é feita a interpretação dos resultados dos estudantes do 5º ano EF! 49

Escala de Proficiência L. Portuguesa EF 52

Escala de Proficiência L. Portuguesa EF DOMÍNIOS Apropriação do Sistema de Escrita Estratégias de Leitura Processamento do Texto 53

Escala de Proficiência L. Portuguesa EF COMPETÊNCIAS Localiza informação Identifica tema Realiza inferência Identifica gênero, função e destinatário de um texto 54

Escala de Proficiência Ainda não desenvolveram a habilidade. 57

Escala de Proficiência Ainda não desenvolveram a habilidade. Começam a desenvolver a competência. Identificam o tema de textos curtos, de linguagem simples, cujo tema vem indicado no título. 58

Escala de Proficiência Ainda não desenvolveram a habilidade. Começam a desenvolver a competência. Identificam o tema de textos curtos, de linguagem simples, cujo tema vem indicado no título. Identificam o tema de um texto valendo-se de pistas textuais. 59

Escala de Proficiência Ainda não desenvolveram a habilidade. Começam a desenvolver a competência. Identificam o tema de textos curtos, de linguagem simples, cujo tema vem indicado no título. Identificam o tema de um texto valendo-se de pistas textuais. Identificam o tema a partir da conjugação das pistas textuais e do conhecimento de mundo do leitor, desde que seja em textos de temática e gênero familiares. 60

Escala de Proficiência SPAECE e SPAECE-Alfa 2014 Identificam o tema em textos menos familiares que exijam a realização de inferências. Esses estudantes já consolidaram essa habilidade. Ainda não desenvolveram a habilidade. Começam a desenvolver a competência. Identificam o tema de textos curtos, de linguagem simples, cujo tema vem indicado no título. Identificam o tema de um texto valendo-se de pistas textuais. Identificam o tema a partir da conjugação das pistas textuais e do conhecimento de mundo do leitor, desde que seja em textos de temática e gênero familiares. 61

Escala de Proficiência Observando a escala e os resultados, apresentados até o momento, podemos questionar: Qual a diferença entre Níveis da Escala de Proficiência e os Padrões de Desempenho? 62

Escala de Proficiência Matemática EF 65

Escala de Proficiência Matemática EF DOMÍNIOS Espaço e Forma Grandezas e Medidas Números, Operações e Álgebra Tratamento de Informação 66

Escala de Proficiência Matemática EF COMPETÊNCIAS Localizar objetos em representações do espaço Identificar figuras geométricas e suas propriedades Reconhecer transformações no plano Aplicação relações e propriedades 67

Escala de Proficiência São os que descrevem caminhos desenhados em mapas e identificam objeto localizado dentro/fora, na frente/atrás ou em cima/embaixo. 70

Escala de Proficiência São os que descrevem caminhos desenhados em mapas e identificam objeto localizado dentro/fora, na frente/atrás ou em cima/embaixo. Realizam atividades que envolvem referenciais diferentes da própria posição, como, por exemplo, localizar qual objeto está situado entre outros dois. Também localizam e identificam a movimentação de objetos e pessoas em mapas e croquis. 71

Escala de Proficiência São os que descrevem caminhos desenhados em mapas e identificam objeto localizado dentro/fora, na frente/atrás ou em cima/embaixo. Realizam atividades que envolvem referenciais diferentes da própria posição, como, por exemplo, localizar qual objeto está situado entre outros dois. Também localizam e identificam a movimentação de objetos e pessoas em mapas e croquis. Associam uma trajetória representada em um mapa à sua descrição textual. P.E.: dada uma trajetória entre duas localidades, no mapa, o estudante verifica qual a descrição textual que representa esse deslocamento e vice-versa. 72

Escala de Proficiência São os que descrevem caminhos desenhados em mapas e identificam objeto localizado dentro/fora, na frente/atrás ou em cima/embaixo. Realizam atividades que envolvem referenciais diferentes da própria posição, como, por exemplo, localizar qual objeto está situado entre outros dois. Também localizam e identificam a movimentação de objetos e pessoas em mapas e croquis. Associam uma trajetória representada em um mapa à sua descrição textual. P.E.: dada uma trajetória entre duas localidades, no mapa, o estudante verifica qual a descrição textual que representa esse deslocamento e vice-versa. Conseguem realizar atividade de localização utilizando sistema de coordenadas em um plano cartesiano. P.E.: dado um objeto no plano cartesiano, o estudante identifica o seu par ordenado e vice-versa. 73

Escala de Proficiência Localizam figuras geométricas por meio das coordenadas cartesianas de seus vértices, utilizando a nomenclatura abscissa e ordenada. São os que descrevem caminhos desenhados em mapas e identificam objeto localizado dentro/fora, na frente/atrás ou em cima/embaixo. Realizam atividades que envolvem referenciais diferentes da própria posição, como, por exemplo, localizar qual objeto está situado entre outros dois. Também localizam e identificam a movimentação de objetos e pessoas em mapas e croquis. Associam uma trajetória representada em um mapa à sua descrição textual. P.E.: dada uma trajetória entre duas localidades, no mapa, o estudante verifica qual a descrição textual que representa esse deslocamento e vice-versa. Conseguem realizar atividade de localização utilizando sistema de coordenadas em um plano cartesiano. P.E.: dado um objeto no plano cartesiano, o estudante identifica o seu par ordenado e vice-versa. 74

Escala de Proficiência Percebemos que a escala de proficiência para análise dos resultados do 2ºEF, de 5ºEF de Língua Portuguesa e de 5ºEF de Matemática são diferentes. Os padrões de desempenho são estipulados a partir de habilidades e competências dessas escalas, portanto: Os cortes dos padrões de desempenho também se diferem e levam em consideração cada escala! 75

Conhecendo os resultados Vamos retomar os resultados e a análise do 2º EF para prosseguir as atividades de análise dos dados [Anexo 01]. 76

Conhecendo os resultados 1 2 3 4 5 6 7 8 REVISTA PEDAGÓGICA 1 Preencher com etapa avaliada (p. ex. 2º EF) - CAPA 2 Preencher com disciplina avaliada (p. ex. LP) - CAPA 3 Preencher com Proficiência Média - PÁGINA DE RESULTADOS 4 Preencher com Padrão de Desempenho Médio - VERSO DA PÁGINA DE RESULTADOS (FINAL)/RÉGUA PRETA PONTILHADA APONTA PADRÃO MÉDIO 5 Preencher com nome de cada Padrão - SEÇÃO PADRÕES DE DESEMPENHO 6 Preencher com Percentual de estudantes para cada Padrão de Desempenho Médio - PÁGINA DE RESULTADOS (FINAL) 77

Conhecendo os resultados 1 2 3 4 5 6 7 8 REVISTA PEDAGÓGICA 7 Calcular para cada Padrão de Desempenho. Fórmula: (Número de Estudantes Efetivo x Percentual de alunos no Padrão) 100 - PÁGINA DE RESULTADOS (FINAL) 8 Discriminar as principais habilidades desenvolvidas para cada Padrão de Desempenho - SEÇÃO PADRÕES DE DESEMPENHO. 78

Conhecendo os resultados Etapas avaliadas, proficiência média e distribuição por padrão de desempenho em cada disciplina; Identifique o percentual de estudantes em cada padrão de desempenho; A(s) turma(s) dessa escola é(são) homogênea(s) e todos desenvolveram as habilidades no mesmo grau de complexidade? 79

Conhecendo os resultados Etapas avaliadas, proficiência média e distribuição por padrão de desempenho em cada disciplina; O padrão de desempenho com maior percentual de estudantes é o mesmo padrão representado pela proficiência média alcançada pela escola? 80

Conhecendo os resultados Etapas avaliadas, proficiência média e distribuição por padrão de desempenho em cada disciplina; Calcule o número de estudantes em cada padrão de desempenho; Conseguimos identificar quem são os estudantes alocados em cada padrão, na escola? 81

Conhecendo os resultados Etapas avaliadas, proficiência média e distribuição por padrão de desempenho em cada disciplina; Apresente as habilidades e as competências desenvolvidas por cada grupo de estudantes (observar, em relação às habilidades e às competências, o desempenho alcançado por alunos que estão alocados em padrões de desempenho diferentes). 82

Conhecendo os resultados Turmas de uma escola 83

Conhecendo os resultados Turmas de uma escola 84

Conhecendo os resultados Alunos de uma turma 85

Conhecendo os resultados Alunos de uma turma 86

Conhecendo os resultados SPAECE e SPAECE-Alfa 2014 RESULTADOS NO SITE Verificar descritores (p. ex D1) mais e menos acertados com seu respectivo percentual, indicar tema/domínio/tópico a que se refere (SEÇÃO MATRIZ DE REFERÊNCIA BOLETIM PEDAGÓGICA) e detectar principais conteúdos relacionados a esse descritor. 87

Conhecendo os resultados Etapa de escolaridade e percentual de acerto por descritor Observe o percentual de acerto geral da escola em cada disciplina e etapa de escolaridade; 88

Conhecendo os resultados Etapa de escolaridade e percentual de acerto por descritor Relacione cada habilidade (descritor) com o percentual de acerto; Observe a relação existente entre descritores (habilidades de uma mesma competência ou habilidades trabalhadas no desenvolvimento de um determinado conteúdo); 89

Conhecendo os resultados Etapa de escolaridade e percentual de acerto por descritor Observe descritores menos acertados: Estão relacionados a um mesmo tema/domínio/tópico? Estão relacionados às habilidades com grau de complexidade mais alto para aquela etapa de escolaridade? 90

Conhecendo os resultados Etapa de escolaridade e percentual de acerto por descritor Observe descritores menos acertados : São habilidades desenvolvidas naquela etapa avaliada ou são desenvolvidas ao longo do Ensino Fundamental? Qual a relação de cada habilidade com os conteúdos trabalhados em sala de aula? Quais as práticas pedagógicas adotadas pelos professores da escola em relação a cada um desses conteúdos? 91

Conhecendo os resultados Etapa de escolaridade e percentual de acerto por descritor Observe descritores menos acertados: Como possibilitar a compreensão dos estudantes em relação a cada uma dessas habilidades: Modificar por outras ações pedagógicas? Pesquisar/estudar outras formas de abordagem do conteúdo? Utilizar outros recursos pedagógicos? Outros... 92

Conhecendo os resultados Etapa de escolaridade e percentual de acerto por descritor Observe os descritores mais acertados: Estão relacionados a um mesmo tema/domínio/tópico? Estão relacionados às habilidades com grau de complexidade menor para essa etapa de escolaridade? Podem auxiliar no desenvolvimento de descritores menos acertados? Como? 93

Conhecendo os resultados Etapa de escolaridade e percentual de acerto por descritor Dentre os temas apresentados, quais são aqueles com os menores percentuais de acerto por descritor? Qual a relação desse resultado com o trabalho feito pelo professores em sala de aula? Este trabalho é adequado e suficiente para alcançar os resultados esperados? O que pode ser modificado? O que deve continuar? 94

Conhecendo os resultados Avaliação externa e interna Os resultados da avaliação interna são comparáveis àqueles extraídos da avaliação externa: As habilidades avaliadas pelos professores são as mesmas avaliadas pelo programa de avaliação externa? Os conteúdos desenvolvidos pelos professores da escola, com base no currículo, estão relacionados com as habilidades da matriz de referência? 95

Agradecemos a atenção www.caed.ufjf.br oficinasecursos@caed.ufjf.br 96