Oficina de Apropriação de Resultados Professores
Momentos de formação 1º Momento: Avaliação e Fatores Contextuais 2º Momento: Resultados Gerais - o trabalho da equipe pedagógica 2
2º Momento: Resultados Gerais - o trabalho da equipe pedagógica 3
O Acesso aos Resultados Fazer a leitura dos resultados do SPAECE, apropriar-se desses dados, além disso, compreendê-los e elaborar planos de ação/intervenção na escola/rede é uma tarefa que exige o conhecimento dos instrumentos da Avaliação Externa e em Larga Escala. 4
O Acesso aos Resultados Boletim do Sistema de Avaliação Tem como objetivo fornecer aos gestores de rede e das unidades regionais informações condensadas, referentes aos resultados da avaliação em larga escala do SPAECE e do SPAECE-Alfa, que possam balizar as políticas a serem implementadas para a rede de ensino. Apresenta a trajetória do SPAECE e do SPAECE-Alfa, bem como textos que abordam os fundamentos da avaliação em larga escala e artigos sobre temas educacionais, voltados para a gestão e o uso da avaliação. São apresentados os resultados alcançados na avaliação, organizados por rede de ensino, CREDE e escola, indicando a evolução da proficiência média dos alunos ao longo do tempo, por meio de mapas e tabelas. 5
O Acesso aos Resultados Boletins do Sistema de Avaliação Alfa Disponível em: http://www.spaece.caedufjf.net/wp- content/uploads/2015/03/spaece-alfa-rs-mr- WEB.pdf Regular Disponível em: http://www.spaece.caedufjf.net/wp- content/uploads/2015/03/spaece-2013-rs-mr- WEB.pdf 6
O Acesso aos Resultados Boletim da Gestão Escolar Destinado ao gestor escolar e, neste exemplar, são informados o resultado da escola em todas as disciplinas e etapas avaliadas, possibilitando o acesso, de forma objetiva, ao desempenho da escola na avaliação, assim como apresenta o resultado das informações contextuais da unidade escolar. Para cada disciplina e etapa, os resultados da escola são exibidos da seguinte forma: ano da edição da avaliação, proficiência média e desvio padrão, número previsto de estudantes para a avaliação, número efetivo de estudantes avaliados, percentual de participação e percentual de estudantes por padrão de desempenho. Este boletim traz, ainda, textos que levam a refletir sobre as práticas e desafios do diretor na busca por um ensino de qualidade e equânime. 7
O Acesso aos Resultados Boletim da Gestão Escolar Alfa Disponível em: http://www.spaece.caedufjf.net/wp- content/uploads/2015/03/spaece-alfa-rg-mr- WEB.pdf Regular Disponível em: http://www.spaece.caedufjf.net/wp- content/uploads/2015/03/spaece-2013-rg-mr- WEB.pdf 8
O Acesso aos Resultados Boletim Pedagógico Veicula o resultado da escola, em cada disciplina, por etapa de escolaridade avaliada, e tem como público-alvo o professor dessas etapas e a equipe pedagógica da unidade escolar. Apresenta informações pedagógicas sobre a avaliação, as Matrizes de Referência, o desenho do teste, as metodologias utilizadas na avaliação Teoria da Resposta ao Item (TRI) e Teoria Clássica dos Testes (TCT), a Escala de Proficiência e os Padrões de Desempenho, acompanhados por análises pedagógicas de itens. Com o objetivo de enriquecer a reflexão pedagógica sobre a avaliação em larga escala, são apresentados artigos que tratam de temas da área avaliada. 9
O Acesso aos Resultados Boletim Pedagógico Os resultados são apresentados e interpretados, com base em uma escala de proficiência, por meio do detalhamento dos níveis e padrões de desempenho. Os resultados da escola participação, proficiência e percentual de estudantes por padrão de desempenho quando avaliados de modo censitário, são divulgados, estabelecendo um comparativo com os resultados do estado e da CREDE. O principal objetivo dessa publicação é contribuir para que a escola, com base na interpretação e análise dos seus resultados, possa estabelecer um planejamento pedagógico voltado à sua realidade. 10
O Acesso aos Resultados Boletim Pedagógico 2º ano EF (Alfa) Disponível em: http://www.spaece.caedufjf.net/wp-content/uploads/2015/03/spaece-alfa-rp-lp-2ef-web.pdf 5º ano EF Disponível em: http://www.spaece.caedufjf.net/wp-content/uploads/2015/03/spaece-alfa-rp-lp-5ef-web.pdf 9º ano EF e EJA 2º segmento Disponível em: http://www.spaece.caedufjf.net/wp-content/uploads/2015/03/spaece-2013-rp-lp-eja-af-web.pdf Ensino Médio e EJA 1º e 2º períodos Disponível em: http://www.spaece.caedufjf.net/wp-content/uploads/2015/03/spaece-2013-rp-lp-em- WEB.pdf 11
O Acesso aos Resultados Boletim Pedagógico É importante compreender a diferença entre Teoria da Resposta ao Item (TRI) e Teoria Clássica dos Testes (TCT): resultado de proficiência, dada pela TRI; é diferente do resultado de percentual de acerto, dada pela TCT; 12
O Acesso aos Resultados As escolas (equipe gestora e pedagógica) têm acesso aos seus resultados gerais (proficiência), por turma e aluno (percentual de acerto por descritor) que são encaminhados por meio dos boletins e dos resultados divulgados; 13
O Acesso aos Resultados Nos boletins boletim pedagógico No site http://www.spaece.caedufjf.net 14
15
16
17
18
Resultado por escola: 19
20
O Uso dos Resultados Equipe gestora Conhecer os resultados gerais da escola; Orientar a equipe pedagógica para acesso e uso dos resultados. 21
O Uso dos Resultados Equipe pedagógica Conhecer os resultados gerais da escola, os resultados das turmas e dos estudantes; Relacionar os resultados com habilidades e competências desenvolvidas pelos estudantes (TRI e TCT); Reformular e implementar, sempre que preciso, metodologias e práticas pedagógicas para o melhor desenvolvimento dos estudantes. 22
Os Desafios da Avaliação Externa na Escola Maior participação de gestores e professores nas discussões sobre apropriação e utilização dos resultados pelas escolas. Melhor alinhamento entre as propostas curriculares e a avaliação e participação dos professores na definição dos Padrões de Desempenho. Canais de comunicação efetivos e constantes com gestores, professores, pais, alunos e sociedade sobre a qualidade da educação e responsabilidade de todos. 23
Conhecendo os resultados Equipe Pedagógica Os resultados gerais da escola: 1. Todas as etapas avaliadas e o percentual de participação; 2. Todas as etapas avaliadas e a proficiência média em cada disciplina; 3. Todas as etapas avaliadas, a proficiência média e a distribuição por padrão de desempenho em cada disciplina. 24
Conhecendo os resultados É importante que os professores saibam identificar o que representa cada um dos dados divulgados pelo sistema: As tabelas de leitura auxiliam nesse processo. 25
Conhecendo os resultados 1 2 3 4 5 6 7 8 9 REVISTA PEDAGÓGICA 1 Preencher com etapa avaliada (p. ex. 9º EF) - CAPA 2 Preencher com disciplina avaliada (p. ex. Matemática) - CAPA 3 Preencher com número de alunos efetivo PÁGINA DE RESULTADOS (FINAL) 4 Preencher com % de participação - PÁGINA DE RESULTADOS (FINAL) 5 Preencher com Proficiência Média - PÁGINA DE RESULTADOS (FINAL) 6 Preencher com Padrão de Desempenho Médio - VERSO DA PÁGINA DE RESULTADOS (FINAL)/RÉGUA PRETA PONTILHADA APONTA PADRÃO MÉDIO 7 Identificar principais habilidades desenvolvidas de acordo com Padrão Médio (n.6) - SEÇÃO PADRÕES DE DESEMPENHO 26
Conhecendo os resultados 1 2 3 4 5 6 7 8 9 REVISTA PEDAGÓGICA 8 Identificar principais habilidades a serem desenvolvidas de acordo com Padrão seguinte ao Padrão Médio (n.6) - SEÇÃO PADRÕES DE DESEMPENHO 9 Verificar se o Padrão de Desempenho com maior percentual de alunos - PÁGINA DE RESULTADOS (FINAL) corresponde ao Padrão de Desempenho Médio (n.6) 27
Conhecendo os resultados Etapas avaliadas e percentual de participação Refletir sobre o percentual de participação (acima ou abaixo de 80%); Pensar em intervenções que podem ser feitas pela equipe de docente da escola: Apresentar o sistema aos alunos; Inserir o sistema no contexto escolar; Conhecer os resultados; [Outras possibilidades]. 28
Conhecendo os resultados Etapas avaliadas e proficiência média em cada disciplina Observar a proficiência média; Alocar esse dado na escala de proficiência/níveis de proficiência. 29
Escala de Proficiência L. Portuguesa EF 30
Escala de Proficiência L. Portuguesa EF DOMÍNIOS Apropriação do Sistema de Escrita Estratégias de Leitura Processamento do Texto 31
Escala de Proficiência L. Portuguesa EF COMPETÊNCIAS Localiza informação Identifica tema Realiza inferência Identifica gênero, função e destinatário de um texto 32
Escala de Proficiência L. Portuguesa EF 33
Escala de Proficiência L. Portuguesa EF 34
Escala de Proficiência Ainda não desenvolveram a habilidade. 35
Escala de Proficiência Ainda não desenvolveram a habilidade. Começam a desenvolver a competência. Identificam o tema de textos curtos, de linguagem simples, cujo tema vem indicado no título. 36
Escala de Proficiência Ainda não desenvolveram a habilidade. Começam a desenvolver a competência. Identificam o tema de textos curtos, de linguagem simples, cujo tema vem indicado no título. Identificam o tema de um texto valendo-se de pistas textuais. 37
Escala de Proficiência Ainda não desenvolveram a habilidade. Começam a desenvolver a competência. Identificam o tema de textos curtos, de linguagem simples, cujo tema vem indicado no título. Identificam o tema de um texto valendo-se de pistas textuais. Identificam o tema a partir da conjugação das pistas textuais e do conhecimento de mundo do leitor, desde que seja em textos de temática e gênero familiares. 38
Escala de Proficiência Identificam o tema em textos menos familiares que exijam a realização de inferências. Esses estudantes já consolidaram essa habilidade. Ainda não desenvolveram a habilidade. Começam a desenvolver a competência. Identificam o tema de textos curtos, de linguagem simples, cujo tema vem indicado no título. Identificam o tema de um texto valendo-se de pistas textuais. Identificam o tema a partir da conjugação das pistas textuais e do conhecimento de mundo do leitor, desde que seja em textos de temática e gênero familiares. 39
Os Padrões de Desempenho Padrões de Desempenho em Língua Portuguesa (SAEB) Etapa de Escolaridade N Muito Crítico Crítico Intermediário Adequado até 75 125 a 175 175 a 225 acima de 225 5º Ano EF 4 até 125 125 a 175 175 a 225 acima de 225 9º Ano EF 4 até 200 200 a 250 250 a 300 acima de 300 1ª Série EM 0 - - - - 2ª Série EM 0 - - - - 3ª Série EM 4 até 225 225 a 275 275 a 325 acima de 325 EJA EF - 2º Segmento 4 até 200 200 a 250 250 a 300 acima de 300 EJA EM - 1º Período 0 - - - - EJA EM - 2º Período 4 até 225 225 a 275 275 a 325 acima de 325 40
Conhecendo os resultados Etapas avaliadas e proficiência média em cada disciplina Observar a proficiência média; Relacionar a proficiência média com o padrão desempenho; Identificar habilidades e competências desenvolvidas (com base nesse padrão de desempenho). 41
Conhecendo os resultados Etapas avaliadas e proficiência média em cada disciplina Refletir sobre o desempenho alcançado no teste e o resultado esperado pela escola: Qual o desempenho alcançado pelos estudantes em relação ao esperado? Quais habilidades e competências devem ser trabalhadas com o objetivo de alcançar o desenvolvimento esperado dos estudantes? 42
Conhecendo os resultados Etapas avaliadas e proficiência média em cada disciplina Relacionar o resultado alcançado com as ações/intervenções de gestão e pedagógicas implementadas na escola: O que escola tem feito? O que foi modificado e o que foi mantido no trabalho da equipe pedagógica? O resultado alcançado representa o trabalho da escola? 43
Conhecendo os resultados Etapas avaliadas e proficiência média em cada disciplina Compreender o desenvolvimento dos estudantes de uma etapa de escolaridade para outra: Qual a proficiência média e o padrão de desempenho (continua o mesmo de uma etapa para outra)? Como está a distribuição dos estudantes em cada padrão? Os padrões de desempenho mais baixos tem recebido mais estudantes em etapas de escolaridade mais avançadas? 44
Conhecendo os resultados Com base nesse resultado, podemos fazer as seguintes inferências: Como possibilitar que os estudantes, os quais chegarão a esta etapa, desenvolvam as habilidades esperadas? Como recuperar os estudantes que já passaram pela etapa avaliada para que, ao final da Educação Básica, tenham desenvolvido habilidades e competências esperadas? 45
Conhecendo os resultados 1 2 3 4 5 6 7 8 REVISTA PEDAGÓGICA 1 Preencher com etapa avaliada (p. ex. 8º EF) - CAPA 2 Preencher com disciplina avaliada (p. ex. Matemática) - CAPA 3 Preencher com Proficiência Média - PÁGINA DE RESULTADOS 4 Preencher com Padrão de Desempenho Médio - VERSO DA PÁGINA DE RESULTADOS (FINAL)/RÉGUA PRETA PONTILHADA APONTA PADRÃO MÉDIO 5 Preencher com nome de cada Padrão - SEÇÃO PADRÕES DE DESEMPENHO 6 Preencher com Percentual de estudantes para cada Padrão de Desempenho Médio - PÁGINA DE RESULTADOS (FINAL) 46
Conhecendo os resultados 1 2 3 4 5 6 7 8 REVISTA PEDAGÓGICA 7 Calcular para cada Padrão de Desempenho. Fórmula: (Número de Estudantes Efetivo x Percentual de alunos no Padrão) 100 - PÁGINA DE RESULTADOS (FINAL) 8 Discriminar as principais habilidades desenvolvidas para cada Padrão de Desempenho - SEÇÃO PADRÕES DE DESEMPENHO. 47
Conhecendo os resultados Etapas avaliadas, proficiência média e distribuição por padrão de desempenho em cada disciplina; Identifique o percentual de estudantes em cada padrão de desempenho; A(s) turma(s) dessa escola é(são) homogênea(s) e todos desenvolveram as habilidades no mesmo grau de complexidade? 48
Conhecendo os resultados Etapas avaliadas, proficiência média e distribuição por padrão de desempenho em cada disciplina; O padrão de desempenho com maior percentual de estudantes é o mesmo padrão representado pela proficiência média alcançada pela escola? 49
Conhecendo os resultados Etapas avaliadas, proficiência média e distribuição por padrão de desempenho em cada disciplina; Calcule o número de estudantes em cada padrão de desempenho; Conseguimos identificar quem são os estudantes alocados em cada padrão, na escola? 50
Conhecendo os resultados Etapas avaliadas, proficiência média e distribuição por padrão de desempenho em cada disciplina; Apresente as habilidades e as competências desenvolvidas por cada grupo de estudantes (observar, em relação às habilidades e às competências, o desempenho alcançado por alunos que estão alocados em padrões de desempenho diferentes). 51
Conhecendo os resultados Alunos de uma turma 52
Conhecendo os resultados Turmas de uma escola 53
Conhecendo os resultados RESULTADOS NO SITE Verificar descritores (p. ex D1) mais e menos acertados com seu respectivo percentual, indicar tema/domínio/tópico a que se refere (SEÇÃO MATRIZ DE REFERÊNCIA BOLETIM PEDAGÓGICA) e detectar principais conteúdos relacionados a esse descritor. 54
Conhecendo os resultados Etapa de escolaridade e percentual de acerto por descritor Observe o percentual de acerto geral da escola em cada disciplina e etapa de escolaridade; 55
Conhecendo os resultados Etapa de escolaridade e percentual de acerto por descritor Relacione cada habilidade (descritor) com o percentual de acerto; Observe a relação existente entre descritores (habilidades de uma mesma competência ou habilidades trabalhadas no desenvolvimento de um determinado conteúdo); 56
Conhecendo os resultados Etapa de escolaridade e percentual de acerto por descritor Observe descritores menos acertados: Estão relacionados a um mesmo tema/domínio/tópico? Estão relacionados às habilidades com grau de complexidade mais alto para aquela etapa de escolaridade? 57
Conhecendo os resultados Etapa de escolaridade e percentual de acerto por descritor Observe descritores menos acertados : São habilidades desenvolvidas naquela etapa avaliada ou são desenvolvidas ao longo do Ensino Fundamental? Qual a relação de cada habilidade com os conteúdos trabalhados em sala de aula? Quais as práticas pedagógicas adotadas pelos professores da escola em relação a cada um desses conteúdos? 58
Conhecendo os resultados Etapa de escolaridade e percentual de acerto por descritor Observe descritores menos acertados: Como possibilitar a compreensão dos estudantes em relação a cada uma dessas habilidades: Modificar por outras ações pedagógicas? Pesquisar/estudar outras formas de abordagem do conteúdo? Utilizar outros recursos pedagógicos? Outros... 59
Conhecendo os resultados Etapa de escolaridade e percentual de acerto por descritor Observe os descritores mais acertados: Estão relacionados a um mesmo tema/domínio/tópico? Estão relacionados às habilidades com grau de complexidade menor para essa etapa de escolaridade? Podem auxiliar no desenvolvimento de descritores menos acertados? Como? 60
Conhecendo os resultados Etapa de escolaridade e percentual de acerto por descritor Dentre os temas apresentados, quais são aqueles com os menores percentuais de acerto por descritor? Qual a relação desse resultado com o trabalho feito pelo professores em sala de aula? Este trabalho é adequado e suficiente para alcançar os resultados esperados? O que pode ser modificado? O que deve continuar? 61
Conhecendo os resultados Avaliação externa e interna Os resultados da avaliação interna são comparáveis àqueles extraídos da avaliação externa: As habilidades avaliadas pelos professores são as mesmas avaliadas pelo programa de avaliação externa? Os conteúdos desenvolvidos pelos professores da escola, com base no currículo, estão relacionados com as habilidades da matriz de referência? 62
Agradecemos a atenção www.caed.ufjf.br oficinasecursos@caed.ufjf.br 63