Oficina de Apropriação de Resultados para Professores PAEBES 2014 Língua Portuguesa
Momentos de formação 1º Momento: Avaliação Externa e em Larga Escala. 2º Momento: Resultados. 2
1º Momento Avaliação Externa e em Larga Escala PAEBES 2014
O que é avaliar? Decidir Agir Diagnosticar Coletar Dados e informações sobre determinada realidade. Produzir algum julgamento sobre a realidade. Tomar decisão em função de um objetivo que se deseja alcançar. Traçar estratégias de uma ação sobre o objeto avaliado. 4
Os Sistemas de Avaliação Um Sistema de Avaliação da Educação tem por objetivo fornecer dados sobre o desempenho dos estudantes, a fim de contribuir para o aprimoramento da educação oferecida pela rede de ensino. 5
Etapas básicas dos Sistemas de Avaliação 2 1 Determinação da população a ser avaliada Elaboração da Matriz de Referência Construção de itens Pré-testagem dos itens Análise estatística e pedagógica dos itens 3 Montagem dos cadernos de testes (BIB) Elaboração dos testes Elaboração dos questionários contextuais 5 Análise dos resultados: TCT e TRI Produção dos resultados Construção e interpretação das Escalas de Proficiência Divulgação dos resultados 4 Aplicação dos instrumentos Processamento e constituição da base de dados da avaliação
Desenho da Avaliação PAEBES ALFA 1ª onda Edição 1º ano EF 2008 Língua Portuguesa 2009 Língua Portuguesa 2010 Língua Portuguesa e Matemática 2011 Língua Portuguesa e Matemática 2012 Língua Portuguesa e Matemática 2013 Língua Portuguesa (Leitura e Escrita) e Matemática 2014 Língua Portuguesa, Leitura, Escrita e Matemática 7
Desenho da Avaliação PAEBES ALFA 2ª onda Edição 1º ano EF 2º ano EF 3º ano EF 2008 LP LP LP 2009 LP LP LP 2010 LP e MAT LP e MAT LP e MAT 2011 LP e MAT LP e MAT LP e MAT 2012 LP e MAT LP e MAT LP e MAT 2013 LP (Leitura e Escrita) e MAT LP (Leitura e Escrita) e MAT LP (Leitura e Escrita) e MAT 2014 LP, Leitura, Escrita e MAT LP, Leitura, Escrita e MAT LP, Leitura, Escrita e MAT 8
Desenho da Avaliação PAEBES Edição 5º ano EF 9º ano EF 1º ano EM 2º ano EM 3º ano EM 2009 LP e MAT LP e MAT LP e MAT - - 2010 LP e MAT LP e MAT LP e MAT - LP e MAT 2011 LP e MAT LP e MAT - - 2012 LP e MAT LP, MAT, GEO e HIST - LP e MAT (estudo secretaria) 2013 LP e MAT LP, MAT e CIEN - - 2014 LP, MAT, PT LP, MAT, HIST, GEO - - LP, MAT, BIO, FIS, QUI LP, MAT, GEO, HIST LP, MAT, BIO, FIS, QUI LP, MAT, HIST, GEO9
Como utilizar os resultados? 10
Uso dos Resultados Professor Projetos de intervenção pedagógica. Elaboração de projetos especiais. Foco nos alunos com dificuldades. Ações de reforço escolar. Planejamento das ações de sala de aula. Visão proativa quanto ao desenvolvimento de habilidades e competências ao longo da educação básica. 11
Uso dos Resultados Aluno e família Acompanhamento individual do desempenho escolar pelos alunos e seus familiares. Informações sobre a qualidade dos serviços educacionais oferecidos. 12
2º Momento Resultados PAEBES 2014
Como trabalhar os resultados na escola O trabalho de intervenção realizado em cada escola, deve ser desenvolvido pensando criticamente na prática de hoje ou anteriores e nos resultados alcançados. Conhecendo esses elementos, pode-se pensar em estratégias para melhorar a prática que será aplicada. 14
Os grupos de trabalho e o modo de contato/intervenção para cada grupo Qual o trabalho desenvolvido com a equipe gestora (direção e coordenação)? Qual o trabalho desenvolvido com equipe pedagógica (coordenadores e professores)? 15
Equipe Pedagógica Conhecer os resultados gerais da escola: 1. Etapas avaliadas e percentual de participação. 2. Etapas avaliadas e proficiência média em cada disciplina. 3. Etapas avaliadas, proficiência média e distribuição por padrão de desempenho em cada disciplina. 16
Como os dados podem ser acessados? Revista Impressa. Aceso ao portal PAEBES 17
Revista Impressa Revista Pedagógica. Revista da Gestão Escolar. Revista do Sistema. 18
Como os dados podem ser acessados? Acesso ao portal: http://www.paebes.caedufjf.net/ 19
20
21
22
23
24
25
Resultados: - Por escola: - foco na TRI; - Por aluno: -foco na TCT. 26
27
Língua Portuguesa 28
29
Percentual de Estudantes por Nível de Proficiência e Padrão de Desempenho 30
31
O que representa a Proficiência Média? O que são itens? São os elementos que compõem os testes ou questionários O que é proficiência? É a medida que representa um determinado traço latente (aptidão) Teoria da Resposta ao Item (TRI) Grupo de modelos matemáticos e estatísticos que descrevem a associação entre a aptidão de um indivíduo e a probabilidade de uma resposta a um item 32
Item 33
Teoria de Resposta ao Item (TRI) 34
O que representam os Padrões de Desempenho? Do mais básico... RECUPERAÇÃO: Os estudantes demonstram um desenvolvimento ainda incipiente das principais habilidades associadas à sua etapa de escolaridade. REFORÇO: Os estudantes respondem itens com habilidades mais complexas, quando comparados com o verificado no padrão anterior. APROFUNDAMENTO: Esses estudantes demonstram atender às condições mínimas para que avancem em seu processo de escolarização. DESAFIO: Esses estudantes costumam responder corretamente a um maior quantitativo de itens, o que sugere a sistematização do processo de aprendizagem de forma consolidada para aquela etapa de escolaridade. Ao mais avançado... 35
Como realizar a leitura e interpretação dos resultados? O VÍDEO de Apropriação de Resultados As REVISTAS publicadas pelo sistema 36
Língua Portuguesa 37
Língua Portuguesa Leitura 3º ano EM 38
Organize os dados na tabela... 39
Equipe Pedagógica 1. Etapas avaliadas e percentual de participação Observe o número de estudantes e o percentual de participação (acima ou abaixo de 80%?). Analise os resultados de participação (por que este resultado está acima ou abaixo de 80%?). Quais intervenções podem ser feitas pela equipe pedagógica da escola? 40
Equipe Pedagógica 2. Etapas avaliadas e proficiência média em cada disciplina Observe a proficiência média; Vamos alocar esse dado na escala de proficiência. 41
ES 269,2 SRE 279,4 Escola 295,7,4 42
Equipe Pedagógica 2. Etapas avaliadas e proficiência média em cada disciplina Observe a proficiência média; Relacione a proficiência média com o padrão desempenho; Identifique habilidades e competências desenvolvidas (com base nesse padrão de desempenho); 43
Equipe Pedagógica 2. Etapas avaliadas e proficiência média em cada disciplina Reflita sobre o desempenho alcançado no teste e o resultado esperado pela escola: Qual o desempenho alcançado pelos estudantes em relação ao esperado? Quais habilidades e competências devem ser trabalhadas com o objetivo de alcançar o desenvolvimento esperado dos estudantes? 44
Equipe Pedagógica 2. Etapas avaliadas e proficiência média em cada disciplina Relacione o resultado alcançado com as ações/intervenções pedagógicas implementadas na escola. 45
Equipe Pedagógica 2. Etapas avaliadas e proficiência média em cada disciplina Observe, na escola, os resultados alcançados em diferentes etapas de escolaridade; Com base nesses resultados, elabore possíveis ações de intervenção para cada etapa, com o objetivo de recuperar alunos com desempenho abaixo do esperado, de acordo com as possibilidades da escola. 46
Equipe Pedagógica 2. Etapas avaliadas e proficiência média em cada disciplina Com base nesse resultado, podemos fazer as seguintes inferências: Como possibilitar que os estudantes que chegarão à esta etapa desenvolvam as habilidades esperadas? Como recuperar os estudantes que já passaram pela etapa avaliada para que, ao final da Educação Básica, tenham desenvolvido habilidades e competências esperadas? 47
Língua Portuguesa Leitura 9º ano EF 48
Língua Portuguesa Leitura 9º ano EF 49
Língua Portuguesa Leitura 9º ano EF 50
Língua Portuguesa Leitura 9º ano EF 51
Organize os dados na tabela... PAEBES 2014
Equipe Pedagógica 3. Etapas avaliadas, proficiência média e distribuição por padrão de desempenho em cada disciplina; Identifique o percentual de estudantes em cada padrão de desempenho; A(s) turma(s) dessa escola é(são) homogênea(s) e todos desenvolveram as habilidades no mesmo grau de complexidade? 53
Equipe Pedagógica 3. Etapas avaliadas, proficiência média e distribuição por padrão de desempenho em cada disciplina; O padrão de desempenho com maior percentual de estudantes é o mesmo padrão representado pela proficiência média alcançada pela escola? 54
Equipe Pedagógica 3. Etapas avaliadas, proficiência média e distribuição por padrão de desempenho em cada disciplina; Calcule o número de estudantes em cada padrão de desempenho; Conseguimos identificar quem são os estudantes alocados em cada padrão, na escola? 55
Equipe Pedagógica 3. Etapas avaliadas, proficiência média e distribuição por padrão de desempenho em cada disciplina; Apresente as habilidades e competências desenvolvidas por cada grupo de estudantes (observar, em relação às habilidades e às competências, o desempenho alcançado por alunos que estão alocados em padrões de desempenho diferentes). 56
Língua Portuguesa 57
Língua Portuguesa 58
Língua Portuguesa 59
Língua Portuguesa 60
Organize os dados na tabela... 61
Equipe Pedagógica 4. Etapa de escolaridade e percentual de acerto por descritor Observe o percentual de acerto geral da escola em cada disciplina e etapa de escolaridade; 62
Equipe Pedagógica 4. Etapa de escolaridade e percentual de acerto por descritor Relacione cada habilidade (descritor) com o percentual de acerto; Observe a relação existente entre descritores (habilidades de uma mesma competência ou habilidades trabalhadas no desenvolvimento de um determinado conteúdo); 63
Equipe Pedagógica 4. Etapa de escolaridade e percentual de acerto por descritor Observe descritores menos acertados : Estão relacionados a um mesmo tema/domínio/tópico? Estão relacionados às habilidades com grau de complexidade mais alto para aquela etapa de escolaridade? 64
Equipe Pedagógica 4. Etapa de escolaridade e percentual de acerto por descritor Observe descritores menos acertados : São habilidades desenvolvidas naquela etapa avaliada ou são desenvolvidas ao longo do Ensino Fundamental? Qual a relação de cada habilidade com os conteúdos trabalhados em sala de aula? Quais as práticas pedagógicas adotadas pelos professores da escola em relação a cada um desses conteúdos? 65
Equipe Pedagógica 4. Etapa de escolaridade e percentual de acerto por descritor Observe descritores menos acertados: Como possibilitar a compreensão dos estudantes em relação a cada uma dessas habilidades: Modificar por outras ações pedagógicas? Pesquisar/estudar outras formas de abordagem do conteúdo? Utilizar outros recursos pedagógicos? Outros... 66
Equipe Pedagógica 4. Etapa de escolaridade e percentual de acerto por descritor Observe os descritores mais acertados: Estão relacionados a um mesmo tema/domínio/tópico? Estão relacionados às habilidades com grau de complexidade menor para essa etapa de escolaridade? Podem auxiliar no desenvolvimento de descritores menos acertados? Como? 67
Equipe Pedagógica 4. Etapa de escolaridade e percentual de acerto por descritor Dentre os temas apresentados, quais são aqueles com os menores percentuais de acerto por descritor? Qual a relação desse resultado com o trabalho feito pelo professores em sala de aula? Este trabalho é adequado e suficiente para alcançar os resultados esperados? O que pode ser modificado? O que deve continuar? 68
Equipe Pedagógica 5. Avaliação externa e interna Os resultados da avaliação interna são comparáveis àqueles extraídos da avaliação externa: As habilidades avaliadas pelos professores são as mesmas avaliadas pelo programa de avaliação externa? Os conteúdos desenvolvidos pelos professores da escola, com base no currículo, estão relacionados com as habilidades da matriz de referência? 69
www.caed.ufjfj.br oficinasecursos@caed.ufjf.br