Contribuições da Avaliação do. Programa de Formação Continuada Multicurso. para o aprimoramento. do projeto educacional e para a sociedade

Transcrição

1 Contribuições da Avaliação do Programa de Formação Continuada Multicurso para o aprimoramento do projeto educacional e para a sociedade

2 Cultura da Avaliação: diretrizes A Avaliação de seus projetos é uma diretriz normativa da Fundação Roberto Marinho tendo em vista que valorizamos identificar : Desafios, acertos e erros. Tal política tem como finalidade responder perguntas como: O que aprendemos com a avaliação? Como ela contribui para a realização de nossa missão? Como ela contribui para o relacionamento com os parceiros?

3 Cultura de Avaliação: diretrizes Procedimentos fundamentais: - planejamento: definição das questões, objetivos e indicadores; públicos; etapas de verificação; orçamento - banco de dados cadastro dos beneficiários - contratação de um instituto: desenho e execução da avaliação externa Aplicação de metodologias distintas: - Mix de métodos quantitativos e/ou qualitativos

4 Cultura da Avaliação: diretrizes Demanda Desenho do Projeto Contratação de um instituto: Avaliação Externa Indicadores Quadro lógico Briefing Monitoramento e Avaliação Planejamento Implementação Utilização dos resultados Monitoramento e Avaliação Relatório Meta-avaliação Artigos Gestão Compartilhada (Equipes Teleducação e Avaliação )

5

6 Empresa e Pesquisadores responsáveis INNOVA Pesquisa & Assessoria LAED PUC-Rio Pesquisadores Maria Dolores Bombardelli Kappel Alicia Maria Catalano de Bonamino Cynthia Paes de Carvalho Fátima Cristina de Mendonça Alves Maria Inês do Rego Monteiro Bomfim Eduardo Wagner

7 Multicurso Matemática Espírito Santo Contexto Programa de Formação continuada para professores de Matemática do Ensino Médio e gestores, adotado como Política Pública no Estado Objetivos: Promover a melhoria da aprendizagem dos alunos do Ensino Médio Desenvolver rede de aprendizagem colaborativa Promover a adoção de novas práticas no ensino Números (2008, 2009 e 2010) Educadores - Professores de Matemática - Técnicos da Secretaria de Educação - Gestores (Coordenadores e Diretores de Escola) 252 Escolas Alunos

8 Objetivo do Programa/Avaliação Avaliar a contribuição do Programa no que se refere à: 1. Melhoria do desempenho cognitivo em Matemática dos alunos da Rede Estadual do Ensino Médio; 2. Adoção de novas práticas pelos professores no ensino da Matemática na Rede Estadual do Ensino Médio do Espírito Santo.

9 Desenho da Avaliação Estudo longitudinal Aprendizagem Início Multicurso Avaliação dos alunos do 1º ano do Ensino Médio Professores (oficinas) Gestores Avaliação dos mesmos alunos Professores Gestores Avaliação dos mesmos alunos Professores Maio 2008 Agosto 2008 Julho 2009 Outubro 2010 M1 M2 M3 11 meses 26 meses

10 Alunos do Ensino Médio Participantes da Pesquisa - Teste cognitivo com 44 itens de Matemática - Questionário sócio demográfico (86 perguntas) Ano Total de alunos Previsto Real Retorno (%) 2008 Marco Zero , Marco Um , Marco Dois ,2 Fonte: Avaliação do Programa de Formação Continuada - Multicurso Matemática Ensino Médio - ES, 2008/2009/20

11 Professores Participantes da Pesquisa Questionário Contextual com 155 questões Professores Total Previsto Real Retorno (%) 2008 Marco Zero , Marco Um , Marco Dois ,8 Fonte: Avaliação do Programa de Formação Continuada - Multicurso Matemática Ensino Médio - ES, 2008/2009/2010.

12 Desenho da Avaliação Contribuir para melhoria da proficiência dos alunos Desenvolver uma rede de aprendizagem qualificada e colaborativa Grupos Focais com: tutores, coordenadores de grupos de estudo e alunos Entrevistas individuais e coletivas com: gerentes, assessores e técnicos da SEDU Questionário contextual com: professores, gestores, pedagogos e alunos Captar a percepção dos alunos sobre mudanças na prática pedagógica do professor Teste cognitivo com alunos Questionário sociodemográfico com alunos Verificar apropriação dos princípios e recursos do programa pelos professores Oficinas de avaliação de práticas pedagógicas Análise do programa feita por especialistas

13 Desenho da Avaliação Contribuir para melhoria da proficiência dos alunos Desenvolvimento de uma rede de aprendizagem qualificada e colaborativa Grupos Focais com: tutores, coordenadores de grupos de estudo e alunos Entrevistas individuais e coletivas com: gerentes, assessores e técnicos da SEDU Questionário contextual com: professores, gestores, pedagogos e alunos Percepção dos alunos sobre mudanças na prática pedagógica do professor Teste cognitivo com alunos Questionário sociodemográfico com alunos Apropriação dos princípios e recursos do programa pelos professores Oficinas de avaliação de práticas pedagógicas Análise do programa feita por especialistas

14 Desenho da Avaliação Melhoria na proficiência dos alunos Grupos Focais com: tutores, coordenadores de grupos de estudo e alunos Entrevistas individuais e coletivas com: gerentes, assessores e técnicos da SEDU Desenvolver uma rede de aprendizagem qualificada e colaborativa Questionário contextual com: professores, gestores, pedagogos e alunos Percepção dos alunos sobre mudanças na prática pedagógica do professor Teste cognitivo com alunos Questionário sociodemográfico com alunos Apropriação dos princípios e recursos do programa pelos professores Oficinas de avaliação de práticas pedagógicas Análise do programa feita por especialistas

15 Desenho da Avaliação Melhoria na proficiência dos alunos Grupos Focais com: tutores, coordenadores de grupos de estudo e alunos Entrevistas individuais e coletivas com: gerentes, assessores e técnicos da SEDU Desenvolvimento de uma rede de aprendizagem qualificada e colaborativa Questionário contextual com: professores, gestores, pedagogos e alunos Captar a percepção dos alunos sobre mudanças na prática pedagógica do professor Teste cognitivo com alunos Questionário sociodemográfico com alunos Apropriação dos princípios e recursos do programa pelos professores Oficinas de avaliação de práticas pedagógicas Análise do programa feita por especialistas

16 Desenho da Avaliação Melhoria na proficiência dos alunos Grupos Focais com: tutores, coordenadores de grupos de estudo e alunos Entrevistas individuais e coletivas com: gerentes, assessores e técnicos da SEDU Desenvolvimento de uma rede de aprendizagem qualificada e colaborativa Questionário contextual com: professores, gestores, pedagogos e alunos Percepção dos alunos sobre mudanças na prática pedagógica do professor Teste cognitivo com alunos Questionário sociodemográfico com alunos Verificar apropriação dos princípios e recursos do programa pelos professores Oficinas de avaliação de práticas pedagógicas Análise do programa feita por especialistas

17 Resultados da Avaliação - Professores Frequência Professores (%) Procurei participar de todas as atividades do Multicurso 92,1 97,9 O trabalho em colaboração com meus colegas de grupo de estudo foi decisivo no meu aproveitamento do Multicurso 85,1 96,2 O Multicurso estimula um ambiente de trabalho mais cooperativo na escola 83,1 96,7 O Multicurso foi bastante útil para minha prática pedagógica 81,4 97,1 O Multicurso cumpriu seus objetivos como Programa de Formação Continuada 78,4 94,6 O Multicurso atendeu às minhas expectativas 72,4 93,1 O Multicurso não ajudou a melhorar minha prática como professor(a) de Matemática 12,3 16,4 Só participei do Multicurso em virtude do adicional financeiro 6,9 5,9 Fonte: Avaliação Externa do Multicurso Ensino Médio - Matemática, 2009/2010.

18 Resultados da Avaliação - Professores O valores nega,vos indicam MENOR uso de recursos pedagógicos

19 Resultados da Avaliação - Professores

20 Resultados da Avaliação - Alunos Fonte: Avaliação do Programa de Formação Con,nuada Mul,curso Matemá,ca Ensino Médio ES, 2008/2009/2010

21 Resultados da Avaliação - Alunos Fonte: Avaliação do Programa de Formação Con,nuada Mul,curso Matemá,ca Ensino Médio ES, 2008/2009/2010

22 Resultados da Avaliação - Alunos Fonte: Projeto Mul,curso Ensino Médio no Espírito Santo 2010

23

24 Interessados Produtos Flyers Cartazes de divulgação Alunos Questionários Artigo de opinião Seminários Público Mídia Geral Congressos Revista Redes Boletins Treinamento Olhar Rede Professores.ppt parciais Meta-avaliação Relatórios FRM Mat. Prospecção Revista Redes Boletins Treinamento Olhar Rede Gestão Escola Dissertações Teses Artigos Base de Dados Universidades Revista Redes Boletins Monitoramento Olhar Rede Gestão SEDU

25 Contribuições do Processo Avaliativo Projeto Alinhamento conceitual da equipe Preparação de novos conteúdos de formação Incremento na produção de materiais de Comunicação e Monitoramento Compartilhamento dos resultados com os envolvidos Processo Avaliativo Introdução de estudos longitudinais na análise Identificação da contribuição da escola e do programa à aprendizagem Análise da satisfação dos envolvidos no programa FRM Aprimoramento de briefings e modelos de contratação de empresas externas Renovação da parceria Fortalecimento dos argumentos de prospecção Reconhecimento da qualidade FRM (Congressos e publicações) SEDU Linha de base: produção de documentos de referência para o planejamento das escolas da rede Informações fornecem subsídios para a gestão da SRE e suas regionais Informações fornecem subsídios para renovação do projeto com novo escopo

26 Os processos avaliativos... contribuem para que os envolvidos encontrem seus próprios caminhos de aprendizagem e desenvolvimento; transformam a informação recolhida nos instrumentos em um novo conhecimento; acontecem em situações compartilhadas de aprendizagem entre aqueles que avaliam e os protagonistas da ação; promovem a reflexão com todos os envolvidos no processo; divulgam, socializam e submetem as descobertas significativas à crítica

27 Fundação Roberto Marinho UN Teleducação Isa Lopes Coordenação Pedagógica

28 Referências Bibliográficas BOAVENTURA, Edvaldo M. Metodologia da Pesquisa. São Paulo: editora Atlas S.A., BROOKE, N. SOARES, J. F. (org). Pesquisa em eficácia escolar: origens e trajetórias. Belo Horizonte: Editora da UFMG, CUNHA, L. A. Educação e desenvolvimento social no Brasil. Rio de Janeiro: Francisco Alves, FRANCO, C.; MANDARINO, M.; ORTIGÃO, M. I. Projeto pedagógico de escola promove eficácia e equidade em educação? Revista Undime - RJ, Rio de Janeiro, v. 7, n. 2, p , GIL, A. C. Métodos e técnicas de pesquisa social. 5. ed. São Paulo: Atlas, SOARES, J. F. Qualidade e equidade na educação básica Brasileira: A evidencia do SAEB Archivos Analiticos de Politicas Educativas, 12(38). (2004). UNESCO.ORGANIZAÇÃO DAS NAÇÕES UNIDAS PARA A EDUCAÇÃO, A CIÊNCIA E A CULTURA. O perfil dos professores brasileiros: o que fazem, o que pensam, o que almejam. ABRAMOVAY, Miriam (coord) et al. São Paulo: Moderna, 2004.