O complexo quebra-cabeça da avaliação na educação

Transcrição

1 MIGUEL SZÉKELY

2 Center for Education and Social Studies CEES O complexo quebra-cabeça da avaliação na educação Dr. Miguel Székely, Diretor, Center for Education and Social Studies Preparado para o Seminário Internacional Caminhos para a qualidade da educação pública: Impactos e Evidências, São Paulo, 15 de setembro,

3 Educação: o setor com o maior poder de promover transformação e, normalmente, o mais difícil de ser transformado

4 Conteúdo: 1. As peças do quebra-cabeça 2. Evoluindo para um sist. educacional moderno 3. O complexo quebra-cabeça 4. Atores, partes interessadas e interesses 5. Alguns casos ilustrativos

5 Aprender para quê? O que deve ser aprendido? Matriz Curricular Padrões de aprendizagem Mapas de progresso Acessibilidade Programas de alimentação Transferência de renda condicionada Segurança na escola Transporte 6 Acesso para todos 1 Modelo pedagógico 2 Modalidade de suprimento Quem, como? Urbano, rural, marginalizado Multicultural-Multilingual Na escola virtual, à distância Padrão-Alternativo Facilitadores-deflagradores Sistema integrado de informações Monitoramento e avaliação Coordenação intragovernamental Orçamentação Avaliação de alunos 5 Gestão escolar Objetivo 4 Inputs 3 Recursos humanos Líderes de aprendizagem Professores e padrões de professores Diretores - Padrões para gestão escolar Professores: treinamento, carreiras, avaliação Mecanismos de participação: comunidade e família Inputs Infraestrutura Equipamentos, serviços Materiais Tecnologia

6 Conteúdo: 1. As peças do quebra-cabeça 2. Evoluindo para um sist. educacional moderno 3. O complexo quebra-cabeça 4. Atores, partes interessadas e interesses 5. Alguns casos ilustrativos

7 Aprender para quê? O que deve ser aprendido? Matriz Curricular Padrões de aprendizagem Mapas de progresso Acessibilidade Programas de alimentação Transferência de renda condicionada Segurança na escola Transporte 6 Acesso para todos 1 Modelo pedagógico 2 Modalidade de suprimento Quem, como? Urbano, rural, marginalizado Multicultural-Multilingual Na escola virtual, à distância Padrão-Alternativo Facilitadores-deflagradores Sistema integrado de informações Monitoramento e avaliação Coordenação intragovernamental Orçamentação Avaliação de alunos 5 Gestão escolar Objetivo 4 Inputs 3 Recursos humanos Líderes de aprendizagem Professores e padrões de professores Diretores - Padrões para gestão escolar Professores: treinamento, carreiras, avaliação Mecanismos de participação: comunidade e família Inputs Infraestrutura Equipamentos, serviços Materiais Tecnologia

8 1 Uso 1 de demonstração Transmissão Modelo colaborativa; pedagógico linear de conhecimento, aplicação Desenvolvimento Cobertura do de competências Competências Currículo Memorização repetição acumulação de fatos, dados, informações Compreensão, utilização de informação para objetivos concretos, sendo criativo, analítico, proativo

9 Modelo de expansão para capitalizar economias de escala e atingir mais estudantes rapidamente Oferta adaptada à cultura, ao contexto socioeconômico e ao meio ambiente para promover aprendizagem Desenvolvimento Cobertura do de competências Currículo Competências 2 Privilegia Adaptação modelo 2 a Tipo diferentes de Oferta circunstâncias central único

10 Desenvolvimento Cover de curriculum competências Professor 3 facilita, ensina, Human estudantes Resources indica, guia aprendem Instrutor dá ordens mostra o caminho a ser seguido Parceiro na aprendizagem facilita desenvolvimento de competências, promove estratégias para garantir progresso

11 Sala de aula fixa: todos devem prestar atenção a instruções Desenvolvimento de competências Permite ritmos diferentes, interage com o ambiente, promove colaboração e interação Flexível Semem flexibilização espaço e Padrões tempo, colaborativo fixos interativo 11

12 Desenvolvimento Cover de curriculum competências Competências Oferta 5 de Oferta de Aprendizagem ensino Gestão a ser a ser performada escolar desenvolvida Administração de recursos para que o ensino aconteça (diretor = administrador) Gestão para que a aprendizagem aconteça (envolvimento com desenvolvimento do professor, adaptação do espaço da escola: tecnologia, inovação)

13 Foco no aumento da oferta (mais estudantes na escola) Foco em mais estudantes em ambientes de aprendizagem (adaptação, flexibilidade, acessibilidade, adaptação a diferentes circunstâncias) Espaço Mais para 6 Acesso espaço, para diferentes mais todos tipos de estudantes estudantes Desenvolvimento Cover de curriculum competências Competências

14 Conteúdos: 1. As peças do quebra-cabeça 2. Evoluindo para um sist. educacional moderno 3. O complexo quebra-cabeça 4. Atores, partes interessadas e interesses 5. Alguns casos ilustrativos

15 Qualidade na educação Resultado da eduçaão Bem-estar, desenvolvimento humano, senso de poder pessoal, cidadania, felicidade etc. Contexto Serviço de educação Interação Características pessoais, familiares e do contexto = Resultado Interação da educ. = Efeito da educação Acesso para todos Modelo pedagógico Modalidade de oferta Contexto social Serviços Infraestrutura Comunicações Tecnologia Condições geográficas Atividade econômica Padrões culturais Instituições Marco legal Contexto econ. Padrões culturais Valores, tradições Ambiente institucional e legal. Aplicação da lei, direitos humanos, sistema judicial Contexto geral Gestão escolar Objetivo Inputs Recursos humanos Contexto familiar Características pessoais Estrutura familiar Relações familiares Nível educacional Capital social Cultura/tradição, valores. Recursos econômicos Habilidades cognitivas Capacidade física Saúde/nutrição Inteligência emocional Motivação Ambiente geográfico, serviços, infraestrutura, contexto econômico local tecnologia Características pessoais e familiares Contexto comunitário Pessoal e familiar 1 Qualidade do serviço de educação (Medida em que a oferta é exibida e adaptada) 2 Qualidade dos resultados da educ. (Medida em que a oferta a que os alunos são expostos gera os objetivos educacionais com equidade) 3 Qualidade dos efeitos da educação (Medida em que o resultado da educação gera bem-estar, desenvolvimento humano, senso de poder pessoal, felicidade)

16 Avaliação dinâmica Linha de base Resultado observ./esperado Linha de base Resultado observ./esperado Linha de base Resultado observ./esperado Resultado observado/esperado

17 Elementos de Complexidade 1. Tamanho: Tipicamente, um setor muito grande em termos financeiros e demográficos Grandes interesses envolvidos; Grande número de pessoas empregadas = poderosos sindicatos e organizações (a complexidade da aglomeração). 2. Dificuldade de medir sucesso e/ou fracasso no curto prazo: Dificuldade de optar por outra escola, pois, normalmente, usuários de serviços de educação no setor público não escolhem a escola que usarão: são clientes cativos que precisam frequentar uma escola; Sistema de propriedade difuso (com poderosos sindicatos envolvidos); Dificuldade de responsabilizar e cobrar: usuários do sistema não podem reclamar seus direitos retrospectivamente. 3. Processo de longa duração (12 anos de educação básica) com complexa função de produção Requer permanente esforço estruturado que vai além dos ciclos políticos; Dificuldade de medir o efeito de cada componente (cada professor, tecnologia, materiais) muitos atores envolvidos, muitas partes interessadas ao longo do processo. 17

18 Elementos de Complexidade 5. Multiplicidade de objetivos Alcançar todo mundo x qualidade da educação Educação Primária x Superior Prover boas condições para os que trabalham no sistema Lidar com questões que são relevantes para grupos diferentes Em geral, confusão entre privilegiar o processo e privilegiar o objetivo final 6. Resistência normal a mudanças Requer mudar comportamentos Mais difícil quando os demais elementos do sistema não estão alinhados Requer contínuos ajustes detalhados para a implementação O problema de incentivos desalinhados (p.ex., direitos dos trabalhadores x qualidade) 18

19 Conteúdos: 1. As peças do quebra-cabeça 2. Evoluindo para um sist. educacional moderno 3. O complexo quebra-cabeça 4. Atores, partes interessadas e interesses 5. Alguns casos ilustrativos

20 Fatores impulsionadores Fatores atratores More Espaço space, 6 para dif. tipos de Access more for all estudantes students 1 Collaborative Colaborativo Linear 1 transmission demonstração Pedagogical demonstation model use, uso, of knowledge, application aplicação Privilege 2 Adaptação central Type of of a supply single difer. model circunstâncias Desenvolvimento Curriculum de competências Coverage Setor produtivo Oferta 5 Supply para for desenvolver teaching School to a aprendizagem be management performed Flexível One-esided, Inputs tempo, espaço 4 e standard, colaborativo interativo fixed Teacher Professor 3 teaches, student facilita, Human indica, resources learns guia

21 Compreendendo os atores Doadores externos, investidores (públicos e privados) Tomadores de decisão de alto nível Pesquisadores, especialistas, avaliadores Professores, diretores/outros profissionais Clientelas, opinião pública, beneficiários

22 Diferentes objetivos Políticos Pesquisadores Objetivo = Reeleger-se Renomeação Manter o barco à tona Objetivo = Pureza acadêmica Publicações Prestígio Utilidade prática x rigor

23 Diferentes tempos e ritmos Políticos Pesquisadores Necessidade de mostrar resultados (atender às clientelas, e tempo curto para colher benefícios) Tempo necessário para aumentar qualidade da produção acadêmica (probabilidade de publicação) Paciência x impaciência

24 Diferentes implicações Políticos Pesquisadores Resultados incertos, capitalização política incerta (somente por meio de impacto positivo) Publicação depende de rigor metodológico e teórico, não de efeitos positivos ou negativos Risco x certeza

25 Diferentes prioridades Políticos Pesquisadores Factibilidade política Factibilidade econômica Factibilidade social Rigor acadêmico Produção de conhecimento Questões de curto prazo X Influências de longo prazo

26 Conteúdos: 1. As peças do quebra-cabeça 2. Evoluindo para um sist. educacional moderno 3. O complexo quebra-cabeça 4. Atores, partes interessadas e interesses 5. Alguns casos ilustrativos

27 3 casos ilustrativos no México 1. Avaliação de diretores de escolas A consolidação de uma cultura de avaliação leva tempo Importante saber o porquê de avaliar (não um fim, mas um meio) Avaliação deve ter consequências, ou vira um exercício acadêmico 2. Resultados da avaliação O problema da interpretação (classificação) O erro de ligar resultados a escolas linearmente (punir os sem culpa) O problema da interpretação (escopo da avaliação) 3. Avaliação de mecanismos de incentivo Os desafios de lidar com grupos de controle Risco de investir sem continuidade (dependência, equívocos) Melhor não insistir se a mudança não for viável Equilíbrio entre pureza acadêmica e vida real

28 Center for Education and Social Studies CEES O complexo quebra-cabeça da avaliação na educação Dr. Miguel Székely, Diretor, Center for Education and Social Studies Preparado para o Seminário Internacional Caminhos para a qualidade da educação pública: Impactos e Evidências, São Paulo, 15 de setembro,