MESA 1: HISTÓRICO, AVANÇOS, DESAFIOS E O SISTEMA NACIONAL DE AVALIAÇÃO BÁSICA.

Transcrição

1 MESA 1: HISTÓRICO, AVANÇOS, DESAFIOS E O SISTEMA NACIONAL DE AVALIAÇÃO BÁSICA. Brasília, 12 e 13 de Novembro RUBEN KLEIN CONSULTOR DA FUNDAÇÃO CESGRANRIO E PRESIDENTE DA ABAVE SEMINÁRIO INTERNACIONAL ANÁLISE DOS FATORES ASSOCIADOS NAS AVALIAÇÕES EXTERNAS DE LARGA ESCALA

2 1995: SAEB OAmostral nas 4ª e 8ª séries do EF de 8 anos e na 3ª série do EM, fins de segmentos. OEscolas públicas e privadas. OLeitura e Matemática. 2

3 1995: SAEB O Introdução do conceito de matriz de referência. O Grande conjunto de itens para cobrir mais conteúdos e habilidades. O Planejamento de itens em blocos e cadernos. Cadernos distintos, mas com itens comuns na mesma série, entre séries e entre anos. 3

4 1995: SAEB OIntrodução da Teoria de Resposta ao Item (TRI). OEscala única entre séries e entre anos. OInterpretação da escala em pontos da escala. 4

5 1995: SAEB OResultados em termos de médias e desvios padrão, percentis e percentuais acima dos pontos interpretados da escala. OQuestionários de aluno, professor, diretor e escola. 5

6 1995: SAEB O Aluno inclui: idade, sexo e como se considera em relação a sua cor, nível de instrução de pai e mãe. O Cruzamentos proficiência (desempenho) versus variáveis dos questionários. O Fundação Cesgranrio, Fundação Carlos Chagas 6

7 1997 OMatriz de referência, resultado de acordo entre as secretarias estaduais de educação sobre o que deveria ser ensinado nesses segmentos. OAperfeiçoamento dos questionários. 7

8 1997 O Primeira análise de fatores associados utilizando modelos multiníveis ou hierárquicos. O Introdução da TRI com grupos múltiplos e da atual escala SAEB, arbitrando-se para a distribuição de proficiências na 8ª série, média 250 e desvio padrão 50. O Leitura, Matemática e Ciências. 8

9 1999 O Reformulação dos questionários. Introdução de itens sobre posse de bens para o cálculo do Critério Brasil, um índice socioeconômico, baseado em posse de bens e no nível de instrução de pai e mãe do aluno. O Leitura, Matemática, Ciências, Geografia e História. 9

10 1999 OSurgimento de outros grupos de pesquisa: BH, Juiz De Fora, Puc-Rio, Unicamp, Londrina. OAção da Fundação Ford e Financiamento INEP 10

11 2001 OA partir de 2001, somente Leitura e Matemática. OÚltima reformulação da matriz de referencia do SAEB. OConsolidação da metodologia de equalização utilizada no SAEB 11

12 2003 O INEP solicita várias análises de fatores associados em 1999, 2001 e O Análise do efeito bolsa escola. O Tentativa de estabelecer pontos ou níveis básicos, adequado e avançados nas escalas. Sem consenso. 12

13 2005 OProva Brasil, censitário nas escolas públicas, 4ª série/5º ano e 8ª série/9º ano. 13

14 2006 OMetas do Todos pela Educação. 14

15 2007 OIDEB e suas Metas. ODurante toda a década de 2000, avaliações estaduais e municipais com análises de fatores associados. OMuitos estudos independentes como os de equidade. 15

16 2007 OEconomistas começam a fazer estudos. OIdentificação de várias variáveis importantes de família, hábitos de estudo, relação professor-aluno, clima de escola, etc. 16

17 2007 OExemplo PISA. Construção de índices baseados nas variáveis dos questionários. 17

18 Propostas O O INEP deveria a partir dos dados do SAEB/Prova Brasil construir e divulgar um índice socioeconômico, por aluno. Pode ser o Critério Brasil ou outro. Sua metodologia, inclusive da imputação de dados deve ser divulgada. O importante é que seja comparável ao longo dos anos e entre os anos escolares. 18

19 Propostas ODeveria construir outros índices, como a infraestrutura de escolas. Baseados nos questionários ou nos Censos Escolares. OIsso seria muito útil, pouparia tempo e tornaria as pesquisas mais comparáveis. 19

20 Propostas OEspecificar os índices desejados. Acrescentar nos questionários do SAEB/Prova Brasil ou no Censo Escolar, as perguntas necessárias. OQuem quiser pode construir índices diferentes. Os microdados continuam sendo divulgados. 20

21 Propostas OO INEP deveria ter um questionário básico a ser aplicado em todo SAEB/Prova Brasil. OEm toda edição do SAEB/Prova Brasil poderia ser definido um tópico especial de estudo e um questionário construído para essa finalidade. 21

22 Propostas OENEM, ENADE. ODivulgação de resultados deveria incluir alguns desses índices. OIncluir novas áreas curriculares, começando com Ciências nos anos alternados. 22

23 Propostas OIncluir novos anos escolares como final do ciclo de alfabetização. OIniciar estudos e pesquisas para avaliar a qualidade da educação infantil (pré-escola e creche). 23