Avaliação do impacto da hora do conto: experiência da aplicação da metodologia EIRAA

Transcrição

1 Avaliação do impacto da hora do conto: experiência da aplicação da metodologia EIRAA Álvaro Fernandes Maria José Leite Leonor Gaspar Pinto Paulo Silva César Ferreira Setembro Programa de Promoção da(s) Leitura(s) Divisão de Gestão de Bibliotecas Objectivos Gerais Identificar a Rede Municipal de Bibliotecas de Lisboa como um espaço privilegiado de acesso à informação e ao conhecimento e potenciador de leitura(s); Consolidar e ampliar o papel social e educacional da Rede Municipal de Bibliotecas de Lisboa no desenvolvimento de hábitos de leitura e de competências de literacia da informação. Linhas de Acção Linha de Acção I Promoção da Leitura e Colecções Linha de Acção II Promoção da Literacia de Informação Linha de Acção III Promoção da Cidadania 2 1

2 Programa de Promoção da(s) Leitura(s) Divisão de Gestão de Bibliotecas Linha de Acção I Promoção da Leitura e Colecções Objectivos Específicos Promover o contacto precoce com o livro e com a leitura; Estimular o gosto pela leitura; Diversificar interesses e práticas de leitura; Promover o livro como forma de prazer e de lazer; Promover o gosto pela partilha da leitura e do livro; Promover e divulgar as colecções existentes na RMBL, assim como os autores. Os indicadores de desempenho para estas actividades incidem no número de actividades previstas e realizadas, número de participantes e nível prossecução dos objectivos, todavia, no âmbito de cada projecto/ actividade, esta questão exige uma análise específica. 3 O quê? Matriz de Impacto Caracterização os serviços/actividades a ser avaliados Dá-me um livro Conto-te uma História Crianças em Idade Escolar: Grupos/Turma 1º Ciclo Ensaio da aplicação metodologia medição impactos Teste instrumentos de recolha 4 2

3 Matriz de Impacto Caracterização os serviços/actividades a ser avaliados Dá-me me um livro Conto-te te uma História ria Os desafios que se colocaram à concepção da actividades foram: 1. Como contribuir para promover o gosto por ouvir e ler histórias nas crianças do 1º Ciclo? 2. Como contribuir para a promoção de hábitos de leitura nas crianças do 1º Ciclo? 3. Como contribuir para promover a frequência de bibliotecas junto das crianças do 1º Ciclo? 5 ETAPA 1 Construa a Estória Necessário porque - Cria as bases instrumentais, sociais e culturais, para uma fruição plena da cidadania na sociedade de informação e do conhecimento; - Permite intensificar o processo de difusão de aquisições precoces ao nível da Literacia; - Cativa novos públicos para a utilização das bibliotecas. Recursos - Salas equipadas das bibliotecas municipais - Acervo documental actualizado - Técnicos com formação especifica e experiência na área 6 3

4 ETAPA 1 Construa a Estória Onde e Quando? Resultados e efeitos definidos 2 Bibliotecas Municipais Pelo menos 6 Sessões Pelo menos 130 participantes Final do Ano Lectivo 2008/2009 Indicadores N.º de bibliotecas envolvidas N.º de participantes N.º de sessões 7 ETAPA 2 Encadeamento para cada tipo de Efeito Global de Aprendizagem EGA : Conhecimento e Compreensão Resultados e efeitos definidos - Projecta-se que, pelo menos metade dos Professores considerem que a actividade contribuiu para promover os hábitos e competências de leitura da turma; - Projecta-se que mais de metade dos Alunos compreendam bem a história abordada e os respectivos personagens. Indicador Nº de Professores que atribuíram um valor igual ou superior ao valor médio a simultaneamente: 3.2 Contributo para aumentar as competências de leitura da turma Nº de Alunos que atribuíram o valor máximo a: 1.1 Acho que percebi tudo sobre a história e os personagens Método de Recolha Actividade pelo Professor (Escala O a 4) Actividade pelos Alunos (Escala 1 a 3) 8 4

5 ETAPA 2 Efeitos Esperados (Outcomes Outcomes) Aquisição de Competências Resultados e efeitos definidos Projecta-se que, pelo menos, três quartos dos Professores envolvidos considerem que a actividade contribuiu para aumentar as competências de leitura da turma Indicador Nº de Professores que atribuíram o valor médio a: 3.2 Contributo para aumentar as competências de leitura da turma Método de Recolha Actividade pelo Professor 9 ETAPA 2 Efeitos Esperados (Outcomes Outcomes) Atitudes e Valores Resultados e efeitos definidos Projecta-se que, pelo menos metade dos Professores e Alunos considere muito conseguida a experiência proporcionada pela actividade Indicador Nº de Professores cuja média do valor Atribuído a: 1 Avaliação do nível de interesse das actividades e 2 Apreciação do desempenho do animador, seja superior ao valor médio Nº de Professores que atribuíram pelo menos o valor médio a 3.3 Contributo para os hábitos de leitura da turma Nº de Alunos que atribuíram o valor máximo a todos os itens do grupo 1 actividade face aos objectivos Nº de Alunos que atribuíram o valor máximo a todos os itens do grupo 2 Avaliação global do desenvolvimento da actividade Método de Recolha Actividade pelo Professor Actividade pelos Alunos 10 5

6 ETAPA 2 Efeitos Esperados (Outcomes Outcomes) Divertimento, inspiração e criatividade Resultados e efeitos definidos - Projecta-se que pelo menos metade dos Professores considere que a actividade contribuiu para aumentar o gosto da turma pela leitura - Projecta-se que, pelo menos metade dos Alunos considere a actividade muito divertida Indicador Nº de professores que atribuíram o valor médio a: 3.1 Contributo para aumentar o gosto da turma pela leitura Nº de Alunos que atribuíram o valor máximo a: 1.2 Acho que foi tudo divertido Método de Recolha Actividade pelo Professor Actividade pelos Alunos 11 ETAPA 2 Efeitos Esperados (Outcomes Outcomes) Actividades, comportamentos e Progressão Resultados e efeitos definidos - Projecta-se que pelo menos metade dos Alunos manifestem gosto e vontade por vir a ler - Projecta-se que o Professor demonstre a intenção de participar com regularidade neste tipo de actividade. - Projecta-se que o Professor venha a utilizar a actividade para complementar o desenvolvimento das suas estratégias educativas. - Projecta-se que pelo menos metade dos Alunos demonstre maior apetência por ler. 12 6

7 ETAPA 2 Efeitos Esperados (Outcomes Outcomes) Actividades, comportamentos e Progressão Indicadores - Nº de Alunos que atribuíram o valor médio a: 1.3 Gostei porque me ensinou uma nova história - Nº de Alunos que atribuíram o valor médio a: 3.1. Depois disto vou passar a ler mais histórias - Resposta Sim à questão 4 Pensa voltar a participar neste tipo de actividades a realizar pela RMBL? -Incremento de um valor numa escala de articulação entre estratégias de aprendizagem da leitura e promoção de leitura; - Incremento de um valor da actividade Leitura no grupo 1.1 Classifica das actividades semanais por grau de importância - Incremento de 25% no nº de alunos que identificam pelo menos o nome de um título de uma lista de histórias; - Incremento do valor médio para o valor máximo, em 3.2. Vou passar a ir mais vezes à Biblioteca Municipal 13 ETAPA 2 Efeitos Esperados (Outcomes Outcomes) Actividades, comportamentos e Progressão Método de Recolha Actividade pelos Alunos Actividade pelo Professor Guião para Follow-up Aplicação posterior 14 7

8 ETAPA 3 Escolher os métodos m de recolha de dados Método de recolha e instrumentos concebidos inscrição Mapas de Monitorização Actividade pelos Alunos Actividade pelos Professores Foto 15 ETAPA 3 Escolher os métodos m de recolha de dados Redefinição de objectivos: Teste efectuado com crianças que frequentavam as Actividades de Verão durante o período de férias escolares Grupos Diversificados acompanhados por Monitores/Animadores) Adaptação dos Métodos M de recolha às s Crianças as Escala de Classificação das Respostas 16 8

9 ETAPA 4 Analisar os dados Resultados Obtidos (Outputs) Envolver 3 Bibliotecas Municipais (Orlando Ribeiro; David Mourão-Ferreira; Natália Correia) Envolveu 47 participantes Abranger 3 sessões 17 ETAPA 4 Analisar os dados Quadro Comparativo Produto esperado Envolver 2 bibliotecas Envolver pelo menos 130 Participantes Realizar pelo menos 6 sessões Aplicação da Metodologia EIRAA (um processo completo) a uma actividade Produto obtido 3 bibliotecas envolvidas (Orlando Ribeiro; Natália Correia; David Mourão-Ferreira) 47 (44 crianças as e 3 adultos) participantes envolvidos 3 sessões realizadas Teste dos instrumentos de recolha de dados 18 9

10 ETAPA 4 Analisar os dados Resultados por Efeitos Gerais de Aprendizagem Resultado: Conhecimento e Compreensão 79,5% das crianças as atingiram o nível n 3 (máximo de concordância numa escala de 1 a 3) em relação ao item em questão: compreenderam a história e os personagens Todos os adultos consideram que contribuiu para aumentar os hábitos e competência de leitura Resultado: Aquisição de Competências Todos os adultos consideram que contribuiu para aumentar os hábitos e competência de leitura 19 ETAPA 4 Analisar os dados Resultados por Efeitos Gerais de Aprendizagem Resultado: Atitudes e Valores (68%) das Crianças as consideraram que a actividade alcançou o objectivo ao nível n máximo m (compreenderam a história e consideraram divertida) (72,7%) das crianças as atribuíram ram o valor máximo m à actividade (incluindo local, actividades complementares e quem contava) Todos os adultos atribuíram ram o valor máximo m à actividade a todos os níveis: n Nível N de interesse da actividade; Apreciação desempenho do Animador 20 10

11 ETAPA 4 Analisar os dados Resultados por Efeitos Gerais de Aprendizagem Resultado: Divertimento, inspiração e criatividade Todos os adultos consideraram que a actividade contribui para aumentar o gosto do grupo pela leitura 61,3% das crianças as considerou a actividade divertida 21 ETAPA 4 Analisar os dados Resultados por Efeitos Gerais de Aprendizagem Resultado: Actividades, Comportamentos e Progressão (A aplicar Posteriormente) (47,7%) Das crianças manifestou que iria passar a ler mais depois da actividade; O restantes indicadores relativos a este Efeito (EGA) não foram recolhidos Projecta-se a utilização do processo de Follow-up na recolha de dados sobre a evolução hábitos de leitura e a importância da leitura para um ensaio com Grupos-Turma, para a mesma actividade mas com a recolha dos dados em dois momentos diferentes do ano lectivo 22 11

12 Matriz de Impacto Caracterização os serviços/actividades a ser avaliados para O quê? Desenvolvimentos Futuros Aplicação da metodologia a Grupos-Turma Envolvimento de 10 bibliotecas/ ano Pelo menos 520 participantes/ ano Pelo menos 20 sessões/ ano lectivo Objectivos do Processo: Aplicação Metodologia EIRAA de forma articulado com o PAD Programa de Avaliação de Desempenho da RMBL 23 ETAPA 1 Onde e Quando? Requisitos: 1- Aplicação ao mesmo grupo Outubro/Novembro 2009 e Maio 2010; 2- Periodicidade: Bianual (aplicação de instrumentos follow-up por amostragem) 24 12

13 Obrigado Contacto: 25 13