Programa ULISSES: desenvolvimento de ambientes de aprendizagem e avaliação de impactos

Transcrição

1 desenvolvimento de ambientes de aprendizagem e avaliação de César Ferreira Álvaro Fernandes Leonor Gaspar Pinto Paulo Silva Setembro Programa ULISSES Trata-se de um Programa experimental que tem como objectivo principal a educação e a formação informal dos utilizadores da Rede Municipal de Bibliotecas de Lisboa; Valorizar as Bibliotecas Municipais de Lisboa como espaços de aprendizagem e pontos privilegiados de acesso à informação; Desenvolver as competências dos utilizadores em literacia da informação, de forma a potenciar a sua capacidade de aceder, avaliar e utilizar a informação disponível em diferentes suportes; Contribuir para a generalização da formação básica em Tecnologias de Informação e Comunicação dos utilizadores das bibliotecas e dos munícipes em geral. 2 1

2 3 Aceder Avaliar Utilizar IFLA- Directrizes sobre a Literacia de Informação para a Aprendizagem ao Longo da Vida,, 2006 Consiste no desenvolvimento de competências em Literacia da Informação com os utilizadores através de: Programa Anual de Sessões de Aprendizagem gratuitas nas mais diversas áreas; Sessões com a duração média de 3H; Decorrem com uma regularidade média semanal; Envolve 11 Bibliotecas Municipais. 4 2

3 Áreas de Aprendizagem Preparar a viagem para o Mar da Informação Aprender a Navegar À descoberta da Rede Municipal de Bibliotecas de Lisboa Informar para a Cidadania Utilização e produção de Informação Módulos Iniciação às s Tecnologias de Informação e Comunicação I e II Visitas Guiadas I: À Descoberta da Biblioteca Viajar pela WEB Como criar uma conta de correio electrónico Internet Segura Visitas Guiadas II: À Descoberta dos Recursos da RMBL Explorar fontes de informação na RMBL Pesquisar no catálogo da RMBL Diário da República Electrónico (DRE) Cidadania on-line Utilização ética de informação Como processar um texto Como preparar uma apresentação Como fazer uma folha de cálculoc 5 Com os seguintes resultados 2008: Nº Bibliotecas envolvidas Total de Participantes Ano Participantes que frequentaram 2 ou mais Sessões Total de Sessões de Aprendizagem Nº Total de Horas de Aprendizagem Nº de Técnicos Envolvidos no Programa Nº de Computadores envolvidos Avaliação geral (escala de 0 a 4) Conteúdos Média 3 Desempenho dos Monitores - Média 4 Avaliação específica de sessão (escala de 1 a 3) Os conteúdos foram adquiridos - Média 2 Por 50% participantes Em 8 dos 13 Módulos 6 3

4 Estrutura de Avaliação de Impactos Matriz de Impacto Seleccione e caracterize os serviços/actividades a ser avaliados ETAPA 1 Construa a Estória E Defina as necessidades, inputs, resultados, efeitos e desses serviços/actividades. ETAPA 2 Seleccione Indicadores SMART I Decida quais são os indicadores SMART (Simples de implementar, Mensuráveis, focalizados na Acção, Relevantes, adequados ao Tempo disponível) ETAPA 3 R Escolher os métodos m de Recolha de dados Decidia como e quando vão ser recolhidos os dados para esses indicadores. Recomenda-se a utilização de registos de participantes / visitantes, observações, registo de sugestões/comentários, questionários breves e grupos de foco. 7 Estrutura de Avaliação de Impactos ETAPA 4 Analisar os dados Uma vez recolhidos os dados, questione-se se sobre os A seguintes aspectos: o que dizem os dados sobre a Estória? As evidências indicam que os objectivos do serviço/actividade foram alcançados? ados? Os dados revelam alguma tendência ou padrão? A ETAPA 5 Apresentar e usar os resultados Associe os resultados à Estória original. Dê sentido aos resultados e apresente-os às s partes interessadas. Utilize os resultados para melhorar o que faz e conquistar apoios para os seus serviços/actividades Metodologia: E I R A A 8 4

5 O quê? Matriz Matriz de de Impacto Impacto Caracterização os serviços/actividades a ser avaliados Sessões de aprendizagem gratuitas Iniciação às TIC I Adultos e Séniores Necessário porque Conjunto de utilizadores que frequentava a biblioteca que pretendia usar o computador e não tinha competências para tal; Potenciar as tecnologias da informação junto de um segmento de público situação infoexclusão. 9 ETAPA 1 Recursos Construa a Estória - Computadores com acesso à Internet; Salas multimédia; - Técnicos com experiência anterior na animação e desenvolvimento das sessões e conteúdos e com possibilidade e divulgar práticas e transferir competências restantes Bibliotecas e profissionais da rede; Conhecimento dos referenciais das TIC e Literacia. Actividades previstas - Sessões de aprendizagem de iniciação às TIC calendarizadas Semanalmente; - Sessões complementares de reforço da aprendizagem calendarizadas consoante as necessidades dos participantes. 10 5

6 ETAPA 1 Construa a Estória Onde e Quando? 5 Bibliotecas Pelo menos 10 Sessões Pelo menos 50 participantes Período de Fevereiro a Dezembro de ETAPA 2 Seleccione Indicadores SMART Encadeamento para cada tipo de Efeito Global de Aprendizagem EGA : Efeitos Esperados (Outcomes( Outcomes) Conhecimento e Compreensão Resultados e efeitos definidos Projecta-se que, pelo menos metade, dos participantes possam compreender os conteúdos da sessão/s Indicador Nº de participantes que atingiram o nível 2, de uma escala de 1 (min) a 3 (max.), do referencial de cada módulo Método de Recolha Ficha de avaliação específica 12 6

7 ETAPA 2 Seleccione Indicadores SMART Efeitos Esperados (Outcomes Outcomes) Aquisição de Competências: Resultados e efeitos definidos Projecta-se que pelo menos metade dos participantes possam adquirir metade das competências a desenvolver nas sessões Indicador Nº de participantes que atingiram o nível 2, de uma escala de 1 a 3,do referencial de cada módulo Método de Recolha Ficha de avaliação específica 13 ETAPA 2 Seleccione Indicadores SMART Efeitos Esperados (Outcomes Outcomes) Atitudes e Valores Resultados e efeitos definidos Projecta-se que os participantes apontem resultados de satisfação na frequência da sessão de aprendizagem acima da média. Indicador Nº de participantes que atingiram pelo menos 3, Numa escala de 0 a 4, em cada um dos seguintes Aspectos : - Avaliação do Programa (conteúdos): - Avaliação dos Recursos Materiais e Humanos; - Desempenho dos Monitores; - Auto-Avaliação dos Participantes. Método de Recolha Ficha de Avaliação Geral 14 7

8 ETAPA 2 Seleccione Indicadores SMART Efeitos Esperados (Outcomes Outcomes) Actividades, comportamentos e Progressão Resultados e efeitos definidos Projecta-se que todos os participantes do Painel identifiquem alterações significativas nas suas rotinas, hábitos e valores, por terem frequentado as sessões de aprendizagem Indicador Nº de participantes que assinalaram, pelo menos, 2 factos, de uma lista dada (questionário), em cada um dos 2 níveis definidos. A saber: - Objectivos pessoais e profissionais alcançados -Mudanças de comportamentos e atitudes na utilização das TIC e da informação no dia a dia Método de Recolha Guião de Entrevista/ Questionário 15 ETAPA 3 Escolher os métodos m de recolha de dados Métodos de recolha Guião Entrevista Mapas de Monitorização Fichas de Inscrição Fichas de Avaliação Geral Fichas de Avaliação Específica Foto 16 8

9 ETAPA 4 Analisar os dados Quadro Comparativo Produto esperado Envolver 5 bibliotecas Envolver pelo menos 50 participantes Produto obtido 5 bibliotecas envolvidas (David Mourão-Ferreira; Camões; Central; Orlando Ribeiro; Olivais ) 70 participantes envolvidos Realizar pelo menos 10 sessões 15 sessões realizadas 17 ETAPA 4 Analisar os dados Resultados por Efeitos Gerais de Aprendizagem Resultado: Conhecimento e Compreensão 90% atingiram o nível n 3 de aquisição de competências O que quer dizer que entenderam todos os itens, embora ainda considerem ser necessário mais prática Resultado: Aquisição de Competências 66% atingiram o nível 2 de aquisição de competências O que quer dizer que adquiriram todas as competências propostas, embora ainda tenham algumas dúvidas, d ou seja, têm as competências mas necessitam de ser mais consolidadas 18 9

10 ETAPA 4 Analisar os dados Resultados por Efeitos Gerais de Aprendizagem Resultado: Atitudes e Valores: % participantes que apontaram o Nível 3 BOM (Escala 0 a 4) nos seguintes aspectos: - 64,1% Programa: que envolve Conteúdos, Duração da Sessão; Cumprimento de Objectivos; - 87,2% Avaliação de Recursos: que envolve Instalações e Equipamentos; - 94,9% Desempenho do Monitor ao nível de: Conhecimentos; Capacidade Dinamização Grupo; Transmissão de Conhecimentos; - 41% Auto-Avaliação do Participante ao nível de: Aquisição de Competências; Participação na Sessão. Os resultados apontam para bons níveis de desempenho e para o alcançar das metas. O último dado revela a, ainda, baixa confiança dos participantes nas competências recém-adquiridas e a necessidade de reforçar o que aconteceu nas sessões complementares. 19 ETAPA 4 Analisar os dados Resultados por Efeitos Gerais de Aprendizagem Resultado: Actividades, comportamentos e Progressão: De um Painel de 7 entrevistados a quem se aplicou uma lista de alterações de rotinas, hábitos ou estilos de vida, podemos apontar: A) 5 Compraram computador; 5 Instalaram ligação à Internet; 2 Consideram ter maiores oportunidades de emprego e/ou ocupação complementar. B) 7 Utilizam os computadores com maior frequência e com maior à-vontade; 7 Continuaram a Aprendizagem. Estes resultados apontam factos que poderão traduzir-se, a curto prazo (3 anos), em desta experiência

11 Testemunhos Nunca se sabe se, no futuro, não poderá vir a dar jeito para me poder candidatar a um part-time que complemente a reforma ETAPA 5 Agora já consigo enviar e receber s. Há dias, no aniversário do neto, já lhe consegui enviar um e- mail com uma imagem inserida, tipo postal. Agora até comprei um portátil para mim 21 Quando nasci, jáj tinham sido inventadas todas as frases que hão-de salvar a humanidade, sós faltava uma coisa: salvar a humanidade. Almada Negreiros Almada Negreiros in Estação de Metro Saldanha II 22 11

12 Obrigado Contacto: 23 12