Relatório de avaliação e resultados da segunda edição do curso online Introdução às Políticas Informadas por Evidências (PIE) da EVIPNet Brasil Resumo Contexto: A EVIPNet Brasil coordenada pelo da Secretaria de Ciência, Tecnologia e Insumos Estratégicos (SCTIE) do (MS) realizou em parceria com o Centro-Americano e do Caribe de Informação em Ciências da Saúde (Bireme) da Organização Pan-Americana da Saúde (OPAS) da Organização Mundial da Saúde (OMS) a segunda edição do curso online Introdução às Políticas Informadas por Evidências da EVIPNet Brasil. O curso utiliza a plataforma do Campus Virtual de Saúde Pública (CVSP) da Fundação Oswaldo Cruz (Fiocruz) e está estruturado em nove módulos que incluem com conceitos básicos, exercícios de fixação, estudos de casos reais e sugestões de leitura sobre o uso de evidências para a tomada de decisões em sistemas, programas e serviços de saúde. Objetivos do curso: Apresentar conceitos básicos de políticas informadas por evidências e o uso das Ferramentas SUPPORT (SUPporting POlicy relevant Reviews and Trials); estimular a cultura do uso de evidências no processo de tomada de decisão em sistemas, programas e serviços de saúde e oferecer subsídios às áreas técnicas para formulação e implementação de políticas informadas pelas evidências científicas disponíveis. Público alvo: Gestores, em todos os níveis da gestão, apoiadores das áreas técnicas relacionadas com o sistema de saúde e pesquisadores interessados nos processos de tradução do conhecimento. Resultados: Os indicadores de resultados na segunda edição do curso online Introdução às Políticas Informadas por Evidências da EVIPNet Brasil foram de 605 inscritos, sendo que 196 (32%) dos participantes realizaram todas as atividades, 140 (23%) dos inscritos nunca acessaram a plataforma e 269 (39%) dos participantes não concluíram as atividades. Parte das desistências foi motivada por questões pessoais. Introdução A segunda edição do curso online Introdução às Políticas Informadas por Evidências da EVIPNet Brasil, com tutoria e financiado com recursos públicos, foi divulgado no portal da EVIPNet Brasil e do a partir de agosto de 2015. As inscrições aconteceram no período de 1 a 20 de setembro de 2015. O curso foi realizado entre 7 de outubro e 16 de dezembro de 2015, com prorrogação até 20 de janeiro de 2016, e está estruturado em nove módulos com a perspectiva de iniciação teórica, exercícios de fixação, estudos de casos reais e sugestões de leitura sobre o uso de evidências para a tomada de decisões em sistemas, programas e serviços de saúde.
Módulos do curso Módulo I Tradução do conhecimento (KT) e Rede de Políticas Informadas por Evidências (EVIPNet) Módulo II Conceito de evidência e de política de saúde informada por evidências Módulo III Definição do problema para a política Módulo IV Definição das opções para a política Módulo V Considerações para a implementação das opções de políticas Módulo VI Busca, avaliação e síntese de evidências Módulo VII Resumos de evidências para políticas Módulo VIII Considerações de equidade e outros aspectos Módulo IX Diálogos deliberativos Atividades realizadas O processo de criação do curso compreende análise, desenho, desenvolvimento implantação e avaliação executado para a primeira edição do curso. Para a segunda edição foram feitas as devidas atualizações dos módulos e das atividades. A operacionalização da tarefa foi coordenada integralmente pela Bireme e incluiu: Gravação dos áudios em estúdio; Reunião com equipe de tutores para orientação sobre o curso e uso da plataforma, na Bireme, São paulo; Implantação do conteúdo do curso na plataforma Moodle. 2
Figura 1 Etapas de desenvolvimento do curso Materiais didáticos O material didático e o guia de orientação foram usados na primeira e segunda edição com as atualizações necessárias. Em adição, foi produzido um texto de roteiro para a abertura do curso e gravado pela secretaria executiva da EVIPNet Brasil. Equipe de tutores e monitores O curso foi acompanhado por uma equipe de monitores e de tutores: Carmem Verônica Abdala e Elisabete Biruel (Bireme), Eliana Carlan e Jaqueline Pureza (Secretaria Executiva da EVIPNet Brasil), Maria Corina Amaral Viana, Maritsa Carla de Bortoli, Jorge Otávio Maia Barreto, Newton Kepler de Oliveira, Luciane Pereira de Araújo, Helian Nunes de Oliveira, Daniella Cristina Rodrigues Pereira, Flávia Tavares Silva Elias, Roberta Moreira Wichmann (tutores) e Nathan Mendes de Sousa (tutor e coordenador). Além dos tutores e monitores o curso manteve o apoio técnico de profissionais do Campus Virtual de Saúde Pública. Os tutores têm a responsabilidade de interagir e responder dúvidas junto aos participantes, de modo a atuar para: a) comentar as postagens nos fóruns; b) realizar sínteses pontuais no final de cada módulo; c) ajudar os participantes a compreender os materiais do curso por meio das discussões e explicações; d) supervisionar trabalhos práticos e atividades de fixação; e) fornecer feedback aos monitores sobre os materiais dos cursos e as dificuldades dos estudantes; e f) servir 3
de intermediário entre o conteúdo e os participantes. Os monitores atuam para: a) incentivar os participantes, dar informações precisas sobre o acesso e as ferramentas de ensino do curso e contribuir para a autonomia do aluno à distância; principalmente enviando e-mails para os alunos ausentes e convocando pra as atividades semanais; b) responder questões no de fórum de suporte técnico; onde a demanda esteve relacionada a abertura e fechamento de atividades, pedidos de prorrogação e dúvidas em geral e; c) apresentar relatório de avaliação final de estrutura, conteúdo, processo elaborando proposta de planos de melhoria para futuras edições. Cronograma do curso As datas de implantação do conteúdo do curso na plataforma Moodle foram atendidas dentro do prazo previsto no cronograma (Figura 2). Efetivamente o curso teve início em 7/10/2015 e foi finalizado em 20/01/2016. A prorrogação do término do curso ocorreu devido aos feriados de final de ano para melhor atender os tutores e participantes. Durante esse período não houve acompanhamento de tutores, somente a plataforma ficou disponível para que os participantes pudessem encerrar as atividades pendentes. Figura 2 Cronograma conteúdo do curso Atividades Cronograma de atividades do curso Entrega do Data Início e término material no CVSP Módulo I 14/10/2015 7/10/2015 abertura Módulo II 21/10/2015 16/12/2015 encerramento Módulo III 28/10/2015 20/1/2016 prorrogação Módulo IV 4/11/2015 Módulo V 11/11/2015 Módulo VI 18/11/2015 Módulo VII 25/11/2015 Módulo VIII 2/12/2015 Módulo IX 09/11/2015 1/10/2015 4
Indicadores de resultados O curso contou com 605 inscritos, dos quais 140 (23%) nunca entraram na plataforma. Os participantes que concluíram o curso e realizaram todas as atividades foram 196 (32%). Destes, 108 (55%) obtiveram a nota máxima. Os desistentes ou não participantes totalizaram 269 (39%). As desistências foram motivadas, na maior parte, por questões pessoais. A seguir apresentam-se alguns indicadores de resultados sobre o curso. Quadro 1 Número de participantes Inscrito Participante Tutor/Monitor 605 465 14 OBS: 140 alunos NUNCA entraram na plataforma. Participantes persistente e desistente: são considerados persistentes os participantes que concluíram o curso com aproveitamento igual ou superior a 70% e desistentes os participantes que iniciaram as atividades e por algum motivo não concluíram o curso. Figura 3 Participantes persistentes e desistentes 42% 58% Persistente Desistente 5
De acordo com o perfil dos profissionais inscritos a Figura 4 verifica-se a multidisciplinaridade destes profissionais e o interesse em conhecer sobre a temática de políticas informadas por evidências. Figura 4 - Perfil profissional dos inscritos 1% 1% 1% 34% 0% 1% 2% 3% 3% 3% 4% Médicos em medicina diagnóstica e terapêutica Médicos em especialidades cirúrgicas Biomédicos Terapeutas ocupacionais e afins Profissionais da educação física 4% Biólogos e afins 6% Nutricionistas Cirurgiões-dentistas Médico veterinário 9% Fisioterapeutas Psicólogos e psicanalistas 28% Médicos clínicos Farmacêuticos Outros Enfermeiros e afins A Figura 5 mostra a proporção de inscritos nas regiões brasileiras, observa-se que a maioria está na região Nordeste com mais de 200 participantes, seguido do Sudeste e Centro Oeste acima de 100 e Sul e Norte não atingiram a marca de 100. 6
Figura 5 - Número de inscritos por região do Brasil Inscritos por região do Brasil 250 200 150 100 nº 50 0 Centro Oeste Sudeste Sul Nordeste Norte Avaliando os dados apresentados pode-se observar que os acessos de visualização do material disponível no curso foram altos e consideráveis conforme apresenta a Figura 6. Figura 6 - Acesso e visualizações Material Visualização Vídeo de Boas vindas 667 Vídeo de abertura 15 Guia de orientação 1040 Pesquise aqui/portal EVIPNet 669 Autoavaliação do curso 8 Café virtual 6589 Fórum suporte 3265 Avaliação dos indicadores Quanto à atuação dos monitores, foi fundamental a cooperação dos tutores junto aos participantes do curso. Dentre suas atividades destacam-se: 7
a) Incentivar os alunos, dar informações precisas sobre o acesso e as ferramentas de ensino do curso e contribuir para a autonomia do aluno a distância; principalmente enviando e-mails para os alunos ausentes convocando pra as atividades semanais; b) Responder questões no fórum de suporte técnico; onde a demanda esteve relacionada a abertura e fechamento de atividades, pedidos de prorrogação e dúvidas em geral; c) Apresentar relatório de avaliação final de estrutura, conteúdo, processo elaborando proposta de planos de melhoria para futuras edições. Quanto à atuação do tutor, foi de fundamental importância suas ações ao: d) Comentar as postagens nos fóruns; e) Realizar sínteses pontuais no final de cada aula; f) Ajudar os alunos a compreender os materiais do curso através das discussões e explicações; g) Supervisionar trabalhos práticos e exercícios de fixação; h) Fornecer feedback aos coordenadores sobre os materiais dos cursos e as dificuldades dos estudantes; e i) Servir de intermediário entre o conteúdo e os alunos. Os alunos que participaram diretamente dos fóruns trouxeram mensagens de satisfação com o curso. No Fórum Expectativas, que foi utilizado como diagnóstico para alinhar as expectativas dos alunos com a proposta do curso os alunos demonstraram entusiasmo e interesse pelo tema e uma necessidade de aplicação prática das evidências em suas áreas de gestão. Fatores situacionais - desistência Parte das desistências ou não finalização das atividades do curso, referente aos 58% de participantes, excluindo os que nunca entraram na plataforma (140 ou 23% dos inscritos), foram motivadas por questões pessoais, tais como, algumas circunstâncias que foram determinantes para desistir: dificuldade em conciliar trabalho e curso; problemas familiares; problemas de saúde. 8
Síntese geral Na síntese geral será apresentada uma análise com o objetivo de identificar os pontos fortes e fracos de todas as etapas que envolvem a publicação de um curso a distância e as atividades aplicadas aos participantes pós-abertura até o encerramento do curso. Lições aprendidas e sugestões para próxima edição O conteúdo desenvolvido deve ser considerado material bruto e pode ser tratado com elementos didáticos que tornem o conteúdo mais dialógico, promovendo a interação aluno-conteúdo; Sugere-se que o curso seja adaptado para ser autoinstrutivo e de livre acesso para atingir um número maior de participantes; Preparar um tutorial básico para os participantes sobre a plataforma Moodle; No guia de orientação do aluno detalhar melhor a metodologia; Inserir um campo na plataforma Li e concordo com os termos de inscrição ; Retirar a primeira semana e o fórum de expectativas; Incluir uma mensagem de boas vindas quando o participante fizer o primeiro acesso; Fazer links com os termos que estão no glossário e nos textos; O sistema gerar mensagens automáticas aos participantes alertando sobre não participação ou a falta de acesso ao curso, quando não acessado em uma semana; Informar os participantes que haverá uma avaliação do curso no final, vinculado à liberação do certificado; Incluir na ficha de inscrição como ficou sabendo do curso, para poder avaliar o canal de comunicação; Incluir exercícios práticos em todos os módulos. 9