CURSO BÁSICO [156 HORAS]

Transcrição

1

2 FGV/CLEAR ForMA O objetivo do ForMA, Curso Básico de Formação em Monitoramento e Avaliação, é proporcionar ao aluno um contato abrangente com todas as etapas inerentes a processos de avaliação de programas sociais e políticas públicas. O curso destina-se a gestores públicos e de programas sociais, assim como a potenciais avaliadores que pretendam incluir o monitoramento e a avaliação como práticas comuns no seu trabalho. Os diferentes módulos do curso abordam os tópicos mais relevantes no tema, como a elaboração de marco lógico, construção e análise de indicadores, metodologias quantitativas e qualitativas de avaliação e desenho de sistemas de monitoramento e avaliação. Haverá ainda tópicos focados em componentes de contratação e entrega de produtos, que cobrirão a compreensão e elaboração de termos de referência e editais, assim como diferentes formas de comunicação de resultados.

3 CURSO BÁSICO [156 HORAS] I. Aula Magna do Curso [4h] II. Introdução a Monitoramento e Avaliação [12h] Marco lógico, gestão com base em evidências e sistemas de M&A. III. Indicadores [16h] Principais indicadores, tipos de indicadores e propriedades estatísticas. IV. Avaliação Quantitativa [32h] Metodologias de avaliação quantitativa, desenho de instrumentos, coleta de dados e seleção amostral. V. Avaliação Qualitativa [32h] Metodologias de avaliação qualitativa, desenho de instrumentos, coleta de dados e seleção amostral. VI. Contratação [12h] Termos de referência e editais. SEMINÁRIO [de 4h a 8h] Apresentação intermediária dos trabalhos individuais. VII. Desenho de Sistemas de Monitoramento e Avaliação [12h] Desenho de sistemas de monitoramento e avaliação e desafios de implementação.

4 APRESENTAÇÃO FINAL [de 4h a 8h] Apresentação final dos trabalhos individuais. IX. Orientação e Avaliação [20h] Aulas de orientação ao longo do curso para desenvolvimento do trabalho, seminário e apresentação final. PROPOSTA DE AVALIAÇÃO: Apresentação intermediária do trabalho (10%) Apresentação final do trabalho (40%) Trabalho escrito (50%) O trabalho desenvolvido ao longo do curso consiste em um projeto individual (edital ou proposta) e será desenvolvido sob a orientação de um conjunto de professores do curso.

5 INTRODUÇÃO A MONITORAMENTO E AVALIAÇÃO Duração: 12h 1. Conceitos de Monitoramento e Avaliação Contexto histórico Definições Motivação e vantagens Desafios Vantagens vs. desafios Conceitos - avaliação quantitativa, qualitativa e métodos mistos 2. As Questões do Monitoramento e da Avaliação Exemplos de questões típicas de monitoramento e avaliação Breve introdução aos tipos de avaliação que respondem a diferentes questões 3. Ferramentas para Monitorar e Avaliar Marco Lógico Plano de Monitoramento Plano de Avaliação Estudos de caso com exercício prático Descrição: O objetivo deste módulo é introduzir o aluno aos principais conceitos utilizados no decorrer do curso. Para tal, serão abordados os conceitos básicos de monitoramento e avaliação, os motivos para se monitorar e avaliar e os principais relacionamentos. Serão também apresentados brevemente os conceitos de avaliação quantitativa, qualitativa e de métodos mistos. Serão discutidas as principais questões a que o monitoramento e a avaliação respondem e as principais ferramentas utilizadas para se monitorar e avaliar, com destaque para a elaboração e compreensão de marco lógico. Finalmente, serão apresentados estudos de caso para ilustrar exemplos de sucesso, de modo a incentivar o uso de monitoramento e avaliação em programas sociais e políticas públicas.

6 INDICADORES Duração: 16h 1. Introdução 2. Propriedades dos Indicadores 3. Seleção de Indicadores 4. Indicadores Quantitativos 5. Indicadores Qualitativos Descrição: Neste módulo serão apresentados conceitos básicos de indicadores quantitativos e qualitativos e os principais usos e tipologias aplicáveis às diferentes fases do ciclo de programas ou projetos sociais. Em seguida serão apresentadas as propriedades de um bom indicador (SMART) e os limites de sua utilização. Além disso, serão abordadas as especificidades de indicadores qualitativos e quantitativos, com foco na seleção, construção e análise. Por fim, serão trabalhados tópicos avançados sobre indicadores de pobreza, desigualdade e bem-estar. Serão discutidos ao longo do módulo, sempre que pertinente, exemplos aplicados do uso de indicadores por programas e projetos de intervenção, tanto da iniciativa pública quanto privada.

7 AVALIAÇÃO QUANTITATIVA I. Desenho de Avaliação Quantitativa Duração: 20 horas 1. Introdução às metodologias quantitativas de avaliação Finalidade, aplicações e tipos 2. Análise Descritiva e Diagnóstica Finalidade e aplicações 3. Avaliação de Impacto Conceitos básicos Avaliação experimental Avaliação não-experimental 4. Avaliações de Custo-Benefício, Custo-Eficiência e Custo-Efetividade Conceitos básicos Finalidade e aplicações II. Execução da Avaliação e Análise de Dados Quantitativos Duração: 12 horas 5. Fontes de Dados Primários Secundários

8 6. Desenho de Instrumentos Boas práticas na elaboração de questionários 7. Seleção Amostral 8. Pesquisa de campo 9. Estudo de caso Exercício prático: execução de avaliação quantitativa e interpretação de resultados Descrição: Neste módulo serão abordadas as finalidades, aplicações e metodologias dos principais tipos de avaliação quantitativa. Serão discutidas: (i) análise descritiva e diagnóstica; (ii) avaliação de impacto (experimental e não-experimental); e (iii) avaliações de custo-benefício, custo-eficiência e custo-efetividade. Além disso, serão apresentadas as principais fontes de dados secundários existentes no Brasil e discutidas as possíveis formas de obtenção de dados primários, assim como seus principais desafios. Serão tratados tópicos referentes a desenho de instrumentos, seleção amostral e pesquisa de campo. O módulo ainda inclui a realização de um estudo de caso, no qual serão realizados exercícios práticos de execução de avaliação quantitativa e interpretação dos resultados.

9 AVALIAÇÃO QUALITATIVA I. Desenho de Avaliação Qualitativa Duração: 14 horas 1. Introdução à metodologia qualitativa no monitoramento e avaliação Definições e especificidades Objetivos Principais tipos e aplicações da avaliação qualitativa Exemplos de monitoramento e avaliação qualitativa em gestão 2. Planejamento de avaliação qualitativa Metodologia Papéis dos agentes envolvidos Análise do contexto Coleta de dados Cronograma de execução Desafios no desenho e implementação da avaliação II. Execução da avaliação e análise qualitativa de dados Duração: 18 horas 3. Elaboração de instrumentos e estratégias de investigação Entrevistas Estudos de caso Grupo focal Observação participante Análise de redes

10 Etnografia Análise documental 4. Análise de dados Análise de narrativas Análise de conteúdo Interpretação de resultados Públicos-alvo do relatório Descrição: Este módulo tem como objetivo apresentar todo o processo de desenho e desenvolvimento de uma avaliação qualitativa. Inicialmente, serão apresentados os principais tipos de avaliação qualitativa e os contextos mais adequados para utilização de cada tipo considerando-se a execução do projeto, os objetivos da avaliação e suas características próprias. Em seguida serão discutidos os principais instrumentos de coleta de dados qualitativos, suas aplicações e especificidades (entrevistas, observação, estudo de caso, grupo focal e análise documental). Serão também abordadas as metodologias de análise de dados e de interpretação de resultados.

11 CONTRATAÇÃO Duração: 12 horas 1. Introdução O papel do edital como auxiliar na minimização de ocorrências de eventos indesejados 2. Especificações técnicas Teoria da mudança Definição do objetivo da avaliação e identificação das principais partes interessadas Seleção da metodologia adequada Elaboração de cronograma Identificação de aspectos adicionais necessários para a execução da avaliação 3. Termos de Referência Principais elementos do termo de referência Processo de seleção Prazos e sanções Descrição: Este módulo abordará a elaboração de editais para contratação de avaliações. Será discutido todo o processo de elaboração do edital, a saber, a definição dos objetivos da avaliação e os contextos, recursos e partes interessadas envolvidos nas várias etapas de execução.

12 DESENHO DE SISTEMAS DE MONITORAMENTO E AVALIAÇÃO Duração: 12 horas 1. Conceito e Motivação para construção de Sistemas de Monitoramento e Avaliação O que é um Sistema de M&A Características de um Sistema de M&A O papel dos Sistemas na Governança 2. Características comuns a bons Sistemas de M&A Características de Sistemas de M&A Questões estruturais anteriores à construção de um sistema 3. Construção de Sistemas de M&A Diagnósticos Boas práticas na construção de um sistema Papéis Institucionais 4. Tipos de Sistemas e usos pretendidos 5. Utilização real da informação A problemática da demanda Incentivos à construção e ao uso da informação 6. Estudos de Caso Exemplos práticos de sucesso e insucesso Descrição: Neste módulo serão abordados os conceitos básicos de sistemas de monitoramento e avaliação, motivos para sua implementação e utilização e as principais dificuldades enfrentadas. Serão também abordadas as metodologias para a construção de um sistema, os tipos de sistemas existentes e seus respectivos usos possíveis. Serão discutidas as principais questões inerentes a sistemas de monitoramento

13 e avaliação, principalmente como se resolver a problemática da demanda por informação coletada. Finalmente, serão apresentados estudos de caso para ilustrar ocorrências de sucesso e insucesso, de modo a incentivar o uso de monitoramento e avaliação em programas sociais e políticas públicas e a criação de sistemas de monitoramento e avaliação sustentáveis e utilizáveis.

14