Avaliação de Políticas Públicas Agenda de avaliação

Transcrição

1 Avaliação de Políticas Públicas Agenda de avaliação Brasília, 21 de agosto de 2014

2 Departamento de Avaliação 1. Entendendo a avaliação 2. Diferença entre avaliação e monitoramento 3. Ciclo de Avaliação 4. Avaliações Realizadas e Disponíveis para consulta 5. Avaliações em realização

3 Entendo a Avaliação Avaliação de Programas Definição mais formal: Investigação sistemática da operação e dos resultados de um programa ou política, comparada com um conjunto de padrões implícitos ou explícitos, como meio de contribuir para o aperfeiçoamento do programa ou da política Weiss, C.H (1998, p.4) 3

4 Entendo a Avaliação Competências do Departamento de Avaliação Art. 9º Ao Departamento de Avaliação compete: I. avaliar o alcance de resultados e o cumprimento dos objetivos propostos para programas, projetos, serviços e II. III. IV. ações do Ministério; desenvolver e apoiar a avaliação de programas, benefícios, projetos, serviços e ações do Ministério, em consonância com os demais órgãos; oferecer subsídios que orientem a gestão de programas, benefícios, serviços e ações do Ministério, com base em estudos e análises; e apoiar a proposição e validação de indicadores no âmbito das políticas do Ministério, em articulação com a área de gestão da informação. Portaria MDS 120/2012

5 2. Qual a diferença entre avaliação, monitoramento e acompanhamento de programas sociais? Avaliar é o processo de determinar o mérito e valor das coisas, e a avaliação é o resultado desse processo. Avaliação não é a mera acumulação e sumarização de dados que são claramente relevantes para o processo de tomada de decisão. Em todos os contextos, a coleta e análise de dados que são necessários para a tomada de decisão, por mais difícil que seja, representa apenas uma das pernas dos elementos chaves da avaliação. Ausente o outro elemento e o e o procedimento para combina-los, falta elementos para qualificar o processo como avaliação. Scriven apud Rossi (2004, p.17). 5

6 Qual a diferença entre avaliação e monitoramento de programas sociais? Nivelamento de conceitos: Monitoramento: Uma função contínua que se utiliza da coleta sistemática de dados de indicadores específicos para prover à gestão e aos interessados diretos com indicadores acerca do progresso e atendimento de objetivos de um dado programa em andamento (OECD, 2002) Acompanhamento rotineiro de informações prioritárias sobre um programa e seus efeitos esperados. Acompanhamento de custos e o funcionamento do programa Provê informações que podem ser utilizadas para avaliação dos programas 6

7 Ciclo de Avaliação 1. Discussão 2. Termo de Referência 3. Contratação SAGI/SF Definição da avaliação a ser realizada Relevância do estudo proposto SAGI/SF Elaboração do TOR pela SAGI Revisão do TOR pela SF SPOA e/ou Órgão de Cooperação Internacional Aprovação do TOR Elaboração de edital Contratação da instituição executora (IE) que apresentar melhor projeto 4. Reunião/Definições importantes 5. Acompanhamento 6. Resultados Finais SAGI/SF/IE Definição de questões relevantes para o estudo Disponibilização dos dados necessários para a realização da pesquisa SAGI/IE Desenvolvimento dos instrumentos de pesquisa Visitas ao campo Avaliação e aprovação de relatórios parciais e do relatório final SAGI/SF/IE Recomendações da avaliação (IE) Reuniões com os gestores Retroalimentação dos programas 7. Divulgação dos Resultados 8. Publicações 9. Disponibilização dos microdados SAGI/SF/IE Apresentação dos resultados finais ao MDS Seminários abertos ao público externo SAGI Cadernos de estudos Relatórios de pesquisa Livros SAGI Envio dos arquivos dos microdados das pesquisas para o CIS SAGI = Secretaria de Avaliação e Gestão da Informação / SPOA=Secretaria de Planejamento, Orçamento e Administração SF = Secretaria Finalística / IE= Instituição Executora / CIS = Consórcio de Informações Sociais Adaptado de Vaitsman, J; Rodrigues, R.W. S.; Paes-Sousa, R. Brasília: UNESCO Management of Social Transformations, MDS, p.

8 1) Pesquisas Realizadas

9 Pesquisas Realizadas

10 Pesquisas Realizadas

11 Pesquisas Realizadas

12 Avaliações do Brasil Sem Miséria Tabela 1: Balanço das Pesquisas e Estudos divulgados entre 2011 e maio de 2013 Pesquisas de Avaliação Estudos Avaliativos Meta- Avaliação Total Temáticas gerais do MDS Bolsa Família e Cadastro Único Serviços Socioassistenciais Segurança Alimentar e Nutricional Inclusão Produtiva Total

13 Pesquisas em execução 1. Suplemento de Assistência Social na Pesquisa de Informações Básicas Municipais - MUNIC 2. Pesquisa das Entidades de Assistência Social Privadas sem Fins Lucrativos (PEAS) - Segunda Rodada 3. Suplemento de Qualificação Profissional e Inclusão Produtiva na PNAD Pesquisa Longitudinal Painel sobre a Pobreza 5. Avaliação de Qualidade do CadÚnico 6. Estudos de caráter etnográfico contratados sobre os efeitos do Programa Bolsa Família sobre povos indígenas residentes em Terras Indígena 7. Avaliação qualitativa do programa Pronatec-BSM Desenvolvimento e aplicação de metodologias participativas para a vigilância da situação e monitoramento de programas de Segurança Alimentar e Nutricional: estudo de caso em uma comunidade urbana de Salvador 9. SOBERANIA E SEGURANÇA ALIMENTAR DE POVOS INDÍGENAS KAINGANG E TUCANO: determinantes ambientais, sociais, políticos e consequências para a preservação da cultura alimentar, bem estar e saúde. 10. Agricultura Familiar sob a Vigência da Lei Federal /2009: Abrangência e Adequação das Chamadas Públicas, Impactos na Agricultura Local e Preços Recebidos pelos Agricultores Familiares 11. Avaliação de programa governamental: o Micro Empreendedor Individual (MEI) no Estado de Rondônia. 12. Educação Alimentar e Nutricional em comunidades quilombolas com insegurança alimentar: resgate da cultura alimentar, promoção da alimentação saudável e da exigibilidade do Direito Humano a Alimentação. 13. Efeito do Programa Bolsa Família no estado nutricional de crianças participantes da coorte de nascimentos de Pelotas (RS) GERENCIAMENTO FINANCEIRO DOS BENEFÍCIOS DO PROGRAMA BOLSA FAMÍLIA: UMA ANÁLISE DA ALFABETIZAÇÃO FINANCEIRA, DO ENDIVIDAMENTO E DO BEM-ESTAR FINANCEIRO 15. OS EGRESSOS DO BOLSA FAMÌLIA NO MARANHÃO: dimensionamento e impacto sobre suas famílias e suas vidas 16. Segurança Alimentar: lacunas de conhecimento e análises de paradoxos 17. IMPLATAÇÃO DE BOAS PRÁTICAS DE PRODUÇÃO E MANIPULAÇÃO VISANDO ASPECTOS HIGIÊNICO-SANITÁRIOS, NUTRICIOANAIS E A APLICAÇÃO DE PROCESSOS COMBINADOS DE CONSERVAÇÃO PARA OS PESCADORES E MANIPULADORES ARTESANAIS DE PEIXE SALGADO 18. Avaliação do Impacto do Programa Bolsa Família nas doenças infecciosas ligadas à pobreza nos municípios brasileiros 19. Governança e performance do PAA: um estudo comparativo entre Rio Grande do Sul e Rio Grande do Norte 20. Plantar, colher, comer - Avaliação dos impactos dos sistemas agroflorestais para a segurança alimentar de famílias assentadas na região canavieira pernambucana 21. PROTECAO SOCIAL, AUTONOMIA E TERRITORIO: TERMOS DE UMA EQUACAO NECESSARIA PARA AMPLIAR A EFETIVIDADE DA ACAO GOVERNAMENTAL JUNTO AS FAMILIAS EM CONDICAO DE POBREZA EXTREMA O lugar estratégico da família para a integração de ações e políticas de proteção e desenvolvimento social na região metropolitana de Salvador, BA. 23. O papel da burocracia e das instâncias de articulação federativa nas políticas sociais: o caso do Sistema Único de Assistência Social

14 24. EFETIVIDADES E COESÃO SOCIAL DE POLÍTICAS PÚBLICAS E REDES LOCAIS/TERRITORIAL DE SEGURANÇA ALIMENTAR 25. Avaliação do processo de implementação dos Centros-dia de Referência para a Pessoa com Deficiência e suas Famílias, no âmbito do Plano Viver Sem Limite, na Região Nordeste 26. DIVERSIDADE HUMANA: Uma lente sobre o Programa Viver Sem Limites 27. O Desemprego Juvenil, Mobilidade e o Programa Bolsa Família 28. Pobreza Extrema, Insegurança Alimentar e Políticas Públicas: Estudo Longitudinal de Famílias atendidas pelo Programa Bolsa Família no Município de Duque de Caxias. 29. Impacto dos Programas de Transferência de Renda sobre a Dinâmica Populacional e Redução da Pobreza no Semiárido Setentrional Nordestino 30. Agricultura camponesa em situação de calamidade - uma análise e avaliação dos impactos/efeitos do Programa Bolsa Família na sustentabilidade da agricultura camponesa do Semiárido da Bahia no contexto de agudização da Estiagem/Seca em período recente. 31. Análise e Modelagem Longitudinal dos Dados da Pesquisa de Avaliação de Impacto do Programa Bolsa Família (Primeira e Segunda Rodadas) 32. Os caminhos do rancho: redes e fluxos em torno da distribuição de alimentos pelo Programa de Aquisição de Alimentos (PAA) e Programa Fome Zero (PFZ) na cidade Porto Alegr 33. Avaliação do Programa de Alimentação do Trabalhador na Região Metropolitana do Recife ( ) 34.?E agora falamos nós: mulheres beneficiárias do Bolsa Família - Redenção/CE? 35. Influência do Programa de Aquisição de Alimentos (PAA) para a Persistência das Mulheres Extrativistas e do Extrativismo no Norte e Nordeste do Brasil 36. Acesso das famílias de mulheres presas ao Programa Bolsa Família no Distrito Federal 37. A Articulação de políticas para a superação da pobreza rural? uma estudo comparativo das interfaces entre o Programa Bolsa Família e o microcrédito do PRONAF B nas regiões Nordeste e Sul do Brasil. 38. ESTRATÉGIAS INDIVIDUAIS E POLÍTICAS DE INTERMEDIAÇÃO NA PROCURA DE TRABALHO. DESAFIOS PARA A INCLUSÃO PRODUTIVA DA POPULAÇÃO DE BAIXA RENDA 39. Apoio social e familiar em famílias acompanhadas pelo serviço de Proteção e Atendimento Integral à Família (PAIF) em Porto Alegre 40. SEGURANÇA ALIMENTAR E NUTRICIONAL EM MUNICÍPIO DE PEQUENO PORTE: UMA ANÁLISE LONGTUDINAL DAS POLÍTICAS PÚBLICAS E DA SITUAÇÃO DE INSEGURANÇA ALIMENTAR DA POPULAÇÃO 41. POLITICAS PÚBLICAS EDUCACIONAIS COM RECORTE DE GÊNERO: CAMINHOS DA INCLUSÃO PARA O MUNDO DO TRABALHO? 42. A proteção socioassistencial para usuários de crack e suas famílias: o desafios da intersetorialidade 43. Territórios e vivências: pela efetivação de uma Política de Assistência Social de qualidade em Barretos (SP) 44. Alimentação enquanto Direito Humano e sua relação com o Programa Camponês no Estado do Rio Grande do Sul: caso de Pelotas

15 Edital CNPq 1. Técnicas de captação de agua da chuva e sistemas de irrigação de baixo custo para agricultura familiar do semiárido baiano 2. Beneficio de prestação continuada (BPC): um estudo dos efeitos associados a concessão do beneficio sobre idosos e corresidentes 3. O suas em Santa Catarina: o processo de implantação em perspectiva 4. Território e família no sistema único de assistência social: possibilidades e limites 5. A agricultura urbana e peri-urbana no extremo sul do brasil: efetividade, limites e possibilidades no combate a fome 6. A apropriação, o uso e a representação das politicas de desenvolvimento social e combate a fome pelos agricultores familiares do semiárido nordestino e os deslocamentos nas estruturas e nas dinâmicas familiares 7. Analise da correlação linear e espacial entre localidades e regiões beneficiadas por programas de desenvolvimento social e combate a fome e indicadores sociais de melhoramento das condições de vida 8. Validade da escala de segurança alimentar: versão curta 9. Elaboração de um sistema municipal de gestão de informação integrada no município de Rio Claro - SP a luz das diretrizes da politica nacional de segurança alimentar e nutricional 10. Estratégias de enfrentamento da fome e a construção de gênero: o cotidiano das mulheres quebradeiras de coco babaçu na região dos Cocais - MA 11. Mercado de trabalho em Uberlândia: analise das potencialidades de inclusão produtiva de beneficiários de programas de transferência de renda do governo federal 12. Metodologias, procedimentos e instrumentos para identificação, análise e ação em áreas de riscos e vulnerabilidades: construindo territorialidades no âmbito do SUAS na escala local. 13. Do ponto de vista das crianças: o acesso, a implementação e os efeitos do programa Bolsa Família no semiárido nordestino 14. Efeitos da inclusão produtiva na vida de jovens atendidos por uma organização não governamental, apos capacitação e ingresso no trabalho 15. Sistema de dessalinização de agua utilizando energia solar 16. A implementação das condicionalidades do programa Bolsa Família na saúde em um município de grande porte: um estudo avaliativo e proposição de um protocolo de acompanhamento social das famílias beneficiárias 17. Mulheres da barca: análise das politicas públicas operacionalizadas em direção as famílias chefiadas por mulheres da vila da barca em Belém - PA 18. Demografia, sociedade e vulnerabilidade: um método tentativo de prospecção e estimativa de demanda por programas sociais: o caso de Minas Gerais 19. Desigualdade e pobreza nas famílias metropolitanas: diagnostico e recomendações para a redução das desigualdades 20. Desempenho na gestão publica do programa Bolsa Família: estudo do índice de gestão descentralizada (IGD) em Minas Gerais 21. Relações de gênero e politicas de desenvolvimento social e combate a fome: diagnostico e avaliação na pesca artesanal do litoral de Pernambuco 22. Estudo sobre a implementação do IGD e das condicionalidades do Bolsa Família no Maranhão: identificando possibilidades, limites e propostas de melhoria 23. Acesso aos programas de desenvolvimento social e combate a fome, e repercussões na segurança alimentar e nutricional das comunidades quilombolas do rio grande do sul 24. Segurança alimentar e nutricional: formação de uma politica local em município de pequeno porte 25. Desenvolvimento de sistema sustentável para captação e armazenamento de agua pluvial em comunidades rurais de baixa renda do semiárido 26. Cadastro único: o potencial da tecnologia da informação para o acesso ao programa Bolsa Família 27. Avaliação das metodologias de capacitação para inclusão produtiva vinculadas as politicas publicas de transferências de renda do MDS na região metropolitana de Belo Horizonte: municípios de belo horizonte e nova lima 28. Estudo de seguimento da situação de segurança alimentar em famílias residentes em municípios do interior do estado da Paraíba - avaliação do impacto das ações locais para a redução da insegurança alimentar e nutricional 29. Transferência de renda e monitoramento: mudanças no papel do gestor municipal no acompanhamento das famílias em situação de descumprimento de condicionalidades do programa Bolsa Família no estado da Paraíba 30. Metodologia de avaliação de estratégias intersetoriais para promoção da saúde e desenvolvimento social 31. Potencialidades e limites para implementação de sistemas locais de SAN - estudo de caso em dois municípios de grande porte do rio de janeiro 32. O impacto do programa Bolsa Família na melhoria do acesso a educação e aprendizagem em comunidades indígenas Kaingang e guarani no Paraná 33. Projeto de avaliação georreferenciada de indicadores situacionais de famílias atendidas por pelos programas sociais do governo 34. Capacidade preditiva da escala brasileira de insegurança alimentar para identificar riscos de vulnerabilidade social e biológica em crianças beneficiarias do programa Bolsa Família do município de Viçosa - MG 35. Dinâmica de famílias ribeirinhas e urbanas: o uso do tempo de crianças atendidas pelo programa Bolsa Família (PBF) 36. Estratégias de gestão da qualidade dos vegetais e frutas fornecidos pelo programa de aquisição de alimentos (PAA) para a alimentação escolar. 37. Perfil nutricional de beneficiários do programa Bolsa Família de moradores de favelas de Maceió - AL 38. A politica social brasileira na primeira década do século XXI e a dinamização econômica e sustentabilidade das regiões e territórios 39. Ação interinstitucional de fomento ao protagonismo juvenil: formação de agentes de desenvolvimento comunitário no território do Mato Grande

16 Balanço DA/SAGI 10 anos ANO TOTAL DE PESQUISA GERAL/MDS SENARC SESAN SESEP SNARC SNAS Total

17 Grata pela atenção e paciência de todos. Marta Battaglia Custódio Coordenadora de Resultados e Impactos Departamento de Avaliação marta.custodio@mds.gov.br (61)