UMA INTRODUÇÃO AOS INDICADORES SOCIAIS: CONCEITOS, FONTES DE DADOS E APLICAÇÕES

SAGI/MDS UMA INTRODUÇÃO AOS INDICADORES SOCIAIS: CONCEITOS, FONTES DE DADOS E APLICAÇÕES Paulo Jannuzzi Marconi Sousa Alexander Vaz

OBJETIVO DO CURSO Apresentar aos participantes uma deinição de indicador; indicadores no ciclo de Políticas e Programas; principais fonte de dados e relatórios de indicadores IDB, Relatório ODM e IDH; limites e potencialidades.

TÓPICOS Parte 1: Contextualização Parte 2: Conceitos Básicos Fontes de dados Propriedades

Referências Bibliográicas para Aprofundamento http://acervodigital.mds.gov.br/x mlui/handle/123456789/336

http:// aplicacoes.mds.gov.br/sagirmps/ferramentas/docs/idb-portugu es.pdf http:// aplicacoes.mds.gov.br/sagirmps/ferramentas/docs/relodm201 4.pdf

6 Tal como fotograias, os indicadores reduzem a realidade social a dimensões tangíveis.

7 Uma boa fotograia depende da câmera, da posição do fotógrafo, do foco da lente...

8 Mas dependem fundamentalmente da destreza do fotógrafo em retratar o que é efetivamente relevante a ser apresentado.

9 A realidade social é muito complexa. Mais do que uma foto, precisamos de um mosaico de fotograias para retratá-la de forma operacional para Políticas Públicas.

Mai/2014

Relatório Indicadores de Desenvolvimento Brasileiro revela a continuidade dos avanços sociais nos país no período 2001 a 2012, e com mais intensidade nas regiões mais pobres Níveis crescentes de emprego e renda Diminuição expressiva da extrema pobreza, chegando a patamares próximos de sua superação Queda sistemática da mortalidade infantil Ampliação do acesso à educação, com universalização da cobertura do Ensino Fundamental em todo o país Aumento da cobertura de saneamento e do acesso a bens duráveis 11

MAGNITUDE dos avanços SOCIAIS e dos impactos nas REGIÕES MAIS POBRES É EXPLICADA através de uma estratégia de desenvolvimento e inclusão social que combina DECISÕeS em três campos Na Política Social: o Fortalecimento das políticas e programas de natureza universal, na educação, saúde, trabalho, assistência e seguridade social, com alocação crescente de recursos orçamentários; o Criação e implementação de programas e ações de cunho redistributivo, reconhecidos internacionalmente, para promover acesso diferenciado ao conjunto de direitos sociais consagrados na Constituição Brasileira de 1988, às parcelas mais pobres, vulneráveis e historicamente marginalizadas da população brasileira. 12

MAGNITUDE dos avanços SOCIAIS e dos impactos nas REGIÕES MAIS POBRES É EXPLICADA através de uma estratégia de desenvolvimento e inclusão social que combina DECISÕeS em três campos Na Política Econômica: Ambiente de baixa inlação e redução dos juros Acesso ao crédito Valorização real do salário mínimo Fortalecimento do mercado interno Geração de emprego formal e ampliação da renda 13

MAGNITUDE dos avanços SOCIAIS e dos impactos nas REGIÕES MAIS POBRES É EXPLICADA através de uma estratégia de desenvolvimento e inclusão social que combina DECISÕeS em três campos Na Política de Infraestutura Resgate da capacidade de realizar investimentos em infraestrutura econômica, social e urbana Aprovação de novos marcos regulatórios setoriais 14

Avanços institucionais na governança e capacidade de gestão das Políticas Publicas No Contexto Político-Institucional o Fortalecimento do papel do Planejamento de médio prazo nos 3 níveis o Indução à ampliação do pessoal técnico no setor público e a sua melhor qualiicação o Aposta nos arranjos federativos de Políticas Públicas, envolvendo governos estaduais e municipais em projetos comuns o Diálogo com a Sociedade 15

Crescimento com inclusão social

RENDA DAS FAMÍLIAS CRESCE EM TODO O PAÍS E REDUZ DESIGUALDADES

Indicadores de Renda Renda domiciliar real per capita, por região e faixa de renda Rendimento médio real do trabalho principal Índice de Gini, por região Extrema pobreza, população e hiato frente a linha da pobreza

Renda dos mais pobres é a que mais cresce

População em situação de extrema pobreza apresentou expressiva redução

CRESCIMENTO DO EMPREGO COM QUALIDADE

Indicadores de Emprego Formalização, estoque e crescimento por região Composição da população ocupada por tipo de vínculo Taxa de desocupação Trabalho infantil

Crescimento contínuo das oportunidades de trabalho

Formalização crescente aumenta proteção social

COM SAÚDE, OS BRASILEIROS ESTÃO VIVENDO MAIS

Indicadores de Saúde Expectativa de vida ao nascer, por região Mortalidade por AVC, materna e infantil, este último por região Incidência de doenças infectocontagiosas evitáveis por vacina

Brasil antecipa em quatro anos o cumprimento da meta de redução da mortalidade infantil

Redução da mortalidade infantil disseminada por todas as regiões

Aumentou a expectativa de vida dos brasileiros

ELEVAÇÃO DA ESCOLARIDADE E DA QUALIDADE DO ENSINO

Indicadores de Ensino Frequência, por faixa etária Permanência na escola, por faixa etária Número médio de anos de estudo, por faixa etária Taxa de analfabetismo, por região e faixa etária IDEB por nível de ensino

Ensino fundamental ao alcance de todos

Estudantes permanecem cada vez mais na escola

CRESCE O ACESSO A BENS E SERVIÇOS

Indicadores de Acesso dos Domicílios Energia elétrica, por região Abastecimento de água e esgotamento sanitário, por região Microcomputador com Internet, por região Telefone, móvel ou ixo, por região Bens duráveis: fogão, geladeira e máquina de lavar roupa

Universalização do acesso à energia elétrica

Ampliação da cobertura do abastecimento de água e do esgotamento sanitário

Cresce acesso a bens duráveis

ANEXO ESTATÍSTICO

Anexo Estatístico

Anexo Estatístico

Anexo Estatístico

Anexo Estatístico

Anexo Estatístico

Anexo Estatístico

Anexo Estatístico

Obrigado!!!

Indicador Marconi Fernandes de Sousa Diretor de Monitoramento junho de 2014

7.0

7.0 Descrição Magnitude Micro < 2.0 Muito pequeno 2.0 2.9 Pequeno 3.0 3.9 Ligeiro 4.0 4.9 Moderado 5.0 5.9 Forte 6.0 6.9 Grande 7.0 7.9 Importante 8.0 8.9 Excepcional 9.0 9.9 Extremo > 10.0

7.0 Descrição Magnitude Efeitos Frequência Micro < 2.0 Micro tremor de terra, não se sente ~ 8.000 por dia Muito pequeno 2.0 2.9 Geralmente não se sente mas é detectado/registrado ~ 1.000 por dia Pequeno 3.0 3.9 Frequentemente senpdo mas raramente causa danos ~ 49.000 por ano Ligeiro 4.0 4.9 Moderado 5.0 5.9 Forte 6.0 6.9 Tremo notório de objetos no interior de habitações, ruídos de choque entre objetos. Danos importantes pouco comuns Pode causar danos maiores em ediwcios mal concebidos em zonas restritas. Provoca danos ligeiros nos ediwcios bem construídos Pode ser destruidor em zonas num raio de até 180 quilômetros em áreas habitadas ~ 6.200 por ano ~ 800 por ano ~ 120 por ano Grande 7.0 7.9 Pode provocar danos graves em zonas mais vastas ~ 18 por ano Importante 8.0 8.9 Pode causar danos sérios em zonas num raio de centenas de quilômetros ~ 1 por ano Excepcional 9.0 9.9 Devasta zonas num raio de milhares de quilômetros ~ 1 a cada 20 anos Extreno > 10.0 Nunca registrado ~ Extremamente raro (desconhecido)

Sismógrafo é um aparelho que registra as ondas sísmicas, ou seja, a intensidade dos terremotos, em sismologia

Indicador em PolíPcas Públicas

O quê quanpficar? O quê medir? Por quê quanpficar/medir? Para quê quanpficar/medir? Como quanpficar/medir?

Desemprego? Ônus excessivo com aluguel? Extrema pobreza? Desnutrição? Mortalidade infanpl? Adensamento excessivo? Déficit habitacional? Taxa bruta de frequência escolar? Média de anos de estudos? Médicos por habitantes? Leitos por habitantes?

Em polípcas públicas, os indicadores são instrumentos que permitem: idenpficar e medir aspectos relacionados a um determinado conceito, fenômeno, problema ou resultado de uma intervenção na realidade traduzir, de forma mensurável, determinado aspecto de uma realidade dada (situação social) ou construída (ação de governo), de maneira a tornar operacional a sua observação e avaliação consptuirmos um retrato aproximado de determinadas dimensões da realidade social vivenciada

Mensuração Representação Retratação Realidade

Aonde pretende se chegar? O que queremos equalizar? Quais são as metas?

Indicador social Contextualização Na história recente, a ideia da construção de medidas que reflepssem a realidade social remonta à década de 1920, quando os Estados Unidos criaram um comitê presidencial voltado a produzir um relatório denominado Tendências Sociais Recentes, conceito bastante próximo ao que hoje denominamos indicadores (RUA, 2004). No entanto, uplizava se essencialmente de indicadores econômicos.

Indicador social Contextualização Anos 60 Também nos EUA, quando se percebeu que os índices de desenvolvimento econômico, tal como o PIB per capita, não explicavam as lacunas existentes no processo de desenvolvimento social. No ano de 1966 surgiu, pela primeira vez, na obra colepva organizada por Raymond Bauer a expressão Indicadores Sociais, cuja finalidade era avaliar as mudanças socioeconômicas na sociedade americana decorrentes da corrida espacial.

Indicador social Contextualização Mais adiante, na década de 1970, houve um grande avanço na produção de indicadores sociais patrocinados por organismos nacionais e internacionais (ONU, OCDE, PNUD, OMS e outros), com a divulgação de índices regionais, nacionais e supranacionais permipndo, inclusive, a comparação das condições de vida entre os países. No Brasil inicia se a Pesquisa Nacional por Amostra de Domicílios, a PNAD.

Indicador social Contextualização 1959 Levantamentos, inquéritos educacionais / SEEC Atualmente, Censo Escolar da Educação Básica e do Ensino Superior / INEP 1965 Cadastro Geral de Empregados e Desempregados / MTE 1975 Sistema de Informações sobre a Mortalidade (SIM) / MS 1976 Pesquisa Nacional por Amostra de Domicílios (PNAD) / IBGE 1976 Relação Anual de Informações Sociais (RAIS) / MTE 1980 Pesquisa Mensal de Emprego (PME) / IBGE

O conceito de indicador social

Um indicador social é uma medida em geral quanptapva dotada de significado social substanpvo, usado para subsptuir, quanpficar ou operacionalizar um conceito social abstrato de interesse teórico (para pesquisa acadêmica) ou programápco (para formulação de polípcas públicas). É um recurso metodológico, empiricamente referido, que informa algo sobre algum aspecto da realidade social ou sobre mudanças que estão se processando na mesma.

Indicador sobre diferentes perspectvas Para a pesquisa acadêmica, indicador social é o elo entre os modelos explicapvos da Teoria Social e a evidência empírica dos fenômenos sociais observados. Em uma perspecpva programápca, o indicador social é um instrumento operacional para monitoramento da realidade social, para fins de formulação e reformulação de polípcas públicas. (Carley 1985, Miles, 1985) Em uma perspecpva gerencial, o indicador gerencial é um instrumento operacional para monitoramento das apvidades produpvas, para fins de formulação e reformulação das prápcas organizacionais e estratégias de atuação

Para a pesquisa acadêmica, o indicador social é o elo entre os modelos explicapvos da Teoria Social e a evidência empírica dos fenômenos sociais observados.

Em uma perspecpva programápca, o indicador social é um instrumento operacional para monitoramento da realidade social, para fins de formulação e reformulação de polípcas públicas. (Carley 1985, Miles, 1985) 8.689.047 famílias acompanhadas em dezembro de 2012 representando 73,12 % das famílias acompanhadas

Eventos empíricos da realidade social Dados brutos levantados: EstassPcas públicas Informação para análise e decisões de polípca pública: Indicador social Nível de conhecimento da sociedade

Em uma perspecpva gerencial, o indicador gerencial é um instrumento operacional para monitoramento das apvidades produpvas, para fins de formulação e reformulação das prápcas organizacionais e estratégias de atuação

Funções, propriedades e taxonomias dos indicadores

Função descritva consiste em aportar informação sobre uma determinada realidade empírica, situação social ou ação pública Função valoratva implica em agregar informação de juízo de valor à situação em foco, a fim de avaliar a importância relapva de determinado problema ou verificar a adequação do desempenho de um Programa

Função descritva Exemplo: Peso (kg) Altura (cm) Idade (anos) Sexo (categórica)

Função normatva Exemplo: a parpr dos indicadores de peso e altura, temos a construção de indicadores conforme idade e sexo = > os Índices antropométricos Indicadores recomendados pela Organização Mundial de Saúde e Ministério da para monitoramento do estado nutricional

Função normatva Peso por idade (P/I): Expressa a massa corporal para a idade cronológica. É o índice uplizado para a avaliação do estado nutricional, contemplado no Cartão da Criança. Essa avaliação é muito adequada para o acompanhamento do crescimento infanpl e reflete a situação global do indivíduo; porém, não diferencia o compromepmento nutricional atual ou agudo dos pregressos ou crônicos. Altura por idade (A/I): Expressa o crescimento linear da criança. É o índice que melhor indica o efeito cumulapvo de situações adversas sobre o crescimento da criança. É considerado o indicador mais sensível para aferir a qualidade de vida de uma população. Peso por altura (P/A): Este índice dispensa a informação da idade; expressa a harmonia entre as dimensões de massa corporal e altura. É sensível para o diagnóspco de excesso de peso, carecendo, porém, de medidas complementares para o diagnóspco preciso de sobrepeso e obesidade.

Função normatva

Como está a distribuição da população de 0 a 5 anos segundo o índice de peso por idade?

Funções segundo momentos do Ciclo de Vida das PolíTcas Públicas ex ante: no diagnóspco de situação, para subsidiar a definição do problema, o desenho de uma polípca e a fixação das referências que se deseja modificar in curso: para monitoramento e avaliação da execução, revisão do planejamento e correção de desvios ex post: para avaliação de alcance de metas, dos resultados no público alvo e dos impactos verificados na sociedade

Ciclo de vida das PolíTcas Públicas

Exemplo: Plano Brasil Sem Miséria 16,2 milhões de brasileiros segundo o Censo Demográfico vivendo com renda domiciliar per capita abaixo de R$ 70,00 Balanço sobre apngimento de metas, análise de boas prápcas, avaliação de gargalos, etc. DiagnósPco: onde há maior concentração absoluta relapva. Caracterização sócioeconômica e demográfica Detecção de aspectos posipvos ou negapvos na execução das polípcas que merecem estudos, pesquisas mais pormenorizadas da polípca Monitoramento: acompanhamento tempespvo dos indicadores de insumo, processo, resultados e impactos Formulação: ações de busca apva, reformulação do desenho das polípcas de transferência de renda. Ampliação sistêmica de polípcas focalizadas de inclusão produpva e de acesso à serviços públicos

Ciclo de vida das PolíTcas Públicas É um esquema de visualização e interpretação que organiza a vida de uma polípca pública em fases sequenciais e interdependentes. As fases geralmente se apresentam misturadas, as dimensões se alteram. As fronteiras entre as fases não são nípdas. Não há um ponto de início e um ponto de finalização de uma polípca pública. 5ª Avaliação Análise de resultados e impactos Decisão sobre conpnuidade 4ª Implementação Produção e oferta de serviços Problemas e demandas sociais 1ª Definição de agenda e DiagnósPco Percepção e definição das questões públicas 2ª Formulação Desenho de programas Mas é uma referência conceitual para ilustrar como os sistemas de indicadores de monitoramento podem ser estruturados e como as pesquisas de avaliação podem ser especificadas. 3ª Tomada de decisão Sobre programas e públicos alvo

Ciclo de vida das PolíTcas Públicas Problemas e demandas sociais As apvidades de cada ciclo apoiam se em um conjunto específico de indicadores de diferentes naturezas e propriedades, em função das necessidades intrínsecas das apvidades envolvidas. 5ª Avaliação Análise de resultados e impactos Decisão sobre conpnuidade 4ª Implementação Produção e oferta de serviços 1ª Definição de agenda e DiagnósPco Percepção e definição das questões públicas 2ª Formulação Desenho de programas 3ª Tomada de decisão Sobre programas e públicos alvo

Ciclo de vida das PolíTcas Públicas Indicadores de qualidade do ar: Emissão de CO ( Monóxido de Carbono) O Monóxido de Carbono é um gás derivado da queima incompleta de combussveis fósseis (carvão vegetal e mineral, gasolina, querosene e óleo diesel). As queimadas, que ocorrem em florestas do mundo todo, também lançam na atmosfera milhões de toneladas de monóxido de carbono) Quais são os pontos mais crítcos?

Ciclo de vida das PolíTcas Públicas 16 de agosto de 2012 18 de julho de 2013

Propriedades dos indicadores

Validade: capacidade de representar, com a maior proximidade possível, a realidade que se deseja medir e modificar. Um indicador deve ser significante ao que está sendo medido e manter essa significância ao longo do tempo. Desnutrição infanpl: Indicadores antropométricos Índice de Massa Corporal Avaliação nutricional da diponibilidade domiciliar de alimentos ParPcipação relapva de alimentos, grupo de alimentos, macro e micronutrientes no total de calorias adquirido pelos domicílios Escala Brasileira de Insegurança Alimentar Níveis de segurança alimentar coletadas em surveys sobre auto percepção da ocorrência da fome

Confiabilidade: indicadores devem ter origem em fontes confiáveis, que uplizem metodologias reconhecidas e transparentes de coleta, processamento e divulgação. Violência na sociedade: Registros policiais Mortalidade por causas violentas (Sistema de Informações Sobre a Mortalidade, MS) Pesquisa de vipmização: quesponam os indivíduos acerca de agravos sofridos em um determinado período Levantamento em jornal

Simplicidade/Inteligibilidade: indicadores devem ser de fácil obtenção, construção, manutenção, comunicação e entendimento pelo público em geral, interno ou externo. Taxa de Desemprego versus Taxa de precarização Índice de Desenvolvimento Humano (IDH) versus Taxa de mortalidade infanpl

RepresentaTvidade/Cobertura: indicadores com boa cobertura territorial e populacional, assim como, cobertura temápca do aspecto invespgado. Pesquisas Domiciliares do IBGE Censo Demográfico Pesquisa Nacional por Amostra de Domicílios (PNAD) Pesquisa Mensal de Emprego (PME) Dados administratvos do Ministério do Trabalho Relação Anual de Informações Sociais (RAIS) Cadastro Geral de Empregados e Desempregados (CAGED)

Desagregabilidade: capacidade de representação regionalizada de grupos sociodemográficos, considerando que a dimensão territorial se apresenta como um componente essencial na implementação de polípcas públicas. Microdados: Bases de dados estruturadas nas unidades de análise de interesse da pesquisa, registro administrapvos, inquérito, etc Propriedade associada à representapvidade/ cobertura Permite a realização de recortes específicos das unidades em análise Permite o uso de técnicas avançadas de análise mulpvariada (análise de correspondência, correlações, simulações de impacto, regressões logíspcas, etc)

Trabalho infanpl 10 a 15 anos Total

Trabalho infanpl 10 a 15 anos Masculino

Trabalho infanpl 10 a 15 anos Feminino

Periodicidade/Temporalidade: periodicidade com que o indicador pode ser atualizado é um aspecto crucial na seu escolha para as apvidades de monitoramento. De acordo com cada fenômeno que pretende se medir, o momento/pming da coleta é essencial para melhor captação do fenômeno. Pesquisas Domiciliares do IBGE Censo Demográfico > Decenal Pesquisa Nacional por Amostra de Domicílios (PNAD) Anual => PNAD Consnua Mensal/Trimestral e Anual Pesquisa Mensal de Emprego (PME) Mensal Registros administratvos Relação Anual de Inforções Sociais (RAIS) Cadastro Geral de Empregados e Desempregados (CAGED) Cadastro Único para Programas Sociais (CadÚnico)

Sensibilidade: capacidade que um indicador possui de reflepr tempespvamente as mudanças decorrentes das intervenções realizadas.

Mensurabilidade: capacidade de alcance e mensuração quando necessário, na sua versão mais atual, com maior precisão possível e sem ambiguidade

Bloco de Mercado de Trabalho do QuesPonário da PNAD/IBGE

Bloco de Mercado de Trabalho do QuesPonário da PNAD/IBGE

Bloco de Mercado de Trabalho do QuesPonário da PNAD/IBGE

Economicidade: capacidade do indicador de ser obpdo a custos módicos; a relação entre os custos de obtenção e os benewcios advindos deve ser favorável. Desnutrição infanpl: Indicadores antropométricos Índice de Massa Corporal Avaliação nutricional da diponibilidade domiciliar de alimentos ParPcipação relapva de alimentos, grupo de alimentos, macro e micronutrientes no total de calorias adquirido pelos domicílios Escala Brasileira de Insegurança Alimentar Níveis de segurança alimentar coletadas em surveys sobre auto percepção da ocorrência da fome

Estabilidade/Comparabilidade: capacidade de estabelecimento de séries históricas estáveis que permitam monitoramentos e comparações.

Auditabilidade: qualquer pessoa deve senpr se apta a verifi car a boa aplicação das regras de uso dos indicadores (obtenção, tratamento, formatação, difusão, interpretação).

Na prápca, nem sempre o indicador de maior validade é o mais confiável; nem sempre o mais confiável é o mais inteligível; nem sempre o mais inteligível é o mais sensível; nem sempre o mais sensível é o mais preciso; nem sempre o mais preciso é o mais econômico; nem sempre o mais econômico é o mais estável; enfim, nem sempre o indicador que reúne todas estas qualidades é passível de ser obpdo na escala territorial e periodicidade requerida.

Taxonomia dos indicadores

A taxonomia existente na literatura aponta mais de uma dezena de formas e critérios de classificação de indicadores. Selecionamos as mais recorrentes: (1) Natureza do Indicador; (2) Área TemáPca; (3) Complexidade; (4) ObjePvidade; (5) Gestão do Fluxo de Implementação de Programas; (6) Avaliação de Desempenho

Natureza do indicador Taxonomia recorrentemente usada pelo IBGE Econômicos: foram os primeiros a serem produzidos e por isso possuem uma teoria geral mais consolidada, não se restringem apenas à área pública e refletem o comportamento da economia de um país. No setor governamental são muito uplizados na gestão das polípcas fiscal, monetária, cambial, comércio exterior, desenvolvimento industrial e outras. No setor privado subsidiam decisões de planejamento estratégico, invespmentos, contratações, concorrência, entrada ou saída de mercados etc;

Indicadores Econômicos IPA (Índice de Preços ao Produtor Amplo) IPP (Índice de Preços ao Produtor) IPCA (Índice de Preços ao Consumidor Amplo) INPC (Índice Nacional de Preços ao Consumidor) Pesquisa Agrícola Municipal (PAM) Censo Agropecuário Extração Vegetal e Silvicultura Pesquisa Industrial Anual (PIA Empresa e PIA Produto) Pesquisa Anual de Serviços Pesquisa Anual de Comércio Sistema de Contas Nacionais (Contas Nacionais, Regionais, etc) Produto Interno Bruto dos Municípios Pesquisas de Inovação Tecnológica Entre outros

Sociais: são aqueles que apontam o nível de bem estar geral e de qualidade de vida da população, principalmente em relação à saúde, educação, trabalho, renda, segurança, habitação, transporte, aspectos demográficos e outros. Pesquisa Nacional por Amostra de Domicílios Pesquisa Mensal do Emprego Censo Demográfico Pesquisa de Orçamentos Familiares Pesquisa de Informações Básicas Municipais Pesquisa de Informações Básica Estaduais Advento desde outubro de 2011 da coleta do Sistema Integrado de Pesquisas Domiciliares

Ambientais: demonstram o progresso alcançado na direção do desenvolvimento sustentável, que compreende, segundo as Nações Unidas, quatro dimensões: ambiental, social, econômica e insptucional.

Área TemáTca Essa taxonomia é bastante uplizada para a localização de indicadores em geral. Os indicadores podem ser classificados em diferentes temas: Indicadores de assistência social QuanPdade de famílias beneficiárias do PBF QuanPdade de Centros de Referência de Assistência Social implantados Indicadores de saúde Leitos por mil habitantes Percentual de crianças nascidas com baixo peso Indicadores educacionais Taxa de analfabepsmo Média de anos de estudo Indicadores de mercado de trabalho Taxa de desemprego Rendimento médio real do trabalho Indicadores demográficos Esperança de vida Taxa de fecundidade

Indicadores de segurança pública Taxa de homícidios Roubos à mão armada Indicadores de infraestrutura urbana Cobertura da rede de abastecimento de água Percentual de domicílios com esgotamento sanitário Indicadores de renda e desigualdade Percentual de pobres Índice de Gini Indicadores de cultura QuanPdade de filmes de longa metragem do cinema nacional QuanPdade de cinemas por habitantes Indicadores de previdência social QuanPdade de aposentadorias QuanPdade de requerimentos de aposentadoria Indicadores habitacionais Posse de bens duráveis Densidade de moradores por domicílio)

Complexidade Essa taxonomia permite compreender que indicadores simples podem ser combinados de forma a obter uma visão ponderada e mulpdimensional da realidade: AnalíTcos: são aqueles que retratam dimensões sociais específicas. Pode se citar como exemplos a taxa de evasão escolar e a taxa de desemprego SintéTcos: também chamados de índices, sintepzam diferentes conceitos da realidade empírica, ou seja, derivam de operações realizadas com indicadores analípcos e tendem a retratar o comportamento médio das dimensões consideradas. Diversas insptuições nacionais e internacionais divulgam indicadores sintépcos, sendo exemplos o PIB, IDEB, IPC e o IDH

Construção de Indicadores Sociais Sintéticos Conceito abstrato ou temápca social de interesse Dimensão operacional 1 Dimensão operacional 2 Dimensão operacional 3 Dimensão operacional 4 EstassPca 1 EstassPca 2 EstassPca 3 EstassPca 1 EstassPca 2 EstassPca 3 EstassPca 4 EstassPca 1 EstassPca 2 EstassPca 1 EstassPca 2 EstassPca 3 Indicador 1 Indicador 2 Indicador 3 Indicador 4

Índice FIRJAN de Desenvolvimento Municipal Conceito abstrato

Níveis de Desenvolvimento Municipal do Índice FIRJAN

AnalíTcos/SintéTcos

AnalíTcos/SintéTcos

AnalíTcos/SintéTcos Indicadores compostos (indicadores sintépcos ou índices sociais) são elaborados pela aglupnação de dois ou mais indicadores simples, referentes a uma mesma ou diferentes dimensões da realidade social. Indicador 1 Que dimensão uplizar? Como combinar? Que pesos atribuir? Indicador 2 Indicador 3 Método de aglupnação Índice Composto Premissa básica: É possível apreender o social por meio da combinação de múlpplas combinações dele.

Pirâmide da Informação

Grau de inteligibildade Pirâmide da Informação Grau de complexidade

ObjeTvidade Essa classificação tem proximidade com o caráter quanptapvo ou qualitapvo de um indicador. O indicadores podem ser: ObjeTvos: referem se a eventos concretos da realidade social; são indicadores em geral quanptapvos, construídos a parpr de estasspcas públicas ou registros administrapvos disponíveis nos Ministérios SubjeTvos: são indicadores qualitapvos uplizados para captar sensações ou opiniões e uplizam técnicas do Ppo pesquisa de opinião, grupo focal ou grupo de discussão

Indicadores de Gestão do Fluxo de Implementação de Programas Essa classificação tem grande importância para a equipe gerencial do Programa no gerenciamento do processo de formulação e implementação das polípcas públicas, pois permite separar os indicadores de acordo com a sua aplicação nas diferentes fases do ciclo de gestão. Nesta taxonomia os indicadores podem ser de: Insumo Processo Produto Resultado Impacto

Insumo (input indicators): são indicadores ex ante facto que têm relação direta com os recursos a serem alocados, ou seja, com a disponibilidade dos recursos humanos, materiais, financeiros e outros a serem uplizados pelas ações de governo. Processo (throughput indicators): são medidas in curso ou intermediárias que traduzem o esforço empreendido na obtenção dos resultados, ou seja, medem o nível de uplização dos insumos alocados. Produto (output indicators): medem o alcance das metas Wsicas. São medidas ex post facto que expressam as entregas de produtos ou serviços ao público alvo do Programa. Resultado (outcome indicators): essas medidas expressam, direta ou indiretamente, os benewcios no público alvo decorrentes das ações empreendidas no contexto do Programa e têm parpcular importância no contexto de gestão pública orientada a resultados. Impacto (impact indicators): possuem natureza abrangente e mulpdimensional, têm relação com a sociedade como um todo e medem os efeitos das estratégias governamentais de médio e longo prazos. Na maioria dos casos estão associados aos objepvos setoriais e de governo.

Insumo Médicos por mil habitantes Orçamento previsto Processo Recursos financeiros liberados no mês Produto Médicos contratados Campanhas realizadas Resultado Diminuição da taxa de morbidade por doenças DST Impacto Aumento da expectapva de vida da população

Indicadores de Avaliação de Desempenho Essa classificação possui foco maior na avaliação dos recursos alocados e dos resultados alcançados. Segundo essa ópca, os indicadores podem ser de:

Economicidade: medem os gastos envolvidos na obtenção dos insumos (materiais, humanos, financeiros etc.) necessários às ações que produzirão os resultados planejados. Visa a minimizar custos sem comprometer os padrões de qualidade estabelecidos e requer um sistema que estabeleça referenciais de comparação e negociação. Eficiência: essa medida possui estreita relação com produtvidade, ou seja, o quanto se consegue produzir com os meios disponibilizados. Assim, a parpr de um padrão ou referencial, a eficiência de um processo será tanto maior quanto mais produtos forem entregues com a mesma quanpdade de insumos, ou os mesmos produtos e/ou serviços sejam obpdos com menor quanpdade de recursos. Eficácia: aponta o grau com que um Programa apnge as metas e objetvos planejados, ou seja, uma vez estabelecido o referencial (linha de base) e as metas a serem alcançadas, upliza se indicadores de resultado para avaliar se estas foram apngidas ou superadas. EfeTvidade: mede os efeitos positvos ou negatvos na realidade que sofreu a intervenção, ou seja, aponta se houve mudanças socioeconômicas, ambientais ou insptucionais decorrentes dos resultados obpdos pela polípca, plano ou programa.

Obrigado! marconi.sousa@mds.gov.br

Paulo de Martino Jannuzzi RSP Indicadores para diagnóstico, monitoramento e avaliação de programas sociais no Brasil * Paulo de Martino Jannuzzi Introdução O interesse pela temática dos indicadores sociais e sua aplicação nas atividades ligadas ao planejamento governamental e ao ciclo de formulação e avaliação de políticas públicas vêm crescendo no País, nas diferentes esferas de governo e nos diversos fóruns de discussão dessas questões. Tal fato deve-se, em primeiro lugar, certamente, às mudanças institucionais por que a administração pública tem passado no País, em especial com a consolidação da sistemática do planejamento plurianual, com o aprimoramento dos controles administrativos dos ministérios, com a mudança da ênfase da auditoria dos Tribunais de Contas da avaliação da conformidade legal para a avaliação do desempenho dos programas, com a reforma gerencial da gestão pública em meados dos anos 1990 (GARCIA, 2001. COSTA; CASTANHAR, 2003). Esse interesse crescente pelo uso de indicadores na administração pública também está relacionado ao aprimoramento do controle social do Estado brasileiro nos últimos 20 anos. A mídia, Revista do Serviço Público Brasília 56 (2): 137-160 Abr/Jun 2005 137

RSP Indicadores para diagnóstico, monitoramento e avaliação de programas sociais no Brasil os sindicatos e a sociedade civil passaram a ter maior poder de fiscalização do gasto público e a exigir o uso mais eficiente, eficaz e efetivo dele, demandando a reorganização das atividades de planejamento em bases mais técnicas. Também tem contribuído para a disseminação do uso dos indicadores o acesso crescentemente facilitado às informações mais estruturadas de natureza administrativa e estatística que as novas tecnologias de informação e comunicação viabilizam. Dados cadastrais antes esquecidos em armários e fichários passam a transitar pela Internet, transformando-se em informação estruturada para análise e tomada de decisão. Dados estatísticos antes inacessíveis em enormes arquivos digitais passam a ser customizados na forma de tabelas, mapas e modelos quantitativos construídos por usuários não especializados. Sem dúvida, a Internet, os CD-ROMs inteligentes, os arquivos de microdados potencializaram muito a disseminação da informação administrativa compilada por órgãos públicos e a informação estatística produzida pelas agências especializadas. É com o objetivo de apresentar como essas informações estruturadas podem ser empregadas nas diferentes etapas do ciclo de formulação e avaliação de programas públicos que se apresenta este texto. Para isso, inicialmente, apresentam-se, nas duas primeiras seções, os aspectos conceituais básicos acerca dos indicadores sociais, as suas propriedades e as formas de classificá-los. Depois, discute-se uma proposta de estruturação de um sistema de indicadores para subsidiar o processo de formulação e avaliação de políticas e programas públicos no País. Indicadores nas políticas públicas: conceito e suas propriedades No campo aplicado das políticas públicas, os indicadores sociais são medidas usadas para permitir a operacionalização de um conceito abstrato ou de uma demanda de interesse programático. Os indicadores apontam, indicam, aproximam, traduzem em termos operacionais as dimensões sociais de interesse definidas a partir de escolhas teóricas ou políticas realizadas anteriormente. Prestam-se a subsidiar as atividades de planejamento público e a formulação de políticas sociais nas diferentes esferas de governo, possibilitam o monitoramento das condições de vida e bem-estar da população por parte do poder público e da sociedade civil e permitem o aprofundamento da investigação acadêmica sobre a mudança social e sobre os determinantes dos diferentes fenômenos sociais (MILES, 1985. NAÇÕES UNIDAS, 1988). Taxas de analfabetismo, rendimento médio do trabalho, taxas de mortalidade infantil, taxas de desemprego, índice de Gini e proporção de crianças matriculadas em escolas são, nesse sentido, indicadores sociais, ao traduzirem em cifras tangíveis e operacionais várias das dimensões relevantes, específicas e dinâmicas da realidade social. O processo de construção de um indicador social, ou melhor, de um sistema de indicadores sociais, para uso no ciclo de políticas públicas inicia-se a partir da explicitação da demanda de interesse programático, tais como a proposição de um programa para ampliação do atendimento à saúde, a redução do déficit habitacional, o aprimoramento do desempenho escolar e a melhoria das condições de vida de uma comunidade. A partir da definição desse objetivo programático, busca-se, então, delinear as dimensões, os 138 Revista do Serviço Público Brasília 56 (2): 137-160 Abr/Jun 2005

Paulo de Martino Jannuzzi RSP componentes ou as ações operacionais vinculadas. Para o acompanhamento dessas ações em termos da eficiência no uso dos recursos, da eficácia no cumprimento de metas e da efetividade dos seus desdobramentos sociais mais abrangentes e perenes, buscam-se dados administrativos (gerados no âmbito dos programas ou em outros cadastros oficiais) e estatísticas públicas (produzidas pelo IBGE e outras instituições), que, reorganizados na forma de taxas, proporções, índices ou mesmo em valores absolutos, transformam-se em indicadores sociais (Figura 1). Os indicadores guardam, pois, relação direta com o objetivo programático original, na forma operacionalizada pelas ações e viabilizada pelos dados administrativos e pelas estatísticas públicas disponíveis. A relevância para a agenda político-social é a primeira e uma das propriedades fundamentais de que devem gozar os indicadores escolhidos em um sistema de formulação e avaliação de programas sociais específicos. Indicadores como a taxa de mortalidade infantil, a proporção de crianças com baixo peso ao nascer e a proporção de domicílios com saneamento adequado são, por exemplo, relevantes e pertinentes para acompanhamento de programas no campo da saúde pública no Brasil, na medida em que podem responder à demanda de monitoramento da agenda governamental das prioridades definidas na área nas últimas décadas. Indicadores de pobreza (no sentido de carência de rendimentos), por outro lado, só vieram a ser regularmente produzidos quando Figura 1: Construção de sistema de indicadores para ciclo de políticas públicas A escolha de indicadores sociais para uso no processo de formulação e avaliação de políticas públicas deve ser pautada pela aderência deles a um conjunto de propriedades desejáveis e pela lógica estruturante da aplicação, que definirá a tipologia de indicadores mais adequada (JANNUZZI, 2001). No Quadro 1, estão relacionadas 12 propriedades cuja avaliação de aderência (+) e de não aderência ou indiferença deveria determinar o uso, ou não, do indicador para os propósitos almejados. programas e ações focalizados em grupos mais vulneráveis entraram na agenda da política social, a partir dos anos 1980. Validade é outro critério fundamental na escolha de indicadores, pois é desejável que se disponha de medidas tão próximas quanto possível do conceito abstrato ou da demanda política que lhes deram origem. Em um programa de combate à fome, por exemplo, indicadores antropométricos ou do padrão de consumo familiar de alimentos certamente gozam de Revista do Serviço Público Brasília 56 (2): 137-160 Abr/Jun 2005 139

RSP Indicadores para diagnóstico, monitoramento e avaliação de programas sociais no Brasil maior validade que uma medida baseada na renda disponível, como a proporção de indigentes. Afinal, índice de massa corpórea, baixo peso ao nascer ou quantidade de alimentos efetivamente consumidos estão mais diretamente relacionados à nutrição adequada e à desnutrição que à disponibilidade de rendimentos. Por outro lado, é operacionalmente mais complexo e custoso levantar informações para o que aqueles passíveis de serem obtidos a partir de pesquisas de vitimização, em que se questionam os indivíduos acerca de agravos sofridos em seu meio em determinado período. Naturalmente, mesmo nessas pesquisas, as pessoas podem-se sentir constrangidas a revelar situações de violência pessoal sofrida, por exemplo, no contexto doméstico, no assédio sexual ou na discriminação por raça e/ou cor. Quadro 1: Avaliação da aderência dos indicadores às propriedades desejáveis cálculo desses indicadores de maior validade, comprometendo o uso deles para fins de monitoramento periódico do grau de fome na comunidade (daí o uso de indicadores de rendimento como medidas de acompanhamento). Confiabilidade da medida é outra propriedade importante para legitimar o uso do indicador. Na avaliação do nível de violência em uma comunidade, por exemplo, indicadores baseados nos registros de ocorrências policiais ou mesmo de mortalidade por causas violentas tendem a ser menos confiáveis e menos válidos Sempre que possível, deve-se procurar empregar indicadores de boa cobertura territorial ou populacional, que sejam representativos da realidade empírica em análise. Essa é uma das características interessantes dos indicadores sociais produzidos a partir dos censos demográficos, o que os tornam tão importantes para o planejamento público no País. Mas mesmo indicadores de cobertura parcial podem ser úteis. Os indicadores de mercado de trabalho construídos a partir das bases de dados administrativos do Ministério do Trabalho, por exemplo, não retratam a 140 Revista do Serviço Público Brasília 56 (2): 137-160 Abr/Jun 2005

Paulo de Martino Jannuzzi RSP dinâmica conjuntural do mercado de trabalho brasileiro, já que se referem apenas ao mercado de trabalho formal. Ainda assim, esses indicadores aportam conhecimento relevante acerca da dinâmica conjuntural da economia e do emprego, em especial em âmbito municipal. Sensibilidade e especificidade são propriedades que também devem ser avaliadas quando da escolha de indicadores para a elaboração de um sistema de monitoramento e avaliação de programas públicos. Afinal, é importante dispor de medidas sensíveis e específicas às ações previstas nos programas, que possibilitem avaliar rapidamente os efeitos (ou nãoefeitos) de determinada intervenção. Taxa de evasão ou freqüência escolar, por exemplo, são medidas sensíveis e com certa especificidade para monitoramento de programas de transferência de renda, na medida em que se espera verificar, em curto prazo, nas comunidades atendidas por tais programas, maior engajamento das crianças na escola, como resultado direto de controles compulsórios previstos ou mesmo como conseqüência indireta da mudança de comportamento ou da necessidade familiar. A boa prática da pesquisa social recomenda que os procedimentos de construção dos indicadores sejam claros e transparentes, que as decisões metodológicas sejam justificadas, que as escolhas subjetivas invariavelmente freqüentes sejam explicitadas de forma objetiva. Transparência metodológica é certamente um atributo fundamental para que o indicador goze de legitimidade nos meios técnicos e científicos, ingrediente indispensável para sua legitimidade política e social. Comunicabilidade é outra propriedade importante, com a finalidade de garantir a transparência das decisões técnicas tomadas pelos administradores públicos e a compreensão delas por parte da população, dos jornalistas, dos representantes comunitários e dos demais agentes públicos. Na discussão de planos de governo, orçamento participativo, projetos urbanos, os técnicos de planejamento deveriam valer-se, tanto quanto possível, de alguns indicadores sociais mais facilmente compreendidos, como a taxa de mortalidade infantil e a renda familiar, ou que o uso sistemático já Indicadores sociais permitem a operacionalização de um conceito abstrato ou de uma demanda de interesse programático. Eles apontam, indicam, aproximam, traduzem em termos operacionais as dimensões sociais de interesse definidas a partir de escolhas teóricas ou políticas realizadas anteriormente os consolidou, como o índice de preços e a taxa de desemprego. Nessas situações, o emprego de indicadores muito complexos pode ser visto como abuso tecnocrático dos formuladores de programas, primeiro passo para o potencial fracasso na sua implementação. A periodicidade com que o indicador pode ser atualizado e a factibilidade de sua obtenção a custos módicos são outros Revista do Serviço Público Brasília 56 (2): 137-160 Abr/Jun 2005 141

RSP Indicadores para diagnóstico, monitoramento e avaliação de programas sociais no Brasil aspectos cruciais na construção e seleção de indicadores sociais para acompanhamento de qualquer programa público. Para que se possa acompanhar a mudança social, avaliar o efeito de programas sociais implementados, corrigir eventuais distorções de implementação, é necessário que se disponha de indicadores levantados com certa regularidade. Essa é uma das grandes limitações do sistema estatístico brasileiro e, a bem da verdade, de muitos países. Para algumas temáticas da política social trabalho, por exemplo, é possível dispor-se de boas estatísticas e indicadores de forma periódica (mensal), para alguns domínios territoriais (principais regiões metropolitanas). Para outras temáticas, em escala estadual, é possível atualizar indicadores em bases anuais, por meio da Pesquisa Nacional por Amostra de Domicílios (PNAD). Nos municípios, em geral, pela falta de recursos, organização e compromisso com a manutenção periódica dos cadastros (de contribuintes, de imóveis, de favelas, etc.), só se dispõe de informações mais abrangentes a cada dez anos, por ocasião dos censos demográficos 1. Também é preciso que os indicadores se refiram, tanto quanto possível, aos grupos sociais de interesse ou à populaçãoalvo dos programas, isto é, deve ser possível construir indicadores sociais referentes a espaços geográficos reduzidos, grupos sociodemográficos (crianças, idosos, homens, mulheres, brancos, negros, etc.), ou grupos vulneráveis específicos (famílias pobres, desempregados, analfabetos, etc.). O Censo Demográfico 2000 reflete, nesse sentido, o esforço governamental em atender novas demandas informacionais para formulação e avaliação de políticas públicas, em especial as políticas compensatórias e as voltadas à discriminação positiva. Pela primeira vez, em censos brasileiros, investigou-se a freqüência à creche, à educação infantil, questão fundamental na agenda de discussão da política educacional nos municípios brasileiros. A caracterização do tipo e grau de deficiência física é outro aspecto que mereceu especial atenção no levantamento, como resultado da pressão de grupos organizados interessados em implementar, de fato, os direitos assegurados na Constituição. Tentou-se, também, na fase de pré-teste do censo, aprimorar o levantamento da ascendência étnica da população, de forma a fornecer subsídios mais precisos a políticas de discriminação positiva, de acesso compensatório a bens e serviços públicos (educação superior, por exemplo) de grupos historicamente desprivilegiados (negros, por exemplo). O acesso a programas de renda mínima, como o Bolsa Escola, e outras transferências governamentais também foram objeto de maior detalhamento no censo. A comparabilidade do indicador ao longo do tempo é uma característica desejável, de modo a permitir a inferência de tendências e a avaliar efeitos de eventuais programas sociais implementados. O ideal é que as cifras passadas sejam compatíveis do ponto de vista conceitual e com confiabilidade similar à das medidas mais recentes, o que nem sempre é possível. Afinal, também é desejável que a coleta dos dados melhore ao longo do tempo, seja pela resolução dos problemas de cobertura espacial e organização da logística de campo, como pelas mudanças conceituais que ajudem a precisar melhor o fenômeno social em questão. Em uma perspectiva aplicada, dadas as características do sistema de produção de estatísticas públicas no Brasil, é muito raro dispor-se de indicadores sociais que gozem plenamente de todas essas 142 Revista do Serviço Público Brasília 56 (2): 137-160 Abr/Jun 2005

Paulo de Martino Jannuzzi RSP propriedades. Na prática, nem sempre o indicador de maior validade é o mais confiável; nem sempre o mais confiável é o mais sensível; nem sempre o mais sensível é o mais específico; enfim, nem sempre o indicador que reúne todas essas qualidades é passível de ser obtido na escala territorial e na periodicidade requerida. O importante é que a escolha dos indicadores seja fundamentada na avaliação crítica das propriedades anteriormente discutidas e não simplesmente na tradição de uso deles. Há esforço significativo de diversas instituições de disponibilizar novos conteúdos e informações a partir de seus cadastros, as quais podem ser usadas para a construção de novos indicadores sociais. Taxonomia dos indicadores para fins de aplicação nas políticas públicas Além da observância às propriedades, a escolha de indicadores para uso no ciclo de formulação e avaliação de programas também deveria pautar-se pela natureza ou pelo tipo dos indicadores requeridos. Há vários sistemas classificatórios para os indicadores sociais (CARLEY, 1985). A classificação mais comum é a divisão dos indicadores segundo a área temática da realidade social a que se referem. Há, assim, os indicadores de saúde (leitos por mil habitantes, percentual de crianças nascidas com baixo peso, por exemplo), os indicadores educacionais (taxa de analfabetismo, escolaridade média da população de 15 anos ou mais, etc.), os indicadores de mercado de trabalho (taxa de desemprego, rendimento médio real do trabalho, etc.), os indicadores demográficos (esperança de vida, etc.), os indicadores habitacionais (posse de bens duráveis, densidade de moradores por domicílio, etc.), os indicadores de segurança pública e justiça (mortes por homicídios, roubos à mão armada por cem mil habitantes, etc.), os indicadores de infra-estrutura urbana (taxa de cobertura da rede de abastecimento de água, percentual de domicílios com esgotamento sanitário ligado à rede pública, etc.), os indicadores de renda e desigualdade (proporção de pobres, índice de Gini, etc.). Outra classificação usual corresponde à divisão dos indicadores entre objetivos e subjetivos. Os indicadores objetivos referem-se a ocorrências concretas ou a entes empíricos da realidade social, construídos a partir das estatísticas públicas disponíveis, como o percentual de domicílios com acesso à rede de água, a taxa de desemprego, a taxa de evasão escolar ou o risco de acidentes de trabalho. Os indicadores subjetivos, por outro lado, correspondem a medidas construídas a partir da avaliação dos indivíduos ou especialistas com relação a diferentes aspectos da realidade, levantados em pesquisas de opinião pública ou grupos de discussão, como a avaliação da qualidade de vida, o nível de confiança nas instituições, a percepção da corrupção, a performance dos governantes. Ainda que se refiram a dimensões sociais semelhantes, indicadores objetivos e subjetivos podem apontar tendências diferentes. Famílias de baixa renda, quando instadas a avaliar suas condições de vida, podem emitir juízos paradoxalmente mais positivos que uma análise baseada em parâmetros normativos e com indicadores objetivos de rendimentos e de infra-estrutura domiciliar. Assim, a opinião da população atendida por um programa é certamente importante, desejável e complementar em qualquer sistemática de monitoramento e avaliação, trazendo subsídios para a correção e melhoria do processo de implementação dos programas e também indícios da Revista do Serviço Público Brasília 56 (2): 137-160 Abr/Jun 2005 143

RSP Indicadores para diagnóstico, monitoramento e avaliação de programas sociais no Brasil efetividade social desses programas, especialmente aqueles difíceis de serem mensurados em uma escala quantitativa. Uma outra lógica de classificação, interessante de se usar na análise de políticas públicas, é a diferenciação dos indicadores entre indicador-insumo, indicador-processo, indicador-resultado e indicador-impacto (OMS, 1996. COHEN; FRANCO, 2000). Os indicadores-insumo correspondem às medidas associadas à disponibilidade de recursos humanos, financeiros ou de equipamentos alocados para um processo ou programa que afeta uma das dimensões da realidade social. São tipicamente indicadores de alocação de recursos para políticas sociais o número de leitos hospitalares por mil habitantes, o número de professores por quantidade de estudantes ou ainda o gasto monetário per capita nas diversas áreas de política social. Os indicadores-resultado são aqueles mais propriamente vinculados aos objetivos finais dos programas públicos, que permitem avaliar a eficácia do cumprimento das metas especificadas, como, por exemplo, a taxa de mortalidade infantil, cuja diminuição espera-se verificar com a implementação de um programa de saúde maternoinfantil. Os indicadores-impacto referemse aos efeitos e desdobramentos mais gerais, antecipados ou não, positivos ou não, que decorrem da implantação dos programas, como, no exemplo anterior, a redução da incidência de doenças na infância ou a melhoria do desempenho escolar futura, efeitos decorrentes de atendimento adequado da gestante e da criança recém-nascida em passado recente. Os indicadores-processo ou fluxo são indicadores intermediários, que traduzem, em medidas quantitativas, o esforço operacional de alocação de recursos humanos, físicos ou financeiros (indicadores-insumo) para a obtenção de melhorias efetivas de bem-estar (indicadores-resultado e indicadores-impacto), como número de consultas pediátricas por mês, merendas escolares distribuídas diariamente por aluno ou ainda homens-hora dedicados a um programa social. A distinção entre essas dimensões operacionais insumo, processo, resultado, impacto pode não ser muito clara em algumas situações, especialmente quando os programas são muito específicos ou no caso contrário, quando os objetivos dos programas são muito gerais. Mas é sempre possível identificar indicadores mais vinculados aos esforços de políticas e programas e aqueles referentes aos efeitos (ou não-efeitos) desses programas. Na Figura 2, são apresentados alguns indicadores de acompanhamento de um suposto programa de transferência de renda, cuja finalidade seja a de reduzir a parcela de famílias em condição de indigência, isto é, de famílias com recursos monetários insuficientes para a compra de uma cesta de produtos para a alimentação de seus membros: como indicador-insumo, o volume de recursos do programa, com percentual do orçamento ou em bases per capita; como indicadores-processo, os percentuais de famílias cadastradas pelas prefeituras e daquelas efetivamente atendidas, que podem fornecer elementos para a avaliação da eficiência do programa; como indicadorresultado, a proporção de famílias em situação de indigência, ou com rendimentos abaixo de determinado valor, medida que deveria refletir o grau de eficácia com que o programa atendeu ao objetivo esperado; como indicadores-impacto, a taxa de evasão escolar e a desnutrição infantil, efeitos potenciais do programa implementado que permitem dimensionar a sua efetividade social. 144 Revista do Serviço Público Brasília 56 (2): 137-160 Abr/Jun 2005