Avaliação, Tecnologias, e Custos Sociais e Econômicos

Transcrição

1 Avaliação, Tecnologias, e Custos Sociais e Econômicos Eduardo L.G. Rios-Neto Belo Horizonte, 11 de outubro de 2013

2 ESQUEMA DA APRESENTAÇÃO: I. Comentários Gerais Introdutórios II. III. IV. Pareamento de Bases de Dados e Registros Administrativos Avaliação de Impacto Poupança Jovem Avaliação de Impacto do PEP

3 A IMPORTÂNCIA DO MARCO CAUSAL Todo programa deve ter um marco causal, pois este ajuda a identificar as variáveis de impacto utilizadas na avaliação. Sob o ponto de vista conceitual o marco causal deve estar associado a alguma teoria, na maioria das vezes micro, no caso das políticas sociais de desenvolvimento humano. Sob o ponto de vista gerencial este marco causal deve estar associado a um marco lógico, que identifica as etapas necessárias para se alcançar os objetivos explícitos dos programas ou políticas. Por incrível que pareça, muitas políticas sociais não possuem objetivos claros ou apresentam objetivos conflitantes.

4 O MARCO CAUSAL E A AVALIAÇÃO EX-ANTE A avaliação de impacto pode ser realizada e deveria quando o programa é planejado, até mesmo antes do programa ser lançado. O mecanismo de avaliação é a simulação a partir de dados observacionais de alguma pesquisa empírica. Para realizar uma avaliação ex-ante é preciso ter um marco causal bem definido, pois só com as relações bem definidas e fundamentadas a simulação terá credibilidade. Já ví pelo menos um trabalho, de Skoufias do Banco Mundial, que compara os resultados de uma avaliação ex-ante com uma avaliação ex-post e conclui que este é um exercício válido, podendo ser robusto. PAPEL FUTURO DE SIMULAÇÃO COM EX-ANTE.

5 AS CONSEQUÊNCIAS UFMG - Universidade NÃO-INTENCIONAIS Federal de Minas Gerais DE UMA Cedeplar -POLÍTICA Centro de Desenvolvimento SOCIAL e Planejamento Regional A diversidade de variáveis associadas nas bases de dados associadas com o desenho da avaliação permite o estudo de impactos não-intencionais de uma dada política social. A busca de variáveis possivelmente associadas a um impacto não-intencional deve estar ligada a alguma visão estrutural do processo sendo analisado. Por exemplo, na avaliação do PEQ-MG. 1996, no contexto do PLANFOR, depois de um segmento longitudinal dos grupos de tratamento e controle, o impacto de renda e emprego foi pequeno, mas houve um aumento na escolaridade ou anos completos de estudo que não era previsto no programa e, potencialmente, poderiar gerar um efeito indireto de renda permanente.

6 A IMPORTÂNCIA DA DEFINIÇÃO DO MOMENTO FACE - Faculdade de DA Ciências AVALIAÇÃO Econômicas A aleatorização dos beneficiários para resolver o problema da identificação ou contrafactual é o padrão-ouro. Entretanto, a aleatorização deve ser feita antes do início da operação do programa, ou do início de uma nova etapa. Quando o contato com os gestores para avaliar o impacto ocorre após o início do funcionamento do programa, aí a avaliação de impacto com aleatorização do tratamento e controle fica menos factível em termos operacionais.

7 ALEATORIZAÇÃO E GESTORES A resistência dos gestores e a necessidade de convencimento. O medo de aleatorização ser vista como um atestado de incompetência. A idéia da aleatorização parcial do programa. A escolha do tratamento do secretário. A vantagem sob o ponto de vista do usuário, a democratização aleatória e o declínio do clientelismo.

8 OS DADOS PARA A AVALIAÇÃO DE IMPACTO A escolha da base de dados a ser utilizada na avaliação de impacto depende fundamentalmente da metodologia definida. A principal decisão consiste em escolher entre pesquisa de campo para obter dados primários e uso de dados observacionais secundários. No campo dos dados secundários, cabe distinguir os registros administrativos e as pesquisas domiciliares secundárias. A metodologia utilizada e o custo da avaliação são os determinantes principais das escolhas realizadas.

9 O PROBLEMA UFMG - Universidade Federal DA de Minas ATRIÇÃO Gerais NA AVALIAÇÃO FACE - Faculdade LONGITUDINAL de Ciências Econômicas DE IMPACTO No desenho de uma avaliação é preciso ter em mente que não só o tratamento e o controle devem ser definidos, mas também que o antes e o depois são aspectos importantes. Tanto a pesquisa de campo de tipo survey quanto o uso longitudinal de registros administrativos devem levar em conta a atrição (perda de informação ao longo do tempo) e contemplar a possibilidade de ocorrência de um viés de atrição. Dados longitudinais, painéis, administrativos ou domiciliares, são como vinho, quanto mais velhos melhores.

10 O PAREAMENTO DE BASE DE DADOS EM REGISTROS ADMINISTRATIVOS Cedeplar DADOS - Centro de Desenvolvimento EM REGISTROS e Planejamento Regional A escolha da metodologia de avaliação de impacto será importante para determinar o tipo de uso do registro administrativo. Uma questão central para o sucesso deste tipo de avaliação no âmbito governamental é a garantia do sigilo sobre a informação individualizada, principalmente após o pareamento de bases de dados originadas por órgãos distintos.

11 O PAREAMENTO DE BASE DE DADOS EM REGISTROS ADMINISTRATIVOS Uma limitação técnica neste tipo de pareamento de registros administrativos é o algoritmo de pareamento, principalmente quando não há um identificador comum. O pareamento probabilístico permite algum sucesso neste merge das bases de dados. Há softwares públicos disponíveis nesta área: RecLink IESC - UFRJ e PAREIA - Departamento de Ciência da Computação da UFMG. Uma outra limitação é o tamanho das bases e seus usos administrativos que impedem a leitura dos dados. O DCC utiliza o processamento paralelo em laboratórios independentes como saída para esta leitura de grandes volumes de dados.

12 O PAREAMENTO UFMG - Universidade Federal DE BASE de Minas Gerais DE DADOS Cedeplar REGISTROS - Centro de Desenvolvimento ADMINISTRATIVOS e Planejamento Regional E PESQUISAS DE CAMPO AIBF Pesquisa Domiciliar de Linha de Base do Bolsa Família Com o CadUnico, com Prova Brasil, GFIP, Censo Escolar, SIM, etc.. Pesquisas de Coorte Pelotas, Ribeirão Preto, Maranhão, etc. com CadUnico, GFIP, RAIS, Censo Escolar, etc. Censo Demográfico com CadUnico, GFIP, RAIS, Censo Escolar, etc. (Caso da Data de Nascimento no Censo Demográfico)

13 3- Avaliação de Impacto do Programa Poupança Jovem do Governo de Minas Gerais O Caso de Ribeirão das Neves A M O S T R A G E M T R A T A M E N T O O p o n to d e p a rtid a d a a v a lia ç ã o fo i a d e fin iç ã o d a a m o s tra d e e s c o la s e m R ib e ir ã o d a s N e v e s, p a r a a e n tre v is ta d e a lu n o s m a tric u la d o s n a r e d e e s ta d u a l n a 1 a S é r ie d o E n s in o M é d io, c o m a e x p e c ta tiv a d e a d e s ã o a o P r o g ra m a P o u p a n ç a J o v e m. E s ta s e s c o la s a m o s tra d a s r e p re s e n ta m o g r u p o d e T R A T A M E N T O, o u s e ja, a p o p u la ç ã o a s e r b e n e fic ia d a p e la s in te r v e n ç õ e s d o p r o g r a m a. CEDEPLAR/UFMG

14 3- Avaliação de Impacto do Programa Poupança Jovem do Governo de Minas Gerais O Caso de Ribeirão das Neves A M O S T R A G E M T R A T A M E N T O O e s q u e m a a d o ta d o p a ra a s e le ç ã o d a a m o s tra d e a lu n o s p a ra a p e s q u is a d e a v a lia ç ã o d o P ro g ra m a P o u p a n ç a J o v e m, n o m u n ic íp io d e R ib e irã o d a s N e v e s (g ru p o tra ta m e n to ), te m c o m o b a s e o p ro c e d im e n to d e a m o s tra g e m p o r c o n g lo m e ra d o s e m u m e s tá g io c o m e s tra tific a ç ã o g e o g rá fic a. O s e s tra to s fo ra m d e fin id o s e m R ib e irã o d a s N e v e s c o m o a s re g iõ e s g e o g rá fic a s C e n tro, V e n e z a e J u s tin ó p o lis. A a lo c a ç ã o d a s e s c o la s e m c a d a u m d o s e s tra to s fo i fe ita d e m a n e ira p ro p o rc io n a l a o n ú m e ro d e e s c o la s e m c a d a u m a d a s re g iõ e s. P a ra a s e le ç ã o d a s e s c o la s fo i a d o ta d o u m p ro c e d im e n to d e a m o s tra g e m c o m p ro b a b ilid a d e s p ro p o rc io n a is a o ta m a n h o (P P T ), s e n d o q u e a m e d id a d e ta m a n h o a d o ta d a fo i o n ú m e ro d e a lu n o s m a tric u la d o s n a 1 ª S é rie d o E n s in o M é d io. A s e s c o la s s e le c io n a d a s e s tã o n a T a b e la a s e g u ir... CEDEPLAR/UFMG

15 3- Avaliação de Impacto do Programa Poupança Jovem do Governo de Minas Gerais O Caso de Ribeirão das Neves T a b e la 2 E s c o la s se lec io n a d a s (G r u p o T r a ta m e n to ) E s tr a to E s c o la N. d e a lu n os - 1 ª S é r ie E M 1 E E J O S E B O N IF A C IO N O G U E IR A (C e n tro ) E E D O B A IR R O S A N T IN H O E E P R O F G U E R IN O C A S A S S A N T A E E A L E S S A N D R A S A L U M C A D A R (J u stin ó p o lis) E E J O S E L U IS D E C A R V A L H O 6 7 E E A N T O N IO M IG U E L C E R Q U E IR A N E T O E E J O S E J O A Q U IM L A G E S E E M A N O E L M A R T IN S D E M E L O E E D O B A IR R O S A N G E N A R O ( V e n e z a) E E P R O F H E L V E C IO D A H E T o ta l CEDEPLAR/UFMG

16 3- Avaliação de Impacto do Programa Poupança Jovem do Governo de Minas Gerais O Caso de Ribeirão das Neves C O M O F A Z E R O C O N T R O L E? A e s tra té g ia p a ra e la b o ra r u m a a m o s tra d e g ru p o d e c o n tro le p a ra o s b e n e ficiá rios d o P o u p a n ça J o v e m e m R ib e irã o d a s N e v e s fo i a m o s tra r e sc o la s e s ta d u a is e m m u n ic íp io s v iz in h o s a N e ve s. O s m a p a s q u e s e s e g u e m m o s tra m a v iz in h a nça m u n ic ip a l d e N e ve s e o s três a g lo m e ra d o s e sp a cia is d e e sco la s e m N e v e s. CEDEPLAR/UFMG

17 3- Avaliação de Impacto do Programa Poupança Jovem do Governo de Minas Gerais O Caso de Ribeirão das Neves CEDEPLAR/UFMG

18 3- Avaliação de Impacto do Programa Poupança Jovem do Governo de Minas Gerais O Caso de Ribeirão das Neves CEDEPLAR/UFMG

19 3- Avaliação de Impacto do Programa Poupança Jovem do Governo de Minas Gerais O Caso de Ribeirão das Neves A M O S T R A G E M C O N T R O L E O s e s tra tos d o g ru p o c o n tro le fo ram d e fin id o s c o m o a s re g iõ e s ge o g rá fic a s d os m un ic íp ios d e P ed ro L e o p o ld o, E s m e ra ld a s e B e lo H o riz o n te (lo c a liz a d a s e m V en d a N o va ) q u e s ã o viz in h a s a R ib e irã o d as N eves. A a lo c aç ã o d a s es c o las e m c a d a u m d o s e s trato s fo i fe ita d e m an e ira p ro p o rc io n a l a o n ú m e ro d e e sc ola s e m c a d a u m a d as re g iõ e s. CEDEPLAR/UFMG

20 3- Avaliação de Impacto do Programa Poupança Jovem do Governo de Minas Gerais O Caso de Ribeirão das Neves A M O S T R A G E M C O N T R O L E A s e le ç ã o d a s e s c o la s lo c a liz a d a s e m P e d r o L e o p o ld o f o i r e a liz a d a c o m p r o b a b ilid a d e s p r o p o r c io n a is à d is t â n c ia à s e s c o la s lo c a liz a d a s n a r e g iã o c e n t r a l d e R ib e ir ã o d a s N e v e s, c o n s id e r a n d o m a io r e s p r o b a b ilid a d e s p a r a e s c o la s m a is p r ó x im a s. O m e s m o p r o c e d im e n t o f o i a d o t a d o p a r a a s e le ç ã o d a s e s c o la s lo c a liz a d a s e m E s m e r a ld a s e B e lo H o r iz o n t e, c o m p r o b a b ilid a d e s p r o p o r c io n a is à d is t â n c ia à s e s c o la s lo c a liz a d a s r e s p e c t iv a m e n t e n a s r e g iõ e s d e V e n e z a e J u s t in ó p o lis ( e m R ib e ir ã o d a s N e v e s ). CEDEPLAR/UFMG

21 3- Avaliação de Impacto do Programa Poupança Jovem do Governo de Minas Gerais O Caso de Ribeirão das Neves T ab ela 3 E scolas selecio na d as (G ru p o T rata m ento) E str ato E scola N. d e a lu nos - 1ª S érie E M 1 E.E. R U I B A R B O S A 78 (Pedro L eop old o) E E. IM A C U L A D A C O N C E IÇ Ã O 34 2 E E G E R A L D IN A A N A G O M E S 15 9 E E A F R Â N IO M E L O F R A N C O (B elo H orizonte) E E M E N IN O JE S U S D E P R A G A 18 3 E E C A R L O S D R U M O N D A N D R A D E 46 6 E E G E T Ú L IO V A R G A S 20 6 E E M A R G A R ID A M. P R A D O E E M E L O V IA N A 14 1 (E sm eraldas) C A IX A E SC O L A R S A N T A Q U IT É R IA 49 1 T otal CEDEPLAR/UFMG

22 3- Avaliação de Impacto do Programa Poupança Jovem do Governo de Minas Gerais O Caso de Ribeirão das Neves A P E S Q U IS A D E L IN H A D E B A S E N E V E S E C O N T R O L E e m E m N o v e m b ro d e fo i re a liza d a u m a p e s q u is a d e c a m p o n a s e s c o la s d e tra ta m e n to e c o n tro le d e a c o rd o c o m o p la n o a m o s tra l a n te rio rm e n te d e s c rito. E s ta p e s q u is a s e rve p a ra c o n s tru ir va riá v e is d e c o n tro le s o c io e c o n ô m ic o e in d ic a d o re s c o m p o rta m e n ta is d e d e s e m p e n h o p a ra a a va lia ç ã o d e im p a c to d o P ro g ra m a P o u p a n ç a Jo v e m. A a n á lis e d a p rim e ira ro d a d a n ã o p e rm ite c a p ta r im p a c to, tã o s o m e n te d ife re n c ia is q u e d e te rm in a ria m o v ié s d e lin h a d e b a s e (d ife re n c ia is ) e q u e p e rm itiria m ta m b é m u m a a va lia ç ã o d a e s tra té g ia e s p a c ia l. Q u a n to m e n o re s fo re m a s d ife re n ç a s e n tre tra ta m e n to e c o n tro le m a is b e m s u c e d id a te rá s id o a e s tra té g ia d e a va lia ç ã o. CEDEPLAR/UFMG

23 3- Avaliação de Impacto do Programa Poupança Jovem do Governo de Minas Gerais O Caso de Ribeirão das Neves O Teste da Aleatorização Espacial A m elhor form a de se testar as condições de aleatorização espacial é estim ar um a regressão logito cuja variável dependente é tratam ento (tratam ento=1 e controle=0). Utilizar o m aior núm ero de variáveis independentes possível. Esperar que a m aioria destas variáveis não sejam estatisticam ente significantes. No caso de poucas variáveis significantes a estratégia de controle foi aproxim adam ente bem sucedida. É de se esperar que a controle pela adjacência geográfica não seja perfeito, cabendo o uso de controles estatísticos na hora de calcular o im pacto a partir da segunda rodada de cam po (follow up). CEDEPLAR/UFMG

24 3- Avaliação de Impacto do Programa Poupança Jovem do Governo de Minas Gerais O Caso de Ribeirão das Neves A v a riá v e l d e p e n d e n te é tra ta m e n to, e a e s tim a tiv a lo g ito u tiliz o u o p ro g ra m a s ta ta, c o n tro la n d o p o r a m o s tra s c o m p le x a s. P a ra fa c ilita r a v is u a liz a ç ã o n o s lid e, a s v a riá v e is s e rã o a p re s e n ta d a s e m p a rte s, m a s c o rre s p o n d e m a u m a e s tim a tiv a ú n ic a. Su r v e y: Lo gi s t i c r eg r es sio n Nu m b e r o f st r a t a = 6 N umb e r o f ob s = Nu m b e r o f PS U s = 2 0 P opu l a ti o n s iz e = D esi g n d f = 14 F ( 1 4, 1 ) =. P rob > F = L i ne ar i ze d t r a tam en to C oe f. S td. E rr. t P > t [9 5% C o nf. I nt e r va l] _I v _ ct ~ _I v _ ct ~ _I v _ ct ~ _I v _ 1_ ~ _I v _ 1_ ~ _I v _ 1_ ~ _I v _ 1_ ~ _I v _ 1_ ~ _I v _ ct ~ _I v _ ct ~ _I v _ ct ~ _I v _ ct ~ m ae_ vi va p ai_ vi vo vo l u n t_a tv ~i vi o l e n_e sc ~a CEDEPLAR/UFMG

25 3- Avaliação de Impacto do Programa Poupança Jovem do Governo de Minas Gerais O Caso de Ribeirão das Neves N o c o n ju n t o d e v a r iá v e is c a t e g ó r ic a s d e c o r, r e p e t ê n c ia n o f u n d a m e n t a l, n o m é d io, r e lig iã o e o r f a n d a d e, a p e n a s a s c a t e g o r ia s 1 r e p e t ê n c ia n o f u n d a m e n t a l e c r e n te f o r a m e s ta t is t ic a m e n te s ig n if ic a n te s. Survey: Logistic regression Preto=2 Pardo=3, Demais=4 1=1rep no EF 2=2rep no EF 3=3+rep no EF 1=1rep no EM 2=2+rep no EM 2=Protestante 3=Crente 4=Demais Religiões 5=Sem Relig. Number S u r v e y : of L o gstrata i s t i c r e g= r e s s i o n 6 Number of obs = 2264 Number of PSUs = 20 Population size = N u m b e r o f s t r a t a = 6 NDesign u m b e r odf f o b s = N u m b e r o f P S U s = 2 0 P o p u l a t i o n s i z e = DF( e s i g14, n d f 1) = 1. 4 F Prob ( 1 4 >, F 1 ) =. P r o b > F = Linearized i e t r a t a m e n t o C o e f. S t d. E r r. t P > t [ 9 5 % C o n f. I n t e r v a l ] tratamento Coef. Std. Err. P> t [95% Conf. Interval] _ I v _ c t ~ _Iv0204_ct~2_ I v _ c t ~ _ I v _ c t ~ _Iv0204_ct~ _ I v _ 1 _ ~ _Iv0204_ct~4_ I v _ 1 _ ~ _Iv0404_1_~1_ I v _ 1 _ ~ _ I v _ 1 _ ~ _Iv0404_1_~ _ I v _ 1 _ ~ _Iv0404_1_~3_ I v _ c t ~ _Iv0405_1_~1_ I v _ c t ~ _ I v _ c t ~ _Iv0405_1_~2 _ I v _ c t ~ _Iv0205_ct~2 m a e _ v i v a _Iv0205_ct~3 p a i _ v i v o v o l u n t _ a t v ~ i _Iv0205_ct~4 v i o l e n _ e s c ~ a _Iv0205_ct~5 v i o l e n _ f a m ~ a _ I v 0 3mae_viva 0 5 _ c t ~ _ I v _ c t ~ _ I v 0 3pai_vivo 0 5 _ c t ~ volunt_atv~i _ I v _ c t ~ _ I v _ c t ~ violen_esc~a s e x o _ m a s c violen_fam~a r e l a ç _ s e x CEDEPLAR/UFMG

26 3- Avaliação de Impacto do Programa Poupança Jovem do Governo de Minas Gerais O Caso de Ribeirão das Neves F( 14, 1) =. N o c o n ju n to d e v a riá v e is r e fe r e n te Prob s > F a a tiv = id a. d e s v o lu n tá ria s s o c ia is, v io lê n c ia n a e s c o la, v io lê n c ia Linearized tratamento Coef. Std. Err. t P> t [95% Conf. Interval] n a fa m ília, E s c o la rid a d e d o C h e fe, s e x o e _Iv0204_ct~ in ic ia ç ã o s e x u a l n e n h u m a s e m o s tro u _Iv0204_ct~ _Iv0204_ct~ _Iv0404_1_~ e s ta tis tic a m e n te _Iv0404_1_~2 s ig n ific a n te Atividades Voluntárias, Violência Escola Violência Familia 2=Estudou até 4a série 3=EF incompleto e comp 4=Ensino Médio I e C 5= Superior 6= Outras, Chefe eu mesmo Number of PSUs = 20 Population size = Design df = 14 _Iv0404_1_~ S u r v e y : L o g i s t i c r e g r e s s i o n _Iv0405_1_~ _Iv0405_1_~ N u m b e r o f s t r a t a = 6 N u m b e r o f o b s = N u m b e r o f P S U s = 2 0 P o p u l a t i o n s i z e = _Iv0205_ct~ D e s i g n d f = 1 4 _Iv0205_ct~ F ( 1 4, ) = P r o b > F =. _Iv0205_ct~ _Iv0205_ct~ L i n e a r i z e d mae_viva t r a t a m e n t o C o e f. S t d. E r r. t P > t [ 9 5 % C o n f. I n t e r v a l ] pai_vivo _ I v _ c t ~ volunt_atv~i _ I v _ c t ~ _ violen_esc~a I v _ c t ~ _ I v _ 1 _ ~ violen_fam~a _ I v _ 1 _ ~ _Iv0305_ct~ _ 1 _ _ I v _ 1 _ ~ _Iv0305_ct~ _ I v _ 1 _ ~ _Iv0305_ct~4 2 0 _ _ I v _ c t ~ _Iv0305_ct~ _ I v _ c t ~ _Iv0305_ct~6 2 0 _ m a e _ v i v a sexo_masc p a i _ v i v o v o l urelaç_sex n t _ a t v ~ i v i o l e n _ e s c ~ a i_autoestima v i o l e n _ f a m ~ a _ I v i_domínio _ c t ~ _ I v _ c t ~ i_autodeterm _ I v _ c t ~ _ I v 0 i_anomia _ c t ~ _ I v _ c t ~ i_ausnorm s e x o _ m a s c serviços_p~1 r e l a ç _ s e x i _ a u t o e s t i m a serviços_p~ i _ d o m í n i o i bens_durav~1 _ a u t o d e t e r m i _ a n o m i a CEDEPLAR/UFMG

27 3- Avaliação de Impacto do Programa Poupança Jovem do Governo de Minas Gerais O Caso de Ribeirão das Neves N o c o n ju n to _Iv0204_ct~4 d e v a riá v e is re fe1.95 re n0.071 te s a e s c a la s _Iv0404_1_~ p s ic o m é tric a s, ín_iv0404_1_~2 d ic e s d e s e rv iç o s e 0.19 riq0.853 u e z a s c o m p o s s e _Iv0404_1_~ _Iv0405_1_~ d e b e n s, b o ls a fa m ília, b p c e to ta l d e b e n e fíc io s re c e b id o s, _Iv0405_1_~ _Iv0205_ct~ fo ra m s ig n fic a n te _Iv0205_ct~3 s o s ín d ic e s d e 2.93 d0.011 o m ín io, a n o m ia, _Iv0205_ct~ a u s ê n c ia d e n o _Iv0205_ct~5 rm a s, s e rv iç o s p ú b1.28 lic o0.220 s a o d o m ic ílio e mae_viva n ú m e ro d e b e n e fíc io pai_vivo s re c e b id o s n o d o1.67 m ic0.117 ílio Recebe Bolsa Família Recebe BPC Soma de Benefícios na Família _Iv0204_ct~ _Iv0204_ct~ volunt_atv~i S u r v e y : L o g i s t i c r e g r e s s i o n violen_esc~a violen_fam~a N u m b e r o f s t r a t a = N0.451 u m b e r o f o b s = _Iv0305_ct~2 N u m b e r o f P S U s = P0.551 o p u l a t i o n s i z e = D e s i g n d f = 1 4 _Iv0305_ct~ F ( 1 4, ) = _Iv0305_ct~ P0.862 r o b > F = _Iv0305_ct~ _Iv0305_ct~ L i n e a r i z e d t rsexo_masc a t a m e n t o C o e f. S t d. E r r t P > t [ 9 5 % C o n f. I n t e r v a l ] relaç_sex _ I v _ c t ~ i_autoestima _ I v _ c t ~ _ I v 0i_domínio _ c t ~ _ I v _ 1 _ ~ i_autodeterm _ I v _ 1 _ ~ _ I v 0 4i_anomia 0 4 _ 1 _ ~ _ I v 0i_ausnorm _ 1 _ ~ _ I v _ 1 _ ~ serviços_p~ _ I v _ c t ~ serviços_p~2 _ I v _ c t ~ bens_durav~1 _ I v _ c t ~ _ I v _ c t ~ dv m a e _ v i v a p a i dv0329 _ v i v o v o l u n t _ benefi a t v ~ i v i o l e n _ e s c ~ a v i o l e n _ f_cons a m ~ a _ I v _ c t ~ _ I v _ c t ~ _ I v _ c t ~ _ I v _ c t ~ _ I v _ c t ~ s e x o _ m a s c r e l a ç _ s e x CEDEPLAR/UFMG

28 3- Avaliação de Impacto do Programa Poupança Jovem do Governo de Minas Gerais O Caso de Ribeirão das Neves Tabela 2.4.4: Efeito médio do Programa Poupança Jovem sobre as variáveis de rendimento e movimento, calculada a partir de regressão não-ponderada - segundo fonte de dados utilizados. Resultados do pareamento com o Educacenso Ribeirão das Neves (1ª coorte) Variáveis Modelo de Regressão Modelo de Regressão Ponderada ATE ATT ATE Base de Pesquisa Jovem 2007 Promoção -0,0227-0,0081-0,0127 Repetência 0,0121 0,0048 0,0107 Transferência -0,0057-0,0096-0,0057 Abandono *** ** ** Base pareada Pesquisa Jovem 07/08 e EducaCenso 2008: Variáveis Série/escola EducaCenso 2008 Promoção sem os transferidos -0,019-0,0073-0,0141 Promoção com os transferidos -0,0046 0,0039-0,0003 Repetência sem os transferidos ** 0, * Repetência com os transferidos ** 0,0181 0,0224 Transferência 0,008 0,0094 0,0083 Base pareada Pesquisa Jovem 07/08 e EducaCenso 2008: Variáveis Rendimento / Movimento EducaCenso 2008 Promoção * 0, ** Repetência ** * *** Transferência ** 0, * Abandono -0,0064-0,011-0,0096 Evasão -0,0051-0,0069-0,0071 *** significativo a 1%, ** significativo a 5%, *significativo a 10% Fonte: Base de dados PJ e Pareamento com o Educacenso 2008

29 4- Programa de Educação Profissionalizante de Minas Gerais (PEP) Objetivo: Oferecer formação profissional de nível técnico. Alunos do ensino médio da rede estadual. Jovens de 18 a 24 anos que já concluíram o nível médio.

30 4- Programa de Educação Profissionalizante de Minas Gerais (PEP) Desenho do Programa: Ofertar cursos técnicos em áreas, visando atender a demanda de mão de obra qualificada em cada uma das sub-regiões de Minas Gerais. Carga horária varia de 800 a horas/aula com duração de 12 a 34 meses. SEE conta com uma rede de formação profissional que incluí participação de 3 parceiros: instituições credenciadas, prefeituras e escolas da rede estadual de ensino.

31 4- Programa de Educação Profissionalizante FACE de - Faculdade Minas de Gerais Ciências Econômicas (PEP) Implementação: jovens em 153 municípios até o final de PEP 1 (Março, 2008): inscritos, jovens ingressaram no programa. PEP 2 (Setembro, 2008): inscritos, jovens selecionados.

32 UFMG 4- Programa - Universidade Federal de de Educação Minas Gerais Profissionalizante Cedeplar - Centro de Desenvolvimento de Minas e Planejamento Gerais Regional (PEP) Elegibilidade: Municípios interessados podem se credenciar para oferecer o programa. Preferência é dada aos municípios que têm capacidade de ministrar cursos e que estão em áreas geográficas estratégicas para o estado de Minas Gerais em função da demanda por mão de obra especializada. Os alunos são escolhidos por exame de seleção com provas de português e matemática. Os alunos melhor classificados teriam a preferência tanto da instituição quanto do curso a ser frequentado.

33 4- Programa de Educação Profissionalizante de Minas Gerais (PEP) Monitoramento: Os jovens ao se inscreverem no programa preenchem uma ficha cadastral com dados pessoais. Além disso, esta base contém as notas de todos os alunos inscritos foram aprovados matriculados

34 4- Programa de Educação Profissionalizante de Minas Gerais (PEP) Tabela 3.1: Total de alunos inscritos que cursavam o Ensino Médio ou que já haviam concluído o N % Cursando o EM ,6 Concluíram o EM: ,4 até , , , , , , , ,9 Total ,0

35 4- Programa de Educação Profissionalizante de Minas Gerais (PEP) Tabela 3.2: Total de alunos inscritos que trabalham por status de aprovação no PEP- Minas Gerais, Trabalham Não-trabalham Total Aprovados Não-aprovados Total

36 4- Programa de Educação Profissionalizante de Minas Gerais (PEP) Tabela 3.3: Nota necessária para seleção para o programa por curso e instiuição - Minas Gerais, Curso Instituição Pontos Inscritos Aprovados Reprovados Técnico de construção civil * Técnico de mecânica * Técnico esteticista * Técnico de turismo Técnico de administração em recursos humanos

37 4- Programa de Educação Profissionalizante de Minas Gerais (PEP) Potencial Grupo de Controle: Cursos com excedente: alunos inscritos no exame de seleção para o PEP, em cada curso oferecido, que ficaram de fora do programa com nota imediatamente inferior ao valor de corte para classificação. Cursos sem excedente: candidatos de cursos que tiveram excedente, que tiveram a mesma nota que os alunos.

38 4- Programa de Educação Profissionalizante de Minas Gerais (PEP) 2 AVALIAÇÃO DE IMPACTO SOBRE O FLUXO E PROFICIÊNCIA ESCOLAR 2.1 O Método de Regressão Descontínua A idéia básica do método de regressão descontínua é que o recebimento ou não de um tratamento é determinado, inteiramente ou parcialmente, pelo valor de uma variável chave. Este valor deve ser maior ou menor que um determinado valor de corte. Assume-se que a variável chave está associada às variáveis dependentes de interesse de forma suave. Portanto, qualquer descontinuidade na distribuição condicional da variável dependente em relação a esta variável chave é interpretada como uma evidência causal do tratamento. No caso do PEP, o aluno recebe tratamento se o valor da sua nota no exame de admissão é maior que certo valor que denominamos de ponto de corte. Cada curso ofertado por uma instituição específica tem o seu próprio ponto de coorte.

39 4- Programa de Educação Profissionalizante de Minas Gerais (PEP) TABELA 8: Estimação do efeito médio do PEP utilizando a Regressão descontinua sobre Proficiência de Matemática segundo a prova PROEB 2009 Curso Instituição Inscritos Aprovados Reprovados Regressão descontínua com controles Regressão descontínua sem controles Coeficiente VAR Coeficiente VAR TÉCNICO DE PANIFICAÇÃO E CONFEITARIA TÉCNICO DE CONSTRUÇÃO CIVIL TÉCNICO DE CONSTRUÇÃO CIVIL TÉCNICO DE SECRETARIADO TÉCNICO DE SECRETARIADO TÉCNICO DE SECRETARIADO TÉCNICO DE SECRETARIADO TÉCNICO DE SECRETARIADO TÉCNICO DE SECRETARIADO TÉCNICO DE SECRETARIADO TÉCNICO DE SECRETARIADO TÉCNICO DE SECRETARIADO EXECUTIVO TÉCNICO DE ADMINISTRAÇÃO DE RECURSOS HUMANOS TÉCNICO DE ADMINISTRAÇÃO HOSPITALAR TÉCNICO DE CONTABILIDADE TÉCNICO DE CONTABILIDADE TÉCNICO DE CONTABILIDADE TÉCNICO DE CONTABILIDADE TÉCNICO DE CONTABILIDADE TÉCNICO DE CONTABILIDADE TÉCNICO DE GESTÃO DE NEGÓCIOS TÉCNICO DE GESTÃO DE NEGÓCIOS TÉCNICO DE GESTÃO DE NEGÓCIOS TÉCNICO DE GESTÃO DE NEGÓCIOS TÉCNICO DE GESTÃO DE NEGÓCIOS TÉCNICO DE GESTÃO DE NEGÓCIOS TÉCNICO DE GESTÃO DE NEGÓCIOS

40 4- Programa de Educação Profissionalizante de Minas Gerais (PEP) TABELA 10 : Estimação do efeito médio do PEP utilizando a Regressão descontinua sobre a taxa de aprovação, EducaCenso Curso Instituição Inscritos Aprovados Reprovados Regressão descontinua com controles Regressão descontinua sem controles Coeficiente DP Coeficiente DP TÉCNICO DE ADMINISTRAÇÃO DE RECURSOS HUMANOS TÉCNICO DE ADMINISTRAÇÃO HOSPITALAR TÉCNICO DE ALIMENTOS TÉCNICO DE ALIMENTOS TÉCNICO DE AUTOMAÇÃO INDUSTRIAL TÉCNICO DE AUTOMAÇÃO INDUSTRIAL TÉCNICO DE AUTOMOBILÍSTICA TÉCNICO DE CALÇADOS TÉCNICO DE CONFECÇÃO VESTUARIO TÉCNICO DE CONSTRUÇÃO CIVIL

41 4- Programa de Educação Profissionalizante FACE de - Faculdade Minas de Gerais Ciências Econômicas (PEP) 3 AVALIAÇÃO DE IMPACTO SOBRE O MERCADO DE TRABALHO Nesta seção, avaliamos o impacto do programa sobre o mercado de trabalho, em particular, sobre o rendimento mensal e sobre os meses trabalhados por aprovados e matriculados no PEP. 3.1 Pareamento da base de dados do programa com os dados da Previdência social Para a avaliação de impacto sobre o mercado de trabalho foi feito o pareamento da base de dados do PEP com os dados da Previdência social. Os dados da Previdência Social (PREV) contém informações sobre os tipos de vínculos empregatícios e as respectivas remunerações mensais de indivíduos contribuintes da previdência social. Há informações para diferentes períodos de referência. No pareamento, foram utilizadas as variáveis de identificação existentes na base PEP: número de CPF, número da carteira de identidade, nome do participante do programa, data de nascimento e nome da mãe. O Ministério da Previdência Social adotou diferentes critérios para a definição de possíveis matchings, segundo a combinação destas variáveis. Neste trabalho, utilizamos o critério de pareamento menos restritivo.

42 4- Programa de Educação Profissionalizante de Minas Gerais (PEP) TABELA 11. Diferença em diferença do Rendimento médio e Índice de meses médio dos alunos, segundo grupo de tratamento e controle. Alunos PEP (Total) N Media Diferença de Variáveis Tratamento Controle Tratamento Controle médias Rendimento médio condicionado aos períodos máximos de observação Diferença média de rendimento Durante o curso PEP / Pré - curso PEP Diferença média de rendimento Pós - curso PEP / Durante curso PEP Diferença média de rendimento Pós curso PEP / Pré - curso PEP *** * Rendimento médio condicionado aos meses trabalhados Diferença média de rendimento Durante o curso PEP / Pré - curso PEP Diferença média de rendimento Pós - curso PEP / Durante curso PEP Diferença media de rendimento Pós curso PEP / Pré - curso PEP *** *** Índice de meses médio (meses trabalhados/ período máximo de observação) Diferença média de Índice de meses Durante o curso PEP / Pré - curso PEP Diferença média de Índice de meses Pós curso PEP / Durante curso PEP Diferença media de Índice de meses Pós curso PEP / Pré - curso PEP *** *** *** Tratamento: Alunos aprovados e matriculados; Controle: Alunos que não foram aprovados na prova e não se matricularam. 1%***, 5%**, 10%*

43 OBRIGADO!!!!!!!!!!!!!!