Indicadores para Avaliação de Desempenho na Estrutura Gerencial do Estado de Minas Gerais

Transcrição

1 Indicadores para Avaliação de Desempenho na Estrutura Gerencial do Estado de Minas Gerais Rosimeire Pimentel Gonzaga Orientador: Prof. Dr. Fábio Frezatti Co-orientador: Prof. Dr. Ivan Beck Ckagnazaroff 1

2 Contextualização Reforma do setor público Modelos de gestão baseado na gestão pública por resultados; Utilização de indicadores de desempenho e gestão pública por resultados. Choque de Gestão Ampliação da flexibilidade e autonomia dos gestores, quanto aos meios e recursos utilizados. Acordo de Resultados Objetivos traduzidos em metas claras; Possíveis recompensas após a avaliação do desempenho. Autonomia e flexibilidade concedidas aos gestores Autonomia e flexibilidade concedida aos gestores podem propiciar ajustes ou mudanças; Redução do risco envolvendo as possíveis recompensas. 2

3 Questão de Pesquisa e Objetivos Questão de Pesquisa Quais fatores ambientais e organizacionais estão associados às mudanças dos indicadores utilizados para avaliação de desempenho em uma entidade pública brasileira? Objetivos Geral Identificar quais são os fatores organizacionais e ambientais, que levam às alternâncias ou inovações nos indicadores utilizados para avaliação de desempenho, em uma entidade pública brasileira. Específicos Definir o que são indicadores de desempenho na gestão pública; Identificar a utilidade dos indicadores de desempenho na gestão pública; Identificar o processo de elaboração dos indicadores utilizados; Identificar as pessoas envolvidas na elaboração dos indicadores; e Identificar as fontes utilizadas como base, para geração dos indicadores. 3

4 Referencial Teórico Avaliação de Desempenho e a Nova Gestão Pública Descentralização da gestão (Ayee, 2005); Necessidade de avaliação de desempenho da gestão pública (Boland & Fowler, 2000); Estabelecimento de indicadores que possam ser utilizados nesse processo. Indicadores para Avaliação de Desempenho na Gestão Pública Conjunto de elementos utilizados para avaliar o grau com que os resultados pretendidos são alcançados (Barzelay, 1997; Boland & Fowler, 2000). 4

5 Plataforma Teórica Teoria da Contingência As estruturas organizacionais são delineadas por fatores contingenciais, como tamanho, incerteza ambiental e estratégias adotadas (Otley, 1980; Upping & Oliver, 2011); Estudos desenvolvidos na literatura recente, baseados na teoria da contingência, buscaram investigar a influência de fatores contingenciais internos e externos, sobre as mudanças ocorridas na estrutura contábil, financeira e gerencial, de organizações públicas e privadas (Upping & Oliver, 2011). Teoria de Agência No setor público as relações previstas pela teoria de agência são caracterizadas por fatores como ambiguidade, comportamento oportunista, risco moral e seleção adversa (Ayee, 2005; Lüder, 1992). 5

6 Hipóteses Fatores que levam as mudanças: Organizacionais Sistema de Incentivos Execução Orçamentária Controle Interno Tamanho Desempenho Ambientais Controle Externo Pressão Social Incerteza Ambiental Mudanças nos Indicadores Utilizados para Avaliação de Desempenho 6

7 Aspectos Metodológicos Classificação da Pesquisa Estudo de caso contendo abordagem qualitativa e qualitativa. Coleta de Dados Quantitativos: questionário estruturado enviado aos respondentes por meio eletrônico; Qualitativos: entrevistas semi-estruturadas realizadas com os agentes públicos. Amostra Quantitativa: secretarias que compõem a estrutura administrativa do Estado de Minas Gerais; Qualitativa: SEDES, SEE, SEF, SEPLAG, SES e SETOP. Métodos Quantitativo: método de equações estruturais por possibilitar a observação de um conjunto de questões inter-relacionadas e tratamento de diversas questões em um único método abrangente ; Qualitativo: análise de conteúdo das entrevistas realizadas. Período de Análise Quantitativo: 2004 a

8 Modelo Estrutural 8

9 Construtos e Variáveis Utilizadas Construto Variável Sigla Escala Referência Alteração Indicadores dos Descontinuidade dos Indicadores Fatores Organizacionais Alteração dos indicadores utilizados para avaliação de desempenho das metas e objetivos pactuados no acordo de resultados, ao longo do tempo. Descontinuidade dos indicadores utilizados para avaliação de desempenho das metas e objetivos pactuados no acordo de resultados, ao longo do tempo. Sistema de Incentivos: Percepção dos agentes públicos com relação aos incentivos a serem recebidos, caso as metas não sejam alcançadas. AI DI SI Percentual Percentual Intervalar (1 a 5) Corrêa (2007); Gomes (2009); Lemos (2009). Execução Orçamentária: Percepção dos agentes públicos com relação a possibilidade de corte orçamentário em exercícios futuros, caso as metas não sejam alcançadas. EO Intervalar (1 a 5) Castadelli Júnior & Aquino (2011). Controle Interno: Percepção dos agentes públicos com relação as possíveis punições internas, caso as metas não sejam alcançadas. CI Intervalar (1 a 5) Lüder (1992). Fatores Ambientais Tamanho: Tamanho da secretaria a qual pertence o agente público. TA Número de servidores Desempenho: Nível de atingimento das metas financeiras presentes nos orçamentos das secretarias analisadas. Controle Externo: Percepção dos agentes públicos com relação as possíveis punições externas, caso as metas não sejam alcançadas. Chenhall (2003); Davila & Foster (2007); Lüder (1992); Naranjo-Gil (2009); Upping & Oliver (2011). DE Percentual Braga, Lima & Dias (2007); Lucena (2011); Naranjo- Gil (2009); Przeworski (1996). CE Intervalar (1 a 5) Castadelli Júnior & Aquino (2011). Pressão Social: Percepção dos agentes públicos com relação as possíveis pressões exercidas pela opinião pública, caso as metas não sejam alcançadas. Incerteza Ambiental: Percepção dos agentes públicos com relação incerteza ambiental, caso as metas não sejam alcançadas. PS IA Intervalar (1 a 5) Intervalar (1 a 5) Reis Júnior (2010); Frumkin & Galaskiewicz (2004). Castadelli Júnior & Aquino (2011); Upping & Oliver (2011); Chenhall (2003); Naranjo-Gil (2009); Özsomer, Calantone 9 & Di Bonetto (1997).

10 Análise de Conteúdo Software utilizado: QDA Miner (versão para teste). Categorias Utilizadas Teoria de Agência Críticas ao Acordo de Resultados Alcance dos Indicadores Desempenho Alcance das Metas Execução Orçamentária Alterações dos Indicadores Sistema de Incentivo Alterações das Metas Incerteza Ambiental Controle Externo Manutenção de Metas Controle Interno Manutenção de Indicadores Criação dos Indicadores Pessoas Envolvidas Criação das Metas Pressão Social Criação e Manutenção do Acordo de Resultados Tamanho 10

11 Resultados Encontrados Modelo de Equações Estruturais: Modelo Modelo Estrutural Variáveis Amostra Original Média da Amostra Desvio Padrão Erro Padrão Estatística T CE => FA 0,9521 0,9459 0,0266 0, ,8254 *** CI => FO 0,6802 0,666 0,0869 0,0869 7,8312 *** DE => FO -0,0759-0,0662 0,0376 0,0376 2,0173 ** EO => FO 0,4042 0,3834 0,0677 0,0677 5,9701 *** FA => AI 0,1464 0,14 0,124 0,124 1,181 * FA => DI 0,2569 0,2457 0,1036 0,1036 2,4798 ** FO => AI -0,0841-0,0771 0,1777 0,1777 0,4736 FO => DI -0,245-0,2191 0,1154 0,1154 2,1238 ** SI => FO 0,1659 0,1848 0,0803 0,0803 2,0669 ** IA => FA 0,1044 0,1003 0,0381 0,0381 2,7385 *** PS => FA 0,0981 0,0975 0,0391 0,0391 2,508 ** CE => FA 0,9521 0,9459 0,0266 0, ,8254 *** 11

12 Resultados Encontrados Modelo Estrutural As variáveis V16 e V17 não apresentaram significância estatística, a nenhum dos níveis de significância; Apenas a relação entre os construtos fatores organizacionais com alterações dos indicadores utilizados para avaliação de desempenho (FO => AI), não apresentou significância estatística, a nenhum nível de significância; Os resultados obtidos a partir dos testes realizados demonstraram baixos níveis de acurácia preditiva para as variáveis ou construtos endógenos analisados; Alteração do indicador (R 2 = 0,0155) e descontinuidade do indicador (R 2 = 0,0593). Não é possível afirmar com base nos resultados encontrados, a partir dos testes quantitativos que, há relação entre alterações ou descontinuidade dos indicadores utilizados para avaliação de desempenho e as variáveis do contexto ambiental e organizacionais. 12

13 Análise de Conteúdo Resultados Encontrados Um órgão central define as diretrizes a serem utilizadas, e posteriormente as equipes envolvidas são ouvidas e avaliadas suas sugestões; Só participam desse processo os agentes que hierarquicamente se encontram acima do nível de diretoria. O órgão central que gere o acordo de resultados busca que as secretarias envolvidas estabeleçam metas e indicadores que reflitam a realidade. Como o acordo de resultados envolve uma bonificação financeira pelo alcance das metas e indicadores acordados, os membros das secretarias tentam facilitar o recebimento dessa bonificação; Surgimento da necessidade de acompanhamento por parte do órgão gestor do acordo. Possibilidade de ocorrência de comportamentos oportunistas por parte dos agentes (servidores ou agentes públicos); Surgimento da necessidade de regulação por parte do principal (Seplag), em função da impossibilidade de monitoramento das ações de todos os agentes, conforme previsto pela teoria de agência. Presença de grandes pressões estabelecidas sobre os agentes, em função das metas a serem pactuadas. 13

14 Análise de Conteúdo Resultados Encontrados As alterações dos indicadores utilizados para avaliação de desempenho podem ocorrer por diversos motivos: amadurecimento do modelo, surgimento de fatores exógenos, facilitação do atingimento das metas, Facilitação do recebimento de incentivos. As alterações ocorrem pelo fato das metas poderem se tornar fáceis de serem alcançadas no decorrer do tempo, passando a conter determinado nível de folga; As alterações nos indicadores podem ocorrer devido à existência de erro ou má gestão no processo de estruturação do indicador, ou devido ao amadurecimento natural do modelo; 14

15 Análise de Conteúdo Resultados Encontrados A execução orçamentária pode estar associada às alterações dos indicadores utilizados para avaliação desempenho, conforme previsto pela abordagem contingencial; Os entrevistados não observam a pressão por parte de órgãos de controle; Os órgãos de controle interno são vistos como preocupado primordialmente com o cumprimento da legislação, a forma de atuação dos demais órgãos e a forma dos atos (auditoria de conformidade); A Seplag não se configura como órgão de controle interno; Seu papel é considerado mais como de fiscalizadora de cláusulas pactuadas, não levando em conta discussões sobre a eficiência, eficácia ou economicidade da gestão pública durante o processo de monitoramento. Não foram encontradas evidências da possibilidade de aplicação de sanções por parte dos órgãos de controle externo. 15

16 Resultados Encontrados Análise de Conteúdo A pressão social pode estar associada as alterações dos indicadores utilizados para avaliação de desempenho, presentes no acordo de resultados; Pressão social configura-se como fator motivador para as alterações dos indicadores utilizados para avaliação de desempenho, conforme previsto pela teoria da contingência. A incerteza ambiental pode ser considerada como um fator motivador das mudanças e está associada as alterações dos indicadores utilizados para avaliação de desempenho; Os entrevistados percebem outras fontes de incerteza ambiental, além daquelas elencadas pelo arcabouço da teoria da contingência. A variável a tamanho pode ser considerado como fator motivador das alterações, conforme previsto pela teoria da contingência; O desempenho das secretarias analisadas, está associado às alterações dos indicadores utilizados para avaliação de desempenho. 16

17 Resultados Encontrados Análise de Conteúdo Apesar de um dos entrevistados afirmar que são vários os ganhos advindos da implantação do acordo de resultados, vários outros entrevistados afirmaram que o modelo contém alguns problemas e que carecem serem analisados; Alguns dos problemas apontados pelos entrevistados são previstos pelas teorias, como possíveis fatores capazes de influenciar as alterações dos indicadores; Outros problemas identificados: Excesso de pressão criado sobre os servidores para o cumprimento das metas estabelecidas no acordo; Relação de pouca confiança entre o órgão regulador do acordo e os servidores envolvidos; Os incentivos oferecidos pelo alcance das metas pactuadas, com o decorrer do tempo, passaram a ser vistos pelos servidores como complementação salarial, sem promover o aumento de esforços ou encorajá-los a propor metas menos desafiadoras; Redução da eficiência e eficácia do modelo; Desvirtuação da função do acordo, transformando-o de instrumento para promoção de visão estratégica, em instrumento operacional e de controle, focado no curto prazo. 17

18 Obrigada. 18