Indicadores de Políticas Públicas: Construção e Uso Indicadores são muito mais do que números em relatórios. Eles são as bússolas do gestor público, as ferramentas que permitem responder, com objetividade, às perguntas fundamentais do ciclo de políticas: o problema que motivou a intervenção está sendo resolvido? Os recursos estão sendo bem aplicados? Os resultados estão chegando a quem mais precisa? A capacidade de construir, escolher, interpretar e comunicar indicadores é uma das competências centrais do administrador público contemporâneo, e tema de frequente cobrança em concursos de alto nível — em especial no Concurso Nacional Unificado (CNU), cujo Bloco 8 (Gestão Governamental e Políticas Públicas) trata do tema de forma recorrente e articulada com planejamento, orçamento e avaliação. Esta aula aprofunda a teoria e a prática dos indicadores no setor público brasileiro. Do Conceito à Medição: O que é um Indicador? Um indicador é uma medida — quantitativa ou qualitativa — que sintetiza informações relevantes sobre um fenômeno, permitindo aferir seu estado, sua evolução ao longo do tempo ou sua comparação com uma situação desejada (uma meta) ou com outras realidades (benchmarking). É fundamental distinguir três níveis de abstração: Dado bruto: é o registro numérico isolado, desprovido de contexto. Exemplo: "o município X registrou 120 casos de dengue em março de 2024". Este número, por si só, não permite nenhum juízo de valor. Estatística: é o dado submetido a um tratamento matemático (agregação, média, percentual). Exemplo: "a incidência de dengue no município X no primeiro trimestre de 2024 foi de 150 casos por 100.000 habitantes". A estatística contextualiza o dado bruto, mas ainda não avalia o fenômeno. Indicador de Política Pública: é a estatística interpretada à luz de um objetivo ou referencial normativo. Exemplo: "a incidência de dengue no primeiro trimestre de 2024 (150/100.000) é 50% superior à meta anual estabelecida pelo plano municipal de saúde (100/100.000), indicando que as ações de controle vetorial estão aquém do necessário". O indicador, portanto, é um instrumento de gestão: ele sinaliza, alerta e subsidia a decisão. Monitoramento e Avaliação: Dois Momentos do Uso de Indicadores Nem todo uso de um indicador é igual. A literatura de gestão pública (e a prática consolidada em guias do TCU, do antigo MP/SEGES e da ENAP) distingue dois momentos complementares, ambos apoiados em indicadores: Monitoramento: acompanhamento contínuo e sistemático da execução de uma política, com foco em identificar, em tempo real, desvios entre o planejado e o realizado, permitindo correções de rota tempestivas. Apoia-se sobretudo em indicadores de insumo, processo e produto. Avaliação: exame pontual e mais aprofundado, geralmente conduzido em momentos específicos do ciclo, que busca compreender o mérito, a relevância e os efeitos de uma política. Divide-se, quanto ao momento em que ocorre, em: Avaliação ex ante: realizada antes da implementação, para subsidiar o desenho da política e escolher entre alternativas — no âmbito federal, articula-se com a Análise de Impacto Regulatório (AIR), prevista na Lei de Liberdade Econômica e regulamentada pelo Decreto nº 10.411/2020. Avaliação de processo (ou de implementação): verifica se a política está sendo executada conforme o desenho original, examinando a fidelidade da implementação, gargalos operacionais e a atuação da burocracia de nível de rua. Avaliação de resultado: mede se os efeitos de curto e médio prazo esperados de fato ocorreram. Avaliação de impacto (ex post): busca isolar o efeito causal atribuível à política, descontando o que teria acontecido de qualquer forma (o chamado contrafactual). Para isso, recorre a métodos experimentais e quase-experimentais — Ensaios Clínicos Randomizados (RCTs), Diferenças em Diferenças (DiD), Pareamento por Escore de Propensão (PSM), Descontinuidade de Regressão (RDD) e Variáveis Instrumentais (IV) — que vão além da simples leitura de um indicador de resultado, permitindo afirmar que a mudança observada decorreu da política, e não de outros fatores concomitantes. Um indicador de impacto favorável não comprova, por si só, a efetividade de uma política específica; sem um desenho de avaliação que isole a atribuição causal, corre-se o risco da falácia de atribuir à intervenção mudanças que teriam ocorrido de qualquer forma. A Cadeia de Valor Pública e a Pirâmide de Indicadores Os indicadores não são um conjunto aleatório de medidas; eles se organizam em uma hierarquia lógica que reflete a própria teoria de funcionamento da política pública: a cadeia de valor. Esta cadeia descreve a transformação de recursos (insumos) em entregas (produtos) e, destas, em mudanças na realidade (resultados e impactos). A confusão entre esses níveis é uma das armadilhas mais comuns em provas e na prática gerencial. Indicadores de Insumo (Input Indicators): Definição: mensuram os recursos financeiros, humanos, materiais e institucionais alocados para a política. Exemplos: gasto público per capita em saúde (R$/hab), número de professores por aluno, número de leitos hospitalares por mil habitantes, volume de recursos orçamentários empenhados em um programa. Limitação: muitos insumos não garantem entrega de serviços. Gastar muito não significa gastar bem. *Indicadores de Processo (Process Indicators): Definição: medem as atividades e o esforço operacional, ou a qualidade da execução dos procedimentos. Exemplos: proporção de escolas com projeto político-pedagógico aprovado pelo conselho escolar, tempo médio de espera para uma consulta com especialista no SUS, taxa de cobertura das visitas domiciliares por agentes comunitários de saúde, percentual de licitações concluídas dentro do prazo legal. Indicadores de Produto (Output Indicators): Definição: mensuram as entregas diretas e imediatas da política, os bens e serviços disponibilizados à população. Exemplos: número de matrículas realizadas em creches, quilômetros de rodovia pavimentada, número de famílias beneficiárias do Bolsa Família, doses de vacina aplicadas. Falácia do Produto: uma política pode ter excelentes indicadores de produto (milhares de escolas construídas) e péssimos indicadores de resultado (a proficiência dos alunos não melhorou), porque a infraestrutura, sozinha, pode não ser o fator determinante para o aprendizado. Nunca confundir produto com resultado. *Indicadores de Resultado (Outcome Indicators): Definição: medem as mudanças de curto e médio prazo no comportamento, nas capacidades, no acesso ou na percepção dos beneficiários, que se espera que decorram da política. Exemplos: taxa de abandono escolar no ensino médio, taxa de cobertura vacinal da população-alvo, taxa de formalização de microempreendedores individuais, tempo médio de permanência na escola, proporção de egressos de um curso de qualificação que estão empregados. Indicadores de Impacto (Impact Indicators): Definição: medem as transformações profundas e duradouras nas condições de vida da sociedade, que são o objetivo final da intervenção pública. Exemplos: esperança de vida ao nascer, Índice de Gini (desigualdade de renda), taxa de mortalidade infantil, Produto Interno Bruto per capita, Índice de Desenvolvimento Humano (IDH). Complexidade: a atribuição causal de um impacto a uma política específica é o maior desafio metodológico da avaliação (ver seção 2). Um aumento da esperança de vida é influenciado por saneamento, educação, vacinação, renda e dezenas de outros fatores, não podendo ser creditado a um único programa. No planejamento orçamentário federal, essa lógica de cadeia de valor tem correspondência direta na arquitetura do Plano Plurianual (PPA) 2024-2027: cada programa finalístico se desdobra em objetivos específicos (com seus próprios indicadores de resultado) e em entregas (que devem obrigatoriamente ter indicador e meta cadastrados), articulando insumo, processo, produto e resultado num único instrumento de planejamento (ver seção 7). As Dimensões do Desempenho 4.1 Os 5 Es clássicos O desempenho de uma política pública é um conceito multidimensional que não se esgota no atingimento de metas. A análise de desempenho, na doutrina de auditoria operacional consagrada pelo TCU, organiza-se em torno de cinco dimensões, conhecidas como os 5 Es: Economicidade (Economy): foco no custo dos insumos. Refere-se à aquisição de recursos humanos, materiais e de capital com a qualidade requerida, ao menor custo possível e no momento adequado. Uma licitação bem-sucedida é um exemplo de economicidade. *Eficiência (Efficiency): foco na relação entre insumos e produtos. Uma política é eficiente quando maximiza o volume de entregas (produtos) para um dado nível de recursos (insumos), ou quando minimiza o custo para gerar um mesmo nível de produtos. Indicador típico: custo médio por beneficiário atendido. *Eficácia (Effectiveness): foco na relação entre produtos e objetivos. Uma política é eficaz quando cumpre as metas de entrega e alcança os resultados imediatos a que se propôs. É a medida do sucesso da execução. Indicador: percentual de cumprimento da meta de matrículas em relação ao planejado. *Efetividade (Social Effectiveness): foco na relação entre resultados e impactos de longo prazo. A pergunta é: a política resolveu o problema público que a originou? Mudou a realidade dos cidadãos? É a dimensão mais nobre e mais difícil de medir. Indicador: variação na taxa de criminalidade anos após a implementação de uma política de policiamento comunitário. *Equidade (Equity): corte transversal que analisa a distribuição dos custos e benefícios. Uma política pode ser eficiente e eficaz, mas profundamente regressiva, beneficiando desproporcionalmente os mais ricos. A equidade exige analisar os indicadores estratificando a população por renda, território e outros marcadores sociais de desigualdade, e é hoje tratada pelo TCU como uma das dimensões de auditoria a ser observada ao lado de economicidade, eficiência, eficácia e efetividade. 4.2 O Modelo da Cadeia de Valor e dos 6 Es do Desempenho Um segundo referencial, hoje amplamente cobrado em concursos de gestão pública, é o Modelo da Cadeia de Valor e dos 6 Es do Desempenho, apresentado no Guia Referencial para Medição de Desempenho e Manual para Construção de Indicadores, publicado em 2009 pela então Secretaria de Gestão do Ministério do Planejamento (hoje incorporado ao Modelo de Excelência em Gestão Pública — MEGP, do programa GESPÚBLICA). Nesse modelo, as seis dimensões se organizam em dois grandes grupos: Dimensão de esforço (o que a organização faz para gerar resultados): Economicidade: obtenção e uso de recursos com o menor ônus possível, respeitados os requisitos de qualidade e quantidade exigidos. Execução: grau de realização do planejado, subdividida em execução física (relação entre os produtos previstos no orçamento e os efetivamente entregues) e execução financeira (relação entre os recursos orçamentários disponibilizados e os efetivamente utilizados). Excelência: conformidade da gestão a padrões de qualidade, contemplando subdimensões como confiabilidade, tempestividade, inovação e — nesse referencial específico — acessibilidade e equidade no acesso aos bens e serviços. Dimensão de resultado (o que a organização efetivamente entrega e transforma): eficiência, eficácia e efetividade, com os mesmos sentidos já descritos nos 5 Es. Vale observar, para fins de prova, que a equidade aparece de forma distinta nos dois referenciais: no modelo clássico dos 5 Es ela é tratada como uma dimensão autônoma; no modelo dos 6 Es do GESPÚBLICA, ela figura como subdimensão de excelência. Os dois modelos não são excludentes — são lentes complementares para o mesmo objeto: o desempenho da ação pública. Construção de Indicadores: Metodologia e Requisitos de Qualidade A construção de um indicador para gestão pública é um exercício metódico que exige o cumprimento de etapas e a observância de critérios de qualidade. Etapas da construção: Definição do objeto de mensuração: o que exatamente se quer medir? (Ex.: a cobertura da atenção básica à saúde). Justificativa: por que medir isso é relevante para a política? Formulação do indicador: definir a expressão matemática (numerador e denominador), a unidade de medida e a fonte dos dados. Ex.: Número de equipes de Saúde da Família credenciadas / População total do município × 1.000. Análise da disponibilidade e qualidade dos dados: os dados existem? Estão disponíveis no nível de desagregação necessário (município, bairro)? Com que periodicidade? São confiáveis? *Definição da linha de base (baseline): qual é o valor do indicador no momento imediatamente anterior ao início da política? É o ponto de partida sem o qual o progresso não pode ser medido. Estabelecimento da meta: qual valor se deseja alcançar até uma data específica? A meta deve seguir o critério SMART: eSpecífica, Mensurável, Atingível, Relevante e Temporal (com prazo definido). Escolha do responsável pelo monitoramento: qual área gerencial será a guardiã do indicador? Atributos de qualidade de um indicador: Validade: o indicador mede o que se propõe a medir, e não outro fenômeno. A taxa de homicídios por 100 mil habitantes é um indicador válido de violência letal, mas não de criminalidade como um todo. Confiabilidade (ou Fidedignidade): o resultado da medição é consistente quando repetido por diferentes pessoas ou em diferentes momentos, mantidas as condições. Sensibilidade: o indicador é capaz de detectar mudanças no fenômeno ao longo do tempo. Simplicidade e Comunicabilidade: o indicador é de fácil compreensão pelo público-alvo, gestores e sociedade civil. Custo-efetividade: o valor informacional do indicador justifica o custo de sua coleta e análise. Periodicidade e Tempestividade: os dados são atualizados com a frequência necessária para a tomada de decisões, e a divulgação ocorre em tempo útil. Um segundo referencial de qualidade, de origem internacional e bastante citado na literatura de monitoramento e avaliação orientada a resultados, é o acrônimo CREAM, formulado por Kusek e Rist (2004) em manual do Banco Mundial: um bom indicador deve ser Claro, Relevante, Econômico (de custo razoável para coletar), Adequado (suficiente para embasar o julgamento de desempenho) e Monitorável (passível de verificação independente ao longo do tempo). O CREAM e o SMART não competem entre si: o SMART foca sobretudo na formulação da meta associada ao indicador, enquanto o CREAM foca nas propriedades do próprio indicador enquanto instrumento de coleta e verificação. Indicadores Compostos (Índices) Um índice é a agregação de múltiplos indicadores em um único valor síntese. Ele é uma ferramenta poderosa de comunicação, pois simplifica a realidade multidimensional em um ranking ou número de fácil assimilação. Pagam o preço, contudo, da perda de granularidade: escondem os detalhes e as compensações internas (um bom desempenho em uma dimensão pode compensar um mau desempenho em outra dentro do mesmo índice). Exemplos paradigmáticos: IDH (Índice de Desenvolvimento Humano): combina saúde (esperança de vida), educação (anos de estudo esperados e concluídos) e renda (RNB per capita), agregados desde 2010 por média geométrica — o que faz com que um desempenho muito baixo em uma dimensão não seja mais plenamente compensado pelas demais, ao contrário do que ocorria com a média aritmética usada até 2009. IDEB (Índice de Desenvolvimento da Educação Básica): criado pelo Inep em 2007, resulta do cruzamento de dois componentes: o fluxo escolar (taxas de aprovação, apuradas pelo Censo Escolar) e a proficiência dos estudantes (notas do Saeb em Língua Portuguesa e Matemática). Um sistema de ensino não pode melhorar sua nota apenas aprovando mais alunos sem aprendizado, nem apenas retendo alunos para elevar a proficiência média — os dois fatores se equilibram na fórmula. IVS (Índice de Vulnerabilidade Social, IPEA): agrega 16 indicadores em três dimensões — infraestrutura urbana, capital humano e renda e trabalho — variando de 0 a 1; ao contrário do IDH, quanto mais próximo de 1, maior a vulnerabilidade (pior a situação). IFDM (Índice Firjan de Desenvolvimento Municipal): acompanha anualmente o desenvolvimento socioeconômico dos municípios brasileiros em três áreas — Emprego & Renda, Educação e Saúde — a partir de estatísticas públicas oficiais. IPCA: o índice oficial de inflação do Brasil, calculado pelo IBGE, usado inclusive como referência para o regime de metas de inflação do Banco Central. Sistemas Nacionais de Indicadores e Instrumentos de Planejamento no Brasil O Estado brasileiro institucionalizou a produção e o uso de indicadores por meio de sistemas informatizados de acesso público: SIOPS (Sistema de Informações sobre Orçamentos Públicos em Saúde): gerido pelo Ministério da Saúde, é o sistema onde todos os entes federados declaram anualmente a aplicação de recursos em saúde. É o principal instrumento para verificar o cumprimento dos pisos constitucionais de saúde — que não seguem a mesma base de cálculo entre os entes: para a União, o piso é de 15% da Receita Corrente Líquida (RCL) do exercício (regra da EC nº 86/2015, restabelecida em 2023 após a revogação da EC nº 95/2016, que a mantivera congelada por um valor fixo corrigido pela inflação); para os Estados e o Distrito Federal, o piso é de 12% da receita de impostos e transferências constitucionais e legais; para os Municípios e o Distrito Federal, o piso é de 15% dessa mesma base (regras da EC nº 29/2000, regulamentadas pela LC nº 141/2012). SISAB (Sistema de Informação em Saúde para a Atenção Básica): instituído pela Portaria GM/MS nº 1.412/2013, substituiu progressivamente o antigo SIAB e passou a ser alimentado pela estratégia e-SUS Atenção Primária à Saúde (e-SUS APS), consolidando os relatórios de cadastro, produção e indicadores usados no financiamento da atenção básica pelo Previne Brasil. Desde 2025 está em curso uma transição incremental do SISAB para um sistema renovado (Siaps), com o objetivo de centralizar os dados da Atenção Primária em um repositório nacional único. PPA, LDO e LOA — o tripé orçamentário: o Plano Plurianual organiza, em sua dimensão estratégica, os objetivos estratégicos do governo e os indicadores-chave nacionais (que medem o progresso social, econômico, ambiental e institucional do país); e, em sua dimensão tática, os programas finalísticos, seus objetivos específicos (cada um com indicador e meta próprios) e as entregas (que também exigem indicador e meta obrigatórios para serem cadastradas). O PPA 2024-2027 foi instituído pela Lei nº 14.802/2024, com processos de gestão definidos pelo Decreto nº 12.066/2024. O registro do monitoramento é feito pelos órgãos responsáveis diretamente no SIOP (Sistema Integrado de Planejamento e Orçamento), e os resultados consolidados são divulgados ao público no Painel PPA Aberto e em relatórios anuais de monitoramento. Observatórios temáticos: mantidos por IPEA, universidades e organizações da sociedade civil, disponibilizam vastos painéis de indicadores com recortes temáticos. Dashboards e a Visualização de Dados A visualização de dados é a etapa final da cadeia de valor dos indicadores. Um dashboard (painel de controle) bem projetado não é um amontoado de gráficos, mas uma ferramenta que conta uma história, conectando indicadores a decisões. Tipos de visualização: gráficos de séries temporais para analisar tendências (ex.: evolução da cobertura vacinal ao longo dos anos); gráficos de barras para comparar categorias (ex.: comparar o IDEB de municípios de um mesmo estado); mapas coropléticos para distribuição espacial (ex.: risco de arboviroses). Princípios de usabilidade: simplicidade, uso de cores com propósito (sinalização semafórica: verde, amarelo, vermelho para meta atingida, parcial e crítica), hierarquização da informação (o mais importante no topo e à esquerda). A verdadeira maestria na gestão pública não está em acumular uma infinidade de indicadores, mas em selecionar um conjunto estratégico de medidas que dialogue com o desenho da política, mobilize as equipes, dê transparência à sociedade e, acima de tudo, oriente a tomada de decisão com base em evidências. Um indicador que não é usado para decidir é apenas um ruído informacional. Exercícios: No contexto da construção e uso de indicadores de políticas públicas, a falácia do produto refere-se à ideia de que: Em relação aos indicadores de desempenho de políticas públicas, a eficiência é definida como: Qual das seguintes opções não é uma etapa na construção de indicadores de políticas públicas? Complete a frase: Diferente de uma simples estatística descritiva, um _____ de política pública caracteriza-se por ser uma medida obrigatoriamente interpretada à luz de um referencial normativo ou de um objetivo de gestão. Complete a frase: A ocorrência da falácia do produto é verificada quando o gestor avalia o sucesso de uma política pública exclusivamente por meio de indicadores de _____, negligenciando se houve mudança real na condição dos beneficiários. Complete a frase: No âmbito dos 5 Es do desempenho, a _____ foca na fase inicial da cadeia de valor, avaliando a capacidade da administração em adquirir recursos humanos e materiais ao menor custo possível, mantendo a qualidade requerida. Complete a frase: A dimensão da _____ mede especificamente a relação entre os produtos gerados e os objetivos ou metas de curto prazo pactuados no planejamento original da política pública. Complete a frase: Um indicador de desempenho atende ao atributo da _____ quando ele é capaz de mensurar com precisão o fenômeno social pretendido, sem sofrer contaminação por variáveis estranhas ao objeto de análise. Complete a frase: Para que o progresso de uma intervenção governamental possa ser tecnicamente aferido ao longo do tempo, é indispensável o estabelecimento da _____, que define o valor do indicador antes do início da política. Complete a frase: O Índice de Gini e a esperança de vida ao nascer são exemplos de indicadores de _____, pois refletem transformações socioeconômicas estruturais que sofrem influência de múltiplas políticas setoriais. Complete a frase: O Índice de Desenvolvimento da Educação Básica (IDEB) é um indicador composto que agrega em sua fórmula duas dimensões críticas do sistema: a proficiência dos alunos e o _____. Complete a frase: A dimensão da _____ exige que os indicadores de desempenho sejam estratificados por recortes de gênero, raça e território, visando revelar disparidades na entrega e no acesso aos direitos sociais. Complete a frase: O Sistema de Informações sobre Orçamentos Públicos em Saúde (SIOPS) é a ferramenta utilizada para monitorar o cumprimento do _____ de aplicação de recursos, conforme exigido pela Constituição.