Curso Internacional “POLÍTICAS ORÇAMENTÁRIAS E GESTÃO PUBLICA POR RESULTADOS” MARCO LÓGICO Eduardo Aldunate Experto Área de Políticas Presupuestarias y Gestión Pública ILPES/CEPAL Ciclo de Vida de um Projeto ou Programa Pre-investimento Investimento Formulação e avaliação Controle de processo Operação Avaliação de resultados e impactos Avaliação ExPost Introdução Árvore do Problema Objetivos Indicadores Meios de Verificação Supostos O Que é a Matriz de Marco Lógico? • É um instrumento de gestão de programas e projetos. • Permite fortalecer a preparação e a execução de programas e projetos. • Resume os principais resultados da preparação do programa ou projeto. • Serve de base para a programação da execução. • Facilita o acompanhamento e a avaliação de resultados e impactos. Introdução Árvore do Problema Objetivos Indicadores Meios de Verificação Supostos O que NÃO é a Matriz de Marco Lógico? • Não é um método de avaliação exante de projetos ou programas • Não é um método de programação da execução • Não é auto-suficiente para uma boa gestão de projetos • Não é uma panacéia • Não é um dogma Introdução Árvore do Problema Objetivos Indicadores Meios de Verificação Supostos A Matriz de Marco Lógico Meios de Objetivos Indicadores verificação Supostos Fim Propósito Componentes Atividades Introdução Árvore do Problema Objetivos Indicadores Meios de Verificação Supostos Conteúdo dos estudos de Pré-investimento • Identificação do problema • Diagnóstico • Estudo de alternativas • Avaliação Introdução Árvore do Problema Objetivos Indicadores Meios de Verificação Supostos Identificação do problema Orientações importantes: • • • • Identificar os problemas da situação analisada Centrar a análise no problema principal Formular o problema como um estado negativo Não confundir o problema com a falta de uma solução Faz falta um semáforo Há uma alta taxa de acidentes Introdução Árvore do Problema Objetivos Indicadores Meios de Verificação Supostos Análise do problema Passos a seguir: • Identificar o problema principal • Examinar os efeitos que provoca o problema • Identificar as causas do problema • Estabelecer a situação desejada (objetivo) • Identificar meios para a solução • Definir ações • Configurar alternativas de projeto Introdução Árvore do Problema Objetivos Indicadores Meios de Verificação Supostos Exame dos efeitos do problema Árvore de Efeitos: • É um excelente e singelo instrumento para identificar as repercussões do problema. • Representa graficamente o problema e os efeitos encadeados sobre este. Introdução Árvore do Problema Objetivos Indicadores Meios de Verificação Supostos Construção da Árvore de Efeitos • Se representa graficamente o problema. Alta taxa de acidentes na interseção Introdução Árvore do Problema Objetivos Indicadores Meios de Verificação Supostos Construção da Árvore de Efeitos • Se colocam sobre o problema os efeitos diretos ou imediatos, unidos com setas. Alta mortalidade Grande número de feridos Grandes danos à propriedade Insatisfação com a autoridade municipal Alta taxa de acidentes na interseção Introdução Árvore do Problema Objetivos Indicadores Meios de Verificação Supostos Construção da Árvore de Efeitos • Estudar, para cada efeito de primeiro nível, se há outros efeitos derivados dele. Colocá-los num segundo nível, unidos por setas ou aos efeitos de primeiro nível que os provocam. Altos custos de atenção de saúde Alta mortalidade Baixa assistência laboral Grande número de feridos Altos custos reparos Grandes danos à propriedade Perda de votos Insatisfação com a autoridade municipal Alta taxa de acidentes na interseção Introdução Árvore do Problema Objetivos Indicadores Meios de Verificação Supostos Construção da Árvore de Efeitos • Continuar assim até chegar a um nível que se considere superior dentro da órbita de concorrência. Menor qualidade de vida Perda de produtividade Altos custos de atenção à saúde Alta mortalidade Baixa assistência laboral Grande número de feridos Altos custos reparos Grandes danos à propriedade Perda de votos Insatisfação com a autoridade municipal Alta taxa de acidentes na interseção Introdução Árvore do Problema Objetivos Indicadores Meios de Verificação Supostos Árvore de Efeitos Se aparecem efeitos importantes o problema requer solução => Proceder à análise das causas Introdução Árvore do Problema Objetivos Indicadores Meios de Verificação Supostos Construção da Árvore de Causas • Se identificam as causas possíveis do problema e se representam sob este. Alta taxa de acidentes na interseção Exceso de velocidade dos veículos Introdução Grande número de pedestres cruzando Árvore do Problema Visibilidade limitada Objetivos Indicadores Falta de sinalização Meios de Verificação Supostos Construção da Árvore de Causas • Depois se procuram as causas das causas, construindo as raízes encadeadas da árvore. Alta taxa de acidentes na interseção Excesso de velocidade dos veículos Grande distancia a semáforos aguas acima e abaixo Grande número de pedestres cruzando Inexistencia de uma ponte para pedestres Imprudência dos condutores Introdução Árvore do Problema Visibilidade limitada Falta de sinalização Há veículos estacionados Imprudência dos pedestres Objetivos Não há semáforo Não há sinal de prioridade Indicadores Meios de Verificação Supostos Árvore de Causas • É recomendável dar rédea solta à criatividade. Uma boa definição das causas aumenta a probabilidade de soluções exitosas. Introdução Árvore do Problema Objetivos Indicadores Meios de Verificação Supostos Árvore do Problema A junção da Árvore de Efeitos com a Árvore de Causas gera a Árvore de Causas - Efeitos ou Árvore do Problema Introdução Árvore do Problema Objetivos Indicadores Meios de Verificação Supostos Árvore do Problema Menor qualidade de vida Perda de produtividade Altos custos de atenção à saúde Alta mortalidade Baixa assistencia laboral Grande número de feridos Altos custos reparos Grandes danos à propriedade Perda de votos Insatisfação com a autoridade municipal Alta taxa de acidentes na interseção Excesso de velocidade dos veíículos Grande distância de semáforos aguas acima e abaixo Grande número de pedestres cruzando Introdução Árvore do Problema Falta de sinalização Há veículos estacionados Inexistência de uma ponte para pedestres Imprudencia dos motoristas Visibilidade limitada Imprudencia dos pedestres Objetivos Não há semáforo Não há sinal de prioridade Indicadores Meios de Verificação Supostos Definir os objetivos para a solução Árvore de objetivos: (Árvore de Meios-Fins) • Representa a situação esperada ao resolver o problema. • Constrói-se procurando as manifestações contrárias às indicadas na árvore do problema. – Efeitos se transformam em fins – Causas se transformam em meios • Se verifica a lógica e pertinência da árvore de objetivos – Se o "negativo " não é imediato há um problema na árvore causas-efeitos – É o momento de eliminar redundâncias e detectar esvaziamentos Introdução Árvore do Problema Objetivos Indicadores Meios de Verificação Supostos Construção da Árvore de Objetivos Menor calidad Melhor de vida de qualidade vida Pérdida Boa de productividad produtividade Altos costos dede Menores custos atención salud atenção de à saúde Baixa Alta mortalidade mortalidad Alta inasistencia Maiori assistência laboral GranPocos número de heridos Altoscustos costosde Baixos reparaciones reparos Menores Grandes daños danosaàla propiedad propriedade Pérdida de votos Manutenção apoio eleitoral Descontento cona Satisfação com la autoridad autoridade comunal municipal Alta tasa accidentes en lana intersección Baixa taxadede acidentes interseção Adequada Exceso de velocidade dos velocidad de losveículos vehículos Menor de Gran distancia a semáforos aguas arriba y abajo Baixo número de de Gran número pedestres peatones cruzando Inexistencia de Existe uma un puente ponte para peatonal pedestre Imprudencia Prudência de doslos conductores motoristas Introdução Árvore do Problema Boa visibilidade Visibilidad limitada Falta de Existe señalización sinalização Não veículos Hayhá vehículos estacionados Imprudencia Prudência de doslos pedestres peatones Objetivos NoHá hay semáforo No Háhay sinal señal de de prioridade prioridad Indicadores Meios de Verificação Supostos Identificar ações • Para cada base da árvore de objetivos se procura criativamente uma ação que concretize o meio. Menor distancia de semáforos aguas acima e abaixo Existe uma ponte para pedestres Prudencia dos motoristas Instalar outros semáforos Não há veículos estacionados Prudência dos pedestres Construir Passarela Árvore do Problema Há sinal de prioridade Proibir estacionamiento Campanha educacional Introdução Há semáforo Instalar semáforo Instalar disco PARE Objetivos Indicadores Meios de Verificação Supostos Configurar alternativas de projeto Examinar as ações propostas nos seguintes aspectos: • • • • • Analisar seu nível de incidência na solução do problema. Priorizar as de maior incidência. Verificar interdependências e agrupar ações complementares. Definir alternativas com base nas ações agrupadas. Verificar a viabilidade de cada alternativa . – – – – – Introdução Técnica Social Financeira Institucional Ambiental Árvore do Problema Objetivos Indicadores Meios de Verificação Supostos Configurar alternativas de projeto Instalar outros semáforos Construir Passarela Proibir estacionamiento Campanha educacional Alternativa 1 Construir passarela + Campanha educacional Introdução Instalar disco PARE Alternativa 2 Instalar disco PARE + Campanha educacional +Proibir estacionamiento Árvore do Problema Objetivos Instalar semáforo Alternativa 3 Instalar semáforo + Campanha educacional +Proibir estacionamiento Indicadores Meios de Verificação Supostos Reflexões Finais • O processo de análise é “interativo” e “retroalimentado”: sempre é possível incorporar novas alternativas ou integrar aquelas complementares. • O resultado desta etapa é um bom conhecimento do problema e a proposta de alternativas consideradas viáveis. • Se aparecem causas (alternativas) fora do âmbito de ação se comunicam aos responsáveis. • O seguinte passo consistirá em estudar e especificar todos os aspectos de cada alternativa. Introdução Árvore do Problema Objetivos Indicadores Meios de Verificação Supostos Se não se prepara bem um projeto ….. Promotor Programação Introdução Árvore do Problema Desenhista Construção Objetivos Indicadores Especificações O que queria o usuário Meios de Verificação Supostos Objetivos • Esta coluna se conhece também como Resumo Narrativo do Projeto. • Responde às interrogações: – Qual é a finalidade do projeto? – Para que se faz o projeto? – Que vai fazer? – Como se fará? Introdução Árvore do Problema Objetivos Indicadores Fim Propósito Componentes Atividades Meios de Verificação Supostos Objetivos: Fim Qual é a finalidade do projeto? Indica como o projeto ou o programa contribuirá a solucionar um problema de desenvolvimento. Fim Propósito Componentes Contribuir a que os recursos hídricos do país sejam manejados de forma harmônica, integral e sustentável, contribuindo a uma melhor qualidade de vida dos habitantes e ao desenvolvimento social e econômico. Atividades Introdução Árvore do Problema Objetivos Indicadores Meios de Verificação Supostos Objetivos: Propósito Por que se leva a cabo o projeto? Fim Propósito Componentes Atividades Introdução Árvore do Problema Descreve o impacto direto ou resultado direto obtido da utilização dos Componentes. Informação confiável e oportuna, posta a disposição dos usuários públicos e privados, que permita o adequado aproveitamento, administração e desenvolvimento dos recursos hídricos do país. Objetivos Indicadores Meios de Verificação Supostos Objetivos: Componentes Que deve produzir o projeto? Fim São os bens e serviços que deve produzir o executor do projeto. Propósito Componentes Atividades Introdução Árvore do Problema 1.- Estatísticas “fluviométricas” oportunas e confiáveis geradas. 2.- Estatísticas “hidrometereológicas” oportunas e confiáveis geradas. 3.- Estatísticas “sedimentométricas” oportunas e confiáveis geradas. ……. 6.- Prognósticos de volumes publicados. 7.- Prognósticos de cheias emitidos. Objetivos Indicadores Meios de Verificação Supostos Objetivos: Actividades Como se produzirão os Componentes? Atividades principais que implicam uso de recursos, que o executor deve levar a cabo para produzir cada Componente. Colocam-se, para cada Componente, em ordem cronológico. Fim Propósito Componentes Atividades Introdução Árvore do Problema 1.1.- Coleta de dados da rede “fluviométrica” 1.2.- Envio dos dados da rede “fluviométrica” ao nível central 1.3.- Registo a nível central dos dados da rede “fluviométrica” 1.4.- Validação dos dados e elaboração de informação da rede “fluviométrica” ....... 7.1.- Elaboração dos prognósticos de cheias 7.2 - Avaliação dos prognósticos de cheias Objetivos Indicadores Meios de Verificação Supostos Onde procuramos os objetivos? Mayor calidad de vida Buen potencial productivo local Priorización de otras necesidades Baja tasa de mortalidad Menor costo de producción Mayores remuneraciones Mayor rendimiento Menor inasistencia laboral Moderados costos de atención de salud Fim Adecuada calificación laboral Menor inasistencia y repitencia escolar Propósito Baja tasa de enfermedades en la localidad Buenos hábitos de higiene Adecuado acceso a centros de salud No hay contaminación del agua Existe educación en higiene Existe alcantarillado Vías a centros vecinos en buenas condiciones Introdução Buen manejo de los residuos sólidos Atividades Hay atención en la localidad Árvore do Problema Componentes Ambiente descontaminado y sano Objetivos Indicadores Meios de Verificação Supostos Avançando com a MML: Objetivos Contribuir a que os recursos hídricos do país sejam manejados de forma harmônica, integral e sustentável, aportando a uma melhor qualidade de vida dos habitantes e ao desenvolvimento social e econômico. Informação confiável e oportuna, posta .a disposição dos usuários públicos e privados, que permita o adequado aproveitamento, administração e desenvolvimento dos recursos hídricos do país. 1.- Estatisticas fluviométricas oportunas e confiáveis geradas. 2.- Estatísticas hidrometereológicas oportunas e confiáveis geradas. 3.- Estatsticas sedimentométricas oportunas e confiáveis geradas. ……. 6.- Prognósticos de volumes publicados. 7.- Prognósticos de cheias emitidos. 1.1.- Recolección de datos de la red fluviométrica 1.2.- Envío de los datos de la red fluviométrica al nivel central 1.3.- Registro a nivel central de los datos de la red fluviométrica 1.4.- Validación de los datos y elaboración de información de la red fluviométrica ....... 7.1.- Elaboración de los pronósticos de crecidas 7.2 - Evaluación de los pronósticos de crecidas Introdução Árvore do Problema Objetivos Indicadores Meios de Verificação Supostos Objetivos Lógica vertical do projeto Se o projeto está bem desenhado se podem examinar os vínculos causais de baixo para acima: Fim O Fim é uma resposta ao problema mais importante no setor. Propósito Caso se consiga o Propósito, o projeto contribuirá ao logro do Fim. Componentes Atividades Introdução Cada Componente é necessário para conseguir o Propósito. Não falta nenhum Componente. As Atividades são as necessárias para produzir cada Componente. Árvore do Problema Objetivos Indicadores Meios de Verificação Supostos A Matriz de Marco Lógico Meios de Objetivos Indicadores verificação Supostos Fim Propósito Componentes Atividades Introdução Árvore do Problema Objetivos Indicadores Meios de Verificação Supostos Indicadores • Proporcionam a base para supervisionar e avaliar o projeto. • Definem metas que nos permitem conhecer Indicadores em que medida se cumprem os objetivos • Estabelecem uma relação entre duas Fim ou mais variáveis. Propósito Compo• Podem cobrir aspectos qualitativos ou nentes Ativiquantitativos. dades • Fornecem informação quantitativa. • Devem ser discutidos com os envolvidos Introdução Árvore do Problema Objetivos Indicadores Meios de Verificação Supostos Características de um bom indicador • • • • Objetivo Mensurável objetivamente Relevante Específico • Prático e econômico • Associado a um prazo Introdução Árvore do Problema Objetivos Indicadores Meios de Verificação Supostos Tipos de indicadores Segundo o tipo de informação que fornecem se distinguem indicadores de: • Eficácia: – Medem o nível de cumprimento dos objetivos. – Ex. Variação percentual no número de usuários que conferem dados hidrológicos por ano e por tipo de informação solicitada. – Ex. Percentagem da rede viária que preserva seu nível de serviço de desenho (ou próximo) • Eficiência: – – – – Relacionam produtos com custos ou recursos Ex. Custo médio anual por dado “hidrometeorológico” Ex. Custo total por Km. de caminho conservado Ex. Número de pacientes atendidos por médico Introdução Árvore do Problema Objetivos Indicadores Meios de Verificação Supostos Tipos de indicadores Segundo o tipo de informação que entregam se distinguem indicadores de: • Qualidade: – Avaliam atributos com respeito a normas, referências externas ou satisfação dos beneficiários (usuários) – Ex. Confiabilidade dos prognósticos hidro-metereológicos – Ex. Percentagem de pacientes atendidos que se declaram satisfeitos com o atendimento recebido • Economia: – Refletem capacidade para gerar e mobilizar recursos financeiros – Ex. Percentagem de execução do orçamento atribuído – Ex. Percentagem de recuperação de créditos Introdução Árvore do Problema Objetivos Indicadores Meios de Verificação Supostos Indicadores para atividades • Indicadores de custo – Relacionam custos (orçado / real) – Ex: Maior custo percentual do equipamento • Indicadores de cronograma – Medem o nível de cumprimento dos prazos programados – Ex. Percentagem de atividades cujo prazo de execução superou o programado – Ex. Número médio de dias de atraso por atividade. . • Indicadores de quantidade – Medem o nível de cumprimento com respeito à quantidade programada de produtos ou serviços a gerar. – Ex. Percentagem de pessoas capacitadas em relação às programadas. Introdução Árvore do Problema Objetivos Indicadores Meios de Verificação Supostos Indicadores Medem contribuição ao logro do fim a médio ou longo prazo (impactos).. Medem resultados ao terminar a execução do projeto Fim Propósito Medem eficácia, eficiência e Compoqualidade no nentes logro dos componentes Ativi. dades Percentagem da população que aprova teste de conhecimentos sobre higiene ao termo do projeto. Número de consultas atendidas por mês. Consultas por especialista por mês. Percentagem de consultas não derivadas. Percentagem da população objetivo capacitada ao termo do projeto Número de capacitados por facilitador por ano. Nível de satisfação dos capacitados. Custo por curso. Custo por metro quadrado construído Custo do equipamento. Medem o custo das atividades. Introdução Árvore do Problema Diminuição percentual da taxa de doenças dos 450 habitantes de Povo Esperanza ao cabo de três anos. Objetivos Indicadores Meios de Verificação Supostos Informação sobre os Indicadores • Nome: Percentagem da população que aprova teste de conhecimentos sobre higiene • Fórmula de cálculo: {número de teste com 7 ou mais pontos (escala 1 a 10) / número de teste realizados}*100 • Meio de verificação: Teste de dez perguntas aplicado a uma mostra aleatória de 45 pessoas capacitadas. • Valor atual (linha de base): 10 % • Tendência observada e projetada: A situação se manteve igual nos últimos três anos e não se prevê mudanças sem o projeto. • Meta proposta: Igualar a média regional (60% de aprovação) • Metas parciais (avanço): Não se consideram Introdução Árvore do Problema Objetivos Indicadores Meios de Verificação Supostos Recomendações sobre Indicadores • Podem requerer-se vários indicadores por objetivo para medir diferentes aspectos deste (Ex.: diminuição de doenças bronco-pulmonares, diminuição de doenças infectocontagiosas). • A equipe do projeto pode requerer outros indicadores que não são de interesse para os demais envolvidos. Estes se tratarão segundo o descrito, mas não se incorporarão na MML/. • Se os impactos se produzirão a muito longo prazo ou se o custo de estimar o indicador é muito alto, é melhor procurar indicadores “Proxy” (Ex.: percentagem de diminuição do desatendimento escolar por mês). Introdução Árvore do Problema Objetivos Indicadores Meios de Verificação Supostos Introdução Árvore do Problema Objetivos Indicadores Meios de Verificação Supostos Introdução Árvore do Problema Objetivos Indicadores Meios de Verificação Supostos Meios de verificação Como obtemos a evidência? • São as fontes de informação que se podem utilizar para verificar o logro dos objetivos (cálculo dos indicadores). • Podem incluir : – Estatísticas – Material publicado – Inspeção visual – Pesquisas – Informes de auditoria – Registros contábeis Introdução Árvore do Problema Objetivos Meios de verificação Fim Propósito Componentes Atividades Indicadores Meios de Verificação Supostos Recomendações sobre Meios de Verificação • Se a informação for deficiente será necessário incluir atividades para obtê-la. • Se não se pode conseguir a informação, terá que mudar o indicador (usar “proxy”). • Se há mais de uma fonte de informação, verificar a consistência dos dados. • Meios de verificação devem ser discutidos com os envolvidos. Introdução Árvore do Problema Objetivos Indicadores Meios de Verificação Supostos Introdução Árvore do Problema Objetivos Indicadores Meios de Verificação Supostos Introdução Árvore do Problema Objetivos Indicadores Meios de Verificação Supostos Supostos Como podemos manejar os riscos? • Cada suposto corresponde a um risco que enfrenta o projeto e que está além do controle direto da gerência do projeto. • O suposto se expressa como uma condição que tem que se dar para que se cumpra a relação de causalidade na hierarquia de objetivos. • Só se consideram os riscos que tenham uma probabilidade razoável de ocorrência. Introdução Árvore do Problema Objetivos Indicadores Supostos Fim Propósito Componentes Atividades Meios de Verificação Supostos Possíveis fontes de riscos externos • • • • • • • • • Mudanças institucionais Crise econômica Instabilidade política Instabilidade social Problemas com o orçamento Eventos da natureza Provedores desconhecidos Conflitos internacionais Novos métodos, equipes ou tecnologias Introdução Árvore do Problema Objetivos Indicadores Meios de Verificação Supostos Supostos Representam condições necessárias para o logro dos objetivos. Acontecimentos, condições ou decisões que Fimtêm que suceder para completar os Componentes do projeto. Propósito Introdução Supostos A população assiste aos cursos de capacitação emSupostos higiene. Componentes Supostos Atividades Supostos Árvore do Problema Objetivos Indicadores Meios de Verificação Supostos Supostos Representam condições necessárias para o logro dos objetivos. Fim A população aplica o aprendido Supostos sobre higiene em suas atividades diárias. Propósito Supostos Componentes Supostos AtiviSupostos Acontecimentos, condições ou decisões que têm que ocorrer dades para que os componentes do projeto atinjam o Propósito. Introdução Árvore do Problema Objetivos Indicadores Meios de Verificação Supostos Supostos Representam condições necessárias para o logro dos objetivos. Fim Supostos Propósito Supostos CompoAcontecimentos, condições nentes ou decisões que têm que ocorrer para que o projeto Activicontribua significativamente dades ao logro do Fim. Introdução Árvore do Problema Objetivos Supostos A população busca regularmente ser Supostos atendida e a controles no centro de saúde. Indicadores Meios de Verificação Supostos Supostos Representam condições necessárias para o logro dos objetivos. Fim Supostos Propósito Supostos Acontecimentos, Compo-condições ou decisõesnentes importantes para a "sustentabilidade” dos benefíciosActivigerados pelo projeto. dades Introdução Árvore do Problema Objetivos A população ensina os Supostos hábitos de higiene aprendidos a seus filhos e filhas. Supostos Indicadores Meios de Verificação Supostos Algumas considerações adicionais com respeito aos supostos • Se a “ocorrência” de um suposto é crítica para o logro dos objetivos, não há como evitar o risco e a probabilidade de que ocorra é alta, a equipe deveria considerar abandonar o projeto. • Durante a execução a equipe do projeto deverá estar imbuída dos supostos para influir todo o possível para que se cumpram. • Os supostos tem a virtude de obrigar a quem formula o projeto a explicitar os riscos e a quem o executa a estar imbuídos deles. Introdução Árvore do Problema Objetivos Indicadores Meios de Verificação Supostos Diagrama para a análise de supostos Sim É externo ao projeto ? Não Não incluir Sim É importante? Probabilidade de ocorrência? Pouco provável Muito provável RedesenharSim Introdução Se pode redesenhar o projeto? Árvore do Problema Objetivos Indicadores Provável SUPOSTO Não Suposto fatal Meios de Verificação Supostos Introdução Árvore do Problema Objetivos Indicadores Meios de Verificação Supostos Introdução Árvore do Problema Objetivos Indicadores Meios de Verificação Supostos Outras versões da MML • GTZ • ONU Introdução Árvore do Problema Objetivos Indicadores Meios de Verificação Supostos Para finalizar ..... FIM F Introdução F I M F I M M AL FIM! Objetivos Indicadores Meios de Verificação Muito Obrigado Árvore do Problema Supostos