Post on 21-Apr-2015
Avaliação e Monitoramento de Projetos
Programa Regional de Formação para o Desenvolvimento Econômico Local com
Inclusão Social - Brasil
Gerência de Fomento e Desenvolvimento
2014
Conteúdo
• Conceitos de avaliação e monitoramento
• Fases de avaliação– Inicial– Intermediária– Final
• Instrumentos– Sistema do Marco Lógico– Gerenciamento de riscos
Avaliação de Projetos
Conceitos e Etapas de Avaliação
Avaliação
Avaliação• Conjunto de operações que permite, de um lado,
compilar e armazenar ordenadamente a informação relativa ao projeto e, de outro lado, analisá-la para tomar decisões que afetam sua evolução.
– Fonte: PTI / BID, 2014
Etapas de avaliação
• PlanejamentoAvaliação inicial
• Monitoramento e controle, replanejamento
Avaliação intermediária
• Termo de encerramento, memória e lições aprendidas
Avaliação final
AvaliaçãoAvaliação
inicial
Permite a delimitação do âmbito de ação e verifica a coerência interna do projeto.
Avaliação intermediária
Monitoramento• Verifica a coincidência
entre ações realizadas e planejadas.
Processo• Verifica os resultados
intermediários.
Estratégia• Avalia a propensão e o
comprometimento dos atores locais com a iniciativa.
Avaliação final
Permite estimar os resultados alcançados e o êxito do projeto.
Fonte: CNI, 2009.
Avaliação de Projetos
Componentes e instrumentos
Escopo - Planejamento
Que objetivos vou atender?
Quem vou atender?
Em que lugar vou atender?
Quais atividades vou executar?
Positivo
Que objetivos não vou atender?
Quem não vou atender?
Em que lugar não vou atender?
Quais atividades não vou executar?
Negativo
Que mais?
Escopo
• Pode fazer parte do escopo do projeto:– Objetivos geral e específicos– Premissas– Limites– Restrições– Lista positiva e negativa– Estrutura analítica do projeto– Matriz de responsabilidades e de comunicação (RACE)
– IMPORTANTE: se possível, um termo de abertura do projeto contendo essas informações e com assinatura de aceite dos parceiros.
Hora do exemplo
Planejamento do monitoramento
• Indicadores–Faz parte dessa atividade
a incorporação de um sistema de indicadores que permita verificar posteriormente o acompanhamento do projeto.
–Fonte: PTI / BID, 2014.
Indicadores – aspectos relevantes
• O que pode ser um indicador:– Número (contagem)– Proporção (porcentagem) – Taxa– Média – Mediana– Razão – Índice (composição de indicadores)
• Fonte: Measure Evaluation, 2008
Indicadores – exemplos– Número (n◦ de escolas primárias)– Proporção (n◦ de escolas primárias/n◦ total de escolas) – Taxa (n◦ de acidentes com morte/ n◦ de acidentes totais)– Média (50 viagens de 5 pessoas – 10 viagens por pessoa)– Mediana – medida de tendência central– Razão - n◦ de jovens universitários na rede/ n◦ de jovens
não universitários na rede– Índice (composição de indicadores)- INPC
• Fonte: Measure Evaluation, 2008
Cream
Claro
Relevante
Econômico
Adequado
Monitorável
Indicadores – Aspectos relevantes
Indicadores – aspectos relevantes
SMART
Specific
Measurable
Achievable
Relevant
Time Based
• Tᵒ T¹ Tⁿ...
Linha de base
Avaliação de Projetos
Instrumentos
Sistema do Marco Lógico• Definição• Instrumento que ajuda aos formuladores de
projetos a entender melhor a natureza dos problemas que estão tratando de resolver.
• Fonte: BID, 1997.
COMPONENTES
FINALIDADE
OBJETIVO
ATIVIDADES
OBJETIVOS INDICADORES MEIOS VERIFICAÇÃO PRESSUPOSTOS
Sistema do Marco Lógico
• Contexto• O Marco Lógico surgiu no contexto da cooperação
internacional, em virtude de alguns problemas relacionados aos projetos, levantados no final dos anos setenta pela Agência Americana de Cooperação Internacional / United States Agency for International Developments (USAID).
• Fonte: Seplan / AM
Sistema do Marco Lógico
• Contexto• Informe anual de 1994 do BID
informa que:
– 145 de 352 projetos (41,2%) ou;– US$ 5.500 milhões (29,6%) do
saldo não desembolsado
• Encontram-se em estado de execução lenta, atrasada ou situação problemática.
Fonte: BID, 1997.
• Contexto• Segundo pesquisa do PMI
(Project Management Institute) em torno de 30% dos projetos não atingem seus objetivos e, aproximadamente 17% são completamente descontinuados.
• Fonte: PMI, Pulse 2008.
Sistema do Marco Lógico
Sistema do Marco Lógico
• Ferramentas de Diagnóstico• Análise das partes
interessadas• Análise dos problemas
• Ferramentas de Identificação• Análise de objetivos• Análise de alternativas
Estrutura
Análise das partes interessadas
Grupo/ Organização
Interesses
Ameaças
Oportunidades
Recursos
Representação Formal
Hora do Exercício
Análise do problema
• Primeira questão:• O que é um problema?
– Dica importante:– Não confundir causa do problema com efeito ou possível solução
– Exemplo:
• Faz falta um semáforo
• Há uma alta taxa de acidentes
Hora do Exercício
Árvore de efeitos
Fonte: Measure Evaluation, 2008
Árvore de efeitos
Fonte: Measure Evaluation, 2008
Árvore de efeitos
Fonte: Measure Evaluation, 2008
Árvore de efeitos
Fonte: Measure Evaluation, 2008
Árvore de causas
Fonte: Measure Evaluation, 2008
Árvore de causas
Fonte: Measure Evaluation, 2008
Análise de objetivos
• Representa a situação esperada.• Constrói-se a situação contrária à árvore de
problemas.
– Efeitos se transformam em fins;– Causas se transformam em meios.
Árvore de objetivos
Fonte: Measure Evaluation, 2008
Árvore de objetivos
Fonte: Measure Evaluation, 2008
Identificação de ações
Fonte: Measure Evaluation, 2008
Análise de alternativas
• O processo participativo da avaliação inicial / planejamento deve permitir que se avalie a melhor alternativa de projeto para a solução do problema.
• Deve-se considerar os aspectos de viabilidade:– Técnicos viabilidade – Institucionais recursos, apoio– Sociais viabilidade, apoio– Ambientais impacto, viabilidade– Financeiros viabilidade
Análise de alternativas
• Deve-se considerar, além da viabilidade, a urgência / necessidade e a precedência (Pareto) das possíveis alternativas de solução.
Sistema do Marco Lógico• Matriz do Marco Lógico
Componentes
Finalidade
Objetivo
Atividades
Objetivos Indicadores Meios verificação Pressupostos
Marco Lógico
• Finalidade – é uma expressão da solução do problema detectado. – Exemplo: reduzir a taxa de mortalidade infantil em
determinada população de respectiva localidade.
• Objetivo – representa o efeito direto do projeto. A mudança que se espera com o projeto.– Exemplo: incidência de enfermidades derivadas de
impurezas na água reduzidas.
Marco Lógico
• Componentes – são os resultados específicos, os produtos a serem entregues com o recurso designado.– Exemplo: obras, estudos, serviços, capacitação.
• Atividades – conjunto de atividades / tarefas que contribuem para cada componente seja entregue.
Hora do Exemplo
Gerenciamento de riscos• O risco do projeto é um evento ou condição incerteza
que, se ocorrer, terá um efeito positivo ou negativo sobre pelo menos um objetivo do projeto, como tempo, custo, escopo ou qualidade.
• Fonte: PMI, 2004
Escopo
Custo
Qualidade
Tempo
Gerenciamento de riscos
BAIXO ALTO
ALTA
PR
OB
AB
ILID
AD
E
IMPACTO
Fonte: Salles, 2004
Gerenciamento de riscos
Planejamento Identificação Análise qualitativa
Análise quantitativa
Plano de respostas
Monitoramento e controle
Análise qualitativaEscore de Risco
Impacto
Probabilidade 0,1 (MB) 0,3 (B) 0,5 (M) 0,7 (A) 0,9 (MA)
0,9 (MA) 0,09 0,27 0,45 0,630,63 0,81
0,7 (A) 0,07 0,21 0,35 0,49 0,630,63
0,5 (M) 0,05 0,15 0,25 0,35 0,45
0,3 (B) 0,03 0,09 0,15 0,21 0,27
0,1 (MB) 0,01 0,03 0,05 0,07 0,09
0,21 0,49
0,35
0,27
Análise quantitativaDescrição Probabilidade Impacto Valor esperado
Greve de fornecedores
50% $500.000 250.000 (+)
Protótipo funciona de 1ª
20% $200.000 $40.000 (-)
Inundações em março
90% $5.000 $4.500 (+)
Valor esperado $214.500 (+)
Análise quantitativa
Valor base = R$5.000.000
Melhor caso = R$4.800 (valor base – oportunidades = $5.000.000 – 200.000)
Valor esperado = R$5.214.500
Pior caso = R$5.505.000 (valor base + ameaças)
Análise quantitativaUma árvore de decisão é um diagrama que descreve as principais interações entre decisões e possibilidades.
A análise de árvore de decisão usa a noção do Valor Esperado para determinar o conjunto de resultados.
É um diagrama de todos os atos, eventos e resultados possíveis.
Uma árvore de decisão é um diagrama que descreve as principais interações entre decisões e possibilidades.
A análise de árvore de decisão usa a noção do Valor Esperado para determinar o conjunto de resultados.
É um diagrama de todos os atos, eventos e resultados possíveis.
Decisão
Evento
D1
D2
E1
E2
E1
E2
O1
O2
O1
O2
Análise quantitativa
• Viagem de avião – Curitiba / Brasília• Cia A – passagem custa $750• Cia B – passagem custa $1.000• Custos de atraso:• Histórico de chegada no horário• Cia A – 60%• Cia B – 90% • Custo de atraso - $1.050
Análise quantitativa
Plano de respostas
Negativos
•Aceitar•Transferir•Mitigar
Positivos
•Aceitar•Compartilhar•Melhorar
Monitoramento e controle
• Importante:
• Riscos mudam ao longo do projeto, novos riscos aparecem e aqueles previstos no início podem também desaparecer.
Monitoramento e controle
• Determinar se:
• Respostas estão sendo implementadas conforme planejamento
• Respostas estão atendendo os objetivos, ou novas respostas são necessárias
• Premissas do projeto ainda são válidas• Surgiram riscos não previstos
Hora do exemplo
Avaliação Final
• A avaliação é um processo contínuo, a avaliação final é o momento de verificar quanto se atingiu do esperado e os porquês (lições aprendidas)
Template
Obrigado
Marcelo Percicotti
marcelo.percicotti@pr.senai.br
(41) 3271 - 9141