MINISTERIO DE ECONOMÍA Y FINANZAS

DIRECCIÓN GENERAL DE POLÍTICA DE INVERSIONES

Marco Conceptual y MetodologíaGeneral de la Evaluación Ex Post de

Nancy Zapata Rondón

Dirección de Normatividad, Metodologías y Capacitación

DGPI - MEF

General de la Evaluación Ex Post de Proyectos de Inversión Pública

Preinversión• Evaluación Ex

Ante

Preinversión• Evaluación Ex

Ante

EELL CCICLOICLO DEDE PIP PIP YY LALA EEVALUACIÓNVALUACIÓN

Conveniencia de ejecutar un Proyecto

En qué medida se logran las metas

(P, T, C)

Logros de objetivos, cambios generados

por el PIP

Inversión• Seguimiento y

Evaluación

Inversión• Seguimiento y

Evaluación

Post Inversión• Evaluación Ex

Post

Post Inversión• Evaluación Ex

Post

Retroalimentación

Transparencia

LLOSOS CCRITERIOSRITERIOS DEDE EEVALUACIÓNVALUACIÓN

Preinversión• Evaluación Ex

Ante

Preinversión• Evaluación Ex

Ante

PertinenciaRentabilidad Social

Sostenibilidad

EficienciaProductos

Tiempos

Costos

PertinenciaEficienciaEficacia

SostenibilidadImpacto

Inversión• Seguimiento y

Evaluación

Inversión• Seguimiento y

Evaluación

Post Inversión• Evaluación Ex

Post

Post Inversión• Evaluación Ex

Post

Costos

Impactos

Efecto Directo

Operación/Utilización

���� Eficacia

���� Impacto

Sos

teni

bilid

ad

Fin últimoFines indirectosFines directos

Objetivo central - propósito

ELEL MMODELOODELO LLÓGICOÓGICO DELDEL PIP PIP YY LLOSOS CCRITERIOSRITERIOS DEDE EEVALUACIÓNVALUACIÓN

Positivo/NegativoPrevisto/No previsto

Productos

Insumos

Ejecución

Sos

teni

bilid

ad

Efic

ienc

ia

���� Pertinencia

Consistencia con las políticas.Solución del problema.Consistencia en el PIP.Gestión de los riesgos importantes.

Componentes –Medios Fundamentales

Acciones

Tiempos, recursos humanos, fondos, etc.

Concepto Temas a analizarPe

rtinen

cia

Medida en que los objetivos de un PIP son coherentes con las necesidades de los beneficiarios, los contextos regional y local, y las políticas del país.

• Relevancia dentro de las políticas y prioridades

del sector.

• Satisfacción de las necesidades y prioridades

de los beneficiarios.

• Validez de la estrategia del proyecto.

• Gestión de los riesgos importantes.

Medida en que los recursos / insumos (fondos, • Logro de Productos

LLOSOS CRITERIOSCRITERIOS DEDE EEVALUACIÓNVALUACIÓN EEXX PPOSTOST

Eficienc

ia

Medida en que los recursos / insumos (fondos, tiempo, etc.) se han convertido económicamente en productos (out put) del proyecto. Se asocia a los componentes del PIP.

• Logro de Productos

• Eficiencia en Tiempo de Ejecución

• Eficiencia el Costo del Proyecto

• Eficiencia Global

• Problemas de Ejecución

Eficacia

Medida en que se lograron o se espera lograr los objetivos del PIP. Se asocia al propósito y los fines directos.

• Operación y Utilización Productos.

• Logro del Objetivo Central del Proyecto.

• Rentabilidad Social

• Eficacia Global

Concepto Temas a analizarIm

pacto

Cambios de largo plazo, positivos y negativos, primarios y secundarios, producidos directa o indirectamente por un PIP. Se asocia a los fines de un PIP

• Impactos Previstos

• Impactos Negativos e Impactos No Previstos

Sosten

ibilida

d Continuidad en la generación de los • Operación y Mantenimiento

LLOSOS CRITERIOSCRITERIOS DEDE EEVALUACIÓNVALUACIÓN EEXX PPOSTOST

Sosten

ibilida

d Continuidad en la generación de los beneficios de un PIP. Se asocia con el mantenimiento de la capacidad de provisión de los bienes o servicios y el uso de éstos por parte de los beneficiarios.

Operación y Mantenimiento• Capacidad Gerencia y Técnica del Operador• Sostenibilidad Financiera• Riesgos para la sostenibilidad• Sostenibilidad Global

• Eficiencia• Pertinencia• Sostenibilidad

Evaluación de culminación

• Sostenibilidad

Seguimiento Ex Post

• Pertinencia• Eficiencia• Eficacia• Impactos• Sostenibilidad

Evaluación de Resultados

• Impactos• Sostenibilidad

Estudio de Impactos

LLOSOS MMOMENTOSOMENTOS DEDE LALA EEVALUACIÓNVALUACIÓN EEXX PPOSTOST YY LLOSOS CCRITERIOSRITERIOS AAPLICADOSPLICADOS

• Preinversión

• Inversión

• Post Inversión

Recopilación de

• Hitos del PIP

• Comparaciones

• Factores + -

• Informe preliminar

Sistematización y Sistematización y análisis de información • Talleres, reuniones

con involucrados

Discusión de Discusión de Evaluación

PPROCESOROCESO DEDE LALA EEVALUACIÓNVALUACIÓN EEXX PPOSTOST -- CCULMINACIÓNULMINACIÓN

Recopilación de Información Evaluación

Preliminar

Informe Evaluación Culminación

•Preinversión

•Inversión

•Post Inversión

Recopilación de Recopilación de

•Hitos del PIP

•Comparaciones

Evaluación preliminar

•Ajuste marco lógico

•Enfoque del estudio

•Requerimientos de

información adicional

•Alcance del estudio

•Estimación de recursos

•Términos de referencia

•Proceso y contratación

•Orientaciones

Selección del EEI

PPROCESOROCESO DEDE LALA EEVALUACIÓNVALUACIÓN EEXX PPOSTOST –– RRESULTADOSESULTADOS –– AACTIVIDADESCTIVIDADES PPREPARATORIASREPARATORIAS

Recopilación de información disponible

Planeamiento

LLAA EEVALUACIÓNVALUACIÓN EEXX PPOSTOST

Medición de los resultados y efectos de

un proyecto.

El nivel de logro de los insumos, las actividades,

los componentes, el objetivo central, los fines directos e indirectos.

Examen del proceso, factores que influyen y relaciones causales.

Preinversión,

Inversión

Utilización de los

Emisión de un juicio de valor sobre el

proyecto

Pertinencia,

Eficiencia,

Recomendaciones, Lecciones Aprendidas

Acciones concretas a alguien

Utilización de los productos y logro del objetivo central e

impactos esperados

Las relaciones causales entre el

proyecto y sus efectos.

Eficacia,

Impacto,

Sostenibilidad.

Enseñanzasgeneralizables y

aplicables.

LLAA EEVALUACIÓNVALUACIÓN EEXX PPOSTOST –– MMARCOARCO LLÓGICOÓGICO EE IINDICADORESNDICADORES

PIP Riego PIP Salud PIP Transportes

Estructura de captación con capacidad de X l/s

Área construida X m2 Nº de carriles

Canal principal de X ml Cantidad y tipo de equipamiento

Longitud de la vía

Reservorio de X m3 Nº de personal médico entrenado

Tipo de pavimento

Componentes

Acciones

Insumos

Productos (capacidad instalada para producir bienes y servicios)

Tiempos, recursos humanos, fondos, etc.

1

Ejecución del PIP

Indicador PIP Riego PIP Salud PIP Transportes

Beneficios directos

Incremento en el volumen de producción agrícola TM por campaña

Incremento en la cobertura de atención de partos

Ahorro en tiempos de traslado h/viaje/añoAhorros en COV

Utilización Demanda anual de agua para riego X m3

Nº de atenciones,atendidos por año

Volumen de tráfico IMD

Disponibilidad Nº de ha que se pueden regar

Nº de consultas externas que se

Nº de díastransitables por año

LLAA EEVALUACIÓNVALUACIÓN EEXX PPOSTOST –– MMARCOARCO LLÓGICOÓGICO EE IINDICADORESNDICADORES

2

3

4

Propósito

Disponibilidad de los productos (capacidad)

Operación y Mantenimiento

2

Utilización de los bienes y servicios

Beneficios Directos (efectos directos intencionales)

Demanda

3

Condiciones Externas

4

pueden regar externas que se puede dar

transitables por año2

Indicadores PIP Riego PIP Salud PIP Transportes

Impactos indirectos positivos previstos

Incremento en los ingresos promedio de los agricultores por campaña

% de enfermedades detectadas a tiempo

Incremento en frecuencia traslados

Impactos directos previstos

Incremento en el % de productos que se comercializan al año

Disminución de los “gastos de bolsillo”

Mejora acceso a servicios

LLAA EEVALUACIÓNVALUACIÓN EEXX PPOSTOST –– MMARCOARCO LLÓGICOÓGICO EE IINDICADORESNDICADORES

5

6

Fin último

5

Condiciones Externas

Impactos directos

6

Condiciones Externas

Impactos indirectos (+ -)

año

Impactos indirectos negativos no previstos

Salinización de suelos Nº ha

Infeccionesintrahospitalarias

Incremento de accidentes en los primeros años

6

• Comparación entre :

– Lo Planificado / lo Logrado (se necesita los valores objetivos)

– La situación Antes / Después del Proyecto (se necesita la línea base)

– La situación Con / Sin Proyecto (se necesita un grupo de control)

Indicador

Valor Objetivo

Indicador Indicador

EEVALUACIÓNVALUACIÓN PORPOR CCOMPARACIONESOMPARACIONES

• Comparación con los Estándares Establecidos y/o Promedio Nacional/Regional

• Comparación Temática

Antes del Después delProyecto Proyecto

Antes del Después delProyecto Proyecto

Línea Base

Antes del Después delProyecto Proyecto

Grupo de Control

• Contenidos Mínimos para la Evaluación de Culminación

• Contenidos Mínimos para el Seguimiento Ex Post

• Contenidos Mínimos para la Evaluación de Resultados

• Pautas de Orientación General para la Evaluación Ex Post– Marco Conceptual y Metodología

– Pautas para Evaluación de Culminación

– Pautas para el Seguimiento Ex Post

IINSTRUMENTOSNSTRUMENTOS MMETODOLÓGICOSETODOLÓGICOS PPARAARA LALA EEVALUACIÓNVALUACIÓN EEXX PPOSTOST

– Pautas para el Seguimiento Ex Post

– Pautas para Evaluación de Resultados

• Pautas de Orientación Sectorial para la Evaluación Ex Post – Energía

– Saneamiento

– Salud

– Transportes

Muchas Gracias