Marco Conceptual y Metodología General de la EvaluaciónEx Post de Proyectosde InversiónPública

Transcripción

1 MINISTERIO DE ECONOMÍA Y FINANZAS DIRECCIÓN GENERAL DE POLÍTICA DE INVERSIONES Marco Conceptual y Metodología General de la EvaluaciónEx Post de Proyectosde InversiónPública Nancy Zapata Rondón Dirección de Normatividad, Metodologías y Capacitación DGPI - MEF

2 EL CICLO DE PIP Y LA EVALUACIÓN Logros de objetivos, cambios generados por el PIP Preinversión Evaluación Ex Ante Conveniencia de ejecutar un Proyecto En qué medida se logran las metas (P, T, C) Post Inversión Evaluación Ex Post Retroalimentación Transparencia Inversión Seguimiento y Evaluación

3 LOS CRITERIOS DE EVALUACIÓN Pertinencia Eficiencia Eficacia Sostenibilidad Impacto Preinversión Evaluación Ex Ante Pertinencia Rentabilidad Social Sostenibilidad Eficiencia Productos Tiempos Costos Post Inversión Evaluación Ex Post Inversión Seguimiento y Evaluación

4 EL MODELO LÓGICO DEL PIP Y LOS CRITERIOS DE EVALUACIÓN Fin último Fines indirectos Fines directos Positivo/Negativo Previsto/No previsto Impactos Impacto Objetivo central - propósito Operación/Utilización Efecto Directo Eficacia enibilidad Componentes Medios Fundamentales Acciones Tiempos, recursos humanos, fondos, etc. Ejecución Productos Insumos Eficiencia Sost Consistencia con las políticas. Solución del problema. Consistencia en el PIP. Gestión de los riesgos importantes. Pertinencia

5 LOS CRITERIOS DE EVALUACIÓN Pertinencia Concepto Medida en que los objetivos de un PIP son coherentes con las necesidades de los beneficiarios, los contextos regional y local, y las políticas del país. Temas a analizar Relevancia dentro de las políticas y prioridades del sector. Satisfacción de las necesidades y prioridades de los beneficiarios. Validez de la estrategia del proyecto. Gestión de los riesgos importantes. Eficiencia Eficacia Medida en que los recursos / insumos (fondos, Logro de Productos tiempo, etc.) se han convertido Eficiencia en Tiempo de Ejecución económicamente en productos (out put) del Eficiencia el Costo del Proyecto proyecto. Se asocia a los componentes del Eficiencia Global PIP. Problemas de Ejecución Medida en que se lograron o se espera lograr los objetivos del PIP. Se asocia al propósito y los fines directos. Operación y Utilización Productos. Logro del Objetivo Central del Proyecto. Rentabilidad Social Eficacia Global

6 LOS CRITERIOS DE EVALUACIÓN Concepto Temas a analizar Impacto Cambios de largo plazo, positivos y negativos, primarios y secundarios, producidos directa o indirectamente por un PIP. Se asocia a los fines de un PIP Impactos Previstos Impactos Negativos e Impactos No Previstos Sostenibilidad dcontinuidad en la generación de los Operación y Mantenimiento beneficios de un PIP. Se asocia con el Capacidad Gerencia y Técnica del Operador mantenimiento de la capacidad de provisión Sostenibilidad Financiera de los bienes o servicios y el uso de éstos por Riesgos para la sostenibilidad parte de los beneficiarios. Sostenibilidad Global

7 LOS MOMENTOS DE LA EVALUACIÓN Y LOS CRITERIOS APLICADOS Eficiencia Pertinencia Sostenibilidad Evaluación de culminación Seguimiento Ex Post Sostenibilidad Pertinencia Eficiencia Eficacia Impactos Sostenibilidad Evaluación de Resultados Estudio de Impactos Impactos Sostenibilidad

8 PROCESO DE LA EVALUACIÓN - CULMINACIÓN Preinversión Inversión Post Inversión Recopilación de Información Sistematización y análisis de información Hitos del PIP Comparaciones Factores + - Informe preliminar Talleres, reuniones con involucrados Discusión de Evaluación Preliminar Informe Evaluación Culminación

9 PROCESO DE LA EVALUACIÓN RESULTADOS ACTIVIDADES PREPARATORIAS Preinversión Inversión Post Inversión Recopilación de información disponible Hitos del PIP Comparaciones Evaluación preliminar Ajuste marco lógico Enfoque del estudio Requerimientos de información adicional Alcance del estudio Estimación de recursos Planeamiento Selección del EEI Términos de referencia Proceso y contratación Orientaciones

10 LA EVALUACIÓN Medición de los resultados y efectos de un proyecto. Examen del proceso, factores que influyen y relaciones causales. Emisión de un juicio de valor sobre el proyecto Recomendaciones, Lecciones Aprendidas El nivel de logro de los insumos, las actividades, los componentes, el objetivo central, los fines directos e indirectos. Preinversión, Inversión Pertinencia, Eficiencia, Acciones concretas a alguien Utilización de los productos y logro del objetivo central e impactos esperados Eficacia, Enseñanzas generalizables y aplicables. Las relaciones causales entre el proyecto y sus efectos. Impacto, Sostenibilidad.

11 LA EVALUACIÓN MARCO LÓGICO E INDICADORES PIP Riego PIP Salud PIP Transportes Estructura de captación con capacidad de X l/s Canal principal de X ml Reservorio de X m 3 Área construida X m 2 Cantidad y tipo de equipamiento Nº de personal médico entrenado Nº de carriles Longitud de la vía Tipo de pavimento Componentes 1 Productos (capacidad instalada para producir bienes y servicios) Acciones Ejecución del PIP Insumos Tiempos, recursos humanos, fondos, etc.

12 LA EVALUACIÓN MARCO LÓGICO E INDICADORES Indicador PIP Riego PIP Salud PIP Transportes Beneficios directos 4 Utilización 3 Disponibilidad 2 Incremento en el volumen de producción agrícola TM por campaña Demanda anual de agua para riego X m 3 Nº de ha que se pueden regar Incremento en la cobertura de atención de partos Nº de atenciones, atendidos por año Nº de consultas externas que se puede dar Ahorro en tiempos de traslado h/viaje/año Ahorros en COV Volumen de tráfico IMD Nº de días transitables por año Propósito Beneficios Directos (efectos directos intencionales) Condiciones Externas Utilización de los bienes y servicios Demanda Disponibilidad de los productos (capacidad) Operación y Mantenimiento

13 LA EVALUACIÓN MARCO LÓGICO E INDICADORES Indicadores PIP Riego PIP Salud PIP Transportes Impactos indirectos positivos previstos Impactos directos previstos 6 5 Impactos indirectos negativos no previstos 6 Incremento en los ingresos promedio de los agricultores por campaña Incremento en el % de productos que se comercializan al año Salinización de suelos Nº ha % de enfermedades detectadas a tiempo Disminución de los gastos de bolsillo Infecciones intrahospitalarias Incremento en frecuencia traslados Mejora acceso a servicios Incremento de accidentes en los primeros años Fin último 6 5 Impactos indirectos (+ -) Condiciones Externas Impactos directos Condiciones Externas

14 EVALUACIÓN POR COMPARACIONES Comparación entre : Lo Planificado / lo Logrado (se necesita los valores objetivos) La situación Antes / Después del Proyecto (se necesita la línea base) La situación Con / Sin Proyecto (se necesita un grupo de control) Indicador Indicador Indicador Valor Objetivo Grupo de Control Línea Base Antes del Proyecto Después del Proyecto Antes del Proyecto Después del Proyecto Antes del Proyecto Después del Proyecto Comparación con los Estándares Establecidos y/o Promedio Nacional/Regional Comparación Temática

15 INSTRUMENTOS METODOLÓGICOS PARA LA EVALUACIÓN Contenidos Mínimos para la Evaluación de Culminación Contenidos Mínimos para el Seguimiento Ex Post Contenidos Mínimos para la Evaluación de Resultados Pautas de Orientación General para la Evaluación Ex Post Marco Conceptual y Metodología Pautas para Evaluación de Culminación Pautas para el Seguimiento Ex Post Pautas para Evaluación de Resultados Pautas de Orientación Sectorial para la Evaluación Ex Post Energía Saneamiento Salud Transportes

16 MuchasGracias