monitoreo y evaluación de proyectos de desarrollo_f
TRANSCRIPT
Curso-Taller Monitoreo y Evaluación de Proyectos de Desarrollo Desirée Jiménez Guimarey
Los/as participantes tienen los conceptos claros sobre monitoreo y evaluación y adquieren las habilidades para diseñar sistemas de monitoreo y evaluación de proceso.
Objetivo General
Los/as participantes comprenden las funciones y diferencias del los niveles de monitoreo y evaluación.
Los/as participantes desarrollan habilidades para diseñar metas, indicadores y preguntas que son la base para elaborar herramientas de recojo de información.
Objetivos Específicos
Temario
1
• Aspectos Teóricos-conceptuales • Proyectos de Desarrollo y el Ciclo del Proyecto. • ¿Qué es el monitoreo y/o seguimiento? ¿Qué es la
evaluación? • Monitoreo: Enfoque, Definición, Tipos y
características • Evaluación de Proyectos: Enfoque, Definición,
Tipos y características. • La importancia de la Línea de Base.
2
• Aspectos Metodológicos • Repaso Introductorio al Marco Lógico para el
diseño del proyecto. • Diseño de Indicadores y fuentes de Verificación. • Diseño de las matrices de organización del
sistema de Evaluación y Monitoreo. • Formulación de Instrumentos de Recojo de
Información. • Reportes de Monitoreo y Evaluación.
Metodología de trabajo
Grupo 1 Grupo 2 Grupo 3
Plenaria
Presentación de lo trabajado por cada
grupo con la finalidad de promover el
intercambio de opiniones y la reflexión
sobre los conocimiento y habilidades que se
buscan desarrollar
Docente
Expositor
•Presentar conceptos, definiciones, enfoques y metodologías.
•Plantear preguntas orientados que promuevan el intercambio de opiniones.
•Asistencia técnica durante el desarrollo de los trabajos de grupo.
Trabajo de grupos
Cada grupo
elabora un
producto
¿Qué es un Proyecto de Desarrollo?
Es una propuesta de cambio social que tiene tres características centrales:
Enfrentar un problema a resolver.
Definir un discurso de desarrollo (cambio social) que lo fundamente.
Beneficiar a terceras personas.
Definición de Proyecto de Desarollo
El proyecto de desarrollo es una hipótesis de acción, conformada por tres componentes que irán verificándose con la puesta en marcha del mismo:
Identificación del problema sobre el cual se va a intervenir.
Formulación de objetivos que se traducen en cambios.
Definición de estrategias de acción que permiten conseguir dichos cambios.
Otra característica importante
Los proyectos de desarrollo que impulsan las organizaciones son hipótesis de acción que, a partir de determinados enfoques de desarrollo, buscan cambiar o modificar una situación identificada como problema y, en virtud de los cuales, se intenta beneficiar a determinados sectores sociales rurales o urbanos.
A manera de conclusión…
Proyecto de Desarrollo
• Identificar el Problema.
• Formular los objetivos (qué queremos cambiar).
• Definir las estrategias de acción (cómo lo haremos).
La población Destinataria de los
Proyectos
Que ayuda a interpretar
Para identificar las HIPOTESIS DE
ACCION
Producto
Final
Diseñar un PROYECTO (con la Metodología del
Marco Lógico)
Definir un Enfoque de Desarrollo:
(Discursos sobre el cambio social)
Jerarquía Objetivos
Metas Indicad. Fuentes Verificac.
Supuestos
Fin
Propósito
Resultados
Acciones
El Ciclo del Proyecto de Desarrollo
Ciclo del Proyecto
IMPLEMENTACIÓN
DISEÑO EVALUACIÓN IMPLEMENTACIÓN DISEÑO
RETROALIMENTACION
MONITOREO
INFORMACIÓN PARA LA ELABORACIÓN DE NUEVOS PROYECTOS
Ciclo del Proyecto
IMPLEMENTACIÓN
DISEÑO
EVALUACIÓN IMPLEMENTACIÓN DISEÑO
* Enfoque de Desarrollo
* Jerarquía de Objetivos: - Fin
- Propósito
- Resultados
- Acciones
* Líneas de Acción o estrategias
* Presupuestos
* Evaluación Ex-ante
- Pertinencia - Coherencia
- Viabilidad
- Sostenibilidad - Impacto
* Diseño de la Línea de Base
* Diagnóstico Situacional: identificación del problema
* Evaluación Ex-Post:
GESTIÓN (Administrativo)
EJECUCIÓN (Programático)
- Dirección
- Organización
- Planificación de actividades y metas
- Control (monitoreo y evaluación de proceso)
-Capacitación
- Asistencia Técnica
- Apoyo a organizaciones
- Investigación aplicada
Plan Operativo
- Eficacia - Eficiencia - Efectos e impactos - Sostenibilidad
MONITOREO DE ACTIVIDADES
INFORMACIÓN PARA LA ELABORACIÓN DE NUEVOS PROYECTOS
Retroalimentación para mejorar la ejecución del proyecto
Sistemas de Información: Monitoreo y Evaluación
El monitoreo es una herramienta gerencial, destinada a verificar la ejecución de las actividades y el uso de los recursos que se plantearon en el momento del diseño del plan operativo del proyecto.
La evaluación es el proceso que busca
determinar los efectos y los impactos (esperados e inesperados) del proyecto, en relación a las metas definidas a nivel de Propósito y Resultados, tomando en consideración los Supuestos señalados en el marco lógico.
Definición de Monitoreo y Evaluación
Competencias del Monitoreo y de la Evaluación en relación a la Jerarquía de Objetivos del Marco Lógico
COLUMNA JERARQUÍA DE
OBJETIVOS
NIVELES DE CAMBIO
FIN
(Objetivo de desarrollo)
CAMBIO SOCIAL
No se elaboran indicadores
PROPÓSITO
(Objetivo General)
Problema Central
RESULTADOS
(Objetivo Específicos)
Causas del problema
ACCIÓN
(Actividades Principales)
IMPACTOS
EFECTOS
PRODUCTOS
Metas e Indicadores de impacto
(Sistemas de evaluación del proyecto)
Metas e Indicadores de efecto
(Sistema de evaluación del proyecto)
Metas e Indicadores de cumplimiento
(Sistemas de monitoreo del Proyecto)
HERRAMIENTAS DE TRABAJO
MONITOREO
Seguimiento de los productos conseguidos con las
actividades de acuerdo al Plan
Operativo y al Presupuesto
EVALUACION
Se evalúa el impacto y efecto producidos por las acciones
teniendo en cuenta las metas del proyecto
Capacitación técnica a jóvenes
Desarrollo de habilidades
técnicas
Acceso a empleo en mejores condiciones
Generación de ingresos
Cadena de Valor que ubica la competencia del Monitoreo y Evaluación
INSUMOS
Capacitación en buenas prácticas
alimenticias y controles prenatales
150 mujeres que han sido capacitadas en
prácticas alimenticias y
controles prenatales
Campañas de sensibilización sobre la importancia de la
educación
20 campañas de sensibilización
realizadas
100 alumnos matriculados en el
año escolar
Reducción de la
deserción escolar
Incremento de competencias (conocimientos y habilidades
) básicas desarrolladas en niños y niñas en edad escolar
EDUCACIÓN
150 mujeres que reducen los riesgos
en el periodo de gestación
150 mujeres que logran finalizar el embarazo con éxito
Reducción de la mortalidad infantil
SALUD
Actividades Meta de producto
Planificación Operativa
Meta de Efectos
Programáticas
Metas de Impacto Cambio Social
Visión
Estratégico
ACTIVIDADES PRODUCTOS RESULTADO INMEDIATO
RESULTADO INTERMEDIO
RESULTADO FINAL
MONITOREO EVALUACIÓN
Resultados u Objetivos Específicos
del Marco Lógico
Propósito u Objetivos General del Marco Lógico
FIN del Marco Lógico
Nivel de Acciones del Marco Lógico
Un paralelo entre…
MONITOREO EVALUACIÓN
OBJETIVOS QUE
PERSIGUEN
Dar información sobre el cumplimiento de la
planificación operativa, para hacer
correcciones.
Conocer los cambios (efectos e impactos)
logrados por el proyecto y compararlos con
los que éste se había propuesto.
ASPECTOS QUE
CONSIDERAN
Cumplimiento de actividades y tareas.
Logros de las metas que éstas se
propusieron.
Uso de recursos (materiales y financieros),
tiempo y beneficiarios.
Cumplimiento de toda la jerarquía de objetivos
en términos de pertinencia, eficacia,
eficiencia, impacto y sostenibilidad.
FRECUENCIA
SUGERIDA Semanal, Quincenal, Mensual. Trimestral, Semestral, Anual, Final.
FUENTES Informes producidos por el equipo del
proyecto.
Informes de monitoreo ,seguimiento de los
indicadores de efecto e impacto, información
externa y población directa o indirecta
RESPONSABLES Equipo de proyecto. Equipo de proyecto y/o especialistas, a veces,
destinatarios.
¿Qué se evalúa y qué se monitorea en un proyecto de desarrollo?
MARCO LÓGICO
JERARQUÍA DE OBJETIVOS
METAS INDICADORES FUENTES DE
VERIFICACIÓN SUPUESTOS
FIN OPCIONAL
PROPÓSITO IMPACTO
RESULTADOS EFECTO
ACCIONES PRODUCTO
EVALUACIÓN
MONITOREO
Sobre la Evaluación
Funciones principales de la Evaluación
La EVALUACIÓN es el proceso que busca determinar los efectos y los impactos (esperados e inesperados) de un programa o proyecto en relación a las metas de los objetivos planteados (Propósito y Resultados).
Así, la evaluación cumple tres funciones
fundamentales:
1. Analiza si las actividades desarrolladas
realmente permitieron obtener los efectos
propuestos, a partir de la información que
produce el monitoreo. (Resultados del
Marco Lógico)
2. Analiza si los resultados obtenidos
permitieron lograr algún nivel de impacto.
(Propósito del Marco Lógico)
3. Analiza, finalmente, si los resultados y
el propósito obtenidos resolvieron el o los
problemas del sector donde el proyecto se
involucra. (Sostenibilidad)
Momentos y Tipos de Evaluación
Tipos de Evaluación
TOMANDO COMO REFERENCIA
MOMENTO Y PROPÓSITO
Antes, durante y después
ACTORES Externa / Interna
Participativa / No participativa
TIPO DE INFORMACIÓN
Cualitativa, cuantitativa, mixta.
Momentos y Propósito en la Evaluación
LOS MOMENTOS EN LOS CUALES SE REALIZA LA EVALUACIÓN
ANTES Ex-ante
DURANTE Continua o de Proceso
Intermedia o de Efectos (Medio Término)
DESPUÉS Final o de Impacto
Expost o de Sostenibilidad
Criterios de evaluación
CRITERIOS DE EVALUACIÓN
EX ANTE PROCESO INTERMEDIA IMPACTO EXPOST
PERTINENCIA X X X X X
COHERENCIA X
EFICACIA X X X X
EFICIENCIA X X X X
VIABILIDAD X
IMPACTO X AVANCE AVANCE X X
SOSTENIBILIDAD X AVANCE AVANCE X X
1. EVALUACIÓN EX ANTE
Se realiza al diseño metodológico del proyecto. El objetivo de la evaluación es investigar si la
problemática fue identificada adecuadamente.
Permite ajustar todos los componentes del proyectos desde objetivos, metas, acciones.
Mejorar el diseño de la estrategia de intervención propuesta (actores, sinergias o alianzas, focalización, cobertura, líneas de acción, etc.).
Conocer la viabilidad económica y social del proyecto.
1. Evaluación Ex Ante
Criterios de Calidad para la Evaluación Ex Ante
PERTINENCIA
COHERENCIA
VIABILIDAD
SOSTENIBILIDAD
IMPACTO
Un proyecto es pertinente cuando los objetivos
propuestos responden a:
Necesidades de la población, sentidas y estratégicas.
(Diagnóstico de la realidad social)
Desafíos de Agenda Mundial de desarrollo.
(Objetivos del Milenio, Acuerdos y Tratados Internacionales)
Pertinencia
Este criterio se basa en analizar si existe:
Relación entre el problema identificado y el propósito del
proyecto.
Relación entre las causas priorizadas (a partir del análisis del problema) y los resultados.
Relación entre el fin y el propósito, el propósito y los resultados; entre los resultados y las acciones
Consistencia entre la propuesta de intervención y el presupuesto formulado.
Coherencia
Este criterio alude a la implementación del proyecto en la población destinataria en base a cinco características básicas:
Viabilidad
COMPRENSIBLE En su entorno cultural.
DESEABLE En el aspecto social (necesidades sentidas y estratégicas de la población.
MANEJABLE En términos de gestión del proyecto en manos de profesionales y con la participación de la propia comunidad.
ACEPTABLE En términos de la organización sociales existentes que se comprometen y asumen responsabilidades en la ejecución del proyecto.
FACTIBLE
En sus aspectos técnicos y términos económicos, cuánta población se va a beneficiar (COSTO-BENEFICIO) y cuáles son las mejores que trae el proyecto en las personas (COSTO EFECTIVIDAD).
Implica si proyecto deje establecida las
garantías para la continuidad del mismo, en
base a 4 aspectos relevantes:
Sostenibilidad
ECONOMICO Se articula al mercado.
MEDIO AMBIENTAL Recursos naturales garantizados para generaciones futuras.
SOCIAL Los cambios producidos y estrategias implementadas son apropiadas por la población.
POLITICO En el modelo y estrategia del proyecto forma parte de una política pública a nivel local, regional y nacional.
Alude al cambio principal que esperamos alcanzar con la ejecución del proyecto y en virtud del cual conoceremos en qué medida el proyecto, de acuerdo al tema planteado, ha logrado mejorar la calidad de vida de los grupos destinatarios, y contribuir al desarrollo de esa población.
Impacto
En la evaluación ex ante, busca analizar si es posible conseguir el propósito (impacto) del proyecto (basándose en estudio de factibilidad) como escenario proyectado.
El impacto suele hacerse visible y medible luego de concluido el proyecto o después de un tiempo de haber finalizado su intervención.
Impacto
2.EVALUACIÓN DE PROCESO O CONTINUA
El objetivo de la evaluación es verificar el avance del cumplimiento de las metas de los objetivos del proyecto (Resultados y Propósito).
Recomienda mejoras o cambios a nivel de estrategias y
actividades.
Incluye recomendaciones al desempeño del personal y la gestión del proyecto.
Se realiza durante la ejecución por el equipo del
proyecto.
2.Evaluación de Proceso o Continua (Monitoreo de impacto)
3.EVALUACIÓN INTERMEDIA O DE
EFECTOS
Se realiza durante la ejecución por un agente externo, a mitad de período o podría realizarse anualmente.
3.Evaluación Intermedia o de Efectos (Medio Término)
4.EVALUACIÓN DE IMPACTO
El objetivo de la evaluación es verificar si el problema identificado fue resuelto, midiendo la calidad de los resultados y situaciones finales (pertinencia, eficiencia, eficacia, impacto y sostenibilidad).
Deriva conclusiones para proyectos similares, mediante
lecciones aprendidas y factores de éxito.
Se realiza al término de proyecto, por agentes
externos.
4.Evaluación de Impacto o Final
Criterios de Calidad para la Evaluación de Impacto
CRITERIOS DEFINICIÓN PREGUNTAS
PERTINENCIA La correspondencia entre los objetivos
definidos y los problemas que se evidencian
en la población beneficiaria.
•¿En qué medida cumplir estos objetivos
contribuyen a resolver los problemas
identificados?
EFICACIA
El grado o nivel en que se cumplen los
objetivos. Es importante constatar si los
cambios se llevaron a cabo gracias a las
acciones del proyecto o a factores externos.
•¿Se están alcanzando las metas
propuestas?
•¿Es posible atribuir el logro de las metas a la
intervención del proyecto?
EFICIENCIA La manera en que se han usado y
organizado los recursos humanos,
materiales y financieros.
•¿Cuánto costó lograr las metas? (análisis de
costo-beneficio)
•¿Los recursos fueron provistos y usados de
la manera más adecuada?
IMPACTO
Conocer el cambio o transformación
conseguido con las estrategias y acciones
del proyecto, y que han permitido solucionar
el problema central identificado.
• ¿Cuál es la magnitud de los logros
alcanzados en la solución del problema
central que afecta a la población
destinataria?.
SOSTENIBILIDAD La vigencia de los cambios obtenidos en la
población objetivo del proyecto.
•¿La población objetivo cuenta con las
capacidades, conocimientos y habilidades
para mantener los cambios logrados?
5.EVALUACIÓN EX POST
El objetivo de la evaluación es verificar el impacto del proyecto permanece en el tiempo.
Confronta resultados de la evaluación final para ver cuáles se “sostienen” y qué otros efectos o impactos se han derivado de ellos.
Es útil para la toma de decisiones sobre la replicabilidad del proyecto.
Se realiza años después de finalizado el
proyecto, por agentes externos.
5.Evaluación Ex Post
Actores involucrados
TIPOS DE ACTORES INVOLUCRADOS
Externa / Interna
Participativa / No – participativa
Tipo de información
TIPOS DE INFORMACIÓN QUE SE MANEJA
Cuantitativa
Cualitativa
Mixta
Línea de Base
Línea Base
Es la situación inicial o punto de partida en la cual se encuentra la población objetivo de un proyecto.
La información que recoge la línea de base está directamente relacionada y depende de los objetivos, metas e indicadores del proyecto de desarrollo.
Sirve como parámetro comparativo para las futuras mediciones que se realizarán al proyecto.
LINEA DE BASE
Metodología para diseñar sistemas de
monitoreo y evaluación
Flujograma OBJETIVOS (Propósito y Resultados), ACCIONES
METAS por cada NIVEL
INSTRUMENTOS
INDICADORES DE IMPACTO,
EFECTO O PRODUCTO
PREGUNTAS O ITEMS DE REGISTRO
RECOJO DE INFORMACION
BASE DE DATOS
ANALISIS DE INFORMACION
REPORTES
ASPECTOS o VARIABLES (Idea fuerza del Cambio enunciado en el Objetivo) SOLO PARA EL NIVEL DE EVALUACIÓN. Diseño metodológico del
sistema de monitoreo y evaluación
Trabajo de campo y procesamiento
ELABORACIÓN DE INFORMES E & M (Toma de Decisiones)
Marco Lógico Diseño muestral para el caso de evaluación
Matrices de Organización del Nivel de Evaluación
y Monitoreo
Matriz de Organización del Nivel de Evaluación
PROPÓSITO Y
RESULTADOS DEL MARCO
LÓGICO
METAS DE PROPÓSITO Y
DE RESULTADOS
INDICADORES DE IMPACTO O
EFECTO
DEFINICIÓN DEL
INDICADOR (SIGNIFICADO)
FUENTE DE VERIFICACIÓN
PARA CADA INDICADOR
INSTRUMEN-TO PARA EL RECOJO DE
INFORMACIÓN
FRE-CUEN-
CIA
PREGUNTA(S) QUE SE
ORIGINA DE CADA
INDICADOR O ITEM DE
REGISTRO
SALEN DEL
MARCO LÓGICO
FORMULACIÓN A PARTIR DE LOS INDICADORES DEL
MARCO LÓGICO
Matriz de Organización del Nivel de Monitoreo
RESULTA-
DOS DEL MARCO LÓGICO
ACCIONES DE CADA
RESULTADO
METAS POR CADA
ACTIVI-DAD
INDICADO-RES DE
PRODUCTO O
MONITOREO
DEFINICIÓN DEL INDICADOR (SIGNIFICADO )
FUENTE DE VERIFICACIÓN
PARA CADA INDICADOR
INSTRUMEN-TO PARA EL RECOJO DE
INFORMACIÓN
FRE-CUEN-
CIA
PREGUNTA(S) QUE SE
ORIGINA DE CADA
INDICADOR O ITEM DE
REGISTRO
SALEN DEL
MARCO LÓGICO
FORMULACIÓN A PARTIR DE LOS INDICADORES DEL
MARCO LÓGICO
¿De dónde sale la información para organizar el Sistema de
Evaluación?
PROPÓSITO
RESULTADOS DEL MARCO
LÓGICO
METAS DE PROPÓSITO Y
DE RESULTADOS
INDICADORES DE IMPACTO O
EFECTO
DEFINICIÓN DEL
INDICADOR (SIGNIFICADO )
FUENTE DE VERIFICACIÓN
PARA CADA INDICADOR
INSTRUMEN-TO PARA EL RECOJO DE
INFORMACIÓN
FRE-CUEN-
CIA
PREGUNTA(S) QUE SE
ORIGINA DE CADA
INDICADOR O ITEM DE
REGISTRO
Jerarquía Objetivos
Metas Indicad. Fuentes Verificac.
Supuestos
Fin
Propósito
Resultados
Acciones
MARCO LÓGICO
MATRIZ DE ORGANIZACIÓN DEL SISTEMA DE EVALUACIÓN
Instrumentos necesarios para la organización del sistema de EVALUACIÓN
¿De dónde sale la información para organizar el Sistema de
Monitoreo?
RESULTADOS DEL MARCO
LÓGICO
ACTIVIDA-DES DEL
PLAN OPERATI-
VO
METAS POR CADA
ACTIVIDAD
INDICADORES DE PRODUCTO O MONITOREO
DEFINICIÓN DEL
INDICADOR (SIGNIFICAD
O )
FUENTE DE VERIFICA-CIÓN PARA
CADA INDICADOR
INSTRUMEN-TO PARA EL RECOJO DE INFORMACI
ÓN
FRE-CUEN-
CIA
PREGUNTA(S) QUE SE
ORIGINA DE CADA
INDICADOR O ITEM DE REGISTRO
Jerarquía Objetivos
Metas Indicad. Fuentes Verificac.
Supuestos
Fin
Propósito
Resultados
Acciones
MARCO LÓGICO
MATRIZ DE ORGANIZACIÓN DEL SISTEMA DE MONITOREO
Instrumentos necesarios para la organización del sistema de MONITOREO
PLAN OPERATIVO ANUAL
Cod. Nombre de actividades y
tareas
Meta según Marco Lógico por actividad
Indicador de Producto o Monitoreo
Costo Total
US$
Fecha Inicio
Fecha Termino
Responsable
1. Resultado del Marco Lógico
1.1. Actividad
1.1.1. Tareas
Para iniciar la elaboración de las matrices presentadas, un
primer paso es el DISEÑO DE METAS,
INDICADORES Y FUENTES DE VERIFICACIÓN
(2da. 3era y 4ta. columna del Marco Lógico)
Definición: Son los logros cuantificables al final de un
proceso que contienen los criterios de: Cantidad
Calidad
Tiempo
Las Metas: ¿qué son? (Segunda Columna del Marco Lógico)
Propósito del Marco Lógico
Metas de evaluación del Marco Lógico
Las niñas y niños menores de tres
años en situación de riesgo
acceden a condiciones favorables
para su salud.
100% (cantidad) de las niñas y niños
atendidos muestran una menor
recurrencia de enfermedades (calidad)
al final del proyecto (tiempo).
Definición: Son medidas específicas (unidad de medida)
que señalan la información que se necesita recoger en determinada realidad, persona o documento para conocer el progreso alcanzado en el cumplimiento de las metas propuestas para cada nivel de la Jerarquía de Objetivos del marco lógico.
Los Indicadores: ¿qué son? (Tercera Columna del Marco Lógico)
Ejemplo:
Los Indicadores
Propósito del Marco Lógico
Metas de evaluación del Marco Lógico
Indicador de impacto del
Marco Lógico
Las niñas y niños
menores de tres años
en situación de riesgo
acceden a
condiciones
favorables para su
salud.
100% (cantidad) de las
niñas y niños atendidos
muestran una menor
recurrencia de
enfermedades (calidad)
al final del proyecto
(tiempo).
% de niños y niñas que
adquieren EDA e IRA.
Competencia y/o función de las metas e indicadores
METAS INDICADORES
Conocer y comprobar si el proyecto es eficaz o no.
Otorgar información para saber y comprobar si la meta se ha cumplido o no.
Para objetivos que aluden a cambios sociales es altamente probable que se requieran un conjunto de metas y por cada meta un conjunto de indicadores.
Ejemplo:
Objetivo con meta y más de un indicador
Resultado 1 del Marco Lógico
Metas de evaluación del Marco Lógico
Indicadores de impacto y efecto del Marco Lógico
Las familias fortalecen su
cultura de crianza e
incorporan la propuesta
del Programa.
60% (cantidad) de los
padres y madres de familia,
cuyos hijos participan en el
Programa, aplican
periódicamente prácticas
positivas de crianza
(calidad) al tercer año del
proyecto (tiempo).
% de niñas y niños que
asisten aseados al
programa.
% de padres y madres que
incorporan alimentos
nutritivos y debidamente
preparados en la dieta de
las niñas y niños.
% de padres y madres que
cumplen con el control de
salud periódico de las niñas
y niños.
Definición: Las fuentes de verificación son los medios a
través de los cuales podremos constatar, conocer y verificar el cumplimiento de las metas establecidas en la Jerarquía de Objetivos (Propósito, Resultados y Acciones).
Existen dos tipos de fuentes:
Primarias Secundarias
Fuentes de verificación (Cuarta Columna del Marco Lógico)
Fuentes de Información e Instrumentos para la Línea de Base, Monitoreo y Evaluación:
FUENTES DE INFORMACIÓN INSTRUMENTOS
Primarias (personas):
agricultores, familias
campesinas, jóvenes,
mujeres, niños y
niñas vulnerables,
etc.
Dependiendo del tamaño de
la población objetivo y de los
recursos con los que cuenten
se podrá establecer un diseño
muestral representativo y
generalizable por principios
estadísticos.
- Encuesta
- Entrevistas en
profundidad
- Entrevistas semi-
estructuradas
- Guías de observación
participante
- Grupos focales
- Talleres participativos
Es importante la combinación de
técnicas e instrumentos
cuantitativos y cualitativos en
fuentes primarias para el
levantamiento de línea de base.
La información cualitativa que se
recoja a través de grupos focales,
talleres participativos, entrevistas en
profundidad permitirá complementar
el análisis interpretativo de los datos
cuantitativos encontrados.
Secundarias (documentos,
espacios): censos,
encuestas anteriores,
estadísticas oficiales,
estudios o
diagnósticos
situacionales previos.
No se necesita un tamaño
muestral. Sin embargo, es de
vital importancia identificar
claramente cuáles serán los
documentos o espacios
donde deberán analizar la
información requerida por la
línea de base.
- Ficha de registro de
información
secundaria
- Guías de observación
- Ficha de revisión de
bibliografía
- Revisión y análisis de
bases de datos
El trabajo con fuentes secundarias
permitirá contar con una
sistematización de información
cuantitativa y cualitativa.
Esta servirá para establecer puntos
de partida, así como contar con
información histórica para aquellos
indicadores que así lo requieran.
Objetivo: Qué busco cambiar o modificar.
Meta: Cómo compruebo que el cambio se logró.
Indicador: Cómo voy a medir el cumplimiento de la meta.
Fuente: Dónde obtengo la información para aplicar mi indicador y comprobar el cumplimiento de la meta.
Acciones: Qué debo hacer para alcanzar mis metas y objetivos.
A manera de conclusión…
¿Cómo construir metas e indicadores?
Proceso de Formulación de Metas por cada nivel de la columna de Jerarquía de Objetivos
PROPOSITOS, RESULTADOS Y
ACCIONES
Definir la idea fuerza o variable que señala el cambio para poder elaborar las metas
Resultado Idea Fuerza o Variable
Conceptualización sobre la cual se
construyen las metas
Metas (con criterios de cantidad, calidad
y tiempo)
Mejorar las condiciones educativas y de desarrollo de los niños y niñas que trabajan.
Mejorar las condiciones educativas y de desarrollo
Desarrollar conocimientos y habilidades en razonamiento matemático que les permitan un mejor desempeño en clases.
80% (cantidad) de niños y niñas desarrollan conocimientos y habilidades en razonamiento matemático (calidad), de acuerdo al año que cursan, al final del proyecto (tiempo) .
Identificar en esos niveles las ideas fuerza o variables que aluden al cambio y que
servirán para la elaboración de las metas
¿Cómo sabemos que mejoran sus condiciones educativas y de
desarrollo ?
Proceso de Formulación de Indicadores por cada Meta de Propósito y Resultados - Nivel Evaluación
METAS PROPOSITO Y RESULTADOS
Conceptualizar la idea fuerza o variable que señala el cambio
Solo cuando existe una diferenciación entre medios y fines
Identificar en esos niveles las ideas fuerza o variables que aluden al cambio en las metas
y que servirán para la elaboración de los indicadores
¿Cómo saber que desarrollan conocimientos y habilidades en
razonamiento matemático?
Meta Idea
Fuerza o Variable
Conceptualización sobre la cual se construyen los
indicadores Indicadores
80% de niños y niñas desarrollan conocimientos y habilidades en razonamiento matemático, de acuerdo al año que cursan, al final del proyecto.
Desarrollar conocimientos y habilidades
en razonamiento matemático
Realizar operaciones matemáticas de acuerdo al nivel del año escolar
en que se encuentran.
% niños y niñas que realizan operaciones matemáticas de acuerdo al nivel del año escolar en que se encuentran.
Tipo de metas e indicadores de acuerdo a la jerarquía de objetivos del proyecto
COLUMNA JERARQUÍA DE
OBJETIVOS
TIPOS SEGÚN NIVEL
Contribuir a mejorar las condiciones de vida de los pequeños productores rurales en el Norte del Perú
CAMBIO SOCIAL
Incremento del ingreso de pequeños productores rurales en el Norte del Perú dentro de cadenas de valor seleccionadas
R1: Se ha favorecido la relación comercial inclusiva dentro de la cadena de actores
Capacitación en gestión comercial y marketing.
IMPACTOS
EFECTOS
PRODUCTOS
Metas e Indicadores de impacto (Sistemas de evaluación del proyecto)
Metas e Indicadores de efecto (Sistema de evaluación del proyecto)
Metas e Indicadores de cumplimiento (Sistemas de monitoreo del Proyecto)
EJEMPLOS
Al 2012, 400 unidades productivas rurales atendidas por el Proyecto están relacionadas con el mercado a través de cadenas de valor
N° de unidades productivas rurales que posicionan y venden sus productos en el mercado a través de las cadenas de valor.
30% de las unidades productivas atendidas incrementan el total del volumen de sus ventas dentro de las cuatro cadenas de valor al final del proyecto.
% de productos vendidos.
% ingresos recibidos.
METAS INDICADORES
No se elaboran indicadores
Al final del proyecto, 15 miembros de los equipos gerenciales encargados de la comercialización son capacitados.
N° de miembros capacitados.
TAREA 1 Formulando
Metas e Indicadores
Tarea 1
EFECTO o IMPACTOS (Evaluación)
Jerarquía
de Objetivos
Idea fuerza del
cambio enunciado
en el objetivo
Conceptuali-
zación
Meta(s) del
Propósito o de
los Resultados
Idea fuerza del
cambio
enunciado en el
objetivo
Conceptuali
-zación Indicadores
PRODUCTOS (Monitoreo)
Actividades
Idea fuerza del
cambio enunciado
de las actividades
Conceptuali-
zación
Meta(s) de las
actividades
Idea fuerza de la
meta de las
actividades
Conceptuali-
zación Indicadores
TAREA 2 Organizando el Sistema de
Monitoreo y Evaluación
Tarea 2
Matriz de Organización del Sistema de Evaluación
Propósito /
Resultados
del Marco
Lógico
Metas
Indicadores
de Impacto
o Efecto
Definición del
indicador
Fuente de
verificación
para cada
indicador
Instrumento
para el recojo
de
información
Frecuencia
Pregunta(s) que
se origina de
cada indicador o
ítem de registro
Matriz de Organización del Sistema de Monitoreo
Propósito /
Resultados
del Marco
Lógico
Acciones
de cada
resultado
Metas
por cada
actividad
Indicado-
res de
producto o
monitoreo
Definición
del
indicador
Fuente de
verificación
para cada
indicador
Instrumento
para el
recojo de
información
Frecuencia
Pregunta(s) que
se origina de
cada indicador o
ítem de registro
Tarea 2 MATRIZ DE EVALUACIÓN
PROPÓSITO
RESULTADOS DEL MARCO
LÓGICO
METAS DE PROPÓSITO Y
DE RESULTADOS
INDICADORES DE IMPACTO O EFECTO
DEFINICIÓN DEL INDICADOR
(SIGNIFICADO )
FUENTE DE VERIFICACIÓN
PARA CADA INDICADOR
INSTRUMEN-TO PARA EL
RECOJO DE INFORMACIÓN
FRE-CUEN-
CIA
PREGUNTA(S) QUE SE
ORIGINA DE CADA
INDICADOR O ITEM DE
REGISTRO
Las familias
fortalecen su
cultura de
crianza e
incorporan la
propuesta del
Programa.
100%
(cantidad) de
los padres y
madres, cuyos
hijos participan
en el programa
reconocen las
prácticas de
crianza
positivas
(calidad), al
final del
proyecto
(tiempo).
% de padres y
madres de familia
que identifican y
entienden la
importancia de los
hábitos para de
crianza adecuados.
Cantidad de
padres y madres
que adquieren
conocimientos en
relación a la
importancia,
beneficios y
acciones
específicas que
permiten aplicar
hábitos de crianza
adecuados.
Madres y padres
usuarios
Entrevista Semi-
estructurada
Anual
¿Qué entiende
por hábitos de
crianza?
¿Cuáles son los
principales
hábitos de
crianza que
recuerda?
-Cercanía
afectiva
-Normas claras
-No uso
violencia
¿Por qué son
importantes?
¿Qué beneficios
obtienen
cuando aplican
estos hábitos de
crianza en sus
hijos y hogares?
Diseño de Instrumentos de Recojo de Información
Flujograma OBJETIVOS (Propósito y Resultados), ACCIONES
METAS por cada NIVEL
INSTRUMENTOS
INDICADORES DE IMPACTO,
EFECTO O PRODUCTO
PREGUNTAS O ITEMS DE REGISTRO
RECOJO DE INFORMACION
BASE DE DATOS
ANALISIS DE INFORMACION
REPORTES
ASPECTOS o VARIABLES (Idea fuerza del Cambio enunciado en el Objetivo) SOLO PARA EL NIVEL DE EVALUACIÓN. Diseño metodológico del
sistema de monitoreo y evaluación
Trabajo de campo y procesamiento
Marco Lógico Diseño muestral para el caso de evaluación
ELABORACIÓN DE INFORMES E & M (Toma de Decisiones)
Pasos para la construcción de Instrumentos de Recolección de Información
Paso 1
Objetivos de Acción
Indicadores de Impacto,
Efecto o Producto
Metas
Identificación de las Fuentes e Instrumentos
Fuentes de Información
Instrumento
Cuestionario / Encuesta
Ficha de Registro de información secundaria
Guía de Entrevista Semi-estructurada
En la Matriz de Organización del Sistema del Nivel de Evaluación
MATRIZ DE EVALUACIÓN PROPÓSITO
RESULTA-DOS DEL MARCO LÓGICO
METAS DE PROPÓSITO
Y DE RESULTA-
DOS
INDICADORES DE IMPACTO O EFECTO
DEFINICIÓN DEL INDICADOR (SIGNIFICADO
)
FUENTE DE VERIFICA-CIÓN PARA
CADA INDICADOR
INSTRUMEN-TO PARA EL RECOJO DE INFORMA-
CIÓN
FRECUE-NCIA
PREGUNTA(S) QUE SE ORIGINA DE CADA
INDICADOR O ITEM DE REGISTRO
Las familias fortalecen su
cultura de crianza e
incorporan la propuesta del
Programa.
100% de los padres y
madres, cuyos hijos
participan en el programa
reconocen las prácticas de
crianza positivas.
% de padres y madres de familia que identifican y
entienden la importancia de los hábitos para de crianza
adecuados.
Cantidad de padres y madres que adquieren conocimientos en relación a la importancia,
beneficios y acciones específicas que permiten aplicar hábitos de crianza
adecuados..
Padres y/o Madres
Semi-Estructurada
Semestral
¿Qué entiende por hábitos de crianza?
¿Cuáles son los principales hábitos de crianza que recuerda?
-Cercanía afectiva
-Normas claras
-No uso violencia
¿Por qué son importantes?
¿Qué beneficios obtienen cuando aplican estos hábitos de crianza en sus hijos y hogares?
60% de los padres
madres, cuyos hijos
participan en el Programa
aplican periódicamente prácticas positivas de
crianza.
% de padres y madres que cumplen con el control de
salud periódico de las niñas y niños.
Cantidad de padres y madres de familia que llevan a sus
hijos al control de talla, peso y vacunas periódico.
Hoja de CRED de cada niño y
niña
Ficha de control o Registro
Semestral
Talla y peso de las niñas niños
Alimentos frecuentes de consumo
% de padres y madres que incorporan alimentos
nutritivos y debidamente preparados en la dieta de las
niñas y niños.
Cantidad de padres y/o madres que suministran
adecuadamente (limpieza y cuidado tanto en la
preparación de los alimentos como en el momento de
ingerirlos) por lo menos tres comidas diarias (Cantidad)
que incorpore el tipo de alimentos requeridos para una dieta balanceada de las niñas
y niños usuarios del programa.
Padres y/o Madres
Semi-Estructurada
Semestral
¿Cuantas comidas injieren los niños y niñas al día?
- Una comida
- Dos comidas
- Tres comidas
- Otro: especificar
Antes de comer, ¿los niños o niñas se lavan las manos? – SI o NO
¿Por qué?
¿Su dieta incorpora?:
- Lácteos - Carnes - Frutas
- Cereales – Huevo - Otros: Especificar
Pasos para la construcción de Instrumentos de Recolección de Información
Paso 2
Ordenar por Instrumento y por Fuente de Información
TABLA 2
FUENTE: Padres / Madres INSTRUMENTO: Entrevista Semi-Estructurada
Indicador de Impacto, Efecto o Producto (si es de monitoreo) Pregunta o Ítem de Registro
% de padres y madres de familia que identifican y entienden la importancia de los hábitos para de crianza adecuados.
¿Qué entiende por hábitos de crianza?
¿Cuáles son los principales hábitos de crianza que recuerda?
-Cercanía afectiva
-Normas claras
-No uso violencia
¿Por qué son importantes?
¿Qué beneficios obtienen cuando aplican estos hábitos de crianza en sus hijos y hogares?
% de padres y madres que incorporan alimentos nutritivos y debidamente preparados en la dieta de las niñas y niños.
•¿Cuantas comidas injieren los niños y niñas al día?
- Una comida
- Dos comidas
- Tres comidas
- Otro: especificar
•Antes de comer, ¿los niños o niñas se lavan las manos? SI o NO ¿Por qué?
•¿Su dieta incorpora?: Lácteos - Carnes – Frutas - Cereales – Huevo - Otros: Especificar
Procedimiento para definir el Paso 2: Ordenar por Instrumento y por Fuente de Información
Paso 2
¿Cómo se debe llenar la tabla 2 para diseñar instrumentos? recapitulando
PROCESAMIENTO EJEMPLO
Identificar una misma fuente de verificación. Padres y/o Madres
(Fuente Primaria)
Señalar el instrumento definido para dicha fuente.
Encuesta Semi Estructurada
Transcribir todos los indicadores que correspondan a dicha fuente e instrumentos
% de padres y madres que incorporan alimentos nutritivos y debidamente preparados en la dieta de las niñas y niños.
Señalar las preguntas formuladas por cada indicador.
•¿Cuantas comidas injieren los niños y niñas al día?
- Una comida
- Dos comidas
- Tres comidas
- Otro: especificar
•Antes de comer, ¿los niños o niñas se lavan las manos? SI o NO ¿Por qué?
•¿Su dieta incorpora?: Lácteos - Carnes – Frutas - Cereales – Huevo - Otros: Especificar
D
C
B
A
Diseñar el formato del Instrumento
Paso 3
Definir preguntas o Items de registro . 1. Ordenar los indicadores de acuerdo a una secuencia lógica 2. Buscar opciones de respuesta en caso de preguntas cerradas 3. Filtros y saltos: aquella información que hace omitir algunas preguntas. 4. Casilleros de registro: tomar en cuenta el tamaño, ubicación. 5. Ayudas o recordatorios: precisiones de apoyo para el momento de recolección de información. 6. Confección del instrumento: formato final
INDICADOR PREGUNTA O
ITEM DE REGISTRO
POSIBLES RESPUESTAS
(cerradas - poner alternativas – abiertas)
FILTROS Y SALTOS
AYUDAS O RECORDATORIOS
% de padres y madres que incorporan alimentos nutritivos y debidamente preparados en la dieta de las niñas y niños.
•¿Cuantas comidas injieren los niños y niñas al día?
•Una comida
• Dos comidas
• Tres comidas
• Otro: __________
Si la rpta. es OTRO, señale el número de comidas y pase a la siguiente pregunta.
Si el entrevistado es hombre, obviar esta pregunta.
Algunos ejemplos del Formato de Instrumentos de recojo de
información
Entrevista Semi-Estructurada
Lista de Verificación
Grupo Focal
Entrevista en Profundidad
Siguientes pasos…
Paso 4
Prueba de Instrumento.
INSTRUMENTOS LUGAR DE
APLICACIÓN RESPONSABLES
CRONOGRAMA
FUENTES DE INFORMACIÓN
EQUIPO Y MATERIAL
REQUERIDO
1
DÍA/
SEM
2
DÍA/SE
M
3
DÍA
/SE
M
4
DÍA/
SEM
5
DÍA/
SEM
Responsables:
Paso 5
Ajuste de Instrumento.
Paso 6
Dónde: Lugar de Aplicación Quiénes reúnen la información: Responsables Cuándo: (plazos y horarios) Fuentes de Información que visitan o revisan Equipo y material requerido Instrucciones y recomendaciones
Plan de Trabajo.
Flujograma OBJETIVOS (Propósito y Resultados), ACCIONES
METAS por cada NIVEL
INSTRUMENTOS
INDICADORES DE IMPACTO,
EFECTO O PRODUCTO
PREGUNTAS O ITEMS DE REGISTRO
RECOJO DE INFORMACION
BASE DE DATOS
ANALISIS DE INFORMACION
REPORTES
ASPECTOS o VARIABLES (Idea fuerza del Cambio enunciado en el Objetivo) SOLO PARA EL NIVEL DE EVALUACIÓN. Diseño metodológico del
sistema de monitoreo y evaluación
Trabajo de campo y procesamiento
Marco Lógico Diseño muestral para el caso de evaluación
ELABORACIÓN DE INFORMES E & M (Toma de Decisiones)
Procesamiento de Información recogida para el Sistema de
Monitoreo y Evaluación
Con la aplicación de los instrumentos durante el trabajo de campo se obtendrá determinada información (cuantitativa y/o cualitativa) que deberá ser procesada y analizada para establecer los logros en relación a las metas del nivel de evaluación y monitoreo.
Procesamiento de la Información
A. Revisión y codificación de los instrumentos aplicados.
B. Digitación y consistencia de las bases de datos con la información ingresada.
C. Emisión de reportes de evaluación y monitoreo.
D. Elaboración del Documento de Evaluación o Informe de Monitoreo.
Etapas en el Procesamiento de la Información
Procesamiento de la Información Recogida y Emisión de Reportes o Informes
Información Recogida
Codificación y Digitación en Base de Datos
Reportes De acuerdo a instrumentos
diseñados
•Estructurada en base a la tabla de indicadores y la formula de cálculo de las metas.
•Uso de softwares, paquete estadístico u hojas de cálculo para la información cuantitativa.
• Uso de procesadores cualitativos
Objetivo
Línea de Base
AÑO 0
Sistema de Información
EVALUACION
Resultado
de Impacto Indicador Año 1 Año 2
Estrategia
Acciones Sistema de Información
MONITOREO
Meta Indicador Trimestre
1
Trimestre
2
1
2
3
Tipos de Reporte de Monitoreo y Evaluación
Reporte del Sistema de Información: Nivel Evaluación con información de línea de base.
RESULTADO
DEL MARCO
LÓGICO
INDICADOR
DEFINICIÓN
DEL
INDICADOR
LÍNEA DE BASE LOGROS
AÑO VALOR
2010 2011
Planificado Ejecutado Planificado Ejecutado
El 80% de las
organizaciones
turísticas
gestionan
eficiente y
eficazmente
los recursos y
servicios que
ofrecen al final
2012.
% de
organizaciones
turísticas
formalizadas
que manejan
planes de
trabajo de
acuerdo a un
presupuesto
anual.
Solo se considerará
como un caso a la
organización
turística que tiene
estatutos vigentes y
RUC o RUS y
además cuentan
con planes y
presupuestos
anuales
articulados/100 y
segmentada por
tipo de servicios y
productos que
ofrece.
2009 10% 30% 40% 70% --
Modelos de Informes
Informe de Evaluación (semestral o anual)
Área de la Unidad: (Número o código) Nombre de la Unidad: _________________
Objetivo: (Número o código) Nombre del objetivo: _________________ Componente: _________________ Área Responsable: Resultados alcanzados: (Indicar el nivel de logro de cada uno de los resultados alcanzados para el componente y/u objetivo referido. Asimismo, se debe presentar la interpretación de los datos, haciendo la diferencia entre lo programa y lo ejecutado). Detalle logros cualitativos: (Señalar el detalle cualitativo de los resultados alcanzados, de manera complementaria a la información cuantitativa presentada). Problemas presentados y Causas: (Señalar los problemas que se evidenciaron en la etapa evaluada y a qué factores se debieron). Medidas correctivas: (Indicar las medidas correctivas sugeridas y las implementadas para superar los problemas presentados, poniendo énfasis en la capacidad de los agentes de resolver las dificultades).
Informe de Monitoreo Área: (Número o código) Nombre del área:
Actividad: (Número o código) Nombre de la actividad: Calendario Fecha de Inicio estimada: dd/mm/aa Duración Estimada: dd/mm/aa
Responsable: Descripción de las Actividades y Tareas: (Indicar en que constó la actividad y las respectivas tareas que se ejecutaron en el periodo relacionándolas con las metas, plazos y recursos destinados para cada una de ellas). Avance o Cumplimiento de Metas en relación al Plan Operativo Anual (POA): (Señalar en términos cuantitativos el logro o avance de las metas correspondientes de acuerdo al POA). Observaciones/Dificultades encontradas: (Señalar las dificultades encontradas o situaciones imprevistas indicando en qué manera afectaron a las actividades planificadas del período y qué cambios podrían originar en el siguiente). Acciones planificadas para el siguiente periodo: (Indicar las acciones correspondientes al siguiente período teniendo en consideración el POA. En caso de posibles modificaciones estas deberán ser fundamentadas).
¡¡Muchas Gracias!!