Evaluación de Evaluación de proyectos socialesproyectos sociales

PROYECTOS SOCIALES

OBJETIVO DE LA EVALUACION

“ La Evaluación es una función que consiste en hacer una apreciación tan sistemática y objetiva como sea posible sobre un proyecto [por realizarse] en curso o acabado, un programa o un conjunto de líneas de acción, su concepción, su realización y sus resultados. Se trata de determinar la pertinencia de sus objetivos y su grado de realización, la eficiencia en cuanto a la acción social, la eficacia, el impacto y la viabilidad. Una evaluación debe proporcionar unas informaciones creíbles y útiles, que permitan integrar las enseñanzas sacadas en los mecanismos de elaboración de las decisiones.” *

DEFINICIÓN

* GUÍA DE EVALUACIÓN DE PROGRAMAS Y PROYECTOS SOCIALES

Características de la Evaluación

1.- Carácter útil y práctico2.- Sistematicidad durante todo el proceso de evaluación3.- Necesidad de flexibilidad4.- Ajuste a los plazos temporales5.- La evaluación se centra en el análisis de políticas, planes, programas y proyectos6.- Emisión de juicios de valor7.- Realización antes, durante o con posterioridad a la ejecución8.- Variabilidad del objeto de evaluación9.- Criterios de evaluación

I.- La retroalimentación o mejora (improvement) de los proyectos o acciones ejecutadas o en ejecución.

II. El aprovechamiento de las experiencias del pasado para actividades futuras (enlightenment), y

III. La rendición de cuentas (accountability) hacia los financiadores, la opinión públicay todos aquellos implicados en los procesos de acción social.

FUNCIONES DE LA EVALUACIÓN

CONCEPTO DE EVALUACIÓN RECOPILACIÓN Y ANÁLISIS SISTEMÁTICO DE INFORMACIÓN QUE PERMITE LA EMISIÓN DE JUICIOS – TAMBIÉN SISTEMÁTICOS – SOBRE EL MÉRITO Y EL VALOR DEL PROGRAMA EVALUADO

I. IMPROVEMENT

Perfeccionamiento o mejora del programa o política. • Permite la retroalimentación y el aprendizaje sobre la propia práctica. • Garantiza la calidad del programa. • Refuerza la atención en el contexto del programa, las necesidades y naturaleza de los destinatarios y de todos los agentes críticos.

II. ACCOUNTABILITY

Rendimiento de cuentas o responsabilidad sobre la gestión y resultados de un programa. • Práctica que forma parte del sistema democrático como resultado del derecho a saber en qué y cómo se utilizan los fondos públicos (idoneidad, eficacia, eficiencia). – Perspectivas del accountability – Perspectiva política. – Perspectiva técnico-organizativa. – Perspectiva de los ciudadanos. – Perspectiva del cliente.

III. ENLIGTENMENT

• Ejemplificación o iluminación para acciones futuras • La evaluación contribuye a construir conocimiento desde los aportes teóricos, técnicos y metodológicos. • Orienta sobre un modo de afrontar los problemas sociales

FUNCIONES

• Facilitar el proceso de toma de decisiones • Solución de problemas • Facilitar el aprendizaje organizativo el cambio institucional

Carácter Político

Carácter Práctico

Contextualizada • Continuidad • Capacidad de respuesta • Flexibilidad metodológica • Sensibilidad social y política • imparcialidad • Oportunidad en el tiempo • Participación realismo y rentabilidad

PROPOSITOS

CARACTERÍSTICAS

Consideraciones sobre una evaluación ética

Conocer el programa o política que se va a evaluar y su contexto.

Mantener la alta calidad técnica y la relevancia del estudio de evaluación: la calidad en Investigación se define en términos metodológicos.

Las elecciones de quien evalúa deben tener en cuenta: el tipo de información que quiere el cliente, los deseos y puntos de vista de otros agentes críticos, la naturaleza de las premisas del programa, las posibilidades de éxito de la evaluación y las oportunidades de que se incorporen los resultados al conocimiento profesional y a la opinión pública. También tiene que ser sensible a los cambios que se produzcan en el contexto a lo largo del proceso de evaluación.

Considerar la posibilidad de uso desde el principio.

Comportarse de forma ética a lo largo del estudio.

Sobrevivir y cosechar recompensas”**

Manual de evaluación. Carol Weiss.

TIPOS DE EVALUACION

Por su ubicación temporal

Dependiendo en que momento se realice la evaluación, se pueden distinguir cuatro momentos evaluativos:Antes de la ejecuciónDurante la ejecuciónAl realizar la conclusión de los TrabajosDespués de un tiempo de la ejecución

1.- Evaluación Previa

Esta evaluación también se conoce como EX Ante, estudio de viabilidad entre otros, y su objetivo es proporcionar información significativa para tomar la decisión , en relación si es posible realizar el proyecto, o cuál es el que se debe realizar, en relación al apoyo y financiamiento de éste. También permite introducir modificaciones antes de ejecutar el proyecto.Generalmente es realizada por un equipo de expertos que determina la calidad o viabilidad del proyecto,Si esta evaluación determina que con la información entregada no es viable el proyecto, se requerirá mayores antecedentes o será rechazado.

2.- Evaluación Simultanea

Esta evaluación también es conocida como formativa u on going. Su finalidades extraer información, reflexiones y conclusiones sobre la marcha del proyecto. A través de esta evaluación se analiza la validez de las hipótesis sobre las cuales se fundamenta las proyecciones del proyecto.Esta evaluación permite la continuidad del proyecto en base a los resultados. Si se continúa, e debe evaluar si es necesario hacer algún cambio o continuar como estaban planificado.En esta etapa se debe hacer la evaluación con la participación de todos los agentes participantes e incluso con los beneficiarios.

3.- Evaluación Final

Conocida como de finalización o de cierre cuya finalidad es valorar el resultado del proyecto finalizado y sacra las conclusiones respectivas.La metodología apuntará a evaluar , la eficiencia, eficacia, pertinencia, replicabilidad, viabilidad, así como a los imprevistos presentados durante a ejecución.

4.- Evaluación Posterior

Se realiza después de un tiempo de terminar la ejecución del proyecto, cuya finalidad es estudiar en profundidad el impacto de la intervención.Esta evaluación se llama expost o de impacto.Se evalúa el impacto, la obtención de los objetivos y la mantención de los beneficios logrados. Siendo mucho más importante en proyectos sociales. o transferencia tecnológica. El aprendizaje obtenido permite tomar mejores decisiones

Según su objeto

-Objeto de estudio--Ámbito de aplicación

1.- Evaluación según se propósito

Evaluación de resultados Evaluación por Objetivos Evaluación de procesos

En base de resultados se evaluaba, lo que se obtenía con los proyectos , además de la calidad de los bienes y servicios generadosEl análisis implica un correcto diseño en donde los resultados hayan sido definidos de modo operacional a través de indicadores, para evaluar la eficacia, y en donde los recursos tengan una clara expresión en el presupuesto, para evaluar la eficiencia.

Evaluar en base a objetivos, por su parte, supone valorar las hipótesis de la acción social que orientan la intervención.

Es decir, si el desempeño del proyecto ha contribuido efectivamente a alcanzar, y en qué grado, los estados predeterminados que mejoran la situación de las personas beneficiarias

Este análisis implica un correcto diseño en donde los objetivos hayan sido definidos de modo operacional a través de indicadores, para evaluar la eficacia, y en donde otros componentes del proyecto hayan sido claramente descritos, para evaluar la pertinencia, impactos y viabilidad.

La evaluación basada en los procesos debe hacer una revisión interna y externa, lo que nos permiten un diagnóstico correcto sobre los logros obtenidos.Es importante tener presente el contexto donde se desarrolla el proyecto y el impacto que tiene sobre éste.

2.- Evaluación según su naturaleza, su escala y niveles

Según su naturaleza, la evaluación puede ser descriptiva, a través del desarrollo narrativo de clasificaciones y taxonomías que detallen fenómenos, procesos y situaciones o explicativa, mediante la construcción de modelos causales que permitan extraer conclusiones y proyectar predicciones

Según la escala y características de los proyectos, puede hablarse de proyectos “grandes”, en los que resulta más adecuada una evaluación basada en la utilización de técnicas cuantitativas asociadas a las ciencias naturales, y de proyectos “pequeños”, cuyos formatos se adaptan mejor a procedimientos cualitativos y de bajo coste.La distinción es importante por los procedimientos de gestión

Según los niveles de planificación la Evaluación puede ser: Normativa, cuando apunta a políticas sociales o principios de las institucionesEstratégica asociada a los planes de desarrollo en prioridades y alternativas de intervención, está enfocada en el análisis de los proyectos, específicos, de los diversos programas sociales

La evaluación de cad nivel fundamenta el siguiente.

Según el agente

evaluador

ExternaInternaMixtaParticipativa

1.- Evaluación Externa

Es realizada por agentes externos a la ejecución del proyecto, generalmente es realizada al final, donde se evalúan los impactos producidos, siendo más objetiva.Es esperable que dichos agentes tengan una mayor capacidad técnica , y experiencia s anteriores con proyectos similares.

2.- Evaluación Interna

Es realizada por los responsables de la ejecución del proyecto, los que deben recolectar y analizar la información.Suele asociarse con la evaluación simultánea. Esta asociada a la continuidad con la fase de seguimiento..Al encontrarse inserta dentro de la realidad, permite detectar debilidades y fortalezas, a pesar de que tiende a realizar una valoración positiva, no viendo las fallas.Esta evaluación es más económica.

3.- Evaluación Mixta

Este tipo de evaluación intenta en base a conceptos comunes unir ambas perspectivas.se realiza situando la responsabilidad de la evaluación simultánea en la instancia ejecutora (responsable asimismo del seguimiento) para completar el proceso con una evaluación final a cargo de un equipo externo que basasus apreciaciones, además de en sus propios análisis, en los trabajos de carácter interno

4.- Evaluación Participativa

Esta evaluación es Interna, pero la reponsabilidad recae tanto en los ejecutores como en los beneficiarios del proyecto, los que son los encargados de recolectar la información y analizarla e incluso hacen sugerencias a futuro.Está asociada a metodologías del tipo investigación-acción, en donde los beneficios del proyecto no están constituidos sólo por la consecución de susresultados y por el logro de sus objetivos sino, también y por los elementosde continuo aprendizaje que se desencadenan durante el mismo proceso de ejecución.Intenta dismin uir la distancia entre el evaluador y los beneficiarios

Según los instrumentos

CualitativosCuantitativos

1.- Instrumentos Cuantitativos

1.a.- Evaluación por indicadores. Busca determinar criterios de rentabilidad del proyecto, con el fin de evaluar la viabilidad de un proyecto social.El método utilizado es Análisis de Coste-Beneficio, quecompara los flujos de bienes y servicios producidos por el proyecto con sus respectivos costes, expresando todo ello en unidades monetarias.Una modalidad derivada, entre otras posibles, es el Análisis Coste Efectividad (ACE) en donde la anterior comparación se realiza sin que ambas dimensiones, costes y beneficios, estén expresadas en la misma unidad.Se utilizan en proyectos productivos

1.B Se relaciona a encuestas formales ue recogen información precisa y estandarizada a través de cuestionarios aplicados a determinadas muestras representativas.Se utiliza cuando es necesario realizar generalizaciones o validar una hipótesis.Esta evaluación es de alto costo, por lo que solo debe realizarse cuando sea necesario

1.- Instrumentos Cuantitativos

1.- Instrumentos Cuantitativos

1.3 Evaluación por indicadores estrategia evaluatoria centraldel enfoque del marco lógico (EML), en donde dichos indicadores deben ser cuantificables y verificables, a través de técnicas cuantitativas como las señaladas y/o procedimientos cualitativos , t

2.- Instrumentos Cualitativos.

2.a.- La Observación La interpretación de los datos es subjetiva. Se puede distinguir entre:Observación Participante: El evaluador está presente en la ejecución.Observación Directa: . Se realiza en momentos específicos del proyecto.

Se complementan con otros instrumentos, con el fin de disminuir el sesgo y permite hacer comparaciones.

2.- Instrumentos Cualitativos.

2.b.- Entrevista Instrumento básico de evaluación, que permite flexibilidad en la recolección de información e introducir elementos no considerados inicialmente y que a veces son esenciales para las interpretacionesTenemos las siguientes:

Entrevistas a informantes claves. Se entrevista apersonas claves e informadas sobre temas donde no están involucrados directamente.Entrevista a grupos focales: (focus group)Foro comunicatorio: Reunión abierta a integrantes de la comunidad, es muy util en una evaluación posterior contratándola con la entrevista a los informantes claves.