Proceso de planificación

Juan Pedregosa www.e-itd.com5. Evaluacion 4

La planificación

Juan Pedregosa www.e-itd.com5. Evaluacion 5

Evaluación evaluar.(Del fr. évaluer).1. tr. Señalar el valor de algo.2. tr.

Estimar, apreciar, calcular el valor de algo. Evaluó los daños de la inundación en varios millones. U. t. c. prnl.3. tr. Estimar los conocimientos, aptitudes y rendimiento de los alumnos

evaluación.(De evaluar).1. f. Acción y efecto de evaluar.2. f. Examen escolar. Hoy tengo la evaluación de matemáticas.

Definiciones de evaluación “Evaluación es realizar un juicio, basado en

evidencias, sobre el valor y calidad de un proyecto” (Dean, Goodlad, Hamilton)

“Examen crítico del desarrollo y de los efectos actuales y potenciales de un programa o proyecto y se orienta a aumentar la eficacia del mismo y a proporcionar una base orientadora para el diseño e implementación de programas futuros”(Fernández Ballesteros)

“Cómo y por qué (no) funciona una iniciativa”

Objetivos de la evaluación

Juan Pedregosa www.e-itd.com5. Evaluación 8

Juan Pedregosa www.e-itd.com5. Evaluación 9

Metodología de evaluación

Juan Pedregosa www.e-itd.com5. Evaluacion 10

a. Evaluar la evaluabilidad del proyecto

b. Identificar los destinatarios

c. Decidir quién la hará

d. Establecer el alcance de la evaluación

e. Indicar las dimensiones principales

f. Elaborar los indicadores y escalas de síntesis

g. Formular las técnicas e instrumentos para la obtención de datos

h. Presentar los resultados

.

Metodología de evaluación1. Identificar los destinatarios

Equipos responsables y técnicos de proyecto Promotores del proyecto (dirigentes, donantes,

financiadores, mecenas) Destinatarios: clientes, usuarios, participantes,

Metodología de evaluación2. Decidir quién la hará

EVALUACIÓN INTERNA Conocimiento directo de la acción

Facilidad para su continuidad

Promueve la participación y la implicación

Proclividad a la inobjetividad

Más económica

Equipo directivo, persona o grupo “ad hoc” http://tibidabo-project.gesem.net/

Metodología de evaluación2. Decidir quién la hará

EVALUACIÓN EXTERNA Percepción de intromisión o control

Mayor apariencia de objetividad

Puede promover legitimidad y/o prestigio

Implica mayor inversión de recursos

Consultores, investigadores, expertos, instituciones locales

http://www.sharedintelligence.net/viewproject.php?projectid=71

Metodología de evaluación3. Establecer el tipo de evaluación

Evaluación inicial

Evaluación de resultados

Evaluación de proceso

Evaluación de impacto ..

Metodología de evaluación4. Establecer el tipo de evaluación

Evaluación de resultados Comprobación del nivel de cumplimiento de los objetivos del

proyecto y cumplimiento de las previsiones

Verifica cómo lo programado ha sido ejecutado

Comprueba cómo el proyecto modifica la situación de partida

Conoce la opinión de los destinatarios

Observa otros resultados

Determina las causas que han permitido o no su cumplimiento

Metodología de evaluación4. Establecer el tipo de evaluación

Evaluación de proceso Comprueba el cumplimiento y funcionamiento de las

periodificaciones del proyecto.

Comprueba la adecuación de la organización y su funcionamiento

Verifica la adecuación de los recursos humanos y materiales a disposición

Metodología de evaluación4. Establecer el tipo de evaluación

Evaluación de impacto Mide los efectos a largo plazo

Verifica los cambios en el contexto general

Observa los cambios en el contexto cultural

Metodología de evaluación5. Indicar las dimensiones principales

Organización y funcionamiento

Gestión económica

Implementación

Cumplimiento de la calidad

Satisfacción

Participación comunitaria

Comunicación

Atención a la diversidad

Género

…

Metodología de evaluación5. Indicar las dimensiones principales

Determinar los contenidos específicos de cada dimensión

Establecimiento del listado de preguntas básicas, teniendo presente los criterios básicos de evaluación (eficacia, eficiencia, pertinencia, impacto, sostenibilidad)

Metodología de evaluación

6. Elaborar los indicadores y escalas de síntesis Características:

Permiten medir los cambios y resultados

Son singulares de cada proyecto

Necesitan del contraste con otras referencias

Se acoplan preferentemente al tipo de evaluación: indicadores de proceso, resultado e impacto

Hay cualitativos y cuantitativos

Metodología de evaluación

6. Elaborar los indicadores y escalas de síntesis Aspectos clave

Verificar si son: válidos, si miden realmente lo que quieren medir

claros, fáciles de interpretar

útiles, organizativa y técnicamente

Específicos, si sirven para medir un solo factor

Representativos; si comprenden todos los individuos y cuestiones que han de medir

Fáciles de reproducir: puede ser utilizado en diferentes proyectos, territorios y situaciones

Claros y transparentes

Metodología de evaluación

6. Elaborar los indicadores y escalas de síntesis Formulación de escalas de síntesis

Instrumento que visualiza el proceso de evaluación

Reducción de la complejidad a pocas variables

Utilización de series tipo deficiente…excelente, insatisfactorio…satisfactorio

Metodología de evaluación

7. Formular las técnicas e instrumentos para la obtención de datos: Técnicas cualitativas:

Entrevistas en profundidad

Observación directa (y material visual)

Juicio de expertos (y peer review)

Análisis de documentación

Estudio de casos

Focus groups

Metodología de evaluación

7. Formular las técnicas e instrumentos para la obtención de datos: Desarrollo de las herramientas de seguimiento (monitoraje)

y desarrollo de evaluación Establecimiento estrategia recogida de datos

Periodificación entrega de resultados

Verificación de los resultados

Comparación con las predicciones

Análisis de resultados

Redacción del informe de evaluación

Metodología de evaluación

8. El informe de evaluación Partes básicas:

Descripción del proyecto de evaluación (marco, objetivos, metodología, tipo de evaluación, dimensiones, indicadores, instrumentos)

Resultados principales (cumplimento de objetivos, resultados no esperados)

Conclusiones, recomendaciones, propuestas, lecciones obtenidas, puntos fuertes y débiles

Apéndices

Bibliografía y enlaces Rosselló Cerezuela, David.- Diseño y evaluación de proyectos culturales. Ariel,

Barcelona, 2004.

Mille Galán, José Manuel.- Manual bàsic d'elaboració i avaluació de projectes.- Ajuntament de Barcelona. 2002

L'évaluation à la Commission Européenne. Guide des procédures et structures d'évaluation actuellement en vigueur dans les programmes de coopération externes de la Commission. EuropeAid Office de Cooperation. Bruselas. 2001

VV AA.- Monogràfic: la qualitat en l'acció socioeducativa. Revista Educació Social. Fundació Pere Tarrés. Barcelona. 2002

Monnier, Eric.- Evaluación de la acción de los poderes públicos. Ministerio de Economía y Hacienda. Instituto de Estudios Fiscales. Madrid 1995

Nohria, Nitin y G. Eccles, Robert (edit).- Networks and Organizations. Structure, form and action. Harvard Business School Press. Boston 1992

Chen, Huey-Tsyh.- Theory-driven evaluations. Sage Publications. Newbury Park, California. 1900

Bibliografía y enlaces New Approaches to Evaluating Community Initiatives, Vol. 1: Concepts,

Methods, and Contexts

Edited by James P. Connell, Anne C. Kubisch, Lisbeth B. Schorr, and Carol H. Weiss

http://www.theoryofchange.org/html/origins.html

Hugues, Jenny y Nieuwenhuis, Loek.- A project manager’s guide to evaluation. Universität Bremen. 2006

CUADRO DE MANDO INTEGRA: http://video.google.com/videoplay?docid=192737133035891067

RECURSOS GESTIÓN ONG’S: http://www.proveandimprove.org/new/tools/efqm.php

PLAN ESTRATÉGICO PASO A PASO: http://www.proveandimprove.org/new/tools/efqm.php