Magister Evelina Aedo
INCOMPETENCIA INCONSCIENTE: Cuando alguien “no sabe que no sabe”. INCOMPETENCIA CONSCIENTE: “Reconocemos que no sabemos”, requiere de mucha práctica, atención y perseverancia para no abandonar el aprendizaje. COMPETENCIA CONSCIENTE: Cuando “comenzamos a ser competentes”, en lo que estamos aprendiendo. COMPETENCIA INCONSCIENTE: Es cuando todo lo que hemos aprendido de forma tan concienzuda se armonizan.
Proporcionar los elementos básicos para elaborar indicadores de productos, resultados, efectos -o impactos- en términos adecuados para ser aplicados en situaciones concretas y, también, para ser incluidos, si es necesario, en sistemas de indicadores tales como Bancos de Indicadores (BI)
1. Indicadores como instrumentos de observación de la realidad no directamente visible .
2. Validez de los indicadores. 3. Confiabilidad de los indicadores. 4. Calidad de los indicadores. 5. Indicadores de valor. 6. Productos, resultados, efectos e impactos.
¿Qué entendemos por Monitoreo y Evaluación? (MyE)
LA RESPUESTA
SEGUIMIENTO
APRECIACIÓN
Contar con información para apreciar lo que estamos haciendo
Periódica y tener un Juicio de Valor
EVALUACIÓN MONITOREO CALIDAD
La finalidad: Es la elaboración de indicadores aplicables al análisis del valor. Entendiendo valor como el logro de algún tipo de modificación de la realidad como consecuencia de la utilización de recursos.
HACER Capacidad
SABER Conocimiento
SER Autorrealización
APRENDER
A SER
APRENDER A
CONOCER
APRENDER A
HACER
APRENDER A VIVIR EN
COMUNIDAD
Formación integral
Sociedad
Sociedad
Sociedad Sociedad
EL PROCESO DE FORMACIÓN
ACTITUD DE CAMBIO Y REFLEXIÓN
Nos sirve para…… Nos ayuda a detectar y corregir “focos rojos” a tiempo
Nos permite justificar nuestros acciones o proyectos con más argumentos
Nos ayuda a entender qué funciona y qué no funciona
Nos brinda retroalimentación para planear mejores formas de enfrentar un problema
Nos da elementos para alcanzar mayores y mejores resultados
Lo más largo, pero lo más importante
Algunos aspectos de la realidad son observables directamente y otros no
Ejemplo: los gestos de la cara de las personas, pero no es observable directamente su estado de ánimo
EN ESE SENTIDO Cuando las expresiones “se asocian” es
la clave del concepto de indicador: significa, literalmente, que consideramos que ciertos gestos son indicadores de ciertos estados de ánimo.
RESPUESTA
Existe un grado de asociación entre una parte de la realidad que podemos observar y otra que no podemos
En otras palabras, los indicadores son instrumentos de
observación indirecta de la realidad.
VALIDEZ • La fuerza de la asociación entre lo que se trata de
conocer y lo que muestra un indicador es la medida de su calidad.
• Las razones por las cuales los indicadores pierden calidad tienen que ver con la validez y con la confiabilidad.
• La validez es la condición de que el indicador esté definido en términos de lo que interesa conocer
EJEMPLO: VALIDEZ Es posible que nos interese estimar la
probabilidad de ciertas condiciones tales como la irritación de la garganta y la tos. La presencia en las vías respiratorias de ciertos microorganismos que producen una enfermedad como la angina y que, naturalmente, no son directamente observables.
El indicador puede ser: Un nivel mayor que el
normal de temperatura del cuerpo -la fiebre- :probabilidad a la existencia de angina.
Confiabilidad de los indicadores La confiabilidad de los indicadores
se refiere a la probabilidad de que los resultados que se obtengan sean los mismos todas las veces en que se los emplee.
Por Ejemplo Los sastres utilizan unas cintas métricas
flexibles para tomar las medidas. Los sastres tratan de conocer la longitud y no
hay duda de que es eso lo que mide la cinta, de manera que no existen problemas de validez aquí: esas cintas no sirven para medir peso ni temperatura. Sin embargo, si un sastre tiende a tensar mucho la cinta y otro no, las mediciones de longitud no serán las mismas.
Indicador es poco confiable, por qué?
La Calidad de los Indicadores Se expresa en la probabilidad de que
indicarán lo que interesa que indiquen todas las veces que se los aplique. En otras palabras, es la conjunción entre las respectivas probabilidades de la validez y la confiabilidad.
Por Ejemplo Los mecánicos de automóviles -al igual que los
médicos- suelen ser hábiles para identificar e interpretar indicadores, (quizás porque tienen en común que ambos realizan tareas de mantenimiento). Para saber el grado de desgaste del motor de un automóvil es preciso desarmarlo. Sin embargo, un buen mecánico sabe que los motores desgastados, además de que queman la gasolina, también emiten un característico humo color blanco por el tubo de escape. La cantidad de humo blanco (fenómeno visible) calidad porque es confiable y válido
Otro Ejemplo Los políticos están constantemente
"leyendo" indicadores de coyuntura política, los hombres de negocios los mercados, nosotros las relaciones sexuales. Un estudiante de secundaria, necesita imperiosamente saber si las sonrisas y los comentarios que le hiciera ayer una compañera indican realmente interés por él y convoca un estado mayor de amigos íntimos para analizarlos cuidadosamente y emitir un veredicto sobre esta cuestión de vida o muerte.
Conclusión del ejemplo El adolescente trataba de determinar el
grado de calidad de ciertas conductas de la compañera (fenómeno observable) como indicador de interés por él (fenómeno no observable). Los indicadores sin validar son
simplemente conjeturas.
El Valor Es la satisfacción de necesidades
humanas a partir del uso de recursos. En este sentido, los indicadores de valor adquieren un sentido adicional: el de ser consecuencias del uso de esos recursos.
Por Ejemplo Los indicadores de un programa de atención
de la salud, los productos serán los servicios concretos prestados (curaciones), los resultados serán mejoras en la salud de los pacientes y los efectos serán la mejora en la calidad de vida, capacidad laboral u otros. Cuando estos efectos son más o menos inmediatos los llamaremos de impactos: la inmediata recuperación de la capacidad de trabajo que surge de la mejora en el logro de curaciones.
Los Indicadores de valor relativos a la salud, (la curación de las enfermedades tratadas) son los resultados buscados mediante los productos, que podrían ser los medicamentos, tratamientos médicos.
Los usuarios serían los pacientes, que también serían beneficiarios de los resultados (la curación), sus familiares y allegados, que también serían beneficiarios aunque sin la condición de usuarios. La mejora de la capacidad laboral son los efectos más inmediatos (por lo tanto, impacto), que podríamos identificar como consecuencia de la causa inicial, la asignación de los recursos.
Definiciones Producto: Agregados de valor que resultan
inmediatamente del uso de los recursos (outputs), destinados a usuarios que consumirían el valor de uso de los mismos.
Por ejemplo, los productos de las organizaciones de salud son “acciones de atención de salud”; de las educativas “acciones educativas.
Continuación Resultado: consecuencias (outcomes)
esperadas del consumo de los productos por parte de los usuarios. Los resultados son, en este sentido, estados deseados a los que se espera que los productos contribuyan.
Por ejemplo, la curación (o disminución de la
incidencia) de las enfermedades por parte de los pacientes son los resultados esperados de las prestaciones concretas de atención médica (productos).
Continuación Efecto (o impacto): Consecuencias
(outcomes) esperadas de los resultados, es decir, los estados a los que se espera que éstos contribuyan.
Por ejemplo, la mejora de la calidad de vida
y de las capacidades laborales de la población, el aumento de la equidad en el acceso a la calidad de vida que podría contribuir a ciertos resultados, como la mejora de los niveles de salud.
Ya con el proyecto claro, Definir efectos o componentes: ¿Procesos, resultados, impacto, costo-efectividad...?
Los recursos con los que
contamos para la compra ARV
Distribución de nacional de ARV
PROCESOS RESULTADOS IMPACTO
CTARV abastecidas todo el año
Panamá en el 2011 reporta
100% de acceso universal
INSUMOS
¿Cómo saber cuáles son los procesos, resultados e impacto?
En teoría...
Formato que normalmente se usa:
OBJETIVO INDICADORES RESULTADOS MECANISMOS
DE EVALUACIÓN
Mencionar el objetivo específico
Señalar al menos un indicador del objetivo
Definir cuánto se espera lograr en determinado tiempo para cada indicador
Mencionar de dónde se obtendrá la información
ACTIVI-DADES
INDICADORES (PROCESOS)
Resultados (PROCESOS)
MECANISMOS DE
EVALUACIÓN Listar las actividades relacionadas con ese objetivo específico
Señalar al menos un indicador de la calidad de cada una de las actividades listadas
Definir cuánto se espera lograr en determinado tiempo para cada indicador
Mencionar de dónde se obtendrá la información para cada indicador
Marco de Resultados al Plan Estratégico
Plan Estratégico Multisectorial
Nacional de ITS VIH y Sida 2009-2014
4 Ejes Estratégicos
4 Objetivos Generales
15 Objetivos Específicos
43 Resultados
+ 22Efectos Directos Estratégicos
12 pasos de construcción del PNM&E
INDICADORES A REVISAR 1. Plan de MYE del Plan Estratégico 2. Directrices de indicadores UNGASS 3. Directrices de indicadores de Acceso Universal 4. Toolkit de Fondo Mundial 5. Alerta Temprana
PERIODO DE
PREGUNTAS
Mariaelena Silva Psicologa Organizacional