presentacion monitoreo 2010 - secretaría de desarrollo ... · los costos previstos y reales. 1....

El Monitoreo

Gestión de programas sociales:del diagnóstico a la evaluación de impactos

1

El Monitoreo

Rodrigo Martínez División de Desarrollo Social

Noviembre, 2010

Monitoreo

Consiste en la revisión de los resultados de gestión alcanzados en laejecución y, en caso necesario, definir la reprogramación requerida.Es parte de la evaluación Ex-post.

Dimensiones a considerar:

� Análisis Intra proyecto: centrado en la identificación de los

Verificar el grado de avance en la gestión de los proyectos y programas.

� Análisis Intra proyecto: centrado en la identificación de los desvíos existentes respecto a lo programado.

� Análisis entre proyectos: comparar los resultados de distintas unidades ejecutoras (o de proyectos) con similares características.

Pasos a seguir:

1. Diseño del plan2. Implementación3. Análisis de resultados4. Elaboración de informes

1. Diseño del Plan de Monitoreo

Esta es la primera actividad a realizar, que debe r esponder a las siguientes preguntas:

• ¿Quiénes son los destinatarios de la información que proporciona el monitoreo?

• ¿Qué información requieren dichos destinatarios?• ¿Qué indicadores se deben considerar?• ¿Qué instrumentos hay que utilizar?• ¿Qué instrumentos hay que utilizar?• ¿Con qué periodicidad?• ¿Qué nivel de precisión es requerido?• ¿Cuáles y cuántas unidades hay que observar cada vez (actores,

beneficiarios, ejecutores)?• ¿Qué tipo de informes se requieren?• ¿Cómo se deben procesar los datos?


A. Destinatarios e informacióna. Actores internosb. Actores externos c. Población objetivod. Sociedad civil

B. Los indicadores: B. Los indicadores: Deben elegirse estratégicamente, para contar con una cantidad reducida, fácil de medir y confiable, que garantice la información

requerida para la toma de decisiones.

Identificar las actividades críticas de los procesos programados y las necesidades específicas de los destinatarios de la información.

El monitoreo es un proceso de apoyo, no principal

B. Los indicadores:

a) Cobertura: proporción de la población objetivo que es atendida por el programa o proyecto


100*objetivo población la de Tamaño

atendidas personas de CantidadCobertura=

Donde: BT = Beneficiarios Totales

POT = Población Objetivo Total

• Cuando se considera a todos los beneficiarios, se obtiene la cobertura bruta (Cb)

• Al considerar sólo a los beneficiarios de la P.O., se obtiene la cobertura neta (Cn).

100*T

T

PO

BC =

B.Los indicadores:

b. Focalización: el grado de focalización (F), es la proporción de la población beneficiaria que forma parte de la población objetivo


100* totaliabeneficiarPoblación

iabeneficiar objetivoPoblación =F

F tiene un recorrido entre 0 y 100, donde 0 significa que ningún beneficiario es de la P.O. (total error de inclusión) y 100 indica que todos los beneficiarios forman parte de ésta (total acierto de inclusión).

totaliabeneficiarPoblación

100*T

B

B

POF =

B.Los indicadores:

b. Focalización: Otro indicadores

• Focalización efectiva


100*1total objetivo Población

total iabeneficiar Población

iabeneficiar objetivo Población

Fr

−=

• Focalización efectiva absoluta

• Eficiencia de la focalización

otalt Población

−=total Población

total iabeneficiar Población*total objetivo Poblacióniabeneficiar bjetivoo PoblaciónFa

anual oducciónPr

totales anuales Costosabsoluta efectiva ónFocalizaci

ónfocalizaci la de Costos

EF =

B. Los indicadores:

c. Eficacia: la relación entre la cantidad de bienes o servicios que produce y distribuye el proyecto durante su operación y lo estimado en la programación.

• Tiempo (GC) programado Tiempo

real TiempotoCumplimien de Grado =


• Metas (IF)

Eficacia (A)

Cuando:A = 1, la cantidad de productos programados es igual a la producida

(producción eficaz);A > 1, el proyecto es más eficaz que lo programado;A < 1, el proyecto es menos eficaz que lo programado

programada Produccióngenerada Producción

Físico Indice =

IF

GCA=

B.Los indicadores:

d. Eficiencia: Es la relación entre los productos generados y los recursos utilizados en la producción

rr

pp

T*C*M

T*C*LB =

r

p

C

C*AB =

Eficiencia (B)


Donde L es la producción generada, Cp son los costos programados, Tp es el tiempo programado, M es la producción generada y Cr y Tr son los costos y el tiempo real respectivamente.

Cuando:B = 1, la producción es eficiente (costos por producto reales iguales a

los programados), B > 1, el proyecto es más eficiente que lo programado,B < 1, el proyecto es menos eficiente que lo programado.

rr r

B. Los indicadores:

e. Calidad: Indica el grado en que se está alcanzando el estándar previsto para los productos.

La calidad de cualquier producto (Qj) es una relación entre el producto real en un período o proyecto determinado (qij) y el estándar establecido (Sj), la calidad de otro proyecto o el promedio de los proyectos (µj).


calidad de otro proyecto o el promedio de los proyectos (µj).

Cuando, Qj = 1 la calidad es observada es igual a la estándar o a la mediaQj > 1 la calidad del producto del proyecto es superior Qj < 1 la calidad del producto del proyecto es inferior.

j

ijj S

qQ =

j

ij*q

Qj µ

=

B. Los indicadores:

f. Indicadores de avance físico y financiero: permiten analizar el grado de cumplimiento de la programación

1. Retraso: muestra el grado en que se han cumplido los tiempos programados en el proyecto


2. Índice de Comparación: relaciona la cantidad de actividades críticas atrasadas (Acpr) con las adelantadas (ACpa).

100*programado Tiempo

programado Tiempo - real Retraso

= Tiempo

100*retrasadas críticas sActividade

sadelantada críticas sActividade ncomparació de Indice =

B. Los indicadores:

f. Indicadores de avance físico y financiero…

3. Índice de Avance Físico o de resultado: Compara los productos (o actividades) realizados con los programados en relación con los costos previstos y reales.


los costos previstos y reales.

=

reales Costos

sprogramado Costos*

sprogramado oductosPr

realizados oductosPravance de Indice

B. Los indicadores:

f. Indicadores de avance físico y financiero…

4. Índice de situación analiza el grado de ejecución del presupuesto al momento de control.


Existen dos indicadores para revisar la utilización de los recursos destinados, pues no siempre se da la linealidad.

real Tiempo

programado Tiempo*

programado Costo

real Costo situaciónde Indice =

100*Programado oPresupuest

Realizados sDesembolsoFinanciero Avance de Indice =

100*o ProgramadoPresupuest

oActualizad oPresupuesttal PresupuesDesfase =

C. Los instrumentos:

Para que la información sea útil, debe ser confiable y oportuna. Por ello, se requiere contar con:

• los instrumentos de recolección de información• la unidad de registro• la periodicidad


• la periodicidad • los planes de análisis de datos

2. Implementación del monitoreo

Para la recolección, registro y procesamiento de la información del monitoreo se requiere un plan con la flexibilidad suficiente como para afrontar los imprevistos que se pudieran presentar.

Considerar:

• Sensibilizar a los encargados de registro• Estabilidad de los instrumentos, forma de registro y procesamiento de • Estabilidad de los instrumentos, forma de registro y procesamiento de

datos• Importancia del diseño muestral al segmentar información• Utilizar sistemas informáticos cuando sea posible• Estructura de supervisión independiente de la operativa• Grupos de supervisores por zonas geográficas• Supervisión multidisciplinaria para productos de distintos sectores• Guía de registro de datos

El ideal es utilizar instrumentos de uso diario en la gestión, no generar otros específicos

3. Analisis de los resultados

La utilización de distintos instrumentos y coeficientes estadísticos dependerá de las características de cada indicador y de la

profundidad del análisis que se desea realizar

a. Análisis Intra proyectos:a. Análisis Intra proyectos:

• Comparar lo realizado respecto a lo programado. • Comparar los resultados de distintos períodos. • Estimar los resultados futuros.

3. Analisis los resultados

b. Análisis entre proyectos: el estudio de los resultados entre proyectos requiere las siguientes herramientas

i. Medidas de tendencia de central y posición

• Moda: al identificar el valor con mayor frecuencia, da una indicación del resultado particular más común (en el pasado) y más probable (en el futuro). futuro).

• Mediana: al mostrar el valor en que la distribución se divide en dos grupos iguales, muestra el centro de los proyectos.

• Media: permite centrar la mirada en el centro de la distribución real de los datos.

• Fractiles: facilitan identificar grupos de casos según su posición en la distribución y conocer los valores de corte relevantes.

3. Analisis los resultados


ii. Distribución de frecuencias: Sirve para ver la forma en que se distribuyen los proyectos en relación al indicador que se analizaLas distribuciones de frecuencias pueden presentar distintas formas, según el tipo de indicador:

• Binomial: Presenta dos grupos de proyectos, los exitosos (p) y los fracasados (q).

3. Analizar los resultados

b. Análisis entre proyectos…

ii. Distribución de frecuencias…

• Normal:



ii. Distribución de frecuencias: Sirve para ver la forma en que se distribuyen los proyectos en relación al indicador que se analiza

• Chi cuadrado: Tiene una distribución asimétrica, en que los proyectos se agrupan más hacia el lado izquierdose agrupan más hacia el lado izquierdo


b. Análisis entre proyectos: …

ii. Distribución de frecuencias…

• Triángulo rectángulo: Se produce cuando la moda se ubica en uno de los extremos de la distribución (el mínimo o el máximo), con frecuencias descendientes hacia el lado opuesto


b. Análisis entre proyectos:…

ii. Distribución de frecuencias:…

• Rectangular: Es el caso en que los proyectos se distribuyen de manera homogénea, por lo que los resultados son sumamente variables, y no se pueden sacar conclusiones.


b. Análisis entre proyectos:…

iii. Pruebas estadísticas: Para verificar si realmente se han generado cambios relevantes, las unidades de gestión son distintas y/o se han generado impactos, corresponde estimar si las diferencias observadas son estadíticamente significativas. Las pruebas a consideraer dependen de las características de nivel de medición de las variables, número de muestras y grupos poblacionales considerados: poblacionales considerados:

• Diferencias de medias y de proporciones• Análisis de varianza• Análisis de regresión• Modelos logit• …

4. Los informes

La publicación de la información recolectada debe ser funcionalpara sus usuarios. Deben incluir hipótesis y/o sugerencias

que permitan una adecuada interpretación de los hechos observados.

Los informes pueden ser:

a. Descriptivos o comparativosb. Coyunturales o acumulativosc. Numéricos o gráficos

• Tablas de datos: Posibilitan contar con una imagen de los resultados de cada indicador y cuantificar las diferencias existentes longitudinal o transversalmente.

• Gráficos: Sirven para descripción de una variable o la comparación e ilustración de series.

4. Los informes

c. Numéricos o gráficosEjemplos:

Los tipo “pie” y de barra son útiles para mostrar

distribuciones de un indicador y comparar

resultados resultados transversalmente.

4. Los informesc. Numéricos o gráficos

Ejemplos:

Cuando se cuenta con una gran cantidad de proyectos o de ejecutores distintos,

se puede ajustar distribuciones de

probabilidad .

Los gráficos lineales permiten analizar series de

tiempo y comparar resultados.

4. Los informesc. Numéricos o gráficos

Ejemplos:

Para el monitoreo de los cronogramas, se puede trabajar directamente sobre la Carta Gantt, señalando con nuevas barras el grado de cumplimiento de las metas de cada actividad y/o su duración real

ID Task Name1 OP11Análisis de gestión y

reestructuración administrativa2 1 Recopilaciónde antecedentes

7 8 9 10 11 12 1

2 1 Recopilaciónde antecedentes

3 2 Entrevistasa actores claves

4 3 Descripciónde procesos,insumosy estructura

5 4 Análisis de modelodeorganizacióny gestión

6 5 Propuestade nuevo modelo

7 6 Discusiónde informeyvalidación

8 OP12 Incorporación deambulancia

9 7 Especificaciónderequerimientos

10 8 Llamadoa licitación

La doble barra indica el grado de avance

El Monitoreo

Gestión de programas sociales:del diagnóstico a la evaluación de impactos

28

El Monitoreo

Rodrigo Martínez División de Desarrollo Social

Noviembre, 2010

presentacion monitoreo 2010 - secretaría de desarrollo ... · los costos previstos y reales. 1....

Documents