lineamientos metodológicos para la construcción de ... · información cuantitativa respecto del...
TRANSCRIPT
1
Lineamientos metodológicos para la construcción de indicadores de
desempeño
Dirección General de Presupuesto Nacional
Ministerio de Hacienda de Costa Rica
Roberto Jiménez M.
Consultor ILPES/CEPAL
“Planificación Estratégica y Construcción de Indicadores de
Desempeño en el Sector Público de Costa Rica”
3
Es una herramienta que entrega información
cuantitativa respecto del logro o resultado de los
objetivos de la institución, cubriendo aspectos
cuantitativos o cualitativos
¿Para qué sirve esta información?
TOMAR DECISIONES
Indicadores de Desempeño
4
“Que indica o sirve para indicar”
Latín = “Indicare” = Mostrar o significar algo, con
indicios y señales
Desempeño: capacidad de una institución para
gestionar adecuadamente sus recursos y dar
cumplimiento a los objetivos y metas establecidos
Indicadores de Desempeño
5
UN INDICADOR ES UNA SEÑAL, UN AVISO, QUE NOS
ENTREGA INFORMACIÓN
SE RELACIONA DIRECTAMENTE Y SIEMPRE CON UN OBJETIVO
Aumentar nivel
de escolaridad
del país
Años promedio de
escolaridad por
habitante del país
6
• Son herramientas de gestión que proveen un valor de referencia a partir
del cual se puede establecer una comparación entre las metas
planeadas y el desempeño logrado
• Un indicador de desempeño es una herramienta que entrega
información cuantitativa respecto del logro o resultado de los objetivos
de la institución
• Los indicadores de desempeño son medidas que describen cuán bien
se están desarrollando los objetivos de una institución, a qué costo y
con qué nivel de calidad.
7
• En un sistema de cuenta pública orientada a resultados, se requiere
datos sobre un conjunto de indicadores diferentes, que reflejan la
información requerida para distintos niveles de toma de decisiones.
• Los legisladores y los Directores requieren información estratégica
sobre la gestión de la institución (resultados finales e impacto),
mientras que los Gerentes de Divisiones, Departamentos o Programas
y sus staff requieren detalles sobre la provisión de insumos, las
actividades, los productos finales y resultados intermedios
8
• La idea de incorporar indicadores y metas de desempeño al proceso
presupuestario es disponer de información sobre los niveles de
cumplimiento de los objetivos planteados y resultados esperados de
cada institución y enriquecer el análisis en la formulación del
presupuesto y su discusión en el Congreso.
• Los indicadores y sus metas se presentan como información
complementaria al Proyecto de Ley de Presupuestos, y una vez
aprobado éste, las metas se vinculan con el seguimiento (monitoreo)
de la ejecución.
10
Presupuesto ($)
Producción (Q)Resultados
(desde punto de vista de los beneficiarios)
Indicadores
Productos
-Cobertura y focalización
-Oportunidad
-Carácterísticas de Bs. y Ss.
-Costos
Indicadores
Misión y Objetivos
Estratègicos
-Intermedio
-Final
Insumos / Procesos
INSTITUCIÓN
Indicadores
Actividades
-Programas de trabajo
-Programación
-Ejecución de recursos
11
Cadena de producción y resultado esperado
Alimentación
Consultas
Controles
Vacunación
Recursos
e
Insumos
Atención médica
Actividades (productos intermedios)
Productos (finales) Propósito
(Resultado Intermedio)
Fin
(Resultado Final)Actividades
Actividades
Actividades
Actividades
12
Objetivos (prioridades) de Gobierno
Secretarías Secretarías Secretarías Secretarías
EntidadesEntidades
ProgramaPrograma
Objetivos alineados
O
B
J
E
T
I
V
O
S
I
N
D
I
C
A
D
O
R
E
S
Operacionalización
de objetivos
Agregación
de mediciones
13
Secretarías Secretarías Secretarías Secretarías
Entidades EntidadesEntidades
División DivisiónDivisión
Dpto. Dpto.
Entidades
•Objetivos
•Resultados esperados
•Indicadores
14
Proceso (Actividades - productos intermedios):
Actividades vinculadas a la producción de bienes y servicios.
Corresponden a las necesarias para generar los productos finales
de la institución:
procedimientos de compra
licitaciones
procesos tecnológicos
administración financiera
etc.
- Porcentaje del presupuesto ejercido
- Porcentaje de compras de insumos efectuadas dentro del tiempo
programado
ÁMBITOS DE MEDICIÓN
15
Producto (productos finales):
Bienes y/o servicios públicos producidos o entregados por la
institución para cumplir con su misión. Está dirigido al
beneficiario final, o en algunos casos, intermedio.
- Porcentaje de alumnos que reciben la beca oportunamente
- Tiempo promedio de entrega de subsidios para la vivienda
- Metros cuadrados construidos promedio por vivienda
entregada
ÁMBITOS DE MEDICIÓN
16
Resultado intermedio:
Es el resultado directo a lograr en la población objetivo dado el
uso de los productos finales.
Es la aportación específica a la solución de un problema o
necesidad.
- Porcentaje de profesoras indígenas asesoradas que aplican
prácticas pedagógicas mejoradas con el enfoque de la
Educación Intercultural Bilingüe
ÁMBITOS DE MEDICIÓN
17
Resultados finales o impacto:
Contribución a la solución de un problema o necesidad
Complejidad de medir Impacto o Resultado Final: un programa
o institución por lo general contribuye a alcanzar un resultado
final y se complementa con la acción de otros programas e
instituciones.
ÁMBITOS DE MEDICIÓN
18
Resultados finales (impacto):
¿Cómo identificar el Impacto de nuestra institución?
El impacto no se produce inmediatamente y medirlo requiere
de un análisis más profundo, de la definición de un conjunto de
indicadores y otros instrumentos complementarios como las
evaluaciones de impacto.
- Tasa de crecimiento del Sector de Tecnologías de la
Información (TI)
ÁMBITOS DE MEDICIÓN
19
Eficacia:
Mide el grado de cumplimiento de los objetivos de la
institución.
En qué medida está cumpliendo con sus objetivos
No considera necesariamente los recursos asignados
para ello
- Porcentaje de becas entregadas en relación a las
programadas
DIMENSIONES DEL DESEMPEÑO
20
Eficiencia:
Mide la relación entre los productos finales generados con respecto
a los insumos o recursos utilizados.
Alcanzar un cierto nivel de producción utilizando el mínimo de
recursos posibles.
Aproximaciones a este concepto:
productividad media de los distintos factores de producción (nivel
de actividad y recursos utilizados)
costos de producción (costos medios, costos unitarios gastos
administrativos en relación al gasto total)
DIMENSIONES DEL DESEMPEÑO
21
Economía:
Mide la capacidad institucional para generar o movilizar
adecuadamente los recursos financieros
- Ingresos propios generados
- Presupuesto ejercido
DIMENSIONES DEL DESEMPEÑO
22
Calidad (eficacia):
Mide los atributos, capacidades o características que
deben tener los bienes y servicios para satisfacer las
necesidades de los usuarios.
- Grado de satisfacción de usuarios
- Tiempo de respuesta a requerimientos de los
beneficiarios
DIMENSIONES DEL DESEMPEÑO
23
EFICACIA
EFICIENCIA
ECONOMÍA
CALIDAD
PROCESOS PRODUCTO FIN Y PROPÓSITO
(resultados)
D
I
M
E
N
S
I
O
N
E
S
AMBITOS DE MEDICIÓN
25
Matriz de indicadores
PROCESO PRODUCTO RESULTADO
INTERMEDIO
RESULTADO
FINAL
EFICACIA
EFICIENCIA
ECONOMIA
CALIDAD
26
Pirámide de indicadores y reportes
Indicadores:
Deben generar información relevante para quien toma decisiones
Deben cubrir toda la institución
Deben ser específicos para las decisiones de cada jefatura o directivo
Deben medir los aspectos relevantes de cada área
Deben ser un número manejable
Reportes:
Orientados a las necesidades de cada destinatario
Deben ser informes ejecutivos, de fácil lectura e interpretación
Periodicidad adecuada para cada destinatario
27
Algunos ejemplos de Indicadores en el ámbito de los
Procesos:
Porcentaje de ejecución del presupuesto
Porcentaje de gasto en Recursos Humanos respecto de gasto total
Porcentaje de gasto corriente respecto de gasto total
Porcentaje de productos entregados respecto de lo programado
Porcentaje de compras de insumos efectuadas dentro del tiempo programado
Porcentaje de licitaciones adjudicadas respecto de licitaciones totales
Porcentaje de ingresos propios percibidos respecto de los programados
Porcentaje de subsidios asignados
Porcentaje de familias pobres catastradas
Porcentaje de normas de aviación actualizadas
28
Ámbito de los Procesos productivos
(Ejemplos para Actividades Centrales)
Definir aquellos procesos que son claves para la generación de los productos (bienes y/o servicios):
procedimientos de compra
Adquisición de insumos – contratación de empresas proveedoras
Licitaciones
Externalización de servicios - subcontratación de empresas que proveen los productos
procesos tecnológicos
Implementación de servicios por internet - procesos para generar productos
29
Algunos ejemplos de indicadores en el ámbito de los
Productos:
Porcentaje de familias sin vivienda que reciben aportes del Estado
Porcentaje de familias pobres sin vivienda que reciben aporte del Estado respecto del
total de familias sin vivienda que reciben aporte del Estado
Tiempo promedio de entrega de subsidios para la vivienda
Metros de cuadrados construidos promedio por vivienda entregada
Porcentaje de condominios construidos que cuentan con infraestructura social
(lugares para reuniones, parques, plazas, juegos para niños)
Porcentaje de familias que manifiestan satisfacción con la vivienda entregada
30
Ámbito de los Productos:
Bienes y/o servicios proporcionados directamente a los usuarios:
Definir los requerimientos de los usuarios
Establecer las características de los productos
- Características técnicas del producto
- Tiempo de entrega a los usuarios
- Cobertura (todos los niños y niñas del país)
- Focalización (niños y niñas en situación riesgo social)
- Grado de satisfacción de los usuarios
31
Ámbito de los Resultados:
Resultados intermedios
• Cambio en el comportamiento de los beneficiarios una vez que han recibido los
bienes y/o servicios.
• La entrega de los bienes y/o servicios a los usuarios supone que conduce a la
• Obtención de los resultados finales.
• Constituye una aproximación a los resultados finales
32
Algunos ejemplos de indicadores en el ámbito
de Resultados Intermedios:
• Porcentaje de subsidios de vivienda efectivamente pagados respecto del total de subsidios otorgados
• Porcentaje de trabajadores sin calificación que egresan de un programa de capacitación técnica
• Porcentaje de participantes egresados de programa antidrogas con actitud crítica hacia la droga
• Porcentaje de empresas que no cumplen la normativa laboral
• Porcentaje de familias pobres que inician una actividad empresarial con apoyo del Estado
• Porcentaje de alumnos egresados de una carrera técnica
33
Resultados Finales o Impacto:
Resultados a nivel de fin de los bienes y servcios entregados, significan un mejoramiento en las condiciones objetivas de la población objetivo.
Complejidad de medir Impacto o Resultado Final:
un programas público contribuye a alcanzar un fin (resultado final)
se complementa con la acción de otros programas
¿Cómo identificar el Impacto de nuestro programa?
el impacto no se produce inmediatamente
es difícil medirlo con un indicador (mejoramiento de la calidad de vida)
por lo general no se dispone de información de punto de partida (línea base)
34
Indicador de resultado final o impacto
• Porcentaje de trabajadores sin calificación egresados de un programa de capacitación que consiguen un empleo permanente
• Porcentaje de personas que no reinciden después de participar en programa antidrogas
• Tasa de accidentes de aviación
• Porcentaje de familias que superan la línea de pobreza
• Tasa de variación de delitos
• Porcentaje de empresas que cumplen la normativa laboral
• Tasa de incidencia de la poliomielitis
• Tasa de obesidad infantil
• Porcentaje de días sin suministros eléctrico a la población
• Tasa de suspensión de servicios de internet
• Porcentaje de reclamos solucionados de usuarios de servicios de telefonía
35
Algunos ejemplos de indicadores de focalización:
Porcentaje de la población en situación de pobreza que recibe subsidio para agua
potable
Porcentaje de niños en situación de pobreza que reciben beca estudiantil
Porcentaje de adultos mayores que reciben complemento alimenticio contra la
desnutrición
Porcentaje de deportistas que acceden a programas de alto rendimiento
Porcentaje de comunas de alto riesgo cubiertas por programas especiales
antidelincuencia
Finalmente, también en eficacia se mide al cumplimiento de programas de trabajo:
Porcentaje de capacitaciones de funcionarios en relación a lo programado
36
Indicadores Estratégicos:
• De resultado final o impacto (Fin)
Indicadores de Gestión (responsabilidad directa de la institución):
• De resultado intermedio
• Asociados a Productos finales
• Asociados a Actividades
INDICADORES
38
1. Establecer las Definiciones Estratégicas
2. Establecer las Áreas de Desempeño a medir
3. Proponer Indicadores para cada área de desempeño
4. Validar técnicamente de indicadores propuestos
5. Construir las Fórmulas para cada indicador
6. Establecer Fuentes de Información, Medios de Verificación y definir
Indicadores factibles de medir
7. Establecer Línea base, Metas y Supuestos
8. Establecer Frecuencia de medición (seguimiento)
9. Monitorear y Evaluar los Resultados
10. Informar los Resultados
PASOS
40
Las Definiciones Estratègicas son el referente para
la medición del desempeño
Cimientos de un sistema de información de gestión
Misión
Objetivos estratégicos
Productos finales
Actividades (productos intermedios)
42
De las Definiciones estratégicas extraer las Áreas de desempeño que
deben ser medidas.
Nos hacemos las siguientes preguntas:
•¿Con qué objetivos de los objetivos de Gobierno y de la Secretaría está
alineada la institución? ¿Con cuáles se tiene más relación?
•¿Cuáles de estos objetivos se quieren medir?
•¿Cuáles son los principales aspectos que deben ser medidos?
•¿Qué ámbitos deben ser medidos?
•¿Qué dimensiones deben ser medidos?
•¿Quién utilizará la información?
•¿Qué decisiones tomará?
43
Misión MINAET:
Contribuir al mejoramiento de la calidad de vida de las y los habitantes del
país mediante la promoción del manejo, conservación y desarrollo sostenible
de los elementos, bienes, servicios y recursos ambientales y naturales del
país, cuya gestión corresponda al Ministerio de Ambiente, Energía y
Telecomunicaciones (MINAET) por disposición legal o convenio
internacional, garantizando la necesaria y plena armonía entre las
actividades de desarrollo nacional y el respeto por la naturaleza y la
consolidación jurídica de los derechos ciudadanos en esta materia.
Ejemplo:
44
LISTA DE FACTORES CRÍTICOS
Definiciones
estratégicas
Áreas de desempeño
Misión
Objetivos
estratégicos
Productos
finales
Actividades
(productos
intermedios)
45
MINISTERIO DEL AMBIENTE, ENERGÍA Y TELECOMUNICACIONES
MISIÓN:
Contribuir al mejoramiento de la calidad de vida de las y los habitantes del país mediante la promoción del manejo,
conservación y desarrollo sostenible de los elementos, bienes, servicios y recursos ambientales y naturales del país, cuya
gestión corresponda al Ministerio de Ambiente, Energía y Telecomunicaciones (MINAET) por disposición legal o convenio
internacional, garantizando la necesaria y plena armonía entre las actividades de desarrollo nacional y el respeto por la
naturaleza y la consolidación jurídica de los derechos ciudadanos en esta materia.
Para estos efectos el MINAET ejerce la rectoría a través del Ministro en materia del ambiente, energía y telecomunicaciones,
coordina la participación de las demás entidades públicas y privadas en la generación e implementación de políticas,
estrategias y acciones orientadas al cumplimiento de los objetivos nacionales e internacionales, y propicia la participación
amplia y responsable de los diferentes sectores de la sociedad civil.
46
PRIORIDADES INSTITUCIONALES:
1. Ejecución del Plan Nacional de la Gestión Integrada del Recurso Hídrico.
2. Ejecución de las acciones prioritarias de la Estrategia de Conservación, Uso y Manejo de la Biodiversidad.
3. Impulso de una Agenda Ambiental Integral que permita el posicionamiento internacional de Costa Rica como país
líder en Conservación de la Naturaleza.
4. Colaboración con el programa de Paz con la Naturaleza, en la realización de una serie de eventos periódicos en la
que participarán diferentes entidades públicas y privadas.
5. Promoción e incorporación de prácticas productivas, que permitan el uso racional y la conservación de los Recursos
Naturales.
6. Ejecución del Programa de Calidad Ambiental, dirigido al establecimiento de normas para la recuperación de la
calidad del ambiente.
7. Implementación del Plan Nacional de Cambio Climático que permita mitigar los Gases de Efecto Invernadero.
8. Ejecución del Programa de Modernización del MINAET y de las demás instituciones del Sector.
9. Ejecución del Programa de ordenamiento territorial.
10. Realización de un programa de mejora tecnológica.
11. Desarrollo de un Programa de Eficiencia Energética.
12. Desarrollo de la industria de biocombustibles.
13. Implementación del Plan Nacional de Gestión Integrada del Subsector Geológico Minero.
14. Desarrollo y mejoramiento de la prestación de los servicios de telecomunicaciones.
47
OBJETIVOS ESTRATEGICOS INSTITUCIONALES:
Hacer posible la gestión integrada y sostenible del Recurso Hídrico, dentro de un marco legal e institucional renovado.
Fomentar la conservación de la diversidad biológica, la utilización sostenible de sus componentes y la participación
justa y equitativa en los beneficios que se deriven de la utilización de los recursos genéticos, mediante un adecuado
acceso a esos recursos y una transferencia apropiada de las tecnologías pertinentes.
Fortalecer el uso sostenible de los recursos forestales en terrenos privados, superar las limitaciones actuales en la
política de pago de servicios ambientales y reducir gradualmente los incendios forestales causados por el ser
humano.
Detener el proceso de deterioro de los recursos costeros y marinos y poner en marcha un modelo sostenible para su
utilización.
Incrementar la efectividad de la política de protección de áreas silvestres protegidas.
Coadyuvar con el fortalecimiento de la educación para el desarrollo sostenible y una vida saludable y contribuir a que
los estudiantes adquieran el conocimiento, la sensibilidad, los valores y las competencias necesarias para defender y
garantizar una convivencia armoniosa y responsable con los otros y con la naturaleza.
Garantizar el cumplimiento de estrategias, planes y programas institucionales sobre la base de compromisos
internacionales establecidos.
Situar a Costa Rica como potencia moral en materia ambiental y promover iniciativas de paz con la naturaleza y los
bienes globales atendiendo varios frentes: cambio climático, biodiversidad, conservación y protección del bosque,
recursos hídricos y recursos marinos.
Lograr un equilibrio entre la producción competitiva, la producción familiar y el ambiente.
Establecer normas para la recuperación de la calidad del ambiente.
48
Mejorar la calidad del aire, particularmente en el Gran Área Metropolitana, a efecto que cumpla con los estándares
internacionales y la protección de la salud de los habitantes.
Aprovechar las nuevas oportunidades de los mercados voluntarios para los servicios que ofrecen las áreas protegidas
tanto públicas como privadas.
Reformar la institucionalidad del Sector Ambiente, Energía y Telecomunicaciones, de manera que se evite la
desarticulación, los traslapes y los vacíos de competencias y que estos sean sustituidos por una efectiva rectoría
sectorial que comprenda a todos los entes públicos del sector, incluyendo a instituciones emblemáticas como el
Instituto Costarricense de Electricidad, Acueductos y Alcantarillados y la Refinadora Costarricense de Petróleo.
Lograr mejoras en áreas críticas de servicio a la ciudadanía y a la actividad económica del país a cargo de
dependencias del Poder Ejecutivo para agilizar, simplificar y elevar la calidad de dichos servicios.
Reforzar la acción institucional del Poder Ejecutivo mediante el fortalecimiento de las rectorías en el Poder Ejecutivo y
en el Ministerio de Planificación.
Ordenar y regular el uso del territorio de manera que se detenga el proceso de degradación de los suelos.
Ampliar la calidad de generación de energía en operación, a partir de fuentes renovables, así como la capacidad de
almacenamiento de combustibles y ampliar las líneas de transmisión y distribución de energía.
Reducir la dependencia de combustibles importados y aprovechar mejor las fuentes de energía renovables del país,
así como llegar a producir el 100% de electricidad del país a partir de estas fuentes de energía.
Implementar el programa nacional de biocombustibles.
Aprovechar el recurso minero para cubrir las necesidades humanas sustentablemente.
Desarrollar un sistema nacional de telecomunicaciones internacionalmente competitivo en términos de calidad,
variedad y precio de los servicios ofrecidos, que opere bajo un marco de regulación moderno y siente las bases para
potenciar un nuevo modelo de desarrollo de la sociedad de información y conocimiento, con una visión inclusiva,
universal, solidaria y competitiva internacionalmente.
50
Definiciones
estratégicas
Áreas de desempeño Indicadores
Misión
Objetivos
estratégicos
Productos
finales
Actividades
(productos
intermedios)
Para cada área se deben definir los indicadores más
relevantes
52
Pertinencia: medir lo correcto
¿No hay dudas respecto de qué se está midiendo?
Relevancia: debe reflejar una dimensión importante del logro del
objetivo. No medirlo todo.
¿Permite verificar el logro del objetivo en un aspecto sustantivo?
Costo razonable: la información necesaria para generar el indicador
debe estar disponible a un costo razonable
¿El beneficio de la información es mayor que el costo de
obtenerla?
Cada indicador propuesto debe ser validado técnicamente,
según los siguientes criterios:
53
Confiabilidad: datos suficientes y demostrables
Independencia: medir lo controlable
¿Los resultados dependen de la entidad?
Integración: si hay más de un indicador para medir el desempeño de
un objetivo, debe proveer información adicional en comparación con
los otros indicadores propuestos (integración de dimensiones)
¿Mide aspectos no considerados en los demás indicadores?
Homogeneidad: medidas equivalentes
¿Permiten la comparación con otras entidades o estándares?
54
Paso 4: Validar los Indicadores
Indicadores Relevancia Pertinencia Costo
razonable
Integración Indepen-
dencia
Homoge-
neidad
Confiabilidad
1. Sí Sí Sí Sí Sí Sí Sí
2. Sí Sí No Sí Sí Sí Sí
56
Definiciones
estratégicas
Áreas de
desempeño
Indicadores Fórmulas
Misión
Objetivos
estratégicos
Productos
finales
Actividades
(productos
intermedios)
Para cada indicador validado se debe definir la
fórmula de cálculo
58
El nombre del indicador debe ser:
Autoexplicativo
Contextualizado
Por ejemplo:
“Porcentaje de solicitudes respondidas”
¿Es autoexplicativo y contextualizado?
Nombre del Indicador
59
“Porcentaje de solicitudes respondidas”
En la Oficina Principal de la institución
En el país
En un mes
En un año
Respecto de las solicitudes presentadas
Etc.
Nombre del Indicador
60
Nombre del indicador
Qué o cuál es la medición…………….universo a considerar
(contexto)
% de solicitudes respecto de las
respondidas solicitudes ingresadas
Nombre del Indicador
61
Porcentaje de solicitudes respondidas respecto de las solicitudes ingresadas
Variables
Variable 1: solicitudes respondidas Numerador
Variable 2: solicitudes ingresadas Denominador
RespondidasIngresadas
Indica la relación
Nombre del Indicador
62
Fórmula:
Numerador
Denominador
Total de solicitudes respondidas en el año t
Total de solicitudes ingresadas en el año t
* 100
* 100
Fórmula de cálculo
63
Tipos de fórmulas más usadas
Porcentaje (proporciones)
Tasa de variación
Razón o promedio
Índices
Fórmula de cálculo
64
Razón entre dos variables con una misma unidad de
medida
numerador
denominador* 100 = X por ciento
Igual unidad de medida (personas,
Km., solicitudes, etc.
1. Porcentajes (cobertura, focalización, etc.)
65
“Porcentaje de cobertura en la atención de adultos mayores”
(Total de adultos mayores atendidos / Total de adultos mayores del
país)*100
Adultos Mayores
del país Adultos Mayores
atendidos
COBERTURA
Cobertura:
66
“Porcentaje de adultos mayores atendidos que se encuentran en
situación de extrema pobreza”
(Total de adultos mayores atendidos que se encuentran en situación de
extrema pobreza / Total de adultos mayores atendidos)*100
Adultos Mayores
del país
Adultos Mayores
atendidos
Adultos Mayores
pobres
FOCALIZACIÓN
Focalización:
67
Razón entre una misma variable pero en periodos diferentes
variable año t variable año t – variable año t-1
Variable año t-1 variable año t-1- 1
= X por ciento
* 100 = * 100
2. Tasa de variación
68
Ejemplo:
Tasa de variación de las exportaciones del país
{(Total exportaciones año t / Total exportaciones año t-1) – 1*100}*100
2. Tasa de variación
69
Relación entre dos variables con distinta unidad de
medida
numerador
denominador
= unidades promedio del numerador por
cada unidad del denominador
3. Razón o Promedio (tiempos promedio, costos
promedio, etc)
70
Ejemplo:
Tiempo promedio de tramitación de solicitudes
Tpo. Solicitud 1 + Tpo. Solicitud 2 + ..... + Tpo. Solicitud n
Total de solicitudes tramitadas
Sumatoria de tiempos de tramitación de cada solicitud / Total
de solicitudes tramitadas = tiempo promedio por solicitud
3. Razón o Promedio (tiempos promedio, costos
promedio, etc)
71
Ejemplo:
Promedio de alumnos por profesor de educación media
Total de alumnos de educación media en el año
Total de profesores de educación media en el año t
= Alumnos promedio por profesor
3. Razón o Promedio (tiempos promedio, costos
promedio, etc)
72
Permiten medir la evolución de una variable en el tiempo, a partir de un valor
base.
Ejemplo, Índice de Remuneraciones
Promedio anual de remuneraciones año base: 5.000
Promedio anual de remuneraciones año t: 5.350
Índice año base: (Valor año base / valor año base)*100
= (5.000 / 5.000)*100 = 100
Índice año t: (Valor año t/ valor año base)*100
= (5.350 / 5.000)*100 = 107
4. Índices
73
Promedio anual de remuneraciones año t+1: 5.885
Índice año t+1: (Valor año t+1/ valor año base)*100
= (5.885 / 5.000)*100 = 117,7
Valor índice:
Año t+1 = 117,7
Año t = 107,0
Año base = 100,0
4. Índices
74
Promedio anual de remuneraciones año n:
Índice año n = (Valor año n / valor año base)*100
4. Índices
75
Desagregación por Sexo
Porcentaje de personas pobres del país
Distribución de pobreza por sexo:
•(Total hombres pobres / Total personas pobres)*100
•(Total mujeres pobres / Total personas pobres)*100
Porcentaje de pobreza según sexo:
•(Hombres pobres / Total hombres)*100
•(Mujeres pobres / Total mujeres)*100
76
Indicadores que permitan medir continuamente (año aaño) variables relevantes en el cumplimiento de lamisión y de interés para la ciudadanía
Tasa de escolaridad
Porcentaje de recaudación de impuestos
Porcentaje de vías en buen estado
Porcentaje de delitos contra la propiedad
Porcentaje de plagas bajo control
Porcentaje de fallos favorables
Tiempo de respuesta
77
PASO 6:
Establecer Fuentes de Información, Medios de
Verificación y definir Indicadores Factibles de medir
78
Para cada indicador, ¿está disponible la información en mi institución?
SÍ No
¿está en otra Entidad?
Sí No
¿el beneficio > costo de obtenerla?
Sí No
Fuentes de Información
Se mide
Se busca
una proxy
79
Información contable-presupuestaria
Estadísticas de producción física, cargas de
trabajo del personal
Encuestas, estudios especiales
Benchmarking, etc.
Fuentes de Información
80
Para posteriormente verificar el cumplimiento de las
metas
Registros de la institución
Estadísticas oficiales
Encuestas (externas)
Medios de Verificación
82
Las Metas constituyen la expresión concreta y
cuantificable de los logros que se planea alcanzar en el
año (u otro periodo de tiempo) con relación a los objetivos
previamente definidos.
Sentido de la Medición:
•Ascendente (cobertura, focalización, etc.)
•Descendente (tiempos de respuesta, tasas de
enfermedades, etc.)
¿Qué es mejor como desempeño de la institución?
83
Importancia de las metas para el seguimiento
(monitoreo) y evaluación
Medición y evaluación
Retroalimentación
Medidas correctivas
84
Evaluación
• La evaluación es la comparación de los resultados
obtenidos con las metas establecidas. La evaluación
puede ocurrir durante el periodo de ejecución
(evaluación contingente) o al finalizar dicho periodo
(evaluación ex post).
85
Retroalimentación
• Los resultados de las evaluaciones se comunican alos encargados de cada área y a la Dirección, a finde que estén informados respecto al grado deavance de las metas planteadas y, en caso deproducirse desviaciones importantes respecto a loprogramado, se acuerden las medidas correctivas
que se adoptarán.
86
Medidas correctivas
• Las medidas correctivas pueden consistir en cambios
en las áreas, cambio en las metas, nuevas
asignaciones o recortes de los recursos
presupuestarios, revisión de las tareas, etc.
87
Indicador y meta
• El resultado de la medición del indicador entrega un “valor”.
• Este valor se compara con la meta establecida para el indicador.
• La comparación permite establecer un juicio respecto del desempeño de la institución.
88
Ejemplo
• Indicador: Porcentaje de gastos administrativos
• Valor del indicador: 15%
• Meta del indicador: 20%
• Valor del indicador de institución similar: 10%
Juicios:
• Cumplí la meta.
• Estoy por sobre el valor de una institución similar
89
Requisitos de las metas
Su establecimiento debe considerar diferentes parametros(desempeño histórico, programas similares, estándares)
Deben ser posibles de cumplir por la institución con los recursos financieros, humanos, físicos y tecnológicos disponibles
Su logro debe depender de la institución (establecer supuestos)
90
Requisitos de las metas
Deben establecerse para ser cumplidas en un plazodeterminado
Deben expresar claramente el ámbito geográfico que cubre
Deben ser conocidas y acordadas con los ejecutores de las distintas áreas (establecer los responsables por el cumplimiento)
91
Para establecer la meta se deben considerar diferentes
parámetros
Línea base y desempeño histórico
Desempeño de instituciones similares
(benchmarking)
Estándares aplicados a normas técnicas
92
Pasos para determinar una meta
• Identificar la línea base
• Se toma como referencia el
actual desempeño
Existe?
Meta
Indicador Año t
% de alumnos 60%
egresados
¿No existe?
Se construye¡¡¡
•Programas
similares
•Estándar técnico
93
¿Qué es la línea base?
• Dato que se tomará como inicio para establecer losvalores futuros a alcanzar por el indicador, los que servirán para evaluar el grado de cumplimiento de las metas.
• Para indicadores nuevos, podría suceder que no exista un valor base, por lo cual debe ser estimado.
• Una vez realizada la primera medición, se tomará como línea de base el último dato obtenido.
94
¿Dónde estamos ahora?
¿Cómo hemos estado antes?
0
10
20
30
40
50
60
70
80
90
2004 2005 2006 2007
becas
subsidios
cr�ditos
¿Cuan lejos
queremos y
podemos llegar?
95
Considerar el nivel de desempeño de las metas a nivel
nacional / local
• El tiempo de respuesta de la entrega de los
pasaportes será el mismo en el país, en el Estado
o en una determinada Región.
• Los kilómetros de vías reparadas serán un
promedio nacional o en un tramo específico.
96
Las metas deben tener asignados responsables por su
cumplimiento a nivel de la organización
• Debe quedar claramente establecido cual es la
Unidad, Área, Dirección, que es responsable por el
cumplimiento de la meta, aún cuando otras áreas
intervengan con producción intermedia o final.
97
Problemas frecuentes cuando se establecen las metas
• No existen o no se
construyen los medios de
verificación
• Los supuestos no son
pertinentes (se imputan
aspectos que la institución sí
controla)
• La evaluación (el juicio sobre
el desempeño no es
confiable)
• Las metas estimulan un
desempeño poco innovador
y desafiante
98
Problemas frecuentes cuando se establecen las metas
• No existen datos disponibles
para estimar la línea base
• La institución desconoce
estándares de entidades
similares
• Se desconoce la población
objetivo y potencial
• Riesgo se sobre o subvalorar la meta
• No es posible evaluar
respecto de las mejores prácticas (autocomplacencia)
• La meta no permite monitorear el avance hacia el cumplimiento
del objetivo (y por lo tanto no se pueden tomar decisiones adecuadas)
99
Problemas frecuentes cuando se establecen las metas
• Subvaloracion de las metas
frente a un ambiente punitivo de
la evaluacion
• Trampa de la medición: se
muestra como resultados (y se
hace) solo lo que se puede
medir
• Incentivos perversos
(detenciones por delito, tiempos
de resupuestas, etc.)
• Escasa utilidad para la toma de
decisiones y mejora de la gestión
• No es posible avanzar hacia la
mejora de los resultados relevantes
para la organización y por ende
para la ciudadanía
• Resultados no esperados
(detenciones arbitrarias, baja
calidad de servicio, etc.)
100
Factores externos no controlables por la institución:
•Tipo de cambio
•Ingresos esperados
•Tarifas
•Nivel de demanda de los ciudadanos
•Aprobación de procesos por entes externos
•Flujo de recursos internacionales
Deben ser muy concretos y no generales
Supuestos
101
Comprometo X meta siempre y cuando se cumplan
los siguientes supuestos:
•Tipo de cambio no aumente más de 10%
•La solicitudes de tramitación no aumenten más de
15%
Supuestos
102
Considerar los supuestos no controlables por la
institución
• Variaciones del tipo de cambio, o de determinados preciospueden afectar niveles de ingresos esperados, tarifas, etc
– Aplicable a recaudación de ciertos tributos, crecimiento,etc.
– Aplicable para la estimación de indicadores de eficienciaque miden la relación entre insumo (costos, mano deobra, etc) con los productos obtenidos.
103
Considerar los supuestos no controlables por la
institución
Licitaciones que escapan al control de la institución,para lo cual se debe señalar que el producto oresultado prevé que la licitación estará resuelta enuna fecha determinada.
– Aplicable a metas relacionadas con porcentajesde planes de inversión concluidos, o a laimplementación de grandes proyectos,construcciones, etc
104
Considerar los supuestos no controlables por la
institución
Provisión de recursos internacionales. Aquellosproyectos que dependen de desembolsos decooperación o préstamos internacionales, debeseñalarse la fecha prevista de su disponibilidad.
• Situaciones de orden climático que alteren elcomportamiento de obras, actividades agrícolas, etc.
105
Considerar los supuestos no controlables por la
institución
Resultados que dependen de variables políticas, tales
como aprobación de tratados de libre comercio,
reformas fiscales, o de otro tipo.
·
Resultados que dependen de acciones coordinadas
con otras instituciones y que no exista el control para
cambiar los cursos de acción de las otras entidades
106
Ejemplos de algunos aspectos sobre los cuales
establecer Supuestos
• Situación macroeconómica
• Beneficiarios usan los componentes adecuadamente
• Se cumplen las corresponsabilidades de otros actores
• Otros estados o entidades destinan los recursos para lo
que está establecido
• El presupuesto es entregado al programa en el tiempo
establecido
108
Frecuencia
Misión
Objetivos
estratégicos
Productos
Actividades
Frecuencia
Disminuye
Aumenta
Depende de la disponibilidad de la información (Fuente deInformación) y del nivel de los objetivos que se está midiendo
109
• Las necesidades de uso de la información generada por
los indicadores (proceso de toma de decisiones)
• Tiempo estimado en que se producirán los resultados del
programa en los beneficiarios
• Disponibilidad de información cuando ésta es obtenida o
proporcionada por fuentes externas
• Compromisos de cuenta pública o de informar resultados
de la gestión (Secretaría de Hacienda)
Factores que inciden en la frecuencia de medición de los indicadores
111
Objetivos de la Evaluación
Establecer el grado de cumplimiento de los objetivos y metas comprometidos en el presupuesto.
Posibilitar una discusión más fundamentada en el proceso de asignación de recursos presupuestarios, vinculando los resultados de la gestión presupuestaria
Rendición de cuentas sobre los resultados de producción física de bienes y/o servicios, así como de las metas de gestión en términos de eficiencia, eficacia, calidad y economía
112
Usuarios de la Evaluación
Gobierno y Secretarios (Ministros)
Entidades y Programas, para retroalimentar las decisiones y mejorar la gestión
Congreso
Los usuarios y los ciudadanos
113
Comparar valor del indicador al final del periodo y meta establecida
Establecer No cumplimientos y Sobrecumplimientos (desviaciones)
Análizar las Causas de los resultados
Proponer Recomendaciones para corregir las desviaciones
Establecer Compromisos para implementar las recomendaciones
Definir Plazos de cumplimiento de los compromisos
Definir Responsables por el cumplimiento de compromisos
Definir Programa de Seguimiento de compromisos
Evaluación de los Resultados
114
Evaluación de los Resultados
(*): Indicadores Cumplidos, No Cumplidos o Sobrecumplidos
Indica-
dores
Valor
Indicador
Meta %
Cumpli-
miento
Resul-
tado(*)
Causas
del
Resul-
tado
Reco-
menda-
ciones
Compro-
misos
Plazos Respon-
sables
116
Breve reseña de la institución
Contexto de la medición: qué se midió y qué no
Recursos utilizados por la institución
Resultados de la gestión (logros y no logros)
Principales causas de desviaciones de resultados
Efectos de resultados negativos (en los ciudadanos, etc)
Compromisos para el periodo siguiente
Informar los Resultados
117
Lineamientos metodológicos para la construcción de indicadores de
desempeño
Dirección General de Presupuesto Nacional
Ministerio de Hacienda de Costa Rica
Roberto Jiménez M.
Consultor ILPES/CEPAL
“Planificación Estratégica y Construcción de Indicadores de
Desempeño en el Sector Público de Costa Rica”