lineamientos metodológicos para la construcción de ... · información cuantitativa respecto del...

117
1 Lineamientos metodológicos para la construcción de indicadores de desempeño Dirección General de Presupuesto Nacional Ministerio de Hacienda de Costa Rica Roberto Jiménez M. Consultor ILPES/CEPAL [email protected] “Planificación Estratégica y Construcción de Indicadores de Desempeño en el Sector Público de Costa Rica”

Upload: lamtram

Post on 27-Oct-2018

222 views

Category:

Documents


0 download

TRANSCRIPT

1

Lineamientos metodológicos para la construcción de indicadores de

desempeño

Dirección General de Presupuesto Nacional

Ministerio de Hacienda de Costa Rica

Roberto Jiménez M.

Consultor ILPES/CEPAL

[email protected]

“Planificación Estratégica y Construcción de Indicadores de

Desempeño en el Sector Público de Costa Rica”

2

¿QUÉ SON LOS INDICADORES?

3

Es una herramienta que entrega información

cuantitativa respecto del logro o resultado de los

objetivos de la institución, cubriendo aspectos

cuantitativos o cualitativos

¿Para qué sirve esta información?

TOMAR DECISIONES

Indicadores de Desempeño

4

“Que indica o sirve para indicar”

Latín = “Indicare” = Mostrar o significar algo, con

indicios y señales

Desempeño: capacidad de una institución para

gestionar adecuadamente sus recursos y dar

cumplimiento a los objetivos y metas establecidos

Indicadores de Desempeño

5

UN INDICADOR ES UNA SEÑAL, UN AVISO, QUE NOS

ENTREGA INFORMACIÓN

SE RELACIONA DIRECTAMENTE Y SIEMPRE CON UN OBJETIVO

Aumentar nivel

de escolaridad

del país

Años promedio de

escolaridad por

habitante del país

6

• Son herramientas de gestión que proveen un valor de referencia a partir

del cual se puede establecer una comparación entre las metas

planeadas y el desempeño logrado

• Un indicador de desempeño es una herramienta que entrega

información cuantitativa respecto del logro o resultado de los objetivos

de la institución

• Los indicadores de desempeño son medidas que describen cuán bien

se están desarrollando los objetivos de una institución, a qué costo y

con qué nivel de calidad.

7

• En un sistema de cuenta pública orientada a resultados, se requiere

datos sobre un conjunto de indicadores diferentes, que reflejan la

información requerida para distintos niveles de toma de decisiones.

• Los legisladores y los Directores requieren información estratégica

sobre la gestión de la institución (resultados finales e impacto),

mientras que los Gerentes de Divisiones, Departamentos o Programas

y sus staff requieren detalles sobre la provisión de insumos, las

actividades, los productos finales y resultados intermedios

8

• La idea de incorporar indicadores y metas de desempeño al proceso

presupuestario es disponer de información sobre los niveles de

cumplimiento de los objetivos planteados y resultados esperados de

cada institución y enriquecer el análisis en la formulación del

presupuesto y su discusión en el Congreso.

• Los indicadores y sus metas se presentan como información

complementaria al Proyecto de Ley de Presupuestos, y una vez

aprobado éste, las metas se vinculan con el seguimiento (monitoreo)

de la ejecución.

9

PRESUPUESTO NACIONAL

Recursos Bienes y Servicios Beneficiarios

(resultados:

Intermedio - final)

10

Presupuesto ($)

Producción (Q)Resultados

(desde punto de vista de los beneficiarios)

Indicadores

Productos

-Cobertura y focalización

-Oportunidad

-Carácterísticas de Bs. y Ss.

-Costos

Indicadores

Misión y Objetivos

Estratègicos

-Intermedio

-Final

Insumos / Procesos

INSTITUCIÓN

Indicadores

Actividades

-Programas de trabajo

-Programación

-Ejecución de recursos

11

Cadena de producción y resultado esperado

Alimentación

Consultas

Controles

Vacunación

Recursos

e

Insumos

Atención médica

Actividades (productos intermedios)

Productos (finales) Propósito

(Resultado Intermedio)

Fin

(Resultado Final)Actividades

Actividades

Actividades

Actividades

12

Objetivos (prioridades) de Gobierno

Secretarías Secretarías Secretarías Secretarías

EntidadesEntidades

ProgramaPrograma

Objetivos alineados

O

B

J

E

T

I

V

O

S

I

N

D

I

C

A

D

O

R

E

S

Operacionalización

de objetivos

Agregación

de mediciones

13

Secretarías Secretarías Secretarías Secretarías

Entidades EntidadesEntidades

División DivisiónDivisión

Dpto. Dpto.

Entidades

•Objetivos

•Resultados esperados

•Indicadores

14

Proceso (Actividades - productos intermedios):

Actividades vinculadas a la producción de bienes y servicios.

Corresponden a las necesarias para generar los productos finales

de la institución:

procedimientos de compra

licitaciones

procesos tecnológicos

administración financiera

etc.

- Porcentaje del presupuesto ejercido

- Porcentaje de compras de insumos efectuadas dentro del tiempo

programado

ÁMBITOS DE MEDICIÓN

15

Producto (productos finales):

Bienes y/o servicios públicos producidos o entregados por la

institución para cumplir con su misión. Está dirigido al

beneficiario final, o en algunos casos, intermedio.

- Porcentaje de alumnos que reciben la beca oportunamente

- Tiempo promedio de entrega de subsidios para la vivienda

- Metros cuadrados construidos promedio por vivienda

entregada

ÁMBITOS DE MEDICIÓN

16

Resultado intermedio:

Es el resultado directo a lograr en la población objetivo dado el

uso de los productos finales.

Es la aportación específica a la solución de un problema o

necesidad.

- Porcentaje de profesoras indígenas asesoradas que aplican

prácticas pedagógicas mejoradas con el enfoque de la

Educación Intercultural Bilingüe

ÁMBITOS DE MEDICIÓN

17

Resultados finales o impacto:

Contribución a la solución de un problema o necesidad

Complejidad de medir Impacto o Resultado Final: un programa

o institución por lo general contribuye a alcanzar un resultado

final y se complementa con la acción de otros programas e

instituciones.

ÁMBITOS DE MEDICIÓN

18

Resultados finales (impacto):

¿Cómo identificar el Impacto de nuestra institución?

El impacto no se produce inmediatamente y medirlo requiere

de un análisis más profundo, de la definición de un conjunto de

indicadores y otros instrumentos complementarios como las

evaluaciones de impacto.

- Tasa de crecimiento del Sector de Tecnologías de la

Información (TI)

ÁMBITOS DE MEDICIÓN

19

Eficacia:

Mide el grado de cumplimiento de los objetivos de la

institución.

En qué medida está cumpliendo con sus objetivos

No considera necesariamente los recursos asignados

para ello

- Porcentaje de becas entregadas en relación a las

programadas

DIMENSIONES DEL DESEMPEÑO

20

Eficiencia:

Mide la relación entre los productos finales generados con respecto

a los insumos o recursos utilizados.

Alcanzar un cierto nivel de producción utilizando el mínimo de

recursos posibles.

Aproximaciones a este concepto:

productividad media de los distintos factores de producción (nivel

de actividad y recursos utilizados)

costos de producción (costos medios, costos unitarios gastos

administrativos en relación al gasto total)

DIMENSIONES DEL DESEMPEÑO

21

Economía:

Mide la capacidad institucional para generar o movilizar

adecuadamente los recursos financieros

- Ingresos propios generados

- Presupuesto ejercido

DIMENSIONES DEL DESEMPEÑO

22

Calidad (eficacia):

Mide los atributos, capacidades o características que

deben tener los bienes y servicios para satisfacer las

necesidades de los usuarios.

- Grado de satisfacción de usuarios

- Tiempo de respuesta a requerimientos de los

beneficiarios

DIMENSIONES DEL DESEMPEÑO

23

EFICACIA

EFICIENCIA

ECONOMÍA

CALIDAD

PROCESOS PRODUCTO FIN Y PROPÓSITO

(resultados)

D

I

M

E

N

S

I

O

N

E

S

AMBITOS DE MEDICIÓN

24

6. Pirámide de indicadores y reportes

25

Matriz de indicadores

PROCESO PRODUCTO RESULTADO

INTERMEDIO

RESULTADO

FINAL

EFICACIA

EFICIENCIA

ECONOMIA

CALIDAD

26

Pirámide de indicadores y reportes

Indicadores:

Deben generar información relevante para quien toma decisiones

Deben cubrir toda la institución

Deben ser específicos para las decisiones de cada jefatura o directivo

Deben medir los aspectos relevantes de cada área

Deben ser un número manejable

Reportes:

Orientados a las necesidades de cada destinatario

Deben ser informes ejecutivos, de fácil lectura e interpretación

Periodicidad adecuada para cada destinatario

27

Algunos ejemplos de Indicadores en el ámbito de los

Procesos:

Porcentaje de ejecución del presupuesto

Porcentaje de gasto en Recursos Humanos respecto de gasto total

Porcentaje de gasto corriente respecto de gasto total

Porcentaje de productos entregados respecto de lo programado

Porcentaje de compras de insumos efectuadas dentro del tiempo programado

Porcentaje de licitaciones adjudicadas respecto de licitaciones totales

Porcentaje de ingresos propios percibidos respecto de los programados

Porcentaje de subsidios asignados

Porcentaje de familias pobres catastradas

Porcentaje de normas de aviación actualizadas

28

Ámbito de los Procesos productivos

(Ejemplos para Actividades Centrales)

Definir aquellos procesos que son claves para la generación de los productos (bienes y/o servicios):

procedimientos de compra

Adquisición de insumos – contratación de empresas proveedoras

Licitaciones

Externalización de servicios - subcontratación de empresas que proveen los productos

procesos tecnológicos

Implementación de servicios por internet - procesos para generar productos

29

Algunos ejemplos de indicadores en el ámbito de los

Productos:

Porcentaje de familias sin vivienda que reciben aportes del Estado

Porcentaje de familias pobres sin vivienda que reciben aporte del Estado respecto del

total de familias sin vivienda que reciben aporte del Estado

Tiempo promedio de entrega de subsidios para la vivienda

Metros de cuadrados construidos promedio por vivienda entregada

Porcentaje de condominios construidos que cuentan con infraestructura social

(lugares para reuniones, parques, plazas, juegos para niños)

Porcentaje de familias que manifiestan satisfacción con la vivienda entregada

30

Ámbito de los Productos:

Bienes y/o servicios proporcionados directamente a los usuarios:

Definir los requerimientos de los usuarios

Establecer las características de los productos

- Características técnicas del producto

- Tiempo de entrega a los usuarios

- Cobertura (todos los niños y niñas del país)

- Focalización (niños y niñas en situación riesgo social)

- Grado de satisfacción de los usuarios

31

Ámbito de los Resultados:

Resultados intermedios

• Cambio en el comportamiento de los beneficiarios una vez que han recibido los

bienes y/o servicios.

• La entrega de los bienes y/o servicios a los usuarios supone que conduce a la

• Obtención de los resultados finales.

• Constituye una aproximación a los resultados finales

32

Algunos ejemplos de indicadores en el ámbito

de Resultados Intermedios:

• Porcentaje de subsidios de vivienda efectivamente pagados respecto del total de subsidios otorgados

• Porcentaje de trabajadores sin calificación que egresan de un programa de capacitación técnica

• Porcentaje de participantes egresados de programa antidrogas con actitud crítica hacia la droga

• Porcentaje de empresas que no cumplen la normativa laboral

• Porcentaje de familias pobres que inician una actividad empresarial con apoyo del Estado

• Porcentaje de alumnos egresados de una carrera técnica

33

Resultados Finales o Impacto:

Resultados a nivel de fin de los bienes y servcios entregados, significan un mejoramiento en las condiciones objetivas de la población objetivo.

Complejidad de medir Impacto o Resultado Final:

un programas público contribuye a alcanzar un fin (resultado final)

se complementa con la acción de otros programas

¿Cómo identificar el Impacto de nuestro programa?

el impacto no se produce inmediatamente

es difícil medirlo con un indicador (mejoramiento de la calidad de vida)

por lo general no se dispone de información de punto de partida (línea base)

34

Indicador de resultado final o impacto

• Porcentaje de trabajadores sin calificación egresados de un programa de capacitación que consiguen un empleo permanente

• Porcentaje de personas que no reinciden después de participar en programa antidrogas

• Tasa de accidentes de aviación

• Porcentaje de familias que superan la línea de pobreza

• Tasa de variación de delitos

• Porcentaje de empresas que cumplen la normativa laboral

• Tasa de incidencia de la poliomielitis

• Tasa de obesidad infantil

• Porcentaje de días sin suministros eléctrico a la población

• Tasa de suspensión de servicios de internet

• Porcentaje de reclamos solucionados de usuarios de servicios de telefonía

35

Algunos ejemplos de indicadores de focalización:

Porcentaje de la población en situación de pobreza que recibe subsidio para agua

potable

Porcentaje de niños en situación de pobreza que reciben beca estudiantil

Porcentaje de adultos mayores que reciben complemento alimenticio contra la

desnutrición

Porcentaje de deportistas que acceden a programas de alto rendimiento

Porcentaje de comunas de alto riesgo cubiertas por programas especiales

antidelincuencia

Finalmente, también en eficacia se mide al cumplimiento de programas de trabajo:

Porcentaje de capacitaciones de funcionarios en relación a lo programado

36

Indicadores Estratégicos:

• De resultado final o impacto (Fin)

Indicadores de Gestión (responsabilidad directa de la institución):

• De resultado intermedio

• Asociados a Productos finales

• Asociados a Actividades

INDICADORES

37

PASOS PARA LA CONSTRUCCIÓN Y USO

DE INDICADORES DE DESEMPEÑO

38

1. Establecer las Definiciones Estratégicas

2. Establecer las Áreas de Desempeño a medir

3. Proponer Indicadores para cada área de desempeño

4. Validar técnicamente de indicadores propuestos

5. Construir las Fórmulas para cada indicador

6. Establecer Fuentes de Información, Medios de Verificación y definir

Indicadores factibles de medir

7. Establecer Línea base, Metas y Supuestos

8. Establecer Frecuencia de medición (seguimiento)

9. Monitorear y Evaluar los Resultados

10. Informar los Resultados

PASOS

39

PASO 1:

Establecer las Definiciones Estratégicas

40

Las Definiciones Estratègicas son el referente para

la medición del desempeño

Cimientos de un sistema de información de gestión

Misión

Objetivos estratégicos

Productos finales

Actividades (productos intermedios)

41

PASO 2:

Establecer las Áreas de Desempeño a medir

42

De las Definiciones estratégicas extraer las Áreas de desempeño que

deben ser medidas.

Nos hacemos las siguientes preguntas:

•¿Con qué objetivos de los objetivos de Gobierno y de la Secretaría está

alineada la institución? ¿Con cuáles se tiene más relación?

•¿Cuáles de estos objetivos se quieren medir?

•¿Cuáles son los principales aspectos que deben ser medidos?

•¿Qué ámbitos deben ser medidos?

•¿Qué dimensiones deben ser medidos?

•¿Quién utilizará la información?

•¿Qué decisiones tomará?

43

Misión MINAET:

Contribuir al mejoramiento de la calidad de vida de las y los habitantes del

país mediante la promoción del manejo, conservación y desarrollo sostenible

de los elementos, bienes, servicios y recursos ambientales y naturales del

país, cuya gestión corresponda al Ministerio de Ambiente, Energía y

Telecomunicaciones (MINAET) por disposición legal o convenio

internacional, garantizando la necesaria y plena armonía entre las

actividades de desarrollo nacional y el respeto por la naturaleza y la

consolidación jurídica de los derechos ciudadanos en esta materia.

Ejemplo:

44

LISTA DE FACTORES CRÍTICOS

Definiciones

estratégicas

Áreas de desempeño

Misión

Objetivos

estratégicos

Productos

finales

Actividades

(productos

intermedios)

45

MINISTERIO DEL AMBIENTE, ENERGÍA Y TELECOMUNICACIONES

MISIÓN:

Contribuir al mejoramiento de la calidad de vida de las y los habitantes del país mediante la promoción del manejo,

conservación y desarrollo sostenible de los elementos, bienes, servicios y recursos ambientales y naturales del país, cuya

gestión corresponda al Ministerio de Ambiente, Energía y Telecomunicaciones (MINAET) por disposición legal o convenio

internacional, garantizando la necesaria y plena armonía entre las actividades de desarrollo nacional y el respeto por la

naturaleza y la consolidación jurídica de los derechos ciudadanos en esta materia.

Para estos efectos el MINAET ejerce la rectoría a través del Ministro en materia del ambiente, energía y telecomunicaciones,

coordina la participación de las demás entidades públicas y privadas en la generación e implementación de políticas,

estrategias y acciones orientadas al cumplimiento de los objetivos nacionales e internacionales, y propicia la participación

amplia y responsable de los diferentes sectores de la sociedad civil.

46

PRIORIDADES INSTITUCIONALES:

1. Ejecución del Plan Nacional de la Gestión Integrada del Recurso Hídrico.

2. Ejecución de las acciones prioritarias de la Estrategia de Conservación, Uso y Manejo de la Biodiversidad.

3. Impulso de una Agenda Ambiental Integral que permita el posicionamiento internacional de Costa Rica como país

líder en Conservación de la Naturaleza.

4. Colaboración con el programa de Paz con la Naturaleza, en la realización de una serie de eventos periódicos en la

que participarán diferentes entidades públicas y privadas.

5. Promoción e incorporación de prácticas productivas, que permitan el uso racional y la conservación de los Recursos

Naturales.

6. Ejecución del Programa de Calidad Ambiental, dirigido al establecimiento de normas para la recuperación de la

calidad del ambiente.

7. Implementación del Plan Nacional de Cambio Climático que permita mitigar los Gases de Efecto Invernadero.

8. Ejecución del Programa de Modernización del MINAET y de las demás instituciones del Sector.

9. Ejecución del Programa de ordenamiento territorial.

10. Realización de un programa de mejora tecnológica.

11. Desarrollo de un Programa de Eficiencia Energética.

12. Desarrollo de la industria de biocombustibles.

13. Implementación del Plan Nacional de Gestión Integrada del Subsector Geológico Minero.

14. Desarrollo y mejoramiento de la prestación de los servicios de telecomunicaciones.

47

OBJETIVOS ESTRATEGICOS INSTITUCIONALES:

Hacer posible la gestión integrada y sostenible del Recurso Hídrico, dentro de un marco legal e institucional renovado.

Fomentar la conservación de la diversidad biológica, la utilización sostenible de sus componentes y la participación

justa y equitativa en los beneficios que se deriven de la utilización de los recursos genéticos, mediante un adecuado

acceso a esos recursos y una transferencia apropiada de las tecnologías pertinentes.

Fortalecer el uso sostenible de los recursos forestales en terrenos privados, superar las limitaciones actuales en la

política de pago de servicios ambientales y reducir gradualmente los incendios forestales causados por el ser

humano.

Detener el proceso de deterioro de los recursos costeros y marinos y poner en marcha un modelo sostenible para su

utilización.

Incrementar la efectividad de la política de protección de áreas silvestres protegidas.

Coadyuvar con el fortalecimiento de la educación para el desarrollo sostenible y una vida saludable y contribuir a que

los estudiantes adquieran el conocimiento, la sensibilidad, los valores y las competencias necesarias para defender y

garantizar una convivencia armoniosa y responsable con los otros y con la naturaleza.

Garantizar el cumplimiento de estrategias, planes y programas institucionales sobre la base de compromisos

internacionales establecidos.

Situar a Costa Rica como potencia moral en materia ambiental y promover iniciativas de paz con la naturaleza y los

bienes globales atendiendo varios frentes: cambio climático, biodiversidad, conservación y protección del bosque,

recursos hídricos y recursos marinos.

Lograr un equilibrio entre la producción competitiva, la producción familiar y el ambiente.

Establecer normas para la recuperación de la calidad del ambiente.

48

Mejorar la calidad del aire, particularmente en el Gran Área Metropolitana, a efecto que cumpla con los estándares

internacionales y la protección de la salud de los habitantes.

Aprovechar las nuevas oportunidades de los mercados voluntarios para los servicios que ofrecen las áreas protegidas

tanto públicas como privadas.

Reformar la institucionalidad del Sector Ambiente, Energía y Telecomunicaciones, de manera que se evite la

desarticulación, los traslapes y los vacíos de competencias y que estos sean sustituidos por una efectiva rectoría

sectorial que comprenda a todos los entes públicos del sector, incluyendo a instituciones emblemáticas como el

Instituto Costarricense de Electricidad, Acueductos y Alcantarillados y la Refinadora Costarricense de Petróleo.

Lograr mejoras en áreas críticas de servicio a la ciudadanía y a la actividad económica del país a cargo de

dependencias del Poder Ejecutivo para agilizar, simplificar y elevar la calidad de dichos servicios.

Reforzar la acción institucional del Poder Ejecutivo mediante el fortalecimiento de las rectorías en el Poder Ejecutivo y

en el Ministerio de Planificación.

Ordenar y regular el uso del territorio de manera que se detenga el proceso de degradación de los suelos.

Ampliar la calidad de generación de energía en operación, a partir de fuentes renovables, así como la capacidad de

almacenamiento de combustibles y ampliar las líneas de transmisión y distribución de energía.

Reducir la dependencia de combustibles importados y aprovechar mejor las fuentes de energía renovables del país,

así como llegar a producir el 100% de electricidad del país a partir de estas fuentes de energía.

Implementar el programa nacional de biocombustibles.

Aprovechar el recurso minero para cubrir las necesidades humanas sustentablemente.

Desarrollar un sistema nacional de telecomunicaciones internacionalmente competitivo en términos de calidad,

variedad y precio de los servicios ofrecidos, que opere bajo un marco de regulación moderno y siente las bases para

potenciar un nuevo modelo de desarrollo de la sociedad de información y conocimiento, con una visión inclusiva,

universal, solidaria y competitiva internacionalmente.

49

PASO 3:

Proponer Indicadores para cada área de desempeño

50

Definiciones

estratégicas

Áreas de desempeño Indicadores

Misión

Objetivos

estratégicos

Productos

finales

Actividades

(productos

intermedios)

Para cada área se deben definir los indicadores más

relevantes

51

PASO 4:

Validar técnicamente los Indicadores propuestos

52

Pertinencia: medir lo correcto

¿No hay dudas respecto de qué se está midiendo?

Relevancia: debe reflejar una dimensión importante del logro del

objetivo. No medirlo todo.

¿Permite verificar el logro del objetivo en un aspecto sustantivo?

Costo razonable: la información necesaria para generar el indicador

debe estar disponible a un costo razonable

¿El beneficio de la información es mayor que el costo de

obtenerla?

Cada indicador propuesto debe ser validado técnicamente,

según los siguientes criterios:

53

Confiabilidad: datos suficientes y demostrables

Independencia: medir lo controlable

¿Los resultados dependen de la entidad?

Integración: si hay más de un indicador para medir el desempeño de

un objetivo, debe proveer información adicional en comparación con

los otros indicadores propuestos (integración de dimensiones)

¿Mide aspectos no considerados en los demás indicadores?

Homogeneidad: medidas equivalentes

¿Permiten la comparación con otras entidades o estándares?

54

Paso 4: Validar los Indicadores

Indicadores Relevancia Pertinencia Costo

razonable

Integración Indepen-

dencia

Homoge-

neidad

Confiabilidad

1. Sí Sí Sí Sí Sí Sí Sí

2. Sí Sí No Sí Sí Sí Sí

55

PASO 5:

Construir las Fórmulas para cada indicador

56

Definiciones

estratégicas

Áreas de

desempeño

Indicadores Fórmulas

Misión

Objetivos

estratégicos

Productos

finales

Actividades

(productos

intermedios)

Para cada indicador validado se debe definir la

fórmula de cálculo

57

Nombre del indicador

Variables que intervienen

Fórmula del indicador

Construcción de Fórmulas

58

El nombre del indicador debe ser:

Autoexplicativo

Contextualizado

Por ejemplo:

“Porcentaje de solicitudes respondidas”

¿Es autoexplicativo y contextualizado?

Nombre del Indicador

59

“Porcentaje de solicitudes respondidas”

En la Oficina Principal de la institución

En el país

En un mes

En un año

Respecto de las solicitudes presentadas

Etc.

Nombre del Indicador

60

Nombre del indicador

Qué o cuál es la medición…………….universo a considerar

(contexto)

% de solicitudes respecto de las

respondidas solicitudes ingresadas

Nombre del Indicador

61

Porcentaje de solicitudes respondidas respecto de las solicitudes ingresadas

Variables

Variable 1: solicitudes respondidas Numerador

Variable 2: solicitudes ingresadas Denominador

RespondidasIngresadas

Indica la relación

Nombre del Indicador

62

Fórmula:

Numerador

Denominador

Total de solicitudes respondidas en el año t

Total de solicitudes ingresadas en el año t

* 100

* 100

Fórmula de cálculo

63

Tipos de fórmulas más usadas

Porcentaje (proporciones)

Tasa de variación

Razón o promedio

Índices

Fórmula de cálculo

64

Razón entre dos variables con una misma unidad de

medida

numerador

denominador* 100 = X por ciento

Igual unidad de medida (personas,

Km., solicitudes, etc.

1. Porcentajes (cobertura, focalización, etc.)

65

“Porcentaje de cobertura en la atención de adultos mayores”

(Total de adultos mayores atendidos / Total de adultos mayores del

país)*100

Adultos Mayores

del país Adultos Mayores

atendidos

COBERTURA

Cobertura:

66

“Porcentaje de adultos mayores atendidos que se encuentran en

situación de extrema pobreza”

(Total de adultos mayores atendidos que se encuentran en situación de

extrema pobreza / Total de adultos mayores atendidos)*100

Adultos Mayores

del país

Adultos Mayores

atendidos

Adultos Mayores

pobres

FOCALIZACIÓN

Focalización:

67

Razón entre una misma variable pero en periodos diferentes

variable año t variable año t – variable año t-1

Variable año t-1 variable año t-1- 1

= X por ciento

* 100 = * 100

2. Tasa de variación

68

Ejemplo:

Tasa de variación de las exportaciones del país

{(Total exportaciones año t / Total exportaciones año t-1) – 1*100}*100

2. Tasa de variación

69

Relación entre dos variables con distinta unidad de

medida

numerador

denominador

= unidades promedio del numerador por

cada unidad del denominador

3. Razón o Promedio (tiempos promedio, costos

promedio, etc)

70

Ejemplo:

Tiempo promedio de tramitación de solicitudes

Tpo. Solicitud 1 + Tpo. Solicitud 2 + ..... + Tpo. Solicitud n

Total de solicitudes tramitadas

Sumatoria de tiempos de tramitación de cada solicitud / Total

de solicitudes tramitadas = tiempo promedio por solicitud

3. Razón o Promedio (tiempos promedio, costos

promedio, etc)

71

Ejemplo:

Promedio de alumnos por profesor de educación media

Total de alumnos de educación media en el año

Total de profesores de educación media en el año t

= Alumnos promedio por profesor

3. Razón o Promedio (tiempos promedio, costos

promedio, etc)

72

Permiten medir la evolución de una variable en el tiempo, a partir de un valor

base.

Ejemplo, Índice de Remuneraciones

Promedio anual de remuneraciones año base: 5.000

Promedio anual de remuneraciones año t: 5.350

Índice año base: (Valor año base / valor año base)*100

= (5.000 / 5.000)*100 = 100

Índice año t: (Valor año t/ valor año base)*100

= (5.350 / 5.000)*100 = 107

4. Índices

73

Promedio anual de remuneraciones año t+1: 5.885

Índice año t+1: (Valor año t+1/ valor año base)*100

= (5.885 / 5.000)*100 = 117,7

Valor índice:

Año t+1 = 117,7

Año t = 107,0

Año base = 100,0

4. Índices

74

Promedio anual de remuneraciones año n:

Índice año n = (Valor año n / valor año base)*100

4. Índices

75

Desagregación por Sexo

Porcentaje de personas pobres del país

Distribución de pobreza por sexo:

•(Total hombres pobres / Total personas pobres)*100

•(Total mujeres pobres / Total personas pobres)*100

Porcentaje de pobreza según sexo:

•(Hombres pobres / Total hombres)*100

•(Mujeres pobres / Total mujeres)*100

76

Indicadores que permitan medir continuamente (año aaño) variables relevantes en el cumplimiento de lamisión y de interés para la ciudadanía

Tasa de escolaridad

Porcentaje de recaudación de impuestos

Porcentaje de vías en buen estado

Porcentaje de delitos contra la propiedad

Porcentaje de plagas bajo control

Porcentaje de fallos favorables

Tiempo de respuesta

77

PASO 6:

Establecer Fuentes de Información, Medios de

Verificación y definir Indicadores Factibles de medir

78

Para cada indicador, ¿está disponible la información en mi institución?

SÍ No

¿está en otra Entidad?

Sí No

¿el beneficio > costo de obtenerla?

Sí No

Fuentes de Información

Se mide

Se busca

una proxy

79

Información contable-presupuestaria

Estadísticas de producción física, cargas de

trabajo del personal

Encuestas, estudios especiales

Benchmarking, etc.

Fuentes de Información

80

Para posteriormente verificar el cumplimiento de las

metas

Registros de la institución

Estadísticas oficiales

Encuestas (externas)

Medios de Verificación

81

PASO 7:

Establecer línea base, metas y Supuestos

82

Las Metas constituyen la expresión concreta y

cuantificable de los logros que se planea alcanzar en el

año (u otro periodo de tiempo) con relación a los objetivos

previamente definidos.

Sentido de la Medición:

•Ascendente (cobertura, focalización, etc.)

•Descendente (tiempos de respuesta, tasas de

enfermedades, etc.)

¿Qué es mejor como desempeño de la institución?

83

Importancia de las metas para el seguimiento

(monitoreo) y evaluación

Medición y evaluación

Retroalimentación

Medidas correctivas

84

Evaluación

• La evaluación es la comparación de los resultados

obtenidos con las metas establecidas. La evaluación

puede ocurrir durante el periodo de ejecución

(evaluación contingente) o al finalizar dicho periodo

(evaluación ex post).

85

Retroalimentación

• Los resultados de las evaluaciones se comunican alos encargados de cada área y a la Dirección, a finde que estén informados respecto al grado deavance de las metas planteadas y, en caso deproducirse desviaciones importantes respecto a loprogramado, se acuerden las medidas correctivas

que se adoptarán.

86

Medidas correctivas

• Las medidas correctivas pueden consistir en cambios

en las áreas, cambio en las metas, nuevas

asignaciones o recortes de los recursos

presupuestarios, revisión de las tareas, etc.

87

Indicador y meta

• El resultado de la medición del indicador entrega un “valor”.

• Este valor se compara con la meta establecida para el indicador.

• La comparación permite establecer un juicio respecto del desempeño de la institución.

88

Ejemplo

• Indicador: Porcentaje de gastos administrativos

• Valor del indicador: 15%

• Meta del indicador: 20%

• Valor del indicador de institución similar: 10%

Juicios:

• Cumplí la meta.

• Estoy por sobre el valor de una institución similar

89

Requisitos de las metas

Su establecimiento debe considerar diferentes parametros(desempeño histórico, programas similares, estándares)

Deben ser posibles de cumplir por la institución con los recursos financieros, humanos, físicos y tecnológicos disponibles

Su logro debe depender de la institución (establecer supuestos)

90

Requisitos de las metas

Deben establecerse para ser cumplidas en un plazodeterminado

Deben expresar claramente el ámbito geográfico que cubre

Deben ser conocidas y acordadas con los ejecutores de las distintas áreas (establecer los responsables por el cumplimiento)

91

Para establecer la meta se deben considerar diferentes

parámetros

Línea base y desempeño histórico

Desempeño de instituciones similares

(benchmarking)

Estándares aplicados a normas técnicas

92

Pasos para determinar una meta

• Identificar la línea base

• Se toma como referencia el

actual desempeño

Existe?

Meta

Indicador Año t

% de alumnos 60%

egresados

¿No existe?

Se construye¡¡¡

•Programas

similares

•Estándar técnico

93

¿Qué es la línea base?

• Dato que se tomará como inicio para establecer losvalores futuros a alcanzar por el indicador, los que servirán para evaluar el grado de cumplimiento de las metas.

• Para indicadores nuevos, podría suceder que no exista un valor base, por lo cual debe ser estimado.

• Una vez realizada la primera medición, se tomará como línea de base el último dato obtenido.

94

¿Dónde estamos ahora?

¿Cómo hemos estado antes?

0

10

20

30

40

50

60

70

80

90

2004 2005 2006 2007

becas

subsidios

cr�ditos

¿Cuan lejos

queremos y

podemos llegar?

95

Considerar el nivel de desempeño de las metas a nivel

nacional / local

• El tiempo de respuesta de la entrega de los

pasaportes será el mismo en el país, en el Estado

o en una determinada Región.

• Los kilómetros de vías reparadas serán un

promedio nacional o en un tramo específico.

96

Las metas deben tener asignados responsables por su

cumplimiento a nivel de la organización

• Debe quedar claramente establecido cual es la

Unidad, Área, Dirección, que es responsable por el

cumplimiento de la meta, aún cuando otras áreas

intervengan con producción intermedia o final.

97

Problemas frecuentes cuando se establecen las metas

• No existen o no se

construyen los medios de

verificación

• Los supuestos no son

pertinentes (se imputan

aspectos que la institución sí

controla)

• La evaluación (el juicio sobre

el desempeño no es

confiable)

• Las metas estimulan un

desempeño poco innovador

y desafiante

98

Problemas frecuentes cuando se establecen las metas

• No existen datos disponibles

para estimar la línea base

• La institución desconoce

estándares de entidades

similares

• Se desconoce la población

objetivo y potencial

• Riesgo se sobre o subvalorar la meta

• No es posible evaluar

respecto de las mejores prácticas (autocomplacencia)

• La meta no permite monitorear el avance hacia el cumplimiento

del objetivo (y por lo tanto no se pueden tomar decisiones adecuadas)

99

Problemas frecuentes cuando se establecen las metas

• Subvaloracion de las metas

frente a un ambiente punitivo de

la evaluacion

• Trampa de la medición: se

muestra como resultados (y se

hace) solo lo que se puede

medir

• Incentivos perversos

(detenciones por delito, tiempos

de resupuestas, etc.)

• Escasa utilidad para la toma de

decisiones y mejora de la gestión

• No es posible avanzar hacia la

mejora de los resultados relevantes

para la organización y por ende

para la ciudadanía

• Resultados no esperados

(detenciones arbitrarias, baja

calidad de servicio, etc.)

100

Factores externos no controlables por la institución:

•Tipo de cambio

•Ingresos esperados

•Tarifas

•Nivel de demanda de los ciudadanos

•Aprobación de procesos por entes externos

•Flujo de recursos internacionales

Deben ser muy concretos y no generales

Supuestos

101

Comprometo X meta siempre y cuando se cumplan

los siguientes supuestos:

•Tipo de cambio no aumente más de 10%

•La solicitudes de tramitación no aumenten más de

15%

Supuestos

102

Considerar los supuestos no controlables por la

institución

• Variaciones del tipo de cambio, o de determinados preciospueden afectar niveles de ingresos esperados, tarifas, etc

– Aplicable a recaudación de ciertos tributos, crecimiento,etc.

– Aplicable para la estimación de indicadores de eficienciaque miden la relación entre insumo (costos, mano deobra, etc) con los productos obtenidos.

103

Considerar los supuestos no controlables por la

institución

Licitaciones que escapan al control de la institución,para lo cual se debe señalar que el producto oresultado prevé que la licitación estará resuelta enuna fecha determinada.

– Aplicable a metas relacionadas con porcentajesde planes de inversión concluidos, o a laimplementación de grandes proyectos,construcciones, etc

104

Considerar los supuestos no controlables por la

institución

Provisión de recursos internacionales. Aquellosproyectos que dependen de desembolsos decooperación o préstamos internacionales, debeseñalarse la fecha prevista de su disponibilidad.

• Situaciones de orden climático que alteren elcomportamiento de obras, actividades agrícolas, etc.

105

Considerar los supuestos no controlables por la

institución

Resultados que dependen de variables políticas, tales

como aprobación de tratados de libre comercio,

reformas fiscales, o de otro tipo.

·

Resultados que dependen de acciones coordinadas

con otras instituciones y que no exista el control para

cambiar los cursos de acción de las otras entidades

106

Ejemplos de algunos aspectos sobre los cuales

establecer Supuestos

• Situación macroeconómica

• Beneficiarios usan los componentes adecuadamente

• Se cumplen las corresponsabilidades de otros actores

• Otros estados o entidades destinan los recursos para lo

que está establecido

• El presupuesto es entregado al programa en el tiempo

establecido

107

PASO 8:

Establecer Frecuencia de medición (seguimiento)

108

Frecuencia

Misión

Objetivos

estratégicos

Productos

Actividades

Frecuencia

Disminuye

Aumenta

Depende de la disponibilidad de la información (Fuente deInformación) y del nivel de los objetivos que se está midiendo

109

• Las necesidades de uso de la información generada por

los indicadores (proceso de toma de decisiones)

• Tiempo estimado en que se producirán los resultados del

programa en los beneficiarios

• Disponibilidad de información cuando ésta es obtenida o

proporcionada por fuentes externas

• Compromisos de cuenta pública o de informar resultados

de la gestión (Secretaría de Hacienda)

Factores que inciden en la frecuencia de medición de los indicadores

110

PASO 9:

Monitorear y Evaluar los Resultados

111

Objetivos de la Evaluación

Establecer el grado de cumplimiento de los objetivos y metas comprometidos en el presupuesto.

Posibilitar una discusión más fundamentada en el proceso de asignación de recursos presupuestarios, vinculando los resultados de la gestión presupuestaria

Rendición de cuentas sobre los resultados de producción física de bienes y/o servicios, así como de las metas de gestión en términos de eficiencia, eficacia, calidad y economía

112

Usuarios de la Evaluación

Gobierno y Secretarios (Ministros)

Entidades y Programas, para retroalimentar las decisiones y mejorar la gestión

Congreso

Los usuarios y los ciudadanos

113

Comparar valor del indicador al final del periodo y meta establecida

Establecer No cumplimientos y Sobrecumplimientos (desviaciones)

Análizar las Causas de los resultados

Proponer Recomendaciones para corregir las desviaciones

Establecer Compromisos para implementar las recomendaciones

Definir Plazos de cumplimiento de los compromisos

Definir Responsables por el cumplimiento de compromisos

Definir Programa de Seguimiento de compromisos

Evaluación de los Resultados

114

Evaluación de los Resultados

(*): Indicadores Cumplidos, No Cumplidos o Sobrecumplidos

Indica-

dores

Valor

Indicador

Meta %

Cumpli-

miento

Resul-

tado(*)

Causas

del

Resul-

tado

Reco-

menda-

ciones

Compro-

misos

Plazos Respon-

sables

115

PASO 10:

Informar los Resultados

116

Breve reseña de la institución

Contexto de la medición: qué se midió y qué no

Recursos utilizados por la institución

Resultados de la gestión (logros y no logros)

Principales causas de desviaciones de resultados

Efectos de resultados negativos (en los ciudadanos, etc)

Compromisos para el periodo siguiente

Informar los Resultados

117

Lineamientos metodológicos para la construcción de indicadores de

desempeño

Dirección General de Presupuesto Nacional

Ministerio de Hacienda de Costa Rica

Roberto Jiménez M.

Consultor ILPES/CEPAL

[email protected]

“Planificación Estratégica y Construcción de Indicadores de

Desempeño en el Sector Público de Costa Rica”