-
8/17/2019 Guia metodologica para la definicion, seguimiento y uso de indicadores de desempeño de los programas presupu…
1/100
Dirigido a entidades de gobierno
nacional, regional y local
Guía metodológica para la
definición, seguimiento y uso deindicadores de desempeño de los
Programas Presupuestales
GuíaGuía
-
8/17/2019 Guia metodologica para la definicion, seguimiento y uso de indicadores de desempeño de los programas presupu…
2/100
-
8/17/2019 Guia metodologica para la definicion, seguimiento y uso de indicadores de desempeño de los programas presupu…
3/100
-
8/17/2019 Guia metodologica para la definicion, seguimiento y uso de indicadores de desempeño de los programas presupu…
4/100
-
8/17/2019 Guia metodologica para la definicion, seguimiento y uso de indicadores de desempeño de los programas presupu…
5/100
3
Guía metodológica para la definición,
seguimiento y uso de indicadoresde desempeño de los Programas
Presupuestales
-
8/17/2019 Guia metodologica para la definicion, seguimiento y uso de indicadores de desempeño de los programas presupu…
6/100
4
GUÍA METODOLÓGICA PARA LA DEFINICIÓN, SEGUIMIENTO Y USO DE INDICADORESDE DESEMPEÑO DE LOS PROGRAMAS PRESUPUESTALES
Ministerio de Economía y Finanzas – Dirección General de Presupuesto PúblicoJirón Junín 319, Cercado de Lima, Lima, Perú
www.mef.gob.pe
Cooperación Alemana, implementada por la Deutsche Gesellschaft für Internationale Zusammenarbeit(GIZ) GmbHPrograma Reforma del Estado orientada a la ciudadanía – Buena GobernanzaAvenida Los Incas 172, Piso 7, El Olivar, San Isidro, Lima, Perúwww.gobernabilidad.org.pe
Programa de Cooperación al Desarrollo Económico - Secretaría de Estado para Asuntos Económicos SECOEmbajada de Suiza en el PerúAvenida Salaverry 3240, San Isidro Lima 27
Teléfono: (511) 264-0305
Web: www.cooperacionsuizaenperu.org.pe/seco
www.seco-cooperation.admin.ch
Responsables de la contribución:MEF:Rodolfo Acuña, Director General de la Dirección General de Presupuesto Público (DGPP – MEF)
Cooperación Alemana, implementada por la Deutsche Gesellschaft für Internationale Zusammenarbeit(GIZ) GmbH:Hartmut Paulsen, Director del Programa Reforma del Estado orientada a la ciudadanía –
Buena Gobernanza
Cooperación Suiza - SECO:Martin Peter - Director de la Cooperación - SECO en el Perú
Elaboración de contenidos:Pamela Valdivieso, Consultora del Programa Reforma del Estado orientada a la ciudadanía –
Buena Gobernanza
Coordinación, supervisión y edición de contenidos:
Dirección de Calidad de Gasto Público (DGPP – MEF)Programa Reforma del Estado orientada a la ciudadanía – Buena Gobernanza
Diseño, diagramación e impresión:Neva Studio SAC
Calle Tomas Ramsey 762, Lima 17, Perú
Tiraje:2,000 ejemplares, 1era edición, 2015
Hecho el Depósito Legal en la Biblioteca Nacional del Perú:2015 - 15040
Cooperación Alemana al Desarrollo – Agencia de la GIZ en el Perú
Prol. Arenales 801, MirafloresSe autoriza la reproducción total o parcial de esta publicación, bajo la condición de que se cite la fuente.
-
8/17/2019 Guia metodologica para la definicion, seguimiento y uso de indicadores de desempeño de los programas presupu…
7/100
5
INTRODUCIÓN.....................................................................................................................................7
CAPÍTULO 1. ASPECTOS GENERALES........................................................................................101.1 El Presupuesto por Resultados (PpR) y sus instrumentos............................................10
1.2 Conceptos básicos sobre el seguimiento del desempeño.........................................11
1.3 Proceso de seguimiento del desempeño de los PP....................................................12
CAPÍTULO 2. DEFINICIÓN DE LOS INDICADORES DE DESEMPEÑO................................18
2.1 Definición de indicador de desempeño...........................................................................18
2.2 Clasificación de los indicadores de desempeño..........................................................18
2.3 Elementos de los indicadores de desempeño.............................................................30
CAPÍTULO 3. CONSTRUCCIÓN DE INDICADORES DE DESEMPEÑO.................................34
3.1 Identificación de indicadores de desempeño...............................................................34
3.2 Criterios SMART de los indicadores de desempeño.................................................37
3.3 Contenidos básicos de los indicadores de desempeño..........................................38
3.4 Fichas técnicas de los indicadores de desempeño..................................................54
3.5 Revisión de las fichas técnicas de los indicadores de desempeño......................59
CAPÍTULO 4. CÁLCULO DE LOS INDICADORES DE DESEMPEÑO...................................62
4.1 Recolección de datos...........................................................................................................62
4.2 Cálculo de los indicadores..................................................................................................63
CAPÍTULO 5. USOS DE LOS INDICADORES DE DESEMPEÑO.............................................66
5.1 Instrumentos de difusión de los indicadores de desempeño.................................66
5.2 Usos de la información de desempeño en el proceso presupuestario....................68
5.3 Uso de la información de desempeño en evaluaciones y análisis
de desempeño.......................................................................................................................76
BIBLIOGRAFÍA...................................................................................................................................79
DIRECTIVAS, DOCUMENTOS Y NORMAS.................................................................................81
ANEXOS..............................................................................................................................................83
ANEXO 1: GLOSARIO DE TÉRMINOS EN RELACIÓN AL SEGUIMIENTO DEL
DESEMPEÑO DE LOS PROGRAMAS PRESUPUESTALES...................................................84
ANEXO 2: PAUTAS METODOLÓGICAS PARA LA ELABORACIÓN DE ÍNDICES..............89
CONTENIDO
-
8/17/2019 Guia metodologica para la definicion, seguimiento y uso de indicadores de desempeño de los programas presupu…
8/100
6
-
8/17/2019 Guia metodologica para la definicion, seguimiento y uso de indicadores de desempeño de los programas presupu…
9/100
7
El Presupuesto por Resultados (PpR) se implementa progresivamente a través de unconjunto de instrumentos: i) los Programas Presupuestales (PP), ii) el seguimientodel desempeño de los PP sobre la base de indicadores, iii) las evaluaciones
independientes y iv) los incentivos a la gestión, a través de la Dirección General dePresupuesto Público (DGPP), en colaboración con las demás entidades del Estado.
El seguimiento de los PP se realiza sobre el avance en los indicadores de desempeño,la ejecución financiera y el cumplimiento de metas en su dimensión física. De estaforma, las actividades de seguimiento han contribuido, desde el año 2007, a verificarel avance en el desempeño de los PP y en la provisión de los bienes y serviciosprevistos por estos, permitiendo temar decisiones de mejora tanto en el ámbito dela gestión presupuestaria como de las políticas y gestión pública.
La presente guía metodológica se centra en el seguimiento del desempeño, el cual serealiza a través de indicadores que cuantifican alguna característica de los productosy resultados específicos de los PP, y tiene como finalidad guiar a las entidadesresponsables de los PP en la elaboración de las fichas técnicas de estos indicadores.Estas fichas técnicas son los documentos que garantizan la transparencia y la difusióndel cálculo de estos indicadores, cuyos resultados son útiles en las fases del procesopresupuestario para la gestión del presupuesto, así como en la investigación o en elanálisis de las políticas públicas.
En este contexto, esta guía metodológica es una herramienta que tiene como objetivo
presentar los lineamientos para la construcción de indicadores de desempeño y laelaboración de fichas técnicas, así como las pautas sobre cómo se lleva a cabo elproceso de seguimiento y uso de la información del desempeño de los PP.
La guía metodológica está dirigida, principalmente, a funcionarios y técnicos de lasentidades del gobierno nacional, que son responsables del diseño de los PP y delseguimiento del desempeño en el ámbito de sus competencias, que permita la tomade decisiones mejor informada por parte de los gestores públicos. Adicionalmente,esta guía metodológica también es relevante para funcionarios en los gobiernosregionales y locales, pues da a conocer los roles de cada nivel de gobierno en el
proceso de seguimiento del desempeño.
INTRODUCCIÓN
-
8/17/2019 Guia metodologica para la definicion, seguimiento y uso de indicadores de desempeño de los programas presupu…
10/100
8
-
8/17/2019 Guia metodologica para la definicion, seguimiento y uso de indicadores de desempeño de los programas presupu…
11/100
9
ASPECTOS GENERALES
1
-
8/17/2019 Guia metodologica para la definicion, seguimiento y uso de indicadores de desempeño de los programas presupu…
12/100
10
CAPÍTULO 1. ASPECTOS GENERALES
1.1 El Presupuesto por Resultados (PpR) y sus instrumentos
El PpR es una estrategia de gestión pública que vincula la asignación de recursos aproductos y resultados medibles a favor de la población, que requiere de la existenciade una definición de los resultados a alcanzar, la determinación de responsables, losprocedimientos de generación de información de los resultados, productos y de lasherramientas de gestión institucional, así como la rendición de cuentas. El PpR seimplementa a través de los PP, las acciones de seguimiento, las evaluaciones y losincentivos a la gestión1.
9 Los PP son unidades de programación de las acciones del Estado que se realizanpara lograr un resultado en favor de una población objetivo, a través de la provisiónarticulada de productos. De esta forma, el PpR tiene como eje central a los PP,sobre los cuales se implementan conjuntamente otros instrumentos.
9 El Seguimiento de los PP es el conjunto de acciones destinadas a recolectar y
analizar continuamente la información de los indicadores de desempeño, asícomo de su ejecución presupuestal y el cumplimiento de metas en su dimensiónfísica2.
9 Las Evaluaciones Independientes (EI) son estudios profundos que examinan eldiseño y desempeño de las intervenciones públicas, así como sus efectos en lapoblación. Estas evaluaciones son de dos tipos, las Evaluaciones de Diseño y
1 Texto Único Ordenado de la Ley N° 28411, Ley General del Sistema Nacional de Presupuesto. Artículo N° 79.
2 Texto Único Ordenado de la Ley N° 28411, Ley General del Sistema Nacional de Presupuesto. Artículo N° 83°.
Gráfico 1. Instrumentos del Presupuesto por Resultados
Programa
Presupuestal
Evaluación
Seguimiento Incentivos ala gestión
-
8/17/2019 Guia metodologica para la definicion, seguimiento y uso de indicadores de desempeño de los programas presupu…
13/100
11
1.2 Conceptos básicos sobre el seguimiento del desempeño
¿Qué es el seguimiento del desempeño de los PP?
El seguimiento del desempeño de los PP es un proceso continuo de recoleccióny análisis de información para conocer en qué medida un PP está logrando susobjetivos y cómo se está ejecutando.
El seguimiento de los PP se realiza a lo largo de todas las fases del procesopresupuestario, analizando información recogida a través de encuestas o registrosadministrativos, para determinar brechas, programar las acciones de una entidad delEstado, determinar metas y evaluar los avances en el cumplimiento de los objetivosde un PP.
¿A qué se le hace seguimiento de desempeño en los PP?
El MEF, a través de la DGPP, realiza el seguimiento del desempeño de los indicadoresde productos y resultados específicos de los PP.
¿Cuáles son los objetivos del seguimiento de desempeño de los PP?
Los principales objetivos del seguimiento de desempeño de los PP son:
9 Verificar el logro de metas de resultados a favor de la población objetivo
9 Conocer la eficiencia en el uso de los recursos
9 Promover el uso de la información del desempeño de los PP para la implementaciónde las políticas públicas
9 Identificar indicios de problemas de gestión en la provisión de los productosprevistos en los PP y que dificulten el logro de sus resultados, para la toma demedidas correctivas.
Ejecución Presupuestal (EDEP), que analizan la lógica del diseño, implementacióny desempeño de una intervención pública; y las Evaluaciones de Impacto (EI),que usa herramientas de análisis complejas para medir el efecto atribuible a unaintervención.
9 Los Incentivos a la gestión son mecanismos que permiten una mejora en la
gestión de las entidades y el logro de resultados. Actualmente son de dos tipos:i) los Convenios de Apoyo Presupuestal, que son acuerdos de carácter técnicosuscrito entre las entidades públicas y la Dirección General de PresupuestoPúblico, mediante los cuales la entidad se compromete al cumplimiento de metasde indicadores de resultado o producto de un PP, así como a la ejecución de loscompromisos de gestión para una mejor provisión de los servicios públicos; ii)los incentivos municipales, implementados a través del Plan de Incentivos a laMejora de la Gestión y Modernización Municipal (PI), impulsan reformas para eldesarrollo sostenible de la economía local y la mejora de su gestión, mediante la
asignación de recursos adicionales a las municipalidades debido al cumplimientode ciertas metas del PI.
-
8/17/2019 Guia metodologica para la definicion, seguimiento y uso de indicadores de desempeño de los programas presupu…
14/100
12
9 Promover la transparencia frente a la población sobre el uso de los recursos y ellogro de los resultados
9 Difundir información sobre el desempeño de los PP
RECUADRO 1: PARA LAS ENTIDADES RESPONSABLES DE LOS PP, ¿POR QUÉ ESIMPORTANTE MEDIR EL DESEMPEÑO?
9 Permite conocer y dirigir el rumbo de las políticas públicas9 La medición permite implementar mejoras en las políticas públicas
9 Fomenta un ambiente de reflexión, análisis y discusión sobre la mejora de lagestión de las políticas públicas
Fuente: Ten steps to a results-based monitoring and evaluation system: a
handbook for development practitioners / Jody ZallKusek and Ray C. Rist.,
Banco Mundial (2004)
El seguimiento de desempeño de los PP permite conocer el avance en el logro delos resultados e identificar indicios de problemas en la provisión de los productos delos PP, que puede servir de insumo para evaluaciones de mayor profundidad (EDEPy EI). De esta forma, la importancia del seguimiento del desempeño radica en que esun instrumento que permite mejorar el diseño y ejecución de las políticas públicas.
1.3 Proceso de seguimiento del desempeño de los PP
El proceso de seguimiento del desempeño de los PP consta de cinco etapas definidasen el Gráfico 2:
Gráfico 2. Etapas del seguimiento del desempeño de los Programas Presupuestales
Definición de
los indicadores
de desempeño
de los PP
Primera etapa Quinta etapa
Uso de los
indicadores de
desempeño
Segunda etapa
Elaboración de
la ficha técnica
de los
indicadores de
desempeño
Tercera etapa
Revisión de los
indicadores de
desempeño de
los PP
Cuarta etapa
Medición de
los indicadores
de desempeño
de los PP
-
8/17/2019 Guia metodologica para la definicion, seguimiento y uso de indicadores de desempeño de los programas presupu…
15/100
13
9 En la primera etapa, se definen los indicadores de desempeño asociados a losresultados y productos del PP, de acuerdo a su matriz de marco lógico, y seidentifica las dimensiones de estos indicadores.
9 En la segunda etapa, se completa una serie de pasos para la elaboración de laficha técnica del indicador de desempeño (Tabla N° 14 del Anexo 2), conforme a
las Directivas para los Programas Presupuestales en el marco de la Programacióny Formulación del Presupuesto del Sector Público, que emite la DGPP cada año(Directiva de PP).
9 En la tercera etapa, los indicadores de desempeño, a través de sus fichas técnicase instrumentos de recolección de información, son revisados por la DGPP delMEF para verificar la calidad del indicador.
9 En la cuarta etapa, se recoge la información y se realiza el cálculo de los indicadoresde desempeño, conforme la ficha técnica elaborada.
9 En la última etapa, los indicadores de desempeño pasan a ser utilizados en lasdiferentes fases del proceso presupuestario y durante la gestión de las entidades.
Dicho de otro modo, los indicadores de desempeño de los PP pasan por diferentesetapas desde su definición o nacimiento hasta su uso. En el Gráfico 3, se presentaeste proceso detallando los aspectos más importantes de cada etapa e identificandolos responsables a cargo en cada una de estas etapas.
Gráfico 3. Proceso de elaboración de los indicadores de desempeño de los
Programas Presupuestales
Definir los
indicadores
de resultado
y de
producto
Definir los
ámbitos decontrol de los
indicadores
Definición de
Indicadores Revisión
Medición
Establecer
definición y
método de
cálculo
Identificar
fuente de datos
Identificar loselementos
mínimos para
construcción de
indicadores
Elaborar la ficha
técnica
Revisar la
ficha técnica
de los
indicadores
Recolectar
data
Calcular los
indicadores
Uso en la
gestión e
investigación
Usos en el
proceso
presupuestario
Uso de los
indicadores
Construcción
de indicadores
GN
GR GL
GN
-
8/17/2019 Guia metodologica para la definicion, seguimiento y uso de indicadores de desempeño de los programas presupu…
16/100
14
Durante todas las etapas, conforme a las disposiciones normativas vigentes, existenresponsables para la elaboración de los indicadores de desempeño. A continuaciónse presentan los principales roles de las entidades participantes en cada etapa:
MEF
9 La Dirección de Calidad del Gasto Público (DCGP) de la DGPP del MEF participaen todas las etapas del proceso de seguimiento a través de asistencia técnica,coordinaciones, revisando los indicadores y difundiendo la información dedesempeño.
Entidades del Gobierno Nacional (GN)
9 El responsable directo es el Coordinador de Seguimiento y Evaluación del PP,conforme las funciones establecidas en el artículo N° 8 de la las Directiva de PP yparticipa en todas las etapas del proceso de seguimiento.
9 El Coordinador de Seguimiento y Evaluación del PP, como responsable delseguimiento en el equipo técnico del PP, requerirá el respaldo de los funcionariosque trabajen directamente con las fuentes de información y de aquellos quetrabajan en la provisión de los productos o servicios. Estos funcionarios debenestar claramente identificados y comprometerse a realizar las coordinacionesnecesarias para cumplir con las acciones de seguimiento.
9 Cabe mencionar que en la etapa del uso de los indicadores, en las entidades delGN con articulación territorial, el Coordinador Territorial tiene la función, conformeel artículo N° 11 de la referida Directiva, de coordinar con los Gobiernos Regionales
y Gobiernos Locales, las metas de indicadores de desempeño. Así, la articulacióndel GN con los gobiernos con los Gobiernos Regionales y Gobiernos Locales seda en la fase de programación del presupuesto a través de la implementación dela acción 4 del Plan de Articulación Territorial.
Instituto Nacional de Estadística e Informática (INEI)
9 La participación del INEI recae, específicamente, en la etapa de medición de losindicadores, en base a las encuestas implementadas por esta institución.
Entidades de los gobiernos regionales y locales (GR y GL)
9 Los GR y GL participan en las etapas de medición y de uso de los indicadores dedesempeño.
9 En estas etapas, en los GR y GL, los responsables directos son los CoordinadoresRegional y Local, conforme los artículos N° 11 y 12 de la Directiva de PP antesmencionada.
9 Sobre la etapa de medición, cuando los GR y GL cuenten con fuentes deinformación disponibles, deberán recoger la información para el cálculo de losindicadores de desempeño en el ámbito de su competencia. Esta información es
compartida con el Coordinador Territorial a nivel del GN, para que este último loconsidere en la medición del avance nacional del PP.
-
8/17/2019 Guia metodologica para la definicion, seguimiento y uso de indicadores de desempeño de los programas presupu…
17/100
15
RECUADRO 2: APOYO AL COORDINADOR DE SEGUIMIENTO Y EVALUACIÓN DELPP DE LA ENTIDAD DEL NIVEL NACIONAL RESPONSABLE DEL PP
Los funcionarios encargados del manejo técnico del PP o que administren lainformación de desempeño:
9 son aquellos que tienen el conocimiento técnico y temático sobre la provisiónde bienes o servicios o las fuentes de información, de modo que puedandesempeñar las funciones que demanda cada etapa del proceso de mediciónde los indicadores de desempeño
9 se comprometerán a participar en las reuniones con el Coordinador deSeguimiento y Evaluación del PP y dedicarle tiempo al trabajo asignado
9 cumplirán con las responsabilidades en cada etapa del desarrollo eimplementación de los indicadores
9 conocen la gestión del programa, teniendo en claro cuáles son las metas yobjetivos del programa
9 Luego de las fases de construcción y revisión de indicadores, se contarácon su apoyo permanente para la fase de medición de los resultados de losindicadores y con quien el Coordinador de Seguimiento pueda coordinar eltrabajo de seguimiento de los indicadores
9 Las entidades de los GR y GL deberán contar con fuentes de información
sistematizadas que permitan hacer la medición de los indicadores de desempeño,
siguiendo la metodología de las fichas técnicas de cada indicador.
9 Sobre la etapa de uso de los indicadores de desempeño, en la fase de
programación del presupuesto, la acción 4 del Plan de Articulación Territorial
establece que los GR determinan las metas de los indicadores de desempeño
que orienten la programación física y financiera de sus presupuestos a través de
talleres de ejercicio de programación conjunta de metas.
9 En el caso de los GL, estos realizarán, por su propia cuenta, la programación de
sus metas de los indicadores de desempeño.
9 Sobre la etapa de uso de los indicadores de desempeño, para la fase de
evaluación del presupuesto, las entidades del GR registrarán en el módulo de
evaluación presupuestaria la información de desempeño conforme el diseño delos indicadores, en su ámbito de competencia.
9 En el caso de los GL, estos no registran información de desempeño en el módulo
de evaluación presupuestaria; sin embargo, conforme los artículos N° 11 y 12 de
la Directiva de PP, comparten la información de desempeño, para que ésta sea
consolidada para la agregación a nivel nacional.
-
8/17/2019 Guia metodologica para la definicion, seguimiento y uso de indicadores de desempeño de los programas presupu…
18/100
16
E T A P A
P A S O S / A
C T I V I D A D E S
R E S P O N S A B L E
C O N T E N I D O D E L A G U Í A
R E L A C I O N A D O C O N L A
E T A P A
P R O D U C T O
D E F I N I C I Ó N D E L O S
I N D I C A
D O R E S D E
D E S E M
P E Ñ O D E L O S P P
1 .
D e fi n i r l o s i n d i c a
d o r e s a s o c i a d o s a l o s
r e s u l t a d o s y p r o
d u c t o s d e l P P e n l a
m a t r i z d e m a r c o
l ó g i c o
2 .
D e fi n i r l o s á m b i t o s d e c o n t r o l d e l o s
i n d i c a d o r e s q u e
s e d e s e a n m e d i r
G N
G N
C a p í t u l o 2 : D e fi n i c i ó n
d e l o s i n d i c a d o r e s d e
d e s e m p e ñ o
L i s t a
d e p r o p u e s t a d e
i n d i c
a d o r e s d e d e s e m p e ñ o
( T a b l a 1 3 d e l A n e x o 2 )
C O N S T
R U C C I Ó N D E
I N D I C A
D O R E S D E
D E S E M
P E Ñ O D E L O S P P
3 .
E s t a b l e c e r l a d e
fi n i c i ó n y m é t o d o
c á l c u l o d e l o s i n
d i c a d o r e s
4 .
I d e n t i fi c a r l a f u e
n t e d e d a t o s d e l o s
i n d i c a d o r e s
5 .
D e fi n i r l a j u s t i fi c a c i ó n , p r e c i s i o n e s
t é c n i c a s , l i m i t a c
i o n e s y s u p u e s t o s ,
i n s t r u m e n t o s d e
r e c o l e c c i ó n
d e i n f o r m a c i ó n y s i n t a x i s d e l o s
i n d i c a d o r e s
6 .
E l a b o r a r l a fi c h a
t é c n i c a d e l o s
i n d i c a d o r e s
7 .
R e v i s i ó n d e l a fi c h a t é c n i c a d e l o s
i n d i c a d o r e s d e d e s e m p e ñ o
G N
G N
G N
G N
M E F
C a p í t u l o 3 : C o n s t r u c c i ó n
d e l o s i n d i c a d o r e s d e
d e s e m p e ñ o
F i c h a s t é c n i c a s d e l o s
i n d i c
a d o r e s d e d e s e m p e ñ o
( T a b l a 1 4 d e l A n e x o 2 )
M E D I C I Ó N D E L O S
I N D I C A
D O R E S D E
D E S E M
P E Ñ O D E L O S P P
8 .
R e c o l e c t a r l a i n f
o r m a c i ó n d e
d e s e m p e ñ o
9 .
C a l c u l a r l o s i n d i c a d o r e s d e
d e s e m p e ñ o
G N , G R y G L / I N E I
C a p í t u l o 4 : C á l c u l o
d e l o s i n d i c a d o r e s d e
d e s e m p e ñ o
R e s u
l t a d o s d e m e d i c i ó n
d e l o
s i n d i c a d o r e s d e
d e s e
m p e ñ o
U S O D E L O S
I N D I C A
D O R E S D E
D E S E M
P E Ñ O
1 0 .
U s a r l o s i n d i c a d o r e s e n e v a l u a c i o n e s y
a n á l i s i s p r o f u n d
o s
1 1 .
U s a r l o s i n d i c a d o r e s e n e l p r o c e s o
p r e s u p u e s t a r i o
M E F / G N , G
R
y G L
M E F / G N , G
R
y G L
C a p í t u l o 5 : U s o s d e
l o s i n d i c a d o r e s d e
d e s e m p e ñ o
P u b l i c a c i ó n d e r e s u l t a d o s
d e l a
m e d i c i ó n d e l o s
i n d i c
a d o r e s y R e g i s t r o
d e i n
f o r m a c i ó n d e
d e s e
m p e ñ o e n m ó d u l o s d e
p r e s u p u e s t o
C u a d r o 1 . P r o c e s o d e
e l a b o r a c i ó n d e l o s i n d i c a d
o r e s d e d e s e m p e ñ o d e l o s
P P 3
3 El cuadro 1 precisa la estructura de la Guía Metodológica, vinculando las etapas del proceso de seguimiento de losindicadores con el contenido de la Guía metodológica.
-
8/17/2019 Guia metodologica para la definicion, seguimiento y uso de indicadores de desempeño de los programas presupu…
19/100
17
DEFINICIÓN DE LOS INDICADORES DEDESEMPEÑO
2
-
8/17/2019 Guia metodologica para la definicion, seguimiento y uso de indicadores de desempeño de los programas presupu…
20/100
18
CAPÍTULO 2. DEFINICIÓN DE LOS INDICADORESDE DESEMPEÑO
2.1 Definición de indicador de desempeñoUn indicador es una medida cualitativa o cuantitativa observable, que permitedescribir características, comportamientos o fenómenos, a través de su comparacióncon períodos anteriores o con metas o compromisos. El seguimiento del desempeñode los PP se realiza sobre la base de indicadores de desempeño, que se diferenciande los indicadores de producción física en lo siguiente:
El indicador de desempeño es la medida
del logro de los resultados esperados deun PP o de la entrega de productos acordea determinados atributos.
Se ubican a nivel de productos y resultadosy es, mayormente, una medida relativa(expresada en porcentaje, ratio, etc.).
Puede haber más de un indicador dedesempeño para resultados y productos.
Ejemplo: Porcentaje de niños vacunados
El indicador de producción física es la
unidad de medida de las cantidadesde bienes y servicios provistos por unaintervención pública.
Se ubican a nivel de producto yactividades.Todo producto y actividad tienesolamente un indicador de producciónfísica.
Ejemplo: persona capacitada, niñovacunado
Esta guía metodológica se centra en el seguimiento del desempeño de los PP,teniendo como base a los indicadores de desempeño, los cuales son definidos porlas entidades responsables del PP en el nivel de gobierno nacional. Esto quiere decirque sólo los pliegos del gobierno nacional definen los indicadores de desempeño,como parte del diseño del PP, conforme a la Directiva de PP, que emite la DGPP cadaaño.
La participación de las entidades de los GR y GL se realiza en las etapas de medición
y de uso de los indicadores de desempeño, en el ámbito de su competencia. Estoquiere decir que estos pliegos coordinan con la entidad responsable del PP en elnivel de GN para la provisión de la información de avance y de metas de desempeñoa nivel regional y local.
2.2 Clasificación de los indicadores de desempeño
Los indicadores de desempeño pueden clasificarse según:
-
8/17/2019 Guia metodologica para la definicion, seguimiento y uso de indicadores de desempeño de los programas presupu…
21/100
19
9 el ámbito de control conforme la matriz de marco lógico (resultado específico yproducto)
9 la dimensión del desempeño (eficacia, eficiencia, calidad y economía)
Indicadores de desempeño según el ámbito de control
Como se mencionó en la sección 2.1, los indicadores de desempeño de los PPmiden características a nivel de resultado específico y producto, mas no a nivel deactividades.
Resultado
específico
Producto
Actividades
Indicador de
desempeño
Indicador de
producción física
(Dimensión física)
Indicador de
desempeño
Indicador de
producción física
(Dimensión física)
Gráfico 4. Indicadores de desempeño según el ámbito de control
-
8/17/2019 Guia metodologica para la definicion, seguimiento y uso de indicadores de desempeño de los programas presupu…
22/100
20
RECUADRO 3: LA DGPP DEL MEF HACE SEGUIMIENTO DEL DESEMPEÑODE RESULTADOS ESPECÍFICOS Y PRODUCTOS DEL PP, NO DE RESULTADOSFINALES
En el marco del seguimiento del desempeño de un PP, se hace seguimiento hastael nivel de resultado específico, que es aquel atribuible a la acción del PP, mas no sehace seguimiento de los resultados finales. Los resultados finales de un PP reflejan uncambio en las condiciones o características inherentes a una población identificada,del entorno en que se desenvuelven, o de las organizaciones que la sirven y quecorresponde a un objetivo de política nacional, el seguimiento de este nivel deresultado corresponde al Centro Nacional de Planeamiento Estratégico (CEPLAN)1.
En cambio, en tanto el resultado específico de un PP se refiere a un cambio quese busca alcanzar para solucionar un problema identificado sobre una poblaciónobjetivo, el seguimiento de este nivel de resultado corresponde a la DGPP delMEF, junto con el nivel de producto, de acuerdo a la Directivas para los Programas
Presupuestales en el marco de la Programación y Formulación del Presupuesto delSector Público, que emite la DGPP cada año.
Gráfico 4. El gráfico 5 muestra que para el caso de los productos se necesitainformación que sirva para verificar las condiciones de entrega de los bienes yservicios. A nivel de producto se mide la producción, la entrega y las característicasde todos los bienes y servicios que se otorgan directamente a los beneficiarios del
programa. Una pregunta que nos puede ayudar a distinguir un indicador de productoes: ¿Cómo sé si el producto ha sido entregado o el servicio ha sido prestado o tienelas características deseadas?
Por su parte, para el caso del resultado específico, se necesita información quepermita verificar la solución de un problema concreto que afecta a la poblaciónobjetivo del PP. En este nivel los indicadores deben enfocarse en medir los resultadosalcanzados por el PP. Una pregunta que nos puede ayudar a distinguir un indicadorde resultado específico es: ¿Cómo sé si lo previsto por la intervención se está dandoo se ha alcanzado?
Finalmente, si bien el seguimiento del resultado final corresponde a CEPLAN, sepuede mencionar que la información de desempeño requerida aquí debe permitirverificar los efectos sociales y económicos a los que contribuye el PP.
-
8/17/2019 Guia metodologica para la definicion, seguimiento y uso de indicadores de desempeño de los programas presupu…
23/100
21
Ámbito decontrol
Resultadofinal
Resultadosespecíficos
ProductosIndicadores que permiten verificar la producción y
entrega de bienes y servicios del programa
Indicadores que permiten verificar los efectossociales y económicos a los que contribuye el
programa.
Indicadores que permiten verificar la solución de una
problemática concreta en la población objetivo.
Gráfico 5. Indicadores de desempeño y ámbitos de control del PP
Indicadores según la dimensión de desempeño4
Además de los ámbitos de control a los que se asocia cada tipo de indicador, losindicadores tienen también diferentes dimensiones de desempeño que interactúancon los primeros. La dimensión de un indicador se refiere a un conjunto decaracterísticas en común que se desea medir sobre un resultado o producto. Estascaracterísticas reflejan algún aspecto del resultado o producto a medir.
Se consideran cuatro dimensiones generales para los indicadores: eficacia, eficiencia,calidad y economía. Estas cuatro dimensiones pueden ser aplicables al resultado oa los productos de un PP. Por ejemplo, al responder a la pregunta de la secciónanterior, ¿Cómo sé si el producto ha sido entregado o el servicio ha sido prestado otiene las características deseadas?, quien define el indicador de desempeño puedeconsiderar que para que sea prestado se necesita una medida de eficacia y para quecumpla con las características deseadas, una medida de calidad. Esto depende delo que se considere más importante para ser medido. Similarmente, a la pregunta¿Cómo sé si lo previsto por la intervención se está dando o se ha alcanzado?, sepuede considerar una medida de eficacia sobre el cambio que genera el PP.
A continuación, se explica los conceptos de indicadores de eficacia, eficiencia,calidad y economía.
4 Esta sección se basa en el documento de Bonnefo y Armijo, 2005
-
8/17/2019 Guia metodologica para la definicion, seguimiento y uso de indicadores de desempeño de los programas presupu…
24/100
22
¿Cómo son los indicadores de eficacia, eficiencia, calidad y economía y cómo seaplican en el ámbito de control de resultado o producto?
a) Indicadores de eficacia
Los indicadores de eficacia proporcionan información respecto al grado decumplimiento de los objetivos planteados por el programa.
¿Qué aspectos mide un indicador de eficacia?
Algunos indicadores de eficacia están relacionados con los resultados específicos,orientados a medir la capacidad del programa para solucionar la problemática queatañe a la población objetivo.
Ejemplo: Porcentaje de familias del grupo objetivo con déficit cuantitativo devivienda.
Porcentaje de niños menores de 36 meses en situación de pobreza ypobreza extrema que logran hitos cognitivos esperados para su edad
Porcentaje de los becarios graduados de los estudios de educaciónsuperior.
Ejemplo: Porcentaje de proyectos ganados en fondos concursables externos
Porcentaje de colocaciones de beneficiarios egresados a través de losservicios de vinculación laboral.
Porcentaje de personas afectadas por la violencia familiar y sexual,atendidas en los Centros de Emergencia Mujer (CEM) que reciben atenciónespecializada
Los indicadores de eficacia también están relacionados con los productos del PP.Estos indicadores de eficacia miden la cobertura del programa, es decir, el gradoen que los bienes y servicios que ofrece una institución pública logran satisfacer la
demanda que por ellos existe.
-
8/17/2019 Guia metodologica para la definicion, seguimiento y uso de indicadores de desempeño de los programas presupu…
25/100
23
Sector Ámbito de control Indicador
¿Es
indicador de
eficacia?
Observación
Mujer ypoblacionesvulnerables
Resultadoespecífico.Mejorar el nivel dedesarrollo infantilde las niñas yniños menores de36 meses de queviven en situaciónde pobreza y enpobreza extrema
Porcentaje de niñosmenores de 36meses en situaciónde pobreza ypobreza extremaque logran hitoscognitivos esperadospara su edad
SÍ
El ámbito de control se
refiere a un problemarelacionado con el nivelde desarrollo infantil, porlo cual el indicador esapropiado para medir elgrado de cumplimientodel objetivo, porque serefiere a la proporciónde la población quelogran alcanzar los hitoscognitivos de desarrolloesperados para su edad.
PresidenciaConsejoMinistros
Resultadoespecífico. Entidadesadecuadas alproceso demodernización delestado
Porcentaje deentidades cuyosusuarios manifiestanque los servicios hanmejorado
NO
El ámbito de controlse refiere a la
adecuación de lasEntidades al procesode modernización delEstado, sin embargoel indicador propuestorefleja la percepciónde los usuarios de lamejora en el servicio,producto del proceso demodernización.
Mujer ypoblacionesvulnerables
Producto.Población cuentacon servicios deprevención de laviolencia
Porcentaje deactores socialescomprometidos enenfrentar la violenciafamiliar y sexual.
SÍ
El ámbito de controlse refiere a losservicios brindadospor el programa para
la prevención de laviolencia, por lo cual elindicador es apropiadopues se refiere alporcentaje de actoresque participan en losespacios subnacionalesque forma parte delos servicios parala prevención de laviolencia
Energía y minas
Producto.
Cursos decapacitación enmateria de uso deenergías alternativasimplementados.
Costo promedio
de los cursos decapacitación enmateria de uso deenergías alternativasimplementados
NO
El ámbito de controlse refiere a laimplementación de los
cursos de capacitaciónal igual que el indicador;no obstante, el indicadorno es apropiadopara medir el gradode cumplimiento delobjetivo, sino el costo.
Cuadro 2. ¿Está bien formulado el indicador de eficacia?
-
8/17/2019 Guia metodologica para la definicion, seguimiento y uso de indicadores de desempeño de los programas presupu…
26/100
24
b) Indicadores de eficiencia
Los indicadores de eficiencia permiten hacer seguimiento a la relación entre el logrode los resultados o productos del PP y los recursos utilizados para su cumplimiento.Estos indicadores cuantifican lo que cuesta alcanzar el objetivo planteado, sinlimitarlo a recursos económicos; también abarca los recursos humanos y materiales.
¿Qué aspectos mide un indicador de eficiencia?
9 Un indicador clásico de eficiencia es el costo unitario de producción o costopromedio, el cual relaciona la productividad física y el costo de los factores einsumos utilizados en la generación de un bien o servicio.
Ejemplos: Costo promedio de las acciones de recaudación
Costo promedio por conectar a un hogar al sistema de drenaje y
saneamiento
Ejemplos: Número de fiscalizaciones / Número de fiscalizadores.
Promedio de Inspecciones a faenas mineras por fiscalizador
Número de usuarios en archivos en relación a dotación efectiva de archivos
9 Otro grupo importante de indicadores de eficiencia son los orientados a medir laproductividad media de los factores: cuantas unidades de producto se obtienenen promedio por cada unidad de factor.
-
8/17/2019 Guia metodologica para la definicion, seguimiento y uso de indicadores de desempeño de los programas presupu…
27/100
25
Sector Ámbito de control Indicador
¿Es
indicador de
eficiencia?
Observación
Energía y minasProducto.Fiscalización defaenas mineras
Promedio deinspecciones afaenas mineras porfiscalizador
SÍ
El ámbito de control se
refiere a la fiscalizaciónde las faenas mineras,por lo cual el indicadores apropiado paracuantificar los recursosutilizados para cumplir elobjetivo, dado que tieneque ver con los recursoshumanos utilizadospor el programa parainspeccionar las faenasmineras.
Energía y minas
Producto.Cursos decapacitación enmateria de uso deenergías alternativasimplementados.
Porcentaje departicipantes enlos cursos quecalifican con nivelde satisfacciónalta y muy alta eldesempeño delcurso.
NO
El ámbito de controlse refiere a los cursos
implementados porel PP; no obstante, elindicador se relacionacon la percepción de losparticipantes respectoal desempeño del cursoy no al uso de recursospara su realización,por lo que no es unindicador de eficienciasino de calidad
Cuadro 3. ¿Está bien formulado el indicador de eficiencia?
c) Indicadores de calidadLa calidad del servicio es una dimensión específica del desempeño que se refiere ala capacidad de un PP para responder en forma rápida y directa a las necesidades desus usuarios. Los indicadores de calidad permiten hacer seguimiento a los atributos,las capacidades o las características que tienen o deben tener los bienes y serviciosque se proveen.
¿Qué aspectos mide un indicador de calidad?
9 Algunos indicadores de calidad proporcionan información sobre cuán oportuna
es la atención que el programa brinda a sus beneficiarios en relación a laconveniencia del tiempo y lugar donde se realizan las acciones del programa.
Ejemplos: Porcentaje de respuestas a los parlamentarios dentro de los plazoscorrespondientes
Porcentaje de reportes económicos entregados en tiempo acordado
Porcentaje de bonos desembolsados dentro del periodo reglamentario
-
8/17/2019 Guia metodologica para la definicion, seguimiento y uso de indicadores de desempeño de los programas presupu…
28/100
26
Ejemplos: Porcentaje de localidades cubiertas por atenciones móviles
Porcentaje de horas que la biblioteca está abierta fuera de las horas detrabajo
Porcentaje de población con necesidades especiales que son miembrosactivos de la biblioteca
Ejemplos:
Ejemplos:
Porcentaje de personas que reciben atención de calidad en los Centrosde Emergencia Mujer
Porcentaje de beneficiarios capacitados que se encuentran satisfechoscon el servicio de intermediación laboral
Número de usuarios satisfechos respecto al total usuarios encuestados
Número de usuarios satisfechos con el trato en la atención respecto altotal de usuarios
Porcentaje de contratos terminados por errores
Número de fallas reales respecto a las fallas programadas
Porcentaje de contratos con uno o más errores encontrados por revisionesexternas
9 Otros indicadores de calidad miden el nivel de accesibilidad de los usuarios a losproductos y servicios que ofrece el programa.
9 Un indicador clásico de calidad es aquél que mide la percepción de los usuarios;se refiere a la opinión de los beneficiarios del programa sobre los bienes o serviciosque recibieron del programa
9 Algunos indicadores de calidad miden la precisión en la entrega del servicio,cuantificando los fallos o errores que pueden ocurrir durante la gestión o lageneración de los bienes o servicios que produce el programa.
9 Finalmente, otros indicadores de calidad miden la continuidad en la entrega delos servicios, o en la satisfacción de los usuarios.
-
8/17/2019 Guia metodologica para la definicion, seguimiento y uso de indicadores de desempeño de los programas presupu…
29/100
27
Ejemplos: Porcentaje de hogares con servicio continúo de agua de al menos 8 horas
Porcentaje de hogares con servicio eléctrico continúo
Cuadro 4. ¿Está bien formulado el indicador de calidad?
Sector Ámbito de control Indicador
¿Es un
indicador de
calidad?
Observación
Vivienda,construcción ysaneamiento
Producto.Familias de bajosrecursos aptas paraacceder a viviendade interés socialen condicionesadecuadas
Porcentajede bonosdesembolsadosdentro del periodoreglamentario
SÍ
El ámbito de control serefiere a que las familias debajos recursos accedan avivienda de interés social,por lo cual el indicador esapropiado para determinarsi la entrega del producto
se realizó dentro de losestándares de tiemporeglamentarios, lo quenos informa sobre si laintervención fue oportuna.
Desarrollo einclusión social
Producto. Canastas de apoyoalimentario básicoen zonas ruralesentregadas.
Porcentaje debeneficiariosque recibieroncanastas de apoyoalimentario
NO
El ámbito de controlse refiere a la entregade canastas con apoyoalimentario; no obstanteel indicador permitemedir el cumplimiento delobjetivo (eficacia), pero nola calidad de los serviciosque entrega el programa.
Desarrollo einclusión social
Resultadoespecífico.Población rural conacceso a servicio deagua
Porcentaje depoblación ruralcon serviciocontinuo de agua
SÍ
El ámbito de control serefiere la población conacceso al agua y de elloscuantos tienen el serviciocontinuo (calidad delservicio), por lo cual elindicador es apropiadopara medir la calidad delacceso al servicio de aguapor parte de la poblaciónobjetivo.
Educación
Resultado
específico.Las instituciones deeducación superiorpúblicas cuentancon programaseducativos decalidad
Porcentaje deinstituciones
de educaciónsuperior públicascon al menos el80 por ciento desus programaseducativosacreditadospor organismoscompetentes.
NO
El ámbito de controlse refiere a que las
instituciones cuenten conprogramas educativos decalidad; sin embargo, elindicador permite medir elcumplimiento del objetivo(eficacia), pero no lacalidad de los serviciosque entrega el programa.
-
8/17/2019 Guia metodologica para la definicion, seguimiento y uso de indicadores de desempeño de los programas presupu…
30/100
28
Ejemplo:
Porcentaje de recursos privados obtenidos respecto del gasto total enmuseos nacionales
Cuadro 5. ¿Está bien formulado el indicador de economía?
Sector Ámbito de control Indicador
¿Es un
indicador deeconomía?
Observación
Producción
Producto.Implementaciónde proyectosproductivosalternativos.
Porcentajede recursosrecuperados de losbeneficiarios queincumplieron eluso de recursos
SÍ
El ámbito de control serefiere al seguimientoque realiza el programa alos apoyos, por lo cual elindicador es apropiadopara medir la capacidaddel programa paraadministrar los recursosfinancieros, ya que tratael porcentaje de recursosque recupera el programa
de los proyectos fallidos.
Energía y minas
Producto. Cursosde capacitación enmateria de uso deenergías alternativasimplementados.
Costo promediode los cursosde capacitaciónen materia deuso de energíasalternativas
NO
El ámbito de control serefiere al costo promediode los cursos sin medir lacapacidad del programapara administrar losrecursos financieros, porlo que no mide economía,sino eficiencia.
d) Indicadores de economía
Este concepto se refiere a la capacidad de una institución para generar y movilizaradecuadamente los recursos financieros en pos del cumplimiento de sus objetivos.
Los indicadores de economía miden la capacidad del programa para administrar,generar o movilizar de manera adecuada los recursos financieros. La diferenciaesencial con los indicadores de eficiencia (relacionados con recursos económicos)es que a los indicadores de economía no se centran en el cumplimiento de losobjetivos; únicamente observan la administración de los recursos financieros porparte de los responsables del programa.
¿Qué aspectos mide un indicador de economía?
9 El tipo de indicadores de economía son aquellos que relacionan el nivel derecursos financieros utilizados en la provisión de prestaciones y servicios con losgastos administrativos incurridos por la institución.
Ejemplo:
-
8/17/2019 Guia metodologica para la definicion, seguimiento y uso de indicadores de desempeño de los programas presupu…
31/100
29
RECUADRO 4: LAS DIMENSIONES DEL DESEMPEÑO DE LOS INDICADORES YLA CADENA DE VALOR EN LA PROVISIÓN DE LOS BIENES Y SERVICIOS DEL PP
El Gráfico debajo ilustra cómo se relacionan las dimensiones de los indicadoresde desempeño con la cadena de valor para el alcance de los resultados. Así, porejemplo, los indicadores de eficacia miden el alcance de los resultados para losproductos dados; los de eficiencia miden la provisión de los productos en relacióna los recursos o insumos utilizados; los de economía miden la relación recurso oinsumo con costo; y, finalmente, los de calidad miden alguna característica sobreel nivel de servicio o satisfacción sobre recursos y productos.
Gráfico 6. Dimensiones del desempeño
Economía Eficiencia
Calidad
Nivel deServicios
Utilización
satisfacción
Eficacia
Costos Recursos ResultadosProductos
-
8/17/2019 Guia metodologica para la definicion, seguimiento y uso de indicadores de desempeño de los programas presupu…
32/100
30
2.3 Elementos de los indicadores de desempeño
Los elementos del indicador de desempeño son la unidad de medida y la meta. Laprimera es la unidad en la que se medirá el desempeño, como por ejemplo, porcentaje,y que corresponde con el nombre del indicador. La segunda, la meta de un indicadorde desempeño, es el número de unidades de medida que se espera alcanzar en un
periodo de tiempo y en un ámbito geográfico, y que guarda correspondencia con lasacciones realizadas por una entidad en relación al avance físico y financiero.
RECUADRO 5: RESUMEN DEL CAPÍTULO 2
Definición de indicador: es una medida cualitativa o cuantitativa observable, quepermite describir características, comportamientos o fenómenos, a través de sucomparación con períodos anteriores o con metas o compromisos.
(i) En el marco del PpR, los indicadores se distinguen entre:
Indicadores de Producción Física Indicadores de desempeño
9 Es la unidad de medida de lacantidad de bienes y serviciosprovistos por una intervenciónpública.
9 Se ubican a nivel de producto yactividades.
9 Todo producto y actividad tiene
solamente un indicador deproducción física.
9 Es la medida del logro de losresultados esperados de un PP ode la entrega de productos acordea determinados atributos.
9 Se ubican a nivel de productos yresultados.
9 Puede haber más de un indicador
de desempeño para resultados yproductos.
A nivel de resultadoespecífico
9 Miden los resultados alcanzados por el programaen la resolución de la problemática
9 Una pregunta para identificar un indicador a estenivel es ¿Cómo sé si lo previsto por la intervenciónse está dando o se ha alcanzado?
(ii) Clasificación de indicadores de desempeño según su ámbito de control en laMML
A nivel de producto
9 Miden la producción, la entrega y lascaracterísticas de todos los bienes y serviciosque se otorgan directamente a los beneficiarios através de los componentes del programa.
9 Una pregunta para identificar un indicador aeste nivel es ¿Cómo sé si el producto ha sidoentregado o el servicio ha sido prestado o tienelas caracteristicas deseadas?
-
8/17/2019 Guia metodologica para la definicion, seguimiento y uso de indicadores de desempeño de los programas presupu…
33/100
31
(iii) Principales características de cada dimensión de desempeño
¿ Qué es?
Eficacia Eficacia Calidad Economía
¿ Qué mide?
Ejemplo
Porcentaje de
ejecución del
fondo del bono
habitacional
en relación al
presupuesto
programado
Grado decumplimiento de los
objetivos de PP
Relación entrelogro del PP o susproductos.Y los
recursos
Capacidad de unPP para respondera las necesidadesde sus usuarios
Capacidad del PPpara administra,
generar o movilizarde manera
adecuada losrecursos financieros
9 Capacidaddel PP parasolucionarploblemática
9 Cobertura delPrograma
9 Costo unitariode produccióno costo medio
9 Productividadmedia defactores
9 Oportunaatención del PP
9 Percepción delos usuarios
9 Presición enla entrega delservicio
9 Continuidad enla entrega delservicio
9 Relacionanel nivel derecursosfinancerosutilizados conlos gastosadministrativos
Porcentaje de los
becarios graduados
de los estudios de
educación superior
Costo promedio
de los beneficios
entragados
Porcentaje de
beneficiarios
capacitados
satisfechos con
el servicio de
intermediación
laboral.
-
8/17/2019 Guia metodologica para la definicion, seguimiento y uso de indicadores de desempeño de los programas presupu…
34/100
32
-
8/17/2019 Guia metodologica para la definicion, seguimiento y uso de indicadores de desempeño de los programas presupu…
35/100
33
CONSTRUCCIÓN DE INDICADORES DEDESEMPEÑO
3
-
8/17/2019 Guia metodologica para la definicion, seguimiento y uso de indicadores de desempeño de los programas presupu…
36/100
34
CAPÍTULO 3. CONSTRUCCIÓN DE INDICADORESDE DESEMPEÑO
3.1 Identificación de indicadores de desempeñoPrevio a la identificación de indicadores de desempeño, es necesario conocer eldiseño del PP y cómo a través de sus productos se puede alcanzar el resultadoespecífico. En este sentido, el punto de partida en la definición de un indicador dedesempeño es considerar los resultados y los productos que van a medir, así comolos procedimientos que se implementan para su ejecución. Para ello se recomiendarevisar el diagnóstico que sustenta el problema específico del PP y los modelosoperacionales contenidos en el Anexo 2 de “Contenidos Mínimos de un ProgramaPresupuestal”.
Luego, el equipo técnico encargado del diseño del PP debe seleccionar los indicadoresque mejor puedan expresar el logro de los resultados y productos definidos en eldiseño del PP. Esta decisión estará en función del tipo y naturaleza del programa. Lassiguientes preguntas pueden ayudar a definir los indicadores:
9 ¿Qué dimensión de desempeño me permite dar seguimiento a los avances del PPy evaluar sus logros?
Se debe procurar que el conjunto de indicadores del PP propuestos abarquen lasdiversas dimensiones de desempeño indicadas en la sección anterior (eficiencia,
eficacia, calidad y economía) y no se centre en una sola.
9 ¿Sobre quién (sujeto de medición) voy a medir el indicador?
Es decir, la población u objeto que se desea cuantificar.
9 ¿Qué (objeto de medición) es lo que va a medir el indicador?
Es decir, cuál es el logro esperado del ámbito de control (resultado específico oproducto) al que está asociado el indicador.
9 ¿Qué unidad de medida voy a utilizar para la medición del indicador?
El indicador debe expresar la unidad de medida en la que se medirá el desempeño,que puede ser a través de un porcentaje, tasa de variación, razón o número índice.
9 ¿Qué variable me permite cuantificar ese logro?
Pensando en la fuente de datos que se va a emplear, verificar la disponibilidad dedatos, a partir de los cuales se obtendrán las variables para aplicar la fórmula decálculo que me permita medir el indicador.
-
8/17/2019 Guia metodologica para la definicion, seguimiento y uso de indicadores de desempeño de los programas presupu…
37/100
35
9 ¿Es relevante incluir un enfoque de género en el diseño del indicador?
Se puede desagregar un indicador por género cuando sea relevante. Ello quieredecir cuando se tenga información de que existen brechas de género en lapoblación objetivo del PP o el problema a ser cuantificado advierte la existencia deuna situación de desigualdad entre hombres y mujeres, que opera en desmedro
de las mujeres.
En sectores sociales como educación, empleo y salud, esta brecha resulta másevidente, por lo que es importante incluir un enfoque de género en el diseñode los indicadores a fin de producir y emplear información para la mejora de lascondiciones de equidad e igualdad.
Algunas áreas consideradas críticas por la ONU5 en relación a la igualdad entrehombres y mujeres son:
9 Persistente y creciente carga de la pobreza sobre la mujer;
9 Acceso desigual e inadecuado a la educación y capacitación;
9 Acceso desigual e inapropiado a los servicios de sanitarios y afines;
9 Violencia contra las mujeres;
9 Efectos de los conflictos armados y de otra clase sobre las mujeres;
9 Desigualdad en las estructuras políticas y económicas, en todas las formas deactividad productiva y en el acceso a los recursos;
9 Disparidad entre mujeres y hombres en el ejercicio del poder y la toma dedecisiones en todos los niveles de autoridad;
9 Mecanismos insuficientes para promover la superación de la mujer;
9 Inadecuada promoción y protección de los derechos humanos de la mujer;
9 Estereotipos sobre la mujer y desigualdad en su acceso y participación en todoslos sistemas de información, en especial los medios masivos de comunicación;
9 Desigualdades en materia de género, en el manejo de los recursos naturales y la
protección del medio ambiente; 9 Persistente discriminación y violación de los derechos de las niñas.
5 Informe de la Cuarta Conferencia Mundial sobre las Mujeres, Beijing, 4-15 de septiembre 1995; Cap III: Áreas críticas, punto44, pag 23, Naciones Unidas, A/conf 177/20.
-
8/17/2019 Guia metodologica para la definicion, seguimiento y uso de indicadores de desempeño de los programas presupu…
38/100
36
El Cuadro 6 presenta un ejemplo sobre la definición del nombre de algunosindicadores de desempeño de un PP sobre prevención de la violencia familiar. Elresultado específico de este PP es “Reducción de la violencia familiar en mujeres,niños, niñas y adolescentes”. Aquí, se identifican dos variables relevantes en sumedición: i) las personas afectadas por la violencia familiar y ii) las prácticas deviolencia familiar. A partir de estas variables, se definen dos indicadores para medireste resultado.
Cuadro 6. Ejemplo para la definición de los indicadores de desempeño
Ámbito de
control
Variables
relevantes de
la medición (1)
Sujeto Objeto
Unidad
de
medida
Nombre de los
indicadores de
desempeño
Resultadoespecífico:Reducciónde laviolenciafamiliar enmujeres,niños, niñas yadolescentes
Personas
afectadas porviolencia familiar
¿Quién?: mujeres
afectadas por laviolencia familiary sexual
¿Qué?:
formulandenuncia Porcentaje
Porcentaje de mujeresafectadas por violencia
familiar y sexual queformulan denuncia
Prácticas deviolencia familiar
¿Quién?:hombres ymujeres
¿Qué?:toleranciasocial enrelacióna laviolenciafamilia
Índice
Índice de Tolerancia Socialen varones en relación ala violencia familiarÍndice de Tolerancia Socialen mujeres en relación ala violencia familiar
(1) Estas variables sirven para identificar la relevancia del indicador
Cabe resaltar que el nombre del indicador no repite la denominación del ámbito de
control del indicador, sino que expresa los aspectos que se necesitan monitorear encada nivel de objetivo y que el nombre del indicador no refleja una acción; no debeincluir verbos en infinitivo, sino la unidad de medida del mismo.
Finalmente, una pregunta comúnmente formulada es: ¿Cuántos indicadores construiry de qué tipo?
Algunas buenas prácticas que ayudan a despejar estas preguntas son:
9 El número de indicadores a incluir no debe exceder a la capacidad del programapara medirlos y controlarlos.
9 Se debe garantizar que los indicadores se orienten a medir el logro del resultadoespecífico del PP y sus productos, los cuales serían aquellos que miden lasdimensiones de eficacia, eficiencia, calidad y economía.
9 Con el tiempo, el avance en los resultados de los indicadores debe estar vinculadocon el avance en el indicador de producción física, es decir, que el avance deldesempeño debe de guardar relación con la cantidad de bienes o servicios queson provistos. De esta forma, si se prevé un aumento o disminución en la cantidadde los bienes o servicios, esta se debería reflejar en una variación en el o los
indicadores de desempeño del PP.
-
8/17/2019 Guia metodologica para la definicion, seguimiento y uso de indicadores de desempeño de los programas presupu…
39/100
37
3.2 Criterios SMART de los indicadores de desempeño
La construcción de los indicadores debe estar enmarcada bajo los criterios SMART,que son criterios de condiciones mínimas para asegurar la calidad y pertinencia deun indicador. Para ello, se sigue la herramienta de evaluación de los indicadoresformulados desarrollada por la Oficina de Evaluación del Programa de Desarrollo de
Naciones Unidas (UNDP), la cual consiste en verificar si un indicador de desempeñoes SMART, que por sus siglas en inglés significa, que sea simple, específico, realista,medible, apropiado o válido y temporal. Así, para que el indicador sea válido, deberácumplir con estos seis criterios6.
Estos criterios servirán a los equipos técnicos de los PP para la definición de losindicadores de desempeño7.
Simple
El indicador debe ser de fácil elaboración.
Las siguientes preguntas pueden ayudarle a identificar si el indicador es simple yespecífico:
9 ¿el nombre del indicador es fácil de entender?
9 ¿la fórmula de cálculo del indicador es comprensible?
Específico
El indicador debe ser explícito respecto al objetivo que se quiere medir, permitiendoverificar si el resultado se ha cumplido.
Las siguientes preguntas pueden ayudarle a identificar si el indicador es simple yespecífico:
9 ¿qué, cómo, dónde y cuándo se va a medir el indicador?
9 ¿qué características del resultado o producto mide el indicador?
Medible
El indicador puede ser cuantificado con las fuentes de datos disponibles o generarse,
con relativa facilidad, las fuentes de información para generarlo.En los casos en que las entidades de los GR y GL cuenten con fuentes de informaciónsistematizadas, estas entidades tomarán el diseño del indicador de desempeñoelaborado por el GN para calcular de los valores correspondientes en su ámbito decompetencia geográfico.
6 Para la elaboración del procedimiento se tomó en consideración el esquema elaborado por la PNUD y la metodologíaSMART para la definición de indicadores de calidad.
7 Cabe señalar que la DGPP del MEF no solicita por escrito un sustento del cumplimiento de los criterios SMART a los
responsables de los PP, sino que la presentación de estos criterios sirven como lineamiento para la definición de losindicadores de desempeño.
-
8/17/2019 Guia metodologica para la definicion, seguimiento y uso de indicadores de desempeño de los programas presupu…
40/100
38
La siguiente pregunta puede ayudarle a identificar si el indicador es medible:
9 ¿El indicador dispone de una fuente de información que sea factible de aplicar odesarrollar?
Apropiado
Algunos indicadores son más apropiados que otros para medir un ámbito decontrol, por ello se debe seleccionar indicadores más relevantes y que cuantificanlas dimensiones de resultados y productos del PP.
La siguiente pregunta puede ayudarle a identificar si un indicador es apropiado:
9 ¿El indicador cuantifica con alguna limitación el resultado o producto del PP?
Realista
Se refiere a la posibilidad de medir el indicador con los recursos disponibles y la
experiencia técnica de la entidad. Puede darse el caso que el indicador no presentedificultades técnicas para su medición, sin embargo los datos no puedan serlevantados con la frecuencia necesaria debido a que la entidad no cuenta con losrecursos monetarios necesarios o, podría ser también el caso que se cuente con losrecursos para financiar el levantamiento de la información pero la entidad no cuentecon un equipo capacitado para poder realizar su cálculo. Estas y otras coyunturasdeberán ser evaluadas por el equipo técnico de la entidad.
La siguiente pregunta puede ayudarle a identificar si un indicador es realista:
9 ¿Hay limitaciones en recursos y capacidades en la entidad que impediría la
medición del indicador?
Temporal
El indicador debe permitir que el avance en las metas se refleje en un plazodeterminado.
Las preguntas que nos pueden ayudar a identificar si el indicador se encuentraenmarcado en el tiempo son:
9 ¿El indicador expresa una frecuencia de ocurrencia?
9 ¿Tiene el indicador un tiempo de inicio o de terminación?
3.3 Contenidos básicos de los indicadores de desempeño
En el marco de un PP, la elaboración de los indicadores desempeño implicadesarrollar un conjunto de contenidos que permitan conocer sus aspectos básicos.
-
8/17/2019 Guia metodologica para la definicion, seguimiento y uso de indicadores de desempeño de los programas presupu…
41/100
39
Estos aspectos básicos forman parte de una ficha técnica, la cual sirve para velar porla transparencia y rigurosidad del indicador8. Estos son:
a) Definición
b) Justificación
c) Método de cálculo
d) Fuente de datos
e) Base de datos
f) Precisiones técnicas
g) Limitaciones y supuestos empleados
h) Instrumento de recolección de información
i) Sintaxis
Esta ficha técnica es la Tabla 14 del Anexo 2 “Contenidos Mínimos de un ProgramaPresupuestal”, que forma parte de la Directiva para los PP. A continuación se brindanalgunas recomendaciones para desarrollar cada uno de estos elementos.
a) Definición
La definición es una descripción simple y breve del nombre del indicador, en la cualse explica algunos aspectos que sean necesarios aclarar en los términos empleados.
Recomendaciones para la definición del indicador:
9 La descripción simple y breve implica, de ser necesario, ampliar la descripción dealgún término usado en el nombre del indicador.
9 Cualquier persona debe entender que se mide.
9 Si se usan siglas, estas deben ser definidas.
9 La definición no debe repetir el método de cálculo, ni las precisiones técnicas del
indicador de desempeño.
8 Este es el orden que sigue el flujo de proceso de elaboración de contenidos que difiere a los puntos de la ficha técnica.
-
8/17/2019 Guia metodologica para la definicion, seguimiento y uso de indicadores de desempeño de los programas presupu…
42/100
40
Cuadro 7. Ejemplo de definición del indicador
Nombre del
indicadorDefinición
¿Es
apropiada la
definición?
Observación
Porcentajede hogaresrurales conagua segura
Mide el porcentaje de
hogares rurales con aguasegura
NO
Porcentaje de hogares rurales a nivel nacional
que viven en el ámbito rural y que consumenagua que contiene cloro residual
Porcentaje de hogaresrurales a nivel nacionalque viven en el ámbitorural y que consumenagua que contiene clororesidual
SÍ
La definición se encuentra bien establecidaya que aporta una descripción sencilla peroprecisa del nombre del indicador, aclarandoalgunos conceptos claves del indicador,como especificar el concepto de agua seguray el nivel de alcance de la población objetivo(hogares rurales a nivel nacional)
b) Justificación
La justificación del indicador es el sustento de su utilidad para el seguimiento del PP,explicando sus principales fortalezas respecto a otras alternativas de medición.
Recomendaciones para el registro de la justificación:
9 En la justificación se debe responder a las siguientes preguntas: ¿para qué sirve elindicador (utilidad para el seguimiento), y por qué se eligió este indicador sobreotras alternativas (fortalezas del indicador respecto a otras alternativas)?.
-
8/17/2019 Guia metodologica para la definicion, seguimiento y uso de indicadores de desempeño de los programas presupu…
43/100
41
Cuadro 8. Ejemplo de justificación del indicador
Nombre del
indicador Justificación
¿Es
apropiada la
justificación?
Observación
Razón de
mortalidadmaterna por
100 mil nacidosvivos
El indicador mide el número demujeres que fallecen durante un añodeterminado a causa de complicacionesrelacionadas con el embarazo o elparto, por cada 100.000 nacidos vivosese mismo año.Se cuenta con información disponiblepara el indicador.
NO
La justificación del indicador
se está confundiendocon la definición delindicador, además sebrinda información sobreel nivel de accesibilidada la información queno corresponde a la justificación de la utilidaddel indicador.
El ratio de mortalidad materna es unindicador que refleja una complejainteracción de diversos factorescondicionantes. ¿PARA QUÉ? Su utilidad estriba en que
es utilizado para determinar el impactode intervenciones sanitarias y socialesdirigidas a la mejora de la calidad devida y desarrollo social de la mujer.¿POR QUÉ SE ELIGIÓ? En los paísesen desarrollo como el Perú son pocofrecuentes los sistemas de registro deestadísticas vitales de calidad aceptable.Uno de los principales problemas esque las zonas rurales las mujeres notienen acceso a servicios salud, a travésde los cuales se recolectan dichasestadísticas.Por ello, la alternativa más frecuente enpaíses en desarrollado es el calcular la
mortalidad materna utilizando datos deencuestas demográficas y de salud, talcomo se hace en el Perú sobre la basede la encuesta ENDES
SÍ
La definición se encuentrabien establecida, detalla losatributos del indicador quesustentan su utilidad para elseguimiento del PP: por unlado cuál es la importanciao utilidad de este indicadory el sustento del por quése eligió frente a otrosindicadores.
c) Método de cálculo
El método de cálculo es la expresión matemática que enuncia la fórmula de cálculodel indicador de desempeño. En el método de cálculo, además, se enuncian lasvariables utilizadas en la fórmula de cálculo en función del instrumento de recolección
de los datos.
Recomendaciones para establecer el método de cálculo del indicador:
9 Utilizar, preferentemente, símbolos matemáticos para enunciar la fórmula decálculo.
9 El método de cálculo debe incorporar las variables y la relación de éstas con elinstrumento de recolección de información. Por ejemplo, si una de las variablesdel numerador es “Número de egresados empleados”, se deberá consignar qué
pregunta o campo en un registro administrativo recoge esta variable
-
8/17/2019 Guia metodologica para la definicion, seguimiento y uso de indicadores de desempeño de los programas presupu…
44/100
42
Gráfico 6. Construcción de indicadores de desempeño como porcentaje
9 A continuación se presentan lineamientos para la definición del método de cálculode los indicadores de desempeño, según la unidad de medida empleada9.
Indicador de desempeño expresado como porcentaje
Un porcentaje es la forma de expresar un número como porción de cada cien. Losporcentajes son la razón entre dos variables con una misma unidad de medida enel mismo periodo; y representan un conjunto de menor dimensión de otro conjunto.Los porcentajes son el método de cálculo más utilizado y permiten conocer el gradode cobertura o focalización de alguna variable .En el gráfico 6 se presenta un ejemplode cómo construir un indicador de porcentaje.
9 Se ha tomado como referencia para el desarrollo de esta sección el “Manual para el diseño y la construcción de indicadores.
Instrumentos principales para el monitoreo de los programas sociales de México” publicado por el Consejo Nacional deEvaluación de la Política de Desarrollo Social (CONEVAL), 2013.
Indicador:Porcentaje de egresados del programa queperciben salario mensual igual a mayor que el ingreso
minimo establecido
Total de Egresados delprograma que se
encuentra empleados
Número de egresados en el periodo t empleados con
Igual unidad
de medida
x 100
salario mensual igual o mayor que el ingreso mínimo
Números de egresados en el periodo t que se
encuentran empleados
Egresados
(empleados) con
salario mensual
igual o mayor que
el ingreso mínimo
Mismo
periodo
A partir del gráfico, cabe resaltar cuatro elementos claves, cuyo cumplimiento debeverificarse cuando se definen indicadores de porcentajes:
9 Las unidades de medida en el numerador y denominador deben ser las mismas.
9 Los periodos de medición en el numerador y denominador deben ser los mismos.
9 La unidad de medida del indicador (porcentaje) coincide con la expresión delindicador, la cual es enunciada en su nombre (Porcentaje de…)
9 El numerador representa una fracción o parte del denominador.
-
8/17/2019 Guia metodologica para la definicion, seguimiento y uso de indicadores de desempeño de los programas presupu…
45/100
43
Cuadro 9. Ejemplo de indicador expresado en porcentaje
Nivel de objetivo IndicadorUnidad de
medida Método de cálculo
Resultadoespecífico
Porcentaje deegresados queperciben salariomensual igualo mayor que elingreso mínimoestablecido
Porcentaje
A / B *100
A: Número de egresados en el año t empleadoscon salario mensual igual o mayor que el ingresomínimo
B: Número de egresados en el año t que seencuentran empleados
A es el Campo 509 de la ficha, tiene detallado unsalario mayor al mínimo vital.
B es el Campo 502 de la ficha: Base de datos deegresados.
Indicador de desempeño expresado como tasa de variación
Una tasa de variación es la forma de expresar un cambio relativo en una mismavariable pero en periodos diferentes en el tiempo .En el gráfico 7 presentamos unejemplo de cómo construir este indicador:
Gráfico 7. Construcción de indicadores de desempeño como tasa de variación
Número de microempresas creadas con los apoyos del
Igual unidad
de medida
x 100-1programa en el año t
Números de microempresas creadas con los apoyos del
programa en el año t - 1
Diferente
periodo
Indicador:
Tasa de variación enel número anual de
microempresas
creadas
Restamos
la unidad
El cuadro 9 muestra un ejemplo del indicador de desempeño que usa como unidadde medida, porcentaje.
-
8/17/2019 Guia metodologica para la definicion, seguimiento y uso de indicadores de desempeño de los programas presupu…
46/100
44
A partir del gráfico, cabe resaltar cinco elementos claves, cuyo cumplimiento debeverificarse cuando se definen estos indicadores:
9 Este método de cálculo toma observaciones de una misma variable, pero en dosdiferentes puntos en el tiempo (pasado y presente). La información más actualse coloca en el numerador y la menos reciente, es decir, el punto de interés, enel denominador.
9 Por ello, es fundamental describir con claridad el nombre de las variables en elmétodo de cálculo y verificar la temporalidad en que se realiza la medición.
9 El nombre del indicador debe comenzar como “Tasa de variación de…”, perono debe incluirse juicios de valor en el nombre del indicador, como tasa decrecimiento o tasa de reducción, entre otros.
9 La unidad de medida del indicador será porcentaje, la cual no coincide con la
expresión del indicador enunciada en su nombre (Tasa de variación de…) 9 La tasa de variación se usará solo cuando sea relevante medir el incremental en el
desempeño de un resultado específico o producto. Tal es el caso de un productoque presenta brechas muy grandes y que el avance en su desempeño se medirárespecto a incrementos sobre el periodo anterior. La tasa de variación no seusará en los casos en que se pueda medir la brecha de un resultado específicoo producto. Por ejemplo, un indicador de desempeño como “Tasa de variaciónde hogares rurales con cobertura de agua segura” no es apropiado, sino que elindicador correcto sería “Cobertura de hogares rurales con agua segura”.
El cuadro 10 presenta un ejemplo de un indicador de desempeño basado en unatasa de variación.
Cuadro 10. Ejemplo de indicador expresado como tasa de variación
Nivel de objetivo IndicadorUnidad de
medidaMétodo de cálculo
Producto
Tasa devariación en elnúmero anualdemicroempresascreadas
Porcentaje
(A / B – 1)*100
A: Número de microempresas creadas con losapoyos del programa en el año t
B: Número de microempresas creadas con losapoyos del programa en el año t - 1)-1
A es el Campo 200 de la base de datos, tienedetallado el recibir apoyo.
B es el Campo 201 de la base de datos: Númerode microempresas.
-
8/17/2019 Guia metodologica para la definicion, seguimiento y uso de indicadores de desempeño de los programas presupu…
47/100
45
Indicador de desempeño expresado como razón/ promedio
Una razón o promedio es el cociente entre dos variables con distinta unidad demedida, pero para un mismo periodo; es decir, es la forma de expresar unidades delnumerador por unidad del denominador. En el Gráfico 8 se presenta un ejemplo deconstrucción de un indicador de este tipo:
A partir del gráfico 10, cabe resaltar cinco elementos claves, cuyo cumplimiento debeverificarse cuando se definen estos indicadores:
9 Las variables del numerador y denominador deben tener diferente unidad de
medida 9 Debe haber correspondencia entre el periodo de medición de las variables del
numerador y denominador
9 La unidad de medida del indicador de desempeño estará vinculada con la unidadde medida del numerador o con la relación entre numerador y denominador
9 El nombre del indicador de desempeño debe reflejar la unidad de medida delindicador
El cuadro 11 muestra un ejemplo del indicador de desempeño expresado en razón opromedio.
Gráfico 8. Construcción de indicadores de desempeño como razón o promedio
Total de semanas que los beneficiarios lleva