la evaluacion de las politicas de gasto instituto de estudios fiscales evaluaci ó n prospectiva de...

LA EVALUACION DE LAS LA EVALUACION DE LAS POLITICAS DE GASTOPOLITICAS DE GASTOInstituto de Estudios FiscalesInstituto de Estudios Fiscales

Evaluación Prospectiva de Evaluación Prospectiva de Políticas PúblicasPolíticas Públicas

José Manuel AdánJosé Manuel Adán 23 Marzo 2009 23 Marzo 2009

MADRIDMADRID

22

INTRODUCCIONINTRODUCCION

• Evaluación Versus AuditoriaEvaluación Versus Auditoria• Evaluación en la normativa actualEvaluación en la normativa actual• Experiencia en otros paísesExperiencia en otros países• Evaluación de las políticas de gasto Evaluación de las políticas de gasto

y el Control Interno. Aplicación a I y el Control Interno. Aplicación a I + d + i+ d + i

• Programa 462MPrograma 462M• Grupo de Programas de GastoGrupo de Programas de Gasto• Grupo de Programas de Gasto por Grupo de Programas de Gasto por

Centros GestoresCentros Gestores• ConclusionesConclusiones

EP

GJ.M

. Ádán

33

II - - EVALUACIONEVALUACION

VERSUSVERSUS

AUDITORIAAUDITORIA

EP

GJ.M

. Ádán

44

EVALUACIONEVALUACION

• Señalar el Señalar el valor de algovalor de algo

• Estimar, apreciar, Estimar, apreciar, calcular el valor de calcular el valor de algoalgo

• Aptitudes y rendimiento de alumnosAptitudes y rendimiento de alumnos

EP

GJ.M

. Ádán

55

• AuditoriaAuditoria: “proceso sistemático de : “proceso sistemático de obtención y evaluación de obtención y evaluación de evidencia, de manera objetiva evidencia, de manera objetiva respecto de las afirmaciones respecto de las afirmaciones concernientes a concernientes a actos económicosactos económicos para determinar el grado de para determinar el grado de correspondencia entre tales correspondencia entre tales afirmaciones y criterios afirmaciones y criterios establecidosestablecidos

EP

GJ.M

. Ádán

66

Auditoria de eficacia, eficiencia Auditoria de eficacia, eficiencia

y economíay economía::

• Tipo de auditoria que tiene por objeto Tipo de auditoria que tiene por objeto comprobar que la entidad está comprobar que la entidad está adquiriendo, manteniendo y adquiriendo, manteniendo y empleandoempleando los recursos de manera los recursos de manera eficaz, económica y eficienteeficaz, económica y eficiente

EP

GJ.M

. Ádán

77

Auditoria de programasAuditoria de programas presupuestarios y planes presupuestarios y planes de actuación:de actuación:

• Tipo de auditoria que tiene por Tipo de auditoria que tiene por objeto comprobar el grado deobjeto comprobar el grado de eficaciaeficacia alcanzado en la consecución de losalcanzado en la consecución de los objetivosobjetivos previstos en los programas previstos en los programas y planes de actuación, así como de y planes de actuación, así como de lala legalidadlegalidad de las actuaciones de las actuaciones efectuadas en la ejecución de los efectuadas en la ejecución de los programas y planes de referencia.programas y planes de referencia.

EP

GJ.M

. Ádán

88

Auditoria operativa:Auditoria operativa:• Examen sistemático y objetivo de la evidencia, Examen sistemático y objetivo de la evidencia,

a fin de proporcionar una valoración a fin de proporcionar una valoración independiente de las operaciones de una independiente de las operaciones de una organización, programa, actividad o función organización, programa, actividad o función pública, suministrando información útil para la pública, suministrando información útil para la mejora de la rendición pública de cuentas y mejora de la rendición pública de cuentas y facilitando la toma de decisiones por aquellos facilitando la toma de decisiones por aquellos con responsabilidad de supervisión o con responsabilidad de supervisión o iniciación de acciones correctivas.iniciación de acciones correctivas.

• Aquella que engloba los objetivos de las Aquella que engloba los objetivos de las auditorias deauditorias de eficacia, economía y eficienciaeficacia, economía y eficiencia de programas presupuestarios y planes de de programas presupuestarios y planes de actuación y de sistemas y procedimientos de actuación y de sistemas y procedimientos de gestión financiera.gestión financiera.

EP

GJ.M

. Ádán

99

Auditoria operativaAuditoria operativa

• ∑ ∑ técnicas concernientes a auditorias técnicas concernientes a auditorias de eficacia, eficiencia y economía y de eficacia, eficiencia y economía y de programas.de programas.

• Incluye: examen de la legalidad, Incluye: examen de la legalidad, consecución de objetivos y medición consecución de objetivos y medición de la eficacia, eficiencia y economíade la eficacia, eficiencia y economía

EP

GJ.M

. Ádán

1010

•Auditoria operativaAuditoria operativa

Cubre todos los ámbitos que Cubre todos los ámbitos que pueden ser evaluados.pueden ser evaluados.

Con esta herramienta Con esta herramienta abarcamos campos de abarcamos campos de la evaluación..

EP

GJ.M

. Ádán

1111

EVALUACIONEVALUACION

VERSUSVERSUS

AUDITORIAAUDITORIA• EvaluaciónEvaluación: dirigida : dirigida

fundamentalmente a fundamentalmente a

OBJETIVOS, RESULTADOS Y OBJETIVOS, RESULTADOS Y AYUDAAYUDA

PARA MEJORARLOSPARA MEJORARLOSEP

GJ.M

. Ádán

1212

DIFERENCIAS:DIFERENCIAS:• Por sus orígenes

• Por el tipo de relaciones con los evaluadores

• Por las cuestiones que tratan

• Por la solidez de las instituciones

• Por el destino de las auditorias y las evaluaciones

• Por el tecnicismo reglado de los auditores

• Por el campo de actuación

• Por las técnicas a utilizar

• Por la contrastación de los resultados

• Por el grado de objetividad

EP

GJ.M

. Ádán

1313

Por sus orígenes:Por sus orígenes:

AuditoriaAuditoria ≡≡ más antigua más antigua

EvaluaciónEvaluación ≡≡ 1960 1960

criterios y clientes menos criterios y clientes menos identificadosidentificados

EP

GJ.M

. Ádán

1414

Por sus relaciones con los Por sus relaciones con los evaluadores:evaluadores:

Evaluación: intenta establecer relacionescooperativas e interactivas con los evaluados.

EP

GJ.M

. Ádán

1515

Por las cuestiones que tratan:Por las cuestiones que tratan:

Auditoria ------- responde a la Auditoria ------- responde a la pregunta QUÉpregunta QUÉ

Evaluación ---- intenta responder a Evaluación ---- intenta responder a la la pregunta POR pregunta POR QUÉQUÉ

EP

GJ.M

. Ádán

1616

Por la solidez de las instituciones:Por la solidez de las instituciones:

Las Instituciones Estatales de Las Instituciones Estatales de Auditoria tienen una gran ventaja Auditoria tienen una gran ventaja sobre los “primos” evaluadores sobre los “primos” evaluadores

(Estatuto, acceso, procedimiento, (Estatuto, acceso, procedimiento, …)…)

EP

GJ.M

. Ádán

1717

Por el destino de las auditorias y Por el destino de las auditorias y evaluacionesevaluaciones

- - AuditoriaAuditoria: conciben los : conciben los programas programas utilizando criterios utilizando criterios

definidos (volumen de definidos (volumen de recursos, relevancias recursos, relevancias

políticas) políticas)

- - EvaluaciónEvaluación: más libertad: más libertad

EP

GJ.M

. Ádán

1818

Por el tecnicismo reglado de los Por el tecnicismo reglado de los auditoresauditores

• Las auditorias operativas exigen más Las auditorias operativas exigen más destreza que una convencional de destreza que una convencional de contabilidad.contabilidad.

• Los evaluadores han de reunir Los evaluadores han de reunir equipos con conocimientos técnicos equipos con conocimientos técnicos para solucionar problemas para solucionar problemas especializadosespecializados

EP

GJ.M

. Ádán

1919

Por la relación con los evaluados y Por la relación con los evaluados y auditadosauditados

EP

GJ.M

. Ádán

2020

Por el campo de actuaciónPor el campo de actuación

Auditores = viaje a lo desconocido Auditores = viaje a lo desconocido o parcialmente desconocido.o parcialmente desconocido.

Evaluadores: evalúan solo lo que Evaluadores: evalúan solo lo que les han pedido que evalúen.les han pedido que evalúen.

EP

GJ.M

. Ádán

2121

Por las técnicas a utilizarPor las técnicas a utilizar

Aunque puede existir solapamiento Aunque puede existir solapamiento hay diferencias.hay diferencias.

Las auditorias: usan las Las auditorias: usan las entrevistas, planifican la entrevistas, planifican la auditoria, los informes son más auditoria, los informes son más directos. directos.

EP

GJ.M

. Ádán

2222

Por la contrastación Por la contrastación de los resultadosde los resultados• Los auditores elaboran informes Los auditores elaboran informes

provisionales (alegaciones) o provisionales (alegaciones) o definitivosdefinitivos

• Los evaluadores noLos evaluadores no

EP

GJ.M

. Ádán

2323

Por el grado de Por el grado de objetividadobjetividad• La auditoria “tradicional” ha La auditoria “tradicional” ha

sido más objetiva. La medida de sido más objetiva. La medida de EFICACIA, EFICIENCIA … mas EFICACIA, EFICIENCIA … mas subjetivasubjetiva

• La evaluación, en general es más La evaluación, en general es más subjetivasubjetiva

EP

GJ.M

. Ádán

2424

II - II - EVALUACIÓN EN LA EVALUACIÓN EN LA NORMATIVA NORMATIVA

ACTUALACTUAL

• Ley de Agencias Estatales Ley de Agencias Estatales ≡≡ Agencia de Evaluación Agencia de Evaluación ≡≡ control control de eficacia de eficacia ≡≡ responsabilización responsabilización de resultados de resultados ≡≡ realización de realización de evaluaciones de políticas y evaluaciones de políticas y programas públicos cuya gestión programas públicos cuya gestión corresponde a la AGEcorresponde a la AGE

EP

GJ.M

. Ádán

2525

•¿Qué políticas Públicas?¿Qué políticas Públicas?

≡ ≡ ¿Qué programas públicos?¿Qué programas públicos?

≡ ≡ ¿Políticas de gasto?¿Políticas de gasto?

EP

GJ.M

. Ádán

2626

Superación del ámbito estrictamenteSuperación del ámbito estrictamente

presupuestario, aún con estrecha presupuestario, aún con estrecha

REPRESENTACIÓN Y REPRESENTACIÓN Y PARTICIPACIÓN del PARTICIPACIÓN del

Ministerio de Economía y HaciendaMinisterio de Economía y Hacienda

≡ ≡ En el MEH sólo POLITICAS DE En el MEH sólo POLITICAS DE GASTOGASTO

- DIFERENCIA ENTRE POLITICA DIFERENCIA ENTRE POLITICA PUBLICA Y POLITICA DE GASTOPUBLICA Y POLITICA DE GASTO

EP

GJ.M

. Ádán

2727

- EVALUACION EN LA LEY GENERAL EVALUACION EN LA LEY GENERAL PRESUPUESTARIAPRESUPUESTARIA

- =“Principio de eficiencia en la =“Principio de eficiencia en la asignación de recursos” (art. 26)asignación de recursos” (art. 26)

- = Contenido de programas = Contenido de programas →→ indicadores de ejecución indicadores de ejecución →→ objetivos objetivos →→ “evaluación del resultado en “evaluación del resultado en términos de e.e.e.” (art. 29.6.e) términos de e.e.e.” (art. 29.6.e)

- Evaluación de las políticas de gasto = Evaluación de las políticas de gasto = el MEHel MEH impulsará y coordinará la impulsará y coordinará la evaluaciónevaluación continuada de las políticas continuada de las políticas de gasto (art. 72)de gasto (art. 72)

- El MEH puede realizar evaluaciones?El MEH puede realizar evaluaciones?EP

GJ.M

. Ádán

2828

• La Evaluación de las Políticas de La Evaluación de las Políticas de Gasto puede ser realizada por el Gasto puede ser realizada por el MEH MEH →→ IGAE IGAE →→ Auditorias Auditorias

• Era la única institución en la fecha Era la única institución en la fecha de la publicación de la LGPde la publicación de la LGP

• La Ley de Agencias no ha La Ley de Agencias no ha deshabilitado el art. 72deshabilitado el art. 72

EP

GJ.M

. Ádán

2929

OBJETIVOS DEL CONTROLOBJETIVOS DEL CONTROL

• Art. 142.1.c:Art. 142.1.c: EvaluarEvaluar que la actividad que la actividad y los procedimientos objeto de y los procedimientos objeto de control se realiza de acuerdo con los control se realiza de acuerdo con los principios de buena gestión principios de buena gestión financiera.financiera.

• (Evaluar como “técnica”)(Evaluar como “técnica”)

≡≡ función interventora función interventora →→ control control financiero permanente financiero permanente →→ Auditoria Auditoria públicapúblicaE

PG

J.M. Á

dán

3030

• Art. 142.1.d: VerificarArt. 142.1.d: Verificar el cumplimiento el cumplimiento de los objetivosde los objetivos asignados a los centros asignados a los centros gestores del gastogestores del gasto

•

→→ Función Función interventorainterventora

= IGAE = IGAE →→ Evalúa? Evalúa? →→ →→ Control financiero Control financiero

→→ AuditoriaAuditoria

EP

GJ.M

. Ádán

3131

• Evaluación por la IGAEEvaluación por la IGAE

• Evaluación por la D.G. de Evaluación por la D.G. de PresupuestosPresupuestos

DIFERENCIASDIFERENCIAS

EP

GJ.M

. Ádán

3232

• Control financiero permanente:Control financiero permanente:• Verificación continuada de ENTIDADES. Verificación continuada de ENTIDADES.

“Aspecto económico financiero” (art. “Aspecto económico financiero” (art. 157) 157) → ajuste a principios de buena → ajuste a principios de buena gestión financiera.gestión financiera.

• La Evaluación debe evaluar La Evaluación debe evaluar políticas, no Instituciones.políticas, no Instituciones.

• Auditoria operativa: examen Auditoria operativa: examen sistemático y objetivo de las sistemático y objetivo de las operaciones y procedimientos de una operaciones y procedimientos de una organización, programa, actividad o organización, programa, actividad o función pública con el objeto de función pública con el objeto de proporcionar una valoración proporcionar una valoración independiente de su racionalidad independiente de su racionalidad económicaeconómica..

EP

GJ.M

. Ádán

3333

• Clasificación funcional de NN.UU.Clasificación funcional de NN.UU.

01.01. Servicios GeneralesServicios Generales02. Defensa02. Defensa03. Orden Público y Seguridad03. Orden Público y Seguridad04. Asuntos económicos04. Asuntos económicos05. Protección medioambiental05. Protección medioambiental06. Vivienda y Servicios Comunitario06. Vivienda y Servicios Comunitario07. Sanidad07. Sanidad08. Ocio, cultura y religión08. Ocio, cultura y religión09. Educación09. Educación10. Protección Social10. Protección Social

EP

GJ.M

. Ádán

3434

• Evaluación de las políticas de gasto Evaluación de las políticas de gasto debe sustentarsedebe sustentarse

– Auditoria de ProgramasAuditoria de Programas Análisis de Análisis de la adecuación de los objetivos, la adecuación de los objetivos, evaluación del resultado (170.1).evaluación del resultado (170.1).

– Auditoria de Economía, eficacia, Auditoria de Economía, eficacia, eficienciaeficiencia - valoración del nivel de - valoración del nivel de e.e.e. alcanzado en la utilización de e.e.e. alcanzado en la utilización de los recursos públicos (170.3).los recursos públicos (170.3).

EP

GJ.M

. Ádán

3535

• R.D. 1552/2004, de 25 de JunioR.D. 1552/2004, de 25 de Junio

“ “El análisis yEl análisis y evaluación de las evaluación de las políticas de gastopolíticas de gasto, , que comprenden de que comprenden de forma expresa la consideración de sus forma expresa la consideración de sus aspectosaspectos sectoriales, territoriales y de sectoriales, territoriales y de su financiación,su financiación, así como el de la así como el de la propuesta de colaboración con otras propuesta de colaboración con otras AA.PP. en materia de financiación de AA.PP. en materia de financiación de inversiones u otra política de gasto inversiones u otra política de gasto ≡ ≡

Dirección General de Dirección General de PresupuestosPresupuestos

EP

GJ.M

. Ádán

3636

• La estructura de la DGP, al incluir la La estructura de la DGP, al incluir la EVALUACION en una Subdirección EVALUACION en una Subdirección General NO ES LA ADECUADAGeneral NO ES LA ADECUADA

• Si lo comparamos con la logística Si lo comparamos con la logística potencial de la recién creada Agencia potencial de la recién creada Agencia de Evaluación, se comprende mejor.de Evaluación, se comprende mejor.

• La DGP sólo evalúa para la Comisión La DGP sólo evalúa para la Comisión de Análisis de Programas.de Análisis de Programas.

EP

GJ.M

. Ádán

3737

• DGPDGP

IGAEIGAE

EP

GJ.M

. Ádán

3838

• Las políticas de gasto de la Orden EHA/Las políticas de gasto de la Orden EHA/1021/2007, de 13 de Abril:1021/2007, de 13 de Abril:

Justicia Justicia (7 programas)(7 programas)Defensa Defensa (7 programas)(7 programas)Seguridad ciudadana Seguridad ciudadana (11 programas)(11 programas)Política Exterior Política Exterior (5 programas)(5 programas)Pensiones Pensiones (7 programas)(7 programas)Otras prestaciones económicas Otras prestaciones económicas (3 programas)(3 programas)Servicios sociales y Promoción Social Servicios sociales y Promoción Social (12 (12 programas)programas)Fomento del empleo Fomento del empleo (2 programas)(2 programas)Desempleo Desempleo (1 programas)(1 programas)Acceso a la vivienda y fomento de la edificación Acceso a la vivienda y fomento de la edificación (4 programas)(4 programas)Gestión y administración de la Seguridad Social Gestión y administración de la Seguridad Social (2 programas)(2 programas)Sanidad Sanidad (13 programas)(13 programas)

EP

GJ.M

. Ádán

3939

Educación Educación (16 programas)(16 programas)Cultura Cultura (14 programas)(14 programas)Agricultura, Pesca y Alimentación Agricultura, Pesca y Alimentación (10 (10 programas)programas)Industria y Energía Industria y Energía (10 programas)(10 programas)Comercio, Turismo y Pymes Comercio, Turismo y Pymes (6 programas)(6 programas)Subvenciones al transporte Subvenciones al transporte (4 programas)(4 programas)Infraestructura Infraestructura (16 programas)(16 programas)Investigación, desarrollo e innovación Investigación, desarrollo e innovación (17 (17 programas)programas)Otras actuaciones de carácter económico Otras actuaciones de carácter económico (12 programas)(12 programas)Alta Dirección Alta Dirección (11 programas)(11 programas)Servicios de carácter general Servicios de carácter general (20 (20 programas)programas)Administración Financiera y Tributaria Administración Financiera y Tributaria (7 (7 programas)programas)Transferencias a otras Administraciones Transferencias a otras Administraciones Públicas Públicas (9 programas)(9 programas)Deuda Pública Deuda Pública (2 programas)(2 programas)

EP

GJ.M

. Ádán

4040

• Evaluación y Auditoria, siendo Evaluación y Auditoria, siendo técnicas distintas ¿sólo tiene soporte técnicas distintas ¿sólo tiene soporte jurídico la Auditoria en la LGP?jurídico la Auditoria en la LGP?

• Única posibilidad ante la inexistencia Única posibilidad ante la inexistencia de soporte adecuado para el de soporte adecuado para el desarrollo de la evaluacióndesarrollo de la evaluación

EP

GJ.M

. Ádán

4141

LEY DE AGENCIAS LEY DE AGENCIAS (18 de Julio (18 de Julio de 2006)de 2006)

• Surge al no ser suficiente la Surge al no ser suficiente la respuesta dada de intentar solucionar respuesta dada de intentar solucionar problemas de gestión con problemas de gestión con herramientas exclusivamente herramientas exclusivamente presupuestariaspresupuestarias..

EP

GJ.M

. Ádán

4242

• MEH MEH ≡ Políticas de Gasto≡ Políticas de Gasto Programas de Gasto Programas de Gasto

• AgenciaAgencia ≡ Políticas Públicas ≡ Políticas Públicas dede EvaluaciónEvaluación

• El resto ≡ Agencia de El resto ≡ Agencia de EvaluaciónEvaluación

EP

GJ.M

. Ádán

4343

ESTATUTO DE LA AGENCIA DE ESTATUTO DE LA AGENCIA DE EVALUACIÓNEVALUACIÓN

≡ ≡ desarrolla su actividad sin perjuicio de las desarrolla su actividad sin perjuicio de las competencias de otros órganoscompetencias de otros órganos

≡ ≡ promover la cultura de la evaluaciónpromover la cultura de la evaluación realizar trabajo de evaluación y análisis de realizar trabajo de evaluación y análisis de

programasprogramas proponer indicadores, ----proponer indicadores, ----≡ ≡ principios de independencia, transparencia, principios de independencia, transparencia,

cooperación interadministrativa, calidadcooperación interadministrativa, calidad

Hasta ahora carece del sustento normativo Hasta ahora carece del sustento normativo completo para realizar las evaluacionescompleto para realizar las evaluaciones

≡ ≡ Grandes competencias sin herramientas Grandes competencias sin herramientas adecuadasadecuadas

EP

GJ.M

. Ádán

4444

CONCLUSIONES PARCIALESCONCLUSIONES PARCIALES1.1. Dentro del ámbito del MEH, solo se pueden Dentro del ámbito del MEH, solo se pueden

realizar evaluaciones de políticas de gasto.realizar evaluaciones de políticas de gasto.2.2. Quien tiene la competencia directa es la DGP que Quien tiene la competencia directa es la DGP que

carece de los medios adecuados.carece de los medios adecuados.3.3. La evaluación como competencia de la IGAE se La evaluación como competencia de la IGAE se

ciñe más a la “actividad y procedimiento” y se ciñe más a la “actividad y procedimiento” y se ahorma dentro de las modalidades del control ahorma dentro de las modalidades del control interno. No obstante es el órgano que dispone de interno. No obstante es el órgano que dispone de un mayor aparato logístico para la realización de un mayor aparato logístico para la realización de la Evaluación.la Evaluación.

4.4. Es necesaria una acomodación normativa que Es necesaria una acomodación normativa que permita a la IGAE tener las competencias permita a la IGAE tener las competencias adecuadas para la Evaluación de las políticas de adecuadas para la Evaluación de las políticas de gasto. De otro modo se puede interpretar el art. gasto. De otro modo se puede interpretar el art. 72 de la LGP en el sentido lato y conceder a la 72 de la LGP en el sentido lato y conceder a la IGAE esta competencia de evaluar, pero en mi IGAE esta competencia de evaluar, pero en mi opinión es necesaria una base más clara y sólida.opinión es necesaria una base más clara y sólida.

5.5. La Agencia de Evaluación tiene unas La Agencia de Evaluación tiene unas competencias amplias y no habrá solape con la competencias amplias y no habrá solape con la evaluación ejecutada por el MEH siempre que se evaluación ejecutada por el MEH siempre que se centre en políticas públicas distintas a las de centre en políticas públicas distintas a las de gasto.gasto.

EP

GJ.M

. Ádán

4545

III - III - EXPERIENCIA EXPERIENCIA

INTERNACIONALINTERNACIONAL

-- EscasaEscasa– Países u organizaciones: UEPaíses u organizaciones: UE

EP

GJ.M

. Ádán

4646

LA ESCASA EXPERIENCIA EN LA ESCASA EXPERIENCIA EN OTROS PAISESOTROS PAISES• Australia (Australian National Audit Australia (Australian National Audit

Office, ANAO) Office, ANAO) • Finlandia (Vaitionouden Finlandia (Vaitionouden

Tarkastusvirasto, Oficina del Auditor del Tarkastusvirasto, Oficina del Auditor del Estado)Estado)

• Irlanda (Officce of the Comptroller and Irlanda (Officce of the Comptroller and Auditor General)Auditor General)

• Noruega (Rikssevisjonen, Auditoria del Noruega (Rikssevisjonen, Auditoria del Estado)Estado)

• Países Bajos (Tribunal de Auditores)Países Bajos (Tribunal de Auditores)

EP

GJ.M

. Ádán

4747

La Evaluación en la Union EuropeaLa Evaluación en la Union EuropeaCuestionario Inicial (2003)Cuestionario Inicial (2003)

1ª. ¿En qué parte del sector público se lleva a cabo la 1ª. ¿En qué parte del sector público se lleva a cabo la evaluación?evaluación?

2ª. ¿Qué coordinación de las actividades de 2ª. ¿Qué coordinación de las actividades de evaluación tiene lugar a lo largo de la evaluación tiene lugar a lo largo de la administración y quien es el responsable?.administración y quien es el responsable?.

3ª. ¿Cuál es el foco de la evaluación en su país?3ª. ¿Cuál es el foco de la evaluación en su país?4ª. ¿Cuántos tipos de evaluación se llevan a cabo?4ª. ¿Cuántos tipos de evaluación se llevan a cabo?5ª. ¿Por qué se llevan a cabo las evaluaciones?5ª. ¿Por qué se llevan a cabo las evaluaciones?6ª. ¿Los afectados en la evaluación están 6ª. ¿Los afectados en la evaluación están

involucrados o son consultados y en qué etapa?.involucrados o son consultados y en qué etapa?.7ª. ¿Cómo se utilizan los resultados de la evaluación?.7ª. ¿Cómo se utilizan los resultados de la evaluación?.8ª. ¿Qué seguimiento se hace de las evaluaciones?.8ª. ¿Qué seguimiento se hace de las evaluaciones?.9ª. ¿Qué medidas se llevan a cabo para estructurar la 9ª. ¿Qué medidas se llevan a cabo para estructurar la

capacidad de evaluar?.capacidad de evaluar?.10ª. ¿Hasta qué punto las evaluaciones son 10ª. ¿Hasta qué punto las evaluaciones son

planeadas anticipadamente?planeadas anticipadamente?

EP

GJ.M

. Ádán

4848

1º. ¿En que parte …?1º. ¿En que parte …?- En los Ministerios - En los Ministerios → → modelo descentralizadomodelo descentralizado

- Si se añaden las autoridades regionales – - Si se añaden las autoridades regionales – nono

UE = Cada D.G. es responsable de evaluar su UE = Cada D.G. es responsable de evaluar su actividad.actividad.

2º. ¿Qué coordinación …?2º. ¿Qué coordinación …?- M.H. principalmente.- M.H. principalmente.

UE cada D.G. La D.G. de Presupuesto UE cada D.G. La D.G. de Presupuesto coordina coordina

3º. ¿Cuál es el foco …?3º. ¿Cuál es el foco …?- Diversidad - Diversidad →→ economía economía

→→ eficiencia eficiencia ≡≡ U.E. U.E. → → eficaciaeficacia

La Evaluación en la UELa Evaluación en la UE

EP

GJ.M

. Ádán

4949

4º. ¿Cuántos tipos …?4º. ¿Cuántos tipos …?- No fué posible una respuesta común - No fué posible una respuesta común válida válida- U.E. contestó numéricamente- U.E. contestó numéricamente

5º. ¿Por qué se llevan a cabo?5º. ¿Por qué se llevan a cabo?- Requerimiento presupuestario- Requerimiento presupuestario- Solo Estonia contestó “… como - Solo Estonia contestó “… como HERRAMIENTA del gestor. HERRAMIENTA del gestor.U.E.U.E.→ → R.Financiero (Art. 27,28 y 33) R.Financiero (Art. 27,28 y 33)Gestión + Presupuestos.Gestión + Presupuestos.En la Programación y Planificación En la Programación y Planificación

estratégica los resultados del ciclo de estratégica los resultados del ciclo de evaluación, impacto esencial para análisis evaluación, impacto esencial para análisis de objetivos políticos y asignación de de objetivos políticos y asignación de recursos.recursos.


EP

GJ.M

. Ádán

5050

6º. ¿Los afectados en la evaluación 6º. ¿Los afectados en la evaluación están involucrados …?están involucrados …?≡ ≡ Fundamentalmente al final en la Fundamentalmente al final en la comprobación de resultados.comprobación de resultados.

7º. ¿Cómo se utilizan los resultados …?7º. ¿Cómo se utilizan los resultados …?≡ ≡ Dentro del M.H.Dentro del M.H.UE UE ≡≡ Establecimiento de prioridades Establecimiento de prioridades políticaspolíticas

8º. ¿Qué seguimiento …?8º. ¿Qué seguimiento …?≡ ≡ para ser públicas y disponiblespara ser públicas y disponibles

UE UE ≡≡ públicas públicas


EP

GJ.M

. Ádán

5151

9º. ¿Qué medidas …?9º. ¿Qué medidas …?- Respuestas diversas (recursos - Respuestas diversas (recursos financieros, humanos)financieros, humanos)U.E. U.E. ≡≡ Responsabilidades definidas, Responsabilidades definidas, procedimiento de mejora.procedimiento de mejora.

10º. ¿Hasta que punto se planifica 10º. ¿Hasta que punto se planifica anticipadamente?anticipadamente?- En el M.H. la mayoría- En el M.H. la mayoríaU.E. U.E. ≡≡ Programa Multianual de Programa Multianual de Evaluación establecido a finales de Evaluación establecido a finales de 20032003

Programa anual de EvaluacionesPrograma anual de Evaluaciones


EP

GJ.M

. Ádán

5252

La Evaluación en la UE La Evaluación en la UE

Conclusiones Parciales Conclusiones Parciales (test)(test)

1ª. El modelo más común en los Estados Miembros 1ª. El modelo más común en los Estados Miembros concerniente a las actividades de evaluación es una concerniente a las actividades de evaluación es una combinación de las llevadas a cabo en el Ministerio combinación de las llevadas a cabo en el Ministerio de Hacienda y en otros Ministerios.de Hacienda y en otros Ministerios.

2ª. La coordinación de las actividades de evaluación 2ª. La coordinación de las actividades de evaluación tiene lugar en las mayoría de los Estados Miembros tiene lugar en las mayoría de los Estados Miembros con un énfasis singular del Ministerio de Hacienda.con un énfasis singular del Ministerio de Hacienda.

3ª. La respuesta al foco de la evaluación no permite 3ª. La respuesta al foco de la evaluación no permite alcanzar ninguna conclusión.alcanzar ninguna conclusión.

4ª. El resultado del cuestionario no permite un cuadro 4ª. El resultado del cuestionario no permite un cuadro completo de los diferentes tipos de evaluación completo de los diferentes tipos de evaluación llevados a cabo por los Estados Miembros.llevados a cabo por los Estados Miembros.

5ª. Los 17 Estados Miembros respondieron que llevan 5ª. Los 17 Estados Miembros respondieron que llevan a cabo evaluaciones por requerimientos ligados a a cabo evaluaciones por requerimientos ligados a las actividades financiadas por la UE y era las actividades financiadas por la UE y era solamente la única razón por la que la llevaban a solamente la única razón por la que la llevaban a cabo 4 Estados Miembros.cabo 4 Estados Miembros.

EP

GJ.M

. Ádán

5353

La Evaluación en la UELa Evaluación en la UELa Evaluación de Políticas en la La Evaluación de Políticas en la UEUE

• Evaluación “Judgement of interventions Evaluación “Judgement of interventions according to their results, impacts and according to their results, impacts and needs they aim to satisfy”needs they aim to satisfy”

• ““Juicio de las intervenciones en Juicio de las intervenciones en relación con sus resultados, impactos y relación con sus resultados, impactos y las necesidades que dichas las necesidades que dichas intervenciones quieren satisfacer”intervenciones quieren satisfacer”

• ≡ ≡ proceso que culmina con un juicio proceso que culmina con un juicio sobre una acciónsobre una acción

• Foco: necesidad, resultados, impactosFoco: necesidad, resultados, impactosEP

GJ.M

. Ádán

5454

Principales razones para EVALUARPrincipales razones para EVALUAR

• Contribuir al diseño de las Contribuir al diseño de las intervenciones, suministrando ideas intervenciones, suministrando ideas para establecer para establecer prioridades políticasprioridades políticas..

• Ayudar en la asignación eficiente de Ayudar en la asignación eficiente de los recursos.los recursos.

• Mejorar la calidad de las Mejorar la calidad de las intervenciones.intervenciones.

• Informar sobre los logros de las Informar sobre los logros de las intervenciones.intervenciones.

La Evaluación en la UELa Evaluación en la UELa Evaluación de Políticas en la La Evaluación de Políticas en la UEUE

EP

GJ.M

. Ádán

5555

La Evaluación en la UELa Evaluación en la UE EVALUACION VS AUDITORIAEVALUACION VS AUDITORIALo que controlamos

En lo que influimos directamente

En lo que influimos indirectamente

Inputs Outputs ResultadoImpactos intermedios

Impactos globales

Auditoría

Supervisión

Evaluación

aplicación

EP

GJ.M

. Ádán

5656

Evaluación de Políticas en la Evaluación de Políticas en la UEUEDiferencias entre Diferencias entre EVALUACIÓN Y AUDITORIAEVALUACIÓN Y AUDITORIA• AUDITORIAAUDITORIA

• Engloba el examen y Engloba el examen y consejo sobre la consejo sobre la adecuación y efectividad adecuación y efectividad de los sistemas de control de los sistemas de control interno de las Direcciones interno de las Direcciones Generales.Generales.

• La auditoria por resultados La auditoria por resultados tiende a centrarse en la tiende a centrarse en la ejecución de una actividad ejecución de una actividad y sus efectos.y sus efectos.

• Auditoria Auditoria ≡ Examina ≡ Examina como se conceden las como se conceden las becasbecas

• EVALUACIONEVALUACION

• Valoración de resultados con Valoración de resultados con respecto a los efectos de una respecto a los efectos de una intervenciónintervención

• Como resultados e impactos Como resultados e impactos están condicionados por los están condicionados por los mecanismos de aplicaciónmecanismos de aplicación

• Evaluación Evaluación ≡ Examina el ≡ Examina el impacto y resultados de la impacto y resultados de la concesión de becasconcesión de becas

EP

GJ.M

. Ádán

5757

La Evaluación de Politicas La Evaluación de Politicas en la UEen la UE• Diferencia entre GASTO y NO GASTO, cada Diferencia entre GASTO y NO GASTO, cada

vez más irrelevante.vez más irrelevante.• Política: estrategia global dirigida por Política: estrategia global dirigida por

diferentes diferentes instrumentos políticosinstrumentos políticos (conjunto (conjunto de técnicas mediante las cuales las de técnicas mediante las cuales las autoridades públicas intentan asegurar autoridades públicas intentan asegurar apoyo y efectos o prevenir cambios apoyo y efectos o prevenir cambios sociales).sociales).

• Puede tener diferentes niveles de Puede tener diferentes niveles de complejidad complejidad ≡ desde una estrategia global ≡ desde una estrategia global de la Comisión o meta sobre un área de la Comisión o meta sobre un área política hasta una actividad presupuestaria.política hasta una actividad presupuestaria.

• Normalmente abarcará una serie de Normalmente abarcará una serie de instrumentos (legislación, recursos, planes instrumentos (legislación, recursos, planes de de acción)acción)

EP

GJ.M

. Ádán

5858

La Evaluación de Políticas en la La Evaluación de Políticas en la UEUE Aspectos de los Efectos de Aspectos de los Efectos de las Políticaslas Políticas

• Como se aplican los instrumentos Como se aplican los instrumentos políticos.políticos.

• A quien afectaA quien afecta

• Como la intervención se piensa que Como la intervención se piensa que debe comportarse y como se debe comportarse y como se comportacomporta

• Efectos de la intervención (por qué Efectos de la intervención (por qué produce ciertos efectos y no otros)produce ciertos efectos y no otros)

EP

GJ.M

. Ádán

5959

La Evaluación de las Políticas La Evaluación de las Políticas en la UEen la UE• 1 área política1 área política• 4 Actividades 4 Actividades ≡ A≡ A con 2 programa de con 2 programa de

gastogasto ≡ ≡ A con 2 A con 2 medidas medidas

sin gastosin gasto ≡ ≡ 2A 2A mezclamezcla

Ej.: U.E. Ej.: U.E. ≡ medida regulatoria (actividad b-1)≡ medida regulatoria (actividad b-1) objetivo de la directiva ≡ mejorar la objetivo de la directiva ≡ mejorar la

calidad del aire (impacto) a través calidad del aire (impacto) a través de la de la reducción de las actividades de reducción de las actividades de polución polución (resultados). (resultados).

Output de intervención Ej.: multas Output de intervención Ej.: multas por incumplimiento, impuestos, cargas, por incumplimiento, impuestos, cargas, limites cuantitativos a la polución …limites cuantitativos a la polución …

6060

POLITICA APOLITICA A

Actividad aActividad a Output 1Output 1 Resultado 1Resultado 1

InversionesInversiones

(Subvenciones)(Subvenciones) Impacto 1Impacto 1

ConcienciaciónConcienciación Output 2Output 2 Resultado 2Resultado 2

(contratista externo)(contratista externo)

Actividad bActividad b Output 3Output 3

1. Medidas Regulatorias1. Medidas Regulatorias Output 4Output 4

(Directiva del Consejo)(Directiva del Consejo) Impacto 2Impacto 2

2. Proyecto Piloto2. Proyecto Piloto Output5Output5 Resultado 3Resultado 3 Impacto totalImpacto total

(Contratista Externo)(Contratista Externo)

Actividad cActividad c

Regulación transitoriaRegulación transitoria Output 6Output 6

(Acuerdos sectoriales)(Acuerdos sectoriales) Resultado 4Resultado 4 Impacto 3Impacto 3

ApoyoApoyo Output 7Output 7

(Subvenciones)(Subvenciones)

Estudio de viabilidadEstudio de viabilidad

(Contratista externo)(Contratista externo) LeyendaLeyenda

Actividad dActividad d Resultado 5Resultado 5 GastoGasto

ConvenioConvenio Output 8Output 8 No gastoNo gasto

Cooperación internacionalCooperación internacional

Factores exógenos institucionales, geográficos, medio-ambiente, socio-económicos que tienen lugar a nivel de resultados y de impacto.

Contexto Institucional

6161

IVIV - - LA EVALUACIÓN DE LAS LA EVALUACIÓN DE LAS POLÍTICAS DE GASTO Y POLÍTICAS DE GASTO Y

LA LA AUDITORIAAUDITORIA• Política de Gasto: I+d+i (Investigación, desarrollo Política de Gasto: I+d+i (Investigación, desarrollo

e innovación)e innovación)- Programas de gasto: 17- Programas de gasto: 17- Órganos gestores: 38- Órganos gestores: 38- Intervenciones Delegadas: 10- Intervenciones Delegadas: 10- Divisiones ONA:- Divisiones ONA: 1 1

• Programas:Programas:- 462M Investigación y estudios sociológicos y - 462M Investigación y estudios sociológicos y constitucionalesconstitucionales- 462N Investigación y estudios estadísticos y - 462N Investigación y estudios estadísticos y económicoseconómicos- 463A Investigación científica- 463A Investigación científica- 463B Fomento y coordinación de la investigación - 463B Fomento y coordinación de la investigación científica y técnicacientífica y técnica

EP

GJ.M

. Ádán

6262

La Evaluación de las Políticas La Evaluación de las Políticas de de Gasto y la Gasto y la AuditoriaAuditoria

- 464A Fomento y coordinación de la investigación - 464A Fomento y coordinación de la investigación científica y técnicacientífica y técnica- 465A Investigación sanitaria- 465A Investigación sanitaria- 466A Investigación y evaluación educativa- 466A Investigación y evaluación educativa- 467A Astronomía y astrofísica- 467A Astronomía y astrofísica- 467B Investigación y experimentación de Obras - 467B Investigación y experimentación de Obras Públicas y TransportePúblicas y Transporte

- 467C Investigación y desarrollo tecnológico-- 467C Investigación y desarrollo tecnológico-industrialindustrial- 467D Investigación y experimentación agraria- 467D Investigación y experimentación agraria- 467E Investigación oceanográfica y pesquera- 467E Investigación oceanográfica y pesquera- 467F Investigación geológico-minera y - 467F Investigación geológico-minera y medioambientalmedioambiental- 467G Investigación y desarrollo de la Sociedad - 467G Investigación y desarrollo de la Sociedad de la Informaciónde la Información- 467H Investigación energética, mdioambiental y - 467H Investigación energética, mdioambiental y tecnológicatecnológica- 467I Innovación tecnológica de las - 467I Innovación tecnológica de las telecomunicacionestelecomunicaciones

6363

Política de gasto: Investigación, Política de gasto: Investigación, desarrollo e innovacióndesarrollo e innovación

PROGRAMASPROGRAMAS ORGANO GESTORORGANO GESTOR Intervención Intervención DelegadaDelegada

462M Investigación y 462M Investigación y estudios estudios sociológicos y sociológicos y constitucionalesconstitucionales

CENTRO DE CENTRO DE ESTUDIOS POLITICOS ESTUDIOS POLITICOS Y Y CONSTITUCIONALESCONSTITUCIONALES

Intervención Intervención Delegada Ministerio Delegada Ministerio de la Presidenciade la Presidencia

CENRO DE CENRO DE INVESTIGACIONES INVESTIGACIONES SOCIOLÓGICASSOCIOLÓGICAS

Intervención Intervención Delegada Ministerio Delegada Ministerio de la Presidencia de la Presidencia

462N Investigación y 462N Investigación y estudios estadísticos y estudios estadísticos y económicoseconómicos

INSTITUTO DE INSTITUTO DE ESTUDIOS FISCALESESTUDIOS FISCALES

Intervención Intervención Delegada Ministerio Delegada Ministerio de Economía y de Economía y HaciendaHacienda

463A Investigación 463A Investigación científicacientífica

Mº. EDUCACION Y Mº. EDUCACION Y CIENCIACIENCIA

Intervención Intervención Delegada Ministerio Delegada Ministerio Educación y CienciaEducación y Ciencia

CONSEJO SUPERIOR CONSEJO SUPERIOR DE INVESTIGACIONES DE INVESTIGACIONES CIENTÍFICASCIENTÍFICAS

Intervención Intervención Delegada en el Delegada en el Consejo Superior de Consejo Superior de Investigaciones Investigaciones CientíficasCientíficas

EP

GJ.M

. Ádán

6464

POLITICA DE GASTO: Investigación, Desarrollo e InnovaciónPOLITICA DE GASTO: Investigación, Desarrollo e Innovación

PROGRAMASPROGRAMAS

Objetivo Objetivo 11

Resultado Resultado 11

462M462M - Investigación - Investigación y estudios y estudios sociológicos y sociológicos y constitucionalesconstitucionales

Impacto Impacto 11



462N Investigación y 462N Investigación y estudios estadísticos estudios estadísticos y económicosy económicos



Impacto Impacto 22



Impacto Impacto totaltotal

463A Investigación 463A Investigación científicacientífica

Impacto Impacto 33



463B Fomento y 463B Fomento y coordinación de la coordinación de la investigación investigación científica y técnicacientífica y técnica



Impacto Impacto 44

464A Investigación y 464A Investigación y estudio de las estudio de las Fuerzas ArmadasFuerzas Armadas





Impacto Impacto 55



6565

CONCLUSIONESCONCLUSIONES

1.1. Evaluación y Auditoria son técnicas Evaluación y Auditoria son técnicas distintasdistintas

2.2. Es necesario un ajuste normativo para Es necesario un ajuste normativo para permitir al control interno la realización permitir al control interno la realización de las evaluaciones de las políticas de de las evaluaciones de las políticas de gasto.gasto.

3.3. La técnica de la evaluación a partir de La técnica de la evaluación a partir de las auditorias es muy compleja pero se las auditorias es muy compleja pero se considera las más eficaz.considera las más eficaz.

4.4. Las auditorias de programas y las Las auditorias de programas y las operativas, son las herramientas más operativas, son las herramientas más eficaces para lograr evaluaciones eficaces para lograr evaluaciones basadas en auditorias.basadas en auditorias.

5.5. No existe experiencia internacional No existe experiencia internacional suficiente en evaluaciones realizadas suficiente en evaluaciones realizadas por órganos de controlpor órganos de control..

EP

GJ.M

. Ádán

la evaluacion de las politicas de gasto instituto de estudios fiscales evaluaci ó n prospectiva de...

Documents