Monitoreo y Evaluacin para la

Gestin por Resultados

I Curso Nacional Efectividad en el Desarrollo
Angel Saz-Carranza
El Salvador, Marzo 2006

La evaluacin de los resultados

de la gestin pblica

No es un fin en s mismo
No es una herramienta neutral

ERGP es una herramienta de naturaleza

mixta: tcnica, gerencial y poltica

La evaluacin de los resultados

de la gestin pblica

Dimensin poltica:

Dimensin tcnica:

Uso estratgico de la informacin

Metodologas para la medicin

Dimensin gerencial:

Una cultura orientada a resultados

Marco conceptual

Para qu evaluar?

Qu evaluar y a qu nivel hacerlo?

las mltiples funciones de la evaluacin (visin

estratgica para generar valor pblico)
el alcance de la evaluacin

Qu hacer con la informacin?

la relacin entre el uso de la informacin y el

mejoramiento de la gestin

Para qu evaluar?

Funciones de la E&M de los

resultados de la Gestin

Aprendizaje

Asignacin

Se lograron los resultados esperados? Cmo

alcanzar mayores logros ? Cmo mejorar?
Se debe re-considerar la asignacin actual?
(ofrecer mas o menos recursos?)
Se justifica mantener o eliminar la unidad
evaluada o sus partes?

Legitimacin

Cumple el gobierno sus promesas? Es efectivo? Es

transparente?

Para qu evaluar los

resultados de la gestin?
Pas

Colombia
SINERGIA

Costa Rica
SINE

Uruguay
SEV

Propsito declarado
Mejoramiento de la gestin
organizacional

Asignacin presupuestaria
(racionalizacin del gasto)

Mejoramiento de polticas
sectoriales y programas

Planificacin estratgica y
global de las polticas

Responsabilizacin y
rendimiento de cuentas

Chile
SCPG
SCG
X

X
X
X

Dos Orientaciones
Modelo
Plan

Modelo
Presupuesto

Enfasis en la responsabilizacin
poltica
Funcin: Aprendiza/legitimacin

Enfasis en la responsabilizacin
gerencial
Funcion:
Aprendizaje/Asignacin

Organizado en funcin del Plan

Nacional de Desarrollo

Organizado en funcin del ciclo

presupuestario

Colombia: DNP - Departamento

Nacional de Planeacin
Costa Rica: Mideplan Ministerio de Planificacin

Uruguay: OPP - Oficina de

Planeamiento y Presupuesto
Chile: DIPRES - Division de
Presupuesto, Ministerio de
Finanzas

Evaluacin de los resultados

de la gestin pblica para
Objetivos declarados

Modelo
Plan

Modelo
Presupuesto

Modernizar:
El mejoramiento de
la gestin

Relaciona el
desempeo con el
desarrollo de la
poltica pblica

Relaciona el
desempeo con la
asignacin del
presupuesto

Democratizar:
Responsabilizacin
y transparencia

Principal criterio de
responsabilizacin:

Principal criterio de
responsabilizacin:

poltico

gerencial

Debate

La rendicin de cuentas con un nfasis

ms gerencial que poltico, y con
nfasis en los resultados en vez de
procesos puede debilitar la democracia
Una orientacin a los resultados de la
gestin puede fortalecer la democracia

Ospina, Zaltsman y Cunill

El sistema de evaluacin de los

resultados de la gestin pblica debe
incentivar el inters por

Rendicin de cuentas:

Enfoque poltico + gerencial

Ospina y Cunill

Los sistemas de evaluacin deben apuntar a

los dos objetivos a la vez (modernizacin y
democratizacin son compatibles)
y no descuidar ninguna de las tres
funciones (aprendizaje, asignacin y
legitimidad)
De ser as, es posible poner la eficiencia y la
efectividad al servicio de la democracia

Repasando el segundo punto

de partida

Considerando las funciones y objetivos

de la Evaluacin y el Monitoreo de los
resultados como herramientas para la
gestin por resultados:

Qu papel cumplen la E&M en una

agenda para desarrollar la efectividad
en el desarrollo?

Qu evaluar y a qu nivel
hacerlo?
El alcance de la evaluacin y el
monitoreo de los resultados de la
gestin

La plataforma

Planeacin estratgica

a nivel gubernamental (Chile, Colombia) o

a nivel organizacional (Uruguay, Costa Rica)

Misin, objetivos estratgicos, productos y

clientes con indicadores respectivos (todos)
Contextualizacin: (Chile, Colombia, Costa
Rica)

Dentro del sector correspondiente

Dentro de la poltica de gobierno

Qu enfocar?

Los logros, la calidad (monitoreo)

Los productos, los impactos, el costobeneficio (evaluacin)

y a qu nivel hacerlo?:
tres niveles de anlisis

Macro (efectividad en el desarrollo)

Meso (efectividad en la Administracin Pblica)

Poltica internacional, regional

Polticas pblicas nacionales (plan de desarrollo; asignacin
del gasto)
Sectores (salud, educacin, etc)
Organizaciones y agencias pblicas
Programas y proyectos

Micro (efectividad en la prctica gerencial)

Procesos intra-organizacionales
Desempeo del personal
Control interno

y a qu nivel hacerlo?
Niveles de desempeo
Nivel
Macro

Meso
Micro

COLOMBIA CSTA RICA URUGUAY

SINERGIA
SINE
SEV
(mon&eva) (monitoreo) (monitoreo)

CHILE
SSPG SCG
(mon&eva)

PND
Sectores

PND
Sectores

Programas
[agencias]

Programas
Agencias

Agencias
Unidad de
presupuesto

Programas
Agencias

Casos:
Chile:
dos sistemas, muchos
componentes

SSPG (SEGPRES)
Monitoreo de metas y
objetivos
SCG (DIPRES)
Monitoreo y evaluaciones

Colombia: un
sistema, tres
componentes

Monitoreo de objetivos y
resultados
Evaluaciones
estratgicas
Diseminacin y
rendimiento de cuentas

Uruguay y
Costa Rica:
un sistema
(de
monitoreo)
Medicin,
monitoreo,
rendicin de
cuentas

Sistemas integrados?

Integracin vertical
Integracin horizontal
Integracin transversal

Se
ct
or
es

Territorio

Cadena de produccion

Integracin vertical

Informacin y decisiones en cada nivel

referenciadas a aquellas en los
niveles superiores e inferiores
Ejemplo: Sector Salud en el Plan
Nacional de Desarrollo (macro) --)
Ministerio de Salud (meso) --) Centros
hospitalarios (micro)

Integracin horizontal

Actividades, informacin y decisiones en cada

nivel coordinadas con aquellas de otras
unidades en el mismo nivel
Ejemplo macro: Sector Salud coordinado
con sector educacin
Ejemplo meso: Oficina de evaluacin de la
organizacin coordinada con la gestin en
otras unidades de la organizacin

Integracin transversal
El sistema de evaluacin de resultados
referenciado y coordinado con otros
sistemas de la administracin pblica

Sistemas
Sistemas
Sistemas
Sistemas

de
de
de
de

planeacin
presupuestacin
personal y servicio civil
procuracin (procurement)

Modelo Plan: Relacin con el

Presupuesto

Desincronizacin entre planeacin,

presupuestacin y evaluacin
Incertidumbre presupuestal

Compromisos basados en presupuesto de

inversin (Colombia)

Ilustracin del problema

Elaboracin de
Planes
Indicativos
Agosto
Ao 0

Enero
Ao 1

Posesin

Aprobacin
Presupuesto
Vigencia 1

X
Elaboracin
Plan Nacional de
Desarrollo

Compromisos
de Gestin
Enero
Ao 2

Aprobacin
Presupuesto
Vigencia 2

Diagnstico
Se avanza pero hay mucho camino por
recorrer en trminos de la articulacin
de los sistemas de M&E con el resto de
la administracin pblica

Integracin?

Modelo Plan: Vnculos con el sistema

presupuestario siguen siendo problemticos pero se
esta avanzando (integracin trasversal)
Modelo Presupuesto: Poca articulacin con el
proceso de las polticas pblicas (integracin
vertical)
Modelos Presupuesto y Plan:

Poca articulacin con personal, servicio civil, etc (integracin

transversal)
Poca articulacin entre evaluacin y gestin (integracin
transversal)

Una pausa

Implicaciones de la discusin para

modificar o complementar las ideas
presentadas por los dos grupos?

Qu hacer con la
informacin?

Qu hacer con la
informacin?

Preguntas claves sobre la informacin

generada:

Es confiable?
Es accesible?
Se consume?
Produce consecuencias?

Es confiable la informacin?
Credibilidad de la informacin depende de:
Quin decide los indicadores?
Quin recoge los datos?
Rigor metodolgico, problemas de
medicin

Qu hay detrs de un indicador?

Ficha para la construccin

de indicadores

Informacin General

Caracterstica del Indicador

Clasificacin: Impacto, Eficiencia, Eficacia, Calidad

Frecuencia:
Unidad de medida:

Clculo y especificaciones de datos

Nmero /nombre indicador:

Responsable:
Lineamiento estratgico:
Objetivo Estratgico:
Meta:
Descripcin del indicador:

Frmula:
Fuente de datos y forma de obtencin:

Informacin sobre la actividad

Lnea de base (ltimo dato relevado):

Desvos admitidos:
Comentarios:

Es accesible la informacin?

Informes amigables

Publicidad

Se consume la informacin?
Destinatarios/usuarios potenciales
Poder Ejecutivo

Poder Legislativo

Ministerio de Planificacin
Ministerio de Hacienda
Ministerios sectoriales (ministros)
Jerarcas y funcionarios de varios niveles de gestin
Presidente de la Republica
Organismos de auditoria y control
Oficina Nacional de Presupuesto

Parlamento

Sociedad civil

Organizaciones
Ciudadanos

Problemas

Uso limitado de la informacin para la

toma de decisiones

Informacin til a nivel macro no es til a

nivel meso (muy agregada)
Informacin llega demasiado tarde para
ser til
Informacin no es confiable para ser til
No hay incentivos formales para usar la
informacin

Incentivos

Palos

Zanahorias

Generar competencia entre las entidades y

hacer pblicos los resultados
Premios a quienes demuestren mejoras

Sermones

Mensajes a travs de seminarios,

conferencias, afiches, etc

Produce consecuencias la
informacin?
Una vez que se conoce y se usa la
informacin, hay consecuencias reales?
Evaluacin ---) cambio?
Tres posibles funciones de la evaluacin:
Aprendizaje
Asignacin
Legitimacin

Desafos

Uso limitado de la informacin

Los resultados son parte de la conversacin

la informacin todava no afecta el aprendizaje ni la
asignacin como se esperaba.

Avances tcnicos, pero la informacin aun no es

confiable, accesible, usable

Falta integracin vertical y horizontal

El ciudadano es el gran ausente de los sistemas de

evaluacin de los resultados de la gestin

Debilidades de los sistemas

existentes

Uso limitado de la informacin

Los resultados son parte de la conversacin

la informacin todava no afecta el aprendizaje ni la asignacin ni la
legitimacin como se esperaba

Avances tcnicos, pero la informacin aun no es del todo

confiable, accesible, usable
Falta integracin vertical, horizontal y trasversal
A pesar del discurso, el ciudadano es el gran ausente de los
sistemas de evaluacin de los resultados de la gestin

La gran pregunta

Cmo asegurar que los sistemas de

evaluacin y monitoreo de los
resultados de la gestin pblica apoyen
una agenda que impulse la efectividad
en el desarrollo?

Hacindolos mas efectivos

Vinculndolos a los grandes temas del
desarrollo

Elementos para pensar un sistema

efectivo de evaluacin de los resultados
de la gestin pblica
Tcnica
Conceptos
Mtodos

Elementos para pensar un sistema

efectivo de evaluacin de los resultados
de la gestin pblica
Orientacin

Evaluacin = conocimiento para la accin

Axiologa (clarificacin de valores y funciones)

Tcnica

Conceptos

Mtodos
Prctica

Intervencin social/ uso de la informacin

Consecuencias de la evaluacin

Como mejorar la prctica de

la evaluacin

Asegurar buy in: Apoyo de arriba, participacin de abajo

Generar demanda
Determinar expectativas realistas (evaluacin no es panacea)
Amarrar al presupuesto (y a sistemas de personal)
Escoger el evaluador adecuado
Satisfacer las necesidades de informacin del usuario
Asegurar la relevancia
Asegurar la calidad metodolgica
Comunicar los resultados
Hacer seguimiento de las recomendaciones
Reconocer las necesidades de entrenamiento y apoyo de los
interesados

Trabajo de grupos

Reevaluar las consideraciones en cada

una de las preguntas a la luz del trabajo
de las sesiones anteriores

Qu agrega?
Qu revisa?
Qu quita?

Reflexin final

Cmo puede usted, desde su rol como

profesional, desde su posicin
estructural e institucional, apoyar el
desarrollo de un sistema efectivo de
evaluacin de los resultados de la
gestin en su pas?