VALORACIÓN DE

INDICADORES
FLACSO, OCTUBRE 30, 2014
GUÍA DE ESTUDIO
ÍVICO AHUMADA
CRITERIOS DE VALORACIÓN
DE LAS INTERVENCIONES
PÚBLICAS
PRIMERA PROPUESTA
 CRITERIOS DE VALORACIÓN DE LAS
INTERVENCIONES PÚBLICAS
• El criterio primordial de valoración es la eficacia
con que la intervención pública contribuye a la
solución del problema que atiende.

• En este sentido, todos los componentes y aspectos

deben juzgarse en función de su contribución a
esta solución.

• Si el criterio de eficacia no se cumple de manera

satisfactoria, el cumplimiento de los otros criterios es
irrelevante.
• Dado que la eficacia se refiere al grado en que se
alcanza una meta, para cada política se pueden
plantear diversos indicadores de eficacia, dependiendo
del objetivo que se considere; por ejemplo,

• porcentaje de la población con el problema que es

atendida (cobertura),

• porcentaje de la población atendida que mejora su

situación,

• porcentaje de apoyos proporcionados respecto a los

programados,

• porcentaje de avance de cierta actividad respecto a la

meta programada, etc.
• Sin embargo, ninguno de estos indicadores capta
de manera directa al grado en que soluciona el
problema público.

• La estimación de la eficacia de la intervención

pública debe considerar que su objetivo primordial
es que la población con el problema deje de
tenerlo (impacto).
• Entre los principales criterios complementarios al de
eficacia están los cinco siguientes:

• i)Pertinencia. Es fundamental valorar si los objetivos y

metas planteados corresponden al problema definido y
si los instrumentos de política adoptados son adecuados
para lograr esos objetivos y metas.

• ii) Coherencia y coordinación. Cada intervención

pública debe diseñarse e implementarse considerando
los objetivos, estrategias y resultados de las políticas que
se relacionen con ella, tanto las de otras dependencias
del gobierno federal o central como de otros órdenes
de gobierno (estatal, provincial o municipal).
• iii) Eficacia de la implementación. La correcta
implementación de las políticas públicas requiere una
organización acorde con el tipo y magnitud de las acciones
que se llevan a cabo.

• Ello implica revisar, en primer lugar, si la normatividad le

confiera las facultades necesarias para cumplir cabalmente
con sus responsabilidades.

• También implica examinar si es suficiente y oportuna la

disponibilidad de recursos humanos, materiales y financieros.

• En particular, es importante detectar si los recursos humanos

cuentan con la preparación requerida para realizar las
acciones correspondientes.
• iv) Eficiencia. Para valorar este criterio se debe investigar si los
recursos públicos, por definición escasos, se asignan a resolver los
problemas públicos más graves y apremiantes y a lograr los
objetivos prioritarios de la sociedad.

• Adicionalmente, una vez asignados, se debe determinar si los

recursos humanos, financieros y materiales tienen la mayor
productividad posible.

• v) Estabilidad y adaptabilidad. Es importante dilucidar si la

intervención pública cuenta con normas y mecanismos que
aseguren su permanencia en funcionamiento durante el tiempo
mínimo necesario para alcanzar los resultados propuestos,
evitando cambios frecuentes.

• Como ello no implica que dicha intervención deba permanecer

inamovible, se requiere conocer si cuenta con procedimientos
normados para tener la posibilidad de adaptarse cuando no
está funcionando o cuando
CRITERIOS DE VALORACIÓN
DE LAS INTERVENCIONES
PÚBLICAS
SEGUNDA PROPUESTA
CLASIFICACIÓN DE LOS INDICADORES

De acuerdo con el nivel de los objetivos que miden,

los indicadores pueden dividirse en, por un lado,

1)indicadores de gestión, que examinan las

actividades que realiza el programa y la entrega de
los bienes y servicios que proporciona; y, por el

2) indicadores estratégicos, que valoran los avances

en la solución del problema público y en el logro de
objetivos finales.
• Para ilustrar la diferencia entre estos de tipos de
indicadores se puede considerar como ejemplo un
programa de formación profesional, que imparte
cursos de capacitación para que los participantes
adquieran competencias laborales que les
permitan obtener un empleo y mejorar su ingreso.

• Se debe tener presente que el problema que

enfrenta este programa es el desempleo por falta
de competencias laborales adecuadas.
 INDICADORES DE GESTIÓN

• Los indicadores de gestión que se podrían plantear

son:
• “Porcentaje de cursos impartidos respecto a los
programados”.

• “Porcentaje de participantes que adquiere un nivel

adecuado de competencias laborales”.

• “Eficiencia terminal de los participantes” (es diferente al

anterior indicador si se recibe el diploma de egresado al
cumplir un mínimo de asistencia, aunque no se tengan
las competencias laborales adecuadas).
 INDICADORES ESTRATÉGICOS

• Por su parte, los indicadores estratégicos

serían: “Porcentaje de egresados del programa
que obtiene un empleo antes de tres meses”.
• “Porcentaje de egresados del programa que están
empleados 12 meses después de terminar su
curso”.
• “Diferencial de ingreso salarial de los egresados
con respecto a trabajadores similares que no
participaron en el curso”.
 INDICADORES DE
DESEMPEÑO EN EL
SECTOR PÚBLICO
JUAN CRISTOBAL BONNEFOY Y MARIANELA ARMIJO
CLASIFICACIÓN DE INDICADORES

1.Eficacia
2.Eficiencia
3.Economía
4.Calidad.
 EFICACIA

• Los indicadores de eficacia miden el

cumplimiento de metas, logro de objetivos, grado
de focalización de los apoyos proporcionados y
cobertura de atención a la población objetivo.

• En el ejemplo anterior sobre un programa de

capacitación todos los indicadores mencionados
eran de eficacia.
 EFICIENCIA

Los indicadores de eficiencia examinan qué tantos

recursos humanos, financieros y materiales se
requieren para elaborar los bienes y servicios que
proporciona el programa.

Estos indicadores miden costos unitarios de cada

producto entregado y la productividad de los
diversos recursos.
 EFICIENCIA

• Un indicador clásico de eficiencia es el costo unitario de

producción o costo promedio, el cual relaciona la
productividad física y el costo de los factores e insumos
utilizados en la generación de un bien o servicio.

• En el ámbito de las instituciones públicas existen muchas

aproximaciones a este concepto.

• En general, se pueden obtener mediciones de

productividad física, relacionando nivel de actividad,
expresado por ejemplo como número de subsidios
entregados, cantidad de usuarios atendidos,
inspecciones realizadas, etc., y nivel de recursos
utilizados (gasto en bienes y servicios, dotación de
personal, horas extraordinarias, etc.).
 ECONOMÍA

Los indicadores de economía valoran la

capacidad para financiar el programa y para
gestionar los recursos financieros, miden del avance
del ejercicio presupuestal en comparación con lo
programado, y valoran la sustentabilidad financiera
del programa en función con sus fuentes de
financiamiento.
 CALIDAD

• Los indicadores de calidad valoran los atributos de los

productos y servicios que entrega el programa, la
oportunidad y confiabilidad de las entregas, la facilidad
de acceso a los apoyos por parte de la población
objetivo y el grado de satisfacción de los beneficiarios
con los apoyos que reciben.

• Entre los medios disponibles para sistematizar la

medición y evaluación de estos conceptos se cuentan
la realización de sondeos de opinión y encuestas
periódicas a los usuarios, la implementación de libros de
reclamos o de buzones para recoger sugerencias o
quejas.
• En primer lugar asume que los insumos son recursos
que la organización o un gerente tiene disponible
para lograr un producto o resultado.

• Los insumos pueden incluir los funcionarios, equipos

o instalaciones, materiales fungibles y los bienes o
servicios recibidos.

• Los costos constituyen los gastos incurridos al usar

los insumos.
• Los productos están relacionados con los bienes y
servicios producidos directamente por un organismo
público para los ciudadanos, negocios y/o otras
agencias gubernamentales.

• Los resultados se relacionan con los impactos o

consecuencias para la comunidad de los productos o
actividades del gobierno.

• Los resultados reflejan los impactos intencionados y no

intencionados de las acciones gubernamentales, estos
proveen la racionalidad para las intervenciones
gubernamentales.
El esquema siguiente presenta la
interrelación entre los cuatro
conceptos y las medidas de logro de
eficiencia, efectividad, economía y
costo-efectividad.
 TIPOLOGÍAS DE INDICADORES (DE
DESEMPEÑO)
• Indicadores que entreguen información de los
resultados desde el punto de vista de la actuación
pública en la generación de los productos: -
Insumos(Inputs) -Procesos o actividades -
Productos(outputs) -Resultados finales(outcomes)

• Indicadores desde el punto de vista del

desempeño de dichas actuaciones en las
dimensiones de eficiencia, eficacia, calidad y
economía.
• La primera clasificación permite referirse a los instrumentos de
medición de las principales variables asociadas al
cumplimiento de los objetivos: cuántos insumos se utilizaron,
cuántos productos y servicios se entregaron y cuáles son los
efectos finales logrados.

• Mientras que la segunda clasificación se asocia al juicio que

se realiza una vez finalizada la intervención, y las preguntas
que se intenta responder son: en qué medida se cumplieron
los objetivos, cuál es el nivel de satisfacción de la calidad
percibida por los usuarios, cuán oportunamente llegó el
servicio.

• Lo que se busca evaluar con las dimensiones de eficiencia,

eficacia, economía y calidad es cuán aceptable ha sido y es
el desempeño del organismo público, cuya respuesta sirve
para mejorar cursos de acción y mejorar la gestión, informar a
los diferentes grupos de interés y tener una base sobre la cual
asignar el presupuesto.
 INDICADORES DE INSUMOS

• Indicadores de insumos (inputs): cuantifica los recursos

tanto físicos como humanos, y/o financieros utilizados en
la producción de los bienes y servicios.

• Estos indicadores generalmente están dimensionados

en términos de gastos asignados, número de
profesionales, cantidad de horas de trabajo utilizadas o
disponibles para desarrollar un trabajo, días de trabajo
consumidos, etc.

• Estos indicadores son muy útiles para dar cuenta de

cuantos recursos son necesarios para el logro final de un
producto o servicio, pero por sí solos no dan cuenta de
si se cumple o no el objetivo final.
 INDICADORES DE PROCESO

• Indicadores de procesos: se refieren a aquellos

indicadores que miden el desempeño de las
actividades vinculadas con la ejecución o forma en
que el trabajo es realizado para producir los bienes y
servicios, tales como procedimientos de compra (días
de demora del proceso de compra) o procesos
tecnológicos (número de horas de los sistemas sin línea
atribuibles al equipo de soporte).

• Estos indicadores son útiles para la evaluación del

desempeño en ámbitos donde los productos o
resultados son más complejos de medir, como por
ejemplo actividades de investigación, culturales, etc.
 INDICADORES DE PRODUCTOS

• Indicadores de productos: muestra los bienes y servicios

de manera cuantitativa producidos y provistos por un
organismo público o una acción gubernamental.

• Es el resultado de una combinación específica de

insumos por lo cual dichos productos están
directamente relacionados con ellos.

• Por sí solo un indicador de producto, (por ejemplo

número de vacunaciones realizadas, número de
viviendas construidas, número de inspecciones, etc.) no
da cuenta del logro de los objetivos o de los recursos
invertidos en la generación de dichos productos.
INDICADORES DE RESULTADO FINAL O
IMPACTO
• Indicadores de resultado final o impacto: miden los
resultados a nivel del fin último esperado con la
entrega de los bienes y servicios.

• La información que entrega se refiere por ejemplo

al mejoramiento en las condiciones de la
población objetivo, y que son exclusivamente
atribuibles a dichos bienes.
 Figura 4
TIPO DE INDICADORES DE DESEMPEÑO DESARROLLADOS EN LOS PAÍSES

Inputs (Insumos) $$ de la campaña

-diseño y pruebas de los avisos

Actividades
-producción de los avisos

-compra del tiempo de aviso

comercial
Productos
-avisos transmitiéndose
en la televisión

-las personas ven los avisos

Resultados Inmediatos
-las percepciones de la gente se
ven afectadas
Intermedios
-el comportamiento se ve
afectado

Finales -menor incidencia de

enfermedades relacionadas

Fuente: Adaptado de Schacter, Mark (2002). Institute On Governance, Ottawa, Canadá. www.iog.ca.
LA POLÍTICA DE LAS
POLÍTICAS PÚBLICAS
BID
• Los resultados de las políticas públicas dependen no
sólo de su contenido, sino también del grado en que
cumplen con seis cualidades (BID, 2006, Capítulo 6):

• “ • Estabilidad: la medida en la cual las políticas son

estables en el curso del tiempo.
• “ • Adaptabilidad: la medida en la cual pueden
ajustarse cuando fallan o cuando cambian las
circunstancias.
• “ • Coordinación y coherencia: el grado en que las
políticas son el resultado de acciones bien coordinadas
entre los actores que participan en su diseño e
implementación, y son coherentes con políticas
conexas.
• “ • Calidad de la implementación y de la efectiva
aplicación.
• “ • Orientación al interés público: el grado en que las
políticas procuran promover el bienestar general.
• “ • Eficiencia: el grado en que reflejan una asignación
de los recursos escasos que garantice altos
rendimientos” (BID 2006, p 140).
ATRIBUTOS DE LOS
INDICADORES
• En la literatura existen varias propuestas sobre los
atributos que debe cumplir cada indicador.

• Una de las más aceptadas es la denominada

CREAM, acrónimo (en inglés) de
• clear
• relevant
• economic
• adequate y
• monitoreable (Kusek y Rist, 2004).
 PROPUESTA DE ÍVICO

• Pertinencia: El indicador se refiere estrictamente al

objetivo al que está asociado. Éste es un atributo
tan fundamental, que si no se cumple implica que
la utilidad del indicador es nula, aunque satisfaga
los otros atributos.

• Relevancia: El indicador capta un aspecto clave

del objetivo que se busca valorar. Cuando existen
varios indicadores para el mismo objetivo es
importante que cada indicador represente un
aporte marginal, suministrando información que no
provee algún otro indicador.
• Claridad: La definición y método de cálculo del indicador
se entienden de la misma manera por todos los involucrados.
Para ello se requiere que los conceptos y variables se definan
de manera precisa, las unidades de medida sean
homogéneas, los medios de verificación sean especificados
inequívocamente y las fórmulas de cálculo sean correctas y
tan simples como sea posible, sin que los indicadores pierdan
otros atributos.

• Monitoreabilidad externa: La medición del indicador puede

ser verificada por observadores externos. Para cumplir este
atributo, se requiere que, además de satisfacer el atributo de
claridad, el indicador pueda ser medido con información
disponible de manera pública, periódica y oportuna. También
se requiere que los valores de la línea de base y metas del
indicador sean conocidos públicamente.
• Asequibilidad económica: Las mediciones de los
indicadores se pueden realizar de manera
completa y oportuna con los recursos disponibles.
Cuando el costo de medir un indicador es
demasiado elevado en relación con los recursos
del programa es común que se planteen
frecuencias de medición demasiado amplias o que
se postergue su medición, lo que implica que se
carezca de mediciones oportunas sobre el
cumplimiento de las metas del objetivo asociado al
indicador.
PROBLEMAS EN LOS ATRIBUTOS DE LOS
INDICADORES
• Cuando la construcción de indicadores no se realiza
correctamente también se dificulta evaluar los programas.

• Los indicadores pueden ser defectuosos por no cumplir con los

atributos deseables, por carecer de algunos elementos como
línea de base y metas; o tener algunas características
inconvenientes, tales como procedimientos de estimación
equivocados o períodos de estimación impuestos y no realistas.

• Otro problema es el énfasis en la construcción de indicadores de

objetivos que pueden ser controlados por los operadores,
aunque no sean los más pertinentes.

• Además, la integración de los indicadores puede ser deficiente

por la existencia de indicadores duplicados u omisiones de
indicadores clave.
Los indicadores de calidad valoran los atributos de los productos y servicios que entrega el
programa, la oportunidad y confiabilidad de las entregas, la facilidad de acceso a los apoyos por
parte de la población objetivo y el grado de satisfacción de los beneficiarios con los apoyos que
reciben.