Curso Métodos de Análisis, Diseño y Evaluación de

Políticas públicas que generan Innovación.

ESAP · EIAPP-CLAD · DNP
Bogotá, 23-27 Agosto 2010

Racionalidad y política en el análisis y la gestión del

cambio en las políticas públicas

César Nicandro Cruz

cesarcruz@estudiospoliticos.org
1. Nociones generales (40 min. aprox.)
Esquema de exposición
 Análisis de políticas públicas –monitoreo
y evaluación
 Herramientas M&E para demostrar
resultados y rendir cuentas –
implementación de un sistema M&E
 Estudio de caso: - Coneval México
 Cambio político y gestión del cambio
Análisis de políticas públicas

 Es una disciplina social aplicada que usa una

gran variedad de métodos de investigación, en
contextos de argumentación y debate
públicos, para crear, evaluar críticamente y
comunicar conocimiento útil sobre la política
pública
 El análisis de políticas es una actividad centrada
producción y transformación de información
relevante en conocimiento útil para la toma de
decisiones y el debate público.
 Permite mejorar nuestro conocimiento sobre los
problemas públicos y mejorar el proceso de toma de
decisiones.
Análisis de políticas públicas
 El análisis de políticas no es una
actividad neutral, pues se centra en
valores.
 Las opciones de políticas públicas implican
el escoger entre valores (muchas veces) en
competencia: salud, bienestar, seguridad,
paz, justicia, igualdad, libertad, etc.
 Juzgar o priorizar entre valores no es una
cuestión que resuelva por sí misma la
técnica, sino que requiere razonamientos
morales (ética aplicada).
Análisis de políticas públicas
 El análisis de políticas sí puede ser una
actividad objetiva, dadas sus
metodologías, métodos y técnicas de
análisis.
 El desarrollo de este subcampo de estudios,
en sus metodologías y técnicas ha sido
vertiginoso.
 Tal vez como nunca el análisis de políticas
cuenta con fundamentos teóricos,
metodológicos y técnicos integrados en un
campo multidisciplinario.
Una disciplina social aplicada
Tres enfoques del análisis de políticas
públicas
Enfoque Pregunta fundamental Tipo de información
Empírico ¿Existe o existirá? (hechos) Descriptiva y predictiva
Valorativo ¿Vale la pena que exista? (valores) Valorativa
Normativo ¿Qué debe hacerse? (acciones) Prescriptiva
Dunn, W. N. Public Policy Analysis: An Introduction (2nd. ed.). New Jersey: Prentice Hall. (1994)

La producción de información relevante, ya sea descriptiva, predictiva, o

prescriptiva en carácter, se obtiene mediante los procedimientos
analíticos llamados monitoreo, previsión (forecasting), evaluación,
recomendación y estructuración del problema.

Dentro del análisis de políticas, el procedimiento más complejo (e

importante) es este último.
 Análisis de Políticas Públicas: Procedimientos Analíticos
La estructuración del problema implica la definición del
Estructuración problema público, el establecimiento y el diagnóstico que
del problema define una causalidad, se establecen objetivos posibles y
se esbozan diseños de políticas para atender el problema.

Este procedimiento brinda conocimiento sobre potenciales

Previsión estadios futuros o tendencias, que pueden ocurrir como
(Forecasting) consecuencia de adoptar opciones de políticas posibles, que
incluyen el no hacer nada. (análisis prospectivo).

Brinda conocimiento sobre los beneficios y costos de las

alternativas que han sido consideradas durante la previsión
Recomendación (forecasting). Ayuda a escoger entre potenciales estadios
futuros y a la adopción de alternativas en arreglo a valores.

Este procedimiento ofrece información y conocimiento relevante

acerca de las efectos de las políticas adoptadas, a fin de
asistir a los elaboradores de políticas en la fase de
Monitoreo implementación. Ayuda a medir el nivel de cumplimiento,
descubren consecuencias no previstas, obstáculos de
implementación.
Ofrece conocimiento relevante sobre las discrepancias entre
el desempeño esperado y el obtenido. El monitoreo y la
Evaluación evaluación están muy vinculados. La evaluación ofrece las
bases para el reforzamiento de la política o la reestructuración
de problemas.
Dunn, W. N. Public Policy Analysis: An Introduction (2nd. ed.). New Jersey: Prentice Hall. (1994)
El análisis de políticas centrado en el problema: Procedimientos Analíticos

Previsión
Evaluación
Estructuración (forecasting)
del problema

Estructuración
del problema

Estructuración
del problema
Estructuración
del problema

Monitoreo Recomendación

Dunn, W. N. Public Policy Analysis: An Introduction (2nd. ed.). New Jersey: Prentice Hall. (1994)
El análisis de políticas centrado en el problema: Información Relevante

Desempeño
(performance)

Resultados
Problemas Futuros
(outcomes)

Acciones de
política pública

Dunn, W. N. Public Policy Analysis: An Introduction (2nd. ed.). New Jersey: Prentice Hall. (1994)
 El análisis de políticas centrado en el problema

Desempeño
(performance)

Previsión
Evaluación
Estructuración (forecasting)
del problema

Estructuración
del problema

Estructuración
del problema
Resultados
Problemas Futuros
(outcomes)

Estructuración
del problema

Monitoreo Recomendación

Acciones de
política pública

Dunn, W. N. Public Policy Analysis: An Introduction (2nd. ed.). New Jersey: Prentice Hall. (1994)
 Las modalidades del análisis de políticas

Retrospectivo (ex-post) Desempeño

(performance)

Previsión
Evaluación
Estructuración (forecasting)
del problema

Estructuración
del problema

Estructuración
del problema
Resultados
Problemas Futuros
(outcomes)

Estructuración
del problema

Monitoreo Recomendación

Acciones de
política pública

Dunn, W. N. Public Policy Analysis: An Introduction (2nd. ed.). New Jersey: Prentice Hall. (1994)
 Detección de
(nuevos)
SITUACIÓN La centralidad de la
PROBLEMÁTICA
problemas estructuración del
problema en el
Estructuración
del problema
análisis de políticas

Disolver PROBLEMA No solucionar

del problema PÚBLICO del problema

Disolver: implica el abandono de un

NO ¿Es el problema problema mal estructurado antes de que
correcto? exista un esfuerzo por solucionarlo.

SI
Resolucionar: el re-analisis de un
problema correctamente estructurado a fin
Solucionar de reducir errores de calibración (E-I y E-II
el problema types)

No solucionar: implica el abandono de

Re-solucionar una solución encontrada basado en una
SOLUCIÓN el problema formulación no adecuada del problema (E-
III)

SI ¿Es la solución NO Dunn, W. N. Public Policy Analysis: An

correcta? Introduction (2nd. ed.). New Jersey:
Prentice Hall. (1994)
 Los estadios futuros, la previsión y la
planeación estratégica
Pasado Presente Futuro

Pasados Futuros
Plausibles Plausibles
(¿qué ocurrió?) (¿qué será?)

Pasados Futuros
Potenciales Potenciales
(¿qué pudo (¿qué podría ser?)
haber ocurrido?)

Pasados Futuros
Normativos Normativos
(¿qué debió (¿qué deberá
pasar?) pasar?)

Planeación Estratégica Valoración Prospección Estrategia

Juicios de valor de hecho agenda estratégica

futuros deseados realizables Ganadores

Dunn, W. N. Public Policy Analysis: An Introduction (2nd. ed.). New Jersey: Prentice Hall. (1994)
 Compaginación de los
Estructuración CONFORMACIÓN
del problema DE LA AGENDA
procedimientos analíticos
con las distintas fases del
proceso de las políticas
Previsión FORMULACIÓN
(Forecasting)

El análisis de políticas conlleva

una serie de procesos
Recomendación ADOPCIÓN intelectuales llevados a cabo
dentro de procesos de
actividades esencialmente
políticos

Monitoreo IMPLEMENTACIÓN Desde la ciencia política, estas

actividades son analizadas,
teorizadas y descritas con las
llamadas teorías sobre el
proceso de las políticas públicas
Evaluación EVALUACIÓN

Dunn, W. N. Public Policy Analysis: An Introduction (2nd. ed.). New Jersey: Prentice Hall. (1994)
Monitoreo Monitoreo

 Es la función continua que utiliza la

recolección sistemática de datos sobre
indicadores específicos, para proporcionar
a los gestores y elaboradores de políticas
los indicadores sobre el nivel de progreso y
logro de objetivos y en la distribución de
recursos.
 El monitoreo brinda información sobre dónde
un proyecto, programa o política está en un
momento dado, en relación con un objetivo o
resultado dado.

Zall Kusek, J., y Rist, R. C. Ten Steps to a Result-Based Monitoring and Evaluation System (Vol.
29672). Washington: The World Bank. (2004)
Monitoreo Monitoreo

 Es el proceso de obtención de
información relevante a fin de medir
cambios en las condiciones sociales de
interés (tanto objetivas – v.g. indicadores
de desarrollo - como subjetivas – v.g.
encuestas satisfacción), entre distintos
grupos objetivo y/o beneficiarios.

Dunn, W. N. Public Policy Analysis: An Introduction (2nd. ed.). New Jersey: Prentice Hall. (1994)
 Marco general del monitoreo
Los Hechos
ACCIONES CONTROLABLES RESULTADOS CONTROLABLES
Insumos Procesos Productos Impactos
In1 Pr1 Pd1 Im1
In2 Pr2 Pd2 Im2
. . . .
. . . .
. . . .

Ini Prj Pdm Imn

Pc1 Ei1 Dc1

Pc2 Ei2 Dc2
. . .
. . .
. . .

Pcp Eiq Dcr

Precondiciones Eventos Derramas y

inesperados efectos colaterales
CAUSAS NO CONTROLABLES EFECTOS NO CONTROLABLES

Dunn, W. N. Public Policy Analysis: An Introduction

(2nd. ed.). New Jersey: Prentice Hall. (1994)
Monitoreo: métodos Monitoreo

de recolección de datos

Fuente: Marchant, Tim. 2000. Africa Region presentation. World Bank.

Washington D.C. referencia en Zall Kusek, J., y Rist, R. C. Ten Steps
to a Result-Based Monitoring and Evaluation System (Vol. 29672).
Washington: The World Bank. (2004)
Características del monitoreo Monitoreo

Características Descripción
Enfocados a los Analizan productos e impactos (outcomes) que son
resultados resultado tanto de variables controlables como no
controlables
Orientados a los Los resultados son monitoreados, pues se asume que su
fines logro permiten la satisfacción de una necesidad o valor
(fin)
Orientados al Identifican variaciones en el tiempo, cambios en los
cambio resultados en secuencias temporales, en distintos
programas, proyectos o localidades en el mismo tiempo, o
en ambos grupos de dimensiones.
Permiten Facilitan la clasificación cruzada de productos e impactos
clasificaciones por otras variables.
cruzadas
Dunn, W. N. Public Policy Analysis: An Introduction (2nd. ed.). New Jersey: Prentice Hall. (1994)
Monitoreo basado en resultados Monitoreo

Fuente: Marchant, Tim. 2000. Africa Region

presentation. World Bank. Washington D.C.
referencia en Zall Kusek, J., y Rist, R. C. Ten Steps
to a Result-Based Monitoring and Evaluation
System (Vol. 29672). Washington: The World
Bank. (2004)
Evaluación Evaluación

 Se refiere a la producción de información y

conocimiento de los resultados obtenidos con
la política, en arreglo a algún conjunto de
valores, y si tales resultados contribuyen con
los fines y objetivos perseguidos.

 Se centra en valores: se intenta determinar la

utilidad social de un programa (impacto)
 El monitoreo colecta los hechos, la evaluación los
vincula con los fines perseguidos causalmente.
 Mayormente tiene un carácter retrospectivo
 Tiene un carácter dual, pues los valores que
sustentan la evaluación se pueden referir a los
medios o a los fines
Evaluación Evaluación

 Es la tarea sistemática y objetiva de analizar un

proyecto, programa o política en marcha o concluido
(incluyendo su diseño, implementación y resultados)

 La finalidad es determinar la relevancia y el logro de

objetivos, en la eficiencia, eficacia, impacto y
sostenibilidad.
 Una evaluación debe proporcionar información creíble y
útil, permitiendo la incorporación de lecciones aprendidas
en el proceso de toma de decisiones, tanto de
beneficiarios como de donantes.
 La evaluación brinda información sobre por qué un
objetivo o resultado dado de un proyecto, programa o
política ha sido o no alcanzado.

Zall Kusek, J., y Rist, R. C. Ten Steps to a Result-Based Monitoring and Evaluation System (Vol.
29672). Washington: The World Bank. (2004)
Evaluación: criterios Evaluación

Criterio Finalidad Pregunta fundamental

Eficacia Logro de ¿Se logran alcanzar los objetivos establecidos en el
objetivos programa o política?
Eficiencia Sobre los ¿Cuánto esfuerzo es el requerido para lograr un
recursos determinado nivel de eficacia?
Relevancia de los objetivos ¿Son los objetivos valorables positivamente para el
público y para los grupos implicados (interesados)?
Coherencia de las políticas ¿En qué medida el logro de los resultados valorados
como positivos resuelven el problema?
Equidad Distribución de ¿Son los costos y los beneficios distribuidos
beneficios equitativamente entre los distintos grupos en la
sociedad?
Sostenibilidad de los ¿Se pueden mantener o mejorar los resultados sin
resultados dañar a otros sistemas o sin provocar perjuicios al
corto y largo plazo?
Métodos de evaluación de programas Evaluación

Método Objeto Características

Evaluación de Determinar si el Solo utiliza información secundaria. Se realiza al año de
diseño programa hace un ejecución del programa. Busca encontrar fallos en la
aporte relevante a la formulación del programa, así como conocer con detalle
solución de un el papel del programa dentro del concierto de programas
problema específico existentes, reduciendo riesgo de duplicidades.

Evaluación de Determinación de Ofrece recomendaciones sobre aspectos susceptibles de

procesos eficiencia y eficacia mejora. Identifica cuellos de botella.
del programa
Evaluación de Ofrecer una Evaluación rápida, orientada a dar una perspectiva
consistencia y perspectiva general general sobre el diseño, la planificación, cobertura,
resultados de diseño, operación operación, percepción y resultados de un programa a fin
y resultados de detectar fortalezas y debilidades específicas. Solo
utiliza información secundaria. Está dirigida a un amplio
rango de usuarios.

Evaluación de Medir cambios en las Mide aquellos cambios que pueden ser atribuibles al
impacto condiciones de programa en cuestión. Ofrece evidencia sobre si un
bienestar de la programa funciona o no, y ofrece recomendaciones sobre
población beneficiaria si el programa debe o no seguir, debe o no ser modificado

Evaluación de Medir la calidad de Mejorar el conocimiento sobre los progresos de un

indicadores* los indicadores programa a través de sus indicadores de desempeño.
 Articulación de los métodos
Evaluación
de evaluación

Evaluación de Consistencia y Resultados Evaluación de Impacto

Diseño Insumos Actividades Productos Efectos Impacto

(beneficiarios)

Evaluación de Diseño Evaluación de Procesos Evaluación de Indicadores

Medina Giopp, A., Beker Busjeet, G., Bravo, L., Lundwall, J., y
Hernández, R. M. (2008). México: Análisis de los Lineamientos
generales para la evaluación de los Programas Federales de la
Administración Pública Federal (Reference Project: P101567).
Washington: Banco Mundial.
Muchas gracias por su atención