Cmo se construye un Indicador de Desempeo?

Jorge de la Fuente Olgun

Cmo se construye un Indicador de Desempeo?

Direccin General de Desarrollo Econmico y Social, V iceministerio de Planificacin, Ministerio de Economa, Planificacin y Desarrollo de Repblica Dominicana. Diciembre 2010

El presente documento fue elaborado por el consultor Jorge de la Fuente, para lo cual - adems de su experiencia - utiliz la siguiente bibliografa: Instituto latinoamericano y del Caribe de planificacin Econmica y social (ILPES) de Comisin Econmica para America atina y el Caribe (CEPAL) de Naciones Unidas. Metodologa del Marco Lgico - Boletn del Instituto Nro. 15 (L249, 0ctubre de 2004). Conceptos clave de seguimiento y Evaluacin de programas y proyectos PREVAL-FIDA, 2002.

Cmo se construye un Indicador de Desempeo?

Introduccin
En el enfoque de Gestin por Resultados que se est utilizando para modernizar el Estado en Amrica Latina y el Caribe, se usan diferentes metodologas para planificar. En algunos casos se usa la Planificacin Estratgica en sus diferentes versiones, en otros la metodologa de marco lgico y en los ltimos aos se ha intentado usar el cuadro de mando Integral, utilizado con xito en el sector privado, entre otros. En todos los casos los indicadores son un elemento comn, ya que permite medir los avances o retrocesos de los planes, programas o proyectos implementados por el sector pblico. La experiencia indica que muchos planes que pueden estar bien diseados presentan normalmente problemas en la forma de medir sus logros, algunas veces porque sus indicadores estn mal diseados y en otros porque no existe la capacidad operativa para captura la informacin con la cual se calculan los indicadores. Es por esta razn que la Direccin General de Desarrollo Econmico y Social ha elaborado diferentes documentos para la difusin de instrumentos de planificacin y en este caso particular busca entregar informacin sobre cmo construir adecuadamente un indicador de desempeo de las acciones pblicas.

Cmo se construye un Indicador de Desempeo?

Qu son los Indicadores ?

Un indicador es una excelente ayuda para administrar un proyecto o programa ya que permite saber en que punto se est entre la situacin inicial y la situacin deseada. Puede definirse como: Indicadores: Es una herramienta de medicin de objetivos. Solo mide, no opina.

El instrumento que sirve para mostrar o indicar algo, por ejemplo:

Instrumento Seal de trfico Aguja de reloj Marca-pginas planta Signo damas /caballeros en puerta de bao Qu indica? direccin Tiempo Avance en la lectura Dficit de agua en suelo restriccin

Un cuantificador, entendido como procedimiento que permite cuantificar alguna dimensin conceptual y que, cuando se aplica, produce un nmero. Suele ser empleado para comparar desempeos entre perodos o entre entornos geogrficos o sociales. Un indicador es una cinta de medir (el metro), que sirve para medir en cualquier momento histrico sin importar si el resultado de la medicin es bueno o malo para el proyecto o programa. Un indicador establece una relacin entre dos variables1 o ms, donde normalmente una est referida al proyecto o programa y otra sirve como referencia para comparar el desempeo del programa. Por ejemplo:
Variable del proyecto o programa N de nias(os) entre 5 y 12 en enseanza primaria N de profesores existentes entre 1 y 8 bsico N de productores agrcolas con asistencia tcnica N de pacientes en el hospital N de desempleados con capacitacin Variable de referencia para comparar N total de nios entre 7 y 12 aos en el pas N total de alumnos entre 1 y 8 bsico N total de productores agrcolas del pas N de mdicos del hospital N total de desempleados del pas

Para un determinado objetivo, se pueden definir muchos indicadores para medir la situacin en que se encuentra ese objetivo, pero se recomienda elegir los menos posibles y los ms tiles. Un indicador debe tener en lo posible las siguientes caractersticas:

Variable es una caracterstica que al ser medida en diferentes individuos es susceptible de adoptar diferentes valores. O tambin: Una variable es un elemento de una frmula, proposicin o algoritmo que puede adquirir o ser sustituido por un valor cualquiera (siempre dentro de su universo).

Cmo se construye un Indicador de Desempeo?

Ser objetivo, independiente de nuestro modo de pensar o sentir

Ser medible objetivamente,

medicin influida por nuestros intereses particulares

Ser relevante,
que mida aspecto importante del logro esperado

Ser especfico,
que mida efectivamente lo que se quiere medir

Ser prctico y econmico,

qu implique poco trabajo y bajo costo

Estar asociado a un plazo,

al tiempo del proyecto o parcialidades

Qu tipos de indicadores existen?

Los indicadores se pueden clasificar de dos maneras, los que miden i) un mbito de control del proyecto o programa y ii) los que miden el desempeo o foco de la gestin que mide el indicador. En el siguiente cuadro de detallan los tipos de indicadores y su uso en la medicin de objetivos de la MML:
mbito de control mide: OBJETIVOS
Para

Desempeo mide:

Impacto
Para

Fin

Resultados
Para

Propsito

Para

Productos
Para

Componentes

Eficacia Eficiencia Economa Calidad

Procesos

Actividades

Indicadores de Desempeo
Eficacia: Este indicador mide el grado de cumplimiento de los objetivos de un programa o proyecto. Dicho de otra forma, mide los logros entre lo planificado y lo obtenido. O en que medida se esta cumpliendo con sus objetivos, sin referirse al costo de los mismos Ejemplos: Qu se quiere medir? Ausentismo escolar Ingresos familiares Riesgo de embarazo adolescente Nombre del indicador % de nias(os) matriculados que asisten sistemticamente a la escuela primaria % de variacin del ingreso anual de las familias atendidas por el programa respecto al grupo de control. Tasa de variacin del embarazo adolescentes en las escuelas atendidas por el programa de prevencin

La pregunta que debe hacerse es: Cunto ests logrando?

Cmo se construye un Indicador de Desempeo?

Eficiencia: Este indicador mide la relacin entre el logro obtenido con respecto a los insumos o recursos utilizados. La eficiencia se puede medir mediante:

La pregunta que debe hacerse es: Cunto cuesta lograr lo que estamos logrando?

Productividad media de los distintos factores de produccin, o sea, es la relacin entre la produccin obtenida por un sistema productivo (viviendas sociales) y los recursos utilizados para obtener dicha produccin (recursos monetarios o tiempo utilizado o recursos humanos utilizados) Ejemplos: Qu se quiere medir? Logros de un juez Logros del mdico Asistencia Nombre del indicador % de casos terminados por juez respecto al total de casos ingresados % de enfermos atendidos por mdico respecto al ao anterior % Asistencia de alumnos a clases por mes respecto al total de alumnos

costos de produccin, o sea, costos unitarios o promedios2 y gastos administrativos en relacin al gasto total del programa o proyecto Ejemplos: Qu se quiere medir? Costo unitario usuario Gastos de administracin Costo unitario municipio Nombre del indicador Costo promedio por usuario atendido por el programa Porcentaje del gasto de administracin sobre el presupuesto total del programa Costo del programa por municipio atendido

Economa: Este indicador mide la capacidad del programa/institucin para administrar, generar o movilizar adecuadamente los recursos financieros. Es una dimensin de la eficiencia. A este indicador no le interesan los objetivos, solo ve costos

La pregunta que debe hacerse es: Ests administrando bien los recursos pblicos?

Costo Unitario o promedio = costo total/cantidad de productos

Cmo se construye un Indicador de Desempeo?

Ejemplos: Qu se quiere medir?

Ingresos propios generados (autofinanciamiento) Presupuesto ejercido Capacidad para incorporar otros recursos de otras fuentes (apalancamiento de recursos)

Nombre del indicador

% de aporte de beneficiarios al financiamiento del programa respecto al costo total del programa % de ejecucin del presupuesto respecto al total del presupuesto % de recursos ingresados al programa por otras fuentes financieras respecto al presupuesto inicial del programa

Calidad: Este indicador mide los atributos, capacidades o caractersticas que deben tener los bienes y servicios para satisfacer los objetivos. Es una dimensin de la eficacia. La calidad se puede medir mediante la oportunidad, la accesibilidad, la percepcin de los usuarios y la presin en la entrega de los servicios. Ejemplos:
Oportunidad % de respuestas a los Senadores dentro de los lmites acordados. % de reportes econmicos entregados en tiempo acordado Accesibilidad % de localidades aisladas cubiertas por servicios de educacin % de escuelas que cuentan con infraestructura para discapacitados % de Poblacin con necesidades especiales que son miembros activos de la Biblioteca

La pregunta que debe hacerse es: Qu tan bien lo estoy logrando?

Percepcin de usuarios % de aprobacin excelente de los talleres de trabajo, por los participantes

Precisin % de contratos terminados por errores %Tasa de fallas efectivas respecto a Fallas esperadas

Ahora bien, articulando la medicin del desempeo, los mbitos de control con los objetivos se puede afirmar lo siguiente: Cuando se mide impacto se est midiendo FIN en cualquiera de sus dimensiones, pero el indicador ms utilizado es la Eficacia y en algunos casos los restantes indicadores. Cuando se miden los resultados se est midiendo el Propsito en cualquiera de sus dimensiones pero los indicadores ms utilizados son eficacia y eficiencia. Cuando se miden los productos, se estn midiendo los componentes y los indicadores mas utilizados son los que miden la eficacia, eficiencia y Calidad y en ciertos casos se mide economa. Cuando se miden procesos, se estn midiendo actividades que pueden medirse en cualquiera de sus dimensiones, pero es importante medir economa.

Cmo se construye un Indicador de Desempeo?

Cules son los pasos para construir un indicador?

Para construir un indicador se requieren los 5 pasos indicados en la figura siguiente:

Revisar la redaccin del objetivo e Identificar los Factores Relevantes a medir

Proponer Indicadores para cada factor relevante

Construir las Frmulas para cada indicador

Establecer Frecuencia de medicin (seguimiento)

Establecer Meta y Lnea base

Se analizar cada uno de los pasos para lograr la mayor comprensin de los conceptos.

Revisar la redaccin del objetivo e Identificar los Factores Relevantes a medir

El factor relevante corresponde a la o las palabras claves que estn sealadas en la narracin del objetivo. Dicho de otra forma, si se eliminar esas palabras, el sentido del objetivo se pierde. Normalmente en un objetivo se indica la poblacin objetivo (sobre la cual se quiere medir) acompaada del logro esperado. Este ltimo corresponde al factor relevante.

Algunos ejemplos: Objetivo

Familias, habitantes de las AUP en el programa, han mejorado su condicin nutricional Complemento Alimenticio y Suplementos de micronutrientes entregados a Nios/as mayores de 6 meses y menores de 2 aos Consejos Municipales de Prevencin de Violencia, han sido constituidos o fortalecidos Productores y empresarios acceden a financiamiento crediticio para actividades productivas Las personas adultas mayores de 70 aos cuentan con pensin bsica universal

Factor relevante a medir

Condicin nutricional mejorada Entrega de Complemento Alimenticio y Suplementos de Micronutrientes Constitucin o fortalecimiento Acceso a financiamiento cuentan con pensin bsica universal

En Quin se medir?
Familias habitantes de AUP Nios/as mayores de 6 meses y menores de 2 aos Consejos Municipales de Prevencin de Violencia Productores y empresarios adultos mayores de 70 aos o ms

Si despus de revisar el objetivo y no se encuentra claramente definida la poblacin objetivo y el logro no es preciso y hay ms de un logro, ser necesario volver a redefinir el objetivo.

Cmo se construye un Indicador de Desempeo?

Proponer Indicadores para cada factor relevante

Un indicador tiene un nombre, que debe reflejar lo que se quiere medir en el objetivo y una frmula. El nombre debe incluir en quin se esta midiendo, lo que se quiere medir y el universo sobre el cual se est midiendo. Debe ser autoexplicativo, o sea, no se requiere explicar la intencin del indicador y contextualizado, o sea, que se indique tiempo y espacio donde se medir.
En quien se est midiendo: Usuarios solicitantes

Cual es la medicin: % de solicitudes respondidas

Universo o contexto: Respecto a solicitudes ingresas

En el cuadro siguiente se pueden observar diferentes ejemplos de nombres correctos e incorrectos con las razones de su condicin:
Objetivo Nombre del indicador
Est bien?

Razn Es correcto que la anemia es indicador de condicin nutricional, por lo tanto, los nacientes presentarn anemia. Pero no se indica respecto a que se compara: al total de nios del programa?, al total de la poblacin embarazada? Se entiende a primera lectura (autoexplicativo) y el contexto son el total de NN en ese rango etreo

Familias, habitantes de las AUP en el programa, han mejorado su condicin nutricional Complemento Alimenticio y Suplementos de micronutrientes entregados a Nios/as (NN) entre 6 meses y 2 aos de edad Consejos Municipales de Prevencin de Violencia, han sido constituidos o fortalecidos Productores y empresarios acceden a financiamiento crediticio para actividades productivas Las adultos mayores (AM) de 70 aos cuentan con pensin bsica universal (PBU)

% embarazadas del programa con anemia =

% de NN entre 6 meses y 2 aos de edad inscritos en programa, que reciben complemento Alimenticio sobre total de NN en rango etreo % de Con. Municipales que estn desarrollando el Plan de Prevencin de Violencia, sobre el total programado= % de ideas de productores y empresarios financiadas con crdito= % de AM de 70 aos o ms cuentan con PBU sobre el total de AM de 70 aos o ms que viven en municipios seleccin=

Es autoexplicativo ya que desarrollar plan implica que estn funcionando como Consejo, y es contextualizado ya que hace referencia a lo programado

No se pueden financiar ideas, sino proyectos, por lo tanto no es autoexplicativo y no se indica comparacin: son todos los que postulan?, son todos los que tienen la necesidad? Se entiende a primera lectura, siglas estn en objetivo y el contexto son los AM inscritos en el programa

Cmo se construye un Indicador de Desempeo?

Construir las Frmulas para cada indicador

Una Formula o algoritmo es un conjunto ordenado y finito de operaciones que permite hallar la solucin de un problema. La frmula est en funcin de la poblacin donde se quiere medir y en funcin de las variables involucradas: una referida al programa y otra como referencia para poder comparar.

Frmula = (Usuarios + Variable del programa + variable de referencia)

Las frmulas ms utilizadas para medir objetivos son: i) el porcentaje, ii) el promedio, iii) la tasa y iv) los ndices. A continuacin se describen cada una de estas frmulas:

Qu es un porcentaje?
Un porcentaje es una forma de expresar un nmero como una fraccin de 100 (por ciento, que significa de cada 100), o sea, permite relacionar el universo poblacional con la parte de ese universo donde se est midiendo. Tambin se puede decir que un porcentaje es una razn entre dos variables con una misma unidad de medida. Por esta razn es una buena frmula para medir cobertura o focalizacin de un programa.

En tiempo y espacio

Fraccin (35) Adultos mayores planificados atender

Universo (100) Adultos mayores del pas

Cobertura

Respecto a

Cmo se construye un Indicador de Desempeo?

10

Objetivo Familias, habitantes de las AUP en el programa, han mejorado su condicin nutricional Complemento Alimenticio y Suplementos de micronutrientes entregados a Nios/as (NN) entre 6 meses y 2 aos de edad Consejos Municipales de Prevencin de Violencia, han sido constituidos o fortalecidos

Nombre del indicador % de NN menores de 5 aos con retardo del crecimiento respecto al total de NN atendidos=
NN= nios y nias

Frmula (N de NN menores de 5 aos con baja talla/edad en ao n/ N total de NN atendidos por el programa en ao n) x 100 (N de NN entre 6 meses y 2 aos de edad inscritos en el programa, que reciben complemento alimenticio en ao n / N total de NN mayores 6 meses y menores de 2 aos en ao n) x 100 (N de Consejos Municipales que estn desarrollando el Plan de Prevencin de Violencia ao n /N Total de Consejos Municipales que se ha programado desarrollen el Plan de Prevencin de Violencia ao n)x 100 (N de iniciativas financiadas con crdito en ao n / N total solicitudes de financiamiento con crdito en ao n)x 100 (N de AM de 70 priorizados que cuentan con PBU ao n/ N total de adultos mayores de 70 que viven en los municipios ao n) x 100 Todas las frmulas indican el tiempo en que se medir, el usuario, la variable a medir y la variable de referencia

% de NN entre 6 meses y 2 aos de edad inscritos en programa, que reciben complemento Alimenticio sobre total de NN en rango etreo= % de Con. Municipales que estn desarrollando el Plan de Prevencin de Violencia, sobre el total programado=

Productores y empresarios acceden a financiamiento crediticio para actividades productivas Las adultos mayores (AM) de 70 aos cuentan con pensin bsica universal (PBU)

% de iniciativas de productores y empresarios financiadas con crdito respecto a las solicitadas= % de AM de 70 aos o ms cuentan con PBU sobre el total de AM de 70 aos o ms que viven en municipios seleccin=

Qu es una Tasa de Variacin?

Se define como la razn entre una misma variable pero en perodos diferentes

Por ejemplo: Tasa de variacin de las exportaciones de miel, la que matemticamente se puede calcular de dos formas 1.
Total exportaciones de miel ao t Total exportaciones de miel ao t-1

-1

x 100

2.

Total exportaciones de miel ao t Total exportaciones de miel ao t-1 Total exportaciones de miel ao t-1

x 100

Cmo se construye un Indicador de Desempeo?

11

Si reemplazamos los datos genricos por datos reales se tiene: Total de exportaciones de miel ao 2009= 400 toneladas Total de exportaciones de miel ao 2008 375 toneladas

1.

400 ton miel exportada ao 2009 375 ton miel exportada ao 2008

-1

x 100

400/375=1,067

1,067 1=0,067

0,067 x 100=6,67

2.

400 ton miel exportada ao 2009 375 Ton miel exportada ao 2008 375 ton miel exportada ao 2008

x 100

400-375=25

25/375=0,067

0,067x100=6,67

El resultado indica que la exportacin de miel creci en un 6,25 % entre el ao 2008 y 2009. El resultado tambin podra dar negativo ya que si el ao de medicin, en este caso 2009, tiene un valor ms bajo que el ao base, 2009, se mostrar una disminucin de las exportaciones.

Algunos ejemplos de Tasas de variacin:

Objetivo Contribuir a que las Personas habitantes en AUP mejoren sus condiciones de vida incluido el ejercicio ciudadano Personas, preferentemente jvenes y mujeres jefas de hogar protegieron temporalmente los ingresos de los hogares pobres Productores y empresarios inscritos en el programa, mejoraron sus niveles de productividad y competitividad Nombre del indicador Tasa de variacin de ingresos monetarios y no monetarios de personas habitantes de AUP = Frmula ((Monto de ingresos monetarios y no monetarios de personas habitantes de AUP en ao n / Monto de ingresos monetarios y no monetarios de personas habitantes de AUP en ao base)-1)x 100 (Monto de ingresos del hogar de los beneficiarios en el ao n / monto de ingresos del hogar de los beneficiarios al incorporarse al programa) 1) x 100 ((Monto de produccin exportada en empresas apoyadas por programa en ao n / Monto de produccin exportada en empresas apoyadas por programa en ao base)-1)x 100

Tasa de variacin de los ingresos del hogar respecto a la situacin al momento de incorporarse al programa Tasa de variacin de monto de produccin exportada=

Cmo se construye un Indicador de Desempeo?

12

Qu es un promedio?
El Promedio o tambin llamada media aritmtica de un conjunto finito de nmeros, es igual a la suma de todos sus valores dividida entre el nmero de sumandos.
a

+ a2. + an
n

Promedio = En un ejemplo donde se calcula el costo promedio de atencin por paciente, se tiene la siguiente frmula:

monto($) Promedio = de pacientes

gastado en ao t = atendidos en ao t

853.000 = 4.352 ($/paciente) 196

Unidades

Variables

Tambin se puede decir que es una relacin entre dos variables con distinta unidad de medida. El promedio se utiliza generalmente para determinar tiempos promedio y costos promedio.

Ejemplos de promedios:
Objetivo Ejecucin de planes de los Consejos Comunales Establecimiento de las Escuelas de Convivencia en AUP Nombre del indicador Costo promedio de la ejecucin de los planes de trabajo, desagregado por consejo= Costo promedio de cada escuela por NNA participante de la Escuela, desagregado por AUP= Tiempo ocupado en ejecucin de obras respecto al tiempo programado= Frmula (Monto en dlares, gastado en la ejecucin de los planes en el ao / Presupuesto total ejecutado en el ao) (Monto en dlares, gastado en la ejecucin de las escuelas en el ao n / N de NNA participantes en el ao n) N de das ocupados en ejecucin de obras en ao n/ N de das programados en ejecucin de obras en ao n)x100

Ejecucin de obras de infraestructura comunitaria

Cmo se construye un Indicador de Desempeo?

13

Qu son los ndices?

Un ndice o nmero ndice es una medida estadstica que permite estudiar las fluctuaciones o variaciones de una magnitud o de ms de una en relacin al tiempo o al espacio. Dicho de otra forma, corresponde a un valor que se toma como base o punto de referencia y que tiene por objetivo medir las variaciones de un fenmeno i) econmico (precios, valores, etc.), ii) social (calidad de vida, desarrollo humano, grado de satisfaccin de usuarios) o iii) Tecnolgico (adopcin de un itinerario tcnico; adopcin tecnolgica, etc.), entre otros. Para una determinada variable estadstica cuya evolucin se pretende estudiar, se denominar: Periodo inicial o base, a aquel momento del tiempo sobre el que se va comparando la evolucin de la magnitud o variable estadstica Periodo de comparacin, a aquel momento del tiempo en el que el valor de la magnitud se compara con el del periodo base. El ndice en el perodo base toma el valor 100, si el valor es menor a 100 est indicando una evolucin negativa y si toma valor mayor a 100 indica una evolucin positiva.

A continuacin se presentan a modo de ejemplo 3 tipos de ndices El ndice de desarrollo humano (IDH): Es una medicin por pas elaborada por el (PNUD). Se basa en un indicador social estadstico compuesto por tres parmetros: i) Vida larga y saludable (medida segn la esperanza de vida al nacer); ii) Educacin (medida por la tasa de alfabetizacin de adultos y la tasa bruta combinada de matriculacin en educacin primaria, secundaria y superior, as como los aos de duracin de la educacin obligatoria) y iii) Nivel de vida digno (medido por el PIB per cpita en dlares) El ndice de Precios al Consumidor (IPC): Es un indicador o variable estadstica que permite conocer cunto se ha encarecido o abaratado con el paso del tiempo el precio del conjunto de artculos que constituyen el consumo familiar. Por ejemplo en Chile, est basado en 57 artculos de consumo, incluidos en la cesta de la compra representativa del consumo familiar: alimentacin, transporte, educacin, etc. Si, por ejemplo, el ndice es hoy un 3% mayor que hace un ao, ese aumento indica que para comprar hoy los mismos artculos de consumo que hace un ao hemos de gastar un 3% ms de dinero. Por tanto, para no empobrecernos hemos de ganar un 3% ms que hace un ao. ndice de adopcin tecnolgica: Existen ndices cualitativos, estos corresponden a conceptos que no son observables directamente como por ejemplo la adopcin tecnolgica. Un ndice cualitativo siempre da como resultado un nmero o proporcin.

Cmo se construye un Indicador de Desempeo?

14

Por ejemplo: Qu porcentaje de productores adopt en forma ptima las normas tcnicas de produccin de un cultivo? a) Se define un conjunto de prcticas para el cultivo que de ser aplicadas por los productores. b) Se considerar que existe adopcin tecnolgica de los productores cuando adoptaron a lo menos el 85% de las recomendaciones tcnicas.

Recomendaciones tcnicas Uso de semilla certificada Dosis de nitrgeno, fsforo y potasio aplicada Frecuencia de aplicacin de fertilizantes Aplicacin de matamalezas Aplicacin de 3 riegos en el perodo de desarrollo

c) A partir de lo anterior de elabora y aplica una encuesta a una muestra representativa de productores. d) Los resultados de la encuesta se evalan asignando un valor 10 a los productores que adoptan; si estn bajo ese valor quiere decir que adoptaron medianamente o no adoptaron; si estn sobre ese valor quiere decir que adoptaron en su totalidad las recomendaciones tcnicas.

Establecer Meta y Lnea base

Una vez establecidos los indicadores, especificando su nombre y frmula, se requiere definir una meta y una lnea base lo que permitir emitir un juicio sobre el avance o retroceso de los objetivos del programa o proyecto.

Qu es la meta, la lnea base y como se relacionan con el indicador?

Las metas Constituyen la expresin concreta y Las metas responden a la cuantificable de los logros que se planea alcanzar en un pregunta: determinado periodo de tiempo con relacin a los Cunto lograremos y cuando? objetivos previamente definidos. La meta es una decisin tcnico-poltica ya que son los gerentes pblicos, los que deben definirlas de acuerdo a las capacidades institucionales, los recursos disponibles y las condiciones del entorno. Para definir una meta, primero debo saber la situacin actual o lnea base, o sea, el resultado de la aplicacin de la formula del indicador con los valores del momento de inicio del programa o proyecto. Es posible que no se cuente con esa informacin pero se puede obtener en el siguiente perodo de medicin o utilizar un % de avance del logro a partir del anlisis de capacidades que realice la gerencia del programa. Sabiendo cual es la lnea base y realizando la medicin del indicador en un tiempo determinado, entonces recin se puede emitir un juicio sobre el avance o retroceso respecto a la meta

Cmo se construye un Indicador de Desempeo?

15

propuesta. Reiterando, el indicador no opina, solo mide, el juicio se puede hacer comparando situacin inicial y meta. Como se observa en el siguiente cuadro, la meta se puede desglosar en metas parciales que normalmente son acumulativas. O sea, en el ejemplo, el acumulado en ao 1 es lo que se espera lograr durante ese ao, el acumulativo en el ao 2 es la suma de lo acumulado en ambos aos y as sucesivamente. El total corresponde a la meta final definida para el perodo.

Objetivos Nombre Las personas adultas mayores de 70 o ms cuentan con pensin bsica universal Las personas aumentaron su nivel de ingresos

Indicadores Frmula (N de AM de 70 priorizados que cuentan con PBU ao n/ N total de adultos mayores de 70 que viven en los municipios ao n) *100 (PEA con ms de 2 salarios mnimos en ao n / Total PEA) x 100
PEA= poblacin econmicamente activa

Lnea Base

Meta Acum Ao 1 Acum Ao 2 Acum Ao 3 Total

% de adultos mayores (AM) de 70 aos que reciben pensin bsica universal (PBU) sobre el total de AM de 70 que viven en los municipios seleccionados= % de personas con ms de dos salarios mnimos respecto a la situacin a inicio del programa=

41%

45%
(4.321 AM)

66%
(6.457 AM)

76%
(7.386 AM)

83%
(8.25 1 AM)

29%

33%

45%

55%

60%

Consejos Municipales de Prevencin de Violencia, han sido constituidos o fortalecidos Usuarios utilizan los servicios de asesora y Asist. Tcnica

% de Consejos Municipales (CM)constituidos, sobre el total programado=

( N de CM que estn constituidos en el ao n / N total CM programado en ao n)x 100 (N de MYPES con serv asesora y A.T en ao n / N total de MYPES participantes del programa ao n) x 100

6,3% (2 CM)

15% (6 CM)

30% (12 CM)

47% (19 CM)

62% (25 CM)

% de MYPES participantes del programa con Servicios de asesora y Asistencia tcnica.=

10% 578
MYPES

25% 1.444
MYPES

47% 2.716
MYPES

73% 4.218
MYPES

90% 5.200
MYPES

Acum= acumulacin del avance de meta

En el caso de la emisin de un juicio a nivel de resultados o de impacto es comn la realizacin de estudios que permitan determinar la brecha entre la situacin contrafactual (situacin sin programa o proyecto) y la situacin despus de la aplicacin del programa como se observa en la figura siguiente:

Cmo se construye un Indicador de Desempeo?

16

Y y2
Situacin inicial

B A

Evolucin con programa

Logro
y1
A C A Z Evolucin natural sin programa Cmo sabemos que esta en y1? (Situacin Contrafactual)

y0
Situacin anterior (histrica)

t0

t1 T

Estos estudios son complejos ya que muchas veces no hay continuidad en la recepcin de bienes y servicios por para de la poblacin usuaria o - lo ms difcil no se encuentran casos que sirven como control, o sea, usuarios similares a los incorporados en el programa pero que no estn participando de los beneficios del programa. Lo que hay que determinar es la superficie A-B-C (ver grfico anterior), independiente de la superficie A-B-Z, que correspondera a la evolucin normal. Si existen antecedentes histricos, hipotticamente se podra hacer una proyeccin de la situacin de los usuarios sin proyecto, pero esto no representa los riesgos que pueden sufrir el programa o proyecto. Con esto se quiere decir que medir impacto no es fcil, es de alto costo y hay que realizar un trabajo muy riguroso, por lo tanto, estos estudios se deben hacer solo cuando corresponde.

Establecer Frecuencia de medicin (seguimiento)

Una vez establecidos los indicadores es necesario determinar la frecuencia de medicin para realizar el seguimiento de estos indicadores. Si se mira con los ojos del equipo de seguimiento y evaluacin debera medirse tantas veces como sea posible y si se mira desde los equipos que hacen la intervencin pblica debera medirse la menor cantidad de veces como sea posible. Esta ltima posicin es la recomendable, ya que la experiencia indica que cuando se exigen una alta frecuencia de medicin, la informacin capturada es de mala calidad y los equipos de S&E son aislados por los equipos que hacen la intervencin pblica. Teniendo en consideracin lo anterior, los factores que deben ser considerados en la frecuencia de medicin de los indicadores normalmente son: Las necesidades de uso de la informacin generada por los indicadores (proceso de toma de decisiones)

Cmo se construye un Indicador de Desempeo?

17

Tiempo estimado en que se producirn los resultados del programa en los beneficiarios Disponibilidad de informacin cuando sta es obtenida o proporcionada por fuentes externas Compromisos de cuenta pblica o de informar resultados de la gestin (Ministerios rectores como Hacienda o Planificacin)

Finalmente
Se ha realizado una revisin del uso de los indicadores, de los tipos de indicadores utilizados para medir desempeo y de los pasos para construirlos incluyendo las sus frmulas ms comunes, las metas y la lnea base. De todos los conceptos y prcticas sealadas es importante resaltar tres aspectos que aseguraran una buena medicin: 1. La socializacin de los conceptos y prcticas. No ser posible implementar sistemas de medicin si los funcionarios pblicos que hacen la intervencin no se involucran y manejan adecuadamente el uso de indicadores. 2. La definicin de indicadores debe sustentarse en los procesos reales con que se realiza la intervencin pblica ya que de esta manera se estarn midiendo los aspectos relevantes y se contar con las fuentes de informacin necesarias para abastecer a los indicadores. 3. Lo que se mide se puede mejorar. Esto es lo que deben comprender los actores involucrados en generar valor pblico. La nica forma de saber si estamos encaminados a lograr la situacin deseada es midiendo lo objetivos con los indicadores de desempeo.

Cmo se construye un Indicador de Desempeo?

18

Glosario
Factor relevante: corresponde a la o las palabras claves que estn sealadas en la narracin del objetivo. Normalmente en un objetivo se indica la poblacin objetivo (sobre la cual se quiere medir) acompaada del logro esperado. Este ltimo corresponde al factor relevante. Frmula: o algoritmo es un conjunto ordenado y finito de operaciones que permite hallar la solucin de un problema. La frmula est en funcin de la poblacin donde se quiere medir y en funcin de las variables involucradas: una referida al programa y otra como referencia para poder comparar. Indicadores: Es una herramienta de medicin de objetivos. Solo mide, no opina. Indicador de Calidad: mide los atributos, capacidades o caractersticas que deben tener los bienes y servicios para satisfacer los objetivos. Es una dimensin de la eficacia. La calidad se puede medir mediante la oportunidad, la accesibilidad, la percepcin de los usuarios y la presin en la entrega de los servicios. Indicador de Economa: Mide la capacidad del programa/institucin para administrar, generar o movilizar adecuadamente los recursos financieros. Es una dimensin de la eficiencia. A este indicador no le interesan los objetivos, solo ve costos. Indicador de Eficacia: Mide el grado de cumplimiento de los objetivos de un programa o proyecto. Dicho de otra forma, mide los logros entre lo planificado y lo obtenido. O en que medida se esta cumpliendo con sus objetivos, sin referirse al costo de los mismos Indicador de Eficiencia: Mide la relacin entre el logro obtenido con respecto a los insumos o recursos utilizados. La eficiencia se puede medir mediante la productividad media y los costos de produccin. ndice: o nmero ndice es una medida estadstica que permite estudiar las fluctuaciones o variaciones de una magnitud o de ms de una en relacin al tiempo o al espacio. Dicho de otra forma, corresponde a un valor que se toma como base o punto de referencia y que tiene por objetivo medir las variaciones de un fenmeno i) econmico (precios, valores, etc.), ii) social (calidad de vida, desarrollo humano, grado de satisfaccin de usuarios) o iii) Tecnolgico (adopcin de un itinerario tcnico; adopcin tecnolgica, etc.), entre otros. Lnea base: Corresponde a la situacin en que se encuentra la poblacin objetivo al inicio del programa o proyecto. Tambin se puede decir que corresponde al resultado de la aplicacin de la formula del indicador con los valores del momento de inicio del programa o proyecto. Metas: Constituyen la expresin concreta y cuantificable de los logros que se planea alcanzar en un determinado periodo de tiempo con relacin a los objetivos previamente definidos. La meta es una decisin tcnicopoltica ya que son los gerentes pblicos, los que deben definirlas de acuerdo a las capacidades institucionales, los recursos disponibles y las condiciones del entorno. Porcentaje: es una razn entre dos variables con una misma unidad de medida. Por esta razn es una buena frmula para medir cobertura o focalizacin de un programa. Promedio: o tambin llamada media aritmtica de un conjunto finito de nmeros, es igual a la suma de todos sus valores dividida entre el nmero de sumandos. Tasa de Variacin: Se define como la razn entre una misma variable pero en perodos diferentes

Cmo se construye un Indicador de Desempeo?

19

Cmo se construye un Indicador de Desempeo?

20