You are on page 1of 71

diRECTORIO

Consejo Nacional de Evaluacin


de la Poltica de Desarrollo Social

Investigadores acadmicos Mara del Rosario Crdenas Elizalde
Universidad Autnoma Metropolitana

Fernando Alberto Corts Cceres


El Colegio de Mxico

Agustn Escobar Latap


Centro de Investigaciones y Estudios
Superiores en Antropologa Social-Occidente

Salomn Nahmad Sittn


Centro de Investigaciones y Estudios
Superiores en Antropologa Social-Pacfico Sur

John Scott Andretta


Centro de Investigacin y Docencia Econmicas

Graciela Mara Teruel Belismelis


Universidad Iberoamericana


Secretara Ejecutiva

Gonzalo Hernndez Licona


Secretario Ejecutivo

Ricardo C. Aparicio Jimnez


Director General Adjunto de Anlisis de la Pobreza

Thania Paola de la Garza Navarrete


Directora General Adjunta de Evaluacin

Edgar A. Martnez Mendoza


Director General Adjunto de Coordinacin

Daniel Gutirrez Cruz


Director General Adjunto de Administracin


Revisin tcnica



Edgar A. Martnez Mendoza


Jos Manuel del Muro Guerrero
Freddy Damin Urbina Romero
Gabriela Gutirrez Salas
Israel Larry Escobar Blanco

Manual para el Diseo y la Construccin de Indicadores. Instrumentos principales para el monitoreo de programas sociales de Mxico
Primera edicin: septiembre de 2013
Consejo Nacional de Evaluacin de la Poltica de Desarrollo Social
Boulevard Adolfo Lpez Mateos 160
Colonia San ngel Inn
CP 01060
Delegacin lvaro Obregn
Mxico, Distrito Federal
Impreso y hecho en Mxico
Printed and made in Mexico
ISBN 978-607-95986-6-2
Citacin sugerida:
Consejo Nacional de Evaluacin de la Poltica de Desarrollo Social. Manual para el Diseo y la
Construccin de Indicadores. Instrumentos principales para el monitoreo de programas sociales
de Mxico. Mxico, DF: CONEVAL, 2013.

CONTENIDO
Glosario 6
Introduccin 9
CAPTULO 1
Qu es un indicador? 11
CAPTULO 2
Indicadores 13
1. Datos e indicadores 14
CAPTULO 3
mbitos de desempeo de los indicadores
y sus dimensiones 17
1. mbitos de desempeo del indicador 18
2. Dimensiones y mbitos de desempeo 20
3. Restricciones 26
CAPTULO 4
Pasos para construir un indicador 29
1. Revisar la claridad del resumen narrativo 30
2. Identificar los factores relevantes 33
3. Establecer el objetivo de la medicin 36
4. Plantear el nombre y la frmula de clculo 39
5. Determinar la frecuencia de medicin del indicador 52
6. Seleccionar los medios de verificacin 53
CAPTULO 5
Criterios del CONEVAL para la valoracin
de los indicadores

57

CAPTULO 6
Establecimiento de la lnea base y LAS metas
63
1. Lnea base 64
2. Metas 65
CAPTULO 7
INDICADORES, PRESUPUESTO Y TOMA DE DECISIONES

63

Referencias bibliogrficas 67

Manual para el Diseo y la Construccin de Indicadores

GLOSARIO

Actividades:

Principales acciones emprendidas mediante las


cuales se movilizan los insumos para generar
los bienes o servicios que produce o entrega el
programa.

Adecuado:

Criterio para la eleccin de indicadores que consiste en proveer suficientes bases para medir. Un
indicador no debe ser ni tan indirecto ni tan abstracto que convierta en una tarea complicada y
problemtica la estimacin del desempeo.

mbito de desempeo:

Aspectos del proceso que deben ser medidos en


cada nivel de objetivo.

Aportacin marginal:

Criterio para la eleccin de indicadores que consiste en que, en caso de que exista ms de un
indicador para medir el desempeo en determinado nivel de objetivo, el indicador debe proveer
informacin adicional en comparacin con los
otros indicadores propuestos.

Calidad: Dimensin de indicadores que busca evaluar


atributos de los bienes o servicios producidos por
el programa respecto a normas o referencias externas.

Claro:

Criterio para la eleccin de indicadores basado


en la precisin y la claridad. El indicador debe
ser tan directo e inequvoco como sea posible, es
decir, entendible.

Componentes:

Bienes y servicios pblicos que produce o entrega el programa para cumplir con su propsito;
deben establecerse como productos terminados
o servicios proporcionados.

Dimensin del indicador:

Aspecto del logro del objetivo a cuantificar, esto


es, la perspectiva con que se valora cada objetivo. Se consideran cuatro dimensiones generales
para los indicadores: eficacia, eficiencia, calidad
y economa.

Economa:

Dimensin de indicadores que mide la capacidad del programa que lo ejecuta para recuperar los costos erogados, ya sea de inversin o de
operacin.

Instrumentos principales para el monitoreo de programas sociales de Mxico

Econmico:

Criterio para la eleccin de indicadores referido


a los costos e implicaciones para su costo y medicin; se deben elegir aquellos indicadores disponibles a un costo razonable.

Eficacia:

Dimensin de indicadores que mide el nivel de


cumplimiento de los objetivos.

Eficiencia:

Dimensin de indicadores que mide qu tan bien


se han utilizado los recursos en la produccin de
los resultados.

Fin:

Descripcin de cmo el programa contribuye,


en el mediano o largo plazo, a la solucin de un
problema de desarrollo o a la consecucin de
los objetivos del Plan Nacional de Desarrollo y los
programas derivados.

Frecuencia de medicin:

Periodicidad con que se realiza la medicin del


indicador.

Indicador de gestin:

Ubicado en el nivel de componente o actividad


en la Matriz de Indicadores para Resultados. En el
marco de la Ley General de Desarrollo Social, este
tipo de indicador deber reflejar los procedimientos y la calidad de los servicios de los programas.

Indicador de resultado:

Ubicado en el nivel de fin o de propsito en la


Matriz de Indicadores para Resultados. En el marco de la Ley General de Desarrollo Social, esta clase de indicadores deber reflejar el cumplimiento
de los objetivos sociales de los programas.

Indicador proxy:

Tambin llamado indicador indirecto, se usa ante


la imposibilidad de medir lo que efectivamente
es de importancia. El indicador mide una variable distinta a la que nos interesa de manera especfica, pero presenta una relacin lo ms directa posible con el fenmeno en estudio.

Indicador:

Herramienta cuantitativa o cualitativa que permite mostrar indicios o seales de una situacin,
actividad o resultado.

Lnea base:

Valor del indicador que se establece como punto de partida para evaluarlo y darle seguimiento.


Matriz de Indicadores
Construida con base en la Metodologa de Marpara Resultados:
co Lgico, la cual es una herramienta de monitoreo que permite entender y mejorar la lgica
interna y el diseo de los programas presupues7

Manual para el Diseo y la Construccin de Indicadores

tarios. Comprende la identificacin de los objetivos de un programa (resumen narrativo), sus


relaciones causales, indicadores, medios de verificacin y supuestos o riesgos que pueden influir
en su xito o fracaso.

Medios de verificacin:

Muestran las fuentes de informacin que se utilizarn para medir los indicadores y verificar que
los objetivos del programa (resumen narrativo)
se lograron.

Meta:

Permite establecer lmites o niveles mximos de


logro; comunica el nivel de desempeo esperado por la organizacin y permite enfocarla hacia
la mejora.

Metodologa
de Marco Lgico:

Herramienta de planeacin estratgica basada


en la estructuracin y solucin de problemas que
permite organizar de manera sistemtica y lgica los objetivos de un programa y sus relaciones
de causalidad; identificar y definir los factores externos al programa que pueden influir en el cumplimiento de los objetivos; evaluar el avance en
la consecucin de stos, as como examinar el
desempeo del programa en todas sus etapas.
Esta metodologa facilita el proceso de conceptualizacin y diseo de programas y permite fortalecer la vinculacin de la planeacin con la
programacin.

Monitoreable:

Criterio para la eleccin que consiste en que el


indicador debe poder sujetarse a una comprobacin independiente.

Propsito:

Resultado directo a ser logrado en la poblacin


objetivo a consecuencia de la utilizacin de los
componentes (bienes y servicios pblicos) producidos o entregados por el programa.

Relevante:

Criterio para la eleccin con base en que el indicador provee informacin sobre la esencia del
objetivo que se quiere medir; debe estar definido
sobre lo importante, con sentido prctico.

Instrumentos principales para el monitoreo de programas sociales de Mxico

INTRODUCCIN
La Matriz de Indicadores para Resultados (MIR) se ha constituido en la
base para el diseo de indicadores en Mxico. La Metodologa de Marco Lgico (MML) plataforma para la construccin de la MIR permite
alinear los objetivos de los programas presupuestarios con los objetivos
estratgicos de las dependencias y entidades federales y con el Plan Nacional de Desarrollo. La MIR es un instrumento clave para la planeacin
dado que proporciona informacin para el monitoreo y evaluacin de
resultados.
Para el ejercicio fiscal 2012, los 734 programas del Gobierno Federal contaban con la MIR y con 6,708 indicadores para monitorear los objetivos
de dichos programas. Ello facilit la identificacin de los resultados y la
incorporacin de indicadores para supervisar su desempeo.
Los indicadores mencionados se dividen en dos grupos: de resultados,
que cuantifican la solucin de las problemticas especficas que atiende
un programa, y de servicios y gestin, que dan seguimiento a los productos y a las principales actividades de los programas.
A pesar de que el monitoreo y la evaluacin de los programas ha contribuido, desde 2007, a precisar los objetivos de los programas y establecer
indicadores ms especficos, es indudable que la construccin de estos
ltimos resulta el aspecto que presenta los mayores retos.
El manual que aqu se presenta es un instrumento diseado para aportar
a funcionarios de gobierno y pblico en general, informacin clara y sencilla sobre el diseo y la construccin de indicadores para el monitoreo
de programas sociales.

Captulo 1
Qu es un indicador?

Manual para el Diseo y la Construccin de Indicadores

En la vida diaria es comn interactuar con diferentes indicadores sin que necesariamente se les
denomine as: las seales de trnsito, la aguja de
reloj, las flechas de la salida de emergencia, los
sealamientos de algn edificio gubernamental,
entre otros.

Un indicador es una
herramienta que muestra
indicios o seales de
una situacin, actividad o
resultado.

Todos estos indicadores proporcionan informacin de manera simple, precisa y sin ambigedad;
por ejemplo, sabemos en qu momento debemos avanzar o detener el
automvil mediante las luces del semforo; conocemos la hora precisa
por la posicin de las manecillas del reloj; y podemos ubicar la salida de
emergencia de algn lugar gracias a la sealizacin adecuada. Para
entender estos indicadores, en su mayora, no es necesario que una persona nos explique su significado; slo requerimos un poco de informacin para interpretarlos de manera lgica.
Un indicador es una herramienta cuantitativa o cualitativa que muestra
indicios o seales de una situacin, actividad o resultado; brinda una seal relacionada con una nica informacin, lo que no implica que sta
no pueda ser reinterpretada en otro contexto. Imaginemos el caso de un
semforo. Para un automovilista, la luz roja le indica que debe detener el
carro; en cambio, para los peatones es una seal de que puede cruzar
la calle. En este sentido, la informacin que ofrece el indicador resulta
confusa? No. El semforo que detiene a los automviles no da la seal
para que los peatones crucen la calle; stos lo hacen una vez que los
automviles paran. La funcin del semforo no es indicar a la gente que
puede cruzar la calle; de ello se encargan los semforos peatonales.
Cada indicador brinda informacin relevante y nica respecto a algo:
una seal que debe ser interpretada de una nica manera, dado que tiene un solo objetivo. Por ejemplo, la luz roja de un semforo tiene como objetivo indicar cundo un automvil debe detenerse; el algo que se quiere
mostrar. Para entender ese algo, debe comprenderse que los indicadores
tienen un objetivo concreto, y dado que ste es nico, la informacin relacionada con el indicador es nica.

12

Captulo 2
Indicadores

Manual para el Diseo y la Construccin de Indicadores

En la MIR, los instrumentos para el monitoreo de los avances en cada


objetivo se denominan indicadores y su finalidad es mostrar informacin
relacionada con el desempeo de dicho objetivo.
Los indicadores cumplen la misma funcin que los de carcter cotidiano:
mostrar informacin concerniente a un objetivo nico; deben proporcionar informacin clara y precisa sobre el desempeo y el cumplimiento
de los objetivos establecidos en la MIR. Dado que los objetivos son nicos
dentro de la matriz, tambin lo sern los indicadores (aunque puede
haber un cierto nmero que den cuenta de un mismo objetivo). Cada
indicador monitorea el objetivo al que se encuentra asociado y slo ofrece informacin relativa a ste. Aunque conceptualmente la construccin
de indicadores es sencilla, es necesario hacer algunas aclaraciones sobre qu son y qu no son.

1. Datos e indicadores
Un indicador es un instrumento que provee evidencia de una determinada condicin o el logro de ciertos resultados. Esta informacin puede
cubrir aspectos cuantitativos y cualitativos sobre los objetivos de un programa o proyecto.
Los indicadores cotidianos slo proporcionan informacin con un nico
dato: una direccin, un lugar, una indicacin o alguna otra seal; para el
objetivo al que se encuentran asociados, esta informacin es suficiente.
Sin embargo, los indicadores necesariamente deben representar la relacin entre dos o ms variables.
Por qu? Supongamos que el programa Capacitando tiene la finalidad de capacitar al
Un indicador debe
mayor nmero de personas en un ao y un
representar la relacin entre
peridico local da a conocer los resultados de
dos o ms variables. Un
dicho programa en 2010 y reporta lo siguiente:
nmero no es un indicador.
Hasta la fecha se han capacitado 10,000 personas, lo cual representa una gran avance en
temas de capacitacin. Es adecuada esta
afirmacin? El nmero de personas capacitadas es un elemento suficiente para manifestar que se ha tenido un gran avance? Al volver a
leer y analizar la nota, se advierte que dicha afirmacin no es justa con
el desempeo del programa, puesto que no se muestran los avances
reales ni los resultados. La afirmacin est sujeta al cuestionamiento: qu

14

Instrumentos principales para el monitoreo de programas sociales de Mxico

porcentaje representan estos capacitados respecto de la poblacin que


pretende beneficiar el programa y respecto de la poblacin del pas?
Con la informacin proporcionada (se han capacitado 10,000 personas) no se puede dar una respuesta sensata a la pregunta, dado
que no se cuenta con mayor informacin sobre el programa ni de la
poblacin que atiende. Supongamos que la poblacin del pas llegara slo a un milln, entonces las personas capacitadas representaran
apenas el uno por ciento; de ah que sera conveniente volver a preguntarnos si este porcentaje efectivamente representa un gran avance
en temas de capacitacin.
Es evidente que un nmero necesita un contexto, un punto con el cual se
pueda comparar a fin de determinar y tener bases suficientes para emitir
una opinin o un juicio acerca del desempeo. Supongamos que el mismo peridico publicara una fe de erratas para aclarar que las personas
capacitadas se refieren de manera exclusiva al poblado de gente no-capacitada, lugar donde opera el programa nicamente y que tiene una
poblacin de 18,000 personas. Con esta nueva informacin, el anlisis
anterior cambia en forma drstica. El porcentaje de capacitados ahora
representa 56 por ciento del poblado de gente no-capacitada, en lugar
del uno por ciento, si consideramos a toda la poblacin del pas. Desde
este nuevo panorama, la afirmacin de esto representa un gran avance
en temas de capacitacin recobra sentido.
Los nmeros son datos necesarios que deben reportarse; sin embargo,
no son un medio confiable ni objetivo para evaluar el desempeo de un
programa. Sin un punto de comparacin, es difcil establecer los logros, ya
que slo se conoce el estado actual de la problemtica. Cuando se busca presentar los avances de un programa, es conveniente mostrar tanto
el estado inicial como el actual de la problemtica; de esta manera, es
fcil valorar la importancia de sus resultados.
En virtud de que los nmeros proporcionan informacin que no necesariamente refleja los
resultados de los programas, es preciso tener
un punto de comparacin para la informacin que se reporta, esto es, una base sobre
la cual se pueda emitir un juicio acerca de su
desempeo. Esta base debe integrarse de in-

Cuando se relaciona una


variable con una referencia,
se obtiene un seguimiento
ms puntual de los objetivos

15

Manual para el Diseo y la Construccin de Indicadores

formacin sobre el estado inicial de la situacin y el contexto en el que


se desarrollan las variables. No debe confundirse el estado inicial con la
lnea base, concepto que analizaremos ms adelante.
Los indicadores deben representar la relacin de dos o ms variables
a fin de que sea ms fcil analizar los resultados alcanzados por un
programa. Es importante tambin que los indicadores estn contextualizados, es decir, que se describan algunas caractersticas geogrficas
o temporales que permitan al indicador reflejar respecto a qu est midiendo; en el ejemplo anterior, la fe de erratas ayud a identificar que
las personas capacitadas tenan una caracterstica particular: todas
residan en una ciudad no-capacitada; el indicador deja en claro respecto a qu variables estn midindose sus avances y en qu contexto
se deben evaluar. En resumen, un indicador debe cumplir, en principio,
con las dos siguientes caractersticas:
a) El indicador debe ser una relacin entre dos o ms variables.
b) El indicador debe estar contextualizado al menos geogrfica y
temporalmente.

16

Captulo 3
mbitos de desempeo
de los indicadores
y sus dimensiones

Manual para el Diseo y la Construccin de Indicadores

Una vez descrito qu es y qu no es un indicador, es momento de clasificarlos de acuerdo con el mbito de su medicin. Los indicadores incluidos en las MIR deben medir diferentes aspectos de los objetivos a los que
estn asociados. Si se desea valorar un programa o proyecto de manera
objetiva, es necesario que los indicadores establecidos para monitorear y
evaluar su desempeo cuantifiquen diferentes aspectos del programa, es
decir, valorarlo con diferente perspectiva.
Por qu es necesario valorar un programa con distintas perspectivas?
Hay programas en los cuales los aspectos del uso de los insumos son
ms importantes que la calidad de los bienes o servicios que entrega.
Asimismo, habr ocasiones en que es ms relevante medir el grado de
cumplimiento de los objetivos del programa que el cmo se han utilizado
los recursos econmicos. Los logros de un programa dependern de la
perspectiva con la que se valore; por lo tanto, es necesario analizar sus
actividades, bienes, servicios y resultados desde diversos ngulos para
tener una valoracin integral.

1. mbitos de desempeo del indicador


Los objetivos en la MIR se encuentran enlazados en una cadena lgica de
resultados, conocida como la lgica vertical, la cual tiene una estructura
similar a una cadena de produccin, dado que cada etapa del proceso
est encadenada en el tiempo: no pueden realizarse las etapas finales
sin haber comenzado las tareas iniciales, adems de que la complejidad
de stas se incrementa cuando ms se avanza en el proceso.

Los objetivos de los


programas estn alineados
y ordenados de manera
jerrquica.

Los programas deben estructurar sus objetivos de manera similar a las etapas del proceso de produccin, y los objetivos deben
estar encadenados e incrementar su complejidad. Esto implica que los objetivos superiores son ms complejos que los inferiores
y para poder realizar aqullos tuvieron que
cumplirse estos ltimos.

As, cada nivel de la MIR se encuentra vinculado a una etapa diferente


del proceso de produccin, por lo que cada objetivo est asociado a
una complejidad particular para su realizacin. En este sentido, se deberan medir diferentes aspectos de mayor complejidad conforme se avanza hacia el objetivo superior.

18

Instrumentos principales para el monitoreo de programas sociales de Mxico

El mbito de desempeo se define como los aspectos del proceso que


deben ser medidos en cada nivel de objetivo. Las actividades se relacionan con la gestin que realiza el programa, de la misma manera que los
componentes se vinculan a la generacin y entrega de los productos o
servicios. El propsito se refiere a los resultados concretos del programa,
mientras el fin comprende el efecto de ste sobre un objetivo de mayor
alcance en el mediano plazo. Cada nivel de la matriz se encuentra asociado a objetivos con diferente grado de complejidad, por lo que es necesario establecer indicadores que permitan monitorear distintas etapas
de la cadena de produccin.

Figura 1. mbitos de desempeo de los indicadores

Efectos

Resultados

Control directo

Influencia directa

Influencia indirecta

mbito de
desempeo

Objetivo

Fin

Propsito

Productos

Componente

Procesos

Actividades

Indicadores que permiten verificar los


efectos sociales y econmicos a los
que contribuye el programa.
Indicadores que permiten verificar
la solucin de una problemtica concreta
en la poblacin objetivo.
Inidicadores que permiten verificar
la produccin y entrega de bienes
y servicios del programa.
Inidicadores que permiten verificar
la gestin de los procesos del programa.

Insumos

Fuente: Elaboracin del CONEVAL.

Qu se debe monitorear en cada nivel de objetivo? Qu nos deben


mostrar los indicadores? En la figura 1 se delimitan los mbitos, nicamente cuatro se relacionan con los niveles de objetivos establecidos
en la MIR.

19

Manual para el Diseo y la Construccin de Indicadores

En las actividades se deben medir los procesos que realiza la institucin


para generar los productos. Se pretende verificar la gestin que emprende el programa para crear los productos, tanto aquellos que entrega a
la poblacin beneficiaria como los que utiliza el mismo programa como
insumo intermedio.
En los componentes se miden la produccin, la entrega y las caractersticas de todos los bienes y servicios que se otorgan directamente a los
beneficiarios; tambin deben incluirse los bienes generados para uso del
propio programa.
En el propsito, los indicadores deben enfocarse a medir los resultados
del programa en la solucin de una problemtica social concreta. En
principio, el propsito refleja la problemtica social que debe solucionar
el programa, su razn de ser. De esta manera, los indicadores en este
mbito de desempeo deben permitir determinar los resultados alcanzados por el programa en la resolucin de dicha problemtica.
En el fin se busca medir el efecto de la intervencin del programa en la solucin de un probleEs importante que los
ma de mayor complejidad. Los indicadores en
indicadores planteados
este mbito permiten verificar los impactos sociatengan relacin directa con
les o econmicos a los que contribuye el prograel nivel en que se encuentra
ma. A diferencia de los indicadores del propsito,
el objetivo.
los de impacto o fin no son responsabilidad directa del programa. Dada la complejidad y el alcance de estos objetivos, un programa solamente
contribuye a la solucin de una parte de la problemtica global. De
este modo, la solucin de objetivos del fin es a mediano plazo y necesita la coordinacin de varios programas o instituciones para cumplirse.

2. Dimensiones y mbitos de desempeo


Los indicadores deben permitir monitorear el logro de los objetivos a los
que se encuentran asociados; sin embargo, es posible medir diferentes
dimensiones del desempeo para un mismo objetivo. La dimensin del
indicador se define como el aspecto del logro del objetivo a cuantificar,
esto es, la perspectiva con que se valora cada objetivo. Se consideran
cuatro dimensiones generales para los indicadores: eficacia, eficiencia,
calidad y economa.

20

Instrumentos principales para el monitoreo de programas sociales de Mxico

Figura 2. Dimensiones sugeridas de los indicadores


Los indicadores
recomendados:

Cuando se mide:

Se est midiendo:

Impacto

Fin

Resultados

Propsito

Ecacia
Eciencia

Productos

Componente

Ecacia
Eciencia
Calidad

Procesos

Actividades

Ecacia
Eciencia
Economa

Ecacia

Insumos

Fuente: Elaboracin del CONEVAL.

Aunque lo ideal sera medir todas las dimensiones del logro, en la prctica esto no resulta una tarea sencilla ni econmica. Por tal motivo, en
cada nivel se recomienda medir slo algunas dimensiones, pero no es
limitativo ni debe entenderse como exclusivo. En la figura 2 se muestran
las dimensiones del logro que se sugiere sean cuantificadas en cada
nivel de la MIR y su relacin con el mbito de desempeo. Como se analizar ms adelante, la dimensin de la eficacia es la nica que se sugiere
sea medida en todos los niveles de la MIR; las dimensiones de calidad
y economa se recomiendan en productos y procesos, respectivamente,
mientras que la de eficiencia puede ser utilizada en procesos, productos
y resultados.
Dado que no todos los programas tienen los mismos objetivos, es posible
reasignar una dimensin diferente a la anterior; no obstante, hay ciertas
restricciones que deben mantenerse. Esto se describir con ms detalle
en la ltima seccin de este captulo.

21

Manual para el Diseo y la Construccin de Indicadores

Qu es un indicador de eficacia, eficiencia, calidad


o economa?
a) Indicadores de eficacia
Los indicadores de eficacia miden el grado del cumplimiento del objetivo establecido, es decir, dan evidencia sobre el grado en que se estn
alcanzando los objetivos descritos. Este tipo de indicadores son los ms
comunes dentro de las MIR.

Cuadro 1. Indicadores de eficacia


Indicadores de eficacia?
Objetivo

Propsito. La poblacin indgena en localidades


de menos de cinco mil habitantes dispone de
servicio de drenaje y saneamiento.

Indicador

Porcentaje de la poblacin indgena en localidades


de menos de cinco mil habitantes que dispone del
servicio de drenaje y saneamiento.

Objetivo

Fin. Contribuir a mejorar el ingreso de las mujeres


que habitan en las localidades rurales.

Indicador

Tasa de variacin del ingreso laboral de las mujeres


que habitan en localidades rurales.

Objetivo

Fin. Contribuir a integrar una perspectiva de gnero


en las polticas pblicas de las entidades federativas.

Indicador

Porcentaje de polticas pblicas que incorporan


una perspectiva de gnero en las entidades
federativas dado que cumplen con []

Objetivo

Actividad. Proyectos en materia de liberacin


de presos y representacin legal dictaminados.

Indicador

Costo promedio de proyectos en materia


de liberacin de presos y representacin legal
dictaminados.

Observacin
El objetivo se refiere a un problema de acceso
a servicios de drenaje, por lo cual el indicador
es apropiado para medir el grado de cumplimiento
del objetivo, porque se refiere a la proporcin de la
poblacin que dispone del servicio.
El objetivo se refiere a mejorar el ingreso, por lo cual
el indicador es apropiado para medir el grado de
cumplimiento del objetivo, porque se permite verificar
si el ingreso de las mujeres se incrementa
o disminuye.
El objetivo trata de incorporar las polticas pblicas
una perspectiva de gnero, por lo cual el indicador
es apropiado para medir el grado de cumplimiento
del objetivo, ya que se refiere a la proporcin de
polticas que integran dicha perspectiva.

El objetivo se refiere a dictaminar los proyectos


recibidos por el programa al igual que el indicador;
no obstante, el indicador es de eficiencia, no de
eficacia. El indicador no es apropiado para medir
el grado de cumplimiento del objetivo.

Fuente: Elaboracin del CONEVAL.

En virtud de que la informacin que proporcionan estos indicadores concierne al cumplimiento de los objetivos, stos pueden ubicarse en cualquiera de los niveles de la MIR. Sin embargo, estos indicadores no brindan
informacin sobre el uso de recursos o las caractersticas de los bienes y
servicios entregados. En cuanto a actividad, componente y propsito, es
necesario, dependiendo del objetivo, complementar la informacin con
algn otro indicador de diferente dimensin.

22

Instrumentos principales para el monitoreo de programas sociales de Mxico

b) Indicadores de eficiencia
Los indicadores de eficiencia miden la relacin entre el logro del programa y los recursos utilizados para su cumplimiento. Estos indicadores cuantifican lo que cuesta alcanzar el objetivo planteado, sin limitarlo a recursos econmicos; tambin abarca los recursos humanos y materiales que
el programa emplea para cumplir el objetivo especfico.

Cuadro 2. Indicadores de eficiencia


Indicadores de eficiencia
Objetivo

Actividad. Proyectos en materia de justicia evaluados


en tiempo y forma.

Indicador

Das promedio para evaluar los proyectos en materia


de justicia.

Objetivo

Propsito. La poblacin indgena en localidades


de menos de cinco mil habitantes dispone de
servicio de drenaje y saneamiento.

Indicador

Costo promedio por conectar a un hogar al sistema


de drenaje y saneamiento.

Objetivo

Actividad. Proyectos en materia de liberacin


de presos y representacin legal dictaminados.

Indicador

Promedio de proyectos dictaminados por persona


en el mes t.

Objetivo

Componente. Cursos de capacitacin en materia


de uso de energas alternativas implementados.

Indicador

Porcentaje de participantes en los cursos que


califican con nivel de satisfaccin alta y muy alta
el desempeo del curso.

Observacin
El objetivo se refiere a la evaluacin en tiempo
y forma de los proyectos, por lo cual el indicador
es apropiado para cuantificar los recursos utilizados
para cumplir el objetivo, dado que tiene que ver con
el tiempo invertido por el programa para evaluar los
proyectos.
El objetivo se refiere a un problema de acceso
a servicios de drenaje, por lo cual el indicador es
apropiado para cuantificar los recursos utilizados para
cumplir el objetivo, ya que alude al costo promedio
por conectar a un hogar al sistema de drenaje.
El objetivo se refiere a dictaminar los proyectos
recibidos por el programa, por lo que el indicador
es adecuado, puesto que trata sobre los recursos
humanos utilizados por el programa para dictaminar
un proyecto.
El objetivo se refiere a los cursos implementados por
el programa; no obstante, el indicador se relaciona
con la percepcin de los participantes respecto al
desempeo del curso y no al uso de recursos para
su realizacin, por lo que no es un indicador de
eficiencia.

Fuente: Elaboracin del CONEVAL.

Estos indicadores pueden ubicarse en los primeros tres niveles de la MIR,


pero no se recomienda su uso para medir el desempeo en cuanto al fin.
Aunque estos indicadores pueden ser establecidos en el propsito, esto
depende mucho del diseo del programa. En ocasiones, estos indicadores no son objetivos para la toma de decisiones, ya que nicamente
determinan cunto ha costado alcanzar los objetivos sealados; la valoracin de estos indicadores debe complementarse de modo necesario
con indicadores de eficacia.

23

Manual para el Diseo y la Construccin de Indicadores

c) Indicadores de economa
Los indicadores de economa miden la capacidad del programa para
administrar, generar o movilizar de manera adecuada los recursos financieros. Estos indicadores cuantifican el uso adecuado de estos recursos,
entendido como la aptitud del programa para atraer recursos monetarios
ajenos a l que le permitan potenciar su capacidad financiera y recuperar recursos financieros prestados.

Cuadro 3. Indicadores de economa


Indicadores de economa
Objetivo

Componente. Apoyos para la implementacin


de proyectos productivos alternativos entregados.

Indicador

Porcentaje de participacin financiera de gobiernos


estatales respecto a las aportaciones federales.

Objetivo

Actividad. Seguimiento de los apoyos para la


implementacin de proyectos productivos alternativos.

Indicador

Porcentaje de recursos recuperados de los


beneficiarios que incumplieron el uso de recursos.

Objetivo

Componente. Cursos de capacitacin en materia


de uso de energas alternativas implementados.

Indicador

Costo promedio de los cursos de capacitacin


en materia de uso de energas alternativas.

Observacin
El objetivo se refiere a la entrega de apoyos,
por lo cual el indicador es apropiado para medir
la capacidad del programa para administrar los
recursos financieros, dado que concierne al monto
de recursos que aportan los estados respecto a los
que proporciona la Federacin.
El objetivo se refiere al seguimiento que realiza
el programa a los apoyos, por lo cual el indicador
es apropiado para medir la capacidad del programa
para administrar los recursos financieros, ya que trata
el porcentaje de recursos que recupera el programa
de los proyectos fallidos.
El objetivo se refiere al costo promedio de los cursos
sin medir la capacidad del programa para administrar
los recursos financieros, por lo que no mide economa,
sino eficiencia.

Fuente: Elaboracin del CONEVAL.

La diferencia esencial con los indicadores de eficiencia (relacionados


con recursos econmicos) es que a los indicadores de economa no
les interesa el cumplimiento de los objetivos; nicamente observan la
administracin de los recursos financieros por parte de los responsables
del programa.
Las caractersticas particulares de estos indicadores les permiten slo ubicarse en el nivel de actividad donde se encuentran asociados, en la mayora de las veces, a objetivos como recuperacin de cartera y atraccin
de recursos externos.
d) Indicadores de calidad
stos miden los atributos, las capacidades o las caractersticas que tienen o deben tener los bienes y servicios que se producen. Los programas
establecen las caractersticas mnimas que han de cumplir los bienes y

24

Instrumentos principales para el monitoreo de programas sociales de Mxico

servicios que entrega a la poblacin; los indicadores de calidad permiten


monitorear los atributos de estos productos desde diferentes perspectivas:
la oportunidad, la accesibilidad, la percepcin de los usuarios y la precisin en la entrega de los servicios.
Oportunidad: se refiere a aquellos indicadores que proporcionan
informacin sobre la atencin que el programa brinda a sus beneficiarios. Los indicadores describen la conveniencia del tiempo
y lugar en que se realizan las acciones del programa.
Accesibilidad: se refiere a los indicadores que reflejan informacin sobre la cualidad de acceder a algn lugar. Estos indicadores describen, principalmente, si la infraestructura que
genera el programa cuenta con accesos para personas con
capacidades diferentes.
Percepcin de usuarios: es la calidad ms comn a ser cuantificada; se refiere a opinin de los beneficiarios del programa sobre
los bienes o servicios que recibieron del programa.
Precisin: cuantifican los fallos o errores que pueden ocurrir durante la gestin o la generacin de los bienes o servicios que
produce el programa.
En virtud de que se miden los atributos de los bienes y servicios que genera el programa, se recomienda implementarlos nicamente a nivel de
componente. Estos indicadores no deben ser usados para medir el desempeo de los objetivos de fin ni de propsito, debido a que la informacin que proporcionan no se refiere a los resultados del programa; slo
reflejan las caractersticas de los bienes y servicios entregados a la poblacin beneficiaria.

25

Manual para el Diseo y la Construccin de Indicadores

Cuadro 4. Indicadores de calidad


Indicadores de calidad
Objetivo

Componente. Cursos de capacitacin


y actualizacin para emprendedores en zonas
rurales implementados.

Indicador

(Percepcin) Porcentaje de emprendedores


en zonas rurales que clasifican los cursos de
capacitacin con satisfaccin alta y muy alta.

Objetivo

Propsito. Las instituciones de educacin superior


pblicas cuentan con programas educativos de
calidad.

Indicador

Porcentaje de instituciones de educacin superior


pblicas con al menos el 80 por ciento de sus
programas educativos acreditados por organismos
competentes.

Objetivo

Componente. Canastas de apoyo alimentario bsico


en zonas rurales entregadas.

Indicador

Costo promedio de las canastas de apoyo


alimentario en las zonas rurales.

Objetivo

Componente. Asesora jurdica en localidades


indgenas impartidas.

Indicador

(Oportunidad) Tiempo promedio (horas) de atencin


en la asesora.

Objetivo

Componente. Carreteras en zonas metropolitanas


rehabilitadas.

Indicador

(Precisin) Porcentaje de kilmetros de carretera


rehabilitados que sufren daos representativos antes
de noventa das despus de ser habilitados.

Observacin
El objetivo se refiere a los cursos implementados por
el programa, por lo cual el indicador es apropiado
para medir los atributos de los servicios entregados
por el programa, ya que cuantifica la proporcin
de participantes que califican como satisfactorio
el desempeo del curso.

El objetivo se refiere a que las instituciones cuenten


con programas educativos de calidad; sin embargo,
el indicador permite medir el cumplimiento del
objetivo (eficacia), pero no la calidad de los servicios
que entrega el programa.
El objetivo se refiere a la entrega de canastas con
apoyo alimentario; no obstante, el indicador permite
medir el cumplimiento del objetivo (eficacia), pero no
la calidad de los servicios que entrega el programa.
El objetivo se refiere a la imparticin de asesoras
jurdicas, por lo cual el indicador es apropiado para
medir los atributos de los servicios entregados por
el programa, dado que cuantifica el tiempo promedio
de atencin prestado en cada asesora.
El objetivo se refiere a la rehabilitacin de carreteras,
por lo cual el indicador es apropiado para medir los
atributos de los servicios entregados por el programa,
porque cuantifica la proporcin de la carretera que
sufre daos despus en un intervalo.

Fuente: Elaboracin del CONEVAL.

3. Restricciones
Es claro que no es posible medir todos los aspectos de calidad en un
mismo objetivo, por lo que es recomendable que los responsables del
programa analicen y determinen cul de ellos proporciona la informacin ms importante para los tomadores de decisiones conforme a las
definiciones formuladas.
Como se ha mencionado, no siempre es posible fijar indicadores de alguna dimensin en todos los niveles de la MIR. Puede establecerse cierta flexibilidad en la construccin de los indicadores; sin embargo, se
debe recordar que stos monitorearn y evaluarn el desempeo de los
programas sociales. Ante ello, es preciso aclarar tres cuestiones al momento de sealar las dimensiones que se pretende medir en cada nivel
de la MIR:

26

Instrumentos principales para el monitoreo de programas sociales de Mxico

a) Si los indicadores de cobertura son de eficacia, se pueden colocar indicadores de cobertura como los resultados?

Los indicadores de cobertura, aun cuando son de eficacia, se recomienda que sean medidos en el mbito de los componentes.
Dado que este tipo de indicadores se relaciona con la entrega de
los productos, nicamente muestran los avances en la cobertura,
pero no cuantifican, en la mayora de los casos, la solucin a una
problemtica especfica. Dicha solucin no depende slo de los
bienes y servicios que ofrece un nico programa, sino de diversos
factores ajenos a ste; por ejemplo, no basta que la poblacin reciba becas para poder continuar sus estudios; es necesario que
los beneficiarios tengan inters en concluir su formacin profesional. No es suficiente dar despensas alimenticias para combatir
la desnutricin; tambin es indispensable que la poblacin se
comprometa a no consumir ciertos alimentos o realizar alguna
actividad fsica.

Normalmente, existe una salvedad para incluir indicadores de


cobertura en los resultados cuando el diseo del programa est
enfocado a solucionar problemas de acceso. Aunque este diseo es muy especfico, es comn que el programa confunda el
resultado que pretende lograr con la entrega de bienes y servicios, lo que no implica que deban establecerse indicadores de
cobertura en los resultados.

b) Por qu no se pueden medir aspectos relacionados con la calidad en el propsito o fin?


Los indicadores de calidad, en particular los de percepcin, toman en cuenta la opinin de la poblacin beneficiaria o atendida acerca de los bienes o servicios que otorga el programa.
No obstante, puede considerarse una encuesta al beneficiario
un elemento suficiente para determinar el desempeo del programa? La medicin de la percepcin es una dimensin que
mide la calidad de los bienes o servicios que recibe la poblacin; sin embargo, no es fcil comprobar si los cambios en la
percepcin de la poblacin son permanentes o transitorios. Los
primeros deberan ser el tipo de cambio que un programa espera lograr con su intervencin, mientras que los segundos son

27

Manual para el Diseo y la Construccin de Indicadores

soluciones transitorias que, aunque benefician a la poblacin,


estn lejos de resolver la problemtica concreta. Los indicadores de percepcin quedan dentro de este segundo grupo; slo
permiten analizar las mejoras temporales de la poblacin, pero
no los cambios permanentes.
c) Se deben incluir indicadores de todas las dimensiones sealadas? Una matriz puede tener nicamente indicadores de
eficacia?

28

No es de extraar encontrar MIR que no incluyan todas las dimensiones sealadas en cada objetivo. En ocasiones, es suficiente con un par de indicadores por objetivo para medir el
desempeo de los programas, lo que no implica contar con
indicadores de todas las dimensiones. La informacin que se
desprende de los indicadores no slo debe ayudar a mostrar
el desempeo del programa, sino que debe proporcionar informacin para retroalimentar y mejorar sus procesos. Aunque se
generen indicadores de todas las dimensiones, puede suceder
que esta informacin no sea relevante para mejorar los procesos y, por tanto, tampoco arroje informacin importante sobre
su desempeo.

Finalmente, la decisin de incluir las diferentes dimensiones de


los indicadores depende de los responsables del programa. Los
indicadores, ms que un elemento para la fiscalizacin, deben
ser vistos como herramientas de monitoreo y evaluacin. El medir
distintos aspectos permite mostrar de manera ms clara los logros alcanzados por el programa.

Captulo 4
Pasos para construir
un indicador

Manual para el Diseo y la Construccin de Indicadores

Cmo se establece que un programa ha resuelto la problemtica para


la que fue creado? Cmo se determinan sus avances? Los indicadores
son el medio ms apropiado para el monitoreo y la evaluacin de los
objetivos de los programas sociales; permiten estimar el grado de avance
de los objetivos, cuantificar la percepcin de la poblacin objetivo respecto a los bienes o servicios que recibe o medir el costo de los insumos
empleados por el programa o proyecto, entre otras aspectos. Dicha informacin es necesaria no slo para emitir un juicio sobre el desempeo del
programa, sino que, adems, facilita a los responsables o coordinadores
del programa especificar cules son las reas de oportunidad dentro de
los procesos que realiza.
Para poder construir un indicador, es recomendable que se sigan los siguientes seis pasos:

1.
2.
3.
4.
5.
6.

Revisar la claridad del resumen narrativo.


Identificar los factores relevantes.
Establecer el objetivo de la medicin.
Plantear el nombre y la frmula de clculo.
Determinar la frecuencia de medicin.
Seleccionar los medios de verificacin.

1. Revisar la claridad del resumen narrativo


Los indicadores sern claros y precisos si el objetivo al que estn asociados tambin lo es. De ah que el primer paso para la construccin de los
indicadores es revisar la claridad del objetivo al que estn relacionados;
para ello se revisan los siguientes aspectos fundamentales:

Los objetivos establecidos se encuentran ubicados


en el mbito de desempeo adecuado?
El resumen narrativo cumple con la redaccin sugerida
en la Metodologa de Marco Lgico (MML)?
Los trminos tcnicos o acrnimos incluidos en el resumen
narrativo estn definidos?

30

Instrumentos principales para el monitoreo de programas sociales de Mxico

Los objetivos deben ser precisos en cuanto a lo que pretenden lograr; as,
el disear y establecer un indicador es una tarea sencilla. Por tal motivo,
es recomendable que los objetivos cumplan con la redaccin sugerida
en la MML, ya que permite identificar rpidamente los elementos de mayor relevancia para el objetivo.
Asimismo, al momento de revisar los objetivos, se debe analizar si efectivamente cada uno de ellos se encuentra ubicado en el nivel correcto;
es decir, debe verificarse que los objetivos relacionados con los procesos
se encuentren en el nivel de actividades; los concernientes a los bienes
y servicios, en el nivel de componentes; y los de resultados y de impacto,
en el nivel de propsito y fin, respectivamente. Es importante recordar que
los objetivos estn alineados jerrquicamente, por lo que los indicadores
tambin deberan estarlo.
Un aspecto comn en todos los programas es el uso de trminos tcnicos,
siglas o acrnimos. En el lenguaje de los programas es normal emplear
vocablos tcnicos que, en muchas ocasiones, se plasman en la MIR; no
obstante, stos no necesariamente son de uso comn para la ciudadana, por lo que, al revisar la MIR, se presentan dificultades para comprender lo expresado en los objetivos o en sus indicadores. Es recomendable
que los programas redacten los objetivos evitando trminos tcnicos, siglas y acrnimos, y si se considera necesario utilizarlos, se debe incluir su
significado en una nota tcnica.
En el ejemplo siguiente se presentan dos de los casos ms comunes:
un resumen narrativo largo y sin un objetivo concreto, y un resumen
narrativo sencillo y acotado, pero poco preciso. En el primero no es
sencillo determinar cul es el cambio que se espera lograr o la poblacin a la que se hace referencia. Este es un ejemplo de los mltiples
objetivos que se incluan en los programas federales antes de la implementacin de la MML.

31

Manual para el Diseo y la Construccin de Indicadores

Cuadro 5. Claridad
Los objetivos son claros?

Objetivo

Fin. Beneficiar al pas mediante la mejora del ingreso


de los hombres de la tercera edad, mujeres jvenes
y nios que habitan tanto zonas rurales como urbanas
para que, independientemente de su condicin social
o econmica, disfruten del derecho al ms alto nivel
de salud, educacin y calidad de vida que les permita
su libre desarrollo en lo individual y en lo familiar.

Objetivo

Fin. Contribuir al ingreso de las mujeres en NA o ZI,


mediante la implementacin de proyectos EA.

Observacin
El objetivo no es claro. Hay mltiples objetivos
enmarcados en una misma frase. Tampoco es fcil
reconocer cul es la poblacin que atiende
el programa.
Este tipo de objetivos son confusos y no permiten
el diseo ni la construccin de indicadores para
su seguimiento.

El objetivo no es claro, aunque es entendible su idea


central. Se presentan siglas que no describen las
caractersticas de la poblacin objetivo ni qu tipo
de proyectos son los que apoyan.

Fuente: Elaboracin del CONEVAL.

En el segundo ejemplo, la idea central del objetivo se define de manera


adecuada, pero el uso de siglas le resta claridad: qu es NA o ZI? Son
estados, municipios o localidades? Qu tipos de proyectos son EA? Se
apoya a todas las mujeres?
Los objetivos deben ser descriptivos y, al mismo tiempo, concretos. No es
conveniente describir renglones y renglones para tratar de explicar qu
se pretende hacer en cada objetivo. Si los objetivos del programa han
sido bien identificados, es sencillo plasmarlos en una oracin. No es necesario que el programa adorne el objetivo; es comn confundir al lector al incluir aspectos que no se relacionan con las acciones del programa, lo que dificulta reconocer los que s deben ser cuantificados.
Si los objetivos presentan deficiencias en su construccin, hay que corregirlos para que sean ms claros y precisos. El primer aspecto a corregir es
definir los acrnimos o siglas y omitir elementos tcnicos; el segundo, es
acotar la redaccin conforme a la MML. Finalmente, una vez delimitados
los objetivos, es necesario que el programa analice si lo descrito efectivamente corresponde con los objetivos del programa. En el cuadro 6 se
presentan algunos objetivos despus de ajustar ciertos puntos de redaccin y claridad.

32

Instrumentos principales para el monitoreo de programas sociales de Mxico

Cuadro 6. Ajuste de objetivos


Antes

Despus

Objetivo

Fin. Integrar a las mujeres al desarrollo social en


condiciones de equidad y ejercicio pleno de sus
derechos y el corresponsable cumplimiento de sus
obligaciones, a travs del fortalecimiento de las IMEF
para prevenir, detectar y atender la violencia contra
las mujeres.

Contribuir a prevenir la violencia contra las mujeres


a travs de las acciones que realizan las instancias
de mujeres en las entidades federativas.

Objetivo

Propsito. Subir el ingreso de los beneficiarios.

Personas en condiciones de pobreza patrimonial


en zonas urbanas mejoran su ingreso laboral.

Objetivo

Componente. Impartir cursos.

Cursos de capacitacin y actualizacin en materia


de uso de energas alternativas impartidos.

Objetivo

Actividad. Recepcin de solicitudes en internet.

Recepcin de solicitudes para los apoyos


del programa en el portal aplicativo.

Fuente: Elaboracin del CONEVAL.

La claridad es la base del diseo del indicador, pues determinar los


factores relevantes a considerar en el indicador. Dichos factores son la
columna vertebral a la que se aadirn elementos necesarios para construir los indicadores que permitan monitorear el objetivo.

2. Identificar los factores relevantes


stos son los aspectos ms importantes del objetivo, ya que describen
qu y en quin se va a medir; corresponden al conjunto de palabras que
enuncian cul es el logro esperado y sobre quin se espera dicho logro.
Podemos omitir la identificacin de los factores relevantes? No. Los factores determinan dos aspectos significativos: lo que se pretende medir y
en quines se medir. Una vez que se cuente con un resumen narrativo
claro y preciso, se pueden establecer cules son los factores relevantes
de nuestro objetivo.

33

Manual para el Diseo y la Construccin de Indicadores

Figura 3. Identificacin de factores relevantes. Objetivo fin


Factores relevantes

Contribuir a mejorar el ingreso laboral de la poblacin indgena


El objetivo

mediante la implementacin de proyectos productivos


El medio

El cmo no entra dentro de


los factores relevantes
Fuente: Elaboracin del CONEVAL.

La figura 3 es un ejemplo de un resumen narrativo referente al fin; lo primero es identificar el objetivo que se quiere lograr del medio para alcanzarlo;
hay que considerar que slo el fin puede contener estos dos elementos.1 As, es necesario establecer qu elementos deben ser revisados al
momento de identificar los factores relevantes, puesto que el medio no
puede considerarse como un factor relevante, dado que es la forma en
que el fin se liga con el propsito, esto es, la manera en que se pretende
cumplir el objetivo.
En cuanto al propsito, deben identificarse del objetivo el qu y en quin
de los factores relevantes. El primero se relaciona con el logro que se espera alcanzar con el programa (en el ejemplo de la figura 4 correspondera a crean agroempresas), mientras que el segundo se refiere a los
jvenes. De esta manera, los indicadores asociados deben considerar
estos elementos.

1
En ocasiones, en el resumen narrativo de propsito, componente y actividades se incluye el medio para
alcanzar los objetivos de manera errnea. Es importante sealar que en las revisiones del CONEVAL, el
medio no se considera dentro de los factores relevantes. Por ello, es conveniente que los objetivos de las
matrices se adecuen a la sintaxis de la MML.

34

Instrumentos principales para el monitoreo de programas sociales de Mxico

Figura 4. Identificacin de factores relevantes. Objetivo propsito


Factores
relevantes

Los jvenes emprendedores rurales


crean agroempresas en zonas rurales
El objetivo

Fuente: Elaboracin del CONEVAL.

Para los objetivos establecidos en el componente y la actividad, la identificacin de los actores relevantes es similar al propsito. Con la finalidad
de reconocer con claridad los factores relevantes, es importante tener
objetivos claros y precisos. Una vez que se cuente con ellos, es sencillo
disear y construir los indicadores. A continuacin se presentan algunos
ejemplos adicionales al respecto.

Cuadro 7. Identificacin de factores relevantes


El qu y en quin?

Factores relevantes

Objetivo

Contribuir a prevenir y atender la violencia contra


las mujeres a travs de las acciones que realizan las
instancias de mujeres en las entidades federativas.

Quin: Mujeres
Qu: Se previene y atiende la violencia en su contra

Objetivo

Personas en condiciones de pobreza patrimonial


en zonas urbanas mejoran su ingreso laboral.

Quin: Personas en condiciones de pobreza


Qu: Mejoran su ingreso laboral

Objetivo

Cursos de capacitacin y actualizacin en materia


de uso de energas alternativas impartidos.

Quin: Cursos
Qu: Impartidos

Objetivo

Recepcin de solicitudes para los apoyos


del programa en el portal aplicativo.

Quin: Solicitudes
Qu: Se reciben en el portal aplicativo

Fuente: Elaboracin del CONEVAL.

35

Manual para el Diseo y la Construccin de Indicadores

Cmo se disea un indicador con base en factores relevantes? En virtud de que stos son un puado de elementos, hay una amplia gama
de posibles indicadores que pueden ser construidos para monitorear el
objetivo; por ejemplo, para los cursos impartidos se pueden construir indicadores sobre la variacin anual de cursos impartidos, el nmero promedio de asistentes, el grado de satisfaccin, el costo promedio del curso,
entre otros. No obstante, y como se seal, los indicadores deben proveer
informacin que sea til para la operacin del programa. El discriminar
qu informacin es til para el programa depende directamente de los
operadores; en algunas ocasiones, la informacin que generan algunos
indicadores ser de mayor provecho que la de otros.
Existen criterios para determinar cules son los mejores indicadores? No.
Los responsables del programa y los operadores deben decidir qu indicadores les aportan la informacin de mayor beneficio para monitorear
su desempeo.

3. Establecer el objetivo de la medicin


Hasta ahora, podra concluirse que pueden generarse varios indicadores
con base en los factores relevantes identificados en el objetivo, es decir,
puede haber diversos indicadores para medir un mismo objetivo. Contradictorio? No. Al final de esta seccin, se constatar que, aun cuando
un mismo objetivo pueda tener varios indicadores,
lo importante es que en conjunto aporten informacin sobre distintos aspectos contenidos en el reLos responsables del
sumen narrativo.

programa deben decidir los


aspectos ms importantes
a medir, as como la
informacin que refleja mejor
los logros del programa.

Una vez que se han identificado los factores relevantes del objetivo, el siguiente paso es determinar
cul es el objetivo de la medicin. En este punto
deben definirse las dimensiones del indicador que
sern incluidas en el monitoreo del programa. Para
ello, es necesario sealar que esta valoracin depende, en gran parte, de las necesidades propias de cada programa.
Los indicadores de eficacia han de ser los primeros en considerarse para
monitorear el desempeo del programa y el cumplimiento de los objetivos. En seguida, es conveniente establecer los indicadores de economa,
calidad y eficiencia necesarios, cuntos y dnde? Los responsables, ms
que nadie, deben disponer los aspectos de mayor relevancia que han de
ser cuantificados para monitorear los logros alcanzados.

36

Instrumentos principales para el monitoreo de programas sociales de Mxico

Aunque no se pueden fijar elementos para decidir qu indicadores deben ser establecidos, o no, s se pueden considerar los siguientes aspectos. El primero consiste en sealar las dimensiones de los indicadores
adicionales que deben ser analizados y determinados por los responsables del programa. Algunos programas de desarrollo social pueden
estar ms interesados en conocer la opinin de la poblacin objetivo
respecto a los bienes y servicios que se les entrega que en monitorear
el costo de stos (el costo podra ser invariable en el tiempo). Asimismo,
habr programas ms preocupados por conocer la tasa de recuperacin de los prstamos otorgados que la opinin de los participantes en
los cursos de actualizacin.
Los indicadores no slo son un medio para que la sociedad tenga conocimiento de los logros; tambin son una herramienta que facilita el
anlisis y la toma de decisiones respecto a la gestin y los resultados.
Los indicadores deben brindar la informacin que se considere relevante sobre la gestin y los procesos que el programa desarrolla. Vale
la pena mencionar que no necesariamente un programa debe establecer indicadores de todas las dimensiones en un mismo objetivo, o
en una misma MIR. En este sentido, el indicador muestra los aspectos
ms importantes del programa? Ayuda a identificar reas de oportunidad? Devuelve informacin que permite mejorar el actual diseo
del programa?
El segundo aspecto se refiere a la forma de presentar los indicadores
y a la posible interpretacin de sus valores. Es recomendable que los
indicadores se muestren de manera positiva, lo que permitir reforzar
la idea de los avances del programa. Por ejemplo, es preferible brindar informacin de los alumnos aprobados en lugar de alumnos reprobados, de poblacin atendida sobre poblacin no atendida, o de
beneficiarios satisfechos sobre beneficiarios no satisfechos. Lo anterior
no implica dejar de transparentar la informacin o manipularla, sino
presentar la informacin de los indicadores como debe entenderse,
como un logro.
En este sentido, se debe cuestionar lo siguiente: el indicador est descrito de manera positiva? Puede ser sujeto a una malinterpretacin? Existe
alguna forma ms sencilla de mostrar la misma informacin con algn
otro indicador?

37

Manual para el Diseo y la Construccin de Indicadores

Por ltimo, es necesario evitar lo que se ha denominado trampa de la medicin, la cual consiste en medir como resultado slo aquello que es fcil
de cuantificar. La implementacin de los indicadores con criterios homogneos es relativamente nueva en la administracin pblica federal, por
lo que varios programas de desarrollo social no recopilaban informacin
relevante ni daban un seguimiento apropiado a los recursos que otorgaban. La principal razn por la que fue complicado establecer indicadores
adecuados fue la falta de informacin, de capacidad tcnica o de generacin y recopilacin de informacin.
Sin embargo, la carencia de estos elementos no justific que programas
no implementaran esquemas de seguimiento, recopilacin y sistematizacin de la informacin y capacitacin para crear indicadores que
mostraran resultados importantes en lugar de reportar nicamente informacin sobre el uso y destino de los recursos. De ah que la integracin
de procesos de recopilacin y depuracin de informacin, as como un
seguimiento adecuado, se han convertido en tareas que los programas
deben incorporar para mejorar el diseo y la construccin de herramientas para el monitoreo y la evaluacin de sus objetivos.
Ahora bien, retomando la pregunta es apropiado establecer varios indicadores en un mismo objetivo? Debe asociarse un indicador a un objetivo, como se seal? La respuesta es simple: cada objetivo debe tener
al menos un indicador que permita monitorear los logros del programa
(eficacia); no obstante, en ocasiones ser de suma importancia para el
programa reportar cualidades diferentes al cumplimiento. Los indicadores
de eficiencia, calidad y economa son complementarios a los de eficacia,
pero no son sustitutos.
Los indicadores de eficacia permiten al programa ver el grado de avance que ha tenido respecto al objetivo planteado, y los otros indicadores
hacen posible determinar la forma en que el programa ha alcanzado dichos objetivos. De esta manera, se cuenta con un panorama ms amplio
sobre las acciones que implementa el programa para el logro de los objetivos. Con estos elementos, es necesario definir un nombre y un mtodo
de clculo para los indicadores.

38

Instrumentos principales para el monitoreo de programas sociales de Mxico

4. Plantear el nombre y la frmula de clculo


El nombre del indicador
debe ser claro y su mtodo
de clculo una expresin
matemtica de fcil
comprensin.

Presentar los indicadores como una relacin entre dos o ms variables permite tener el contexto
sobre el cual se desarroll el programa. Una vez
definidos los factores relevantes de la medicin y
las dimensiones del indicador que se requieren
medir en cada uno de los objetivos, es necesario
definir un nombre y un mtodo de clculo para el
indicador. Para establecer el nombre y la frmula
de clculo se debe considerar que:

a) El nombre del indicador debe ser claro y relacionarse con el objetivo de la medicin.
b) El mtodo de clculo debe ser una expresin matemtica definida de manera adecuada y de fcil comprensin, es decir, deben
quedar claras cules son las variables utilizadas.
En el diseo de indicadores, los mtodos de clculo ms comunes son
el porcentaje, la tasa de variacin, la razn y el nmero ndice. Aunque
stos no son las nicas expresiones para los indicadores, s son las ms
frecuentes. Cuando los programas disean indicadores con una estructura ms compleja se recomienda colocar un anexo en el que se
detalle el mtodo de clculo empleado y cmo se interpretan sus valores. En este contexto, a continuacin se presenta una breve descripcin de los mtodos de clculo que ms se utilizan en el seguimiento
de un indicador.

Porcentaje
Un porcentaje es la forma de expresar un nmero como partes de cada
cien. Los porcentajes son el cociente entre dos variables con una misma
unidad de medida en el mismo periodo; representan, en la mayora de
los casos, un conjunto de menor dimensin de otro conjunto. En la figura
5 se presenta un ejemplo para un objetivo en el nivel de actividad y un
posible indicador para monitorear su desempeo.

39

Manual para el Diseo y la Construccin de Indicadores

Figura 5. Ejemplo de construccin de indicadores (porcentaje)


Porcentaje de solicitudes para la
participacin en la convocatoria
respondidas en el periodo.

Actividad. Solicitudes de participacin


en la convocatoria respondidas.

Fuente: Elaboracin del CONEVAL.

Para monitorear el objetivo establecido, es necesario conocer el nmero


de solicitudes recibidas y cuntas de stas fueron respondidas (figura 6).
En el mtodo de clculo se deben describir las variables con precisin,
adems de definir correctamente la temporalidad en la que se realizar
la medicin.

Figura 6. Ejemplo de construccin de indicadores (porcentaje)

Numerador
Solicitudes respondidas
(recibidas y respondidas)

x 100

Denominador

Igual unidad de medida


Solicitudes recibidas

Nmero de solicitudes respondidas en el periodo t


Nmero de solicitudes recibidas en el periodo t
Mismo periodo

Fuente: Elaboracin del CONEVAL.

40

Instrumentos principales para el monitoreo de programas sociales de Mxico

Una vez determinado el mtodo de clculo es necesario verificar que el


nombre del indicador y su mtodo de clculo sean coherentes entre s.
En la figura 7 se muestran los principales elementos que se deben verificar: a) que en el nombre del indicador se incluyan los factores relevantes; b) que las unidades de medida en el nombre del indicador tengan
correspondencia con las unidades de medida definidas en el mtodo
de clculo; y c) debe haber correspondencia entre las frecuencias de
medicin de cada una de las variables del mtodo de clculo; en el porcentaje las variables deben ser cuantificadas en el mismo periodo.

Figura 7. Ejemplo de construccin de indicadores (porcentaje)

Porcentaje de solicitudes para la participacin en


la convocatoria respondidas en el periodo

Igual unidad de medida


Nmero de solicitudes respondidas en el periodo t
Nmero de solicitudes recibidas en el periodo t

x 100

Mismo periodo

Fuente: Elaboracin del CONEVAL.

41

Manual para el Diseo y la Construccin de Indicadores

El cuadro 8 contiene algunos ejemplos de indicadores (porcentajes)


para diferentes niveles de la MIR; en ellos se sealan los factores relevantes y se presenta un posible indicador para monitorear su desempeo.
Como se observa, la identificacin de los factores relevantes y el establecimiento de un indicador tienen como base un objetivo definido de
manera adecuada, por lo que es sencillo identificar estos elementos.

Cuadro 8. Tipos de Indicadores: porcentajes


Nombre del indicador

Propsito

Porcentaje de asistencia
escolar de la poblacin
indgena de 6 a 14 aos
de edad

Componente

Porcentaje de
beneficiarios que evalan
satisfactoriamente los servicios
otorgados de capacitacin,
asesora y participacin para
negocios establecidos

Factores relevantes

Mtodo de clculo

Quin: Poblacin indgena


de 6 a 14 aos
Qu: Asiste a la escuela

(Nmero de poblacin indgena


de 6 a 14 aos de edad que asiste
a la escuela en el ao t / Nmero
de poblacin indgena de 6 a 14
aos en el ao t) X 100

Quin: Beneficiarios
Qu: Evalan satisfactoriamente
los servicios

Nmero de beneficiarios que


evalan satisfactoriamente los
servicios otorgados, capacitacin,
asesora y participacin para
negocios establecidos en el
semestre t / Nmero de beneficiarios
entrevistados en el semestre t)
X 100

Fuente: Elaboracin del CONEVAL.

Los porcentajes son el mtodo de clculo ms utilizado y permiten conocer el grado de avance o cobertura de alguna variable. Aunque este
mtodo es sencillo, su complejidad tcnica realmente depende de la
definicin de la variable a la que se encuentra asociada.

Tasa de variacin
Una tasa de variacin es la forma de expresar un cambio relativo en el
tiempo; es el cociente de dos observaciones de una misma variable en
diferentes periodos. En la figura 8 se presenta un ejemplo para un objetivo
de componente. En este caso, es de inters del programa medir el incremento o decremento de los apoyos econmicos otorgados cada ao.

42

Instrumentos principales para el monitoreo de programas sociales de Mxico

Figura 8. Ejemplo de construccin de indicadores (tasa de variacin)

Componente. Apoyos
econmicos entregados.

Tasa de variacin del nmero


de apoyos econmicos entregados.

Fuente: Elaboracin del CONEVAL.

Es importante sealar que para este mtodo de clculo se deben tener


observaciones de una misma variable, pero en dos diferentes puntos
en el tiempo (pasado y presente). La informacin ms actual se coloca en el numerador y la menos reciente, es decir, el punto de inters, en
el denominador. Como se muestra en la figura 9, hay que describir con
claridad el nombre de las variables en el mtodo de clculo y verificar
la temporalidad en que se realiza la medicin.

Figura 9. Ejemplo de construccin de indicadores (tasa de variacin)

Apoyos
entregados
en tiempo t

Apoyos
entregados
en tiempo t-k

Igual unidad de medida


Numerador

-1

Denominador

x100

Nmero de apoyos econmicos entregados en el periodo t


Nmero de apoyos econmicos entregados en el periodo t-k

-1

x100

Diferente periodo

Fuente: Elaboracin del CONEVAL.

43

Manual para el Diseo y la Construccin de Indicadores

Una vez formulado el mtodo de clculo, el siguiente paso es verificar


que el nombre del indicador y su mtodo de clculo sean coherentes
entre s. La figura 10 contiene los principales elementos que se deben
verificar: a) que en el nombre del indicador se incluyan los factores relevantes del objetivo; b) que las unidades de medida establecidas en el
nombre del indicador tengan correspondencia con el mtodo de clculo; y c) debe verificarse que la frecuencia de medicin definida para
calcular el indicador sea coherente con la brecha (periodo t y periodo
t-k) con la que se cuantifican las variables que componen el indicador.

Figura 10. Ejemplo de construccin de indicadores (tasa de variacin)

Restamos
la unidad

Tasa de variacin del nmero


de apoyos econmicos
entregados en el periodo

Igual unidad de medida


Nmero de apoyos econmicos entregados en el periodo t
Nmero de apoyos econmicos entregados en el periodo t-k
Diferente periodo

Fuente: Elaboracin del CONEVAL.

44

-1

x100

Instrumentos principales para el monitoreo de programas sociales de Mxico

En el cuadro 9 se presentan algunos ejemplos de indicadores (tasas


de variacin o tasa de cambio) para diferentes niveles de la matriz de
indicadores.

Cuadro 9. Indicadores: tasa de variacin


Nombre del indicador

Propsito

Componente

Tasa de variacin del valor real


en los activos en las unidades
econmicas rurales

Tasa de creacin anual


de microempresas

Factores relevantes

Mtodo de clculo

Quin: Activos
Qu: Se valan

[(Valor real en los activos


en las unidades econmicas rurales
apoyadas en el ao t / Valor real
en los activos en las unidades
econmicas rurales apoyadas
en el ao t - 2) - 1]*100

Quin: Microempresas
Qu: Se crean

[(Nmero de microempresas
creadas con los apoyos del
programa en el ao t / Nmero
de microempresas creadas con
los apoyos del programa en el ao
t - 1)-1]*100

Fuente: Elaboracin del CONEVAL.

Vale la pena reiterar que para estos mtodos de clculo no deben incluirse juicios de valor en el nombre del indicador, como tasa de crecimiento,
tasa de mejora, tasa de reduccin, etctera.
El sentido del indicador depender de los valores que tome el indicador,
lo que determinar si ste crece, se reduce o mantiene. El nombre del indicador per se no define el sentido del indicador, por lo que deben omitirse
estos juicios.

Razn/promedio
La razn es el cociente entre dos variables cualesquiera en un cierto periodo y es la forma de expresar un tanto de unidades del numerador por cada
unidad del denominador. El promedio es una particularidad de la razn y
se representa como la suma finita de un conjunto de valores dividida entre
el nmero de sumandos. El ejemplo de la figura 11 se refiere a un objetivo
de componente y el indicador propuesto es el promedio de la inversin
destinada a las escuelas beneficiarias del programa.

45

Manual para el Diseo y la Construccin de Indicadores

Figura 11. Ejemplo de construccin de indicadores (promedio 1)


Inversin promedio por escuela
beneficiada para la recuperacin
de espacios.

Componente. Apoyos para la


recuperacin de espacios entregados.

Fuente: Elaboracin del CONEVAL.

Para las razones o promedios, se deben tener dos variables con diferentes
unidades de medida, pero para un mismo periodo. De nuevo, una vez
identificadas las variables necesarias para el indicador (monto de inversin y escuelas beneficiaras) se construye el indicador como se muestra
en la figura 12. El mtodo de clculo debe describir con claridad cules
son las variables incorporadas y verificar que la temporalidad de medicin de stas es para el mismo periodo.

Figura 12. Ejemplo de construccin de indicadores (promedio 1)

Inversin
realizada ($)
en periodo t

Distintas
variables

Numerador
Denominador

Escuelas
beneficiadas
en periodo t

Fuente: Elaboracin del CONEVAL.

46

Diferente unidad de medida

-1

x100

Monto en inversin gastado en el periodo t


Nmero de escuelas beneficiadas en el periodo t

Mismo periodo

Instrumentos principales para el monitoreo de programas sociales de Mxico

Una vez determinado el mtodo de clculo, es necesario verificar que el


nombre del indicador y su mtodo de clculo sean coherentes entre s. En
la figura 13 se muestran los principales elementos que se deben verificar:
a) que en el nombre del indicador se incluyan los factores relevantes del
objetivo; b) debe haber correspondencia lgica entre las variables comprendidas en el mtodo de clculo y el nombre del indicador; y c) debe
haber correspondencia entre las frecuencias de medicin de las variables incluidas.

Figura 13. Ejemplo de construccin de indicadores (promedio 1)

Igual unidad de medida

Inversin promedio por


escuela beneficiada para
la recuperacin de espacios

Distintas
variables

Igual unidad de medida

Monto en inversin gastado en el periodo t


Nmero de escuelas beneficiadas en el periodo t

Mismo periodo

Fuente: Elaboracin del CONEVAL.

Un segundo ejemplo se muestra en la figura 14, en la que es necesario un


indicador para un objetivo de componente; como propuesta de indicador se sugiere la duracin promedio de las asesoras jurdicas impartidas.
En esta caso, las variables de inters son las horas dedicadas a la imparticin de las asesoras y el nmero de stas.

47

Manual para el Diseo y la Construccin de Indicadores

Figura 14. Ejemplo de construccin de indicadores (promedio 2)


Componente. Servicios de
asesora jurdica en
comunidades rurales impartidos.

Duracin promedio
de los servicios de asesora
jurdica impartidos.

Fuente: Elaboracin del CONEVAL.

Una vez identificados los aspectos a medir, se establecen las variables


de inters en el numerador o denominador segn corresponda. Es necesario tener identificado qu variable va en qu lugar. No es lo mismo
las asesoras promedio por hora que el nmero de horas dedicadas
a cada asesora. Aunque ambos utilizan las mismas variables, la informacin considera proporciones diferentes, por lo que muestra aspectos
distintos del desempeo del programa. Una vez identificado el mtodo
de clculo, se describen las variables con claridad y se establece una
frecuencia de medicin coherente; las dos variables deben ser cuantificadas con la misma frecuencia (figura 15).

Figura 15. Ejemplo de construccin de indicadores (promedio 2)

Horas
en el
trimestre t

Distintas
variables

Numerador
Denominador

Asesoras
jurdicas en
el trimestre t

Fuente: Elaboracin del CONEVAL.

48

Diferente unidad de medida

-1

x100

Horas de atencin en el trimestre t


Asesoras jurdicas impartidas en el trimestre t

Mismo periodo

Instrumentos principales para el monitoreo de programas sociales de Mxico

Una vez determinado el mtodo de clculo, se requiere verificar que el


nombre del indicador y su mtodo de clculo sean coherentes entre s. En
la figura 16 se muestran los principales elementos que se deben verificar:
a) en el nombre del indicador se incluyen los factores relevantes del objetivo; b) las unidades de medida establecidas en el nombre del indicador
deben tener correspondencia con las del mtodo de clculo; y c) debe
haber correspondencia entre las frecuencias de medicin de las distintas
variables definidas.

Figura 16. Ejemplo de construccin de indicadores (promedio) 2

Igual unidad de medida

Duracin promedio de los


servicios de asesora
jurdica impartidos

Distintas
variables

Igual unidad de medida

Horas de atencin el trimestre t


Asesoras jurdicas impartidas en el trimestre t

Diferente periodo de tiempo

Fuente: Elaboracin del CONEVAL.

En el cuadro 10 se presentan algunos ejemplos de indicadores (razones


o promedios) para diferentes niveles de la MIR y se sealan los factores
relevantes de cada objetivo; los aspectos ms importantes que deben
considerarse son: el verificar la relacin de las variables establecidas en
el indicador y que el numerador y denominador sean congruentes con lo
dispuesto en el objetivo.

49

Manual para el Diseo y la Construccin de Indicadores

Cuadro 10. Indicadores: promedio


Nombre del indicador

Factores relevantes

Mtodo de clculo

Fin

Razn de mortalidad materna


hospitalaria (Unidad Mdica
Rural y Hospitales Rurales)

Quin: Nacidos en unidades mdicas


Qu: Fallecen

[Nmero de defunciones maternas


ocurridas en unidades mdicas (UMR
y HR)/Nmero de nacidos vivos en
unidades mdicas (UMR y HR)] X
100,000

Componente

Promedio de visitas de
monitoreo a los proyectos en
el trimestre t

Quin: Proyectos del programa


Qu: Son monitoreados

(Nmero de visitas de monitoreo


a los proyectos en el trimestre t/
Nmero de das en el trimestre t)

Componente

Promedio de horas semanales


de que disponen los
beneficiarios para estudiar

Quin: Beneficiarios del programa


Qu: Estudian

Componente

Promedio mensual
de pacientes atendidos
por el programa

Quin: Pacientes
Qu: Atendidos en centros
ambulantes

(Total de horas que los beneficiarios


disponen para estudiar en
el semestre t/Nmero total de
beneficiarios entrevistados en
el semestre t)

(Nmero de pacientes atendidos en


los centros ambulantes del programa
en el mes t/Nmero de das en el
mes t)

Fuente: Elaboracin del CONEVAL.

Nmeros ndices
Un ndice (nmero ndice) es una medida estadstica diseada para estudiar las variaciones de una magnitud o de ms de una en relacin con
el tiempo o el espacio. Los ndices son medidas construidas que tienen
un consenso metodolgico y son utilizados por instancias nacionales e
internacionales. En el cuadro 11 se presentan algunos ejemplos de indicadores (ndices) para diferentes niveles de la MIR.

50

Instrumentos principales para el monitoreo de programas sociales de Mxico

Cuadro 11. Indicadores: nmeros ndices


Nombre del indicador

Fin

El ndice de Desarrollo
Humano (IDH)

Factores relevantes

Quin: Personas
Qu: Mejoran su desarrollo humano

Mtodo de clculo
Es una medida resumen del
desarrollo humano que refleja
los logros medios de un pas en tres
dimensiones bsicas de desarrollo
humano: una vida larga y saludable
(salud), acceso al conocimiento
(educacin) y un nivel de vida digno
(ingresos).
Ver http://bit.ly/twOSRh

Fin

El ndice de Pobreza
Multidimensional (IPM)

Quin: Personas
Qu: Reducen su condicin
de pobreza

Identifica las diversas privaciones


a nivel individual en alimentacin,
salud, educacin, vivienda y
seguridad social. Cada persona de
una misma familia se clasifica como
pobre o no pobre, dependiendo del
nmero de privaciones que sufra
su familia. Estos datos se agregan
entonces a las medidas nacionales
de pobreza.
Ver http://bit.ly/twOSRh

Fuente: Elaboracin del CONEVAL.

Una ventaja de los ndices es que son publicados por fuentes oficiales, lo
que implica que es informacin externa al programa y cuenta con una
metodologa clara. No obstante, para utilizar un ndice como indicador
de un programa o proyecto es necesario revisar que la metodologa
para generar el ndice mida aspectos que tengan que ver con el programa o proyecto.
Hasta este punto, se ha definido un nombre para el indicador y un mtodo de clculo con base en los factores relevantes identificados del objetivo. Asimismo, se han establecido los indicadores ms importantes para el
monitoreo del programa. En las siguientes secciones se complementarn
los indicadores con informacin para su seguimiento. Cul es el periodo
para hacer el seguimiento de los indicadores? Cmo se asegura que la
informacin que proporcionan los indicadores sea fidedigna?

51

Manual para el Diseo y la Construccin de Indicadores

5. Determinar la frecuencia de medicin


del indicador
No se ha sealado en este documento algn criterio para establecer la
frecuencia de medicin del indicador. Aunque en general es intuitivo determinar dicha frecuencia, es conveniente sealar algunos puntos sobre
el tema. Retomando los mbitos de desempeo y el proceso de produccin del programa, los resultados se presentan en orden cronolgico, es
decir, el cumplimiento de las actividades se realiza antes de los componentes y mucho antes que el propsito o el fin.

Ms utilizadas

Fin

Anual
Trianual
Sexenal

Propsito

Anual
Bianual
Trianual

Componente

Trimestral
Semestral
Anual

Actividades

Mensual
Trimestral
Semestral

Mayor

Cu

l deb

e ser

la fre

cuenc

ia de

medi

cin?

Menor

Figura 17. Frecuencia de medicin del indicador

Fuente: Elaboracin del CONEVAL.

Como se muestra en la figura 17, los indicadores asociados a las actividades tienen una mayor frecuencia de medicin (mensual, bimestral),
mientras los de fin presentan una menor (bianual, sexenal). Cuanto ms
alto es el nivel de objetivos, menor ser su frecuencia de medicin.

52

Instrumentos principales para el monitoreo de programas sociales de Mxico

Los indicadores de gestin


se miden con mayor
frecuencia en un periodo.

Aunque no es una regla, los responsables del programa de desarrollo social pueden establecer o
modificar la frecuencia de medicin de sus indicadores dependiendo de las necesidades de informacin. Lo anterior, dado que a priori no puede
determinarse una frecuencia de medicin debido
a que obedece, entre otras factores, a:

a) La disponibilidad de la informacin
de los datos de las variables que
conforman el indicador. En ocasiones, la generacin de un indicador
depender de manera inevitable de
la frecuencia en la disposicin de los
datos.

Los indicadores de
resultados se miden con
una menor frecuencia.

b) Las necesidades de informacin por parte del programa. El programa de desarrollo social puede determinar que cierta informacin debe ser generada con periodicidad a fin de monitorear los
avances o las reas de oportunidad en los procesos.
Si bien definir una frecuencia de medicin parece ser un tema simple, los
programas deben considerar que al establecerla se comprometen a actualizar la informacin del indicador y de sus variables conforme a lo dispuesto.
En este sentido, es importante sealar que, aun cuando la informacin del
indicador es para el monitoreo de sus objetivos, tambin es un compromiso
de transparencia.

6. Seleccionar los medios de verificacin


Los medios de verificacin corresponden a las fuentes de informacin
en las que est disponible la informacin necesaria y suficiente para
construir el indicador sealado. Dichos medios pueden ser documentos
oficiales, documentos o reportes internos que genera el programa, bases de datos procesadas, entre otros. Dado que stos pueden ser vastos,
en la MIR es conveniente reportar lo siguiente:
a) Nombre completo del documento que sustenta la informacin.
b) Nombre del rea que genera o publica la informacin.

53

Manual para el Diseo y la Construccin de Indicadores

c) Periodicidad con que se genera el documento (debe coincidir


con la frecuencia de medicin del indicador).
d) Liga a la pgina de la que se obtiene la informacin (si es el
caso).
A diferencia de los indicadores, cabe la posibilidad de que los medios de
verificacin se repitan en distintos niveles de la MIR, lo cual depende de los
indicadores establecidos. Los medios de verificacin no son nicamente
la manera de transparentar la operacin del programa; tambin permiten definir si es factible construir un indicador planteado, o no. Como se
mencion, en ocasiones la falta de informacin impide la construccin
de indicadores apropiados para el monitoreo de los objetivos. En la figura
18 se presenta un diagrama que ayuda a identificar si la informacin
para el indicador est disponible y qu se debe hacer si sta no puede ser
generada.

Figura 18. Establecimiento de medios de verificacin

La informacin
la genera el programa
o la institucin?
S

Se establece el
medio de verificacin

No

La informacin la
genera otra institucin?
No
Es mayor el beneficio
que el costo de generar
la informacin
No
Se debe replantear el
indicador. Utilizar un
indicador proxy.

Fuente: Elaboracin del CONEVAL.

54

Instrumentos principales para el monitoreo de programas sociales de Mxico

Como se observa en la figura 18, el primer paso para establecer los medios de verificacin es determinar si el programa (como parte del seguimiento, operacin o gestin) genera o consolida la informacin de las
variables que componen el indicador:
a) Si el programa o la propia institucin generan la informacin necesaria, entonces se establecen los medios de verificacin.
b) Si el programa no genera dicha informacin, es conveniente determinar si alguna otra institucin la produce para construir el indicador. Hay un conjunto de instituciones que origina una amplia
gama de informacin estadstica que los programas pueden reportar en sus indicadores.
c) Si el programa ha dispuesto que ni la institucin ni alguna otra
producen la informacin necesaria para construir su indicador,
entonces debe analizarse el costo de producirla y sus beneficios
(encuesta, entrevistas, etctera). En este aspecto ha de valorarse la importancia que representa la informacin generada tanto
para el programa como para la institucin. Asimismo, cul ser el
costo en relacin con el presupuesto del programa.
d) Si el programa considera que el beneficio es menor al costo de
generar la informacin necesaria, entonces debe plantearse la
posibilidad de descartar el actual indicador y establecer uno proxy relacionado. Los indicadores proxy son indicadores indirectos.
A diferencia de los objetivos y de sus indicadores, los medios de verificacin pueden repetirse en los distintos niveles. Es comn que en un mismo
documento o reporte se pueda encontrar la informacin para generar uno o ms indicadores. De
igual modo, es necesario verificar que la frecuenLos medios de verificacin
cia de medicin de los indicadores coincida con
dan certeza a la ciudadana
la frecuencia de publicacin o reporte de los mesobre la informacin que
dios de verificacin.

reportan.

La importancia en los medios de verificacin reside en que, si no existen o no se construyen, cualquier juicio sobre el desempeo del programa es poco confiable; es decir,
no se puede emitir un juicio respecto al desempeo de un programa sin

55

Manual para el Diseo y la Construccin de Indicadores

citar o no tener la certeza sobre la fuente de informacin que la sustente.


Se debe sealar que a travs de un medio de verificacin los ciudadanos pueden acceder a la informacin acerca del avance y los logros del
programa de manera transparente. Por ello, la informacin que reporta y
genera el programa siempre debe estar disponible y actualizada.
En el cuadro 12 se presentan ejemplos sobre qu es y qu no es un medio
de verificacin.

Cuadro 12. Medios de verificacin: ejemplos comunes


Medio de verificacin

Base de datos

Encuesta

Reporte de avances del programa. Trimestral.


Disponible en [www.].

Informacin interna

Base de datos de la encuesta para


el seguimiento del programa. Bianual.
A cargo de la direccin [nombre]

Informe sobre la situacin del Consejo [...].


Reporte semestral disponible en [www]

Fuente: Elaboracin del CONEVAL.

56

Es apropiado?

Observaciones

No

No permite determinar si la informacin se


encuentra disponible. Slo se seala que la
informacin est en una base de datos; el
medio de verificacin no es suficiente para el
monitoreo.

No

No permite determinar si la informacin se


encuentra disponible. Tampoco se menciona si
la informacin est consolidada y depurada;
el medio de verificacin no es suficiente
para el monitoreo.

Se cuenta con un nombre claro


de la ubicacin de la informacin y su
frecuencia de publicacin. Adems, la
informacin es pblica y se encuentra
disponible en un sitio web. El medio de
verificacin es suficiente para el monitoreo.

No

No permite determinar si la informacin


est disponible. No se seala el nombre del
documento ni quin genera dicha informacin.
El medio de verificacin no es suficiente para
el monitoreo.

Se cuenta con un nombre claro de la


ubicacin de la informacin y su frecuencia
de publicacin. Adems, se seala el nombre
de la direccin o rea a cargo de generar
la informacin. El medio de verificacin es
suficiente para el monitoreo.

Se cuenta con un nombre claro de la


ubicacin de la informacin y su frecuencia de
publicacin. Adems, la informacin es pblica
y se encuentra disponible en un sitio web. El
medio de verificacin es suficiente para el
monitoreo.

Captulo 5
Criterios del CONEVAL
para la valoracin
de los indicadores

Manual para el Diseo y la Construccin de Indicadores

Una vez construidos los indicadores del programa de desarrollo social,


el siguiente paso es hacer una valoracin sobre las caractersticas mnimas que deben cumplir aqullos. Por lo anterior, es necesario verificar que
contengan los elementos mnimos que establece el Consejo Nacional de
Evaluacin de la Poltica de Desarrollo Social (CONEVAL). Estos criterios se
presentan en la figura 19 y representan las caractersticas mnimas que
deben contener los indicadores para el monitoreo de los programas de
desarrollo social.

Figura 19. Criterios de valoracin de indicadores

Claro

Aporte
marginal

Relevante

Caractersticas
de un indicador
de desempeo

Econmico

Adecuado

Monitoreable

Fuente: Elaboracin del CONEVAL.

58

Instrumentos principales para el monitoreo de programas sociales de Mxico

Cundo es claro un indicador?


Se refiere a si existen dudas sobre lo que se pretende medir; es decir, si el
indicador tiene algn trmino o aspecto tcnico ambiguo que pueda
ser interpretado de ms de una manera. En ocasiones, los programas o
instituciones utilizan trminos tcnicos que son comunes a su gestin,
por lo que omiten sus definiciones. Es importante definirlos para que
la persona que no conoce el programa entienda los indicadores del
mismo modo que los operadores del programa o la institucin.

Cundo es relevante?
Se debe verificar que los elementos ms importantes del indicador estn
directamente relacionados con algn aspecto fundamental del objetivo
(factores relevantes). Cuando los indicadores guardan un estrecho vnculo con los objetivos, es posible confirmar el logro del objetivo en un
aspecto sustantivo.

Cundo es econmico?
Cuando al comparar el beneficio de generar la informacin necesaria
para el indicador respecto al costo econmico o humano, si el beneficio
es mayor al costo, se estima que el indicador es econmico. Asimismo,
es apropiado que el programa compare el costo de generar el indicador en relacin con su presupuesto anual. Vale la pena aclarar que si un
indicador no es relevante ni adecuado, tampoco puede considerarse
econmico. Independientemente del costo que origina obtener la informacin del indicador, ste no es apropiado para monitorear el desempeo del programa.

Cundo es monitoreable?
Se analiza la claridad de los medios de verificacin y del mtodo de
clculo del indicador para determinar si ste puede ser sujeto a una
comprobacin independiente. Esto quiere decir que cualquier individuo puede replicar el clculo del indicador, para lo cual es necesario
que el mtodo de clculo del indicador sea claro y que la informacin
para su construccin est definida de manera adecuada en los medios de verificacin.
Los medios de verificacin deben ser lo suficientemente precisos para
que no se tenga lugar a dudas sobre dnde se encuentra la informacin
necesaria para construir o replicar el indicador.

59

Manual para el Diseo y la Construccin de Indicadores

Cundo es adecuado?
Se refiere a si el indicador nos da una base suficiente para emitir un juicio
respecto al desempeo del programa y si la informacin que proporciona el indicador es relevante y apropiada para describir los logros del programa en un cierto periodo.

Cundo tiene aporte marginal?


Este criterio se aplica nicamente cuando un objetivo tiene dos o ms
indicadores. En este caso, si stos cumplen con todo los criterios anteriores, un indicador tiene aporte marginal si la informacin adicional que
proporciona mide aspectos que no consideran los dems indicadores y
cuando se proporciona informacin objetiva adicional para monitorear
el desempeo del programa.
Como se observa, los criterios establecidos por el CONEVAL no son caractersticas fuera de lo comn o inalcanzables. Los indicadores deben permitir monitorear los programas, por lo que es importante que el indicador
mida los factores relevantes incluidos en los objetivos. Qu sucede si un
indicador no cumple con los criterios? Pierde sentido en su razn de ser.
Los indicadores son herramientas que nos devuelven informacin relevante para el seguimiento de objetivos; si los indicadores no se relacionan con estos ltimos, entonces no tiene sentido establecerlos. Por qu?
Supongamos que usted va a contratar a un beisbolista si cumple ciertas cualidades. No obstante, cuando se le cuestiona sobre sus mejores
habilidades, ste responde: Puedo correr cien yardas planas en quince
segundos y en la ltima temporada mand cien pases para touchdown
en nicamente cincuenta juegos. Lo contratara? La respuesta es no
necesariamente.
Al evaluar, esperamos que un programa determinado logre ciertos objetivos y la mejor manera de comprobar si ha cumplido con ellos es analizar
sus indicadores. En este caso, el beisbolista es como un programa y las
habilidades son sus indicadores. No es factible emitir un juicio sobre la
capacidad del jugador como beisbolista con base en las habilidades
descritas, aunque s podemos decir que puede ser un buen jugador de
futbol americano. La analoga es similar para los programas: no es posible emitir un juicio sobre el desempeo de un programa cuando los
indicadores no se relacionan con los objetivos. As de sencillo.

60

Instrumentos principales para el monitoreo de programas sociales de Mxico

Por tal motivo, es necesario que la validacin de estos criterios se realice con objetividad, es decir, reconocer si los indicadores incumplen con
alguno de ellos. El identificar reas de oportunidad permite mejorar el
diseo y la construccin de los indicadores.
Un elemento fundamental para la construccin de los indicadores es la
pertinencia en relacin con sus objetivos. Para verificar estos aspectos, es
recomendable formular las preguntas incluidas en el cuadro 13 en cada
uno de los niveles de la MIR.

Cuadro 13. Elementos de cumplimiento de la lgica vertical


Nivel

Qu aspectos debemos revisar?2

El fin establecido debe cumplir las siguientes


caractersticas:

a) Est claramente especificado, es decir, no existe ambigedad


en su redaccin.
b) Es un objetivo superior al que el programa contribuye, esto es, no se
espera que la ejecucin del programa sea suficiente para alcanzar el fin.
c) Su logro no est controlado por los responsables del programa.
d) Es nico, es decir, incluye un solo objetivo.
e) Est vinculado a objetivos estratgicos de la dependencia o el programa
sectorial.

El propsito establecido debe cumplir


las siguientes caractersticas:

a) Est claramente especificado, es decir, no existe ambigedad


en su redaccin.
b) Es consecuencia directa que se espera ocurrir como resultado
de los componentes y los supuestos a ese nivel de objetivos.
c) Su logro no est controlado por los responsables del programa.
d) Es nico, esto es, incluye un solo objetivo.
e) Est redactado como una situacin alcanzada; por ejemplo: morbilidad
en la localidad reducida.
f) Se incluye de manera precisa la poblacin objetivo.

Los componentes sealados deben cumplir


las siguientes caractersticas:

a) Est claramente especificado, es decir, no existe ambigedad


en su redaccin.
b) Son los bienes o servicios que produce el programa.
c) Estn redactados como resultados logrados; por ejemplo, becas
entregadas.
d) Son necesarios, esto es, ninguno de los componentes es prescindible
para producir el propsito.
e) Su realizacin genera, junto con los supuestos en ese nivel de objetivos,
el propsito.

Para cada uno de los componente, existe


una o un grupo de actividades que:

a) Estn claramente especificadas, es decir, no existe ambigedad


en su redaccin.
b) Estn ordenadas de manera cronolgica.
c) Son necesarias, esto es, ninguna de las actividades es prescindible
para producir los componentes.
d) Su realizacin genera, junto con los supuestos en ese nivel de objetivos,
los componentes.

Fuente: Elaboracin del CONEVAL.

Con base en los trminos de referencia para la evaluacin de diseo que emite el CONEVAL.

61

Manual para el Diseo y la Construccin de Indicadores

Cabe la posibilidad de que un programa establezca indicadores que


cumplan con las caractersticas de claridad, relevancia, economa, adecuacin, monitoreabilidad y aporte marginal, pero que sus objetivos definidos no reflejen los resultados que pretende alcanzar. En este sentido,
y como se ha sealado de modo reiterativo, para que los indicadores
sean los apropiados para el monitoreo y la evaluacin de un programa,
es necesario que sus objetivos reflejen con precisin los resultados que
pretende lograr en el corto y el mediano plazo.
Aunque la base esencial para el diseo de los indicadores es la claridad
de los objetivos, es recomendable que se revisen todos los aspectos definidos en el cuadro 13 para cada nivel de la MIR.3 Para la validacin, cada
objetivo debe cumplir cada una de las caractersticas sealadas.

3
Para una mejor descripcin sobre la definicin de objetivos y de la lgica vertical de la MIR, se recomienda revisar el Manual de Metodologa de Marco Lgico del CONEVAL.

62

Captulo 6
Establecimiento de la
lnea base y las metas

Manual para el Diseo y la Construccin de Indicadores

Es necesario definir dos aspectos adicionales para los indicadores. Aunque stos deben satisfacer los requisitos descritos con anterioridad, tambin es necesario establecer elementos para su seguimiento: la lnea
base y las metas.

1. Lnea base
Se conoce como lnea base al valor del indicador que se fija como punto
de partida para evaluarlo y darle seguimiento. Una vez definido el indicador, es necesario conocer la situacin actual del programa mediante sus
indicadores. Cul es el valor inicial del indicador en el momento de inicio del programa o proyecto? La lnea base permite que los responsables
del programa establezcan y definan las metas que se pretende alcanzar
en un cierto periodo.
Cmo se define una lnea base? La definicin
consiste en utilizar la informacin disponible
La lnea base y las metas
del programa en el periodo inicial y sustituirson elementos para el
la en el mtodo de clculo; el valor resultante
seguimiento del desempeo
es la denominada lnea base y es el punto de
del programa.
partida del programa. Respecto a este valor,
se determinarn las metas del programa y se
emitirn juicios de valor sobre su desempeo.
Este resultado no corresponde de modo necesario a la primera estimacin que se realiza al indicador, sino al valor inicial que el programa tomar como referencia.
Definir una lnea base es sencillo cuando se tiene la informacin necesaria; sin embargo, en ocasiones los programas de desarrollo social no la
han generado ni recopilado. Si no se dispone de informacin inicial, es
recomendable retomarla de fuentes externas y buscar principalmente:
a) Informacin sobre indicadores similares en algn otro programa, o
b) Consultar un experto tcnico que tenga conocimientos en el
campo.
Aunque todos los programas tienen objetivos particulares, es posible
que recopilen informacin con caractersticas similares a las que se
buscan. Para ello, hay que revisar documentos normativos oficiales para

64

Instrumentos principales para el monitoreo de programas sociales de Mxico

localizar indicadores que necesiten informacin til para generar la lnea base. Esto es vlido? S, pero nicamente para determinar la lnea
base del indicador. El programa no debe reportar avances o logros de
otros programas.
El segundo mecanismo es ms simple. Se refiere a contratar los servicios
de un experto tcnico con conocimientos y experiencia para emitir o
determinar un valor para la lnea base. Al igual que la consulta de indicadores de otros programas, la consulta al experto es vlida slo para
establecer la lnea base; el programa o proyecto es responsable de
recopilar informacin real y verdica para reportar sus indicadores.
La lnea base es el estado inicial del indicador del programa y es necesaria para especificar metas. Estas ltimas son los avances en el cumplimiento de objetivos que el programa se impone alcanzar en un cierto
periodo.

2. Metas
stas permiten acreditar el grado de avance
de los objetivos. Dado que las metas son conocidas y acordadas con los ejecutores de los
programas, es fcil comprobar quin ha cumplido cabalmente con ellas.

La meta es el objetivo
cuantitativo que el programa
o proyecto se compromete
alcanzar en un periodo
determinado.

Una caracterstica esencial de las metas es


que deben ser realistas, es decir, deben ser
un valor cuantitativo que, dada la capacidad
tcnica, humana y financiera del programa, sea factible de alcanzar en
un periodo. Es comn fijarse metas demasiado ambiciosas que no es posible cumplir o, al contrario, metas por debajo del umbral de la capacidad
del programa que se alcanzan y superan con facilidad.

65

Captulo 7
Indicadores, presupuesto
y toma de decisiones

Manual para el Diseo y la Construccin de Indicadores

La MIR es una herramienta de gestin que permite a los tomadores de decisiones contar con informacin concreta respecto al desempeo de un
programa. Los indicadores de un programa contenidos en la MIR deben
asegurar el seguimiento de los logros alcanzados a lo largo del desarrollo
del programa, pero para qu sirve esta informacin?
En un sistema de cuenta pblica orientada a resultados, es necesario disponer de informacin sobre el desempeo de los programas. Dicha informacin debe mostrar la manera en que los programas usan los recursos
pblicos para solucionar la problemtica central por la que fueron creados. Esta informacin debe ser estratgica, esto es, considerar los logros
alcanzados tanto en la gestin del programa (la provisin de insumos, las
actividades o procesos que realiza, bienes y servicios que genera o entrega) como en los resultados intermedios y finales de la intervencin sobre
una poblacin objetivo.
De esta forma, se tiene un panorama claro y transparente de la eficacia
con que se ejecutan los recursos pblicos de cada dependencia gubernamental; asimismo, se crean herramientas para la toma de decisiones
que conduzcan a la mejora del diseo y la operacin de los programas
pblicos. La idea de incorporar indicadores y metas al proceso presupuestario significa disponer de informacin til que enriquezca el anlisis
para la formulacin del presupuesto y su respectiva discusin en el Congreso de la Unin.
Finalmente, en este manual ha quedado expuesto que el establecimiento de los indicadores sienta las bases para un monitoreo adecuado y
contribuye a una toma de decisiones ms oportuna. Los indicadores pertinentes, relevantes, claros, econmicos y monitoreables ayudan a dar seguimiento adecuado a la gestin y a los resultados de los objetivos de
los programas: lo anterior representa una etapa fundamental en la ejecucin y el mejoramiento de las polticas pblicas orientadas a la solucin
de problemticas sociales.

68

Referencias bibliogrficas
Aldunate, E. (2004). Metodologa del Marco Lgico. Chile: Instituto Latinoamericano y del Caribe
de Planificacin Econmica y Social (ILPES).
Banco Interamericano de Desarrollo (BID) (1997). Anexo I. La Matriz de Marco Lgico, en Evaluacin: una herramienta de gestin para mejorar el desempeo de los proyectos. Washington.
Camacho, H. et al. (2001). El enfoque del marco lgico: 10 casos prcticos. Cuaderno para la
identificacin y diseo de proyectos de desarrollo. Madrid: Fundacin CIDEAL.
Cohen, E. y R. Franco (2001). Evaluacin de proyectos sociales. Mxico, DF: Siglo XXI Editores.
_____ (2005). Gestin social. Cmo lograr eficiencia e impacto en las polticas pblicas sociales.
Mxico, DF: Siglo XXI Editores.
Consejo Nacional de Evaluacin de la Poltica de Desarrollo Social (CONEVAL) (2007). ANEXO
02. Nota tcnica con los principales conceptos de la Matriz de Indicadores. Consultado en
http://www.coneval.gob.mx/coneval/
_____ (2008). Informe de Evaluacin de la Poltica de Desarrollo Social en Mxico. Consultado en
http://www.coneval.gob.mx/coneval/
_____ (2007). Normatividad para la Evaluacin de los Programas Federales. Mxico.
Direccin de Presupuestos de Chile (DIPRES) (2001). Metodologa para la elaboracin de la Matriz de Marco Lgico. Documentos de evaluacin de impacto. Santiago de Chile.
Ley General de Desarrollo Social. Diario Oficial de la Federacin, 20 de enero de 2004. Mxico.
Lineamientos Generales para la Evaluacin de los Programas Federales de la Administracin
Pblica Federal. Diario Oficial de la Federacin, 30 de marzo de 2007. Mxico.
Medina Giopp, A. (2007). El Sistema Nacional de Monitoreo y Evaluacin de la Gestin Pblica
en Mxico. Washington: Banco Mundial.
Organizacin de las Naciones Unidas (ONU) (2001). El uso de los indicadores socioeconmicos
en la formulacin y evaluacin de proyectos sociales: aplicacin metodolgica. Chile, Santiago: ILPES-CEPAL.
Secretara de Hacienda y Crdito Pblico/Secretara de la Funcin Pblica/Consejo Nacional
de Evaluacin de la Poltica de Desarrollo Social (2010a). Gua para el Diseo de Indicadores Estratgicos. Mxico.
_____ (2010b). Gua para la Construccin de la Matriz de Indicadores para Resultados. Mxico.

69

Esta obra se termin de imprimir en el mes de septiembre de 2013 en Talleres Grficos


de Mxico, Canal del Norte 80, Col. Felipe Pescador, CP. 06280, Mxico, D.F.
La edicin consta de 500 ejemplares.

You might also like