Ctedra de Polticas Pblicas I - Ayudantia

EVALUACIN
[] La medicin sistemtica de la operacin o impacto de un programa
o poltica pblica, comparada con estndares implcitos o explcitos
en orden a contribuir su rendimiento
(Weiss, Carol H. Evaluation:Methods for Studying Programs and Policies. Prentice
Hall, 1998)

Qu evaluar?
Cundo evaluar?
Cmo evaluar?

Por qu?

En ctedra

Definicin y contexto de evaluacin

Consideraciones de poltica (poder) respecto a la evaluacin.

Implicancias sobre qu evaluar, y por qu hacerlo.

Criterios de evaluacin

Objetivos de la evaluacin

Tipos de evaluacin

Evaluacin de Polticas Pblicas: Cumplimiento de polticas

generales, sectoriales decisiones sobre polticas pblicas.
Evaluacin de Programas Pblicos: Impacto o resultados de una
intervencin pblica directa sobre una realidad social mejoras del
funcionamiento del programa y su impacto.
Evaluacin de la gestin y resultados de entidades pblicas:
Resultados obtenidos por las Is pblicas y su comparacin con
aquellos planeados mejoras de desempeo.

Tipos de evaluacin

Segn la etapa de la intervencin:

Ex ante: Previa a la implantacin de la accin

gubernamental (estudios de diseo y pre-inversin)
Procesos: durante el ejercicio de la accin gubernamental
(uso de recursos)
Ex post: Una vez finalizada la accin (anlisis de
resultados inmediatos, intermedios e impactos).

CASO 1: Evaluacin de Impacto

Las evaluaciones de impacto

son un tipo particular de
evaluacin que intenta
responder a preguntas sobre
causa y efecto.
Una evaluacin de impacto
analiza los cambios en el
resultado directamente
atribuibles al programa
(Gertler et. al, 2011)

La pregunta fundamental de la evaluacin: Cul es el

impacto (o efecto causal) de un programa sobre un
resultado de inters?:

cul es el efecto causal de las becas sobre la asistencia

escolar y el logro acadmico?
Cul es el impacto sobre el acceso a la atencin a la
salud de la contratacin de la atencin primaria a
proveedores privados?

Conceptos clave de la Evaluacin de

Impacto

Teora del cambio

Cadena de Resultados

Inferencia causal

Grupos Contrafactuales

Cadena de resultados

Cadena de resultados de un programa

de matemticas

Contrafactuales
El contrafactual es una estimacin de cul habra sido el resultado (Y)
para un participante en el programa en ausencia del programa (P)

clon perfecto

Grupo de comparacin
vlido

Contrafactual falso
1.

Estimacin antes-despus

2.

Comparacin inscritos- no inscritos

El sesgo de seleccin se produce
cuando las razones por las que una
persona participa en un programa se
correlacionan con los resultados.
Este sesgo se produce normalmente
cuando el grupo de comparacin
no es elegible para el programa
o decide no participar en l.

CASO 2: Consejo Nacional de Evaluacin de la Poltica de Desarrollo

Social
CONEVAL (MXICO)

MISIN: Medir la pobreza y

evaluar los Programas y la
Poltica de Desarrollo Social
para mejorar sus resultados y
apoyar la rendicin de cuentas.
VISIN: Somos una institucin
reconocida por su credibilidad
y rigor tcnico para generar
informacin objetiva y til que
contribuye a la mejora de la
Poltica de Desarrollo Social.

Preguntas iniciales

Resultado

Observacin

Tipo de
Evaluacin

Ha habido un cambio en el
comportamiento de los gruposobjetivo gracias a esta poltica
pblica?

Hubo resultados positivos, ya que, las

madres del los infantes participantes de
esta accin pblica mejoraron sus
competencias, sensibilidad,
conocimientos, y fueron capaces de
mejorar la calidad del ambiente del
hogar.

Esto es basado en la informacin entregada

por el programa Early Head Start (EHS)
(focalizado en atencin domiciliaria) para lo
cual realiz entrevistas comparativas y por un
perodo determinado en los hogares de la
poblacin objetivo.

Evaluacin de
Impacto (ex post)

Se han cumplido los

objetivos originales de esta
accin pblica?

Los objetivos generales

son: ser un programa para
toda la ciudadana el cual
acompaa a los nios y
nias desde el primer
control de gestacin hasta
el pre kinder
(correspondiente al PADB)
y realizar prestaciones
garantizadas para la
poblacin mas vulnerable
del pas(60% ms
No existe mayor
vulnerables de la
poblacin y prestaciones informacin del resto de
de acceso preferente al
los programas (que no
40% ms vulnerable).
sean el PADB o las
Actualmente la cobertura prestaciones).
del componente Apoyo
Biopsicosocial ha ido
creciendo hasta lograr el
100% de las gestantes y
el 85% de cobertura en los
nios de 0 a 4 aos. En
relacin con los otros
objetivos no existe
informacin de
evaluacin.

Evaluacin de
resultados
(ex post))

Preguntas Iniciales

Resultado
Observacin
Tipo de Evaluacin
Bajo un informe de evaluacin de la ley
Sobre acceso a la informacin pblica,
Nos parece llamativo que solo un 35%
efectuada el ao 2014, el 81% de los
de los funcionarios crean que la ley ha
En relacin a los funcionarios
funcionarios pblicos encuestados
Evaluacin de resultados
ayudado a reducir la corrupcin,
pblicos encargados de responder
concuerdan en que ha aumentado la
(ex post)
siendo que nosotros creemos que
solicitudes por Transparencia
participacin ciudadana, y, un 71% dice
deberan ser ms, ya que existe buena
Evaluacin de poltica
Cmo evalan los efectos de la
que ha ayudado a que exista una mayor
participacin ciudadana, pero poca
ley 20.285 hacia la ciudadana? proteccin de los derechos ciudadanos. En
pblica
fiscalizacin a las autoridades y
cambio, solo un 35% seala que la ley a
servicios, segn los funcionarios.
sido una herramienta fundamental para
reducir la corrupcin del Estado.
Entendemos que a partir de la
implementacin de la ley, los
organismos pblicos han tenido que
Un 76% de los funcionarios pblicos creen
realizar mayores gastos, ya sea en
que se ha aumentado la carga laboral, un
personal, como en infraestructura,
Evaluacin de
Cules han sido las consecuencias
20% dice que a llevado a una mayor
adems que, vemos evidente que
negativas dentro de los organismos burocratizacin de la organizacin en la
procesos*
aumente la carga laboral por las
pblicos luego de aos de
que trabajan, un 15% seala que se han
Evaluacin ex ante (Marco
distintas solicitudes que llegan a
implementarse la ley?
generado conflictos entre ciudadanos y el
diario, pero quizs hace falta mayor
Lgico)
organismo, y slo un 13% dice que se han
personal, ya que hoy en da la
generado conflictos entre los organismos.
ciudadana quiere hacer valer sus
derechos y quiere saber que pasa con
los dineros de todos y todas.
Podemos evidenciar que, a pesar de
los efectos negativos que
En cuanto a las percepcin de los
anteriormente mencionamos, los
beneficios y los costos que ha
Un 59% de los funcionarios creen que los
funcionarios ven un efecto ms
Evaluacin de resultados
trado la ley Cmo creen los
mecanismos de transparencia han trado
positivo de la ley, trayendo con ella
(ex post)
funcionarios pblicos que ha
ms beneficios que costos para el Estado,
mayores beneficios que costos en
Evaluacin de poltica
afectado dentro del Estado y al mientras que un 56% piensa igual, pero en distintos mbitos, pero an as nos
interior de los organismos en que
relacin al organismo en el que trabaja.
parece que queda un porcentaje
pblica
trabajan?
importante de servidores pblicos que
no piensan lo mismo, lo cual nos
parece preocupante.
Podemos observar con la pregunta
En este aspecto segn una encuesta
anterior que la gente valora la rapidez
Sosteniendo a los solicitantes de
realizada a 791 solicitantes el 60% elige la en la entrega de informacin, lo que
Evaluacin de resultados
informacin como ejes de anlisis y
entrega de respuesta e informacin en los
permite bajo ese punto de vista,
(ex post)
mediante encuestas. Qu aspecto
tiempos adecuados y estipulados por la valorar el esfuerzo por transparentar e
Evaluacin de poltica pblica
de la ley es el mejor evaluado?
ley.
iniciar un intercambio con el
solicitante de forma eficaz y continua.
En el mismo universo de solicitantes, se ha
hecho una escala parecida en dnde el
Podemos observar en este universo,
Considerando las plataformas
56% considera que es fcil el acceso a la
que se considera lo factible de pedir
virtuales y fsicas para la solicitud informacin. Por otra parte, slo el 10%
informacin y la esencia misma del
Evaluacin de resultados
de informacin, y por ello mismo
considera que es difcil. Esto se reduce
acceso recae en la facilidad de ambas
(ex post)
en trminos prcticos Es de Fcil tambin a la idea de lo burocrtico que
plataformas para obtener lo necesario
Evaluacin de poltica pblica
o difcil el acceso para los
podra ser el pedir informacin, sin
y requerido por parte de los
solicitantes?
embargo, estos porcentajes confirman la
solicitantes.
velocidad y lo poco dificultoso de requerir