blogs.iadb.

org

http://blogs.iadb.org/Ideasquecuentan/2015/07/17/hagase-mas-luz-el-caso-de-las-evaluaciones-de-impacto/

Como las evaluaciones de impacto pueden ayudar a los pases

en vas de desarrollo.
Carlos Scartascini

julio 17,
2015

Hgase (ms) luz : El caso de las evaluaciones de impacto.

Pueden las evaluaciones de impacto hacer una diferencia?

Evaluar es buscar una llave donde la luz es ms fuerte, o
donde en realidad se perdi?
La respuesta es un rotundo s, pero por razones muy distintas a
las que generalmente imaginamos. El argumento que hago en
esta nota es que las evaluaciones de impacto son importantes
no slo por su efecto directo en mostrar cules polticas
funcionan y cules no, sino porque tambin pueden ser un
instrumento para cambiar el equilibrio poltico que determina la
calidad integral de las polticas. Instituir y desarrollar una cultura
de evaluacin puede ayudar a construir capacidades
gubernamentales ms fuertes y polticas pblicas mejor
alineadas con los objetivos de desarrollo.

*1942 June 3, Florence Morning News, Mutt and Jeff Comic Strip, Page 7, Florence, South
Carolina. (NewspaperArchive)
Las evaluaciones de impacto son importantes.
La mayora de las personas estn de acuerdo con que la evaluacin de las polticas es necesaria para averiguar si

realmente tienen algn impacto, as como la direccin y el tamao de ese impacto. La evaluacin permite calcular el
costo-beneficio de operar a escala y por otra parte de replicar intervenciones. En particular las pruebas de control
de asignacin aleatoria (RCTs por sus siglas en ingls), se han vuelto muy populares por que la asignacin al
azar de los participantes en los programas aumenta la probabilidad real de efectos positivos con independencia del
programa. Como el Informe de desarrollo efectivo 2014 del BID resume, Las evaluaciones de impacto permiten
verificar que, efectivamente, se ha optado por hacer lo correcto y que se est haciendo bien. Una evaluacin de
impacto muestra que las tendencias positivas observadas o los resultados de desarrollo se deben o son atribuibles
al proyecto apoyado por el BID. Las historias sobre las evaluaciones de impacto realizadas por el BID en 2014
ofrecen una visin de su importancia.
Las RCTs responden las principales preguntas de desarrollo?
No necesariamente. Las evaluaciones de impacto son slo una herramienta para iluminar a los profesionales del
desarrollo. Por ejemplo, las RCTs realizados por The Abdul Latif Jameel Poverty Action Lab (J -PAL) en materia
educativa han ayudado a identificar diversas maneras de aumentar la matrcula y la asistencia escolar, numerosas
estrategias para mejorar el aprendizaje de los estudiantes , y la amplia variacin en el costo -efectividad de los
diferentes programas. An as, como Ricardo Hausmann seala, mientras que la educacin es sin duda importante,
el impacto de la educacin en el crecimiento econmico no es tan clara. En promedio, el nivel de educacin ha
aumentado en casi 4 veces en los ltimos 50 aos, mientras que el ingreso per cpita ni siquiera ha duplicado en el
mismo perodo. Por otra parte, pases como China comenzaron con menos educacin que Mxico y cometieron
menos avances educativos, pero aun as han podido crecer mucho ms rpido. En consecuencia, el impacto de la
RCT puede ser importante en muchas reas, pero al margen de las principales cuestiones de desarrollo.
Adems, como Lant Pritchett y Philipp Krause han escrito con destreza, muchos pases han tenido muy buenos
resultados sin necesidad de utilizar pruebas rigurosas, mucho menos RCTs; ningn pas desarrollado actual se
apoy demasiado en las RCTs durante su proceso de desarrollo. Los pases que han acogido malas polticas no lo
hicieron necesariamente porque carecan de informacin. Existe suficiente informacin sobre el efecto pernicioso de
la impresin en exceso de dinero o de generar grandes dficits para incrementar el gasto corriente rgidos, que los
agentes polticos de todo el mundo ignoran. Del mismo modo, a pesar de una amplia evidencia de que el control de
precios tiende a reducir la oferta, a la creacin de mercados negros, y da lugar a muchos resultados perversos a
largo plazo, muchos polticos todava los siguen utilizando.
Qu caracteriza a los pases que van mejor?
Un denominador comn entre los pases que lo hacen bien, no es que lleven a cabo ms RCTs, sino que tienden a
tener mejores caractersticas en sus polticas pblicas. Como en La poltica de polticas pblicas y en publicaciones
posteriores hemos argumentado, para tener xito, las polticas deben ser estables, es decir, que cambien en
respuesta a las condiciones econmicas, en lugar de los cambios en los vientos polticos. Las polticas deben ser
adaptables, de tal manera que puedan ser ajustadas o reemplazadas cuando sea necesario, de manera coordinada
entre los diferentes organismos y niveles de gobierno; bien implementadas, aplicadas, y eficientes. Por ltimo,
deben ser de inters pblico para promover el bienestar general, en lugar de recompensar a individuos
especficos, facciones o regiones. La evidencia ha demostrado que esas caractersticas, son absolutamente crticas.
Una poltica que sea denominada como mejor poltica que carezca de credibilidad y de no fomentar cooperacin a
largo plazo en la esfera poltica puede ser mucho menos eficaz que una menos ideal, pero estable y bien
implementada. De hecho, una creble, aunque imperfecta, poltica puede tener una gran virtud.
Desafortunadamente, los pases en desarrollo se quedan atrs en la calidad de las caractersticas de las polticas
que hacen a largo plazo, que hacen de la formulacin de polticas, procesos eficaces. ( Figura 1).

Figura. 1 ndice de polticas en las regiones del mundo.

Fuente: Franco Chuaire and Scartascini (2014).

El conjunto de los pases que lo hacen bien tienden a tener una burocracia estable y profesionalizada, un Congreso
institucionalizado, partidos polticos programticos e institucionalizados y un poder judicial independiente. En otras
palabras, tienen especialistas que pueden poner en prctica esas polticas (burcratas profesionalizados), y terceros
actores que pueden decirle al gobierno cuando las polticas no funcionan (trabajando mecanismos judiciales y de
rendicin de cuentas). Por otra parte, los gobiernos tienen que preocuparse por la mejora de las polticas pblicas;
es decir, que internalizan el efecto a largo plazo de sus acciones (slo es posible cuando los actores tienen un
inters a largo plazo y toman en cuenta el costo de las acciones de los actores actuales institucionalizados.)
Figura 2. Capacidades gubernamentales: comparativo global.

Fuente: Franco Chuaire and Scartascini (2014).

Cul es entonces el valor de las RCTs para los pases en desarrollo?
En primer lugar, en los pases con bajas capacidades, la realizacin de estudios piloto en condiciones rigurosas de
evaluacin puede ayudar a los responsables de las polticas a alejarse polticas de bajo rendimiento. Esto es
particularmente importante en los pases en desarrollo, donde escasos recursos tienen muchos usos en
competencia.
En segundo lugar, y esto es lo esencial de esta nota, las RCTs podran ser una manera de forzar a los pases a
salirse de un equilibrio perverso. Demasiados pases en desarrollo sufren de congresos de calidad inferior. Sus
legisladores carecen de experiencia y personal profesional y, en muchos casos, parecen no estar comprometidos a
invertir en las capacidades de la institucin a la que pertenecen. Demasiados pases son atendidos por servidores
pblicos en los que el empleo depende ms en el clientelismo poltico que el mrito o habilidades tcnicas. Con
pocas excepciones, la independencia judicial es un oxmoron. En varios pases, los tribunales estn perdiendo
incluso la poca autonoma que alguna vez tuvieron. En muchos pases, los partidos polticos son una rareza y los
polticos cambian etiquetas partidarias todas las elecciones, lo que reduce la probabilidad de la internalizacin de
sus acciones.
La comunidad internacional debe ayudar a la regin a fortalecer esas instituciones. Lo cual, como hemos
argumentado ya (Scartascini y Tommasi, 2014), no significa insistir en la llamada legislacin perfecta. Tampoco
significa tener que verter dinero para infraestructura material, como ordenadores, que no tendr ningn efecto,
cuando las propias instituciones son defectuosas. Por el contrario, implica el uso de experiencia e influencia
financieras para forzar a los gobiernos a invitar a la oposicin y a cunto actor poltico resulte necesario como
jugadores a la mesa en el inters de apoyar la creacin de instituciones, aceptando el progreso gradual y apuestas

seguras, y tratando de crear incentivos que empujen a los actores polticos a ignorar las tentaciones polticas de
corto plazo a favor del consenso y la cooperacin a largo plazo. Aqu es donde las RCTs y las evaluaciones de
impacto pueden hacer una diferencia. Obligando a que las decisiones polticas se tomen con base en pruebas
slidas derivadas precisamente de esas RCTs las cuales generarn condiciones necesarias para construir una
mayor capacidad local. Si las polticas tienen que ser evaluados, es menos probable que se pueden cambiar a
voluntad de una administracin a otra, cuando estn funcionando adecuadamente. Por otra parte, sera ms fcil
para los polticos oponerse a polticas que no funcionaran, pero que estn siendo forzados a travs del sistema por
motivos clientelistas. Como las autoridades gubernamentales entrevistadas en este vdeo atestiguan, la evaluacin
ayuda a aumentar su capacidad en la toma de decisiones.
Esperemos que muy pronto, seamos capaces de buscar la llave en dnde se perdi. Seguramente, ms y mejor
evaluacin arrojar mayor luz ms a los problemas clave identificados por otras investigaciones analticas y
empricas. Esperemos tambin, que presionando por ms y mejor evaluacin en aquellos pases con capacidades
gubernamentales reducidas en los que la comunidad internacional tiene una clara participacin tambin pueda
conducir a mejoras en la capacidad local y un mejor equilibrio poltico a largo plazo.
***