Documente Academic
Documente Profesional
Documente Cultură
1. INTRODUCCIN.
Cules son los resultados de la ayuda internacional en trminos de desarrollo? Sirve
realmente para reducir la pobreza? En definitiva, es eficaz y merece la pena mantenerla y
aumentarla o bien es un lastre para el desarrollo?
Preguntas tan sencillas tienen respuestas muy complejas. En este libro tratamos de abordarlas,
pero de entrada he de reconocer que no tengo una respuesta clara y distinta que dira
Descartes, un s o un no probado en hechos evaluados. Creo que este libro muestra ms el
estado de ignorancia en el que nos encontramos, que un juicio evaluativo que est soportado
por evidencias. Es ms, el mensaje central va a ser que lo que hacen falta son evaluaciones de
resultados rigurosas que nos vayan orientando sobre lo que funciona y lo que no en la ayuda
para el desarrollo. Conocer qu es lo que tiene xito y qu fracasa. Es decir. Abordar la ayuda
desde una metodologa cientfica, aprovechando la buena voluntad con que se ayuda, pero
reconociendo que sta es claramente insuficiente para traducir la ayuda en menos pobreza.
En 2007 han aparecido tres libros en lengua inglesa con casi el mismo ttulo: el monogrfico
del International Poverty Centre perteneciente al Programa de Naciones Unidas para el
Desarrollo, IPC (2007) Does Aid Work?, en el que se compilan reseas de trabajos de varios
autores dentro de su coleccin Poverty in Focus; el de Riddell (2007) Does foreign aid
really work?; y el editado por Banerjee (2007) Making Aid Work. La misma cuestin ya era
formulada por Cassen y sus asociados (1986) que escribieron el pionero Does Aid Work?
Podra sorprender que 21 aos de investigacin no hayan sido capaces de ofrecer una
respuesta definitiva a la cuestin sobre la eficacia de la ayuda, pero as es. Banerjee (2006)
califica de vago el pensamiento reinante en la ayuda al desarrollo (aid thinking is lazy
thinking). Se queja de cmo durante la ayuda enviada a Pakistn en 2005 tras el terremoto
habido en ese pas, unos estudiantes de la Universidad de Lahore disearon un formulario
muy simple para que las agencias y Organizaciones No Gubernamentales de Desarrollo
(ONGD) que iban a actuar de forma inmediata en la zona, pudieran conocer qu iba a hacer
cada una con el fin de que una accin coordinada permitiera garantizar que la ayuda llegara a
los necesitados de forma eficiente. Desgraciadamente no encontraron incentivos ni tiempo
para rellenar dicho formulario. Ancdotas como sta pueden encontrarse con cierta frecuencia
en la literatura sobre el desarrollo y ms abundantes en conversaciones informales con los
agentes que operan sobre el terreno (los practitioners). Por ejemplo durante la mayor
operacin de ayuda humanitaria habida en la historia reciente, la del Tsunami de 2005 en el
INTRODUCCIN
II
ndico, la falta de coordinacin hizo que a una misma nia se la vacunara tres veces contra el
sarampin1. Pero las ancdotas no crean conocimiento cientfico que permita juzgar a partir de
resultados agregados o tendenciales. No se deben tomar decisiones a partir de ancdotas. Por
eso es imprescindible investigar y evaluar.
Evaluar la intervencin de la ayuda humanitaria tras el tsunami en el ndico es lo que se
propuso un comit conjunto de donantes (la Tsunami Evaluation Coalition, TEC), cuyo
informe de sntesis ha sido publicado por Telford & Cosgrave (2006). La intervencin alcanz
a 14 pases en los que se haban producido 227.000 muertos y 1,7 millones de desplazados.
Para esta desgracia, valorada en unos 9.900 millones de dlares, se lograron recaudar 13.500
millones de dlares. Es una cifra jams antes alcanzada. De ellos, 5.500 millones procedan de
donaciones particulares de ciudadanos de los pases desarrollados. El informe menciona cmo
a los seis meses del desastre la ayuda haba podido proporcionar un nuevo techo a medio
milln de personas en Aceh o cmo en Sri Lanka se haban recuperado el 80% de los botes de
pesca y los mercados de pescado. Pero menciona tambin muchas de las limitaciones
encontradas: la falta de acceso a muchos lugares y personas necesitadas condicionada por los
conflictos armados existentes en Sri Lanka e Indonesia; los procedimientos tan burocratizados
que hubo que seguir; el centralismo de la toma de decisiones y la corrupcin en los lderes
locales. En general se cont con poco personal experto en este tipo de intervenciones debido a
la alta rotacin que existe en estos trabajos; se usaron mtodos y procedimientos poco
adecuados a la realidad concreta de la zona; se gener un sentimiento de invasin a los
propios ayudados por la falta de capacidad de comunicacin de los cooperantes, por la
supremaca de las relaciones en ingls y la dbil coordinacin entre agencias que provoc un
enfoque de intervenciones fragmentadas, dispersas y una imprecisa valoracin de las
necesidades. Se denuncia cmo esta improvisacin produjo que hubiera ms dinero que el
necesario, superando la capacidad de absorcin de la ayuda eficiente existente en la zona.
Adems, la mayor parte de la ayuda se concentr en una docena de ONGD internacionales
que dispusieron de mayor cuanta de recursos que la propia ayuda oficial procedente de los
gobiernos. Esto provoc entre los ayudados quejas de falta de informacin, de arrogancia e
ignorancia de los procesos y gustos locales y de colocar ayuda no pedida o donde no se
necesitaba, aumentando la desigualdad entre la poblacin ayudada y no ayudada.
El Pas 2005, Demasiado dinero en Banda Aceh, 13 de abril, p.A2. Citado en Djankov et al. (2006b:3).
INTRODUCCIN
III
La evaluacin conjunta de tsunami sirve para avisar que el dicho de que toda ayuda es poca
es un mito peligroso y que fue ms sencillo reconstruir infraestructuras que generar desarrollo
humano en la zona, entendido como un aumento de acceso a la propiedad de la tierra,
reduccin de la pobreza o mejora del medio ambiente. El informe reconoce que tras la
intervencin no existe menor vulnerabilidad para que el fenmeno, si se repite, pueda ser
menos daino.
Aadamos otro factor a nuestra reflexin. Cuntos de los ciudadanos de los pases
desarrollados que otorgaron una donacin privada hicieron un verdadero seguimiento de su
aportacin y exigieron transparencia y resultados a quienes se lo entregaron? Cuntos
gobiernos han difundido y presentado de forma pblica y accesible al ciudadano o al
parlamento los resultados de esta evaluacin? La ciudadana solidaria que cree en la eficacia
de la ayuda, quiere saber sus resultados y los demanda para que exista un incentivo poltico
suficiente que se traduzca en una sistematizacin del aprendizaje mediante las evaluaciones?
O prefiere dar dinero un tanto a ciegas y por una buena causa pero sin que sean despus
informados con una detallada rendicin de cuentas?
Mi impresin es que an no (de forma general y particularmente en Espaa) y eso aade otra
motivacin a este libro. Aunque los estudios sociolgicos internacionales y en Espaa,
muestran un alto grado de apoyo popular a la pregunta genrica sobre si el gobierno de su
pas debera ayudar a reducir las desigualdades y la pobreza en el mundo, tambin es cierto
que el conocimiento medio de la cuanta y destino de los fondos de ayuda otorgados por los
gobiernos por parte de los ciudadanos es escaso. En Espaa, hay estudios que muestran cmo
el apoyo sociolgico de la ciudadana a la ayuda internacional crece, pero no est
correlacionado con una influencia en la calidad de su gestin, ni en su direccin estratgica
(Angulo 2004, 2007)2. En pocas palabras, la cultura de evaluacin y rendicin pblica de
cuentas en la cooperacin para el desarrollo, an es escasa.
Las evaluaciones rigurosas sobre intervenciones de desarrollo aportan, sin embargo, un
conocimiento clave para los tomadores de decisiones polticas, especialmente para los
gobernantes de los pases en desarrollo. El desarrollo es un proceso que descansa sobre todo
en las fuerzas e instituciones del propio pas socio (receptor de la ayuda). Es un proceso
Para estudios similares en Europa vase McDonell et al. (2002, 2003), INRA (1997, 1999), Olsen (2005). En Estados
Unidos, Stern (1998) y PIPA (2001). Para la percepcin de las ONGD en Espaa, vase CONGDE (2005b) y Fundacin
Carolina (2005).
IV
INTRODUCCIN
endgeno, en el que la ayuda es simplemente eso, una ayuda para ampliar las oportunidades
y capacidades de las personas para que puedan vivir de la forma que estimen ms valiosa.
Como veremos ms adelante, eso es el desarrollo humano. Muchos de los proyectos y
programas que ejecutan por ejemplo las ONGD espaolas son de pequea dimensin y
cuanta (un promedio de 48.000 euros segn la Coordinadora de ONGD de Espaa,
CONGDE 2007). Esa dimensin puede ayudar a que haya menos necesidad en un grupo de
poblacin. Quiz se dispone de una escuela, un pozo de agua potable o un pequeo
dispensario de atencin primaria. Pero es difcil que se ponga en marcha todo un proceso
nacional de desarrollo como exige la mayora de los pases pobres. En otras palabras, no
podemos pedir a la ayuda lo que no puede dar. La ayuda internacional no es la clave de
bveda del desarrollo humano endgeno y sostenible. No se debe esperar que la ayuda sea el
corrector internacional de las desigualdades, ni la principal financiacin de los bienes
pblicos globales. Primero por escala y alcance de su cuanta. Y segundo, porque las
motivaciones con las que se concede o no la ayuda son y han sido a lo largo de su historiamucho ms amplias que las de la reduccin de la pobreza, como expondremos en varios
pginas de este libro.
Pero que la ayuda externa no sea la panacea para el desarrollo no conduce necesariamente a
que deba ser eliminada. Hay muchos logros, a menudo ocultos, producidos por la cooperacin
internacional para el desarrollo. La vida de muchas personas ha mejorado gracias a la ayuda.
Quiz donde ms informados estamos en los logros de la ayuda es en los efectos que han
tenido las campaas de vacunacin para frenar enfermedades contagiosas erradicadas en el
primer mundo pero con alta prevalencia en los pases en desarrollo. Segn Levine (2004), el
sarampin ha sido casi eliminado de frica donde se ha pasado de 60.000 afectados en 1996 a
117 en 2000. La ceguera del ro (oncocerciasis) se ha prevenido en 600.000 casos en 11 pases
del Oeste de frica desde 1974. La polio ha sido prcticamente eliminada de Amrica Latina
y el Caribe. En Egipto el programa contra la diarrea a travs de terapia de rehidratacin oral
ha logrado reducir su incidencia en un 82% entre 1982-1989. Es cierto que tambin suelen
citarse ms a menudo las cifras de las tareas pendientes: nmero de nios sin escolarizar,
desnutridos, madres sin una atencin segura en el parto y todo ese bloque de necesidades
vergonzosas que han sido seleccionadas en los Objetivos de Desarrollo del Milenio (ODM)
tras la Cumbre del Milenio organizada por Naciones Unidas en 2000 y que recoga las
necesidades y compromisos que haban sido tratados en muchas de las anteriores Cumbres
celebradas a lo largo de la dcada de los noventa. Pero es errneo pensar que la mayora de
INTRODUCCIN
VI
INTRODUCCIN
mantenimiento de lites polticas y econmicas que han abusado de la ayuda para mantener su
statu quo, nunca para redistribuir riqueza, poder o participacin entre sus ciudadanos.
Definitivamente, el juicio global sobre la eficacia de la ayuda es tan polidrico que merece la
pena analizarlo con detenimiento a partir de un reconocimiento inicial del gran nivel de
ignorancia en el que actualmente estamos.
No le falta un punto de razn a Easterly (2006:4) cuando se asombra al comprobar que
transcurridos sesenta aos desde el Plan Marshall y gastados 2,3 trillones de dlares, an la
ayuda no sea capaz de proveer una mosquitera a cada persona que vive en las zonas paldicas
del mundo para reducir en una gran medida la morbilidad por contraer malaria. Easterly se
queja de que los donantes sean un simple crtel hiperburocratizado de buenas intenciones
incapaz de perseverar en la eficacia de la ayuda orientada por resultados. Compara el lento
progreso poltico y la gran carga planificadora que supone el actual sistema internacional de
ayuda, frente la agilidad y los incentivos que muestra el mercado internacional de libros para
distribuir el ltimo ejemplar de Harry Potter en la mayora de las libreras del mundo. Easterly
desconfa de los planificadores (en concreto del planteamiento realizado por J. Sachs 2005, en
El fin de la pobreza) y confa en los que l denomina buscadores activos de soluciones en el
mundo en desarrollo. Entre estos searchers, se encuentran algunos evaluadores y
experiencias concretas que aqu vamos a comentar.
La estructura del libro es la siguiente. Una primera parte aborda la temtica de la eficacia de
la ayuda, preferentemente desde el mbito agregado (macro). Comienzo con un captulo en el
que expongo las fuertes debilidades empricas a las que nos enfrentamos cuando estimamos la
pobreza. Si queremos responder a si la ayuda reduce la pobreza, lo primero que habr que
saber es qu es pobreza, cunta hay y cmo ha evolucionado en el tiempo. La verdad ms
extendida en la actualidad es que la pobreza es multidimensional, no slo econmica.
Reconocido esto, la dimensin econmica de la pobreza (sea medida a travs del ingreso o del
consumo) es muy difcil de medir. El captulo da detalle de todos los supuestos que los
cientficos sociales (comprendo que muchos lectores encuentren la expresin casi como una
contraditio in terminis) deben realizar a la hora de juzgar la evolucin de la pobreza en el
mundo y cmo los grados de variacin de los resultados en funcin de stos supuestos son
enormes.
El segundo captulo aborda los conceptos de desarrollo y de ayuda al desarrollo. Se ofrece una
panormica de la evolucin de qu se ha entendido por desarrollo desde los aos cincuenta
hasta la actualidad y cmo han evolucionado los instrumentos de la ayuda externa. Se
INTRODUCCIN
VII
VIII
INTRODUCCIN
nico modelo de evaluacin que sea ptimo. El evaluador debe ser un experto en
metodologas. Debe conocer el abanico ms amplio posible de acercamientos a una misma
realidad, para utilizarlas de forma flexible, apropiada y creativa, adaptndose a cada contexto.
La experiencia es una cualidad muy necesaria en la evaluacin. Pero no podemos reducir la
evaluacin a la repeticin sistemtica de una metodologa estndar. Quiz el Enfoque del
Marco Lgico perdi gran parte de su utilidad cuando se lo redujo a casilleros que los
formuladotes deben rellenar para obtener financiacin para sus programas y eso impide el
diagnstico participativo en profundidad, el anlisis detenido de las hiptesis y las
alternativas, la formulacin creativa y nunca rutinaria de los indicadores y fuentes de
verificacin. A menudo me han propuesto escribir un manual de evaluacin y siempre me
he negado por el peligro que representa convertir el arte de la evaluacin en una serie de
tareas o preguntas sistemticas que el evaluador no iniciado puede ir siguiendo paso a paso.
Evaluar es pensar evaluativamente. Es juzgar el mrito y valor de las intervenciones. Es
buscar recomendaciones posibles, concretas y tiles para tomar decisiones de mejora. Es
iniciarse en un proceso de aprendizaje que siempre permanecer abierto e inacabado, aunque
hay un momento en el tiempo y unos recursos limitados que obliguen a escribir un informe
final. Pero la realidad debe ser la obsesin del evaluador, no el informe. La bsqueda de
la verdad sobre las intervenciones es tan dinmica y contextual que lo ideal es estar evaluando
siempre. Porque siempre hay aprendizajes que obtener. Las conclusiones pueden ser ese
momento del pensamiento en que nos cansamos de pensar y escribimos, siempre de forma
provisional, un informe valorativo y ofrecemos recomendaciones.
El captulo sexto est dedicado a valorar el estado de la eficacia y la evaluacin de la
cooperacin para el desarrollo en Espaa. Ofrezco mi reflexin en torno a uno de los temas
mxima actualidad como es la gestin de la ayuda hacia los resultados y valoro los informes
de evaluacin que han sido publicados por la cooperacin espaola desde su administracin
central.
El captulo sptimo es el eplogo que trata de recoger las principales conclusiones que se han
ido ofreciendo al final de cada captulo, ahora de forma ms sistemtica y, si se me permite,
grfica y plstica. En l expreso mis esperanzas y temores ante la eficacia de la ayuda en su
lucha contra la pobreza. Me resisto a colocarme entre los pesimistas u optimistas. Prefiero ser
realista esperanzado. La investigacin ofrece verdades a menudo incmodas para los
tomadores de decisin. Polticos e investigadores no tienen los mismos incentivos ni mtodos.
Es importante que no permanezcan en mundos estancos ni autosuficientes. Mi sesgo, claro, es
INTRODUCCIN
IX
investigador dada mi profesin. Pero el punto de unin debe ser el inters compartido por
hacer de la pobreza extrema algo histrico. La moral cvica y quiz con mayor nfasis la
religiosa, debe hacernos conscientes de que la pobreza extrema ofende la dignidad intrnseca
del ser humano, sea pensado como ciudadano o como persona.
He pretendido escribir un libro de nivel intermedio. Es decir, un libro que aporte algo nuevo
y vaya ms all de la simple difusin del conocimiento que puede encontrarse ya en la
literatura divulgativa sobre el tema. Pero no yendo a la exigencia de lenguaje y pruebas que
demandan, por ejemplo, los artculos en revistas especializadas. Esto tiene ventajas y riesgos.
La ventaja es que puede llegar a un pblico ms amplio. Quisiera que el sensibilizado no se
perdiera en un los tecnicismos ni abandonara la lectura en sus partes ms complejas. Y
quisiera que el formado encontrar nuevos argumentos o reforzara algunos ya conocidos,
disculpando la falta de rigor, detalle y matiz que en otros medios de publicacin puede
encontrar. Este es el principal inconveniente. Que la eleccin de lenguaje ms familiar y
comn traicione el conocimiento de lo complejo y lo convierta en un saber ordinario que no
refleja la realidad. Espero que tanto los que a veces se pierdan como los que encuentren lo
dicho demasiado vulgar, puedan perdonarme y sacar ambos- algn provecho.
El libro quiere invitar al compromiso cognitivo y a la accin evaluadora. Cuanto ms
aprendamos sobre lo que tiene xito y lo que fracas en la laucha contra la pobreza, cuanta
ms honestidad intelectual y volitiva tengamos los profesionales de la cooperacin para el
desarrollo, ms aprenderemos y menos pobreza deber existir. Los pobres, precisamente por
su necesidad y condicin injusta, merecen la mxima calidad de nuestro trabajo. A ellos, y a
mi familia, est dedicado este esfuerzo.
CAP. 1 LA POBREZA
1.
CAP. 1 LA POBREZA
potable, saneamiento o salud). Los problemas a solucionar para aceptar que los NBI
miden de forma adecuada la pobreza son: determinar qu necesidades son las
indispensables, qu variables estn mejor asociadas a cada necesidad, determinar qu
umbral de cada variable es el mnimo aceptable y determinar un mtodo de agregacin
de cada unidad de las distintas variables elegidas. Existe consenso en que las
necesidades bsicas indispensables son: vivienda, educacin y acceso a servicios
bsicos como agua potable y drenaje para eliminacin de excretas, (menor
disponibilidad de datos existe sobre el acceso a atencin primaria de salud: un centro
mdico de caractersticas determinadas que permita una atencin bsica a los
principales problemas de salud de la regin, incluida la atencin materna durante el
embarazo y el parto, por ejemplo). Las bases de datos sobre NBIs suelen estar
disponibles en oficinas pblicas de cada pas. Una ventaja es que es una informacin
bastante detallada (casi siempre a nivel provincial y con frecuencia a nivel municipal) y
grfica (se suele usar para realizar mapas de NBIs). Un inconveniente es que no se
actualizan con frecuencia (en torno a la dcada), ya que la informacin debe recogerse
al nivel de hogares y mediante encuestas. Los hogares que tienen dos o ms necesidades
bsicas insatisfechas se consideran pobres extremos. Otro inconveniente es que son muy
constantes en el corto plazo, mientras que las lneas de pobreza monetaria son ms
sensibles a los cambios en periodos breves de tiempo (por ejemplo, ante una crisis
financiera, la pobreza de ingresos aumentar de forma sensible en un ao, mientras que
las NBI permanecern ms estables). Las NBI y la lnea de pobreza, como se ver a
continuacin, no son medidas excluyentes, sino complementarias y con probable poca
correlacin, no slo en cuanta de hogares sino en su tipo y composicin concreta1.
Las variables asociadas a la necesidad de vivienda son, por ejemplo, los materiales de
construccin (paredes, piso y techo), el grado de hacinamiento (nmero de personas por
dormitorio, donde 3 o ms se considera hacinamiento). Las variables para agua son
calidad qumica de la misma (potable para el consumo humano), fuente de
abastecimiento (en cada hogar o colectivo), distancia media a la fuente, etc. En
educacin se mide el nmero de personas por hogar analfabetos adultos o nios en edad
escolar que no estn matriculados. La subsistencia de un hogar se aproxima a travs del
1
CAP. 1 LA POBREZA
nivel de estudios del cabeza de familia y nmero de personas que dependen de cada
perceptor de ingreso.
Tabla 1. Necesidades bsicas insatisfechas en Cuzco (Per), 1993.
Informacin de Hogares
Total hogares en viviendas particulares con ocupantes presentes
235056
74.3
12.2
21.4
66.1
9.7
12.3
41.7
21.1
8.7
2.5
0.4
Informacin de Hogares(Urbano)
Total hogares en viviendas particulares con ocupantes presentes
108113
49.8
35.4
11.1
2.9
0.4
Informacin de Hogares(Rural)
Total hogares en viviendas particulares con ocupantes presentes
Hogares con necesidades bsicas insatisfechas - Porcentual
Hogares con una necesidad bsica insatisfecha - Porcentual
126943
95.2
47
29.6
13.5
4.3
0.7
CAP. 1 LA POBREZA
Tpicamente el trabajo agrcola rural exige mayor consumo de caloras, lo que conduce a que la
poblacin urbana ms sedentaria- consuma menos caloras a un mismo nivel de ingreso. Esto provoca
que la lnea de pobreza (monetaria) urbana sea mayor que la rural. Adems, los precios de los bienes
bsicos suelen ser ms altos en la ciudad que en el campo. Pero, si incluimos bienes no alimentarios,
puede que vivir en la ciudad exija ingresos mayores que en el mbito rural (por ejemplo, gastos de
transporte por desplazamiento), con lo que con la misma renta, una persona puede ser calificada pobre en
la ciudad y no en el campo. Todo esto debe conducir al reconocimiento de que la fijacin de lneas de
pobreza son, en buena medida, arbitrarias, a pesar del enfoque cientfico dado por la ingesta calrica Lo
que es muy importante para posibilitar las comparaciones intertemporales- es no cambiar la metodologa
de clculo y slo actualizar los precios de los bienes incluidos para la determinacin de la lnea de
pobreza, ya que puede haber intereses polticos en ello, al ser el nmero de pobres una variable para
medir el xito o fracaso de algunas polticas, recibir subsidios o acceder a programas sociales. En
palabras de Deaton (2006:7)las lneas de pobreza son construcciones tan polticas como cientficas.
CAP. 1 LA POBREZA
que despus de ella), es decir, estimar primero los ingresos en trminos nominales y a
precios corrientes, para despus hacer la conversin a trminos reales y precios
constantes (idealmente con IPC especfico de la canasta representativa de los pobres),
cuando se haga la conversin de la lnea de pobreza nacional a una internacional
(idealmente, utilizando paridad de poder de compra de los bienes realmente consumidos
por los pobres). La estimacin del coste necesario para la adquisicin de esta cantidad
de alimentos es lo que condujo al Banco Mundial a fijar la cantidad de 1 dlar de 1985
diario como ingreso mnimo o lnea internacional de pobreza extrema. Esta lnea fue
actualizada a 1,08$ diarios de 1993. Un serio problema con esta agregacin es suponer
que el tipo de cambio en trminos de PPA utilizado es neutral respecto al acceso real de
alimentos por todos los miembros de la familia y a la cultura o valoracin en cada
regin de los distintos bienes elegidos para componer la canasta bsica de referencia
para el clculo de la PPA (Reddi y Pogge 20033). Las PPA son tambin problemticas
ya que los precios de los bienes que la componen no se recogen directamente para todos
los pases, ni para todos los aos (ni los mismos aos), con lo que las interpolaciones y
predicciones estn sometidas a fuertes mrgenes de error4. Esto ha conducido a algunos
crticos a considerar intil el clculo de los pobres en el mundo, reforzando su
argumento en que no hay una instancia internacional encargada de disear las polticas
anti-pobreza para el mundo.
Frente a la pobreza extrema, podemos considerar la pobreza moderada o simplemente
pobreza. Una forma de considerarla es dividir la lnea de pobreza extrema por el
coeficiente de Engel, es decir, la fraccin de ingreso familiar que se destina al gasto en
alimentos sobre el gasto total. Se supone que segn crece el ingreso monetario de las
familias, menor es el coeficiente de Engel.
Un primer indicador de pobreza lo tenemos entonces al calcular la incidencia de la
pobreza. Esta ser la cantidad absoluta de pobres extremos (o moderados) en hogares o
individuos-, o bien su proporcin sobre el total de la poblacin de un pas (Headcount,
Si la composicin de esa canasta debe ser siempre la misma o debe variar con el tiempo es una cuestin
discutida. La primera opcin es defendida por Ravallion (1998 y 2004) y Deaton (2006), mientras que la
segunda, por ejemplo por Thorbecke (2004). La primera permite comparaciones intertemporales ms
rigurosas. La segunda se ajusta ms a la especificidad del consumo segn vara la renta per capita de los
pases o cambia la importancia del consumo de ciertos bienes y servicios. Por ejemplo el transporte
pblico puede ser esencial para los pobres que vivan en una ciudad, mientras que no existan o se
autosatisfagan en el mbito rural. Es una muestra del trade-off entre consistencia y especificidad de
indicadores.
4
En el Anexo 1 se ofrece una sntesis de cmo se elaboran las PPA.
CAP. 1 LA POBREZA
en ingls). Las base de datos ms extensa que proporcionan esta informacin es la del
Banco Mundial conocida como PovcalNet5.
Tabla 2. Indicadores de pobreza absoluta por regiones. 2004.
Lnea de
% poblacin
Brecha de
Severidad de
pobreza
(Headcount)
pobreza
la pobreza
(Poverty gap)
(Squared
(Poverty line)
poverty gap)
Este de Asia y Pacfico
32.74
9.05
1.93
0.65
32.74
0.95
0.22
0.10
32.74
8.64
2.99
1.51
32.74
1.47
0.26
0.09
Sur de Asia
32.74
30.84
6.96
2.25
frica Sub-Sahariana
32.74
41.09
17.47
9.91
Fuente: Banco Mundial. PovcalNet. La lnea de pobreza de 32.74$ es mensual (el equivalente a 1,08$
diarios)
Por pobreza relativa se entiende aquella que, siendo suficiente para la supervivencia
fsica, somete a la persona dentro del contexto social en el que vive, a unas privaciones
importantes en trminos de consumo bsico. Establece de forma directa una relacin
entre pobreza y desigualdad interna del ingreso en un pas. Por ejemplo, en los pases
ricos existe pobreza relativa que se estima mediante la proporcin (y el nmero
absoluto) de personas que obtienen menos del 60% de la mediana de ingreso del pas6.
Tener menos del 60% de ese ingreso es considerado el umbral de la pobreza relativa.
Para reducir la pobreza relativa en un pas es necesario que aumente el ingreso medio de
los ms pobres. Por tanto, no todo incremento del PIB per capita se traduce
automticamente en reduccin de la pobreza relativa. El incremento del PIB por
habitante, con reduccin de la desigualdad, a favor de los ms pobres, s reducir la
pobreza relativa. En este sentido es til distinguir la desigualdad de ingresos (en media)
de su polarizacin (distancia entre el ingreso mnimo y el mximo).
En Espaa la ONG Caritas y la Fundacin FOESSA realizan de forma peridica un
informe sobre la pobreza utilizando el indicador de tener ingresos por debajo del 50%
de la renta media disponible neta (RDN). En 2005 estimaron 2,2 millones de hogares en
http://iresearch.worldbank.org/PovcalNet/jsp/index.jsp
La mediana es el valor que deja al conjunto de la distribucin de ingresos dividida en dos mitades
exactas (50% a cada lado de la mediana).
6
CAP. 1 LA POBREZA
esa situacin, en los que vivan 8,5 millones de personas (el 44% con menos de 25
aos). El informe establece cuatro estratos de pobreza:
1) Pobreza extrema para los niveles inferiores al 15% de la RDN
2) Pobreza grave entre el 15-25%
3) Pobreza moderada entre 25-35% de la RDN
4) Precariedad social, entre 35-50%
A los niveles 1 y 2 los denomin pobreza severa y a los niveles 3 y 4 pobreza relativa.
El Instituto Nacional de Estadstica realiza anualmente desde 2004 la Encuesta sobre las
Condiciones de Vida (ECV), que da lugar a los Estudios Descriptivos sobre la Pobreza
en Espaa. Sobre el umbral del 60% de la mediana de ingreso, establecido en 6.278,7
por adulto y ao para 2004, estim en 19,9% de la poblacin la pobreza relativa
espaola (19,8% en 2005, con un 18,6% en hombres y 20,9% en mujeres)7. Por edad,
29,4% de las personas de 65 aos o ms son el colectivo pobre ms numeroso, seguido
de los menores de 16 aos (24,2%).
Grfico 1. Pobreza relativa en Espaa. 2006. Porcentajes de poblacin bajo el umbral de
pobreza de ingreso monetario.
Conjunto poblacional
65 y ms aos
50-64 aos
25-49 aos
16-24 aos
menores 16 aos
10
15
Ambos sexos
20
Varones
25
30
35
Mujeres
Para 2006, la tasa de pobreza relativa sigui situada en el 19,9% de la poblacin, con una distribucin
del 21,2% de mujeres y 18,5% de hombres. El ingreso relativo de pobreza se situ en 6.860 anuales para
el hogar de un adulto.
CAP. 1 LA POBREZA
En las Encuestas de Condiciones de Vida que realiza el INE en Espaa, se utiliza otra ponderacin: peso
1 para el primer adulto, 0,5 para el resto de adultos y 0,3 para los menores de 14 aos.
9
CAP. 1 LA POBREZA
tanto en transporte como en la ciudad. Es decir, el coste de vida urbano es mayor que el
rural. Las estimaciones de Chen y Ravallion (2007) revelan unas lneas de pobreza
urbana un 30% ms altas que las rurales. Tenerlo en cuenta supone incrementar el
porcentaje pobres con menos de un dlar al da de ingreso en un 2,3%, que representa
100 millones ms de pobres! entre 1993-2002. Sin embargo, la inmensa mayora de los
pobres absolutos viven en zonas rurales. En 2002 y segn los mismos autores, el
24,55% de los pobres era urbano un total de 291,4 millones de personas- frente 890
millones de habitantes rurales con ingresos por debajo de un dlar diario. Estas
diferencias se producen en todas las regiones del mundo, a pesar de que en 2007 la
poblacin mundial habitando en ciudades super a la urbana por primera vez en la
historia. Entre 1993-2002, hubo un incremento de casi 50 millones de pobres urbanos
frente a una cada de 148 millones de pobres rurales (Chen y Ravallion 2007:13)10. En
suma, aunque los pobres habitan sobre todo en las zonas rurales (la nica excepcin es
Amrica Latina), las reducciones de pobreza se estn debiendo a la cada de la pobreza
rural, mientras aumenta la urbana (del 19% en 1993 al 25% de los pobres en 2002).
Cuando no se dispone de encuestas de hogares para estimar la pobreza, una alternativa
es utilizar la informacin contenida en la contabilidad nacional (CN). Una ventaja que
tiene el uso de datos procedentes de la contabilidad nacional frente a las encuestas, es
que la normativa para su elaboracin es comn a los pases ya que se rige por el sistema
contable de Naciones Unidas de 1993. Adems su periodicidad es anual. Pero el
principal problema es que el consumo privado se estima como variable residual, tras
calcular la produccin de bienes fsicos, de servicios y la depreciacin fsica del capital.
Aunque autores como Deaton (2006) recomiendan no mezclar este tipo de fuentes,
trabajos recientes como el de Bhalla (2002 y 2003) o Sala-i-Martin (2006) lo han hecho
y no han sido los primeros. La cuestin esencial es cmo equilibrar el trade-off entre la
informacin disponible para ms pases que aporta la C.N., con su menor rigor o
calidad frente a las encuestas de hogares.
El estudio comparativo de Szkely et al. (2000) para 17 pases de Amrica Latina,
detect que las mayores diferencias en los niveles de pobreza aparecen por las
diferentes metodologas que se usen a la hora de tratar los datos de la encuesta de
10
Resultados similares se producen bajo la lnea de pobreza de dos dlares diarios. La pobreza urbana
aument 1993-2002 en 65 millones de personas mientras que la rural disminuy en 116 millones. Una
extensin a las diferencias evolutivas de la pobreza urbana y rural se encuentra en Ravallion, Chen y
Sangraula (2007).
CAP. 1 LA POBREZA
10
Los autores del trabajo utilizan 4 metodologas diferentes de ajuste, que junto a otras
variantes, les permiten obtener hasta 90 medidas diferentes de la pobreza. Las
cuestiones metodolgicas no seran tan importantes si los resultados fueran
convergentes, pero las diferencias en el nmero de pobres en los 17 pases considerados
van desde el 12,7% de la poblacin hasta el 65,8%. Es decir, la pobreza puede estar
entre los 61 y 315 millones de personas. Diferencias de 255 millones de personas son
tan amplias que la recomendacin de avanzar hacia un consenso internacional de
medicin de la pobreza se hace urgente. Ejemplos de las diferencias mtricas
encontradas por los autores, sobre la pobreza en todos los pases y en Per, se muestran
en la Tablas 3 y 4.
Tabla 3. Indicadores de pobreza en 17 pases de Amrica Latina bajo diferentes
supuestos.
17 pases Amrica
Latina y Caribe
Mejor estimacin
(encuesta nacional)
Escala de
equivalencia de
adultos y
economas de
escala
Tratamiento de
datos perdidos y
ceros
Ajuste y contraste
Rango de
diferencia (%)
Diferencia del N
de pobres
(redondeo en
millones)
% poblacin pobre
N de pobres
(redondeo, en
millones)
50,7
243
31,4 - 50,7
150 243
19,3
92
50,8 52,3
240 - 253
2,8
13
20,7 65,8
99 - 315
45,1
216
CAP. 1 LA POBREZA
con la CN
Definicin de lnea
22,8 56,8
de pobreza
Mtodo para la
12,7 (PIBpc PPP
comparacin
1987) 58,2
internacional
Todas las
12,7 65,8
combinaciones
Fuente: Szkely et al. (2000)
11
109 - 272
34,0
163
61 - 279
45,5
218
61 - 315
53,1
254
Rango de
diferencia (%)
Diferencia del N
de pobres
(redondeo en
millones)
7,2
1,69
23,8
5,6
0,02
0,0047
48,2
11,34
63,2
14,8
73,2
17,2
77,8
18,3
% poblacin pobre
N de pobres
(redondeo, en
millones)
Mejor estimacin
43,3 (renta)
10,19
(encuesta nacional)
50,5 (consumo)
11,88
Escala de
equivalencia de
adultos y
19,5 43,3
4,58 10,19
economas de
escala
Tratamiento de
43,3 43,4
10,19 10,21
datos perdidos y
ceros
Ajuste y contraste
13,2 61,4
3,1 14,4
con la CN
Definicin de lnea
20,3 83,5
4,7 19,6
de pobreza
Mtodo para la
17,8 (PIBpcPPP
comparacin
4,1 21,4
1987) 91,0
internacional
(WDI)
Todas las
13,2 91,0
3,1 21,4
combinaciones
Fuente: Szkely et al. (2000) y clculos propios.
12
CAP. 1 LA POBREZA
exactitud del consumo reportado disminuye a medida que pasa ms el tiempo (el
consumo de la semana pasada tiende a ser siempre mayor que el realizado hace un mes,
por ejemplo) sobre todo en el intervalo de poblacin de menor consumo (los pobres).
Menores cantidades de consumo informadas, supondrn mayores niveles de pobreza.
Para reflejar la importancia del detalle que tiene utilizar el mismo periodo de reporte
en las encuestas, Deaton (2003b) estima en un 30% ms de gasto en consumo de
comida si se pregunta sobre los ltimos 7 das en vez de sobre el ltimo mes y en un
18% los gastos totales. Estas diferencias suponen reducir la pobreza de India a la
mitad!. Como se pudo observar en la Tabla 4, el estudio comparativo de Szkely et al.
(2000) reporta un nivel de pobreza para Per del 43,3% de la poblacin si se utiliza la
renta frente a un 50,5% utilizando el consumo. La diferencia de 7,2 puntos porcentuales
suponen 1,7 millones de personas que son consideradas pobres o no.
En resumen, y siguiendo a Deaton (2003a), lo deseable sera poder disponer de buenas
encuestas mundiales sobre un mismo concepto (ingreso o consumo), los mismos aos,
cuya cobertura geogrfica est bien delimitada (rural, urbana o nacional), bajo
cuestionarios homogneos (nmero de tems, periodo de recogida de la informacin,
estacionalidad y modo de seleccin de los hogares) y destacando siempre cuntos y
cules rechazaron contestar la encuesta para explicitar despus qu tratamiento
estadstico se dio a stos datos perdidos.
1.6 Profundidad y severidad de la pobreza.
Adems de la incidencia de la pobreza puede ser til conocer la profundidad o brecha
de pobreza (poverty gap). Esta es la diferencia entre el ingreso de cada hogar (o
individuo) y la lnea de pobreza, dividida entre la lnea de pobreza. Su frmula de
clculo es
CAP. 1 LA POBREZA
13
11
14
CAP. 1 LA POBREZA
12
CAP. 1 LA POBREZA
15
120
10
100
80
60
40
20
CAP. 1 LA POBREZA
16
1.8 Vulnerabilidad.
BANCO MUNDIAL
Millones de personas con menos de 1$/da
Porcentaje de poblacin total
Millones de personas con menos de 2$/da
Porcentaje de poblacin total
SALA I MARTN
Con menos de 1$/da
Porcentaje
Con menos de 2$/da
Porcentaje
BHALLA
Con menos de 1$/da
Porcentaje
Con menos de 2$/da
Porcentaje
1970
1.400
40%
2.200
60%
1998
1.199
24%
2.800
51%
Disminucin 1998/1970
-201 millones
-16 puntos
+600
-9 puntos
554
20%
1.323,8
44%
352
6%
973,7
18,5%
-201 millones
-14 puntos
-35,1 millones
-25,5 puntos
1.262
46,4%
1.631
60%
647
13,1%
1.147
23,3%
-615 millones
-33,3 puntos
-484 millones
-36,8 puntos
1987
1998
1998-1987
36,3%
32,1%
-4,2 p.p.
CAP. 1 LA POBREZA
17
22,1%
16%
-6,1 p.p.
SALA I MARTN
Fuentes: BANCO MUNDIAL (2002), BHALLA, S. (2002), CHEN, S. y RAVALLION, M. (2000),
SALA-I-MARTIN, X. (2002a,b).
Como los diferentes pases no realizan las encuestas de hogares en un mismo ao, deben
producirse ajustes y el periodo temporal del anlisis es importante. La tabla 3 ha
mostrado las diferencias entre 1970 y 1998, pero considerando la informacin de cada
pas ms cercana a esos dos aos. La informacin disponible de las encuestas puede
disponerse en forma de un panel de datos que trate de unir la mayor amplitud de pases
con los que se cuenta con encuesta de hogares a su evolucin como serie temporal. Es lo
que ha realizado el Banco Mundial en su base de datos conocida como PovcalNet a
partir de los ajustes realizados por Chen y Ravallion (2001). La ventaja de este panel de
datos es que es metodolgicamente homogneo y comparable sobre la base de 560
encuestas de 100 pases en desarrollo que representan el 93% de la poblacin de los
pases en desarrollo. Sus datos ofrecen una evolucin de la pobreza absoluta como la del
grfico 4.
70
60
Headcount 1$/day
50
40
30
20
10
0
1981
1984
East Asia and Pacific
1987
Europe and Central Asia
1990
1993
1996
Middle East and North Africa
1999
2002
South Asia
2004
Sub-Saharan Africa
Los datos para el grfico se ofrecen en la Tabla 4, en la que hemos aadido los clculos
de las diferencias de pobreza extrema en cada regin por dcadas y para el total del
periodo.
CAP. 1 LA POBREZA
18
1987
0,70
0,47
frica Sub-Sahariana
Progresos temporales
Este de Asia y Pacfico
Europa y Asia Central
Amrica Latina y el Caribe
Oriente Medio y Norte de
frica
Sur de Asia
1981
1984
0,52
3,61 4,22
3,60
1,28 0,95
9,62
9,08 8,64
5,08
2,33
2,08
1,69 1,47
3,82
0,36
3,11
2,12 2,23
198190
-27,89
-0,23
-0,58
199099
-42,33
2,90
-1,15
-2,75
-3,00
-0,61
-3,61 -0,76
-4,41
-8,98
frica Sub-Sahariana
4,53 3,70 -4,85 -1,15 -6,73
-130,77
Fuente: Elaboracin y clculos propios a partir de Banco Mundial: PovcalNet y Chen y Ravallion (2007).
CAP. 1 LA POBREZA
19
CAP. 1 LA POBREZA
20
los campesinos de quedarse con el fruto de sus cosechas, una vez aportadas las cuotas
obligatorias para mantener con alimentos baratos y suficientes a la poblacin que viva
en las ciudades. Lo malo de esta noticia es que este extraordinario dividendo no parece
que pueda volver a darse, como documenta el trabajo de Ravallion y Chen (2007).
Basndose en las series temporales construidas los autores del Banco Mundial estiman
que la tendencia habida en la reduccin del porcentaje de personas con ingresos
menores a 1 dlar al da entre 1981-2004 (0,8% anual) es mayor que la necesaria para
alcanzar el primer Objetivo de Desarrollo del Milenio de reducir la pobreza extrema a la
mitad de la que haba en 1990 (ya que la tasa tendencial necesaria es de 0,6%). Pero esta
buena noticia hay que matizarla en varios aspectos. En primer lugar, aunque la
tendencia representa una reduccin anual de 17 millones de personas que abandonan la
pobreza extrema, an quedarn unos 800 millones de personas en esa dramtica
situacin. En segundo lugar, las personas que superan el umbral del dlar diario, tienden
a quedarse entre uno y dos dlares de ingreso. Los progresos habidos en el grupo de
pobres con menos de 2 dlares diarios no son tan positivos como los de un dlar. Es
ms, el nmero de pobres con ingresos menores a dos dlares ha crecido hasta 1999.
Desde ese ao ha ido descendiendo pero en 2004, los 2.547,9 millones de personas bajo
dos dlares todava superaban a los registrados en 1987 (2.496,1 millones) y 1981
(2.452,5 millones). La proyeccin de la misma tendencia habida entre 1981-2004 para
el ao 2015 se sita en trono los 2.800 millones de personas en pobreza absoluta no
extrema, 2.000 de ellos dentro del intervalo entre 1 y 2 dlares diarios de ingreso.
En estas mediciones juega un papel protagonista China. Las tasas de crecimiento
exponencial anual para tres intervalos de ingreso durante el periodo 1981-2004, con y
sin China se ofrecen en la Tabla 5.
Tabla 5. Tasas de crecimiento anual entre 1981-2004.
Menos de 1$ diario
Ms de 2$ diarios
Todo el mundo
-1,4%
1,9%
3,5%
Excluyendo China
0,1%
2,4%
2,5%
Fuente: Chen y Ravallion (2007). La tasa es fruto de la regresin del logaritmo de la poblacin en cada
intervalo sobre el tiempo, es decir la tasa exponencial anual.
La tabla informa de que si se excluye a China, el resto del mundo apenas ha conseguido
un efecto significativo en cuanto a reducir los pobres con menos de un dlar diario.
Adems, la mayora los que consiguen salir del ingreso de un dlar se sitan en el
siguiente umbral, entre uno y dos dlares, con ms notoriedad si excluimos el caso
CAP. 1 LA POBREZA
21
chino. Prescindir de China para analizar la tendencia de personas que superan la lnea de
pobreza de los dos dlares supone disminuir dicha tendencia en un punto porcentual.
Este anlisis nos permite concluir la alta sensibilidad de la pobreza al nivel de la lnea
de pobreza establecido y la importancia del caso chino a la hora de juzgar la evolucin
de la pobreza en el mundo.
Otro de los esfuerzos ms notables por apreciar de forma rigurosa la evolucin de la
pobreza en el mundo desde 1970 hasta 2000 ha sido el de Sala-i-Martin (2006). En su
estudio aparecen diferencias en las cifras utilizadas por Chen y Ravallion, pero debe
advertirse que este autor utiliza una metodologa diferente a la que ha servido de
comentario hasta ahora. La diferencia fundamental, adems del periodo acotado13, es
que Sala-i-Martin completa la informacin obtenida por las encuestas de hogares con la
contabilidad nacional y que pondera las cifras de cada pas por su poblacin respectiva.
De esta forma construye una distribucin mundial de la poblacin como si slo existiera
un nico pas. Otra diferencia es que ha utilizado el tipo de cambio en PPA derivado de
la base de datos Penn World Tables y en dlares constantes de 1996 en vez de los tipos
de cambio PPA del Banco Mundial y dlares constantes de 1993 como han hecho Chen
y Ravallion (2007), luego las diferencias que van a parecer en los niveles de pobreza ya
estn, en parte, justificadas por estas diferencias que hacen que los datos no sean
totalmente homogneos y, por tanto, estrictamente comparables. Esto no invalida un
resultado convergente en la disminucin de la pobreza en las ltimas dcadas.
Sus principales resultados se ofrecen en la Tabla 6 y Grficos 5 y 6.
Tabla 6. Variacin de la pobreza de ingreso mundial, considerando varias lneas de
pobreza.
Lneas de pobreza
Lnea diaria
% poblacin mundial
Millones de personas
Lnea anual
1970
2000
descenso
1970
2000
Descenso
1$ da
495$ de 1996
15.4
5.7
-9.7
534
322
-212
1,5$ da
570$ de 1996
20.2
-13.1
700
398
-301
2$ da
730$ de 1996
29.6
10.6
-19
1.028
600
-428
3$ da
1.140$ de 1996
46.6
21.1
-25.4
1.617
1.197
-419
13
Frente a 1970-2000 que utiliza Sala-i-Martin, recordemos que el de Chen y Ravallion ha sido 19812004.
CAP. 1 LA POBREZA
22
Por su inters, y para justificar las diferencias con los datos del Banco Mundial, la
metodologa utilizada por Sala-i-Martin se sintetiza a continuacin14.
Lo primero que debe notarse es que la intencin del autor es medir la pobreza y la
desigualdad entre individuos en todo el mundo (no la pobreza ni desigualdad dentro de
cada pas o entre pases). Para ello, debe ponderar el PIB real per capita de cada pas,
14
Sala-I-Martin recoge en su pgina web que -aceptando los supuestos por l utilizados- el investigador
jefe del Banco Mundial, Martin Ravallion, ha mostrado su acuerdo con los resultados de su trabajo.
CAP. 1 LA POBREZA
23
por la poblacin que vive en ese territorio, de forma que ordena a todos los individuos
del mundo como si pertenecieran a un solo pas.
El autor toma como punto de partida el PIB real per capita estimado en PPA de la base
de datos conocida como Penn World Tables (PWT)15. Esto le proporciona datos anuales
entre 1970 y 2000 para 138 pases. Pero la realidad no es que todos los ciudadanos de
esos pases tienen efectivamente esa renta media, sino que existe desigualdad. Para
tenerla en cuenta, incorpora, como segundo paso, la dispersin de los ingresos medios
por persona que le proporcionan las encuestas -a hogares o individuos-, de Deiniger y
Squire (1996) y el World Income Inequality Database de la Universidad de Naciones
Unidas, World Institute for Development Economics Research (WIDER)16. Como no se
dispone de encuestas para todos los aos (ni el mismo ao) para todos los pases, se
encuentra en las siguientes cuatro situaciones posibles para cada pas:
a) Pases que tienen PIB per capita real anual y encuestas en varios aos (slo
Estados Unidos tiene encuesta anual); en esta situacin hay 81 pases que
acumulan el 84% de la poblacin mundial.
b) Pases con PIB per capita real anual y slo una encuesta entre 1970-2000; en
esta situacin hay 29 pases que representan el 5% de la poblacin mundial.
c) Pases con PIB per capita real anual y sin ninguna encuesta; en esta situacin
existen 28 pases que representan el 4% de la poblacin mundial.
d) Pases sin datos de PIB per capita, que suman el 7% restante de la poblacin
mundial.
Sala-i-Martin tiene en cuenta que hasta 1990 exista la URSS como un solo pas que
despus ha dado lugar a 14 nuevos pases de los que se dispone de PIB real anual.
Adems, la Repblica Democrtica del Congo carece de datos para el periodo 19972000. Para solucionar esta carencia, calcula por extrapolacin bajo media mvil de los
ltimos cinco aos, el PIB per capita del Congo para el periodo 1997-2000. Como
fueron aos de conflictos blicos y mal desempeo econmico, los resultados son de
una escalofriante baja de renta per capita desde los 1.000$ de 1970 a 230 en 2000. Esta
extrapolacin implica que puede existir cierta sobreestimacin de la pobreza mundial en
sus clculos.
Sobre esta base de datos, y utilizando un mtodo no paramtrico que incorpora ciertos
supuestos, obtiene curvas de distribucin de ingresos para 138 pases con 100 puntos de
15
16
24
CAP. 1 LA POBREZA
CAP. 1 LA POBREZA
3.
25
LA MULTIDIMENSIONALIDAD DE LA POBREZA.
Hasta aqu nos hemos referido slo a una dimensin de la pobreza: la renta o el
consumo, en trminos monetarios. Pero desde el inicio del presente milenio contamos
con algunos estudios que lo que acentan es precisamente la multidimensionalidad de la
pobreza17. Y uno de los rasgos que ms pueden sorprender es que la econmica no es
probablemente la principal queja de los pobres cuando son preguntados por los sntomas
que padecen por ser pobres. Junto a la falta de activos econmicos (tierra, empleo,
ingresos para afrontar el consumo vital), las directrices del CAD (2002) sealan la falta
de necesidades bsicas cubiertas (educacin, sanitarias, saneamiento, ropa, vivienda,
alimento y agua potable), la pobreza en su dimensin socio-cultural o el conjunto de
discriminaciones en derechos y oportunidades por ser mujer o indgena, el poder
expresarse en la propia lengua, celebrar sus costumbres y ritos, el abandono sufrido por
los ancianos y los nios y nias... toda esa dimensin a la que elocuentemente se refera
Adam Smith cuando deca que ser pobre es sentir vergenza de aparecer en pblico (por
la forma de vestir, la falta de dominio de una lengua que no es la nativa, ser analfabeto,
etc.). Otra dimensin sobresaliente de la pobreza es la poltica. En las obras
mencionadas abundan los testimonios de personas pobres que se quejan de la
discriminacin poltica que sufren y que bien pueden resumirse en la incapacidad para
influir y participar de forma directa en las decisiones que afectan directamente a sus
vidas. La falta de sufragio universal en muchos pases o por el contrario el voto
obligatorio bajo penas de multa o retirada de derechos-; la falta de representacin
popular en comits y organismos directivos sean empresariales, sindicales o cvicos; la
falta de instancias seguras e independientes donde poder reclamar abusos o sobornos;
toda la violencia ejercida sobre los pobres por los poderes pblicos (polica, ejrcito,
paramilitares, funcionarios que extorsionan e inculcan derechos civiles bsicos...). No
hay duda de que la pobreza tiene una dimensin poltica y que hay polticas que
permiten y refuerzan la existencia de la pobreza.
Por ltimo, la dimensin de falta de seguridad y alta vulnerabilidad de los pobres, tanto
a catstrofes humanitarias por guerra, persecucin poltica, refugiados y desplazados,
17
CAP. 1 LA POBREZA
26
como por catstrofes naturales donde las peores consecuencias de los terremotos,
inundaciones, incendios, huracanes o tsunamis las sufren siempre los pobres.
La figura 1 sintetiza de forma grfica estas cinco dimensiones, aadiendo los tres
enfoques horizontales o transversales que deben incorporarse a una estrategia completa
de reduccin de la pobreza.
Figura 1. Las dimensiones de la pobreza.
VULNERABILIDAD,
INSEGURIDAD
ECONMICA
GNERO
MEDIO AMBIENTE
INSTITUCIONES
NECESIDADES
BSICAS
POLTICA
SOCIOCULTURAL
CAP. 1 LA POBREZA
27
intervalo de ingreso de entre (1-0,75) dlares diarios; los pobres medios con ingresos
entre (0,75-0,5) dlares diarios; y los ultra pobres acotados entre (0,5-0) dlares de
ingreso diario18. Los autores estiman en 162 millones de personas todos los ultra pobres
del mundo. Si los concentrramos en un solo pas, ese sera el sptimo pas ms
habitado del planeta. Geogrficamente, ms de las partes de este grupo viven en
frica Subsahariana, nica regin en la que son ms numerosos los ultra pobres que las
otras dos categoras. Desde 1990 a 2004 se han producido progresos en la reduccin de
la pobreza en Asia de Este (en las tres categoras) y en Asia del Sur (disminuyendo el
nmero de pobres medios y ultra pero aumentando los subyacentes). En frica, en
cambio, ha aumentado en las tres categoras. Esto conduce a los autores a cuestionar un
terico efecto lineal entre crecimiento econmico y reduccin de la pobreza. El
crecimiento no parece ser eficaz para sacar de la trampa de la pobreza los ultra pobres.
Aplicando una misma tasa de crecimiento econmico a las tres categoras de pobres
monetarios, la reduccin en el nmero de ultra pobres debera haber sido del 3,6%,
mientras que en realidad ha sido del 1,4%, menos de la mitad de lo esperado. De nuevo
se detectan diferencias regionales. Mientras que en Asia del este el crecimiento ha
reducido la pobreza en todos sus tramos, en frica Subsahariana, el crecimiento
econmico ha sido claramente incapaz de reducir el nmero de los ultra pobres.
En segundo lugar, los autores estudian las caractersticas y evolucin del hambre. De
nuevo es frica Subsahariana la que experimenta peores resultados en indicadores
como la mortalidad infantil y el peso insuficiente en los menores de cinco aos. En esta
regin es donde se comprueba mayor correlacin entre pobreza y desnutricin. El Sur
de Asia es la regin donde contina habiendo mayor prevalencia de desnutricin
infantil. Los investigadores crean tres intervalos para estudiar la profundidad de la
desnutricin. Hambre subyacente es aquella comprendida en una ingesta diaria de
entre las 2.200-1.800 caloras. Hambre media es la comprendida entre las 1.800-1.600
caloras. Y ultra hambrientos son las personas con un consumo diario inferior a las
1.600 caloras, con alto riesgo de muerte por inanicin. En Asia y Amrica Latina
existen tantos ultra hambrientos como de las otras dos categoras, pero los ms
hambrientos predominan en frica, llegando a porcentajes tan escandalosos como el
60% de la poblacin en Burundi.
18
Ms precisamente los intervalos de los tres grupos son [1,08-0,81), [0,81-0,54) y [0,54-0] dlares
diarios considerados en Paridad de Poder de Compra de 1993, que es la utilizada por el Banco Mundial.
28
CAP. 1 LA POBREZA
En tercer lugar, el estudio caracteriza a los ms pobres y hambrientos con cinco rasgos:
estn excluidos de los grupos sociales, viven en zonas remotas y alejadas, no poseen
educacin, ni activos, ni tierra. En una muestra de 20 pases, encuentran que los pobres
monetarios son hambrientos, aunque no todos los hambrientos tienen un ingreso inferior
al dlar diario.
Los ms pobres y hambrientos viven en zonas rurales, a pesar de que la tendencia
mundial hacia la urbanizacin hace que la pobreza urbana crezca cada vez ms. Pero en
las zonas rurales hay 2,4 veces ms pobres subyacentes que en las zonas urbanas; 2,7
veces ms pobres medios y 4 veces ms ultra pobres.
Los ms pobres viven alejados de las carreteras, mercados, escuelas y servicios de
salud. Los ultra pobres tienen 4 veces menos probabilidad de estar conectados tanto
por infraestructuras como por acceso a electricidad, que aquellos que tienen un dlar
diario de ingreso.
Los ultra pobres, no poseen estudios ni educacin. Entre los adultos, la proporcin de
varones sin educacin es el doble entre los ultra pobres que entre los que poseen un
dlar de ingreso y en pases como Vietnam o Nicaragua, hasta tres veces menos. La
desigualdad se exacerba en las mujeres. El 92% de las ultra pobres en Bangladesh
carece de escolarizacin frente al 49% con ingresos iguales a 1 dlar diario. Entre los
nios, el problema se convierte en crculo vicioso intergeneracional. En India, slo el
48% de los ultra pobres accede a la escuela, frente al 81% de los nios en hogares con 1
dlar diario. Esta diferencia porcentual entre los nios pobres escolarizados y los ultra
pobres es del 30% en Vietnam, el 28% en Ghana y el 24% en Burundi.
No existe un patrn tan generalizado para el caso de carencia de tierra entre los ms
pobres. En Asia, los que carecen de tierra son pobres. Por ejemplo, en Bangladesh, el
80% de los ultra pobres carece de tierra. Pero no es as en otras zonas del mundo. En
Latinoamrica, hay ms pobres sin acceso a tierra dentro de los que tienen 1 dlar diario
o ms, que entre los que estn por debajo de ese umbral. En frica Subsahariana, los
pobres suelen tener una pequea parcela en propiedad, aunque carecen de acceso a
mercados complementarios como el crdito o los insumos para el cultivo.
Otro dato de inters que aporta el estudio, es que en la veintena de pases estudiados
ms a fondo, siempre encuentran grupos con una prevalencia de pobreza y desnutricin
diferencial. Ya sean las etnias minoritarias de las tierras altas de Laos o Vietnam, los
tamiles en Sri Lanka, las castas ms bajas de la India o los indgenas en Amrica,
siempre se confirma que an dentro de los pobres estimados bajo ingresos o caloras
CAP. 1 LA POBREZA
29
La localizacin geogrfica del hogar (pas y zona del pas pobre). La pobreza
tiene un importante componente geogrfico autorregresivo.
19
http://www.unicef.es/contenidos/527/index.htm
CAP. 1 LA POBREZA
30
2,9%
Salud bsica
2,9%
Malnutricin infantil
--
Educacin bsica
2,9%
11,4%
Fuente: OECD-DAC. Statistical Annex of the 2007 Development Co-operation Report. Tabla 19.
Fuente: OECD-DAC. Statistical Annex of the 2007 Development Co-operation Report. Tabla 19.
CAP. 1 LA POBREZA
31
20
Los pases son cinco de Amrica Latina (Guatemala, Mxico, Nicaragua, Panam y Per); tres de
frica Sub-Sahariana (Coste de Marfil, Sudfrica y Tanzania); cuatro de Asia (dos departamentos de la
India, Indonesia, Timor y Pakistn) y uno de Oceana (Papa Nueva Guinea).
32
CAP. 1 LA POBREZA
Entre los bienes no alimentarios a los que se destina el ingreso de los pobres, las
encuestas recogen informacin sobre alcohol y tabaco, ocio (televisin, radio),
transporte (bicicleta), festivales, educacin y salud.
En la mayora de los pases, el segundo servicio al que se destina ms proporcin de
ingreso es la educacin. Quiz para los estndares de los pases desarrollados sorprenda
que el mximo muestral de este servicio es un 7,6% del presupuesto de los hogares
urbanos con ingresos inferiores a dos dlares, correspondientes a India e Indonesia. El
mnimo es el 0,1% de los rurales de Guatemala con menos de un dlar diario. La razn
principal no es que los nios no acudan a la escuela (en todos los pases supera el 50% y
en la mitad de ellos el porcentaje de escolarizacin de las nias es del 75% y del 80% en
los nios). La razn es que la mayora acude a escuelas pblicas donde no hay que
pagar matrculas. Existen estudios como el de Tooley y Dixon (2006) que revelan un
paulatino aumento de la escolarizacin privada entre los ms pobres, debido a la baja
calidad y alto absentismo de los profesores en las escuelas pblicas.
Por lo que respecta al gasto en salud, la dispersin es muy alta. Frente al mximo del
13,1% del ingreso de los hogares urbanos de Panam con menos de dos dlares al da,
el mnimo es del 0% en Mxico, Sudfrica o Papa Nueva Guinea. La correlacin entre
enfermedad y bajo consumo calrico es alta. Segn la OMS, el 65% de los varones y
40% de las mujeres en los hogares sufre anemia y posee un ndice de masa corporal por
debajo del estndar. En Udaipur, por ejemplo, el 72% de los encuestados revel haber
estado enfermo en el ltimo mes. En los hogares con menos de un dlar al da de
Nicaragua y Mxico, haba un miembro enfermo en el 35% y 45% de los casos y entre
el 21-28% de los hogares en Pakistn, Indonesia y Costa de Marfil. En resumen, la
morbilidad entre los pobres es muy alta. Los escasos recursos que disponen para
afrontar gastos mdicos, hace que el porcentaje de gasto destinado a alimentacin o
educacin -que son los ms altos- disminuya, acentuando la trampa de pobreza de la
desnutricin-enfermedad-baja educacin.
A alcohol y tabaco se destina muy poco presupuesto. El porcentaje vara entre el 0,1%
de los hogares rurales de Nicaragua con menos de un dlar diario y un mximo del
8,1% de los de Mxico.
Una de las sorpresas del estudio es la alta proporcin de gasto destinado a los festivales
y celebraciones familiares (funerales, bodas o actos religiosos) entre los pobres. El
mximo se encuentra en el estado indio de Udaipur, que revela que un 14% del
presupuesto de los hogares rurales con menos de un dlar diario y un 15% entre los de
CAP. 1 LA POBREZA
33
34
CAP. 1 LA POBREZA
elevada entre los pobres rurales que en los urbanos, pero no hay gran varianza entre los
que disponen de uno o dos dlares de renta. La mayora de las parcelas son muy
pequeas (1-2 hectreas en Per, Tanzania o Pakistn y 2-3 Ha. En Nicaragua, Costa de
Marfil o Panam). Adems muy pocas suelen ser de la calidad suficiente como para ser
cultivables durante todo el ao.
Un segundo bien relativamente abundante entre los pobres es tener vivienda, pero hay
poca informacin detallada sobre los bienes que albergan. En Udaipur, donde la
encuesta s dispone de esta informacin, abundan los hogares con cama, silla, mesa y
con una radio y bicicleta, pero escasean la TV y el telfono. Menos del 1% tiene acceso
a electricidad. Tampoco suelen poseer activos necesarios para el cultivo como bueyes,
tractores, semillas mejoradas o fertilizantes.
Entre los hogares que disponen de radio o TV existe una fuerte dispersin entre pases.
El 83% de los pobres urbanos de Per con dos dlares (78% con menos de un dlar) y
el 77% de los pobres rurales con dos dlares (74% con un dlar) poseen radio. Pero el
porcentaje desciende al 0% en Papa y 11% en India-Udaipur entre los pobres con
menos de un dlar y 13% de Timor entre los hogares con dos dlares de renta.
La bicicleta es un tercer activo relativamente abundante entre los pobres, tras la tierra y
la radio. La poseen -como mximo muestral- un 58,5% de los hogares de Costa de
Marfil con menos de un dlar diario y como mnimo- un 1% en Timor. Suele ser ms
abundante en los hogares rurales que en los urbanos, aunque hay excepciones notables
(por ejemplo en Pakistn el 40% de los hogares ms pobres urbanos posee bicicleta y
solo el 27% de los rurales). La bicicleta es un bien que apenas marca una diferencia
entre los ingresos de dos dlares y un dlar.
En cambio, la televisin s puede jugar ese papel diferenciador. Los porcentajes entre
pases vuelven a ser muy diversos. El 70-75% de los pobres urbanos con dos dlares de
ingreso de India y Panam, establecen el mximo muestral. En el extremo opuesto, entre
el 0-0,6% de los hogares con TV se encuentran Papa, Tanzania y Timor. Vivir en zona
urbana y poseer dos dlares diarios de ingreso aumenta mucho la probabilidad de poseer
TV, frente a tener slo un dlar o vivir en zona rural. Por ejemplo, dentro del rea rural,
se pasa del 14% al 45% en Costa de Marfil por tener dos dlares de ingreso frente a uno
slo, del 7 al 17% en Sudfrica o del 10 al 21% en Per.
En resumen, excepto en Asia, los pobres no suelen tener tierra en propiedad y muy
pocos hogares tienen TV, aunque es ms frecuente que posean radio y una bicicleta. De
todas formas, lo ms acentuado es la gran dispersin que existe entre los pases, zonas
CAP. 1 LA POBREZA
35
de residencia rural o urbana e ingreso diario. Ms que las medidas de tendencia central,
lo que destacan son los estimadores de dispersin. Esto hace que se deba ser
extremadamente cauteloso a la hora de generalizar y trazar un perfil econmico de los
activos que poseen los pobres en el mundo, como muestra la siguiente tabla-resumen.
Tabla 9. Dispersin de los activos en propiedad de los pobres.
Tierra
Radio
99% India83% Per-urbanaMximo
Udaipur-rural-1 $
2$
diario
0% SudfricaMnimo
0% Papa-rural-1$
urbana-1$ y
Panam-rural- 2$
Fuente: Banerjee y Duflo (2006), Tabla 3.
Bicicleta
58% Costa de
Marfil-urbana-1$
0% Panam-rural1$
TV
75% IndiaHyderabad-urbana2$
0% Papa y
Tanzania-rural-1$
36
CAP. 1 LA POBREZA
mayora de las ocupaciones por cuenta ajena las encuentran fuera de sus zonas de
residencia, es decir, emigran.
El 60% de los hogares ms pobres seala poseer al menos un miembro de la familia
emigrado temporalmente. El 20% posee a ms de un miembro y en el 58% de los casos,
quien est emigrado es el cabeza de familia. El periodo migratorio oscila entre los 40
das de media y 30 de mediana. Slo el 10% de los migrantes est fuera ms de 3 meses.
La mayora no va muy lejos. El 28% permanece dentro de su distrito (normalmente se
dirige a la capital distrital). La mayora de los movimientos migratorios se repiten ms
de una vez al ao, aprovechando la poca de menor trabajo agrcola.
Pero tambin abundan los hogares pobres, normalmente urbanos, en los que no hay
miembros emigrados. Slo el 5-10% de esos hogares de Pakistn, Costa de Marfil, Per
o Nicaragua tiene algn miembro emigrado.
Por lo que se refiere a la escala de los negocios de los pobres, es muy pequea. La ratio
empleados/nmero de negocios entre los pobres es del 0,14 en Nicaragua, 0,53 en
Panam, 1,4 en Per y 2,6 en Costa de Marfil. La mayora son empleados de la misma
familia. Su dotacin de capital fsico es tambin muy pequea. El operar en estas
condiciones de pequea escala, complica mucho su rentabilidad y su supervivencia en el
medio plazo.
CAP. 1 LA POBREZA
37
En las zonas rurales hay menos hogares endeudados, posiblemente por la menor
presencia de instituciones microfinancieras. Los datos disponibles parecen confirmar
que la mayora de los prstamos son informales. El mximo porcentaje de crditos
concedidos por un banco se encuentra en Indonesia con un 40% para los pobres urbanos
con dos dlares de ingreso diario. La fuente ms abundante, sobre todo en Amrica
Latina, es el prstamo de algn familiar.
Los tipos de inters tambin presentan una fuerte variabilidad, pero tienden a situarse en
torno 3-3,5% mensual para los hogares de un dlar diario y del 2-2,5% para los de dos
dlares (aunque en Hyderabad llegan al 3,94%, al ser una zona urbana en la que los
pobres no poseen tierra para presentar como colateral). Las encuestas y diversos
estudios sectoriales confirman que, aunque suelen existir frecuentes retrasos en los
pagos, la morosidad final es muy baja entre los pobres21.
En segundo lugar y, por lo que se refiere a los mercados de ahorro, el principal reto de
los pobres, una vez conseguido el excedente, es encontrar productos financieros que les
proporcionen cierta rentabilidad. La mayora de los pobres extremos, no suele contar
con ningn medio de ahorro. La excepcin sobresaliente es Costa de Marfil, donde
segn la encuesta- el 80% de los hogares posee una cuenta de ahorro. Apenas se
aprecian diferencias en este campo cuando se comparan las zonas rurales y urbanas.
Una modalidad que parece estar teniendo cierto recorrido en India y algunos pases
africanos son los ahorros comunitarios y las cuentas de ahorro y crdito rotativas. El
sistema consiste en depositar muy pequeas cantidades de ahorro por familia que
componen el principal de microcrditos que rotan entre los miembros de esa
asociacin informal. A falta de entidades de crdito formales en las zonas alejadas y
poco pobladas, el depsito fsico del ahorro y del retorno del microcrdito suele
realizarse en los servicios de correos locales ms prximos.
En tercer lugar, dado que la aversin al riesgo disminuye con la riqueza, los productos
de seguro para los pobres pueden parecer muy costosos. En Udaipur, por ejemplo,
ninguno de los encuestados revel haber cubierto un riesgo de salud con un seguro en el
ltimo ao. Comparten este 0% de seguros de salud, los hogares de Panam. El caso
opuesto es el de Mxico, donde un 50% de los pobres rurales con menos de un dlar y
el 62% de los hogares con menos de dos dlares, declar tener seguro de salud. Los
porcentajes descienden al 25% (un dlar) y 33% (dos dlares) cuando nos trasladamos a
21
Vase, por ejemplo, el artculo de prxima publicacin Larr (2008) en la Revista de Economa
Mundial.
38
CAP. 1 LA POBREZA
las zona urbana. La otra excepcin es Indonesia, con seguros (pero no de salud) del 25%
entre los hogares urbanos con menos de un dlar frente al 6-7% de la zona rural.
De la muestra de cuatro pases con datos sobre la existencia de seguros de vida entre los
pobres, slo hubo datos distintos de cero para los dos estados de la India. El mximo fue
del 17% de hogares urbanos con dos dlares en Hyderabad y el mnimo el 3,8% de los
pobres rurales con menos de un dlar diario de Udaipur.
Dada la vulnerabilidad de los pobres a catstrofes naturales, gastos de enfermedad no
cubiertos por los sistemas sociales de sus pases y su trabajo, a menudo con altas dosis
de riesgo, la ausencia de seguros se hace especialmente gravosa, ya que deben financiar
estos gastos con desahorro o prstamos de los usureros. Tampoco existen seguros frente
a las malas cosechas, con lo que los aos de sequa quedan asociados a aumentos en la
mortalidad, especialmente infantil.
En definitiva, las redes de seguridad de los pobres son, en la mayora de los casos, los
fsicamente cercanos o los familiares, que normalmente tienen similares problemas
econmicos. Las iniciativas pblicas en estas dimensiones de la seguridad alimentaria,
amplia e integralmente entendida como lo hace la FAO, se hacen muestran
prioritarias22.
En cuarto y ltimo lugar, son de especial importancia para los pobres los mercados de
tierra. Ya se ha comentado cmo la posesin de tierra en propiedad es ms frecuente en
Asia y frica que en Amrica Latina. Un problema adicional a la falta de posesin de
tierra es que, a menudo, los propietarios no poseen ningn ttulo que muestre y
garantice esa propiedad. Eso dificulta su uso para realizar transacciones sobre ese bien e
impide que sea utilizada como colateral para prstamos hipotecarios o de consumo. Los
pobres deben dedicar mucho tiempo y recursos a obtener y defender su propiedad, como
han mostrado los trabajos de Hernando de Soto23. Tambin hay evidencias de que la
productividad de la tierra es menor bajo regmenes colectivizados que privados y que
reformas dirigidas hacia crear incentivos individuales para la retencin de los
rendimientos personales del trabajo de la tierra, reducen la pobreza. El ejemplo quiz
ms claro ha sido el de China, como han expuesto Ravallion y Chen (2004). Por su
parte, Shaban (1987) muestra cmo la productividad de las tierras en rgimen
22
La Cumbre de Naciones Unidas sobre la Alimentacin de Roma 1996, defini que se entiende por
seguridad alimentaria la situacin en la que todas las personas tienen en todo momento acceso fsico y
econmico a suficientes alimentos inocuos y nutritivos para satisfacer sus necesidades alimenticias y sus
preferencias en cuanto a alimentos para llevar una vida activa y sana.
23
Por ejemplo, DE SOTO, H. (2001).
CAP. 1 LA POBREZA
39
compartido en India Central fue entre un 16-32% menor que la cultivada en rgimen de
propiedad privada. De todas formas, el rgimen de propiedad comunal es un signo de
fuerte identidad en varias etnias y comunidades indgenas que contrasta con el
predominio individual de las actividades econmicas occidentales. No parece que
deba ser la productividad el nico criterio para decidir el rgimen de propiedad. As lo
reconoce, por ejemplo, la Declaracin Universal de los Derechos Humanos que en su
art. 17.1 dice toda persona tiene derecho a la propiedad, individual y colectivamente.
CAP. 1 LA POBREZA
40
4.
CONCLUSIONES PRELIMINARES.
Hemos visto las dificultades tcnicas para medir la pobreza. La realizacin de encuestas
de hogares es la informacin primaria ms comn pero es costosa, consume tiempo y
CAP. 1 LA POBREZA
41
Estas son slo una muestra de las dificultades no solo tcnico-cuantitativas, sino
tambin cualitativas derivadas de la multidimensionalidad que caracteriza a la pobreza y
a las que nos enfrentamos bajo la sencilla pregunta de si la ayuda al desarrollo reduce la
pobreza o juzgamos su eficacia.
42
CAP. 1 LA POBREZA
24
Vase http://pwt.econ.upenn.edu/
CAP. 1 LA POBREZA
43
El fin de las PWT es elaborar PPA para consumo que incluyan pesos especficos para los
pobres dentro de la cesta de bienes y servicios homognea sobre la que se recogern
observaciones de precios.
Una primera consideracin que hay que tener en cuenta es que en el sistema de contabilidad
nacional de Naciones Unidas creado en 1964 (System of Nacional Accounts, SNA-1964), se
recoga informacin sobre el Gasto en consumo final de los hogares, mientras que en la
versin actualizada de 1993 (SNA-1993) se recopila el Consumo final actual de los hogares
que incluye los gastos del gobierno e instituciones sin nimo de lucro en educacin y salud
directamente dirigidos a los pobres. Esto deber tenerse en cuenta para las comparaciones en
el tiempo de las rentas de los pobres.
Como se aprecia en la figura A-1, el Programa Internacional de Comparacin de Precios
distingue entre los pases en los que se logra o se logr alguna vez- observar directamente
los precios (denominados pases benchmark) de aquellos en los que no ha habido nunca esa
posibilidad (non-benchmark countries). Las primeras observaciones de precios tuvieron lugar
25
26
Vase http://pwt.econ.upenn.edu/php_site/pwt_index.php
Seguimos de cerca Aten & Heston (2003).
CAP. 1 LA POBREZA
44
durante 1967 y a partir de entonces, se han producido nuevas observaciones directas en cinco
ocasiones, aumentando el nmero de pases benchmark (tabla A-1).
Tabla 1. Evolucin del nmero de pases-benchmark para la elaboracin de las PWT.
Ao
N de pases
1970
16
1975
34
1980
60
1985
65
1996
113
Adems de las sealadas en la tabla, hubo otra recopilacin -junto con el Banco Mundial- en
1993, pero la heterogeneidad de las metodologas empleadas y el desmembramiento del
bloque sovitico, aconsejaron no publicar ni usar los datos.
Las versiones de las PWT 6.0 y siguientes (la ms actual es 6.2 que ofrece datos para 188
pases)27 se forman a partir de la reconciliacin de datos provenientes de las observaciones
directas (113 pases), extrapolacin y actualizacin de datos benchmark previos y de la
contabilidad nacional (deflactores de precios para los aos 1970, 75, 80, 85 y 96), y ejercicios
de regresin a partir de otras variables disponibles para los pases no-benchmark28. Con toda
esta informacin se logra un panel de datos sobre el ao base de 1996, que contiene niveles de
precios, consumo, inversin y gasto pblico de los pases incluidos en el proceso de PWT.
Las PWT 6.2, combinan benchmark para los 30 pases OCDE, actualizaciones para otros 138
pases incluidos en PWT 6.1 y 20 pases nuevos. El ao base es 2000. Para los pases OCDE
se dispone de observaciones benchmark cada 3 aos. En la mayora de los pases benchmark,
se observan 150 precios para consumo, formacin de capital y gobierno y, desde 1980, las
comparaciones internacionales se organizan regionalmente antes de hacer la agregacin para
el total mundial.
27
El Banco Mundial est llevando a cabo un nuevo benchmark para 150 pases en 2005, cuyos resultados estarn
disponibles a lo largo de 2007 y darn lugar a las PWT 7.0 Los resultados de este Programa de Comparacin
Internacional
2005
pueden
consultarse
en
http://web.worldbank.org/WBSITE/EXTERNAL/DATASTATISTICS/ICPEXT/0,,menuPK:1973757~pagePK:6
2002243~piPK:62002387~theSitePK:270065,00.html . Han sido recogidos precios en origen sobre unos 1.000
productos, para 100 pases en desarrollo. Junto a los ya disponibles por la OCDE, forman un total de 146
economas sobre las que se dispondr de informacin primaria.
28
Para pases no benchmark, se procede del siguiente modo: se estima la absorcin interna sobre la base de la
relacin entre varias medidas del coste de vida y la PPA del PIB de ese pas. El Banco Mundial no lo hace as, ya
que ataja con una ecuacin que incluye la educacin y renta nominal del pas, acudiendo a informacin directa
sobre los precios utilizando slo la PPA del PIB. PWT, en cambio, utiliza adems la PPA del consumo, la
inversin y el gasto del gobierno, no slo la del PIB.
CAP. 1 LA POBREZA
45
29
La seleccin de stos productos que permitan la comparacin internacional es lo que se denomina proceso
circular (Ring Process). En l participan 19 pases representantes de todas las regiones del mundo que recogen
los datos de los Productos de la Lista Ring que combina comparabilidad (exactos, idealmente) y
representatividad del consumo en cada regin. A partir de los datos Ring se calculan PPP regionales y la PPP
internacional para convertir cada moneda local en US$. Los precios Ring slo son obtenidos en capitales o
grandes ciudades, lo que limita la utilidad para el clculo de una lnea de pobreza mundial.
30
Para facilitar una comparacin el IPC (Espaa segn mtodo 2001) recoge informacin en 177 municipios, de
491 artculos clasificados en 12 grupos, lo que produce unas 220.000 observaciones mensuales.
31
La metodologa es similar a la Geary-Khamis utilizada por Angus Maddison para elaborar sus series histricas
(ao 1 a 2003) de renta y crecimiento per capita. Vanse en http://www.ggdc.net/maddison/
32
Los ndices plutocrticos son aquellos que tienen en cuenta el peso correspondiente a cada estrato de ingresos.
46
CAP. 1 LA POBREZA
Una cuestin muy importante para la medicin rigurosa de la pobreza y que afecta a ambas
metodologas consiste en determinar qu precios observar para acercarse a los bienes y
servicios realmente utilizados por los pobres. Por ejemplo, si comparamos el precio de un
corte de pelo en plena calle en cualquier ciudad de la India o en Barcelona, encontraremos un
fuerte encarecimiento relativo hacia la segunda. Esta diferencia no parece que pueda
explicarse por las diferencias en la productividad de ambos peluqueros. El ejemplo sirve para
la mayora de los servicios no comercializables. Las cuestiones culturales son tambin
importantes. Los precios del arroz en la India varan mucho si lo observado es arroz lavado o
partido y de qu variedad concreta. En cuanto al vestido, los pobres suelen reutilizar ropa o
adquirirla de segunda mano. Muchos servicios de transporte son provistos por los propios
pobres (por ejemplo haciendo dedo para que les acerquen hasta la carretera prxima). Todas
estas cuestiones econmicas y culturales invitan a investigar la hiptesis de que el lugar
(mercado) concreto en que se observen los precios no es neutral a la hora de configurar las
lneas de pobreza. Las investigaciones realizadas hasta la fecha tienden a mostrar sesgos hacia
arriba entre los precios realmente pagados por los pobres y los medios del pas. El hecho de
que los pobres compren en menores cantidades por su falta de liquidez, as como su falta de
acceso a los hiper-mercados donde se venden unidades mayores a menores precios, puede
explicar al menos en parte- de esta diferencia. La tabla A-2 muestra cmo en mercados
dentro de las mismas ciudades chinas, existen diferencias importantes de precios. Si en vez de
usar los promedios de precios en China usramos los verdaderamente pagados por los pobres,
el nivel de pobreza en China sera menor.
CAP. 1 LA POBREZA
47
Pilas
79
79
135
101
110
84
59
109
118
100
Cebollas
Corte de pelo
227
306
500
312
151
135
85
164
477
100
208
102
582
406
160
107
22
126
835
100
Fuente: Perling (2003) citado en Aten & Heston (2003) p.12. La observacin se hizo en primavera de 2002. Como se aprecia
en la ltima fila, la lnea de base comparativa fueron los precios de las zonas de clase media en Chendu.
33
48
CAP. 1 LA POBREZA
49
50
51
ntimamente
interrelacionado
(Bourguignon,
2004;
Wolfenshon
&
Estos ocho objetivos constituyen una sntesis de las numerosas recomendaciones y compromisos que se
fueron adoptando en la dcada de los noventa en numerosas cumbres de Naciones Unidas. El Comit de
Ayuda al Desarrollo de la OCDE recogi los principales en un documento programtico de 1996 (CAD
1996) y, posteriormente tras un desarrollo conceptual y de indicadores, se presentaron a modo de agenda
internacional en la Cumbre de Naciones Unidas que con motivo del inicio del siglo XXI tuvo lugar en
Nueva York. Los ocho Objetivos se despliegan en 18 metas y 48 indicadores. Su detalle y evolucin
puede consultarse en: http://www.un.org/spanish/millenniumgoals/
2
Bsicamente la puntualizacin consiste en que muchos pases parten de un nivel tan bajo de asistencia
educativa (20 africanos no alcanzan el 70% de tasa de matriculacin en primaria) que el esfuerzo que les
52
pide en un plazo de 20 aos equivale a lo que los pases de la OCDE hicieron a lo largo de todo el siglo
XIX o incluso de una forma ms acelerada de lo que lo ha conseguido el ms rpido en la historia: Corea
del Sur.
3
Las dos bases de datos utilizadas con mayor frecuencia son la del Banco Mundial denominada World
53
Para extender este punto puede consultarse Adelman (2000). La obra de Bustelo (1991) es un recorrido
por las teoras del desarrollo clasificando a los autores sobre en funcin de su mayor o menor
reconocimiento al papel del Estado en el proceso de generacin de desarrollo.
54
Aos 60
Aos 70
Aos 80
Aos 90
Crecimiento del
PNB
Equilibrio exterior
(Balanza de Pagos)
Empleo
Crecimiento del
PNB
Empleo
Distribucin de la
renta
Alivio de la
pobreza
(Necesidades
bsicas)
Equilibrio externo
Estabilizacin
Equilibrio externo
Equilibrio interno
(monetario y
fiscal)
Ajuste estructural
Eficiencia
Ajuste continuado
Buen gobierno y
capacidad
institucional
Resurge el alivio
de la pobreza
Moderar los
efectos de la crisis
asitica
Limitar el
capitalismo global:
liberalizacin y
desregulacin
Dualismo
econmico;
crecimiento
equilibrado o
desequilibrado;
eslabonamientos
entre sectores;
proteccin
efectiva; capital
humano; precios
sombra; patrones
Paquetes de
medidas en las
reas rurales; papel
del sector
informal;
migracin ruralurbana; tecnologa
apropiada; relacin
y dilemas entre
produccinempleo-
Crecimiento
endgeno;
relaciones
comerciocrecimiento;
interrelaciones
entre capital
humano y
transferencia de
tecnologa; nueva
economa
Actualidad
Los de los 90
excepto la revisin
y cuestionamiento
del Consenso de
Washington
Desarrollo
Humano (p. ej.
educacin, salud)
Reduccin de la
desigualdad y la
pobreza
Objetivos de
Desarrollo del
Milenio
Reduccin de la
vulnerabilidad
Poltica econmica
Papel de las
instituciones en el del desarrollo y
papel de las
desarrollo,
instituciones;
dependencia
nexos entre
temporal (path
crecimientodependency) y
desigualdadendogeneidad de
las polticas; papel pobreza; la pobreza
del mercado y del es multidimensional;
gobierno;
equilibrios
economa de la
Bases de datos
Contabilidad
Nacional
de crecimiento;
seleccin de la
tcnica; papel de la
agricultura.
Dos gaps
(Chenery+Strout)
Modelos inputouput
Equilibrio General
Simple
Programacin
lineal
distribucin de la
renta-pobreza;
criterios de
inversin
socioeconmica;
teora del
subdesarrollo;
teora de la
dependencia.
Mltiples objetivos
Equilibrio General
Computable
Modelos
sectoriales
Contabilidad
Nacional
Tablas InputOutput
Censos de empleo
Contabilidad
Nacional Social
Contabilidad
Nacional
Tablas InputOuput inter e intra
sectoriales
Censos de empleo
Encuestas de
hogares
Encuestas rurales
integradas
Encuestas sobre
institucional y
papel de las
instituciones;
mercados de
factores
entrelazados;
confianza en los
mercados (p. ej.
Orientacin
externa vs.
Intervencin del
gobierno).
Impacto de las
polticas fiscal y
comercial
Equilibrio General
Computable
aplicado al ajuste
estructural
Matrices de
Contabilidad
Social (SAMs) y
todas las de los 70
Encuestas de
hogares de renta o
gasto, a gran escala
y desagregadas
55
corrupcin; capital
social como
complemento del
capital humano.
Fuentes del
crecimiento
Productividad total
de los factores
Regresiones sobre
crecimiento
Modelos de
equilibrio general
computable para
explorar el impacto
de las polticas de
ajuste.
mltiples.
Experimentos con
grupos de control y
aleaorios
Crtica a las
regresiones sobre
el crecimiento
Las de los 90
Ms fuentes micro
y datos de panel
Datos bancarios
56
sector informal
Datos
demogrficos
Encuestas de
mltiples aos
(apreciaciones
subjetivas de la
pobreza)
Encuestas
demogrficas y de
salud
Estabilizacin y
Estabilizacin y
Desarrollo rural
Afinamiento y
Sustitucin de
Polticas y
ajuste estructural
ajuste estructural
precios apropiados integrado
importaciones
estrategias
Orientacin
Orientacin
Estrategias
Crecimiento
Industrializacin
exterior
comprehensivas de exterior
Excedente social e equilibrado entre
Confianza en los
Confianza en los
empleo
agricultura e
inversin en
mercados
mercados
Crecimiento con
industria
infraestructuras,
Extender los
Privatizaciones
redistribucin
Promocin de
sobre todo en el
Minimizar el papel elementos del
Necesidades
exportaciones
mbito urbano
milagro asitico
del Estado
bsicas
Ayuda externa
a otros pases
Reformismo
Integracin
Desregulacin y
(redistribucin de
regional
privatizacin
Reformas fiscales activos)
Alivio de la
Planes sectoriales Colectivismo
pobreza y aumento
radical
del bienestar socioeconmico
Controles y
regulaciones para
prevenir crisis
financieras
Fuente: elaboracin a partir de Thorbecke (2005).
La globalizacin
como estrategia de
desarrollo
Crecimiento propobre
57
Tener acceso a los recursos necesarios para un nivel de vida decente, (renta)
As ha sido recogido por el CAD en sus directrices para la reduccin de la pobreza. Vase OCDE
(2000).
58
-
En cuanto a los indicadores de progreso, el PNUD ofrece el IDH para la mayora de los
pases desde 1990 con periodicidad anual. Tambin revisa peridicamente su calidad y
ofrece IDH metodolgicamente comparables para quinquenios desde 1975.
Adems elabora otros indicadores sintticos como el ndice de Pobreza Humana o los
ndices de Desarrollo y de Potenciacin de Gnero6.
Uno de los autores que inspir el paradigma del desarrollo humano y que ms ha
contribuido a perfilar un concepto de desarrollo ms aquilatado es Amartya K. Sen. Este
autor, a partir de un conjunto de conceptos propios ha elaborado una idea de desarrollo
que, principalmente supera las limitaciones de considerar al hombre como ser de
necesidades y a la pobreza como ausencia de bienes materiales. De forma muy breve, la
concepcin del desarrollo de Sen est basada en las siguientes categoras:
-
Realizaciones (functionings): condiciones de vida que pueden ser alcanzadas por las
personas, logros obtenidos a partir de las capacidades. Las diferentes formas de ser y
hacer valoradas por la gente.
Sobre la base de estas definiciones, Sen enfoca la idea del desarrollo como un proceso
en el que se expanden las libertades de las personas para elegir su modo de vida (Sen,
2000). Ms en detalle, el desarrollo debe entenderse como una combinacin de
Sobre la base metodolgica del IDH se han propuesto variantes que incorporan aspectos
medioambientales (Lasso de la Vega y Urrutia, 2000). Para una crtica a las limitaciones del IDH como
ndice de desarrollo vase McGillivray & White (1992).
59
(2002).
60
2.
CONCEPTO
EVOLUCIN
DE
LA
AYUDA
OFICIAL
AL
DESARROLLO.
2.1. EVOLUCIN DOCTRINAL.
Por el recorrido realizado hasta aqu, ya debera ser evidente que el desarrollo -y an
ms el desarrollo humano- no es una funcin cuya nica variable endgena (casi
mgica) sea la ayuda al desarrollo. Hay muchas otras variables explicativas y queda
pendiente la demostracin de que la ayuda sea efectivamente endgena al desarrollo de
los pases. Adems, aunque uno de los fines de la ayuda a lo largo de la historia haya
sido la reduccin de la pobreza y el fomento del desarrollo, no ha sido el nico. Como
reconoce el Banco Mundial en un anlisis sobre su eficacia, la ayuda ha estado siempre
combinando el altruismo solidario con el inters geoestratgico propio:
Desde el principio (la cooperacin al desarrollo) tuvo un objetivo doble y,
potencialmente contradictorio. El primero era fomentar el crecimiento a largo plazo y
reducir la pobreza en los pases en desarrollo. Los donantes actuaban movidos por
altruismo, pero tambin por inters, pues consideraban que, a largo plazo, su
seguridad econmica y poltica se beneficiara del crecimiento de los pases pobres. El
Un discurso que enlaza bien con el Desarrollo Humano es el de los Bienes Pblicos Globales, que aqu
se omite por brevedad, pero que deber formar parte de la agenda temtica. Para introducirse en ellos,
pueden verse Alonso (2001) y Kaul et al. (2001).
61
segundo objetivo era promover los intereses polticos y estratgicos a corto plazo de los
donantes. La asistencia se dirigi a regmenes que eran aliados polticos de las
principales potencias occidentales. As pues, exista la posibilidad pero no la certezade que los objetivos estratgicos y de desarrollo fueran contradictorios (Banco
Mundial 1998:7).
Conviene tener tambin la perspectiva histrica de la ayuda al desarrollo, al igual que se
ha tenido sobre el concepto y las estrategias de desarrollo10. En la Figura 2 se ofrece una
panormica evolutiva sobre el papel de la ayuda en el desarrollo, las instituciones
dominantes o crecientes en cada periodo, la ideologa preponderante entre los donantes,
su fin principal y los tipos o instrumentos dominantes o emergentes en cada dcada.
10
62
Instituciones
Aos 40-50
Transferir recursos
a gran escala.
Financiar la
industrializacin.
Fe en la capacidad
del gobierno
receptor para
usarla con
eficiencia y para
planificar.
Aos 60
El modelo de los
dos-gaps
(ahorro-inversin y
exportacionesimportaciones)
procura criterios
para asignar la
ayuda en cada pas.
Contribuir al
crecimiento
equilibrado.
Asistencia tcnica
para aumentar el
capital humano del
receptor.
Aos 70
Apoyar el
crecimiento con
redistribucin y
satisfacer las
necesidades
bsicas.
Reducir (aliviar) la
pobreza.
Naciones Unidas;
Los donantes
Expansin del
Apoyar el
desarrollo rural
integrado y el
multilateralismo.
Aos 80
Problema de la
deuda externa al
que la ayuda ha
contribuido.
Financiar el
ajuste estructural
y la
estabilizacin.
Condicionalidad
ex -ante.
Macroestabilidad.
Olvido de la
reduccin de la
pobreza.
Fruto de la
minimizacin del
papel del Estado,
se privatiza la
ayuda (ONGs y
ayuda del sector
privado).
Aos 90
Fatiga del donante
de la ayuda.
Reducir la
dependencia hacia
ella.
Limitado xito de
la condicionalidad.
Condonacin y
reduccin de deuda
externa.
Condicionalidad ex
post.
Falta de
coherencia,
coordinacin y
complementariedad
entre donantes.
Asociacin y
apropiacin.
Crecimiento y
Instituciones
Actualidad
Logro de los
ODM.
Reducir la
pobreza, vuelve a
ser el centro.
Debate sobre
eficacia de la
ayuda y sus
limitaciones:
fungibilidad,
volatilidad,
efectos fiscales,
corrupcin y
debilidad
institucional.
Destinatarios:
incluir a los
pases de renta
media?
Criterios de
asignacin:
selectividad.
Incremento de las
cantidades y
nuevas fuentes de
recursos para el
desarrollo.
Comit de Ayuda
dominantes
Banco Mundial;
Plan Marshall.
EE. UU. y la
Unin Sovitica
como bloques.
Planificacin vs.
Ideario
preponderante entre Mercado. Guerra
Fra.
los donantes
expansin de las
ONGs de
Desarrollo
bilaterales.
multilateralismo
(Banco Mundial,
FMI, Fondos
rabes)
Sectores
productivos,
revolucin verde,
infraestructuras.
Sectores de
necesidades
bsicas. Reducir la
pobreza.
Reforma
macroeconmica
y ajuste
estructural.
Cada en ayuda
alimentaria y
comienzo de la
ayuda a las
importaciones.
Programas
financieros.
Condonacin y
tratamiento de la
deuda externa.
Fin principal de la
ayuda
Reconstruccin y
Desarrollo
Comunitario.
Tipos e
instrumentos
Asistencia tcnica
Plan Marshall.
Ayuda alimentaria. bilateral. Apoyo
presupuestario.
Proyectos.
Proyectos
multilaterales.
63
al Desarrollo de
la OCDE. El
multilateralismo
pierde fuerza.
Bienes Pblicos
Globales.
Declaracin de
Pars sobre la
eficacia:
apropiacin,
alineamiento,
armonizacin,
orientacin hacia
resultados,
rendicin mutua
de cuentas.
Pobreza y
Pobreza y
gobernabilidad. En seguridad.
Desarrollo de
menor medida,
capacidades.
gnero y medio
Fortalecimiento
ambiente.
institucional.
Predominio de los Programas
sectoriales.
programas sobre
Apoyo
los proyectos.
presupuestario.
Fondos globales
temticos.
64
Fuente: elaborado y ampliado a partir de Thorbecke (2000) y Hjertholm & White (2000).
65
66
lideren estas polticas. Por otra parte, pretenden reducir los costes de transaccin
elevados de una multiplicidad inconexa de proyectos11. Bajo un marco de coordinacin
y mayor previsibilidad presupuestaria, la ayuda de un conjunto amplio de donantes
puede ser ms eficiente actuando en un entorno de economas de escala y spillovers.
Pero la condicin necesaria para que esto se produzca es que exista realmente una
coordinacin entre los donantes, un alineamiento de sus sistemas de seguimiento y
evaluacin utilizando los formatos y recursos locales y una condicionalidad de la ayuda
ms orientada a la obtencin de resultados en trminos de reduccin de pobreza y no
tanto en trminos de condiciones polticas, comerciales, institucionales que muestren
una frrea actitud de desconfianza ante el uso y gestin de la ayuda por parte del
receptor. Todas estas condiciones y actitudes se exasperan cuando la ayuda se dirige
hacia pases con una institucionalidad muy dbil y altos niveles de corrupcin. Son los
conocidos como estados frgiles o fallidos, dndose la paradoja de que los ciudadanos
de stos pases quiz sean los ms necesitados de recibir la ayuda internacional.
Otra visin de la evolucin de la ayuda al desarrollo nos la aporta la serie temporal de
este tipo de flujos internacionales de capital. Pero para su adecuada interpretacin,
debemos definir con precisin qu se entiende por ayuda y cmo se contabiliza. Es lo
que exponemos en el siguiente apartado.
11
Una ampliacin de las cuestiones clave en torno a los nuevos instrumentos se encuentra en Castao y
67
12
Esta tasa de descuento se utiliza para determinar si un prstamo es concesional o no. Si un prstamo
satisface el resto de condiciones, se considera AOD el monto total del prstamo. El componente de
donacin no se usa para descontar el valor facial del prstamo en la contabilidad de la AOD. Los intereses
no computan a la hora de contabilizar la AOD neta.
13
Quiz la excepcin ms importante sea EE.UU. Los estadounidenses donaron al mundo en desarrollo
en 2005, 95.000 millones de dlares a travs del sector privado, entendiendo por tal el conjunto de
fundaciones, corporaciones, organizaciones privadas y voluntarias, colegios y universidades e
instituciones religiosas, as como tiempo donado por voluntarios y remesas de dinero. Esto es casi tres
veces y medio la ayuda oficial de Estados Unidos. Las compaas estadounidenses invirtieron y prestaron
otros 69.000 millones de dlares en capital privado. Estas gestiones privadas conformaron casi el 86 por
ciento del movimiento econmico total estadounidense a los pases en desarrollo. (Adelman 2007b).
68
que ha pretendido empezar a medir estos flujos es el de Schweinberger & Lahiri (2006)
en el que se ofrecen las siguientes estimaciones (Tabla 1).
Tabla 1. Flujos internacionales privados para el desarrollo.
DONANTE
Alemania
972
5.74
Australia
111
8.67
Austria
46
9.91
Blgica
36
24.53
Canad
155
10.91
Dinamarca
35
48.69
Espaa
133
10.34
Estados Unidos
2671
3.29
Finlandia
79.2
Francia
Holanda
158
19.25
Italia
40
56.95
Japn
203
52.41
18.66
Noruega
126
10.48
Nueva Zelanda
12
10.83
Portugal
37.00
Reino Unido
408
9.47
Suecia
40
39.33
Luxemburgo
Queda claro entonces que la AOD slo hace referencia a flujos de recursos cuyo origen
son los estados, sea el central o los de nivel inferior (en el caso espaol, autonomas,
diputaciones, ayuntamientos, cabildos, etc.).
Adems, no todos los recursos oficiales que van a parar a los pases en desarrollo
constituyen ayuda. Los pases desarrollados otorgan prstamos en condiciones de
mercado que no constituyen AOD, y muchas empresas realizan inversin directa
extranjera en los pases en desarrollo sin que represente AOD.
Para que sea contabilizada como AOD la ayuda de un pas debe cumplir a la vez, las
tres condiciones del CAD: i) tener como objetivo principal (luego puede tener otros
objetivos no principales como fomentar las exportaciones del donante, promover la paz
o la influencia poltica del pas donante en el pas que la recibe) promover el desarrollo
69
del receptor; ii) ser un pas en desarrollo (es decir, estar en la lista que elabora el propio
CAD para tal efecto) y iii) tener carcter concesional (esto es, ser una actividad que no
se presta en las mismas condiciones del mercado), alcanzando este componente
concesional un mnimo del 25% de la ayuda prestada. Cuando la concesionalidad se
concreta en un no reembolsamiento del 100%, es lo que se considera una donacin. Por
tanto, a excepcin de las donaciones, una porcin de la AOD que reciben los pases
debe devolverse. El mximo ser el 75% del monto total recibido y las condiciones de
devolucin variarn en cada caso, siendo mejores que las del libre mercado de capitales.
Un corolario importante de esta condicin reembolsable de la AOD es que genera
endeudamiento externo al pas receptor.
En efecto, la deuda externa de los pases en desarrollo puede provenir de operaciones en
los mercados internacionales de capital (deuda privada si el prestamista ha sido una
entidad privada), pero tambin de AOD recibida ya haya sido otorgada por organismos
internacionales (deuda AOD multilateral) o por pases en particular (deuda AOD
bilateral). En otras palabras, recibir AOD no siempre es algo gratuito para los pases
receptores. La AOD reembolsable aumenta la deuda externa. Es un flujo externo que un
pas decide aceptar pero que debe utilizar bien para generar un rendimiento al menos
suficiente como para poder devolver la parte reembolsable adquirida en las condiciones
y plazos acordados. Si no es as, recibir AOD ser parte del problema futuro de
sobreendeudamiento que tenga que afrontar el pas receptor. Los pagos internacionales a
realizar quedarn reflejados en la cuenta financiera de su balanza de pagos con saldo
deudor aumentando su variacin de pasivos. Por su parte, el donante anota una
variacin de activos en el exterior, aumentando su capacidad de financiacin. Algunas
transacciones de AOD no quedan recogidas en la balanza de pagos, como los costes de
educacin secundaria y terciaria, as como la formacin profesional (incluidos
estipendios y viajes) que disfrutan ciudadanos de pases en desarrollo en territorio
nacional del donante. Tambin son AOD pero no queda registrada en la balanza de
pagos los costes administrativos de la gestin de la ayuda, los subsidios a las ONG del
pas donante y los programas de sensibilizacin y educacin para el desarrollo
desempeados en el pas donante.
Es necesario realizar un comentario adicional a la segunda condicin del CAD para
considerar a un flujo internacional como AOD: la de ir destinada a un pas en desarrollo.
70
La cuestin parece obvia pero no es balad. Cules son los pases en desarrollo?
Quin determina ese estatus? Hasta cundo puede mantener un pas esta condicin?
Adems, la inclusin o no de determinados pases que reciban fuertes flujos
internacionales en la condicin de pas en desarrollo o no, ser determinante del flujo
total de AOD internacional. Respondamos a estas cuestiones.
En primer lugar, son considerados pases en desarrollo aquellos que no alcanzan
determinado umbral de renta per capita. Este umbral evoluciona con el tiempo. Quien
compone la lista de pases elegibles para recibir AOD es el propio CAD que elabora una
lista dinmica en el tiempo, agrupando a los pases segn su renta per capita. La lista
actualmente en vigor, vlida para contabilizar los flujos de AOD en el trienio 2008-2010
es la siguiente:
71
72
La lista contiene un total de 151 pases y territorios agrupados en cuatro categoras.
Aquellos pases con una renta nacional bruta per capita inferior a 935 dlares corrientes
en 2007 constituyen el grupo de los pases menos adelantados (49 en total y clasificados
as por decisin multicriterio de Naciones Unidas) y el de otros pases de renta baja
compuesto por 12 pases. El tercer grupo es el denominado pases y territorios de renta
media baja por situarse su renta per capita en el intervalo entre los 936-3.705 dlares
corrientes en 2007. El grupo posee 47 miembros. El cuarto grupo, denominado pases
de renta media alta, posee una renta per capita entre los 3.706 y 11.455 dlares y est
compuesto por 43 miembros14. En principio, aquellos pases que superan este umbral de
renta por habitante quedan excluidos. Los niveles de renta per capita se actualizan
peridicamente en funcin de la inflacin y los tipos de cambio y, aunque no coinciden
exactamente, se aproximan bastante a los que utiliza el Banco Mundial cuando realiza
una clasificacin similar para determinar condiciones de elegibilidad de algunos de sus
instrumentos.
Arabia Saud perdi su condicin de pas en desarrollo en 2008, como la perdi Israel
en 200515. El caso de Israel merece un breve comentario. Inicialmente elegible por su
14
Este grupo de pases de renta media-alta es el que ms ha crecido con respecto a la clasificacin del
periodo 2005-07 que estuvo formada por 36 pases. Bielorrusia, Brasil, Cuba, Fiji, Jamaica, Kazajstn,
Montenegro, Serbia y Surinam han pasado del grupo de pases de renta media-baja en 2005-07 al de renta
media-alta en 2008-10. Camern, Congo, India, Moldavia, Mongolia y Nicaragua han pasado del grupo
de pases de renta baja al de renta media-baja. El salto ms notable es el de Cabo Verde que fue
clasificado como pas menos adelantado en la lista de 2005-07 y es incluido como renta media-baja en la
lista de 2008-10. Estos cambios muestran cmo la lista de pases receptores de AOD es dinmica y esto
tiene su importancia a la hora de contabilizar los totales de AOD mundiales, ya que la serie temporal del
flujo no tiene un destino homogneo.
15
La
evolucin
de
las
listas
de
pases
elegibles
puede
consultarse
en:
73
nivel de renta per capita, su estatus vari en 1997 al ser transferido del grupo de pases
de renta alta a la conocida como parte II de la lista de pases elegibles. Esta segunda
parte fue creada a partir de 1990 para acoger la ayuda que reciban los pases que
surgan de la desmembracin del bloque sovitico (conocidos como los Nuevos Pases
Independientes). Formaban un grupo especial ya que, si bien algunos posean un nivel
de renta per capita alto, eran receptores de altos flujos internacionales destinados a
apoyar la transicin de su sistema econmico bajo planificacin central a uno de
mercado. Esta parte II de la lista ha desaparecido en la reciente revisin del CAD que
determina la elegibilidad para 2005-2007, pero se ha mantenido hasta entonces. A los
flujos recibidos por los pases miembros de la parte II de la lista se les denomin
Ayuda Oficial (AO) en vez de Ayuda Oficial para el Desarrollo (AOD).
Volviendo al caso de Israel como muestra de los pases que van desapareciendo de la
lista de elegibles, debe tenerse en cuenta esta condicin dinmica de la muestra de
receptores cuando se analice la serie temporal total de la AOD. Israel recibi 2.672
millones de dlares en 1996 (ltimo ao para el que se ofrecen estadsticas), lo que
represent el 4,2% de toda la AOD mundial. La ayuda a Israel super desde 1975 los
1.300 millones anuales de dlares constantes de 2005, siendo el 94,2% el promedio de
los que represent lo recibido por parte de Estados Unidos.
Grfico 1. AOD a Israel.
74
3500
120,0%
3000
100,0%
2500
$ constantes de 2005
80,0%
2000
60,0%
1500
40,0%
1000
20,0%
500
0,0%
19
60
19
61
19
62
19
63
19
64
19
65
19
66
19
67
19
68
19
69
19
70
19
71
19
72
19
73
19
74
19
75
19
76
19
77
19
78
19
79
19
80
19
81
19
82
19
83
19
84
19
85
19
86
19
87
19
88
19
89
19
90
19
91
19
92
19
93
19
94
19
95
19
96
AOD a Israel
Fuente: OECD StatExtracts. On line. Notas: los niveles estn expresados en millones de dlares
constantes de 2005 (eje izquierdo). Los porcentajes correspondientes a EE.UU. se miden en el eje
derecho. En 1996 la base de datos ofrece un error de medida de 34,4 millones de dlares superiores a
EE.UU. respecto al total, con lo que el dato es de 101,3%.
Al caso de Israel pueden aadirse, entre otros, el de Portugal que pierde su condicin de
elegibilidad en 1991, varias antiguas colonias francesas como la Guyana, Martinica,
Guadalupe, Reunin en 1992, Grecia en 1995, Bahrain en 2005 o el ya comentado de
Arabia Saud en 2008. Espaa dej de ser elegible en 1983 pasando a formar parte de
los donantes del CAD en 1991.
Una ltima consideracin acerca de los pases en desarrollo es que algunos adems de
ser elegibles por el CAD, pueden ser a su vez donantes de ayuda a otros pases, aunque
esta no queda recogida en las estadsticas del CAD. Es el caso reciente de China,
Venezuela, Irn y algunos de los pases rabes que han otorgado flujos de ayuda a
aquellos pases con los que desean mantener relaciones geoestratgicas digamos
privilegiadas.
La contabilidad de la AOD. Algunos casos frontera.
A pesar de que la definicin del CAD sobre lo que es AOD acota bastante los flujos que
pueden considerarse ayuda, existen algunos casos en los que el criterio de promocin
del desarrollo econmico y el bienestar de los pases en desarrollo como objetivo
principal no est claro. Los detalles del proceso de contabilidad pueden consultarse en
75
OECD-DAC (2006), pero la resolucin actual del CAD ante los casos ms dudosos es la
que se ofrece a continuacin16.
1) La ayuda militar. Queda excluido de computar como AOD el equipamiento
militar y los servicios adjuntos a las operaciones militares, as como la
condonacin de deuda externa realizada por motivos militares. S se consideran
AOD los costes adicionales para el uso de las Fuerzas Armadas como
dispensadoras de ayuda humanitaria o de servicios para el desarrollo.
2) Operaciones de mantenimiento de la paz. Las partidas ligadas a hacer cumplir
los acuerdos de mantenimiento de la paz, no computan como AOD, pero s se
consideran los costes bilaterales netos en que incurran los donantes al llevar a
cabo operaciones administradas o aprobadas bajo Naciones Unidas tales como
seguimiento de procesos electorales, acciones a favor de los Derechos Humanos,
rehabilitacin de infraestructura nacional y desmovilizacin de soldados,
seguimiento y entrenamiento de administradores locales incluidos funcionarios
de aduanas y policas, desarme y eliminacin de minas anti-persona. Por costes
bilaterales netos debe entenderse el coste extra de asignar personal a estas
actividades, netos de dietas y otras compensaciones que puedan recibir de
Naciones Unidas. Actividades similares (como entrenamiento militar para el
desminado) no son recogidas como AOD. El tratamiento a las acciones de
similares caractersticas no llevadas bajo la administracin de Naciones Unidas,
computan como AOD pero no dentro del sector de Operaciones de
mantenimiento de la paz.
3) Entrenamiento a policas. Se considera AOD a menos que sea entrenamiento
para funciones paramilitares o trabajo de contra-insurgencia. El apoyo directo
con policas del donante para el control de desobediencia civil en el pas receptor
no se considera AOD.
4) Programas sociales y culturales. Slo cuando stos estn dirigidos a construir
capacidad en los pases receptores, sern elegibles. Por tanto quedan incluidos
16
76
como AOD los programas de promocin de museos, bibliotecas, escuelas de arte
y msica y de deporte. La promocin y patrocinio de conciertos o costes de viaje
de atletas, por ejemplo, quedan excluidos.
5) Asistencia a refugiados. Computa como AOD aquella que tiene lugar en los
pases en desarrollo o la que se preste en el pas donante pero slo durante el
primer ao como mximo. Tambin son computables sus costes de repatriacin.
6) Energa nuclear. El uso pacfico de esta fuente de energa, como la construccin
de centrales o el uso mdico, se considera AOD. Quedan excluidas las
aplicaciones militares.
7) Investigacin. Computa como AOD slo aqulla que est asociada directa y
primariamente a los problemas del subdesarrollo (por ejemplo, investigaciones
sobre enfermedades tropicales o desarrollo agropecuario en las condiciones
geogrficas de los pases en desarrollo), aunque la investigacin se lleve
fsicamente a cabo en el pas donante.
8) Tratamiento de la deuda externa. Ya que la deuda reembolsable ha sido
computada como AOD en el ao del desembolso, cuando hay una operacin de
condonacin slo se computan los intereses pendientes perdonados, no el
principal. En los casos de deuda comercial pblica garantizada se computa como
AOD el total de la reduccin al no haber habido contabilizacin previa de la
operacin como AOD.
Los agentes que operan en la AOD.
La primera condicin de la definicin del CAD sobre qu es AOD enunciada ms
arriba, mantena que estos flujos deben ser provistos por agencias oficiales, incluyendo
estado y gobiernos locales o sus agencias ejecutoras que se dirigen directamente a los
pases en desarrollo o a instituciones multilaterales cuyo fin principal es la promocin
del desarrollo de dichos pases. En el primer caso, la AOD se denomina bilateral
mientras que en el segundo multilateral.
Estas instituciones multilaterales pueden a su vez subdividirse en:
-
77
Desarrollo Agrcola (FIDA-1977) o el Fondo para el Medio Ambiente
Mundial (FMAM-1990).
-
Estos tres grupos de agentes mantienen la condicin que su ayuda tiene como origen
fondos pblicos. En el caso de las instituciones de Naciones Unidas que tienen un
mandato especfico que va ms all de la promocin del desarrollo econmico de los
pases, lo que el CAD es asignar un coeficiente a cada una de ellas a la hora de
computar como AOD sus presupuestos respectivos. Este coeficiente se revisa
peridicamente en dilogo con cada institucin no financiera. Por ejemplo, la
Organizacin Mundial de la Salud (OMS) realiza muchas funciones que tienen que ver
con el desarrollo de los pases pobres. El CAD ha asignado a su presupuesto un
coeficiente de 75,4% para considerarlo como AOD. No obstante, aquellos programas
de la OMS que cumplen todas las condiciones de AOD, son computados al 100%,
mientras que, por ejemplo, las aportaciones de la OMS a la Agencia Internacional de
Investigacin contra el Cncer no computa como AOD.
Adems de estos tres grupos de agentes, existen otras entidades que intervienen en el
trabajo de la AOD, aunque ya hemos dicho que los fondos recogidos directamente por
ellas no se consideran AOD (no son oficiales, sino privados). Dentro de esta
categoras se encuentran las Organizaciones No Gubernamentales de Desarrollo
17
78
(ONGD), las fundaciones de empresas, las universidades, los sindicatos, las iglesias y
cualquier otro que realice cooperacin para el desarrollo, siendo la ausencia de
bsqueda del lucro en la actividad realizada un factor comn.
Los subsidios internacionales que los gobiernos donantes puedan hacer a empresas
privadas, se denominan Otros Flujos Oficiales, establecindose una diferencia clara
con la AOD al apoyar primariamente objetivos comerciales.
Algunas tipologas de AOD.
Los flujos de AOD pueden clasificarse atendiendo a varios criterios. Los principales
son:
Segn las acciones que son objeto de ayuda: financiera (ayuda con dinero o
tratamiento de la deuda externa) y no financiera (econmica19, tcnica, alimentaria,
humanitaria, educacin para el desarrollo, mantenimiento de la paz, etc.).
18
La rotatoria puede considerarse un caso particular de reembolsable, pero se caracteriza porque los
retornos recibidos vuelven a emplearse en operaciones de AOD, cosa que no tiene por qu cumplirse en
todas las operaciones reembolsables.
19
Es importante notar la distincin entre ayuda financiera y econmica: la segunda se presta en forma de
bienes y servicios, inversiones, cesin de tecnologa, etc. La primera incluye prstamos (incluidos los
microcrditos), donaciones y operaciones de deuda.
20
Esta se conoce como el Country Reporting System (CRS) y puede consultarse una versin actualizada a
79
dgitos. En la Tabla siguiente ofrecemos el desglose nicamente al nivel de dos dgitos,
ya que la intencin es mostrar la gran variedad de actividades y destinos hacia los que se
dirige la AOD. En algunos casos, su relacin con la reduccin de la pobreza de los
pases en desarrollo en ms claro que en otros. Sobre esta cuestin volveremos ms
adelante, pero como se observa en el grfico 2, en 2006 el predominio lo tuvo el sector
de Infraestructura y servicios sociales (casi el 35%) seguido de las operaciones
relacionadas con la deuda externa, excepcionalmente altas ese ejercicio (22,6%).
se realiz una reestructuracin respecto a la que se vena utilizando desde 2002. El cuadro de
correspondencias puede consultarse en http://www.oecd.org/dataoecd/24/23/37353078.xls.
80
Tabla 2. Sectores del CAD, desglosados a dos dgitos.
CAD
100
200
300
400
500
600
700
910
920
998
SECTOR
DESCRIPCIN
INFRAESTRUCTURAS SOCIALES Y SERVICIOS
110 EDUCACIN
120 SALUD
130 PROGRAMAS / POLTICAS SOBRE POBLACIN Y SALUD
REPRODUCTIVA
140 ABASTECIMIENTO Y DEPURACIN DE AGUA
150 GOBIERNO Y SOCIEDAD CIVIL
160 OTROS SERVICIOS E INFRAESTRUCTURAS SOCIALES
INFRAESTRUCTURA ECONMICA Y SERVICIOS
200 INFRAESTRUCTURA ECONMICA Y SERVICIOS
210 TRANSPORTE Y ALMACENAMIENTO
220 COMUNICACIONES
230 GENERACIN Y SUMINISTRO DE ENERGA
240 SERVICIOS BANCARIOS Y FINANCIEROS
250 EMPRESAS Y OTROS SERVICIOS
SECTORES PRODUCTIVOS
300 SECTORES PRODUCTIVOS
310 AGRICULTURA, SILVICULTURA Y PESCA
320 INDUSTRIA, MINERA Y CONSTRUCCIN
330 COMERCIO Y TURISMO
MULTISECTORIAL
410 PROTECCIN MEDIO AMBIENTE
420 MUJER Y DESARROLLO
430 OTROS, MULTISECTORIAL
AYUDAS EN FORMA DE SUMINISTRO DE BIENES Y PROGRAMAS
510 AYUDAS EN FORMA DE SUMINISTRO DE BIENES Y PROGRAMAS
ACTIVIDADES RELACIONADAS CON LA DEUDA
600 ACTIVIDADES RELACIONADAS CON LA DEUDA
AYUDA DE EMERGENCIA
700 AYUDA DE EMERGENCIA
710 AYUDA ALIMENTARIA DE EMERGENCIA
720 OTRAS AYUDAS EN SITUACIONES DE EMERGENCIA Y
CATSTROFES
COSTES ADMINISTRATIVOS DONANTES
APOYO A ORGANIZACIONES NO GUBERNAMENTALES (ONGD)
SIN ESPECIFICACIN / NO CLASIFICADOS
81
Grfico 2. Distribucin sectorial de la AOD neta en 2006.
6,4
r
ica
cif
pe
Es
n
r ia
Si
ita
an
m
u
H
a
ud
Ay
i
Co
cio
er
m
4,1
6,9
22,6
3,1
5,8
1,1
0,8
o
m
ris
Tu
2,9
ra
tu
ul
r ic
Ag
s
tr a
O
4,8
2,8
3,9
4,7
es
on
ci
ica
un
s
m
le
m
cia
co
y
so
s
rte
o
i
o
ic
o
sp
rv
nt
ie
an
se
y
Tr
am
a
ne
ur
t
a
c
s
d
y
ru
lu
st
ua
Sa
ee
Ag
fra
in
a
tr a
tiv
O
ra
is t
in
m
Ad
y
l
cia
So
ra
tu
c
tru
es
fra
In
11,4
4,5
8,9
4,0
4,1
4,7
8,7
34,9
5,0
10,0
15,0
20,0
25,0
30,0
35,0
Fuente: OCDE-DAC. CRS On-line. Nota: los sectores en rojo corresponden a la desagregacin de dos
dgitos. En los sectores de infraestructura social, econmica y productivo se ofrece un segundo nivel de
desglose (barras en azl).
82
Grfico 3. Evolucin de la AOD Neta a educacin.
12000
10,0%
9,0%
Millones de $ corrientes
10000
8,0%
7,0%
8000
6,0%
6000
5,0%
4,0%
4000
3,0%
2,0%
2000
1,0%
20
06
20
04
20
02
20
00
19
98
19
96
19
94
19
92
19
90
19
88
19
86
19
84
19
82
19
80
19
78
0,0%
19
76
19
74
6,0%
Millones de $ corrientes
6000
5,0%
5000
4,0%
4000
3,0%
3000
2,0%
2000
1,0%
1000
20
06
20
04
20
02
20
00
19
98
19
96
19
94
19
92
19
90
19
88
19
86
19
84
19
82
19
80
19
78
0,0%
19
76
19
74
83
Grfico 5. Evolucin de la AOD Neta a acciones relacionadas con deuda externa.
30000
25,0%
Millones de $ corrientes
25000
20,0%
20000
15,0%
15000
10,0%
10000
5,0%
5000
20
06
20
04
20
02
20
00
19
98
19
96
19
94
19
92
19
90
19
88
19
86
19
84
19
82
19
80
19
78
0,0%
19
76
19
74
Cuando se realizan estudios empricos sobre la AOD, sta puede considerarse de varias
formas, constituyendo otro grupo de tipologas:
a) AOD Neta o Bruta. La AOD bruta considera
era los flujos llegados a cada pas
receptor cada ao, mientras que la AOD neta resta a la bruta los reembolsos
correspondientes a AOD reembolsable pasada y que han vencido en ese
ejercicio. Existe por tanto la posibilidad (y sucede en el nivel bilateral) de que en
determinados aos los pases receptores de AOD sean financiadores netos de
alguno de sus anteriores donantes. Mientras la AOD Bruta expresa con mayor
nfasis el esfuerzo de los donantes, la AOD Neta expresa de forma ms clara
cul es el beneficio real que ha disfrutado el receptor. Es por eso que nos parece
que para los estudios de eficacia macro de la ayuda la mejor opcin es utilizar la
AOD Neta.
b) AOD bajo compromisos o desembolsos. Los compromisos recogen la suma de
operaciones acordadas por los donantes y receptores en cada ejercicio aunque no
hayan sido an satisfechas, mientras que los desembolsos computan nicamente
los flujos realmente liberados en cada ejercicio. Es claro que la diferencia entre
uno y otro revela la eficiencia asignativa de los donantes para financiar en el
plazo prometido las operaciones inicialmente aprobadas. Cuanto menor sea esta
diferencia, ms creble es el compromiso del donante y ms fcil ser la
84
planificacin y ejecucin de las intervenciones por parte del receptor. Para los
estudios de eficacia de la ayuda ex post la variable ms idnea es utilizar los
desembolsos, mientras que si estudiamos modelos de asignacin ex -ante quizs
sea ms aconsejable utilizar los compromisos. La evolucin de ambas variables
hasta 2007 se ofrece en el Grfico 6.
Grfico 6. Evolucin de los compromisos y desembolsos.
140.000
120.000
100.000
80.000
60.000
40.000
20.000
04
02
00
98
96
94
92
90
88
06
20
20
20
20
19
19
19
19
19
86
19
84
82
80
78
76
74
72
70
68
66
64
62
Desembolsos
19
19
19
19
19
19
19
19
19
19
19
19
19
19
60
Compromisos
85
financiero del donante; iv) para los autores los prstamos de asistencia tcnica
no deberan computarse, pues el donante queda beneficiado al ser l quien los
presta y cobra por ello; v) deberan tenerse en cuenta los costes de oportunidad
de las cantidades de AOD y para ello proponen calcular el valor actualizado no
bajo una tasa de descuento fija del 10% como hace el CAD, sino teniendo en
cuenta el tiempo, la moneda del flujo y el vencimiento elaborando curvas de
rendimiento para cada prstamo; vi) asuncin implcita de que los tipos de
inters son fijos, pero la realidad de los retornos es que pueden ser a inters
variable lo que conduce a predecir las cargas futuras por intereses de los
receptores; vii) no incorporar el riesgo de crdito supone que el tipo de mercado
refleja de forma correcta el riesgo, pero habra que incorporarlo ya fuera
aumentando la tasa de descuento o por proyecciones del servicio de la deuda
menores. Este ltimo paso exige utilizar horquillas de riesgo especficas y
probabilidades de impago, con lo que la AED no lo contempla aunque los
autores lo advierten como debilidad del cmputo tradicional de la AOD. Aunque
la elaboracin de la AED supone una mejora tcnica importante y trabajos sobre
eficacia de la ayuda muy reconocidos la han utilizado21, lo cierto es que la
correlacin entre la AOD y la EDA en series o datos de panel amplios se sita
en torno al 98%, con lo que los resultados no varan mucho. Esta es una seal
del alto grado de concesionalidad y el elevado componente de donacin que, en
promedio, suelen tener los prstamos concedidos como AOD.
d) Ratios relativos a AOD. Cuando slo consideramos el flujo total de AOD
recibido por un pas sea en trminos corrientes o constantes- y no lo
ponderamos por ninguna otra variable podemos realizar un anlisis bastante
sesgado ya que todos los pases son homogneos. Para disminuir este sesgo de
seleccin, podemos dividir el flujo de AOD por variables como el PNB del pas
receptor, su poblacin (AOD per capita), su volumen de importaciones, de
inversin (o formacin bruta de capital), o el presupuesto del gobierno. Todas
21
86
estas ratios estn disponibles en la base de datos del Banco Mundial World
Development Indicators. Un ejemplo de cmo vara el anlisis de la ayuda
mundial cuando se utilizan los datos del flujo de AOD ponderados o sin
ponderar queda reflejado en la tabla 4.
Tabla 4. Ratios y volumen de AOD. Promedios de 1981-2003.
% AOD/PIB %AOD/GP
CHINA Ranking
Valor
INDIA
Ranking
Valor
141
n.d.
(0,38)
%AOD/FBC %AOD/M
$ AODpc
AOD M$
140
115
166
(1,01)
(2,33)
(1,56)
(1.837)
134
124
124
88
161
(0,61)
(2,68)
(2,68)
(5,47)
(2,04)
(1.761)
Media %
98,4
59,1
53,5
51,5
47,7
87
Guinea-Bissau
15
47,7
Micronesia, Estados Federados de
12
43,2
Mozambique
15
40,5
Afganistn
4
30,4
Eritrea
12
27,6
Nicaragua
15
27,4
Rwanda
15
26,8
Malawi
15
26,4
Sierra Leona
15
25,3
Liberia
8
25,2
Guyana
15
24,6
Kiribati
15
24,0
Burundi
15
23,6
Zambia
15
23,6
Cabo Verde
15
23,5
Fuente: Banco Mundial, WDI. Nota: la segunda columna recoge el nmero de observaciones disponibles
con las que se ha calculado el promedio, dentro de los quince aos comprendidos en el periodo.
No deja de asombrar que existan cuatro pases en los que ms de la mitad de su renta
nacional bruta est constituida por los flujos exteriores en forma de ayuda, llegando al
98% en el caso de Santo Tom y Prncipe22. Cabe hacerse la pregunta hasta qu punto
podemos considerar a estos pases independientes, al menos desde el punto de vista
econmico.
La tabla 6 recoge el ratio de AOD respecto al gasto pblico central. De los 20 pases que
presentan valores ms elevados, destaca Ecuador, que en el periodo del que hay datos
(1990-1995) alcanz valores tan desorbitados como cerca de 22.000 y 21.000 en 1994 y
1995 respectivamente. Las razones de este dato tan atpico pueden encontrarse en
recaudaciones extraordinariamente bajas del periodo considerado, correlacionadas con
tasas de crecimiento del PIB real negativos (-0,2% en 1990 y 1,05% en 1995) o muy
bajos (1,38% en 1991; 0,12% en 1992; 1,2% en 1994; y 0,25% en 1995).
Tabla 6. Los 20 pases con mayor ratio AOD/Gasto Pblico entre 1990-2004.
Pas
Ecuador
Afganistn
Gambia
Tayikistn
22
Media %
17.218,3
319,3
182,3
119,4
En la serie de quince aos utilizada, el valor mnimo se situ en el 54,8% (2002) y el mximo en el
88
Rwanda
3
119,1
Guinea
3
117,1
Camboya
3
114,5
Nicaragua
15
105,7
Bhutan
15
94,4
Burundi
8
84,0
Kyrgyz Rep.
7
82,6
Zambia
2
82,3
Etiopia
1
81,4
Vanuatu
6
81,1
El Salvador
3
73,8
Senegal
3
73,3
Uganda
5
69,8
Ghana
4
64,5
Mongolia
1
63,3
Georgia
8
57,1
Fuente: Banco Mundial, WDI. Nota: la segunda columna recoge el nmero de observaciones disponibles
con las que se ha calculado el promedio, dentro de los quince aos comprendidos en el periodo.
Ms all del caso extremo de Ecuador, llaman la atencin pases como Nicaragua y
Bhutan que, sobre la base de observaciones para los quince aos del periodo, presentan
valores en torno al 100%. Tambin es significativo que en el ranking presentado hay
pases de todas las regiones geogrficas. Tres de estos pases son de desarrollo humano
bajo (Burundi, Zambia y Gambia). Las rentas per capita van desde los 630 dlares PPA
de Burundi hasta los 3.580 dlares de Ecuador. No parece que ninguna de estas
variables (nivel de desarrollo o renta per capita) presenten altas correlaciones con la
recepcin de AOD.
El ratio de AOD entre el nmero de habitantes del pas ofrece un resultado interesante.
Los pases menos poblados reciben mucha ms ayuda per capita que los pases grandes.
Esto queda claramente reflejado en la Tabla 7 en la aparecen los 20 pases que
recibieron ms y menos ayuda per capita en el periodo 1990-2004.
Tabla 7. Los 20 pases con ms y menos AOD per capita entre 1990-2004.
Pas
Nueva Caledonia
Polinesia Francesa
Palau
Mayotte
Islas Marshall
Micronesia
Antillas Holandesas
S. Tom y Prncipe
Aruba
Cabo Verde
Dominica
Tonga
Palestina
Media $
Pas
1.860,2 Argentina
1.730,6 Corea del Norte
1.136,0 Qatar
1.106,1 Myanmar
913,3 Iran
803,2 Bermudas
483,1 Singapore
332,5 Nigeria
327,8 Macao, China
272,6 Mxico
271,8 Venezuela, RB
266,5 Kuwait
245,7 China
89
Samoa
Seychelles
Vanuatu
Kiribati
Israel
St. Kitts and Nevis
15
15
15
15
15
15
Los pases del bloque de la izquierda son los que reciben ms ayuda por habitante. La
mediana para la muestra de 171 pases con datos fue de 34,17$, lo que da una idea de la
fuerte dispersin de la variable. Los grandes receptores de ayuda per capita son pases
pequeos y muchos de ellos tambin son grandes receptores de AOD/RNB. Ntese el
mencionado caso de Israel que recibe 193$ por habitante, siendo un pas de renta per
capita alta (24.382 $PPA en 2004, ocupando el puesto 23 de 177 segn el PNUD,
2006).
Por lo que se refiere a la ratio AOD entre importaciones de bienes y servicios, la tabla 8
muestra como hay 14 pases que superan el umbral del 50% en dicha ratio, con los casos
extremos de S. Tom y Prncipe y Guinea Bissau superando el 100%. Un dato que
refuerza cmo la ayuda realmente sostiene la viabilidad econmica de algunos pases.
Ntese el predominio de los pases africanos debido a su baja participacin en el
comercio internacional.
90
Madagascar
15
45,2
Guinea Ecuatorial
7
42,1
Cabo Verde
15
41,2
Fuente: Banco Mundial, WDI. Nota: la segunda columna recoge el nmero de observaciones disponibles
con las que se ha calculado el promedio, dentro de los quince aos comprendidos en el periodo.
En este caso particular, al disponer Somalia de una sola observacin hemos recogido 21
pases. La mediana de la muestra de 156 pases con datos fue de 17,6%. Los porcentajes
tan elevados muestran los bajos niveles de inversin que tienen los pases y quiz cmo
los incentivos a aumentarlo son bajos si reciben tanta AOD fornea, producindose un
potencial efecto sustitucin del esfuerzo inversor nacional por los fondos externos.
Como se ver ms adelante es una de las hiptesis subyacentes la ineficacia de la ayuda
para elevar la renta per capita de los pases receptores. En el extremo opuesto a los
grandes porcentajes, en la muestra aparecieron 18 pases en los que la AOD no lleg a
91
representar el 1% de la inversin, siendo los pases con ms dinamismo econmico
(Argentina, China, Chile, Brasil, Mxico o Malasia estn entre ellos). Dos pases
(Emiratos rabes Unidos y Corea del Sur) tuvieron porcentajes negativos debido a los
retornos de AOD reembolsable pasada (recurdese que el numerador es AOD Neta).
2.3. LA SERIE HISTRICA DEL TOTAL DE AOD Y SUS PERSPECTIVAS.
En los grficos 7 y 8, se ofrece la evolucin del total de AOD neta desde 1950 hasta
2006 tanto en niveles como en tasas de variacin interanual. El grfico 6 contiene la
lnea de tendencia y ecuacin del crecimiento exponencial del flujo de AOD desde
1950. El total acumulado en todo el periodo se elev a 1.610.218 millones de dlares
corrientes y 2.780.077 en millones de dlares constantes de 200523.
23
Aunque el trabajo de series temporales en dlares constantes sea ms habitual en algunos estudios
economtricos, sobre todo cuando se emplee la regresin, hemos preferido reportar los datos en dlares
corrientes ya que los pases receptores y sus habitantes viven y deciden a precios corrientes. Adems la
serie de dlares constantes ofrecida por el CAD slo parte de 1960. De todas formas, el coeficiente de
correlacin entre los datos en trminos corrientes y constantes es de 0,9027 con lo que las diferencias son
poco significativas.
92
Grfico 7. Evolucin de la AOD neta mundial.
140.000
120.000
y = 2936,9e0,0705x
R2 = 0,9572
100.000
USD million
80.000
60.000
40.000
20.000
19
57
19
59
19
61
19
63
19
65
19
67
19
69
19
71
19
73
19
75
19
77
19
79
19
81
19
83
19
85
19
87
19
89
19
91
19
93
19
95
19
97
19
99
20
01
20
03
20
05
19
50
-5
5
120.000
60,0%
100.000
50,0%
30,0%
60.000
20,0%
10,0%
40.000
0,0%
20.000
-10,0%
-20,0%
19
50
-5
5
19
57
19
59
19
61
19
63
19
65
19
67
19
69
19
71
19
73
19
75
19
77
19
79
19
81
19
83
19
85
19
87
19
89
19
91
19
93
19
95
19
97
19
99
20
01
20
03
20
05
Tasas de Variacin
40,0%
80.000
93
En la Tabla 10 se ofrecen los datos de las cuantas anuales, su tasa de variacin
interanual, tasas de crecimiento acumulado y volatilidades de algunos periodos de
especial inters24. Pueden distinguirse tres periodos en esta serie temporal.
Tabla 10. Serie temporal de la AOD Neta, variaciones y volatilidades.
Ao
1950-55
1956
1957
1958
1959
1960
1961
1962
1963
1964
1965
1966
1967
1968
1969
1970
1971
1972
1973
1974
1975
1976
1977
1978
1979
1980
Periodo
Millones US$
Tasa Variacin
1.953
3.172
62,4%
3.632
14,5%
4.169
14,8%
4.058
-2,7%
4.676
15,2%
5.244
12,1%
5.554
5,9%
5.752
3,6%
5.924
3,0%
6.489
9,5%
6.459
-0,5%
6.358
-1,6%
6.914
8,7%
6.889
-0,4%
6.713
-2,6%
7.284
8,5%
8.844
21,4%
8.703
-1,6%
11.180
28,5%
13.254
18,6%
13.248
0,0%
14.956
12,9%
19.148
28,0%
21.841
14,1%
26.195
19,9%
Crec.
Volatilidad
(Coeficiente de
Acumulado
Variacin)
Ao
Millones US$
Tasa Variacin
24.604
-6,1%
1981
27.037
9,9%
1982
26.770
-1,0%
1983
28.130
5,1%
1984
28.755
2,2%
1985
35.836
24,6%
1986
40.606
13,3%
1987
47.063
15,9%
1988
45.735
-2,8%
1989
52.730
15,3%
1990
56.418
7,0%
1991
60.488
7,2%
1992
56.148
-7,2%
1993
58.820
4,8%
1994
58.780
-0,1%
1995
55.591
-5,4%
1996
48.465
-12,8%
1997
52.087
7,5%
1998
53.233
2,2%
1999
53.749
1,0%
2000
52.435
-2,4%
2001
58.292
11,2%
2002
69.085
18,5%
2003
79.553
15,2%
2004
106.777
2005
34,2%
104.421
-2,2%
2006
Ranking de
volatilidad
1960-1969
4,0%
0,12
1970-1979
12,5%
0,40
1980-1989
5,7%
0,26
1990-1999
0,1%
0,07
2000-2006
9,9%
0,31
24
94
1950-1990
9,60%
0,87
1990-1997
-1,00%
0,07
1998-2006
8,00%
0,32
El primer periodo es el comprendido desde los orgenes de los aos 50 hasta 1990. En
estas cuatro dcadas, la ayuda fue aumentando su volumen a un promedio acumulado
del 9,6% con tasas de variacin interanual por encima del 20% en varios aos (1974 y
1978 del 28%; 25% en 1996; 21% en 1972 y 20% en 1980). Tambin hubo 9 periodos
en los que tasa interanual fue negativa. La volatilidad ms alta se produjo en la dcada
de los 70 cuando el coeficiente de variacin tom el valor de 0,4.
El segundo periodo recorre desde el final de la Guerra Fra en 1990 hasta 1997. En stos
siete aos el crecimiento fue negativo (-1%), con una diferencia de 12.023 millones de
dlares entre lo aportado en el mximo de 1992 y el mnimo alcanzado en 1997. Es la
etapa que suele denominarse de fatiga de los donantes. La volatilidad de la ayuda
(0,07) disminuy considerablemente respecto a la del periodo 1950-1990.
El tercer periodo es la recuperacin que tiene el volumen de AOD neta mundial desde
1997 hasta 2006, con un mximo histrico en 2005 de 106.777 millones de dlares
corrientes. El crecimiento acumulado de esta dcada ha sido del 8%, con la mayor tasa
de variacin interanual de la serie situada en 2005 (34,2%). La volatilidad aument a
0,32 debido a este repunte mantenido en 2006.
Si analizamos la volatilidad de la ayuda otorgada por cada uno de los donantes en el
periodo 1960-2005 (tabla 11), vemos que Irlanda y Austria han sido ms voltiles,
Estados Unidos y Grecia los menos, y Espaa se sita en el puesto decimocuarto con
coeficiente de variacin de 0,81.
Tabla 11. Volatilidad de la ayuda por donantes. 1960-2005.
Puesto
1
2
3
4
5
6
7
8
9
10
11
12
13
Pas
Irlanda
Austria
Luxemburgo
Reino Unido
Finlandia
Suiza
Italia
Noruega
Portugal
Dinamarca
Japn
Holanda
Suecia
CV
1,36
1,25
1,04
1,03
1,03
1,01
1,00
1,00
0,99
0,94
0,90
0,86
0,86
95
14
Espaa
15
Blgica
16
Nueva Zelanda
17
Alemania
18
Francia
19
Canad
20
Australia
21
Estados Unidos
22
Grecia
Fuente: CAD y clculos propios
0,81
0,81
0,80
0,77
0,77
0,72
0,67
0,66
0,38
El mximo de 2005 viene explicado por dos principales razones: la cuantiosa ayuda
humanitaria destinada a compensar el desastre del tsunami en Asia y las fuertes
operaciones de condonacin de deuda a Irak (3.914 millones slo por parte de estados
Unidos) y Nigeria (600 millones). A estas dos operaciones puntuales puede aadirse la
ayuda a Afganistn (Estados Unidos aport a este pas 1.400 millones). El grfico 9
muestra la comparativa de los aumentos de cada uno de los principales instrumentos de
ayuda desde 2000. El protagonismo de la condonacin de deuda y su naturaleza peculiar
al no suponer nuevo dinero, ha hecho que organizaciones como ActionAid (2005)
denominen este aumento como ayuda fantasma.
La importancia relativa de las operaciones de deuda queda reflejadas en la Tabla 12. En
ella se aprecia cmo la deuda ha supuesto ms del 20% de la AOD neta total en los
ejercicios de 2003, 2005 y 2006.
96
2000
3.504
133
3,8%
6,5%
2001
4.156
125
3,0%
7,9%
2002
6.449
581
9,0%
11,1%
2003
15.969
2.569
16,1%
23,1%
2004
8.071
204
2,5%
10,1%
2005
25.903
4.101
15,8%
24,3%
2006
21.889
1.686
7,7%
21,0%
El grfico 10 pone en perspectiva de futuro el esfuerzo que los donantes han prometido
realizar.
Grfico 10. Evolucin de la AOD neta 1990-2006 y simulacin del aumento 20072010.
97
Tras el mximo de 2005 que quebr la tendencia anterior por las razones ya expuestas, y
que se han mantenido en 2006, se espera otro pequeo descenso en el monto total de
AOD neta en 200725, pero que confirme la tendencia al alza desde 1997. La base de la
simulacin son los compromisos formalizados por los distintos donantes miembros del
CAD de ir aumentando progresivamente los volmenes de AOD. El detalle del
compromiso de cada donante puede consultarse en OECD-DAC (2007). Esta es una
primera fase de incrementos que intentan sentar una base sobre la que lograr en 2015 los
Objetivos de Desarrollo del Milenio. Hasta la fecha, los compromisos verbales de los
donantes no han tenido, por lo general, un cumplimiento firme en el largo plazo, pues
ya desde los 70 existe el compromiso de alcanzar el esfuerzo del 07% PNB en AOD
por parte de todos los donantes. En los ltimos aos, slo cinco donantes cumplen o
superan este umbral (Suecia, Noruega, Luxemburgo, Holanda y Dinamarca).
25
Las cifras preliminares ofrecidas por la OCDE sitan en 103.700 millones de dlares la AOD neta de
2007, una cada en trminos reales del 8,4% respecto a 2006 (OECD-DAC 2008).
98
3.
CONCLUSIONES.
Este captulo ha querido establecer el marco conceptual para poder abordar la pregunta
que gua el libro. Para poder responder a si la ayuda al desarrollo reduce la pobreza, es
imprescindible definir con precisin qu se entiende por pobreza y cmo medirla
(desarrollado en el captulo anterior) y qu es ayuda para el desarrollo. Una estrategia de
desarrollo exige, adems del marco conceptual, unos indicadores y unas polticas para
lograrlo. Hemos visto en este captulo que el desarrollo es un concepto muy amplio que
ha evolucionado con el tiempo. El paradigma que parece prevalecer en la actualidad es
el del Programa de Naciones Unidas para el Desarrollo (PNUD) denominado desarrollo
humano. Uno de sus principales idelogos fue A.K. Sen que entiende el desarrollo
como la expansin de las libertades de los individuos. Cuando se amplan las libertades,
los individuos gozan de ms oportunidades y capacidades para poder vivir bajo el
proyecto de vida que estiman valioso. Eso es el desarrollo humano.
La ayuda al desarrollo es un flujo que pretende contribuir a financiar el desarrollo de los
pases. Hemos expuesto su concepto y formas de medicin, as como la evolucin
histrica de este flujo.
De todas formas es importante sealar que la ayuda no es el nico (ni el principal) flujo
que puede financiar el proceso de desarrollo. Naciones Unidas insisti en la conocida
como Declaracin del Milenio en que haba que potenciar el aumento de los recursos
nacionales de los pases en desarrollo, as como tratar de obtener nuevos recursos
adicionales a la AOD. Entre las propuestas ya presentadas a consideracin de la
comunidad internacional en las Naciones Unidas se encuentran la conocida como tasa
Tobin (una tasa sobre las inversiones especulativas de capitales), el impuesto sobre el
contenido de carbn de los hidrocarburos, una tasa sobre los billetes de avin, la
International Finance Facility (un adelanto de los fondos de ayuda comprometidos a
futuro propuesto por el Reino Unido), la creacin de Derechos Especiales de Giro para
el desarrollo dentro del FMI, una reduccin del coste de las remesas, innovaciones en
las donaciones privadas y el campo de la filantropa, una lotera global o una prima
sobre un bono para el desarrollo global (global premium bond). Una presentacin de
estos nuevos instrumentos de financiacin, complementarios con la AOD, puede
consultarse en Atkinson (2004).
Con independencia de que estos nuevos instrumentos lleguen a prosperar, lo que se
deduce de forma clara cuando se analizan los flujos internacionales de capital, es que la
99
AOD no representa ms que una muy pequea porcin de lo que los pases en desarrollo
pueden lograr del exterior. Como reflejan los grficos 11 y 12, tanto la inversin directa
extranjera (IDE) como las remesas de los emigrantes juegan hoy da un papel muy
superior a la ayuda. Cuando se tienen en cuenta las remesas y la ayuda privada, las
transferencias
de
los
donantes
hacia
los
pases
en
desarrollo
aumentan
300
250
200
150
100
50
1990
1991
1992
1993
1994
1995
1996
1997
1998
1999
2000
2001
2002
2003
2004
2005
(50)
Remesas
2006
100
Grfico 12. Flujos de ayuda oficial, privados y remesas como % de la RNB, 2005.
97
INTRODUCCIN.
98
99
100
2.
Desde su origen la cooperacin para el desarrollo ha tenido dos objetivos, potencialmente conflictivos
entre s. El primero es promover el crecimiento a largo plazo y la reduccin de la pobreza de las
economas en desarrollo (la motivacin de los donantes por este objetivo es una combinacin de altruismo
y una preocupacin ms interesada de que a medio y largo plazo su seguridad y estabilidad se vern
favorecidas por un contexto de crecimiento de los pases ms pobres). El segundo objetivo era promover
los intereses polticos y estratgicos inmediatos de los donantes. La mayor parte de la ayuda se diriga a
pases con regmenes aliados de las potencias occidentales. Ms an, los objetivos estratgicos y de
desarrollo de la ayuda, aparecan enfrentados entre s (Banco Mundial 1998:7)
101
de trabajos empricos sin que la cuestin est hoy cerrada. Es notable que la mayora de
los trabajos publicados aborden la cuestin de la eficacia de la ayuda desde un enfoque
macro o agregado, en vez de un abordaje micro, evaluativo, de casos ms especficos
(Cassen et al. 1986 y Riddell 2007 pueden considerarse representantes de esto ltimo).
Adems, varios autores (Duflo & Kremer 2005; Roodman 2007) reconocen la
existencia de un sesgo en las publicaciones hacia la presentacin de casos de xito, tanto
en el plano de las evaluaciones de proyectos y programas, como de los modelos macro
que ofrezcan resultados robustos, ya sea en la direccin de que la ayuda es eficaz o
ineficaz. Trabajos publicados que presenten como idea central, razones por las que la
respuesta sobre la eficacia de la ayuda debe quedar inconclusa empricamente, son poco
frecuentes.
No deja de producir cierta perplejidad la abundancia de planteamientos de trabajos
acadmicos que, tras la presentacin de la cuestin terica sobre el impacto de la ayuda
en la renta per capita de los pases, afirman que la respuesta sobre su veracidad debe
decidirla la contrastacin emprica, ms all de la calidad y abundancia de los datos que
se tengan para poder llevar a cabo tal verificacin. Pero tambin merece la pena
plantearse la pregunta del impacto de la ayuda en los trminos opuestos. Dado que los
estudios empricos generan confusin y falta de convergencia en los resultados se
debera acentuar el esfuerzo sobre la teora econmica para que sea ella la que haga
inclinarse la balanza hacia los resultados positivos o negativos. Una tercera posibilidad,
como aqu defendemos, es dejar abierta la cuestin emprica en el nivel macro y
proceder a avanzar en el conocimiento sobre lo que funciona o no en la ayuda a travs
de evaluaciones micro. En cierto modo, se trata de sacrificar la validez externa (por
supuesto nunca pretender establecer leyes universales y necesarias tipo siempre que se
ayuda de esta manera o en estas condiciones se alcanza este resultado, porque ese
determinismo ya no lo sostiene ni la fsica fuera de la mecnica newtoniana) por un
conocimiento limitado pero dinmico, ms falsable que verificable, basado en la
experiencia y donde la validez interna se fortalece frente a la validez externa.
Llegados a este punto veamos cules son las principales dificultades encontradas en los
estudios macro sobre la eficacia de la ayuda para no poder ofrecer una respuesta clara y
distinta sobre la cuestin. Para ello procedo en cinco etapas. En la primera sintetizo las
tres generaciones de trabajos empricos descritas por las primeras revisiones de la
literatura. En la segunda etapa, se identifico los estudios que han servido como
catalizadores de la cuestin, al provocar muchos trabajos que han pretendido contestar
102
sus hallazgos. En la tercera etapa presento los frutos de los trabajos ms recientes y que
ofrecen mayor solidez economtrica. En la cuarta etapa identifico los problemas
comunes que afectan a la credibilidad de stos trabajos y las razones tcnicas de por
qu, siendo superiores a los anteriores, siguen dejando la cuestin de la eficacia de la
ayuda abierta. En la quinta etapa resumo las principales conclusiones que ha aportado
este empirismo de la eficacia de la ayuda.
2.1 Las tres generaciones detectadas por las primeras revisiones de la literatura.
Siempre es difcil establecer una sntesis cronolgica de aportaciones empricas ya que
es costumbre que cada trabajo acadmico dedique un apartado a la revisin y discusin
de la literatura sobre el tema que se aborda, pero fueron Hansen y Tarp (1999, 2000)
quienes organizaron la materia en torno a tres generaciones de estudios empricos sobre
la ayuda al desarrollo hasta esa fecha2.
La primera generacin de estudios sobre la eficacia de la ayuda analiz el impacto de la
ayuda sobre el ahorro y el crecimiento econmicos. La teora subyacente era que el flujo
exterior de la ayuda sera capaz de superar la trampa de la pobreza derivada del bajo
nivel de ahorro existente en los pases en desarrollo. Con baja renta y ahorro, el stock de
capital y la tasa de inversin son bajas y el pas no crece. Sin crecimiento del producto
no aumenta la renta por habitante, permanecindose en la pobreza. Lograba la ayuda
elevar el nivel de ahorro de los pases receptores? La revisin de 131 trabajos empricos
de Hansen y Tarp (2000) mostr que la ayuda quedaba asociada a un mayor nivel de
ahorro, aunque con una elasticidad menor que uno. Adems, el aumento de ahorro no se
traduca en mayores tasas de inversin, ni de crecimiento. El automatismo esperado
por la teora del crecimiento de Harrod-Domar no se confirmaba empricamente. Pero
era posible que el efecto de la ayuda sobre el crecimiento no fuera inducido
directamente por el ahorro, sino por la inversin. Esta posibilidad es la que trat de
capturar los trabajos de la segunda generacin de estudios sobre la eficacia de la ayuda.
Esta segunda generacin se desarrolla en un marco analtico ms amplio de estudio de
los efectos de los flujos exteriores de capital sobre el crecimiento econmico. La ayuda
externa era una de las fuentes de capital exterior. En 15 trabajos empricos llevados a
cabo en los aos ochenta y primeros noventa, se detect un efecto significativo y
positivo de la ayuda sobre la inversin. Adems, entre los 71 trabajos revisados por
Para una difusin comentada de esta revisin vanse Alonso (1999) o Larr (2003 a,b).
103
104
2.2 Los trabajos que sirven como catalizadores de los recientes estudios empricos.
Suelen considerarse los estudios de Boone (1995, 1996a,b) los que inician esta tercera
generacin, seguidos por los de Burnside y Dollar (1997, 2000). Un factor comn de
estos estudios es que llegaban a resultados polticamente muy sensibles sobre el efecto
de la ayuda en los pases en desarrollo. Boone encontraba evidencia de que la ayuda al
desarrollo correlacionaba con un mayor consumo y gasto pblicos y lo asociaba a un
posible efecto negativo de la ayuda al no llegar a los pobres sino que era capturada por
las elites y oligarquas locales: parece probable que los ingresos recibidos en concepto
de ayuda a largo plazo se utilicen, en realidad, para aumentar el tamao del gobierno y
el nmero de funcionarios... o para hacer transferencias a las lites polticas
relativamente
prsperas
(Boone
1996b:43).
De
alguna
forma
confirmaba
empricamente que la ayuda era utilizada como instrumento de la poltica exterior y los
resultados sobre el crecimiento econmico o reduccin de la pobreza de los pases en
desarrollo, no era el principal motivo de asignacin de ayuda. Adems, los efectos de la
ayuda sobre varios indicadores de desarrollo, no eran estadsticamente significativos
(Tabla 1). La Guerra Fra era el contexto internacional que reforzaba estos resultados.
Tabla 1. El impacto de la ayuda segn Boone (1996).
Variable dependiente
Parmetro
Consumo /PNB
1.02**
Inversin /PNB
0.03
Crecimiento PNBpc
0.04
Mortalidad infantil
-0.20
-0.02
Escolarizacin primaria
0.69
Fuente: Boone (1996b). Variable dependiente: Ayuda/PNB. Tamao muestral, 96 pases. ** significativa
al 95% de confianza.
105
ante, econmica, poltica e institucional para que los pases puedan recibir ayuda de esta
lnea de financiacin americana.
La clave del trabajo de Burnside y Dollar (2000), posteriormente extendido y revisado
en Burnside y Dollar (2004a,b), es que la ayuda por s sola no tiene ningn efecto
significativo sobre el crecimiento econmico, pero que en interaccin con un conjunto
de buenas polticase indicadores institucionales, s que lo tiene. Las buenas polticas
quedan definidas por bajos niveles de inflacin, dficit pblico y altos niveles de
apertura comercial y en la versin de 2004a- la calidad institucional3. Esto condujo a
trabajos de optimizacin de la ayuda como los de Collier y Dollar (2001, 2002) en los
que se propona una asignacin selectiva de la ayuda a los pases que previamente
mostraran un escenario macroeconmico de buenas polticas como el diseado por los
autores.
Esta conclusin no se deriva forzosamente del trabajo de Burnside y Dollar (2004b) ya
que, ms all de la debilidad de sus resultados en los estudios de sensibilidad, hacen
referencia a cmo la ayuda fue asignada en el pasado. Adems, no parece congruente
con un objetivo global de asignar la ayuda para reducir la pobreza ya que precisamente
los pases ms pobres son los que presentan peor desempeo macroeconmico e
institucional. El debate se orienta entonces a cmo ayudar a los pases con malas
polticas en vez de dejar de ayudarlos.
Pero son seguramente estas consecuencias polticas las que explican que la academia no
se haya dado por satisfecha con ninguno de los trabajos empricos realizados y siga
tratando de desentraar el impacto real de la ayuda sobre el crecimiento econmico. En
el siguiente epgrafe analizamos los trabajos que, desde la tercera generacin
identificada por Hansen y Tarp (2000), han sido ms determinantes.
Utilizan el indicador de democracia de Freedom House, la media de los seis indicadores institucionales
de Kaufmann, Kraay y Zoido-Lobaton (1999) y el imperio de la ley segn la ICRG.
106
Frente a las nueve versiones que han encontrado que la ayuda slo promueve el
crecimiento por habitante si se destina a pases con estabilidad macroeconmica,
apertura comercial y buena calidad institucional, hay al menos 28 trabajos que
encuentran impacto de la ayuda sin someterlo a esas restricciones. D. Roodman (2007a)
someti a un exhaustivo anlisis de sensibilidad el trabajo de Burnside y Dollar (2000),
junto a los de Collier & Dehn (2001), Collier & Dollar (2002), Collier & Hoeffler
(2002), Guillaumont & Chauvet (2001), Hansen y Tarp (2001) y Dalgaard, Hansen y
Tarp (2004). Los resultados de Roodman son concluyentes sobre la fuerte sensibilidad
de los estudios a cambios en las variables de control, definicin y fuentes estadsticas de
la ayuda, variables utilizadas para definir el vector de buenas polticas e instituciones, el
periodo temporal empleado, la muestra de pases y la inclusin o no de los casos
atpicos (ouliers). El trabajo que sala mejor parado de esta anarqua en los nmeros,
era el de Dalgaard et al. (2004). Un pequeo ejemplo de la varianza de los resultados se
ofrece en la Tabla 3.
Tabla 3. Anlisis de sensibilidad de algunos estudios sobre la eficacia de la ayuda.
Variable
Mnimo y mximo valor del parmetro
Ayuda
(-0,89 ; +1,47)
Ayuda x Polticas
(-0,28 ; + 0,39)
Ayuda al cuadrado
(-0,13 ; +0,06)
107
(-2,3; -0,23)
(-0,49 ; -0,11)
Fuente: Roodman (2007a). La variable dependiente es la variacin del PNBpc del receptor de ayuda. Para
la configuracin exacta de las variables de * y **, vanse Dalgaard et al. (2004) y Guilaumont & Chauvet
(2001) respectivamente.
108
En segundo lugar, por proponer una desagregacin de los datos de la ayuda en funcin
del periodo estimado que podra causar algn impacto sobre el crecimiento. Los autores
clasifican la ayuda en tres grupos. El primer grupo est compuesto por la ayuda ms
improbable en producir algn efecto sobre el crecimiento econmico per capita, como la
ayuda humanitaria para reconstruccin ante desastres naturales, para refugiados, ayuda
alimentaria, etc. El segundo grupo es denominado ayuda de impacto a corto plazo,
formada por las aportaciones para el equilibrio de la balanza de pagos, para
infraestructuras y desarrollo agrcola y del tejido industrial. El tercer grupo es la ayuda
de potencial impacto a largo plazo sobre el crecimiento, al necesitar largos periodos de
tiempo para detectar sus efectos como la ayuda para servicios sociales, educacin o
salud. El principal resultado del anlisis de Clemens et al. (2004) es que la ayuda de
corto impacto est asociada de forma significativa, positiva y muy robusta al
crecimiento econmico y, adems, es independiente al vector de polticas
macroeconmicas que desempee el pas receptor.
En tercer lugar, el trabajo presenta un extenso anlisis de sensibilidad de este resultado
mencionado. La ayuda de corto impacto es promotora de crecimiento econmico por
s misma sin depender del entorno institucional o de polticas macroeconmicas y est
sometida a rendimientos decrecientes, confirmando numerosos estudios anteriores que
ya lo haban detectado. La inclusin de once trminos interactivos de la ayuda de corto
impacto con otras variables no ofreci significatividad estadstica en ninguno de los
casos. El impacto es un 0,5% mayor en frica Sub-Sahariana que en la media muestral
total. El impacto es mayor en pases con mejores niveles de salud (medida a travs de la
esperanza de vida) y menor en los pases ms endeudados.
El segundo trabajo que merece ser mencionado es el de Rajan & Subramanian (2005a).
Su principal aportacin es la de llamar la atencin sobre el problema de endogeneidad y
causalidad bidireccional de la ayuda sobre el crecimiento. Para estos autores, es clave la
instrumentacin de las regresiones para poder salvar estos problemas tcnicos y obtener
resultados rigurosos. Utilizando como variable instrumental la distancia del pas
receptor al ecuador en lnea con lo elaborado por Frankel y Romer (1999), los autores
no encuentran ningn efecto significativo de la ayuda sobre el crecimiento, ya sea
considerando la ayuda de forma aislada, al cuadrado, interactiva con las polticas e
incluso la ayuda de corto impacto tal como la definen Clemens et al. (2004), al
realizar regresiones en seccin cruzada de 107 pases para el periodo 1960-2000. Por el
contrario, si la regresin se realiza sin ningn tipo de instrumentacin (estimacin en
109
Otro ejemplo es el de Ovaska 2003. Como se ver, no es casualidad que dos de ellos estn publicados en
el Cato Journal.
110
111
causalidad o hacia las dos. Pero en los aos recientes los trabajos empricos acuden a un
medio tcnico para afrontar el problema de la endogeneidad: la instrumentacin.
Recordemos que en el caso de la eficacia de la ayuda, Rajan y Subramanian (2005)
plantearon sus trabajos bajo el enfoque de la instrumentacin para superar las
debilidades de los anteriores estudios. Roodman (2007b) describe la instrumentacin
como un sustituto imperfecto de los experimentos controlados. Si un donante ayudara
de forma aleatoria a un receptor y no a otros y pudiramos observar sus efectos
sabiendo que todo lo dems no ha influido en el efecto de la ayuda o su efecto es
conocido con exactitud, entonces podramos atribuir con precisin qu efecto ha
causado la ayuda en el pas receptor. Pero esto slo es posible en algunas intervenciones
muy especficas y concretas de la ayuda. Es el mtodo de las evaluaciones
randomizadas que propone Banerjee (2007), entre otros. Pero no es aplicable al estudio
macro de la eficacia de la ayuda5.
El camino es entonces utilizar variables instrumentales para detectar la direccin de la
causalidad. La instrumentacin consiste en disear una variable que est directa y
fuertemente correlacionada con la ayuda (actuando como variable independiente) pero
no con el crecimiento econmico (variable dependiente). El problema es que casi todo
est correlacionado con el crecimiento econmico. Por ejemplo, suelen usarse como
variables instrumentales la asignacin de ayuda por parte de los donantes a sus antiguas
colonias. La dificultad esencial es saber con seguridad si el haber sido colonia de un
donante o de otro no est correlacionado tambin con el crecimiento. Por ejemplo,
Levine et al.(2000) muestran que el sistema legal heredado de la colonia (ingls,
francs, alemn o escandinavo) tiene correlacin con el desarrollo del sistema financiero
del pas y con su crecimiento econmico.
En suma, aunque el concepto de variable instrumental es til para afrontar el problema
de la endogeneidad, construir verdaderas variables instrumentales es muy difcil, sobre
todo cuando la variable a explicar es tan densa como el crecimiento econmico6.
Otra limitacin importante es que la instrumentacin no tiene por qu ser aditiva. Es
decir, varias variables instrumentales pueden ser vlidas de forma individual pero no
utilizadas de forma conjunta en una misma regresin. Adems, la interpretacin terica
La razn esencial es que la ayuda no se asigna de forma aleatoria por parte de los donantes, sino poltica
y que todo lo dems excepto la ayuda nunca permanece constante en un pas.
6
Argumentos convergentes para reconocer dudosa causalidad en las regresiones sobre el crecimiento
econmico se encuentran en Durlauf et al. (2004) y Rodrik (2005).
112
Lensink y White (1999) son los que introducen la hiptesis de los rendimientos decrecientes de forma
113
114
Explicacin
La ideologa de los autores les
Ideologa
conduce a predecir resultados
conforme a ella
Los autores (o grupos de
investigacin) que ya tienen
Historia personal del autor publicado un trabajo buscan
confirmar sus resultados con ms
trabajos convergentes
Autores que trabajan para una
institucin (u organismo
Intereses institucionales
internacional) buscan publicar
resultados que apoyen la labor de su
institucin
Los investigadores tienen que
publicar para prosperar y las
Sesgo de publicacin
revistas quieren resultados claros en
vez de dudosos
Fuente: Doucouliagos y Paldam (2006), tabla 5.
115
Nmero de Autores
Probabilidad de aparecer
75
Nunca ms
50%
17
1 vez ms
22.7%
2 veces ms
16%
3 veces ms
8.0%
4 veces ms
3.3%
6 o ms
5 o ms veces
Total
0%
104
Origen del autor
Pas desarrollado
Pas no desarrollado
Financiador de la investigacin
73
Universidad
72
Organismo Internacional
17
Ayuda al Desarrollo
12
Otro
27
Fuente: Doucouliagos y Paldam (2006) Tabla 6. Slo 9 de 104 autores son mujeres.
La conclusin de los autores es que tras 40 aos de ayuda al desarrollo, es probable que
en el mundo haya en torno a un 20% menos pobres gracias a la ayuda, frente a un 50%
de menor pobreza en China e India gracias al crecimiento econmico. Quiz la ayuda
puede ser til y eficaz en trminos de crecimiento econmico e incluso desarrollo, pero
116
el esfuerzo emprico que representan 104 autores, 97 estudios, 1.025 regresiones y 182
modelos no parece estar nada acorde con un avance del conocimiento que aclare la
cuestin. Lo ms probable es que el empirismo est dejando de lado toda la compleja
poltica que est detrs de la ayuda y que esta dimensin explique mucha ms realidad
de la ayuda que la multitud de parmetros obtenidos de los modelos sin capacidad real
para predecir.
3.
117
Desde su origen la cooperacin para el desarrollo ha tenido dos objetivos, potencialmente conflictivos
entre s. El primero es promover el crecimiento a largo plazo y la reduccin de la pobreza de las
economas en desarrollo (la motivacin de los donantes por este objetivo es una combinacin de altruismo
y una preocupacin ms interesada de que a medio y largo plazo su seguridad y estabilidad se vern
favorecidas por un contexto de crecimiento de los pases ms pobres). El segundo objetivo era promover
los intereses polticos y estratgicos inmediatos de los donantes. La mayor parte de la ayuda se diriga a
pases con regmenes aliados de las potencias occidentales. Ms an, los objetivos estratgicos y de
desarrollo de la ayuda, aparecan enfrentados entre s (Banco Mundial 1998:7)
118
119
misma forma sobre todos los pacientes, producen siempre su curacin. Las ciencias
sociales no enuncian nunca ese tipo de leyes. Pero incluso no lo hace la fsica, como
vamos a ver a continuacin al analizar los tipo de causalidad (cientfica) que se pueden
distinguir.
10
Por poner un ejemplo aclaratorio: si hubiera un microscopio capaz de ver un electrn, habra que enviar
una cantidad mnima de luz para hacerlo observable (digamos un fotn), pero apenas este fotn toque al
electrn ya lo ha hecho cambiar de posicin. En otras palabras, como es imposible alcanzar la ausencia
absoluta de energa cintica, es imposible confinar las partculas y determinar su posicin exacta. De ah
que se postule que debe existir una energa residual de punto cero, que mantiene las partculas en
movimiento y tambin nuestra incertidumbre.
120
121
Causalidad estadstica.
En estadstica no se habla en trminos de causalidad, sino de correlacin o asociacin
entre dos variables. Los diseos que permiten una mayor afirmacin en trminos de
minimizacin de sesgos son los experimentos naturales aleatorizados. En ellos se
forman dos grupos lo ms idnticos posibles. A uno se le somete a un tratamiento con el
factor estudiado (grupo de tratamiento) y al otro no (grupo de control)11. La
comparacin entre los efectos producidos por el factor en uno y otro grupo permite
afirmar el (o los) efectos causados por el factor. Como este tipo de diseos no es
sencillo ni pueden implementarse siempre en las intervenciones de desarrollo, existen
una serie de criterios estadsticos que ayudan a afirmar que la asociacin entre el
hipottico factor causal y los efectos observados, no son casuales (aunque no causales).
Los principios ms conocidos son: fuerza de la asociacin (o coeficiente de
determinacin R2); gradiente o efecto dosis-respuesta; secuencia temporal; consistencia
11
122
o repeticin del mismo resultado en otros estudios; coherencia con otros hallazgos;
analoga con otros fenmenos; plausibilidad o mecanismo plausible que explique la
relacin causa-efecto; especificidad; evidencia experimental en diseos aleatorizados
como los comentados ms arriba.
Lo interesante de esta coleccin de principios es que sin dotarnos de posibilidad para
afirmar causalidad, construyen pensamiento
falsable, cientfico en
trminos
popperianos.
Aplicados al tema que nos ocupa. Aunque los estudios economtricos no son capaces de
ofrecernos resultados en trminos de causalidad sobre la relacin ayuda-pobreza (o
ayuda-crecimiento), s que disponemos de criterios que aplicados a unidades ms
concretas de evaluacin como los proyectos, programas y polticas de desarrollo,
permiten ir construyendo un acervo de conocimientos que orientan las decisiones de
poltica en una direccin u otra. Ahora nuestro fin no es encontrar un parmetro
incuestionable que nos permita predecir con exactitud la eficacia de la ayuda gracias a
una regresin. Sino acumular certezas que orientan las buenas prcticas sobre la ayuda
al desarrollo, para ir aprendiendo a reducir progresivamente la pobreza y no hacer ms
dao sobre la vida de los pobres.
El concepto economtrico que ms se acerca a la causalidad estadstica es el de
causalidad de Granger. Se dice que una serie temporal Xt causa en el sentido de Granger
un efecto sobre otra serie Yt, cuando los valores retardados de Xt proveen de
informacin significativa estadsticamente sobre los futuros valores de Yt. Se afirma
entonces que X causa (en el sentido de Granger) Y, y no al revs. Es importante notar
que este concepto slo puede aplicarse a pares de variables. Cuando en la relacin
verdadera estn involucradas tres o ms variables, los resultados de los test de
causalidad de Granger pueden conducir a resultados errneos. Quiz esto explique por
qu se han aplicado con poca frecuencia este tipo de anlisis a la relacin entre ayuda y
crecimiento12. Existen excepciones como las de Lloyd et al. (2000) sobre las
exportaciones de los donantes y la ayuda13, Arvin et al. (2002)14 sobre la democracia y
12
123
la ayuda o Roodman (2008) en el que encuentra que el nivel de ayuda recibido por un
pas en desarrollo no ayuda a predecir su crecimiento en los prximos aos, pero
conocer cunto ha crecido ayuda a predecir cunta ayuda recibir. Es decir encuentra
causalidad-Granger del crecimiento sobre la ayuda. La ayuda tiende a seguir al
crecimiento, ms que viceversa (Roodman 2007b:19). Crecer, atrae ms ayuda
mientras que recibir ayuda no permite predecir que habr mayor crecimiento. A igual
conclusin llegaron Doucouliagos y Paldam (2006), pues al considerar el conjunto de
estudios y hacer una regresin simple entre la ayuda y el crecimiento con un retardo, sin
retardo y con un ao de avance, fue sta ltima (es decir la precedencia del crecimiento
sobre la ayuda) la nica combinacin que result significativa al 95% de confianza
(coeficiente de 0.039 con p-valor de 0.023 y 895 observaciones).
Como vemos, tanto la causalidad fsica como la estadstica nos aproximan a un
concepto blando de causalidad y operativo, pragmtico si se quiere. Tambin invitan a
que la construccin de conocimiento se haga sobre unidades ms pequeas y manejables
de ayuda, ms reales y no tanto sobre los nmeros generados de forma imprecisa y
agregada, tal como se ha hecho hasta ahora en los estudios macro de eficacia de la
ayuda.
La causalidad filosfica nos ayudar a detectar las posibles falacias que se construyen a
partir de las evidencias empricas que generan este tipo de estudios de eficacia macro.
Causalidad filosfica.
La categora de causa o causacin ha sido objeto de reflexin filosfica desde sus
orgenes15. Nuestra intencin no es hacer aqu un anlisis pormenorizado de la historia
de la filosofa en relacin a la causacin, sino aprovechar algunas de sus reflexiones
para intentar iluminar la cuestin de en qu sentido puede mantenerse o no la
proposicin de que la ayuda al desarrollo causa una reduccin de la pobreza.
La reflexin filosfica sobre la causa se ha desarrollado en torno a dos grandes aspectos.
Uno es sobre la causa original o primaria de todo lo que viene a ser (el tema de
creacin, emanacin, causa primordial, etc.) El otro es la causa en el sentido fsico,
sobre todo en la teora del movimiento. Si sobre el primer sentido se produjo la
14
124
Por espacio y por no tratarse de un texto filosfico omito las referencias bibliogrficas filosficas
originales.
125
que tiene en Hume a uno de sus mximos representantes. Para el filsofo ingls no
existe causacin, sino slo sucesiones de fenmenos con lo que no podemos llegar a
enunciar leyes predictivas. Lo universal y necesario slo se da entre ideas, pero nunca
entre hechos. Siglos ms tarde Cassirer recoge la tesis empirista afirmando que un
enunciado causal no dice ms que lo que ya se sabe, y que la causalidad no es ley, ni
determinacin, sino slo el punto de vista para poder hablar de leyes.
Vemos as que para los empiristas no tiene ningn sentido pretender sostener que la
ayuda causa reduccin de la pobreza, ya que ni puede medirse, ni experimentarse, ni
hay constancia de efectos, con lo que no puede ser la causa. La causa slo es un ente de
razn sin fundamento de realidad. La ayuda reduce la pobreza es una proposicin
inverificable y por tanto acientfica (si nos movemos en el extremo empirista de la teora
de la ciencia positivista del tipo de R. Carnap y el crculo de Viena).
Frente a los empiristas, los filsofos racionalistas equipararn causa a razn. Leibniz
enunciar el principio de no contradiccin por el que no puede mantenerse que A y noA se den al mismo tiempo, es decir un mismo efecto no puede ser causado y no causado
por una misma causa. Al principio de no contradiccin, aadir -en positivo- el de razn
suficiente: nada sucede sin razn suficiente, tanto a nivel lgico como ontolgico. Esta
yuxtaposicin obligaba a los racionalistas a defenderse de que para entender
racionalmente el efecto, ste deba estar incluido en la causa. Los ocasionalistas como
Algazel trataron de salir de la apora renunciando, en el fondo, al concepto de causa ya
que stas eran slo ocasiones de mostrarse.
Volvamos a nuestra analoga con la ayuda y la pobreza. Para los racionalistas, el efecto
observable (la reduccin de la pobreza) ya contena racionalmente su causa (la ayuda).
Esto nos conduce al optimismo volitivo de los defensores de la ayuda. Como quiero
que la ayuda siga existiendo porque la ayuda es buena (a priori), la reduccin de toda
pobreza tiene su origen en la ayuda. En este tipo de argumentacin podemos encontrar
muchos de los clichs y eslganes ligados, por ejemplo, a los Objetivos de Desarrollo
del Milenio. Puede parecer que la reduccin de la pobreza de 1990 a la mitad en 2015
slo es cuestin de aumentar la cuanta de los flujos de ayuda al desarrollo, sin dar
opcin a que ese efecto pueda originarse por muchas otras causas, como el respeto a
la propiedad privada, la reforma agraria, el desarrollo crediticio o una poltica fiscal
progresiva, por poner slo algunos ejemplos avalados por la historia econmica.
Kant fue el filsofo que trat de armonizar y sintetizar las visiones de empiristas y
racionalistas. Por un lado acept la inexistencia real de la causalidad, pero por otro lado
126
reconoci que sin una sucesin de causa-efecto no era posible la ciencia. Si bien la
causalidad no est en la realidad, no es una simple creencia fundada en el hbito (a lo
Hume). La causalidad es una categora del entendimiento que permite producir juicios.
Cuando los juicios son sintticos a priori, se enuncian leyes universales y necesarias que
son las cientficas. La relacin causa-efecto es un juicio hipottico-deductivo que slo
es aplicable al mundo fenomnico, no al noumnico. La ley cientfica procede de
acuerdo a la segunda analoga de la experiencia: hay fenmenos que se suceden en el
tiempo con el mismo e invariable orden.
Kant se distancia de los empiristas al creer que puede observarse si la reduccin de la
pobreza procede de la ayuda, pero se aleja de los racionalistas extremos al identificar
que en toda reduccin de pobreza est subsumida como causa la ayuda al desarrollo. A
conclusiones similares llegar un siglo ms tarde M. Bunge. Para l, la causa es una
produccin real (rechazo del empirismo), pero no admite el racionalismo por el que las
hiptesis causales son identificables bajo una determinacin estricta. Una crtica
puramente nihilista de la causalidad conduce, segn Bunge, al irracionalismo. Como
cualquier otra categora de determinacin, la causacin tiene un alcance operativo
limitado.
Bunge nos permite caminar en una va media entre la negacin de toda posible
afirmacin del efecto de la ayuda sobre la pobreza y la afirmacin de que la eficacia de
la ayuda sobre la reduccin de la pobreza slo puede mantenerse de forma racional sin
prueba emprica posible.
Para finalizar este recorrido por la historia de la filosofa, consideramos ahora la
aportacin de Bergson. El filsofo francs, insatisfecho con el racionalismo positivista
que prevalece a comienzos del siglo XX, expone tres sentidos diferentes de causalidad.
Una primera acepcin es la causalidad por impulsin. Por ejemplo la bola de billar al
chocar contra otra causa un cambio de movimiento. Es la acepcin de la causa fsica. En
ella la cantidad y cualidad del efecto (movimiento de la segunda bola) vara segn la
cantidad y cualidad de la causa (primera bola). Un segundo sentido es la causa por
disparo. Cuando una chispa hace estallar la plvora ya no opera una causalidad como la
anterior. Ahora ni la cantidad ni cualidad del efecto varan en funcin de la cantidad y
cualidad de la causa. El tercer tipo de causa es por desenvolvimiento. Por ejemplo, en la
distensin gradual de un resorte, la cantidad del efecto depende de la cantidad de su
causa, pero la causa no influye sobre la cualidad del efecto.
127
128
CONCLUSIONES.
129
En el trabajo hemos expuestos razones tcnicas por las que los trabajos empricos no
han ofrecido hasta ahora unos resultados convergentes a la cuestin de si la ayuda al
desarrollo queda estadsticamente asociada a incrementos del PIB per capita de los
pases receptores. Los problemas de causalidad reversible, de instrumentacin, de
colineariedad y autocorrelacin entre las variables, de sensibilidad de los resultados
hacia el periodo temporal elegido, los retardos seleccionados, el tamao muestral, el
tratamiento dado a los casos atpicos y, en fin, las variables omitidas, ofrecen soportes
razonables para entender la perplejidad a la que conducen los casi cien estudios
disponibles. La ideologa, tanto de los autores como de los organismos que financian los
estudios, y el sesgo de las publicaciones hacia mostrar resultados claros en una u otra
direccin, tambin ayuda a explicar la divergencia de respuestas a la pregunta sobre la
eficacia de la ayuda.
Adems hemos reflexionado sobre el concepto de causalidad, tanto desde una
dimensin fsica, como estadstica y filosfica. La causalidad fsica ayuda a no
permanecer en un positivismo extremo slo verificado en experimentos de mecnica
clsica. La mecnica cuntica no dispone de prueba emprica aislada de la existencia de
quarks, ni los filsofos de la ciencia logran hallar solucin a la cuestin del gato de
Schrdinger. Pero eso no les impide disponer de hiptesis falsables que hacen avanzar
su conocimiento, ni les conduce a afirmar caprichosamente que esas cuestiones no
sirven para nada.
La causalidad estadstica o causalidad de Granger, aplicada a la relacin entre el
crecimiento y la ayuda, ha ido ofreciendo resultados convergentes de que es el
crecimiento quien precede a la ayuda y no al revs. La ayuda comparte este rasgo con la
inversin directa extranjera, sobre todo en los pases ms grandes. Hasta que no
aparecen seales de dinamismo econmico no llegan los flujos financieros.
La reflexin filosfica en torno a la causalidad, conduce a poder sostener que hay varias
formas de causar un mismo efecto.
Si la correlacin emprica no es causalidad, el juicio valorativo agregado sobre la
eficacia de la ayuda, no debe venir de los estudios economtricos. stos deben ser una
fuente ms del conjunto de respuestas que pueden provenir de evaluaciones bajo
mltiples diseos y de contribuciones de otras ciencias sociales igual de importantes en
la eficacia de la ayuda como la poltica, la sociologa, la antropologa cultural...
Preguntas inconmensurables, exigen respuestas multidisciplinares y plurimetodolgicas.
El recorrido que queda pendiente para saber si la ayuda estimula el crecimiento,
130
aumenta la desigualdad y reduce la pobreza es, ciertamente largo. Ojal que tambin
vaya siendo esperanzador para los menos favorecidos de este mundo.
131
CAPTULO
4.
LA
EVALUACIN
DE
INTERVENCIONES
COOPERACIN PARA EL DESARROLLO: QU HAY QUE HACER?
DE
1. INTRODUCCIN.
Este captulo est dedicado al anlisis del marco terico de la evaluacin de
intervenciones de cooperacin al desarrollo que puedan realizar los diversos agentes,
tanto agencias y administraciones descentralizadas como las ONGD espaolas. Tiene
como objetivo presentar los elementos fundamentales para realizar el trabajo de la
evaluacin. Ms adelante se presentarn algunos modelos que estn llevndose a cabo
ya en evaluaciones, para terminar con el anlisis de la realidad espaola en esta materia
y proceder a obtener conclusiones y propuestas.
El recorrido de los captulos anteriores nos ha permitido conocer la dificultad intrnseca
a saber qu funciona y qu no en la ayuda al desarrollo. Los estudios de eficacia macro
han aportado una porcin de verdad, pero son insuficientes. Las evaluaciones micro
pueden ser el complemento idneo al generar conocimiento contextualizado y prctico.
El captulo se estructura en ocho epgrafes. Tras la presente introduccin, se define lo
que se entiende por evaluacin en el contexto de la cooperacin al desarrollo y se
explican los principales tipos de ella. Acto seguido, se exponen y comentan los criterios
comnmente aceptados para evaluar, as como los factores de desarrollo, que son el
contexto en el cual se realizar la evaluacin. En quinto lugar se explica cmo elaborar
o disear una evaluacin de un proyecto de desarrollo, aportando secuencialmente los
pasos a realizar. En el sexto epgrafe nos detenemos en las herramientas que habremos
de usar para obtener la informacin y analizarla. En el sptimo apartado, se expone el
"ciclo de la evaluacin" que nos aporta la visin integral del proceso continuo que
supone evaluar. En el octavo epgrafe se comentan algunas de las principales
consecuencias que tiene la decisin positiva de evaluar.
Con este captulo, realizaremos un acercamiento a la teora de la evaluacin de los
proyectos tratando de responder a la pregunta "qu hay que hacer" cuando nos
dispongamos a evaluar un proyecto o programa de cooperacin para el desarrollo.
Como gran parte del contenido puede encontrarse ya en la literatura, el valor principal
del captulo son los comentarios prcticos en torno a las distintas fases del ciclo de la
132
Para otros enfoques de evaluacin, distintos a los proyectos, como cooperacin tcnica, ayuda
alimentaria y de emergencia, sectorial, geogrfica, de pas, programas, o temticas, puede
consultarse la Metodologa de Evaluacin de la Cooperacin Espaola (MAE 1998a:105-122).
Para la evaluacin del enfoque sectorial y el apoyo presupuestario vase Castao y Larr (2005),
Lawson et al. (2003) y Lawson y Booth (2004).
133
humano. Por otra parte, los diversos intereses de los agentes involucrados podr
justificar el disenso y forzar la bsqueda del acuerdo para que sus recomendaciones
sean tiles y produzcan cambios.
Concretando ms el concepto de "evaluacin" para el contexto de la ejecucin de
proyectos de desarrollo, el Comit de Ayuda al Desarrollo (CAD 1995:178) aporta la
siguiente definicin:
"La evaluacin es una funcin que consiste en hacer una apreciacin tan
sistemtica y objetiva como sea posible, sobre un proyecto en curso o acabado,
un programa o un conjunto de lneas de accin, su concepcin, su realizacin y
sus resultados. Se trata de determinar la pertinencia de los objetivos y su grado
de realizacin, la eficiencia en cuanto al desarrollo, la eficacia, el impacto y la
viabilidad. Una evaluacin debe proporcionar unas informaciones crebles y
tiles, que permitan integrar las enseanzas sacadas en los mecanismos de
elaboracin de las decisiones, tanto de los pases de acogida como de los
donantes" 2.
Esta definicin operativa nos aporta informacin acerca de cuatro elementos sobre la
evaluacin, que hemos ido subrayando:
1. Las cualidades que debe tener la evaluacin: sistemtica y objetiva.
2. Los momentos que abarca la evaluacin: concepcin, realizacin y resultados. En
este sentido, se habla en la literatura de:
El subrayado es propio.
Por ejemplo Rubin (1995:33-34); MAE (1998a:42); Beaudoux (1992:145-146); Cohen y Franco
(1993:109-119); Pichardo (1997:177-180 y 289-358).
134
La misma idea la seala Chambers (1983) con su sugestivo ttulo: Putting the last, first.
135
SEGN EL MOMENTO:
Interna.
Mixta.
Externa.
Participativa.
Formativa.
de viabilidad.
Sumativa.
Intermedia, seguimiento y
control.
Final.
Ex post de impactos.
CONCEPTOS AFINES
AUDITORA.
METAEVALUACIN
RENDICIN DE CUENTAS
Una clasificacin complementaria es la del Manual de Gestin del MAEC (2007:27-33). Aqu
aportamos un gua valorativa y no slo descriptiva de cada tipo de evaluacin.
136
INCONVENIENTES
INTERNA
Ms barata.
La objetividad es ms costosa.
EXTERNA
Mayor coste.
MIXTA
Promedia el coste.
PARTICIPATIVA
Otra valoracin puede contrastarse en PICHARDO (1997) pp.170-175, que aade un cuarto tipo: la
autoevaluacin por los responsables directos de la ejecucin de las acciones.
VENTAJAS
137
INCONVENIENTES
Se promueve el autoaprendizaje.
138
139
La evaluacin final la entendemos aqu como la entrega final del proyecto a los
beneficiados, el anlisis de los primeros impactos y la redaccin de un informe final. En
l se deberan registrar las buenas, normales y malas prcticas, los xitos y fracasos as
como sus principales motivos y tratar de sistematizar los aprendizajes comunitarios para
todas las partes implicadas en el proyecto. Si el contenido tcnico de los tipos anteriores
les haca ms proclives a ser externos, la evaluacin final debe ser lo ms participativa
posible y atender tambin a posibles efectos inesperados y a impactos negativos o
colectivos perjudicados por la accin llevada a cabo. Debe recorrerse todo el ciclo
evaluativo, asegurndose de la utilidad y utilizacin de los informes finales, as como de
su debida difusin. La dimensin de control, ms acentuada en el proceso de
seguimiento, aqu puede entenderse como una rendicin final de cuentas, pero no debe
reducirse nicamente al control financiero-presupuestario, sino que la dimensin tcnica
de los aprendizajes surgidos en cada experiencia debe ser un insumo que genere
conocimientos cuyo mayor valor ser la validez interna aplicada a contextos muy
especficos.
Los impactos deben considerarse sobre todos implicados (stakeholders): los
beneficiarios o perjudicados directos e indirectos, la comunidad o zona ms amplia en la
que se ha ejecutado la accin, sobre la organizacin socia local y sobre la propia
ONGD, atendiendo a la actividad promovida (calidad del servicio ofrecido, estructura
Para casos particulares y sobre todo en lo referente al control financiero del gasto, pueden pedirse
informes con periodicidad menor.
140
10
Para un desarrollo conceptual y tcnico de las evaluaciones de impacto, sobre todo bajo
metodologa experimental o aleatorizada, vase Larr (2007b).
11
Para desarrollar esta tipologa: Scriven (1967; 1988); Stufflebeam y Shinkfield (1993:345-346);
Dale (1998:30-33). Esta tipologa no se aborda en el Manual del MAEC (2007).
12
141
13
Guba y Lincoln interrelacionan las variables mrito y valor con formativa y sumativa, dando lugar
a: evaluaciones formativas del mrito (establecer el valor [worth] intrnseco del proyecto con el fin
de mejorarlo); evaluaciones formativas del valor (establecer el valor extrnseco del proyecto para
incrementarlo ajustndolo al contexto concreto donde se lleva a cabo); evaluaciones sumativas del
mrito (establecer el valor intrnseco de la calidad del proyecto y juzgar si se encuentra por debajo,
por encima o en el estndar de calidad normalizado); evaluaciones sumativas del valor (establecer
su valor extrnseco, dado su contexto particular de aplicacin), Guba y Lincoln (1989:189-190).
Estas relaciones se comentarn en el siguiente captulo.
14
Vanse MAE (1998 a-d; 1999 a-b; 2000 a-b; 2001 a-c; 2002, 2003 a-d; 2004 a; 2005 a-d) y
MAEC (2007 b).
142
SUMATIVA
terminar el proyecto.
Es ms participativa.
Es ms tcnica.
servicio.
servicio ofertado.
Fuera de las categoras de tipos de evaluacin, el cuadro 4.1. present como conceptos
afines los de la auditora, la metaevaluacin y los informes de rendicin de cuentas.
Presentamos ahora sus rasgos bsicos para no confundirlos con tipos de evaluacin.
143
15
Por ejemplo en el artculo de Nsang (1999:176) se habla como ltima fase de la evaluacin en la
dinmica de la AECI, la revisin del informe final realizado por la ONGD entendida como
verificacin financiero-contable y administrativa y la auditora, referida a la verificacin de la
documentacin soporte de todo el proyecto subvencionado, entendiendo por tal tambin aquella
referida a partes del proyecto que no hayan sido objeto de subvencin por la SECIPI. Debe
haber quedado claro ya, que esta investigacin no entiende la evaluacin como auditora, que
nunca hemos contemplado estas actividades de control de la calidad de justificantes a lo largo de
este estudio.
16
17
Expansin (1990:49).
144
18
19
145
20
21
En el mismo sentido se expresa el Ministerio de Asuntos Exteriores: "...la evaluacin no debe ser
entendida como una funcin de supervisin y control, aunque desde alguna perspectiva lo sea,
sino como una herramienta til para aumentar la construccin del ``saber hacer tcnico y
poltico, para facilitar el proceso de toma de decisiones, para mejorar la eficiencia de las
actuaciones y para asegurar la transparencia del sistema". MAE (1998a:140-141).
146
Pero quiz sea inevitable una dosis de sentimiento de "control" en la evaluacin, por
pequea que sea. Este puede canalizarse positivamente a base de dilogo cercano entre
los agentes implicados y tratando de que todos participen en el proceso evaluador,
dando iniciativa y protagonismo a los propios beneficiarios de la accin. Ellos sern
quienes puedan aportar una informacin insustituible de cara a una evaluacin de
calidad. Ellos van a ser los protagonistas de su propio proceso de desarrollo y ellos
mismos deben evaluar dicho proceso. Conviene aqu recordar la mxima de C. Ake
(1996:76): "el desarrollo es una experiencia vivida, nunca una experiencia recibida".
En definitiva, y en relacin a la prctica de la evaluacin, el contenido del trmino
"cooperacin" tiene que lograr su plena comprensin.
Podemos resumir, con la Metodologa del Ministerio de Asuntos Exteriores, los
principios bsicos de toda evaluacin, as como las principales dificultades que se
presentan de partida.
Por lo que se refiere a los principios bsicos de la evaluacin de proyectos
destacamos los siguientes22:
1. Equilibrio entre las distintas subjetividades que aportan todos los agentes implicados
en el proyecto, sus precomprensiones, temperamentos y cualidades, as como la dosis de
objetividad que nos ofrecen los hechos, los datos estadsticos y contables. Se trata de
lograr una credibilidad en la informacin aportada, que puede ganar -o no- con la
"independencia" que aporten evaluadores externos. Pero no creemos que la sola
externalidad de la evaluacin garantice la independencia23. El consultor o evaluador
"externo" no es epistemolgicamente neutro. Nadie es "neutral" ante los hechos, como
muestran las modernas antropologas y teoras del conocimiento24. Pero esto no debe
llevar a un solipsismo cartesiano o a un subjetivismo aportico, sino que tan slo se
quiere llamar la atencin sobre la necesidad de actitudes humanas bsicas que debe
22
Pichardo (1997:167-168), menciona los siguientes, que consideramos subsumidos de alguna forma
en los que aqu se ofrecen: validez, confiabilidad, practicabilidad, objetividad y oportunidad.
23
24
147
25
Sobre las preguntas de cada agente involucrado y cmo conciliarlas, vase Touza (2007).
26
Al menos los resmenes de todas las evaluaciones realizadas. As lo lleva realizando la Oficina de
Planificacin y Evaluacin (OPE) de la SECIPI, desde 1998 que comenz su actividad evaluadora.
Pueden consultarse al respecto los formatos y contenido de estos informes en la web del Ministerio
de Asuntos Exteriores y Cooperacin. Un estudio antecedente del sistema pblico de evaluaciones
lo realiz Gudio (1996). Para una valoracin de los primeros informes y propuestas de futuro,
puede consultarse Gudio (1999).
148
149
como hacen las empresas en los mercados competitivos, aunque sin perder su identidad
propia de organizaciones sin fines de lucro. Si se decide evaluar, hay que aceptar que
habr que cambiar. Y para cambiar, hay que querer cambiar y aceptar con humildad que
hay oportunidades de mejora. Sin autocrtica (tanto dentro de las administraciones como
de las ONGD) las reivindicaciones al aumento de la cuanta de los flujos de ayuda
queda bajo sospecha.
5. Tambin ser preciso formar al personal, tanto interno de las administraciones y
ONGD que vaya a ejercer como promotor o evaluador interno, como a las
organizaciones socias y a los beneficiarios o participantes en el proyecto que tambin
vayan a intervenir. Es necesario dominar algunas herramientas participativas,
fundamentos y capacidades de trabajo en equipo, sociologa, psicologa y dinmicas de
grupo, nociones de psicologa social, uso de herramientas estadsticas y economtricas,
trabajo con paquetes informticos, etc.
150
los criterios, se juega la calidad de una evaluacin, pues de las respuestas surgidas por
los criterios, nacern las recomendaciones tiles que introduzcan los cambios fruto del
aprendizaje obtenido. Asumimos aqu como vlidos los criterios de evaluacin que son
comunes en la literatura sobre el tema27. Para facilitar el dilogo y la homogeneizacin,
adoptamos tambin la notacin (y traduccin) que hace la Metodologa de Evaluacin
de la Cooperacin Espaola. Los cinco criterios habituales en las evaluaciones de
intervenciones de cooperacin para el desarrollo son: la eficacia, la eficiencia, la
pertinencia, el impacto y la viabilidad. A continuacin los defino y comento con cierto
detalle.
1. EFICACIA: es la medida del alcance del objetivo (especfico), sin ponderar el coste
en que se incurri para lograrlo. Responde a la pregunta: se logr el objetivo?
Lgicamente, la eficacia est directamente relacionada con la claridad y precisin con
que se defini el objetivo especfico. Este debe ser preciso, verificable y realista. Si el
indicador estuvo bien definido y hay buenos informes de seguimiento, ser un criterio
sencillo de evaluar.
En forma aritmtica, la podemos expresar de la siguiente manera:
Metas logradas x Tiempo planeado
Eficacia =
Metas programadas x Tiempo real invertido
El indicador es la expresin transformada de la comparacin de las metas realmente
logradas (Mr) respecto al tiempo realmente invertido (Tr) entre las metas programadas
(Mp) respecto al tiempo programado (Tp). Si el cociente es superior a la unidad,
27
La literatura al respecto es muy amplia, siendo tratados por cualquier manual de evaluacin. Por
ejemplo Beaudoux (1992:153-157); Cohen y Franco (1993:102-108); CAD (1995); Rubin
(1995:38-39); NORAD (1997:38-49); MAE (1998a:45-54); Dale (1998:41-51). El Manual de
Gestin del MAEC (2007:56-60) extiende los cinco criterios clsicos que aqu vamos a
comentar aadiendo los de coherencia, apropiacin, alineamiento, armonizacin, participacin y
cobertura. Si bien este mayor desglose recoge los de la Declaracin de Pars (ver captulo 6), tiene
la desventaja de provocar duplicidades en el anlisis evaluativo. Por ejemplo, la apropiacin, la
coherencia, el alineamiento y la participacin pueden juzgarse vlidamente dentro de un enfoque
amplio de la pertinencia. Una postura que apoya este enfoque es la de Feinstein (2007) que aboga
por limitarse a los criterios de la eficacia, eficiencia y pertinencia, subsumiendo el impacto y la
sostenibilidad en una eficacia de largo plazo y la coherencia en la pertinencia.
151
diremos que el proyecto fue ms que eficaz. Si es igual a la unidad, fue eficaz. Y si es
inferior a uno, que fue ineficaz (Cohen y Franco 1993:103)28.
El principal problema para valorar la eficacia puede surgir en proyectos que no tengan
un solo objetivo especfico, o que ste haya sido descrito de forma muy general y
confusa. Si hay varios objetivos, habr que tratar de unificarlos. Tambin puede
analizarse si realmente son objetivos los que se sealaron en la formulacin, o son
medios, actividades o resultados de la accin emprendida29.
Cuando la evaluacin revele que el objetivo no se cumpli, deber sealarse la causa del
fracaso: una mala formulacin del proyecto, existencia de problemas a lo largo de su
ejecucin o factores imprevistos ajenos a la propia actuacin.
Probablemente aporta ms valor aadido un estudio detallado de las causas de la
eficacia o no de la intervencin, que su simple clculo o determinacin. En otras
palabras, a menudo los informes finales ya reportan si se cumplieron las metas en el
tiempo previsto o no. Lo que aade una evaluacin, sobre todo de forma ex post, es
una explicacin del por qu se ha sido eficaz o ineficaz. Es diferente una eficacia por
una simple buena programacin y sencillez de los productos previstos (por ejemplo, se
logr construir un pozo de agua), que conocer si la razn fundamental fue que se
involucr y motiv exitosamente a los involucrados, si el apoyo municipal fue
determinante o no, etc. Esta informacin causal no es preceptiva en los informes finales
que suelen estar ms orientados a slo informar de los hechos acaecidos y registrar un
control contable y temporal.
2. EFICIENCIA: es la medida del logro de los resultados en relacin con los costes o
"insumos" comprometidos en el proyecto. Es decir, con la eficiencia buscamos
maximizar los beneficios aportados por el proyecto, minimizando recursos financieros,
materiales, tcnicos o humanos. De alguna forma, es la "productividad" de los factores
empleados en el proyecto.
28
152
29
Para una correcta formulacin de todas estas fases puede consultarse Alcalde (2007).
153
154
afectados por el proyecto, sino el entorno social. Sealaremos aqu los efectos directos e
indirectos, previstos o imprevistos, positivos o negativos. Y no slo los econmicos,
sino los efectos sociales, tcnico-educativos, polticos o de cambios de relaciones de
poder, medioambientales o ecolgicos. La consideracin temporal del impacto es el
medio o largo plazo. Nos preguntaremos ahora: qu ha cambiado, quin ha cambiado,
hacia dnde lo hizo y por qu?
El principal problema que nos plantea la evaluacin del impacto de los proyectos es la
causalidad o atribucin en los procesos de desarrollo. Cmo asegurarse que este efecto
fue realmente fruto de esta accin y no de otra? En los procesos de desarrollo
econmico todo est bastante interrelacionado, pues no en vano son procesos humanos,
no susceptibles de anlisis "de laboratorio" en los que la separacin de los elementos
ayude al estudio de su relacin. Tanto el desarrollo econmico del pas, en su visin
ms
macroeconmica,
como
los
proyectos
puntuales
realizados
(aspecto
30
Para una mayor precisin sobre el concepto del impacto y la mejor forma de resolver el problema
de la atribucin, vase Larr (2007b).
155
156
sido suficientemente asumido por los beneficiarios, tal que puedan mantenerse sus
beneficios sin la ayuda exterior.
En la consideracin de este criterio se ha avanzado bastante, pues fueron muy
frustrantes las acciones que se realizaron sin tenerlo en cuenta, por excesivo
protagonismo unilateral de los "ayudantes" y menosprecio de las capacidades de los
"ayudados".
Lo relevante en este caso es analizar la capacitacin que debe llevar implcita todo
proyecto, de forma que se asegure su continuidad una vez retirada la ayuda. Adems,
sobre la capacidad de viabilidad de los proyectos inciden de forma directa los factores
de desarrollo, que a continuacin se exponen.
La propuesta metodolgica del MAE (1998:158-161 y 253-256) incluye un formato
base para apreciar los criterios de evaluacin, que es muy operativo e interesante, y que
podra asumirse plenamente y sin dificultad por los agentes involucrados.
Los factores de desarrollo que influyen en la sostenibilidad.
Si un proyecto de cooperacin al desarrollo es el "texto" del objetivo que pretendemos
conseguir, los factores de desarrollo son el "contexto" de este complejo proceso.
A partir de una investigacin realizada por la OCDE (1989), tanto los manuales de la
agencia noruega de cooperacin (NORAD), como el de la cooperacin oficial espaola,
sintetizan estos factores de desarrollo en un grupo de siete, que vamos a analizar a
continuacin.
Quiz sea aqu donde ms claramente se aprecie que el desarrollo de los pueblos es todo
un proceso, troquelado por muchos factores y, teniendo en cuenta que el desarrollo es
algo pluridisciplinar, vamos a ver cmo inciden los aspectos econmicos, pero tambin
los polticos, culturales, sociales o medioambientales. Esto refuerza la idea de que la
evaluacin de estos procesos debe ser tambin un trabajo multidisciplinar, y que los
miembros del equipo evaluador no pueden centrarse exclusivamente en las dimensiones
econmicas del mismo.
157
Los factores de desarrollo que se consideran son: i) las polticas de apoyo, ii) los
aspectos institucionales, iii) los aspectos socioculturales, iv) el enfoque de gnero, v) los
factores tecnolgicos, vi) los factores medioambientales y vii) los factores econmicofinancieros. Vemos cada uno con ms detalle.
Las polticas de apoyo.
Se considera aqu la importancia del contexto poltico en el que se ha desarrollado el
proyecto, si ste se formul en coherencia con las polticas que est llevando a cabo el
pas receptor, o bien se opt por una accin contrarrestante y anticclica31. Tambin es
relevante hacer este anlisis respecto a la poltica de desarrollo llevada por el pas
donante y por la propia ONGD que realiza el proyecto.
Hay que tener en cuenta que la poltica de un pas donante -por ejemplo, la exterior-,
puede cambiar a lo largo del desarrollo del proyecto y afectar directamente al proyecto
en ejecucin.
Conviene considerar las polticas en todos los mbitos geogrficos, desde el
internacional y nacional, hasta el regional, comarcal y local. Para la mayora de los
proyectos de las ONGD, el nivel local ser el ms relevante, por la inmediatez al terreno
en el que se suele realizar, y la relacin cercana y directa que hay en el trabajo con la
contraparte. Pero el resto de los niveles sern muy determinantes a la hora de evaluar los
impactos y la viabilidad del proyecto. Ser muy distinto si el proyecto est enmarcado
en un conjunto de medidas gubernamentales favorables a su implantacin y desarrollo,
que si no lo est. Tambin es posible que el proyecto se haya ideado precisamente como
complemento a medidas que no son tomadas por las autoridades respectivas. En este
caso habr que cuidar las mutuas relaciones polticas, as como la capacidad de riesgo y
accin autnoma sin contar con el respaldo pblico, por parte de los ejecutores y
beneficiarios del proyecto. La viabilidad del proyecto puede verse comprometida por
esta falta de apoyo poltico.
31
Para evidencias empricas sobre el carcter procclico de la AOD y su volatilidad, vase Gupta et
al.(2006) y Bulir & Hamann (2001, 2003, 2006).
158
Por ltimo, es necesario tener en cuenta las acciones de desarrollo que estn llevando a
cabo otros organismos tanto nacionales como internacionales en esa misma regin.
Habr que coordinar bien las acciones y evaluaciones, para no interferir los procesos y
tratar que cada accin sea complemento y no competencia de la otra.
Los aspectos institucionales.
Se analizan aqu las instituciones existentes, sus prioridades, el personal que las
compone, el nivel de participacin de los beneficiarios y la capacidad administrativa
que exista en la zona de ejecucin del proyecto.
Las instituciones tambin pueden determinar el xito o fracaso de un proyecto. El apoyo
institucional es bsico, debido a las pocas instituciones que suele haber en las zonas
subdesarrolladas, con escaso nivel de eficiencia, excesiva burocracia y abundantes casos
de corrupcin32.
Habr que analizar si el proyecto ejecutado tuvo en cuenta las instituciones existentes, si
stas contaban con personal estable y suficientemente cualificado y motivado para
llevar adelante el proyecto, si fue necesario capacitar previamente al personal o a lo
largo de la ejecucin del proyecto, si fue necesario crear nuevas instituciones, o si el
proyecto introdujo cambios fundamentales y activos en la divisin del trabajo de la
poblacin beneficiaria.
Puede ocurrir que el proyecto ejecutado necesite tanto apoyo institucional para ser
operativo que se concluya con que ha creado ms necesidades de lo que ha aportado. O
que no fue posible llevarlo a cabo porque el tamao de las inversiones y obras
planificadas superaba inevitablemente la capacidad de gestin del personal en la zona, y
tambin de los beneficiarios. En este caso, habr que ir ms despacio hasta poder dar
respuesta a la necesidad planteada y crear un apoyo institucional mayor.
El manual de la Agencia de Cooperacin noruega (NORAD) incide sobre dos conjuntos
de instituciones: en primer lugar, las relaciones entre sector pblico y privado y la
32
Sobre la relacin entre corrupcin y ayuda, vase Alcalde y Larr (2007 a,b).
159
33
160
161
El enfoque de gnero.
Quiz sea ste uno de los factores de desarrollo en los que ms est abundando ahora la
literatura sobre el tema que nos ocupa34. En relacin con lo visto anteriormente en los
factores socioculturales, el papel de la mujer en las tareas del desarrollo econmico se
ha revelado como una de las claves insustituibles del proceso.
34
Por ejemplo, Boserup (1993); Santos y Caballero (1994); Hming (1997); PNUD (1995);
CONGDE (1995a, 1998e); MAE (1998c) que traduce y asume para Espaa las Directrices del
CAD (1998c) en esta materia; Cruz (1998); el Reglamento comunitario CONSEJO DE LA
UNIN EUROPEA (1998); Lpez Mndez y Alcalde (1999); Sierra (2000); Lpez Mndez y
Sierra (2001); Dosal (2003); Cirujano y Cirujano (2004); MAE (2004 Y 2004b); Cirujano (2005);
Espinosa (2007).
162
35
36
37
163
38
Ver por ejemplo, Sala-i-Martin (1994); Cuadrado Roura (1996) cap.1; Martin (1997a,b) cap.2;
Rengifo (1999); o Rodrguez Siz y Sotelo (1999), Easterly (2001), Weil (2006) caps. 8 y 9.
164
39
165
Las intervenciones de desarrollo que realicen las agencias y ONGD espaolas debern
tener esta dimensin bien incorporada, en lnea con la estrategia de medio ambiente
(MAE 2002b). A la hora de la evaluacin, deberemos analizar si el proyecto condujo a
cambios considerables -quiz irreversibles- en el patrimonio ecolgico local, si los
posibles cambios introducidos en las artes agrcolas y pesqueras, en las actividades
industriales o en la prestacin de servicios han trado beneficios respetuosos con el
ecosistema local, regional, nacional e internacional. La desaparicin de especies
166
autctonas exclusivas en ese medio pueden ser impactos indirectos que afecten en el
nivel mundial, no slo local o comunitario.
A nuestro entender, no deberan faltar los impactos sobre la salud de la poblacin, sobre
su cultura y organizacin social.
Los actuales problemas medioambientales ms agudos debern ser vigilados con
especial eficacia, como pueden ser el mantenimiento de la biodiversidad, la
contaminacin atmosfrica y de aguas (efecto invernadero, cambio climtico, capa de
ozono, calentamiento terrestre, etc.), la desertizacin, el mantenimiento de selvas y
bosques pluviales tropicales, la dimensin costera, paisajstica y cultural para grupos
tnicos ms vulnerables, etc.
Como con los factores tecnolgicos, tambin aqu deberemos elegir la accin ms
apropiada y podramos hablar de "proyecto ecolgicamente apropiado" o inapropiado,
segn las valoraciones autctonas e internacionales. Para llevar a cabo todos estos
anlisis se han desarrollado buenos indicadores por parte de organismos
internacionales40.
Los factores econmico-financieros.
Consideramos aqu la capacidad que tendr la poblacin beneficiada por un proyecto
para mantener las prestaciones recibidas de una forma autnoma, una vez terminada la
aportacin financiera de las administraciones y las ONGD.
Esta "viabilidad econmica" podr ser mantenida por fuentes internas a la propia
poblacin (fondos generados por la venta de productos o prestaciones de servicios que
ha generado el propio proyecto), o por fuentes externas a ella (prstamos locales, otros
donantes, etc.). Conviene recordar que en este anlisis deber considerarse la
depreciacin inherente a los recursos que se han generado durante el proyecto, y
calcular los costes de mantenimiento y renovacin de los equipos. Lograr una
40
Ver por ejemplo los 21 indicadores medioambientales que ofrece la Comisin Europea, a partir del
"Libro Azul" de Naciones Unidas de agosto de 1996, en: EUROSTAT (1998).
167
financiacin continua y regular para estos costes ser un buen indicador de la viabilidad
financiera de la intervencin.
Ms adelante describiremos las herramientas ms utilizadas en el anlisis de este factor
de desarrollo, que son los anlisis coste-beneficio, coste-eficacia y coste utilidad, y los
problemas tcnicos que stos plantean, mxime en el contexto del tipo de proyectos que
suelen financiar las ONGD espaolas.
Como sntesis, hemos visto en este apartado los siete factores que ms inciden en el
proceso de desarrollo de los pueblos y cmo deben ser tenidos en cuenta tanto en la
definicin y aprobacin de los proyectos, como en su evaluacin. El informe de
evaluacin que se redacte debera contar con comentarios -aunque sean sucintos y ms o
menos extensos en cada apartado, segn el caso- sobre cada uno de los siete. Estos
comentarios sern una buena base para las conclusiones y recomendaciones finales, que
son la informacin que buscamos con la evaluacin.
A continuacin vamos a desarrollar un comentario ms reflexivo y crtico sobre los
criterios de evaluacin, a la hora de su aplicacin prctica.
Comentario sobre los criterios de evaluacin.
La eficacia probablemente es el criterio ms plausible de realizar, ms sencillo, al
limitarse a contrastar la situacin antes del proyecto o programa y despus de concluida
la intervencin. La formulacin bajo el enfoque del marco lgico lo facilita. Pero quiz
tambin resulte la informacin menos valiosa. Si existe un seguimiento ordinario de la
accin, tanto la Administracin como la ONGD pueden tener una idea bastante exacta
de los resultados o productos del proyecto. Evaluar la eficacia es fcil, no demasiado
costoso, pero quiz sea demasiado evidente para resultar relevante. Por ejemplo,
conocer el nmero de capacitaciones impartidas o las microempresas creadas gracias a
un proyecto, no informa nada sobre su tasa de supervivencia ni de si realmente se logra
aumentar los ingresos familiares y salir de la pobreza.
Como ya se ha comentado, el problema se centra en la formulacin de los objetivos del
proyecto, tanto el general como el especfico, teniendo en cuenta de que no deben
confundirse objetivos con acciones o resultados. Con objetivos bien definidos, concretos
168
41
Hipottica, por la imposibilidad actual de realizar estudios comparativos ante la ausencia de datos.
169
170
171
operandi cooperativo habitual es encontrar mayor poder para transformar las realidades
de pobreza en oportunidades de desarrollo para la poblacin.
Otra cuestin relevante respecto a la eficiencia de las ONGD es que cuentan con una
prensa y opinin pblica de tendencia favorable hacia sus acciones. Amparndose en los
valores que dicen representar, pueden sentir la tentacin de no medir su eficiencia, de no
tener que probar nada a nadie. En este sentido, seran deseables estudios comparativos
de eficiencia entre proyectos gubernamentales y no gubernamentales, que hoy en da no
abundan.
Las consecuencias de la eficiencia son tambin problemticas. Segn la eficiencia
econmica, dada una escasez de recursos para financiar proyectos (oferta limitada), con
una demanda de necesidades muy abundante, la racionalidad econmica primara los
proyectos de las contrapartes (pases, organizaciones locales, poblacin beneficiaria)
que fueran ms eficientes. Pero quiz stos lo son porque gozaron de oportunidades que
los menos eficientes an no han disfrutado. El dilema es serio. Si las acciones de
cooperacin se dirigen a paliar la pobreza y miseria de personas y pases menos
avanzados, incluso si las ONGD eligen a los menos favorecidos de entre los pobres,
no actan econmicamente de forma irracional, ineficientemente? Las consecuencias
seran apoyar proyectos que benefician a capas de poblacin medias que pueden
prometer una gestin ms eficiente de los recursos. Pero a costa de dejar insatisfechas
las necesidades ms bsicas de los menos eficientes?
La ciencia econmica aporta los instrumentos del anlisis coste beneficio, coste
efectividad y coste utilidad para apreciar eficiencia. Son herramientas tiles para
cuantificar la eficiencia y para objetivar los juicios. Pero puede que no sean los nicos
ni ltimos criterios de valoracin.
Por ltimo, tampoco hay que desechar completamente la posibilidad de realizar juicios
rigurosos de eficiencia entre proyectos y programas. Por ejemplo, intervenciones
dirigidas a mejorar la calidad educativa pueden ser perfectamente comparables al
disponer de exmenes estandarizados sobre capacidades de lengua y matemticas. Las
diferencias en las formas de lograr el aumento de la calidad educativa pueden ser
enormes. Por ejemplo, en Duflo y Kremer (2003) se compara la eficiencia de lograr un
172
173
174
terreno tras varios aos de ejecucin, si no se tiene una presencia continuada con la
contraparte local, puede resultar desalentador.
La deteccin de los mecanismos o factores concretos que hacen viable la continuidad
del proyecto es ms relevante que el simple juicio afirmativo o negativo de si sus
efectos continan o no.
El quinto y ltimo criterio es el impacto. Su importancia queda manifiesta al considerar
que ha dado nombre al tipo de evaluacin cuyo objetivo fundamental es descubrir y
describirlos: la evaluacin de impacto, ms propiamente de impactos.
La dificultad de la misin es considerable debido a su amplitud. Se trata de describir y
cuantificar todos los impactos o efectos que la intervencin ha provocado: directos e
indirectos, deseados e indeseados, previstos e imprevistos42. Y sobre un conjunto tan
amplio de variables como el medio ambiente, los impactos polticos, culturales,
econmicos, comunitarios, sociales o de gnero.
La valoracin de los impactos aparece como lo ms costoso, largo y complejo de todo el
proceso evaluador, pero tambin lo ms til. Aporta la informacin ms relevante para
tomar decisiones, para acumular aprendizajes y buenas prcticas. En definitiva, es el
proceso de evaluacin ms puro.
Una buena evaluacin de impacto debe permitir a la ONGD obtener sinergias y
conocimientos sobre la validez externa de sus proyectos, de sus fines, medios,
metodologas, tiempos y actores.
Tambin debe permitir obtener un juicio sobre la calidad global de la actuacin de la
ONGD como organizacin en su conjunto. Sobre su trabajo, sus productos y la
correlacin con su filosofa, credo y cultura de desarrollo.
42
Puede resultar iluminadora la distincin de Fowler (1997) entre: resultados directos e inmediatos
(ouputs), que miden el esfuerzo de la intervencin y son identificables con mayor precisin que los
resultados finales (outcomes) referidos a la eficacia de la accin y el empleo de los outputs y
produccin sostenida de los beneficios. Estos pueden esconderse bajo apariencias sutiles. Por
ltimo, los impactos (impacts) miden el cambio o diferencia respecto a la situacin problemtica
175
originaria. Aqu los factores externos y el contexto juegan un papel de creciente importancia. Se
amplan estas consideraciones conceptuales en Larr (2007b).
176
pobres no son tan distintos y los factores de ayuda, adaptados a los contextos, se pueden
aprender y reproducir. Pero lo importante aqu es que para que haya transferencia de lo
que funciona o no, lo primero que hay que hacer es evaluar con constancia y rigor.
Otro gran problema de la evaluacin de impacto, quiz el mayor, es el principio de la
atribucin de la causalidad. Los efectos no son aislables en los proyectos de desarrollo,
luego establecer correlaciones lineales que sin ser causales- establezcan relacin
estadstica, es atrevido como se ha expuesto de forma extensa en el captulo segundo,
pero no imposible.
La suposicin de que el resto de las variables intervinientes permanece constante
excepto sobre la que se hace la regresin, parece una simplificacin excesiva, slo
justificable por la informacin aportada. Pero de ah a establecer procesos lineales de
causa-efecto, nos parece un salto gratuito43.
Ante este panorama, una orientacin til puede ser la de tratar de detectar
catalizadores de los procesos de desarrollo, ms que trabajar sobre modelos
uniecuacionales. Ms que causalidades, proponemos detectar procesos exitosos.
Volviendo al ejemplo de la construccin de viviendas utilizado en el criterio de
eficiencia, puede ocurrir que no se sepa si se logr llevar a buen trmino el proyecto
porque la poblacin estuvo bien motivada, acompaada y liderada (cmo medirlo?).
Pero quiz sea til (y menos cientfico?) detectar que cuantas veces se cont con un
lder local que supo motivar a los beneficiarios y logr que lo asumieran como propio,
el impacto del proyecto fue positivo y acelerado respecto al caso contrario. La suma de
estudios de impacto que arrojan este diagnstico puede conducir por inferencia de
43
177
44
178
4. EL DISEO DE LA EVALUACIN.
Tratamos ahora de describir la evaluacin paso a paso45. Recordemos que queremos
elaborar un trabajo que, mediante la prctica de la intersubjetividad, resulte creble, til
y transparente para todos. Qu pasos debern darse para realizar un trabajo de
suficiente calidad? Vamos a presentar un proceso en seis fases: decidir evaluar,
seleccionar el objetivo de la evaluacin y los trminos de referencia, formar el equipo
evaluador, seleccionar indicadores y recoger los datos, analizar la informacin, y por
ltimo, explotar la informacin obtenida mediante su presentacin, difusin y prctica
de las conclusiones y recomendaciones. Vemoslas con detalle.
4.1.
DECIDIR EVALUAR.
45
Este es un aspecto que puede encontrarse en la mayora de los manuales. Entre muchos otros, y
por orden cronolgico, pueden ser de utilidad Fink y Kosekoff (1978); Fitz-Gibbon y Morris
(1987a); Herman et al. (1987); Stecher y Davis (1987); Rossi y Freeman (1989); Casley y Kumar
(1990a); Alvira (1991); Cohen y Franco (1993); Rubin (1995); Amezcua y Jimnez Lara (1996);
Pichardo (1997); NORAD (1997); MAE (1998a); Weiss (1972, 1998); Roche (2004); MAEC
(2007) ofrecen sus propios diseos para implantar una evaluacin, todos ellos coincidentes en los
elementos fundamentales que debe tener.
46
He tratado ya esta cuestin en Larr (2002). Aqu sigo y amplio lo expuesto en ese artculo.
179
47
El propio Riddell cita la obra de Edwards y Hulme (1996:260), en la que se mantiene que: "la
mayora de las ONGs no se sienten afectadas de ningn modo por las cuestiones de rendicin de
cuentas (accountability)" (Riddell 1998:2).
180
ahora agua potable y antes no, si dispone de una escuela o no. No hace falta
"evaluar" artificialmente las acciones de desarrollo, porque se autolegitiman, y
cada proyecto es nico en el espacio y el tiempo. Al no poderse volver a repetir
esas mismas condiciones, no tiene sentido evaluar, pues ninguna accin es
reproducible exactamente a como se formul en una ocasin. As, no se pueden
establecer relaciones biunvocas entre proyectos y la validez externa de ellos es
cero. Cada uno es nico e irrepetible.
181
muchos aos. Por ejemplo, educar es un proceso que dura toda la vida y no
tiene sentido hacer una evaluacin en un momento dado del tiempo porque no
va a decir nada de si los estudiantes seguirn pobres o no al finalizar unos
estudios. Lo importante es construir procesos, no medir resultados. Se
contraponen as dos tipos evaluaciones la de procesos y la de resultadosinvalidando las dos48.
Quiz este ltimo argumento sea el nuclear sobre las dificultades para decidir evaluar.
Riddell (1998:10), considera que aqul viene muy determinado por el auge que tuvo el
48
182
49
Algo que en Espaa, por cierto, se ignora a la luz de los constantes cambios legislativos en
educacin. Eso s, sin ninguna evaluacin integral y en profundidad sobre sus resultados.
183
En segundo lugar, el slo anlisis coste-eficacia tiende a desaconsejar las acciones con
riesgo, que darn resultados ms inciertos y costes ms altos. Pero, no son estas las
cualidades ms comunes en los contextos donde actan los agentes de desarrollo:
riesgo, incertidumbre y altos costes comparativos?
En tercer lugar, este enfoque parece contrario a la filosofa de la capacitacin y asuncin
de poder por parte de los propios protagonistas de su desarrollo, el llamado enfoque de
empoderamiento (empowerment). Ms bien, parece alentarse un enfoque dirigido, que
minimice los insumos, la participacin de la poblacin o la calidad de relacin entre
donante y beneficiario, que constituya un autntico acuerdo de asociacin
(partenariado).
Por ltimo, indirectamente se estara animando a alejarse a las agencias y ONGD del
contacto con los ms pobres, ya que por su propia condicin (no pueden pagar), los
riesgos y costes de las acciones con ellos sern comparativamente mayores y las
perspectivas de lograr una sostenibilidad financiera menores. En definitiva, las ONGD
trabajan con los estratos de poblacin en los que la relacin mercantil habitual no lo
hace. Esta es parte de la identidad de las ONGD. Se arriesgan a prestar, formar y ayudar
a aqullos que no participan en igualdad de oportunidades en el mercado y por tanto su
"eficacia" est recortada por esta desigualdad. No podemos juzgar exclusivamente por
su rentabilidad econmica a una donacin. La eficiencia econmica no puede ser el
criterio prioritario de seleccin. Si lo es, dejemos actuar a las empresas pues ese es su
campo ms propio. La paradoja del desarrollo que trata de impulsar la ayuda es que la
rentabilidad es baja (por poblacin, zona y contexto pisco-social).
Ahora bien, todas estas implicaciones no deben anular en absoluto la exigencia de
responsabilidad, utilidad y transparencia de las acciones de las administraciones y
ONGD. Que el slo criterio de coste-eficacia no sea deseable, no quiere decir que se
justifique de ningn modo el derroche, la corrupcin, el engao o, simplemente, el vivir
siempre en la ignorancia del resultado que producen las acciones de las organizaciones
de desarrollo. La evaluacin, como elemento capital del aprendizaje de los mecanismos
virtuosos del desarrollo, debera ser algo incuestionable para toda ONGD que desee
tener xito en la lucha contra la erradicacin de la pobreza. Como bien sintetiza la gua
de Beaudoux et al.(1992:146-147), hay que aunar las dos funciones principales de la
184
Coste excesivo
Alto nmero de
proyectos
Personal no capacitado
Otras (tiempo)
Falta capacitacin
Tamao muestral:
ONGD
21
Razn
19
Fuente: Elaboracin propia. El periodo muestral de Larr fue primer semestre de 1999 y el de Stock,
abril-junio de 2002. En ambos casos las ONGD muestrales fueron las ms grandes en trminos de fondos
gestionados para proyectos de desarrollo.
185
El cuadro muestra una fuerte correlacin entre los dos diagnsticos. Hay fuerte
coincidencia en que las tres principales razones para no evaluar estn en torno al
problema de los recursos (falta de fondos propios para evaluar y consideracin de un
alto coste); problemas de gestin del tiempo por alto volumen de intervenciones de
pequeo tamao que exigen mucha burocracia y altos costes de transaccin; y el
problema de la falta de un pensamiento estratgico y de una rendicin de cuentas
orientada a sus proveedores de fondos. Si hasta fecha muy reciente apenas haba
administraciones que pidieran evaluaciones y la sociedad civil que apoya a las ONGD
tampoco lo demanda, los incentivos para hacerlas son muy escasos.
Este diagnstico se ajusta muy bien al descrito ya no para las ONGD espaolas sino
para las ONGD en general por Rodrguez-Carmona (2002:309-313). Los problemas
para el aprendizaje identificados por l son los siguientes:
Una estructura y cultura burocrticas de gestin
Ausencia de autocrtica
Departamentos estancos
186
50
51
Las analogas con las resistencias dentro de las organizaciones empresariales a generalizar los
procesos de calidad total en sus procedimientos y sistemas, pueden ser una comparacin
pertinente, a la que habra que aadir la falta de presin por el lucro y beneficio sobre la que
descansa la actividad de la ONGD.
187
Pero no slo caben posturas negativas contrarias a realizar evaluaciones sino que
tambin pueden darse razones poco legtimas para encargarlas. Garca Ramos
(1992:463-464) considera las siguientes:
Esta ltima razn ilegtima nos parece especialmente importante para nuestro contexto
de evaluacin de proyectos y programas de ONGD, financiados en un importante
porcentaje por organismos pblicos que demandan una rendicin de cuentas.
No hay que olvidar que en toda evaluacin se unen motivaciones polticas (toma de
decisiones) con anlisis de efectos o resultados econmicos y sociales. La evaluacin es,
pues, una empresa racional, que incluso aspira a legitimarse como cientfica, pero que a
menudo se puede efectuar por pseudo-razones muy poco racionales.
Conviene estar alerta, pues, y fomentar y generalizar una cultura favorable y
cohesionada hacia las bondades y beneficios de la evaluacin. Sin actitudes positivas en
todas las personas involucradas en la organizacin, los procesos de cambio y las
decisiones que inevitablemente traen consigo las evaluaciones, carecern de utilidad y
provecho.
Hasta aqu hemos hecho hincapi en las razones negativas y dificultades para realizar
evaluaciones o para realizarlas con fines espurios. Conviene ofrecer algunas de las
razones positivas que ayuden al personal de las administraciones y ONGD a
convencerse y convencer a los dems socios de la inaplazable necesidad de instaurar un
188
Razones ticas: ante todo, por honradez con lo real. En el sistema de valores de
la estructura econmica actual, las acciones solidarias y las donaciones no son
evidentes y deben justificarse ante la opinin pblica, tanto del Norte como del
Sur. Tanto las administraciones como las ONGD deben aspirar a ofrecer el
mejor producto o servicio posible, a ofrecer lo bueno para sus poblaciones
meta, fruto de las evidencias obtenidas en las evaluaciones que prueban esa
bondad y nunca experimentar con las poblaciones objetivo o beneficiarios,
porque no saben si realmente lo que ejecutan introduce cambios en las vidas de
las personas que las permiten dejar de ser pobres.
de
empoderamiento,
auto-responsabilidad
fortalecimiento
189
52
53
190
191
b) Proyectos cuya evaluacin ser menos profunda, (que no rigurosa), por razones de
coste: son aqullos que se han ido desarrollando conforme a lo previsto y cuentan con
suficientes informes positivos de seguimiento, de forma que se conocen bien sus
impactos; cuando son proyectos "comunes" que se han ido desarrollando con las
contrapartes locales de forma habitual y metdica, y las enseanzas y problemas que
plantean se conocen ya con suficiente nitidez.
Por ltimo, es necesario matizar la flexibilidad debida al criterio de totalidad de
evaluacin de los proyectos. Si por causas especiales del pas, de la contraparte, del
propio donante y sus relaciones, no es aconsejable (o posible) realizar la evaluacin,
deber ser reflejado en un informe adjunto al historial del proyecto, que acte como
"evaluacin". Aqu se mencionarn las razones por las que no se realiz y se estudiar
su posible confidencialidad.
El manual del Ministerio de Asuntos Exteriores recoge los criterios que ofrecen varias
instituciones para decidir qu proyectos evaluar (Banco Mundial, Agencia danesa,
noruega y japonesa de desarrollo), as como los criterios espaoles para ir implantando
paulatinamente la cultura de evaluacin en la propia Agencia Espaola de Cooperacin
Internacional y Desarrollo (MAE 1998:200-201).
4.2.
Una vez que se ha decidido por qu evaluar, nos acercamos al cmo hacerlo. Y lo
primero es determinar el objetivo de la evaluacin y concretar las razones por las que se
evala esa intervencin, qu metodologa concreta ser la mejor, de cunto tiempo se
dispone, con qu presupuesto se cuenta, cules son las principales preguntas que la
evaluacin responder, etc. Todo este conjunto de informacin y condiciones previas a la
evaluacin, de alguna manera su programacin, es lo que se redacta en un documento
conocido como los Trminos de Referencia.
La seleccin y concrecin de los trminos de referencia es de extrema importancia, pues
son la base que determinar la calidad de la evaluacin. Los trminos de referencia
bsicos que deben incluirse en toda evaluacin son:
192
54
55
193
Capacidad de dilogo y creacin de conocimiento a travs de la Inter.subjetividad, para desarrollar la independencia de los juicios evaluativos. Su
capacidad para la empata, la aceptacin incondicional a las expresiones de las
personas, su experiencia de dilogo intercultural y de percepcin de valores, su
sensibilidad ante lo diferente por razones tnicas..., todo ello contribuir a esta
deseable "independencia".
tericos
suficientes
(interdisciplinares)
habilidades
194
195
56
En NORAD (1997:129-130) se ofrece un formato base y se dan consejos prcticos para redactar el
informe final. Tambin en MAE (1998:245 y 251-261) que nos parece ms claro y sistemtico.
Otras opciones son: Rubin (1995:81-82); Amezcua (1996:119-128); Weiss (1998:294-319); Alkin
(1985:56-60); Fink y Kosekoff (1978:71-80); Morris et al. (1987b:77-89) que son manuales sobre
evaluacin de proyectos que recogen tambin informacin sobre la obtencin y tratamiento de los
datos.
57
196
4.5.
ANALIZAR LA INFORMACIN.
El siguiente paso, una vez recogidos los datos, ser su estudio y anlisis para determinar
los cinco criterios de evaluacin habituales (eficacia, eficiencia, pertinencia, impactos y
viabilidad) y analizar los siete factores de desarrollo ya comentados.
Se llega as a un conjunto de conclusiones lgicas y de recomendaciones para el futuro.
Las conclusiones deben ser rigurosas en el sentido de los procesos causa-consecuencia,
de induccin desde los datos a los resultados y de deduccin desde los hechos a las
recomendaciones. Las recomendaciones deben ser realistas, exigentes y motivadoras.
Las conclusiones sealan las lecciones aprendidas. Las recomendaciones muestran las
tareas a incorporar o los campos de perfeccionamiento y mejora. Es importante cuidar el
que se juzguen hechos, no personas. Y no obsesionarse con la bsqueda de "culpables" ya sea en procesos de xito o de fracaso- sino centrarse en instrumentos y procesos que
estn funcionando bien y contribuyendo a un verdadero desarrollo.
Las recomendaciones deben especificar a quin va dirigida, qu tarea concreta
incorporar la mejora propuesta, qu medios se precisan para implementarla y en cunto
tiempo debera estar incorporada al proceso de gestin. Ya hemos insistido en que
muchas recomendaciones no son sinnimo de mejor informe de evaluacin. Una
inflacin de recomendaciones puede ahogar el proceso de mejora ya que la institucin
que recibe el informe puede no saber ni por dnde empezar. Hay que ser realistas con la
capacidad de cambio en personas e instituciones y no querer hacer un informe con
recomendaciones que arreglen el mundo pero no orienten realmente a los
involucrados.
4.6.
EXPLOTAR LA INFORMACIN.
197
198
FINES
DISEOS
CARACTERSTICAS
PRIMARIA:
APOYO EMPRICO
EXPERIMENTAL
VERAZ Y ESENCIAL
Pregunta
FIABILIDAD
CUASIEXPERIMENTAL
DISPONIBLE
Observacin
VALIDEZ
BARATA
NO EXPERIMENTAL
SECUNDARIA:
Anlisis
UNIVERSALIZACIN
OPORTUNA
199
MAS CUALITATIVAS
(MEDICIN)
(SIGNIFICADO)
1.
FORMAS DE ACB
1.
ANLISIS DOCUMENTAL
2.
ENTREVISTAS EN PROFUNDIDAD
A individuos
A grupos
2.
ENCUESTAS
A toda la comunidad
Cuestionario cuantitativo
3.
OBSERVACIN
Cuestionario cualitativo
Directa
Cuestionario mixto
Participante
3.
TCNICAS ESTADSTICAS
MULTIVARIANTES
4.
PARTICIPATIVAS
Brainstorming
Anlisis de varianza
Anlisis factorial
Anlisis de casos
Anlisis cluster
Otras
Anlisis discriminante
5.
4.
TCNICAS ECONOMTRICAS
200
5.1.
58
Puede consultarse MAE (1998:74-79), con bibliografa para ampliar este aspecto, o Cohen y
Franco (1993:126-139); Casley y Kumar (1990a:127-142); Pichardo (1997:269-280); Ballart
(1992:118-126); Alvira (1991:64-72).
59
Una amplia descripcin de la casi imposibilidad prctica de aplicar estos diseos, la exponen
Casley y Kumar (1990a:130-131), para proyectos tan tangibles como los incrementos de la
produccin agrcola. Mosley (1999:30-34), no parece tan pesimista, aunque seala cuatro
dificultades importantes: sesgo en la seleccin de la muestra, una mala especificacin de la
relacin subyacente entre el grupo de tratamiento y el de control, problemas de motivacin y el
alto coste. La gran ventaja del diseo es que, si se logra un muestreo aleatorio y sistemtico,
conoceremos el margen de error asignado al impacto cuantitativo calculado. Posturas favorables y
objeciones a este diseo, ya sobre la base de ciertas experiencias que se estn acumulando desde
2004, se encuentran en el libro editado por Banerjee (2007). Una presentacin de sus ventajas
frente a otros modelos y una respuesta a algunas de las objeciones ticas se ofrece en Banerjee
(2006,b), Duflo & Kremer 2003, 2005), Larr (2007b). Tambin Blatman (2008) realiza un
diagnstico de las ventajas y limitaciones de este enfoque, proponiendo ir ms all de lo
actualmente realizado. Para una descripcin completa de todos los pasos que supone realizar este
tipo de evaluacin vase Duflo, Glennester y Kremer (2006).
201
comparacin. Podemos considerar tambin dentro de stos, dos variantes. Aqullos que
tienen informacin suficiente sobre la situacin de los grupos antes y despus del
proyecto (evaluaciones prospectivas y retrospectivas). Y aquellos que no la disponen y
deben trabajar nicamente con la informacin ex-post al proyecto (slo retrospectivas).
La validez disminuye respecto a los experimentales, pero son ms simples y baratos60.
c) Diseos no experimentales. En este tercer grupo, consideramos un slo grupo (el
beneficiario o poblacin meta u objetivo), sin grupos de control ni comparacin. La
informacin directa nos la aportan los entrevistados, y con ella se trata de realizar el
anlisis. El nivel ms sencillo de diseo no experimental o informal es hacer un anlisis
de antes-y-despus. Comparar la situacin de la comunidad o regin beneficiaria, antes
del proyecto y despus de realizado ste. El problema de stos mtodos es que ocultan
esencialmente los procesos causales de los cambios habidos. Slo los detectan y
describen, pero no sabemos qu fue lo que realmente provoc los cambios, qu lo
aceleraron o los retardaron, si se deben al propio proyecto o a externalidades.
En el fondo, lo que pretenden estos diseos es poder medir y establecer la comparacin
entre la situacin real presente y un contrafactual histrico. Qu hubiera pasado si no
se hubiera llevado a cabo la accin? Cul sera la situacin de la poblacin meta?
Obviamente, el nivel de rigor y cientificidad con que se puede responder esta pregunta
disminuye progresivamente desde el diseo experimental al no experimental. A medida
que nos alejamos del diseo de evaluaciones aleatorizadas (as se denominan las que
emplean el diseo experimental) el grado de conocimiento objetivo que obtenemos
queda muy mermado. Pero puede haber proyectos o situaciones en las que sea lo nico
o lo mejor que podamos hacer, a pesar de su debilidad61.
Todos estos diseos exigen levantar informacin cuantitativa y cualitativa durante un
tiempo que puede parecer extenso. Lo que no debe olvidarse nunca es que la
60
Una discusin sobre estos mtodos frente a los experimentales se ofrece en Baker (2000),
Ravallion (2001, 2005), White (2005 y 2007a,b,c) y World Bank (2002 y 2006a,b,c,d,e).
61
202
informacin necesaria para la evaluacin debe estar formulada y prevista ya desde antes
del inicio real de la intervencin. Si hubiera que seleccionar qu fuente es la ms
importante, a mi parecer habra que privilegiar la contenida en los indicadores del
objetivo especfico. Los diversos mtodos descritos logran ms potencia y validez
cuando se aplican anlisis de regresin multivariante. La clave aqu es haber cumplido
bien los plazos de recogida de informacin y los informes de seguimiento, pues de otro
modo, con series muy cortas, la validez queda diluida ante la cantidad de hiptesis que
pueden explicar los datos ofrecidos.
Tras describir estos tres grupos de diseos, debemos comentar las caractersticas
bsicas que debe tener la informacin con la que trabajar.
En primer lugar debe ser una informacin veraz y esencial. Que vaya a aportar
conclusiones relevantes para el anlisis del proceso de desarrollo y de
eliminacin de la pobreza, que es lo que buscamos.
203
62
No se pretende aqu entrar en el prolijo debate sobre la pertinencia de la distincin de los enfoques
cualitativos y cuantitativos. Una extensa exposicin sobre las diversas posturas y paradigmas ante
el tema puede encontrarse en Valles (1997:20-44). Nosotros nos adherimos a la postura que
considera que ambos enfoques ofrecen informacin til para la evaluacin de intervenciones de
cooperacin al desarrollo y que, por lo tanto, es conveniente servirse de los dos. Esta es la postura
de Bericat (1999), Bamberger (2000), White (2002) que creemos es la que va extendindose cada
vez ms. La asignacin de cada tcnica aqu citada al grupo de prevalencia cuantitativa o
cualitativa es funcional y no pretende encuadrarlas rgidamente en este falso par. Nos convence
la armonizacin que hace Bericat al asociar MEDIDA con lo cuantitativo y SIGNIFICADO con lo
cualitativo. Para una extensin sobre el tema aplicada a la evaluacin pueden consultarse Rossi y
Freeman (1989:264-265); Weiss (1998:82-86); Dale (1998:106-129). Una descripcin extensa de
ambos enfoques la hacen Kanbur (2003 a,b) y Holland y Campbell (2005). Experiencias concretas
sobre la aplicacin de ambos mtodos en los anlisis de pobreza se dedic de forma monogrfica
el nmero 35(2) de la revista World Development, editada por Kanbur & Shaffer (2007).
204
63
64
Por ejemplo, Sierra Bravo (1994) o Cohen y Franco (1993) para una exposicin introductoria. Para
anlisis ms detallados, con enfoque evaluativo: Rossi y Freeman (1989); Morris et al. (1987a);
Fitz-Gibon y MORRIS (1987b). Un anlisis muy completo de las tcnicas cualitativas se encuentra
en Valls (1997:142-338). La bibliografa sobre el tema recopilada por este autor es exhaustiva.
Quiz la presentacin de Casley y Kumar (1990 a y b) sea una de las ms completas, teniendo la
ventaja de ser una orientacin especfica sobre los proyectos de desarrollo y cooperacin, que si
bien centradas en su versin oficial o gubernamental- creemos que es fcilmente extrapolable a la
dinmica de las ONGD. La buena presentacin especfica de las tcnicas cualitativas se encuentra
en el segundo volumen, captulos 2-5, pp. 11-80 y las cuantitativas en los captulos 6-9, pp.81-154.
205
evaluacin de proyectos: las variantes del Anlisis Coste Benenficio (ACB), las
encuestas y las tcnicas estadsticas multivariantes.
Hay un grupo de herramientas econmico-financieras que siempre aparecen en los
escritos de evaluacin de proyectos y programas sociales y son la "familia" del Anlisis
Coste-Beneficio (ACB). Aunque se desarrollarn tambin en el siguiente captulo,
creemos conveniente y pedaggico hacer ahora una presentacin breve de ellas, para
profundizarlas ms adelante.
a) El Anlisis Coste-Beneficio.
Es una herramienta generalmente utilizada en poltica econmica, por la que tratamos
de comparar los costes y los beneficios obtenidos en un proyecto o inversin a realizar.
Para comparar con rigor, todos ellos deben ser reducidos a unidades homogneas,
normalmente las monetarias.
Cuando los productos que vamos a utilizar los encontramos en el mercado, el precio
monetario ser sencillo de determinar. Cuando no exista mercado, se utilizarn los
"precios sombra" o precios subrogados, que tratan de estimar artificialmente el precio
de ese bien fuera de mercado.
Como sealan Fernndez Daz y otros (1989:181), las fases en la aplicacin del ACB
son:
"1.Enumeracin de los costes y beneficios que han de ser incluidos.
2.Evaluacin de dichos costes y beneficios en trminos monetarios.
3.Actualizacin de las corrientes de beneficios y costes mediante la seleccin
de una tasa social de descuento.
4. Correcciones por razn de riesgo o incertidumbre.
5.Introduccin de las restricciones que se consideren pertinentes (distributivas,
presupuestarias...).
6.Utilizacin de un criterio de inversin para elegir la alternativa ms
eficiente".
206
Vemos que esta herramienta puede ser til en ciertos casos, sobre todo para proyectos
muy financieros o de microcrditos. Pero la mayor dificultad es que se mueve en un
mundo prximo a la libre competencia. La introduccin de la incertidumbre, la falta de
informacin o su uso privilegiado, la no libertad de concurrencia, etc. sern supuestos
ms cercanos a la realidad de las economas del desarrollo que los relativos a los
mercados de libre competencia.
Por otra parte, la determinacin de la tasa social de descuento, bien por la preferencia
de la sociedad por los beneficios actuales (preferencia temporal social), bien por el
rendimiento perdido en el proyecto sacrificado como coste de oportunidad (tasa de
rendimiento interno), puede ser orientativa, pero no est exenta de dificultades prcticas
que se maximizan cuando pensamos en el tipo de proyecto que suelen realizar las
ONGD65.
En notacin matemtica, el ACB no es sino:
BSN = Bt (1+i)-t - Ct(1+i)-t
siendo: BSN = Beneficio Social Neto.
Bt = Beneficios para el periodo t.
Ct= Costes para el periodo t.
i = tasa social de descuento.
65
En Antoanzas et al. (1998) y Pinto (1998) pueden encontrarse comentarios sugerentes sobre la
problemtica de la tasa de descuento para proyectos sanitarios. Dos de sus aportaciones que nos
parecen relevantes son: estandarizar la tasa de descuento (por ejemplo a nivel europeo) en torno al
4-5%, por ser la media de la deuda pblica viva de los ltimos aos, y que sea el Ministerio de
Economa y Hacienda quien pueda irla facilitando a lo largo del tiempo. La otra es la
consideracin del ao de vida ajustado por calidad (AVAC) para determinar el valor de la salud
en proyectos que sean evaluados con Anlisis Coste Utilidad (ACU). Este sofistica la medicin
de la salud ponderando los aos ganados gracias a la realizacin del proyecto, con un coeficiente
que refleja la calidad de vida: el AVAC (o QALY en la versin inglesa).
207
La metodologa del MAE (1998:49) cree que el ACB puede ser pertinente en
evaluaciones de proyectos que se hayan formulado con esta herramienta, para comparar
rentabilidades econmico-financieras, o en grandes proyectos de infraestructuras. La
versin revisada MAE (2001:81-106) dedic a esta tcnica un extenso desarrollo y
bibliografa complementaria, comentando su uso en la evaluacin realizada en Guinea
ecuatorial para el sector del cacao MAE (1998). No conocemos ningn otro caso en que
haya sido aplicado.
b) El Anlisis Coste-Efectividad y Coste -Utilidad.
Cuando no sea posible determinar de forma rigurosa los flujos intervinientes en el
proyecto en trminos homogneos y monetarios, es decir, cuando el escenario
econmico est muy alejado de los supuestos de la competencia perfecta, podremos
utilizar las variantes de coste-efectividad (ACE) y coste-utilidad (ACU). Estos son
enfoques que ya aumentan la dimensin cualitativa de la investigacin.
El anlisis coste-efectividad permite comparar el valor de un mismo producto en varias
intervenciones, utilizando unidades naturales en vez de monetarias. El MAE (1998:50)
lo recomienda para proyectos piloto y ver si luego es oportuno reproducirlo en una
escala superior, o para determinar las causas que lo han hecho eficiente en distintos
pases en los que se haya llevado a cabo la accin similar.
El anlisis coste-utilidad, trata de ordenar las preferencias y resultados del proyecto no
en escalas numricas, sino en jerarquas de utilidad. Compara utilidades reportadas o
reveladas en vez de unidades monetarias o naturales. El MAE lo recomienda para
proyectos de asistencia tcnica o para intervenciones de bajo presupuesto, lo que le
hacen ms cercano a los usos y costumbres de los proyectos de las ONGD66.
En resumen, la utilizacin de las herramientas de la familia del anlisis coste-beneficio:
66
208
Nos parece, pues, que son herramientas ms propias de grandes proyectos de poltica
econmica o de programas de organismos multilaterales de desarrollo que de ONGD.
Esto no descarta que ofrezcan informacin til para determinados proyectos concretos y
que las ONGD puedan beneficiarse de ella, tanto en su programacin como en la
evaluacin de algunos de sus proyectos67.
c) La encuesta.
Otra herramienta que tiene la posibilidad de uso cuantitativo aunque tambin
cualitativo- es la encuesta. Los cuestionarios cerrados y de contenido cuantitativo
permitirn medir resultados y cuantificar la realidad evaluada. Cuando los items
propuestos tengan escalas cualitativas o sean preguntas abiertas, revelarn significados
sobre esa misma realidad. As pues, las encuestas tienen la ventaja de ofrecer este doble
tratamiento de la informacin, pero no deben desdearse sus muchos problemas, sesgos
y exigencias cientficas, para poder extraer de ellas conclusiones pertinentes.
Una encuesta es mucho ms que el simple listado de preguntas sugerentes acerca de la
realidad que se investiga, hechas a un grupo cualquiera de poblacin -llamado muestra-,
con el fin de obtener cantidades que a menudo no se saben interpretar, tras pasar por un
programa informtico. Los rigores de esta herramienta han sido bien descritos en obras
especializadas68. Queremos resaltar aqu que los resultados arrojados por una encuesta
sern siempre de carcter esttico, es decir, proporcionan el estado de una realidad
67
Otra bibliografa sobre el ACB aplicada en el contexto de la economa del desarrollo puede verse
en Albi y Rodrguez Ondarza (1988); Chakravarty (1993); o Kanbur (1993); y centrada en la
problemtica de la evaluacin Rossi y Freeman (1989:390-413); Weiss (1998:244-249).
68
Por ejemplo, Sierra Bravo (1994:304-349); Kasley y Kumar (1990b:57-154). Un anlisis profundo
del tratamiento estadstico que puede darse a los datos cualitativos generados en las encuestas se
encuentra en Ruiz-Maya et al. (1995).
209
69
Pueden ampliarse estas tcnicas consultando manuales no bsicos de estadstica, como Uriel y
Muiz (1988); Pea (1994); Webster (1996); Hildebrand y Lyman (1997) o monografas como las
de Bray y Maxwell (1985) o Hair et al. (1999) para profundizar en ellas. Tambin es iluminador
consultar los manuales de los programas estadsticos que permiten estos anlisis como SPSS o
STATGRAPHICS, por ejemplo: Puente (1995); Visauta (1997,1998). En los manuales de
evaluacin de Rossi y Freeman (1989:271-374) y de Weiss (1998:215-234) tambin hay extensos
desarrollos sobre el tema.
210
70
Como vemos, la tcnica es compleja, por lo que autores competentes como Casley y Kumar
(1998b:145-149) la desaconsejan por costosa, difcil y poco relevante en la evaluacin de
proyectos de cooperacin.
71
Quiz convenga aqu recordar que los cuatro tipos fundamentales de escalas en los diseos de
investigacin son nominal, ordinal, de intervalo, y de razn o proporcin (estas dos ltimas, son
mtricas). Puede ampliarse este aspecto en Sierra Bravo (1994:245-249).
211
212
Adems de las expuestas hasta aqu, el evaluador puede disponer de otras tcnicas
cuantitativas como las usadas en econometra: series temporales, datos de panel,
ecuaciones simultneas, espacio de estados, modelos economtricos predictivos
(autorregresivos, AR; de Media Mvil, MA; y la integracin de ambos, modelos
ARIMA), etc. Su complejidad las hacen ser herramientas a utilizar por especialistas, y
su exposicin queda ya fuera de nuestros objetivos72.
5.3.
72
Para acercarse a su conocimiento pueden consultarse las obras de Uriel et al.(1990); Pulido
(1993); Hernndez Alonso (1995); Gujarati (1997); Novales (1997); Snchez Gonzlez (1999).
213
73
Sobre las entrevistas como tcnicas cualitativas, sean individuales o en grupo, amplan
informacin Casley y Kumar (1990b:11-42); VALLS (1997:177-234).
214
b) La observacin participante.
Esta tcnica trata de introducir en la dinmica evaluadora un papel activo por parte del
evaluador. Este, viviendo directamente en el escenario del proyecto, observa realidades
y personas, analiza documentos y reacciones, o entrevista a personajes heterogneos. Es
decir, no se queda en la simple observacin pasiva de hechos que transmite
descriptivamente en un informe final, sino que trata de dejarse afectar por la realidad
que estudia a fin de comprender de manera ms profunda y autntica todas las fuerzas y
dinmicas humanas que el proyecto ha despertado en la comunidad beneficiada.
El observador debe guardar un equilibrio entre la autoimplicacin en el proceso
evaluador que quiere descubrir aprendizajes y la observacin atenta de hechos,
reacciones, diferencias culturales, de gnero o cualquier dato que revele claves
interpretativas importantes para la comunidad meta.
Es una tcnica engaosa, pues tiene un planteamiento sencillo de fines, pero es muy
exigente en su aplicacin prctica y exige numerosas actitudes y aptitudes en los
evaluadores. No exenta de peligros, hay que reconocer que es muy utilizada74. Pero debe
diferenciarse bien de la simple visita al terreno para recoger informacin adicional a la
ya disponible o para realizar algunas entrevistas de carcter exploratorio o verificador
de hiptesis.
c) Las tcnicas participativas.
Los mtodos participativos tambin son llamados de "cuarta generacin", segn Guba y
Lincoln (1989)75. Son muy cercanos al estilo de trabajo de las ONGD, aunque el CAD
parece algo receloso de ellos por su predominio de la vertiente subjetiva76. Como
74
Los peligros pueden consultarse en Valls (1997:141-175), que recoge la aportacin de otros
muchos autores. Que es muy utilizada puede quedar mostrado en los informes de evaluacin
elaborados por el MAE en sus ejercicios evaluativos que ya han sido citados. Todos ellos
confiesan haberla usado dentro de la explicacin metodolgica empleada.
75
Sobre la investigacin participativa puede consultarse la obra de Whyte (1991) que recoge varios
estudios de caso aplicados al sector industrial y agrcola.
76
215
veremos detenidamente en prximo captulo, hay dos muy usados para los diagnsticos
que realiza el Banco Mundial: el Diagnstico Rural Rpido (Rapid Rural Appraisal) y
el Diagnstico Rural Participativo (Participatory Rural Appraisal)77. Otras tcnicas
participativas son el Brainstorming (puede traducirse por lluvia o tormenta de ideas)
o creacin espontnea de ideas, en una primera etapa, para luego pasar a otra de
jerarquizacin y anlisis detenido de las ideas surgidas por el grupo reducido (entre 8 y
12 miembros) que particip; las discusiones y dinmicas de grupo, que promueven la
participacin de los beneficiarios a fin de que logren detectar puntos fuertes y dbiles en
la marcha o culminacin del proyecto; o el anlisis de caso, primero individual y
posteriormente con una discusin en grupo, muy utilizada como tcnica pedaggica en
las escuelas de negocios.
Los principales aportes que ofrecen estos enfoques son:
Cambian el centro del marco de anlisis. Del realce exagerado del anlisis
externo, que quiere que sea totalmente "independiente", se pasa a centrar el
anlisis en los propios beneficiarios, a la comunidad que ha ejecutado el
proyecto y que ser la que lo goce (o padezca). El anlisis cualitativo y
participativo quiere recoger los elementos culturales propios de cada
comunidad e intentar apreciar los resultados desde ellos mismos, desde sus
valores, intereses, concepciones espacio-temporales, etc.
77
216
6.1.
217
218
FASES
1. Iniciativa.
PERSONAS
IMPLICADAS
Identificador y
formulador del proyecto.
2. Decisin de evaluar.
3. Difusin de la
evaluacin.
DOCUMENTOS
Comisin de
evaluaciones.
Informes de seguimiento.
Beneficiarios y
responsable local del
proyecto.
Representante del
organismo cofinanciador.
2. EJECUCIN.
4. Acuerdo con la
contraparte y
preparacin de la
informacin.
Trminos de referencia.
Equipo evaluador.
7. Diseo y
aprobacin del plan de
trabajo.
Plan de trabajo.
8. Trabajo de campo.
Recogida y anlisis de
la informacin.
Informe preliminar.
Informe final.
3.
9. Difusin de las
RETROALIMENTACIN. enseanzas.
Sntesis de conclusiones
y recomendaciones.
Coordinador de rea.
10. Ejecucin de las
recomendaciones.
Coordinador de
proyectos.
Comit ejecutivo.
Beneficiarios.
219
ETAPA DE EJECUCIN.
El primer paso en la esta segunda fase es lograr el acuerdo entre los implicados en la
ejecucin y preparar la informacin preliminar disponible. La fuente de esta
informacin nos la proporcionar bsicamente el formulador del proyecto a travs del
Enfoque del Marco Lgico o el enfoque adoptado para formular el proyecto a evaluar.
La Comisin de evaluaciones, coordinar esta accin con el Plan de evaluaciones
concebido y aportar la informacin adicional que fuera necesaria (datos
macroeconmicos, agregados medioambientales, etc.).
La Comisin de evaluaciones, a su vez, con la potencial ayuda del formulador del
proyecto, preparar los trminos de referencia de la evaluacin y formar el equipo
evaluador. Recordemos que ste debe ser equilibrado en gnero y capacitaciones, y que
puede ser interno, externo o mixto segn haya miembros de la propia ONGD en l, o
no. Siempre deben estar bien representados los beneficiarios que, como vemos,
intervienen en todas las fases del ciclo.
220
DGPOLDE
Contraparte local
Beneficiarios
AECID
Comisin de
evaluaciones.
Administracin
autonmica o
municipal.
Org. Cofinanciador
-
U.E.
B.M.
PNUD
Otras ONGD
Identificador y
formulador del
proyecto.
DECISIN DE
EVALUAR.
Disponibilidad de
recursos?
NO
SI
FIN
FASE DE
EJECUCIN
6.3.
221
ETAPA DE RETROALIMENTACIN.
DE
LA
Este apartado quiere ofrecer reflexiones sobre las consecuencias que puede tener, para
una ONGD, tratar de instaurar con seriedad y constancia un sistema de evaluacin
operativo y eficaz79. Slo la ingenuidad o la ignorancia pueden suponer que la tarea de
implementar un sistema de evaluacin en una organizacin es tarea sencilla. Para las
ONGD, como para el entorno de la cooperacin en general, la escasa cultura de
evaluacin contrasta con su creciente necesidad. Falta ponerla en prctica, con tesn y
conviccin, sabiendo que los frutos de la evaluacin justifican sus costes y esfuerzos,
pero que pueden llegar a medio plazo.
78
Vanse Feinstein (2000), Larr (2004), World Bank (2004) y MAEC (2007:93-104).
79
222
Se han estructurado las consecuencias en torno a cuatro aspectos: las consecuencias que
tendr la evaluacin sobre la identidad de las ONGD; los cambios organizativos que
supone la tarea de evaluar, tanto en el plan estratgico como en el operacional de la
entidad; las modificaciones presupuestarias que la evaluacin lleva consigo y, en fin, los
cambios sobre los recursos humanos y personal integrante de la ONGD.
7.1.
223
ONGD es que se basa en valores, por tanto no se confunde la misin o identidad con
una accin o problema concreto. Pero la parte peligrosa es que si los valores no se
concretan en actuaciones eficientes, se puede caer en voluntarismo ingenuo cuando no
en acciones que pueden agravar todava ms los conflictos que se desean solucionar80.
Fowler (1986) ha denunciado que una de las debilidades de los sistemas actuales que
existen para evaluar el rendimiento de las ONGD es la separacin asumida entre los
proyectos y las caractersticas internas de la propia organizacin, como si tuvieran poco
o nada que ver entre s81.
Sanz Corella (1998) propone tres reas de capacidades para construir un marco
evaluativo integral que incluya la propia identidad de la ONGD. (Cuadro 4.8.)
80
81
Biekart (1999:213), tambin se queja de que las escasas evaluaciones de proyectos de ONGD
estn centradas en las actuaciones de los beneficiarios y ejecutores y que pocas veces el sujeto de
la evaluacin sea la propia ONGD del Norte. Propone que la evaluacin recoja el rendimiento de
la ONGD medido a travs de la atencin a todos los intereses de los mltiples actores implicados
en el proyecto, mtodo denominado auditora social.
224
Cuadro 4.8. Tres reas de capacidad para evaluar el rendimiento de las ONGD.
Organizacin interna.
Ser
la
razn
de
ser
de
una
organizacin.
Visin: opinin de la organizacin de cmo querra
que el mundo fuera, su esperanza de la realidad
ser.
Estrategias: dirigen el uso que la organizacin hace
de los recursos disponibles para llevar a cabo su
misin y tener el mayor impacto posible.
Recursos: humanos, fsicos, financieros, sistemas y
estructuras.
Vnculos
Relacionarse
Programacin
Hacer
mbito poltico.
225
fondo, quines son? quin est detrs de cada institucin? Estas son preguntas sobre
la identidad especfica de las ONGD.
Esta incertidumbre sobre la propia identidad se acenta en el contexto de escasez de
fondos para la cooperacin al desarrollo y de presencia creciente y competitiva de
organizaciones locales del Sur, que acuden directamente a las agencias donantes
solicitando financiacin y prescindiendo del servicio de intermediario de la ONGD
del Norte. La cadena de ayuda se estrecha al eliminar un eslabn, aumenta la eficiencia
y plantea la pregunta sobre el valor aadido real que aporta la institucin del Norte.
Muchas ONGD pueden ver en este aspecto un logro, pues puede ser resultado de sus
propias acciones de colaboracin, fortalecimiento y formacin de organizaciones locales
que han hecho prescindibles ya sus servicios. Nos encontramos con la paradoja que, a
diferencia de la empresa o las organizaciones lucrativas, el mayor xito de una
organizacin de promocin del desarrollo sea su propia extincin y desaparicin, como
resultado de haber cumplido su misin.
Otro aspecto relacionado con la identidad de las ONGD es su especializacin. Del
numeroso abanico de organizaciones espaolas, muchas se dedican a lo mismo,
compitiendo entre s. Una visin racional y econmicamente eficiente del sector
apuntara a procesos de fusiones y especializaciones, en busca de economas de
escala o de diferenciacin de productos. Los estudios realizados sobre eficiencia
comparada entre ONGD espaolas ofrecen como criterio principal de valor
precisamente el tamao de la entidad, excluyendo factores como la confesionalidad,
ideologa o forma jurdica que adopte (Marcuello 1999).
Quiz veamos en adelante un proceso de alianzas y fusiones entre las ONGD
espaolas a medida que vaya madurando el sector, en bsqueda de la eficiencia y la
consolidacin de su propia identidad. La homogeneidad de sus actividades es un factor
facilitador de este proceso que debe buscar unir esfuerzos, distribuir adecuadamente las
responsabilidades y los aportes, de manera que los recursos y fortalezas de cada ONGD
sean aprovechados sumariamente.
226
7.2.
CAMBIOS ORGANIZATIVOS.
82
Sobre la direccin estratgica y control en las ONGD, vanse Iribar (1996); Iribar y Martnez
Pereda (1996).
227
Todos estos interrogantes son muy pertinentes en el momento histrico actual en el que
se encuentran las ONGD espaolas. Terminado el boom de su creacin, est abierta la
etapa de la profesionalizacin donde la eficacia y calidad de las intervenciones pesan
ms que el asistencialismo y las buenas voluntades solas. La evaluacin ofrece
productos en forma de conocimientos que deben ser utilizados como insumos del plan
estratgico, convirtindolo en un proceso permanente de reflexin y cambio, dirigido a
fortalecer la institucin en el presente y delinear su actuar futuro, con el objetivo de que
pueda responder de forma adecuada a las condiciones tan rpidamente cambiantes como
son las del entorno internacional, en materia de cooperacin al desarrollo.
Durante la dcada de los noventa, muchos pases han sometido a profunda reflexin y
reforma su sistema gubernamental de ayuda al desarrollo (Italia, el Reino Unido, Pases
Bajos o Japn, por ejemplo). Tambin lo han hecho organismos multilaterales como el
Banco Mundial. Todos coinciden en que la cooperacin no termina de ofrecer
resultados satisfactorios y que deben ofrecerse nuevas ideas creativas en este terreno,
adems de dinero, y aumentar los estudios sobre la eficacia de la ayuda. Por otra parte
son crecientes las colaboraciones directas entre organismos multilaterales y gobiernos
centrales con ONGs del Sur. Todas estas seales deben hacer reflexionar sobre el papel
estratgico y el valor aadido que las ONGD del Norte y, por inclusin, las espaolas,
aportan en la cadena de la ayuda. Sin una identidad y estrategia claramente definida y
practicada, muchas ONGD se vern marginadas de los procesos realmente significativos
de promocin del desarrollo humano y desaparecern o tendrn crecientes dificultades
para autojustificarse.
Por ltimo, el plan estratgico, orientado por los resultados de las evaluaciones, debe
aumentar la capacidad de coordinacin de la ayuda y de transmisin y circulacin de la
informacin sobre las actuaciones llevadas a cabo por las distintas ONGD en lugares
comunes o muy cercanos, aspecto ste denunciado a veces como debilidad en la
planificacin de sus actuaciones.
b) Los cambios operacionales.
Un segundo mbito de enriquecimiento de los estudios evaluativos es el plan
operacional de la organizacin o su forma de trabajar. Ya hemos hecho referencia a que
228
todos los proyectos formulados y aprobados por la ONGD debe contemplar una forma
de evaluacin. Es claro que no todos de la misma forma y profundidad, pero que todo
proyecto bien formulado, sobre todo si es diseado bajo el Enfoque del Marco Lgico
(EML), debe contener un objetivo especfico claro, con indicadores mensurables y
pertinentes y con un sistema de recogida de informacin y seguimiento que permita el
tipo de evaluacin diseado.
Los proyectos de carcter ms econmico, productivo o de infraestructura, se benefician
de su mayor tangibilidad y pueden incidir en indicadores ms cuantitativos.
Los proyectos de carcter ms social, articularn seguimientos ms basados en
indicadores y herramientas cualitativas, que permitan comparaciones de utilidad.
Los proyectos innovadores, piloto o creativos, pueden ser evaluados de forma ms
detenida y profunda. La evaluacin externa o mixta puede incrementar determinados
valores, como la independencia o la credibilidad.
La extensin de la cultura de la evaluacin, sobre todo en los formuladores de
proyectos, debe ser una de las tareas ms asociadas con los aspectos operacionales de la
evaluacin.
c) Creacin de nuevas figuras organizativas.
Un tercer cambio organizativo que debe producirse para instaurar eficazmente el
sistema de evaluacin dentro de una ONGD es la creacin de alguna figura organizativa
que modifique el organigrama de la institucin y que le d operatividad y seguimiento a
todo el ciclo de la evaluacin.
Esta figura no tiene por qu ser uniforme para todas las ONGD. Depender de la propia
estructura interna y de su tamao. Puede ser una Comisin o Comit de evaluaciones,
como se propone en la Metodologa Espaola de Evaluacin, o un departamento de
tamao ajustado para que pueda coordinar todas las acciones de evaluacin.
Sus principales funciones sern, entre otras posibles:
229
Velar para que todos los proyectos formulados tengan explicitado el modo en
que sern evaluados.
230
7.3.
CONSECUENCIAS PRESUPUESTARIAS.
Las decisiones que llegan a concretarse en espacio, tiempo y dinero tienen fuertes
garantas de que se llevarn a cabo. De otra manera, pueden resultar bellos deseos, pero
nada ms. Decidir evaluar es enfrentarse a su coste. Y ste es uno de los factores ms
sealados como razn para no evaluar como vimos ms arriba.
Para ser socialmente solidario, hay que ser econmicamente eficiente y autnomo. Sin
una gestin eficiente de los recursos (limitados), ninguna organizacin permanece. Sin
grados de autonoma, la dependencia hacia el financiador mina la propia identidad y
estrategia de la ONGD. Aunque desde 2004, en las ONGD espaolas los fondos
privados superan ya a los de origen pblico (Grfico 4.1.), la concentracin de estos
fondos sigue siendo muy elevada. Para superar el 50% de los fondos pblicos slo eran
necesarias, en 2003, 11 ONGD y tan slo 4 Organizaciones para superar el 50% de los
fondos privados (CONGDE 2005:15). En 2004 (ltimo disponible a la fecha), los
fondos pblicos representaron menos del 20% en slo 8 ONGD. Si no hubiera sido por
el notable incremento de la financiacin de las administraciones descentralizadas, que
en 2005 represent el 23% del total de los recursos de las ONGD, es probable que
muchas de ellas se hubieran encontrado con serios problemas de viabilidad.
Grfico 4.1. Evolucin de los fondos pblicos y privados en las ONGD espaolas.
231
350
300
Millones de Euros
250
200
150
100
50
0
1.991
1.992
1.993
1.994
1.995
1.996
1.997
I privados
1.998
1.999
2.000
2.001
2.003
2.004
2.005
I Pblicos
Fuente: Elaboracin propia con datos de los Directorios de la CONGDE (2000-2007). Nota: la serie del
Directorio de ONGD se trunc en 2000 y reapareci en 2004, con los que no hay datos para 2000-2001.
Por lo que se refiere a la evaluacin, no creo que deba seguirse aplazando la necesidad
de evaluar por razones econmicas. Con independencia de lo que se piense sobre si
evaluar es caro o no, est claro que el coste depende del tipo de evaluacin a realizar. Es
obligatorio presentar informes de seguimiento y finales en todas las intervenciones
cofinanciadas y estas actividades tienen tambin su coste, que se asume. Adems, la
mayora de las evaluaciones externas a las que se obliga a las ONGD reciben para ella
financiacin pblica (en torno al 1% del total de la subvencin concedida)83.
La propuesta que se hace aqu es evaluar todas las intervenciones, y para ello el coste
debe ser bajo. Creemos que un seguimiento funcional, bien determinado por la buena
identificacin y formulacin del proyecto y con unas acciones de seguimiento de
calidad, por parte de los responsables ejecutores del proyecto o por personal sobre el
terreno, asegura una cantidad de informacin razonable y barata para hacer una
evaluacin formativa y de los procesos de desarrollo que aporte mucho valor a la
organizacin. Pero adems, hay que plantear ya evaluaciones de mayor alcance
83
232
estratgico sean internas, externas o mixtas. Lo ms recomendable son mixtas, hasta que
la ONGD tenga una capacitacin suficiente y para aprender sobre la prctica.
Reiteramos aqu la justificacin de las evaluaciones como coste de oportunidad de
proyectos fracasados, mal diseados y de los que no se aprende, por no evaluar ni
disponer de un sistema de transmisin de buenas y malas prcticas dentro de la ONGD.
El coste de las evaluaciones externas tambin es opinable. Algunas ONGD ya encargan
este tipo de evaluaciones y otras comienzan a estar preparadas para ejecutarlas con
personal interno84. Un sistema de concurso y formas creativas de remuneracin son
campos propicios para la prctica novedosa y original que ha caracterizado
tradicionalmente a las ONGD.
La financiacin de las evaluaciones puede suponer desvo de gasto de unas actividades a
otras en funcin de la prioridad que se otorgue a cada una85. Tambin cabe un mayor
esfuerzo por generar nuevas fuentes de ingreso para dedicarlos a la evaluacin.
En definitiva, la voluntad de evaluar se expresa en prioridades, donde el coste es un
elemento ms a tener en cuenta, pero nunca debe ser la razn acomodaticia para
resistirse a su ejecucin e implantacin. Las mltiples razones ofrecidas en este captulo
refuerzan la necesidad de financiar de forma responsable esta actividad, por otra parte
contemplada en la Gestin del Ciclo del Proyecto que dicen utilizar la mayora de las
organizaciones. Hay que llevar el proceso circular hasta el final y dejar que la
evaluacin aporte su misin.
7.4.
84
Las 20 calificadas en convenio con la AECID como ONGD ordinarias ms las 6 como
especializadas, deberan ser un ejemplos del primer caso y Entreculturas o Cruz Roja del segundo.
85
Biekart (1999) hace una provocativa comparacin entre el coste de campaas publicitarias para la
recaudacin de fondos de algunas ONGD y la excusa del alto coste de la evaluacin.
233
El equilibrio que salvaguarde estos peligros y mantenga las ventajas de las dos figuras,
profesionales y voluntarios, lo intenta describir Vernis (1998:151-152) bajo la
denominacin de profesionales voluntarios y voluntarios profesionales.
86
87
Una figura intermedia de gran inters y rendimiento son los voluntarios a tiempo completo en la
organizacin. Normalmente jubilados que prestan su experiencia profesional laboral, ahora al
servicio de los ms necesitados a travs de la ONGD.
88
Los puntos fuertes que seala son: el compromiso, su carcter, la flexibilidad, el cuidado, la
comprensin cercana de la cultura y ambientes locales y la espontaneidad.
234
235
Respecto a los salarios de los profesionales de las ONGD, no es ste el lugar para su
debate (vase CONGDE 2006, que incluye un estudio sobre los recursos humanos en las
ONGD donde se ofrece informacin al respecto). Pero s se desea mencionar por su
relacin con la evaluacin- el que un nivel salarial justo tiene como ventaja el que el
personal cualificado y experimentado, permanezca en la organizacin.
Uno de los posibles motivos por los que la rotacin del personal profesional sea tan
elevada en las ONGD, puede ser la incapacidad de la organizacin de retener sus
servicios y activos con un salario suficientemente atractivo. Al estar en una
organizacin no lucrativa, los costes no asociados a las acciones directas de desarrollo
se consideran de menor valor aadido. Pero el problema para la evaluacin es
importante, pues la rotacin continua del personal supone la no acumulacin de las
experiencias personales, tcnicas y profesionales. Por tanto, las causas de los xitos y
fracasos de las intervenciones puntuales y de los procesos de desarrollo se pierden. Este
fenmeno se acenta cuando no hay evaluaciones escritas que vayan recogiendo las
enseanzas y buenas prcticas acumuladas por la organizacin89.
En resumen, evaluar las acciones tiene, al menos, tres consecuencias sobre los recursos
humanos de una ONGD: requiere alta cualificacin en su personal (conocimientos
generales en todo el staff de proyectos y conocimientos especiales en los miembros de
la comisin o departamento de evaluaciones); requiere, en segundo lugar,
remuneraciones eficientes y formacin permanente de los profesionales y, en tercer
lugar, requiere estabilidad de su personal, al menos a medio plazo. Los tres aspectos
estn estrechamente interrelacionados. Incluso puede contemplarse la formacin interna
como una remuneracin en especie, complementaria al salario, pues es uno de los
aspectos ms valorados por el personal interno de las ONGD, a priori ms motivado en
su labor y que renuncia a los salarios del mercado, si a cambio obtiene otras
contraprestaciones y gratificaciones personales no dinerarias. La empleabilidad de los
89
236
90
En una entrevista mantenida con un director de una ONGD, me coment que un estudio encargado
por su organizacin a una consultora externa, acerca de la valoracin que haca su personal sobre
los componentes de las retribuciones, seal que en un nivel suficiente de salario- el factor ms
apreciado y demandado era precisamente una formacin y cualificacin que permitiera su
empleabilidad.
237
8. CONCLUSIONES.
Para cerrar este captulo en el que hemos expuesto los fundamentos tericos de lo que
debe hacerse en un ejercicio de evaluacin de proyectos de desarrollo, vamos a formular
las principales conclusiones que debemos extraer de lo aqu expuesto, de forma que nos
permita avanzar de una forma ordenada y reteniendo lo ms fundamental.
1. La evaluacin comienza con la identificacin y formulacin del proyecto. A la
identificacin tambin puede llamrsela evaluacin ex ante o anlisis de la viabilidad
del proyecto. Una buena formulacin (un objetivo especfico claro, nico a ser posible y
medible) y un uso adecuado del Marco Lgico sern bases insustitubles para una buena
evaluacin ex post o de resultados.
2. Conviene interrelacionar bien el Ciclo de Gestin de los Proyectos y el Ciclo de
Evaluacin, de forma que se influyan y retroalimenten mutuamente.
3. No hay evaluacin digna de resultados sin una lnea de base inicial. Luego todo
proyecto debe incorporar en su formulacin cmo ser evaluado y cmo ser recogida
la informacin necesaria. Esta ser la mnima imprescindible para satisfacer las
caractersticas de: veracidad, disponibilidad, razonablemente costosa y oportuna.
4. Se recomiendan las evaluaciones mixtas, para sumar los beneficios del seguimiento
interno con la experiencia y formacin especfica de consultores externos que aporten
independencia. De esta forma el coste de la evaluacin se atena.
5. Es conveniente considerar la creacin de equipos evaluadores estables dentro de los
departamentos de proyectos de las ONGD, as como un comit de evaluaciones que
determine la prioridad de acciones a evaluar y realice de forma estable y continua el
ciclo de la evaluacin.
6. Evaluar es ms un arte que una ciencia. Dadas las caractersticas de los proyectos de
desarrollo que suelen realizar las ONGD, la evaluacin tendr un anlisis
prevalentemente cualitativo, sin menospreciar la utilidad y objetividad del cuantitativo.
Interesa ms detectar los procesos exitosos de desarrollo pero medir sus resultado e
impactos aporta informacin que facilita la comparacin.
238
238
Vase por ejemplo Madaus et al. (1988a); Carballo (1990); Stufflebeam y Shinkfield (1993).
239
calidad de una evaluacin del The Joint Comittee on Standards Evaluation para que
sirvan de complemento y comparacin a los del CAD2.
Comencemos por el breve recorrido histrico. Siguiendo a Madaus, Stufflebeam y
Scriven (Madaus et al.1998b), se pueden distinguir seis etapas o eras en la historia de la
evaluacin.
1.1.
Gran Bretaa y Estados Unidos fueron los pases pioneros en evaluar la calidad de las
escuelas y los programas sociales, lo que dio lugar al nacimiento de sociedades de
investigacin social, que enviaban inspectores a los centros sociales y escolares con el
fin de formular informes evaluativos.
En 1845, en Boston, se realiza la primera evaluacin emprica de un centro educativo,
con exmenes escritos y puntuados, reemplazando a las pruebas orales.
Pero en seguida se politiz la evaluacin, pues las calificaciones de cada colegio
fueron usadas contra aquellos profesores que se oponan a la abolicin del castigo
corporal.
Entre 1887 y 1898 Joseph Rice realiz la primera evaluacin formal de un programa
educativo en Amrica, no encontrando diferencias significativas entre los alumnos
capaces de deletrear bien, practicando ms de 200 minutos semanales, y aquellos que
dedicaban a esta tarea poco ms de 10 minutos. Este resultado condujo a una revisin
profunda de los mtodos de enseanza de deletreo. Hay que resaltar el enfoque
cuantitativo dado a este primer ejercicio de evaluacin. Este enfoque de Rice ser
seguido y desarrollado por Lindquist y Campbell en estudios durante los aos cincuenta
y sesenta.
Vase DAC (2006). Los estndares de calidad de la evaluacin del CAD, an en fase de prueba, se
encuentran traducidos por la DGPOLDE y disponibles en su sitio web.
240
1.2.
Como indica el ttulo de su obra A Rationale for Program Evaluation. Cfr. Tyler (1988).
1.4.
241
Durante esta cuarta era, la principal preocupacin en los centros educativos ya no era la
evaluacin o las cuestiones de calidad o rendimiento, sino la de olvidar la guerra y
educar para el bienestar. Los colegios se dotan de servicios de comedor, psiclogos,
pedagogos, servicio mdico y todo tipo de atenciones. La evaluacin queda relegada por
la creacin de un ambiente optimista, al tiempo que se recogen numerosos datos para
justificar peticiones crecientes de gasto pblico educativo, no sometidas a ningn
control de calidad.
Permanecen las tcnicas de test como instrumento evaluador, y la evaluacin es
concebida como la comparacin entre objetivos y resultados, al ms puro estilo
tyleriano.
En 1.947, Tyler y Lindquist fundan el Educational Testing Service donde se realizan
numerosas investigaciones sobre estadstica y medicin, apareciendo los problemas de
la constancia de la recogida de datos, su no contaminacin, el problema del azar, la
estabilidad y otras dificultades de orden estocstico.
1.5.
242
En 1.971 se crea el Comit Phi Delta Kappa, del National Study Committee on
Evaluation, que constata la debilidad de los mtodos de evaluacin usados hasta la
fecha. En esta poca aparecen las aportaciones de Scriven, Stake y Stufflebeam,
innovadoras y que ofrecen resultados. La atencin a los resultados imprevistos o efectos
indeseados comienza a ser tenida en cuenta. Evaluar pasa a ser entendido como una
forma de juicio de valor (moral) de los resultados de un programa.
1.6.
243
244
2.
2.1.
CONSIDERACIONES PREVIAS.
Un tratamiento del ACB en algunos de los manuales de evaluacin: Thompson y Fortess (1980);
Levin (1985); Rossi y Freeman (1989:390-414); Cohen y Franco (1993:171-281); Pichardo
(1997:48-63); Weiss (1998:244-250); Dale (1998:46-47 y 114-116); MAE (2001:81-106).
Ejemplos prcticos de proyectos medioambientales se ofrecen en Azqueta (1994). Clements
(1995) orienta el ACB desde la ptica del desarrollo de las capacidades, segn la lnea de A. Sen,
siendo crtico con las formas de emplear este modelo del Banco Mundial o de la Agencia
Norteamericana USAID.
245
246
Cohen y Franco (1993:189-191). Vanse tambin las consideraciones sobre el tema en Azqueta
(1994).
247
valorar este activo como uno ms y tasarlo en funcin del riesgo asumido. La
incapacidad de calibrar los riesgos, sobre todo los pequeos, sujetos a distribucin
probabilstica, por parte del individuo y la comunidad, hace que esta va se presente
tambin como insatisfactoria.
Tomamos as una rpida conciencia de las limitaciones inherentes a este enfoque.
El otro problema principal al que se enfrenta el ACB es la actualizacin de los valores
monetarios considerados para poder realizar la comparacin en el momento presente. Es
el problema de la tasa de descuento, que est ligado a las consecuencias de un
escenario econmico de preferencia por la inmediatez6. Los tres mtodos ms usados
en este problema son el clculo del valor actual neto (VAN), la tasa interna de retorno
(TIR) y la relacin beneficio-coste.
El clculo del valor actual neto, permite discernir si un proyecto es rentable, lo que
posibilita elegir entre proyectos que sean excluyentes entre s. La rentabilidad del
proyecto vendr dada por la diferencia entre el valor actual del flujo de ingresos
previstos y el valor actual de los gastos necesarios. Recordemos que el valor actual de
un activo, en su expresin ms sencilla, viene dado por:
VAN = Rt/ (1+i)t
siendo Rt = ingreso neto del ao t; i = tasa de descuento.
Con un simple clculo financiero (inters compuesto), pueden obtenerse los ingresos
actualizados de los varios aos que dure el proyecto. Siempre que el VAN sea positivo,
sabremos que el proyecto ser econmicamente rentable, pero nada ms.
248
249
La gran ventaja que tiene este modelo es que no necesita reducir a unidades monetarias
todos los costes y beneficios que el proyecto ha conllevado. Utiliza precios sombra,
jerarquiza opciones y aporta una relacin o razn coste-efectividad. Es decir, permite
comparar diferentes proyectos que generan los mismos o semejantes productos y emitir
un juicio sobre cul es ms eficiente. Por ello, es un modelo muy valioso para las
evaluaciones previas o de viabilidad, en las que consideramos diversas alternativas.
Siguiendo a Cohen y Franco podemos establecer las siguientes etapas para elaborar
un ACE8:
250
SNTESIS Y VALORACIN.
Condiciones previas:
Evaluar es:
Analizar la viabilidad
financiera del proyecto.
Intereses predominantes:
Los econmico-financieros.
Cuestiones principales:
rentabilidad
251
Mtodos ms comunes:
Comparacin de beneficios
mediante el VAN y la TIR.
Diseo de evaluacin:
Economtrico.
Herramientas predominantes:
Cuantitativas, financieras.
Ventajas:
la
costes
eficacia
252
3.
3.1.
CONSIDERACIONES PRELIMINARES.
253
10
254
Recoger datos sobre los indicadores para aquellos que participan en el proyecto
o programa y para un grupo de control equivalente que no haya participado.
Analizar los datos sobre los participantes y sobre los controles en funcin de los
fines y objetivos iniciales del programa.
11
Citado tambin en Ballart (1992:95). La cursiva, que quiere aportar un orden lgico, es propia.
Notar como la secuencia es muy semejante a la desarrollada ms extensamente en el captulo
anterior.
255
Resultados Grado
influencia
de
IMPACTOS
de
PERTINENCIA
FACTORES
EXTERNOS
EFECTOS
OUTPUTS
Ejecucin
SOSTENIBILIDAD
IMPLEMENTACIN EFICIENCIA
DE TAREAS
INPUTS
EFICACIA
PLAN OPERACIONAL
Diseo
ORGANIZACIN
Del
Proyecto
PLAN ESTRATEGICO
ENTORNO
OBJETIVOS
En efecto, si es verdad que en este modelo la tarea central es especificar los objetivos en
trminos claros y precisos y crear indicadores cuantitativos de calidad que nos permitan
medir los niveles de logro alcanzados, tambin es cierto que existen no pocos problemas
256
DIFICULTADES DE DISEO.
257
258
Por su parte, Shortell y Richardson (1978) ofrecen unas tiles dimensiones a tener en
cuenta para lograr formular objetivos con alta pertinencia y elevado rigor. Por su
inters, las reproducimos en el Cuadro 5.2.
Algunas de las cuestiones que aparecen en esta gua, nos permiten profundizar en las
dificultades de diseo que estamos analizando. En concreto vamos a exponer las
relacionadas con la ordenacin de los objetivos, su multiplicidad y las consecuencias de
efectos imprevistos.
12
259
1.
Poblacin-objetivo.
Para qu grupo especfico se hace el programa? Cules son los lmites o fronteras
(geogrficas, de edad, de nivel de renta...) del grupo-objetivo?
4.
Cunto tiempo tardarn en producirse los efectos del programa? Se trata de efectos inmediatos
o efectos a medio-largo plazo?
5.
Cunto tiempo durarn los efectos del programa o proyecto? Ser necesario mantener la
intervencin para que se mantengan los efectos?
7.
Multiplicidad de objetivos.
260
261
Puede resultar til recordar este modelo a la hora de analizar y jerarquizar los
distintos objetivos y acciones que se pretenden. Pero esta multiplicidad
constituye, en s, otro problema.
d) Multiplicidad de objetivos.
Ya he venido insistiendo de manera reiterada en la conveniencia de que cada
proyecto tenga un solo objetivo especfico, pues resulta menos difcil evaluar un
solo logro concreto que todo un programa integrado de acciones que pueden
estar relacionadas o no, y ser controlables o no. En todo caso, cuando se
encuentren proyectos de mltiples objetivos deber procederse a:
-
262
que pueden modificar de forma sustancial el juicio evaluativo del proyecto. Por
ejemplo, un programa de formacin profesional para jvenes pre-delincuentes,
puede no tener ningn resultado sobre el objetivo de incrementar su
empleabilidad, pero puede modificar sustancialmente su autoestima y sus
relaciones familiares y sociales, aunque se no haya sido el objetivo formulado.
Hasta aqu he descrito unas cuantas dificultades relacionadas con el diseo de la
evaluacin y la formulacin del proyecto. Paso ahora a estudiar las dificultades que
pueden presentarse en el momento de la aplicacin de este modelo de evaluacin por
objetivos.
3.3.
DIFICULTADES EN SU APLICACIN.
Tres son las que voy a destacar: las exigencias relacionadas con la validez, la calidad de
los indicadores y la aplicacin del diseo experimental, que exige un grupo de control.
a) La validez interna y externa.
Para que un proyecto sea considerado cientficamente vlido, segn las pautas de
este modelo, debe resolver dos cuestiones fundamentales, conocidas como la
validez interna y la validez externa.
La validez interna determina hasta qu punto los efectos del proyecto han sido
debidos realmente al programa ejecutado y no a otros factores.
La validez externa expresa hasta qu punto los resultados del proyecto
particular pueden ser generalizados a otras situaciones o proyectos similares.
La gran dificultad que plantea la cuestin de la validez es la aplicabilidad del
principio de causalidad a las acciones de desarrollo humano, como se ha visto en
el captulo tercero. Habr que demostrar que el proyecto (variable
independiente) ha sido el causante directo de los cambios observados (variables
dependientes). Para poder afirmar esta relacin causa-efectos ser preciso
conocer y controlar la influencia de factores externos al proyecto que pudieran
explicar por s solos las variaciones observadas. En puro rigor, habra que
aislar, como si de un laboratorio se tratara, a los grupos y realidades humanas
263
13
264
14
Para una descripcin ms en profundidad de este modelo, sus dificultades y cmo poder
solventarlas, vase Larr (2007b).
265
En segundo lugar, puede plantear problemas de tipo tico, pues se priva al grupo
de control de los servicios y beneficios que se prestan al grupo experimental.
Habr que poderlo justificar seriamente.
En tercer lugar, existen peligros de contaminacin del grupo de control, si no
se impide y se vigila el contacto con poblacin del grupo experimental, pues
quedara invalidado en su finalidad.
En cuarto lugar, podemos imaginar los altos costes que supone crear lneas de
base, intermedias y finales de datos fiables y las mismas variables, para las dos
poblaciones, la de control y la experimental.
Hasta aqu las dificultades relativas a la aplicacin y puesta en prctica del modelo de
evaluacin por objetivos.
Cabra aadir algunas limitaciones ms, como la falta de garanta de que se generar
informacin til para los agentes de desarrollo y que se practicar una retroalimentacin
eficaz, o la exigencia de que slo sea aplicable a evaluaciones ex post para proyectos
terminados, y no valga para evaluaciones sobre la marcha que permitan corregir
desviaciones, o por ltimo- cuestionar su misma lnea de flotacin argumental al
considerar si el rendimiento de los insumos utilizados en un proyecto es el criterio
ltimo que debe utilizarse en estos contextos. De alguna manera estas limitaciones van a
ir apareciendo a lo largo de los epgrafes que restan de este captulo, cuando
presentemos modelos alternativos a este paradigma.
Slo nos resta tratar de sintetizar lo expuesto hasta aqu, para visualizar de forma
conjunta los principales rasgos de este modelo. Es lo que ofrecemos en el Cuadro 5.3.
266
Necesidades previas:
Evaluar es:
Intereses predominantes:
Planificadores
y
formuladores
de
proyectos. Organismos cofinanciadores y
agentes (ONGD) del Norte.
Cuestiones principales:
Mtodos ms comunes:
Diseo de evaluacin:
Cientfico-experimental.
Herramientas predominantes:
Tcnicas cuantitativas.
Ventajas:
Inconvenientes:
prctica
del
diseo
267
4.
4.1.
CONSIDERACIONES PREVIAS.
268
As pues, podemos contraponer los trminos de evaluacin racional-cientficacuantitativa-sumativa del modelo clsico por objetivos, a los de pluralista-naturalistacualitativa-formativa del grupo de modelos que vamos a exponer a continuacin.
El primer modelo que se distanci de la filosofa y presupuestos del modelo por
objetivos fue el de Scriven (1973), que l denomina, precisamente, evaluacin libre de
objetivos.
Michael Scriven es un filsofo cientfico de formacin matemtica, que ampla estudios
en lgica simblica (Universidad de Melbourne) y en filosofa de la Ciencia
(Universidad de Oxford), dedicndose desde los aos cincuenta a la docencia e
investigacin en varias universidades estadounidenses y en Australia.
Scriven propone desplazar el centro de la evaluacin desde los objetivos hacia las
necesidades, ya que piensa que los primeros pueden estar mal definidos, ser
reformulados a lo largo de la ejecucin del proyecto o incluso inadecuados o inmorales
para el contexto cultural en el que se realiza la accin. Propone as una desviacin desde
el ngulo del productor o formulador del proyecto, al ngulo del consumidor o
beneficiario de la accin y sus necesidades.
Adems la evaluacin debe buscar efectos reales y no supuestos, sin prescindir de los
efectos indeseados o secundarios y no previstos, y para ello cree que lo mejor que puede
hacer el evaluador es desconocer los objetivos iniciales para no dejarse influir por ellos.
As, el evaluador debe generar dos tipos principales de informacin: valorar
todos los efectos realmente producidos y analizar las necesidades de los
beneficiarios para valorar as mismo la importancia de dichos efectos.
Vemos que el trmino clave es ahora valorar o juzgar acerca del valor de las cosas,
porque esa es la misin de la evaluacin en este modelo. Ya no interesa tanto medir o
269
Vemos que hay grandes diferencias con los planteamientos del modelo clsico por
objetivos. Ahora los evaluadores deben ser capaces de utilizar instrumentos cualitativos
para conocer no slo el texto o contenido del proyecto, sino el contexto donde se
realiza, para ser capaces de emitir juicios de valor justificables sobre el valor de lo
realizado, ms que si las metas fueron alcanzadas o no. El valor de los resultados viene
determinado por las necesidades de sus beneficiarios o consumidores y usuarios. Se
miden entonces ms estas necesidades y su eficiencia frente a posibles alternativas que
la eficacia o pertinencia de la formulacin de los objetivos previstos. No hay que
limitarse por los objetivos o metas, sino que incluso stos son objeto de valoracin y
los impactos no estn limitados a lo formulado previamente.
Una vez definido el concepto de evaluacin en este modelo, podemos pasar a describir
sus principales caractersticas.
15
270
4.3.
16
271
272
17
Para un desarrollo interesante del enfoque de las necesidades pueden consultarse las obras de
Doyal y Gough (1994) o Riechmann (1998). Un fuerte impulso a esta teora del desarrollo fue el
informe de la O.I.T. (1976) que sintetiza y comenta Bustelo (1991:45-64) y (1998:69-78). Para el
pensamiento de Streeten puede consultarse Streeten (1972) y Streeten et al. (1981).
18
4.4.
273
19
274
1. DESCRIPCIN.
10. EL PROCESO.
2. EL CLIENTE.
11. RESULTADOS.
3. ANTECEDENTES Y CONTEXTO.
12.POSIBILIDAD DE GENERALIZACIN.
4. RECURSOS.
13. COSTES.
5. FUNCIN.
14. COMPARACIONES.
6. SISTEMA DE DISTRIBUCIN.
15. SIGNIFICADO.
7. EL CONSUMIDOR.
16. RECOMENDACIONES.
17. EL INFORME.
9. NORMAS.
18. LA METAEVALUACIN.
Fuente:
Scriven
(1988:258-260).
Traduccin
adaptacin
tomada
de
Stufflebeam
Shinkfield (1993:349-351).
Descripcin. Se trata de lograr la mayor precisin posible sobre el objeto a evaluar, por
lo que hay que incluir todas las dimensiones del proyecto: sus componentes, sus
relaciones y, sobre todo, que recoja el consenso de los agentes de la cadena de
cooperacin: ONGD, organismos cofinanciadores, organizacin local u ONG del Sur, y
beneficiarios. Qu entiende cada uno por evaluar? Cules son sus intereses? La
evaluacin comienza con la descripcin o concepcin de quien la encarga (el cliente),
pero debe terminar con la descripcin que haga el evaluador, fruto de la escucha de los
diversos actores.
El cliente. Quin ha encargado la evaluacin? Puede ser igual o distinto que el
iniciador o de la investigacin, igual o distinto que el promotor (por ejemplo la AECID
o la DGPOLDE para el caso espaol), o puede ser igual o distinto que su inventor (el
planificador del proyecto, el creador de un modelo nuevo de evaluacin o cualquier
otro).
275
276
Las necesidades y los valores. Hay que considerar todo el conjunto de los valores
puestos en juego, ya sea de los afectados en toda la cadena del proyecto, como de los
potencialmente influidos por el mismo. Dentro de los valores, Scriven incluye deseos,
necesidades, normas sobre el mrito de las acciones, ideales juzgados o supuestos, y las
metas u objetivos del programa si se hace evaluacin por objetivos. Las consideraciones
ticas de todas estas valoraciones no deben ahorrarse.
Normas. Scriven se interroga: Existen normas preexistentes y objetivamente valoradas
acerca del mrito o valor de la ejecutado, que deban aplicarse o tenerse en cuenta? A
nuestro parecer el fin de este elemento es poder jerarquizar en una escala los valores
preexistentes para que sirvan de marco de referencia a la evaluacin.
El proceso. En este caso hay que considerar las implicaciones legales, polticas,
estticas, culturales, administrativas, cientficas, de promocin o de otro orden, de todos
los afectados por el proceso evaluativo. Podemos encontrarnos con dilemas ticos o
situaciones complicadas por los resultados de una evaluacin en cualquiera de los
campos arriba mencionados.
Resultados. El acento de Scriven es extender el anlisis de resultados a los efectos
indirectos o no pretendidos. Puede realizarse de forma integral, con una matriz de
efectos que considere variables como las siguientes: poblacin afectada, tipo de efecto
(cognitivo, afectivo, sanitario, cultural, social, medioambiental...), tiempo de
sensibilidad del efecto (inmediato, a medio plazo, al final del proyecto, a largo plazo),
duracin prevista del efecto, componentes principales del efecto.
Posibilidad de generalizacin. Se desea determinar el grado de exportacin de estos
efectos a otras personas, lugares, culturas, tiempos y en qu condiciones se prev que se
producirn efectos similares.
Costes. Se tienen en cuenta tanto los dinerarios como los no pecuniarios, los directos y
los indirectos.
Comparaciones. Hay que considerar las alternativas o realizar el anlisis de eficiencia.
A menudo la deteccin del competidor crtico puede ser la aportacin ms reconocida
al evaluador, por dolorosa que sea. El principal freno en este sentido es la tendencia a
277
278
4.5.
Como filsofo cientfico, Scriven est preocupado por acceder de la forma ms perfecta
posible a la realidad, y describirla de una manera cientfica. En este camino, descubre
que hay cuatro ideologas dominantes en el actual panorama de las evaluaciones que l
trata de desenmascarar (Scriven 1987 y 1988:230-240).
1) La ideologa separatista.
La primera de estas ideologas es la separatista. La denomina as porque trata de separar
exageradamente el sujeto y el objeto de conocimiento cuando se hacen evaluaciones.
Parece que el evaluador es alguien totalmente independiente y externo que se dirige a
una realidad concreta objeto de evaluacin, y observndola, capta neutralmente su valor
y lo juzga. Esto no es as de ninguna manera. Scriven lo expone diciendo que la
evaluacin es una actividad autorreferente (self-reference), es decir, no termina en s
misma, sino que tambin es objeto de evaluacin, como la metaevaluacin pretende.
Pero Scriven detecta muchos recelos a que los propios evaluadores dejen que sus
trabajos sean evaluados, siendo precisamente esta voluntad una marca de fbrica o
garanta de que el trabajo realizado ha sido de calidad. A esta tendencia perversa de los
recelos a ser evaluados, Scriven la denomina valorfobia (valuephobia). Frente a esta
reserva, propone que las evaluaciones sean hechas lo menos tendencialmente posible, de
forma que pueda someterse a examen el trabajo realizado conforme a normas de
comparacin reconocidas universalmente.
A nuestro juicio esto no se sostiene, pues quin determinara estas normas universales
de calidad evaluadora? Entramos en un proceso de dinmica constante que podramos
llamar la meta-meta-evaluacin, y que creemos que es lo que quiere expresar Scriven
cuando dice que la evaluacin es una actividad autorreferente. Nunca se cierra sobre s
misma, sino que permanece en constante dinamismo, como la propia estructura de la
realidad20.
20
Esta concepcin la desarrolla de forma muy sugerente Zubiri en su obra titulada precisamente
Estructura dinmica de la realidad. Cfr. Zuiri (1989).
279
conductas humanas.
2) La ideologa positivista.
La ideologa positivista, tan presente en crculos cientficos a lo largo del siglo, es la
reaccin exagerada a la valorfobia. Deudores de un planteamiento riguroso pero
excluyente de lo que es la ciencia, desarrollado sobre todo en el entorno del crculo de
Viena, los positivistas pretenden realizar evaluaciones sin ninguna contaminacin
axiolgica. Los valores deben dejarse aparte por el evaluador, quien se acercar a la
realidad del proyecto de una forma neutral y asptica, para describir los resultados
reales del proyecto ejecutado.
Scriven ataca frontalmente esta mentalidad, pues supone un rechazo total a la
autorreferencia de la evaluacin y de la propia ciencia, adems de una excusa para
reducir la ansiedad que provoca la valorfobia. Mientras la ideologa separatista
rechaza la naturaleza autorreferente de la ciencia o de la evaluacin, la ideologa
positivista rechaza la naturaleza evaluativa de la ciencia (Scriven 1988:232). Para l,
21
280
281
282
seran documentos literarios que expresan algunas de ellas, pero que nunca podrn ser
usadas para tomar decisiones.
Frente al relativismo, Scriven aconseja sin ser tan crtico como los positivistasmantener viva la tensin hacia la objetividad de la realidad, aunque sta sea tan rica que
no pueda ser descrita exhaustivamente. Como mantienen comentadores suyos, aunque
puede haber una compleja realidad ms all de nuestra capacidad presente de
comprender y describir a fondo, slo nos engaaremos a nosotros mismos si creemos
que no existe (Stufflebeam y Shinkfield 1993:356).
Terminamos el comentario a la crtica a las ideologas realizado por Scriven,
representndolas grficamente en funcin de un centro: la valorfobia.
Positivismo
4.6.
Separatismo
VALORFOBIA
Administrativa
Relativismo
Como al final de cada exposicin del modelo, ofrecemos un cuadro sinttico de las
principales aportaciones que ofrece a un ejercicio de evaluacin, incluyendo una
valoracin personal sobre su conjunto.
Cuadro 5.5. Caracterizacin del modelo libre de objetivos.
Evaluar es:
Intereses predominantes:
Cuestiones principales:
283
valores?
Mtodos ms comunes:
Diseo de la evaluacin:
Herramientas predominantes:
Ventajas:
Inconvenientes:
284
5.
EL MODELO NATURALISTA.
5.1.
CONSIDERACIONES PRELIMINARES.
de
sus
limitaciones,
al
final
reconoca
cierta
compatibilidad
285
Guba y Lincoln consideran que todo el paradigma clsico, racionalista, que haba
servido de orientacin a los primeros modelos de evaluacin educativa, como los de
Tyler o Stake, debe ser superado abiertamente22.
Un paradigma, en sus propias palabras, es un sistema axiomtico caracterizado por sus
diferentes elementos o supuestos al fenmeno al cual se quiere investigar (Guba y
Lincoln 1981:311). Recordemos que un axioma es aquella proposicin lgica que no es
demostrable o es aceptada sin demostracin, por convenio o prctica, y que sustenta
toda una estructura lgica o sistema proposicional. Los Elementos de geometra de
Euclides o la Lgica segn more geomtrico demostrata de Spinoza, son ejemplos
clsicos de construcciones axiomticas en el campo de las ciencias exactas o la
filosofa23.
De entrada, Guba y Lincoln (1982), ya exponen tres crticas de fondo al paradigma
racionalista.
En primer lugar, consideran que no es aplicable a las ciencias sociales, al estar en un
campo donde las elecciones y controles estocsticos son casi imposibles, como
muestran los escasos resultados logrados en las evaluaciones realizadas hasta entonces
en hospitales, colegios o crceles. En estos terrenos, la experiencia sigue siendo la gua
de accin ms tenida en cuenta.
En segundo lugar, al estar basado en una epistemologa cientfica positivista se
muestra poco til e ignorante de sus propias limitaciones, como el principio de
incertidumbre de Heisenberg pone de manifiesto. En sus palabras, el positivismo es
esencialmente analtico, reduccionista, empiricista, asociacionista, reactivista,
unilateral y monista (Guba y Lincoln 1982:312).
En tercer lugar, el paradigma racionalista se ha revelado inservible, al estar basado en
unos axiomas o supuestos que no son aplicables a la investigacin social y
22
23
286
NATURALEZA DE LA
REALIDAD
fragmentaria.
holstica.
LA RELACIN
INVESTIGADOR /
Independiente.
INVESTIGADO
Interdependiente. (Mutua
influencia)
NATURALEZA DE LAS
Generalizaciones libres de
AFIRMACIONES
enunciados individuales o
enunciados centrados en
diferencias.
ATRIBUCIN Y
24
Una extensa comparacin entre diferentes paradigmas la ofrecen los autores en Guba y Lincoln
(1994).
EXPLICACIN DE LOS
relaciones de precedencia o
relaciones interactivas no
HECHOS
simultaneidad en el tiempo,
causales, no manipulables
manipulables, probabilsticas.
externamente, plausibles.
Sin valores.
Encuadrada en valores.
287
288
VARIABLES DE CONTROL
VERACIDAD:
VALIDEZ INTERNA
CREDIBILIDAD
APLICABILIDAD:
VALIDEZ EXTERNA
TRANSFERENCIA
CONSISTENCIA:
FIABILIDAD
DEPENDENCIA
NEUTRALIDAD:
OBJETIVIDAD
CONFIRMACIN
Frente a la validez interna del paradigma cientfico, ellos proponen lograr que los datos
recopilados y las conclusiones a las que se lleguen sean crebles. A travs de una
presencia prolongada en el lugar que se evala, de una observacin persistente y un uso
adecuado de tcnicas cualitativas, a travs de la triangulacin de datos recogidos, se
podr llegar a la sensacin de que el estudio realizado es razonablemente creble, sin
pretender absolutizar afirmaciones de validez interna.
Frente a la validez externa o universalizacin de los resultados, Guba y Lincoln ponen
el nfasis en lo condicionante que son los contextos en los que se evala. Proponen
25
289
290
PARADIGMA CIENTFICO
PARADIGMA NATURALISTA
CARACTERSTICAS GENERALES
Tcnicas prevalentes:
Cuantitativas
Cualitativas
Criterios de calidad:
Rigor
Relevancia, pertinencia
Fuente de la teora:
A priori
Cuestin de la causalidad:
Puede x causar y?
Proposicional
Proposicional y tcito
Reduccionista
Expansionista
Objetivo o finalidad:
Verificacin
Descubrimiento
CARATERSTICAS METODOLGICAS
Instrumento:
Durante y despus
investigacin
Diseo:
Preconcebido
Emergente
Estilo:
Intervencin
Seleccin
Localizacin:
Laboratorio
Naturaleza
Tratamiento:
Estable
Variable
Unidades de anlisis:
Variables
Modelos
Elementos contextuales:
Controlarlos
Inducir su interferencia
de
la
5.3.
291
Para Guba y Lincoln, mrito (merit) y valor (worth) tienen connotaciones distintas y es
til diferenciarlas, aunque ambos trminos sean medidas del valor (value) de un objeto
(un proyecto, para nuestro caso)26.
El mrito es la apreciacin ms objetiva del valor, su valor intrnseco, ms permanente,
al no estar determinado por el contexto donde se aprecia.
Por ejemplo, la belleza del oro, la elegancia y coherencia interna de un modelo
matemtico o la formulacin y lgica interna de un proyecto de desarrollo, tienen mrito
independientemente de donde se siten las coordenadas para su determinacin.
Pero tambin es cierto que el valor del oro se cotiza diariamente en los mercados
internacionales, los modelos matemticos pueden ser muy poco prcticos o aplicables a
algn tipo de fenmeno real, y que un proyecto impecablemente formulado puede no
haber contado nunca con la opinin, inters o demanda de sus beneficiarios, por lo que
la apreciacin positiva del mrito se vuelve negativa en cuanto a su valor.
De esta forma, el valor queda determinado por el contexto, es relativo y variable.
Podramos establecer cierta analoga con los conceptos de la investigacin pura, avance
del saber en cualquier disciplina, y la investigacin aplicada, o el grado en que estos
avances permiten aplicaciones prcticas que mejoran el bienestar de los hombres,
animales o plantas.
Es interesante caer en la cuenta de esta diferenciacin a la hora de evaluar o juzgar
proyectos de desarrollo. Ya hemos puesto el ejemplo de proyectos de alto mrito en su
identificacin y formulacin, que podran ser juzgados de forma muy positiva, pero que,
atendiendo a su valor, no lo seran tanto o de ningn modo.
26
GUBA y LINCOLN (1981) cap.3, pp.39-52. Los propios autores reconocen antecedentes en las
diferencias propuestas por Tyler para evaluar currcula acadmicos de forma externa, segn el
xito en la formacin de alumnos, o de forma interna, al valorar la coherencia lgica de los
programas. Scriven, por su parte, tambin habla de mrito (merit) y valor (value), pero Guba y
Lincoln prefieren aprovechar la riqueza de la lengua inglesa al distinguir worth de value para
292
referirse de forma diversa al valor de un objeto. Piensan que as ganan en claridad expositiva.
GUBA y LINCOLN (1981) p.40.
293
B. ALTO MRITO
ALTO VALOR
D. BAJO MRITO
ALTO VALOR
294
piloto que ha generado nuevas formas de cooperacin eficaz en las cuales anteriormente
no se crea y por eso se estimaban de bajo mrito.
Otra aportacin que recogen Guba y Lincoln, de las investigaciones promovidas por
Scriven, es la clasificacin de las afirmaciones y juicios evaluativos en funcin del tipo
de variable de valor estimada como central. Distinguen cuatro clases diferentes:
Afirmaciones sobre los ideales. Estas suelen tener un nivel muy bajo de
utilidad. Afirmar por ejemplo que un proyecto tuvo un fuerte impacto en la
lucha contra la erradicacin de la pobreza, no hace sino mostrar el alto nivel de
manipulacin y retrica con que una evaluacin puede ser empleada.
Por ltimo, resulta significativa la relacin que ofrecen los autores entre este par
mrito/valor con el de evaluacin formativa/sumativa elaborado por Scriven.
Rechazando una relacin lineal que asociara la evaluacin formativa con el mrito y la
sumativa con el valor, proponen una relacin ortogonal entre las cuatro variables y
configuran un cuadro como el que reproducimos aqu, adaptndolo interesadamente a
295
TIPO DE EVALUACIN
FORMATIVA
MRITO
VALOR
al contexto local.
Objetivo
principal:
tratar
resultados
del
comunitarios.
de
comunidad.
Fuente: Elaboracin propia a partir del modelo expuesto en Guba y Lincoln (1981:50).
valoracin:
sentidas
por
las
la
296
5.4.
SISTEMATIZACIN
NATURALISTA.
DEL
DISEO
DE
EVALUACIN
27
Se sigue, principalmente, la propuesta de Guba y Lincoln (1985: cap.9, 221-249). Otro desarrollo
alternativo puede encontrarse en Guba y Lincoln (1989: cap.6, 156-183).
297
298
expuesto ms arriba. El enfoque elegido permite establecer los lmites del estudio y
aporta los criterios de seleccin de la informacin, para ser recogida o descartada.
Pero es importante recordar que en una evaluacin naturalista, estos lmites nunca son
fijos y que pueden ser variados. Una tpica investigacin naturalista lo har al
evolucionar entre las dimensiones terica, poltica o evaluativa en sentido estricto que
se han definido en el encuadre preliminar. Por tanto, los evaluadores naturalistas
comienzan con un enfoque particular en mente, siempre tenue, y lo van modificando a
medida que la informacin que van analizando les sugiere que lo hagan. Prefieren la
utilidad del enfoque y dejar que la propia naturaleza les conduzca en su anlisis, a fijar a
prioris como hace el paradigma cientfico-racionalista.
c) Determinacin de una relacin correcta entre el paradigma y el enfoque.
Se trata de comprobar que los fenmenos a evaluar se adaptan mejor al paradigma
naturalista que al convencional. Por ejemplo, ya citados ms arriba el caso de cmo la
geometra eucldea se adapta mejor al anlisis bidimensional de los fenmenos
terrestres, pero que la de Lobachevsky lo hace mejor a los fenmenos espaciales.
Puede ocurrir que el tipo de proyecto a evaluar tenga unas caractersticas tales que
convenga ser analizado bajo otro enfoque o paradigma, como alguno de los ya
expuestos hasta aqu en esta investigacin. De todos modos, conviene interrogarse
acerca de la complejidad de los fenmenos que incluye el proyecto, de la multiplicidad
de los grupos humanos intervinientes, de la interrelacin entre el evaluador y los grupos
meta y cmo sta afecta a los sesgos en las respuestas u observaciones, cul es la
importancia del contexto en el proyecto concreto o en qu grado los resultados de la
ejecucin del proyecto se vern determinados por los valores de los agentes.
Es obvio que todas estas variables aparecen, incluso a primera vista, con valores
diversos en un microproyecto de fondo rotatorio que en un programa agrcola integral o
en un proyecto de educacin informal para mujeres marginadas. El proyecto de
microcrdito puede analizarse bajo un punto de vista puramente de rentabilidad
financiera en el que usaremos un anlisis coste-beneficio, mientras que el proyecto
agrcola puede necesitar una evaluacin del mrito y valor, tanto sumativa como
299
28
Guba y Lincoln suelen repetir con insistencia en su obra el principio metodolgico de trabajar sin
condicionantes previos. Su repetida expresin es not knowing what is not known. Vase por
ejemplo Guba y Lincoln (1985:235 y 240). En relacin con este mismo tema, Mae Kelly (1987).
300
301
302
de una a otra. Es una descripcin flexible, en coherencia con todo el espritu del
modelo naturalista.
g) Determinacin de los instrumentos de anlisis.
El instrumento de anlisis tpicamente naturalista es el propio hombre. Es el instrumento
que inicia la investigacin evaluativa y el principal. Adems, el hombre organizado en
equipos. Estos presentan las ventajas de poder jugar varios roles durante la evaluacin,
integran varias perspectivas de valoracin, se componen de expertos multidisciplinares
que pueden seguir mltiples estrategias y combinar su experiencia metodolgica con
una especializacin en alguna herramienta cualitativa determinada. Adems, el grupo
permite cierto nivel de autocontrol y rigor interno a travs de triangulacin de
conceptos, dilogo o estudios paralelos entre los propios componentes del equipo. Por
ltimo, trabajar conjuntamente permite apoyarse en los momentos difciles de toma de
decisiones de alternativas sobre cmo debe seguir la investigacin naturalista o ante
situaciones de gran ambigedad que suelen ser frecuentes en este tipo de evaluaciones.
Su composicin concreta deber disearse en cada caso, pero siempre asegurando una
buena coordinacin entre sus componentes, cuya capacidad de consenso y dilogo ante
situaciones difciles y ambiguas sea muy alta y eficiente. Puede ser recomendable un
entrenamiento previo a la ejecucin de la evaluacin, una integracin previa como
equipo y una especializacin de cada componente en algn rol que ir a desempear o
en una herramienta que se utilizar con preferencia. La adaptacin cultural que deber
realizar el equipo evaluador naturalista debe ser tenida muy en cuenta y preverse una
adecuada preparacin y conocimiento previo de sus rasgos fundamentales.
h) Planificacin de la recogida de datos y formas de registrarlos.
En el modelo naturalista, los primeros datos de estudio proceden del anlisis
documental disponible y posteriormente se procede a la recogida de datos sobre el
terreno. Entre las variadas herramientas cualitativas que pueden utilizarse, Guba y
Lincoln exponen con mayor amplitud la entrevista, la observacin directa y la
informacin que proporciona la comunicacin no verbal. Reconocen cierta utilidad a las
tcnicas videogrficas o la grabacin de entrevistas, pero defienden un uso preferente de
303
las notas de campo tomadas directamente por el evaluador. Las dos caractersticas que
deben cumplir las tcnicas de recogida de informacin son fidelidad (que refleje
verdaderamente lo ocurrido) y una alta capacidad de ser estructurada.
i) Planificacin de los procedimientos de anlisis de los datos.
El principal aporte del diseo naturalista en este sentido es el de no considerar el
anlisis de datos como una fase aislada entre la recogida de datos y la redaccin del
posterior informe, sino que el anlisis de los datos se realiza de forma permanente,
permitiendo dar en cada momento el curso idneo a la evaluacin. Es el denominado
mtodo de la comparacin constante desarrollado por Glaser y Strauss desde 1967.
j) Planificacin de la logstica.
El evaluador naturalista considera de forma integral la planificacin logstica por ser
muy necesaria en su tipo de trabajo. Guba y Lincoln dividen esta planificacin en cinco
fases de la investigacin: logstica de la evaluacin considerada globalmente, logstica
sobre el terreno, dividindola entre las necesidades antes de las visitas, durante las
visitas y despus de ellas, y por ltimo, las necesidades materiales durante el cierre y
terminacin de la evaluacin29.
k) Planificacin del valor de verdad de las afirmaciones.
Ya hemos expuesto el contenido de esta fase en el apartado anterior. Se trata de
determinar la credibilidad, transferencia, dependencia y grado de confirmacin de las
afirmaciones que se van obteniendo en la evaluacin y de especificarlo en el informe
final. Es la forma de asegurar el control interno de calidad del proceso evaluativo, como
alternativa a los criterios de control racionalistas (validez interna y externa, fidelidad y
objetividad).
En conclusin, disear una evaluacin naturalista es algo muy distinto que disear una
evaluacin racionalista o de seguir los criterios estadsticos necesarios para garantizar
una cientificidad al trabajo realizado. La caracterstica fundamental del diseo
304
Seguramente esta obra de Guba y Lincoln sea la ms citada de estos autores y una de las
que sea ms veces incluida en los trabajos contemporneos de evaluacin. Es pues una
obra de obligada referencia32.
29
30
31
305
32
Por ejemplificar tres citas de alto inters donde aparece la referencia a esta obra y que ya hemos
comentado en este trabajo: MAE (1998a:90-91); CAD (1997:93); o Marsden et al. (1994).
33
306
34
Responsive Constructivist Evaluation. Guba y Lincoln (1989:38). Las bases del modelo fueron
adelantadas en su anterior obra, en la que exponen 17 principios bsicos de la evaluacin de cuarta
generacin: Guba y Lincoln (1987:209-216).
307
35
Vase Guba y Lincoln (1989:43). Este es uno de los puntos ms dbiles de la argumentacin
naturalista, cayendo en un pragmatismo y relativismo errneo. Sin la existencia de una verdad
ntica (Truth is a matter of consensus among informed and sophisticated constructors, not of
correspondence with an objetive reality p.44), la axiologa se vuelve relativista o
consecuencialista respecto al contexto y subjetivista respecto al valorante y, as, la evaluacin
nicamente podr aspirar a describir los valores confesados o reconocidos por cada sujeto en cada
contexto y cada proyecto. Como ya hemos expuesto ms arriba, Scriven critic este paradigma
relativista con anterioridad y dureza. No es el lugar para realizar una crtica matizada y en
profundidad a esta epistemologa y ontologa, pero baste, por ahora, comentar que la
autoexperiencia y autoconciencia humana, y la intersubjetividad por el lenguaje, permiten confesar
razonadamente un realismo moderado y rechazar este relativismo, por otra parte innecesario para
el fin de los autores, de superar las reducciones a que somete el paradigma cientificistaracionalista. Por ltimo, si no hay verdad objetiva, cul es el criterio para fundar el consenso,
cul es la base sobre la hacer avanzar el proceso hermenutico dialctico que ellos mismos
proponen? No habr un motivo ni para ceder, ni para argumentar a favor, ya que todo es pura
imagen mental de cada sujeto y por tanto, todas las percepciones y opiniones igualmente vlidas e
irrechazables.
36
El crculo dialctico hermenutico se desarrolla por los autores en el cap.5 de la obra, pp.142155. Bsicamente consiste en que el evaluador rene a diversos representantes de los agentes
involucrados y comienza por uno de ellos pidindole que exprese su posicin y valoracin del
proyecto realizado ante sus intereses, preocupaciones y pretensiones. Terminada su intervencin,
se le pide que seale a algn representante del grupo que l cree que su postura diferir de la suya
o puede criticarla. El segundo representante expresa su crtica y su propia valoracin del proyecto,
y seala un tercer representante que puede criticarle, y as sucesivamente. Al final, el evaluador
puede expresar tambin su valoracin, pero de forma que nunca quede como interpretacin
superior a las dems. Se combina as el proceso de las subjetivas interpretaciones de los
representantes (hermenutico), con un proceso dialctico que permite avanzar sobre consensos. El
crculo termina cuando se llega a un consenso bsico en torno a una o dos posturas, o cuando las
intervenciones ya son redundantes y no aportan nueva informacin al proceso.
308
Organizacin de la evaluacin.
3.
4. Desarrollo del crculo hermenutico dialctico entre los agentes, buscando acuerdos entre sus
pretensiones, intereses y preocupaciones (PIP).
5. Comprobacin y enriquecimiento de estos acuerdos introduciendo informacin adicional y
facilitando a los miembros de los grupos de intereses convergentes, alcanzar niveles superiores de
sofisticacin en sus afirmaciones, gracias a la incorporacin de esta informacin.
6.
7.
37
El desarrollo de cada paso, de forma extensa se expone en Guba y Lincoln (1989: cap.7,184-227).
8.
9.
309
Respecto al primer paso o momento, los autores consideran importante tratar los
siguientes acuerdos en el contrato inicial a firmar entre el cliente y el evaluador:
Crear un clima de mutua confianza que permita llevar a cabo los crculos
hermenuticos dialcticos.
Una breve lista de especificaciones tcnicas en las que incluir una aproximacin
del tiempo que se tardar, los agentes que se vern involucrados, presupuesto
aproximado y producto final a elaborar resultado de la evaluacin.
310
311
312
5.6.
313
A lo largo de las pginas anteriores se han expuesto los rasgos bsicos de la evaluacin
segn el modelo naturalista o de cuarta generacin. Queremos terminar esta seccin
recapitulando estos contenidos y presentando nuestra personal valoracin como hemos
venido haciendo con los modelos anteriormente expuestos.
Al final de la obra Fourth Generation Evaluation, Guba y Lincoln facilitan una sntesis
de los principales rasgos diferenciadores de su modelo de evaluacin (Guba y Lincoln
1989:253-265). Basndonos en ella vamos a recapitular lo esencial de su pensamiento.
Los principios fundamentales del modelo naturalista son siete:
314
38
En Guba y Lincoln (1987:216-219) puede encontrarse una breve explicacin de cada uno de estos
principios. Tambin en Guba y Lincoln (1989:253-256).
315
El evaluador acta ms como un relator o narrador, en igualdad de poder con todos los
dems.
Y tambin acta como juez, al ser el mediador o procurador del proceso dialctico del
consenso y la negociacin final.
Pero adems de estos tres papeles tradicionales, el evaluador de cuarta generacin
tambin acta a travs de nuevos roles: como colaborador de los procesos dialcticos,
no como controlador de los procesos externos; como profesor y aprendiz, no como
investigador o experto; como participante y oferente de una porcin de realidad, que es
su propia construccin, pero en igualdad de consideracin que todas las dems; y, por
ltimo, tambin es agente de cambio, no por sus recomendaciones finales expuestas de
forma superior a los dems, sino como elaborador de una nueva realidad ms informada
y sofisticada, que genera en s misma, inmediatas consecuencias para el cambio.
Todas estas consideraciones podemos sintetizarlas en el Cuadro 5.11.
Una vez sintetizados los principios ms destacados de este modelo de evaluacin, slo
resta ofrecer nuestra valoracin personal, bajo el formato comn que hemos ofrecido en
los otros modelos expuestos anteriormente, que queda expuesta en el Cuadro 5.12.
Queremos resaltar, no obstante lo dicho en la nota a pie 35, que el principal punto dbil
del modelo es de orden ontolgico y epistemolgico, al considerar la realidad desde un
relativismo exagerado, con una escisin errnea entre lo que Kant llamara los
fenmenos (o los hechos en s) y los noumenos (o los hechos para m). Fruto de una
defensa contra los supuestos positivistas, Guba y Lincoln exageran su postura y niegan
el acceso humano a la realidad y, por tanto, una base objetiva de conocimiento.
316
1.
317
318
Evaluar es:
Intereses predominantes:
Cuestiones principales:
319
Diseo de la evaluacin:
Herramientas predominantes:
Ventajas:
La combinacin de mrito/valor
evaluaciones sumativas/formativas.
Su relativismo epistemolgico
idealismo ontolgico.
el
320
6.
6.1.
CONSIDERACIONES PREVIAS.
321
Cuando en los aos setenta el movimiento evaluador estuvo en auge, sobre todo en los
Estados Unidos, se daban por supuesto dos consideraciones:
Pero estas suposiciones resultaron no ser ciertas y surgieron nuevos modelos que
centraron su atencin sobre estos dos problemas: la participacin de los interesados y
decisores y la utilizacin de las evaluaciones.
Stake elabor su modelo de evaluacin respondente (responsive evaluation) centrado
en los intereses e interrogantes de los clientes, que eran quienes encargaban y
financiaban las evaluaciones. Las entrevistas en profundidad con todos los participantes
en los proyectos y programas (la audiencia de la evaluacin), generaba un acervo de
informacin que posteriormente se someta a consenso40. Ya hemos visto cmo Guba y
Lincoln desarrollan este modelo y crean el naturalista, cuya caracterstica fundamental,
en este sentido, es la negociacin y participacin de todos los agentes.
M.Q. Patton ser el encargado de responder a la segunda necesidad. Elaborar un modelo
que especficamente atienda o acente el que sus resultados sern utilizados. Es el
39
Alvira (1991:28).
40
322
41
Patton (1978; 19973). Esta tercera edicin es una reelaboracin bastante amplia respecto a la
primera, con nuevos desarrollos y mayor madurez y actualizacin en los planteamientos. Aunque
conserve el ttulo original, prcticamente es una nueva obra.
42
43
En Patton (1978:275-281), el autor narra una entrevista en la que expone el caso de una evaluacin
de un centro educativo que apenas sirvi para su propia legitimacin y de la que ningn miembro
de la Administracin lleg a leer siquiera el informe ejecutivo completo. Una vez visto en el
sumario que la evaluacin era positiva en trminos generales, no se avanz ms. Esto mismo lo
pude escuchar en boca del Director de la Unidad de Evaluacin de los proyectos de desarrollo de
la Unin Europea (la entonces DG-VIII), Sean Doyle, quien en un seminario de la Universidad
Internacional Menndez Pelayo dedicado al tema, en julio de 1998- reconoci enviar anualmente
todos los informes de evaluacin programados y ejecutados por su unidad al Parlamento Europeo,
y nunca recibir comentario alguno, estando convencido que nadie los lea o los utilizaba.
6.2.
LA UTILIZACIN
EVALUACIN.
COMO
CRITERIO
323
PRINCIPAL
DE
LA
Notemos que nos resistimos a denominar a este enfoque modelo, pues el mismo autor
as lo reconoce:
El enfoque (approach) de la evaluacin centrada en la utilizacin combina
estilo y sustancia, actividad y ciencia, perspectiva personal e informacin
sistemtica (Patton 1978:290).
De forma general, las etapas por las que se constituye un ejercicio de evaluacin
orientada en la utilizacin son las siguientes:
324
Se identifican todos los usuarios potenciales de la evaluacin44. Para ello deben fijarse
claramente criterios de identificacin y criterios de pertenencia a la comisin de trabajo
que llevar a cabo la evaluacin. La propia comisin determina sus particulares normas
de funcionamiento, pertenencia y proceso de toma de decisiones.
Se identifican y determinan las cuestiones ms relevantes de la evaluacin. Se estiman
las fortalezas y debilidades de los paradigmas y modelos evaluativos posibles y se
decide sobre el diseo final de evaluacin que desea realizarse, porque ser el ms til
para ser utilizado posteriormente, a juicio de la comisin de trabajo.
Se seleccionan los mtodos de generacin de la informacin: cuantitativos o
cualitativos, hipottico-deductivos u holstico-inductivos, ms objetivos o ms
subjetivos, ms centrados en la fidelidad a los datos o en la validez, diseos fijos o
flexibles y dinmicos. Consideradas las alternativas se toman las decisiones de diseo y
obtencin de medidas.
Anlisis de los datos e interpretacin de los mismos, separados en el tiempo y sobre
todo vigilando el no manipular la interpretacin bajo presin de los evaluadores.
Establecidos con anterioridad unos estndares de calidad del trabajo realizado en el
proyecto evaluado, se comparan ahora con esos estndares, obteniendo conclusiones
tiles para los usuarios de la informacin y desarrollando planes concretos de
aplicacin.
Los usuarios y los evaluadores cooperan en la difusin y puesta en prctica de los
hallazgos obtenidos, generando recomendaciones y controlando su implementacin.
Estas etapas permiten comprobar cmo el enfoque de Patton es una evaluacin
dinmica, no fijada por a prioris cientificistas, una evaluacin interactiva o de grupo,
al crearse la comisin de trabajo que negocia cada paso bajo el criterio de utilizacin, y
44
325
una evaluacin iterativa, ya que si surgen nuevos grupos o agentes interesados, nuevas
cuestiones o nuevos intereses, deben reconsiderarse las opciones tomadas de forma que
siempre quede asegurada la utilizacin de los resultados.
6.3.
LA ORGANIZACIN
EVALUADOR.
DEL
PROCESO
EL
PAPEL
DEL
Patton est convencido de que el verdadero xito de las evaluaciones slo se produce si
se logra dinamizar los recursos internos de las personas para que lleven a cabo un
cambio. Formar parte de un grupo de trabajo como el que se forma en la comisin de
evaluacin orientada a la utilizacin ya es una capacitacin inmediata para sus
participantes y una induccin eficaz al cambio y a la responsabilidad. Al estar basada en
su utilizacin posterior, la evaluacin se hace muy realista y prctica, aumentando los
conocimientos y habilidades de los participantes, que terminan cada evaluacin
dispuestos para la accin.
De esta forma, el evaluador est lejos de ser un tcnico impersonal y lejano, ms sabio
y listo que el resto y que formula recomendaciones gracias a su supuesta sabidura
tcnica, pero que quedan muy alejadas de los intereses de quienes las reciben y por tanto
sern reacios a ejecutar los cambios recomendados. La participacin de todos los
agentes y usuarios en un proceso comunitario de accin, reflexin, reaccin ante las
dificultades y adaptacin a cada circunstancia concreta, perfila al evaluador ms cerca
de un animador de procesos comunitarios, como ya proponan Guba y Lincoln, que de
un analista cuantitativo muy observante de la validez y control de los procesos de
obtencin, anlisis e interpretacin de los datos. En palabras del propio Patton:
El evaluador no procura amoldar y manipular a los tomadores de decisin y
los usuarios de informacin para aceptar sus nociones preconcebidas acerca
de lo que se considera til o una investigacin de alta calidad, pero tampoco el
evaluador es un mero tcnico que se limita a realizar lo que los decisores
desean (Patton 1978:289).
6.4.
SNTESIS Y VALORACIN.
326
inconvenientes que ofrece este enfoque para los proyectos de cooperacin al desarrollo
de las ONGD.
En sntesis, bajo el enfoque orientado a la utilizacin, se maximiza el rendimiento del
ejercicio evaluativo y no se emprenden evaluaciones que no vayan a seguir un riguroso
programa de retroalimentacin.
Bajo el enfoque de Patton, se cuidan de forma especial las tres finalidades que Gasper
reclama para la evaluacin:
45
327
Condiciones previas:
Evaluar es:
Intereses predominantes:
Cuestiones principales:
Mtodos ms comunes:
Diseo de evaluacin:
Herramientas predominantes:
Cualitativas,
cuantitativas.
Ventajas:
sin
prejuicio
de
las
328
7.
7.1.
CONSIDERACIONES PRELIMINARES.
En esta seccin vamos a presentar los modelos de evaluacin participativa. Estos han
ido surgiendo desde los aos setenta y se han desarrollado con fecundidad y popularidad
entre los evaluadores de proyectos de desarrollo y entre las ONGD.
El problema de fondo que nos estamos encontrando permanentemente en la
presentacin de los diversos modelos que hemos ido realizando hasta ahora, es un
problema que tiene mucho de epistemologa, de qu es cientfico y vlido.
Como ha sealado Garca Ramos (1999:7), catedrtico de mtodos de investigacin y
evaluacin educativa:
En la actualidad, la evaluacin de programas se caracteriza por la falta de
acuerdo en lo que es, en cmo debe hacerse y para qu debe hacerse la propia
evaluacin. De hecho podramos... agrupar los grandes enfoques
metodolgicos alternativos... en dos principales: a) Esquema tradicionalobjetivista y bsicamente externo, y b) Modelo participativo-subjetivista-crtico
y bsicamente interno.
Nosotros hemos venido distinguiendo estos dos polos como el racionalista-positivistacuantitativo-sumativo y el pluralista-naturalista-cualitativo-formativo. La cuestin
clave ser estudiar si estos modelos se consideran alternativos e irreconciliables, o son
de alguna manera complementarios y compatibles, huyendo de una postura eclctica
que slo revele comodidad. El criterio de verdad ser la clave bsica para distinguir
las posiciones extremas del continuo y ofrecer un criterio racional y vlido a las
organizaciones de que trabajan en el campo de la cooperacin al desarrollo que las
permita disear, en cada caso, una evaluacin de su proyecto o programa bajo un
modelo evaluativo distinto.
En el apartado 5.3. presentamos el extremo racional-positivista en forma de la
evaluacin por objetivos. Ahora presentamos el polo opuesto bajo los modelos o
enfoques participativos. Si el primero se fundamenta en el principio de causalidad, al
tratar de asignar funcionalmente causa-efecto, mientras valora por comparacin la
situacin antes del proyecto con la de despus, atendiendo a los objetivos previamente
329
Pero veamos cmo se lleg a este modelo participativo y cules fueron sus
antecedentes.
a) Orgenes.
Siguiendo a Chambers, reconocemos cinco antecedentes o fuentes del PRA47:
46
Chambers (1992:I y 1); Chambers (1994a:953). El contenido del documento de trabajo de 1992
fue posteriormente editado en los tres artculos de la revista World Development a los que hace
referencia Chambers (1994a,b y c). Har referencia principalmente al de 1992 por su originalidad.
En estos materiales se ofrece una amplia bibliografa sobre los enfoques tratados, actualizada
ltimamente en Chambers (1997:255-283) y Chambers (2005).
330
47
Chambers (1992:1-9). Otros trabajos relevantes y pioneros han sido los de Bryk (1983), Salmen
(1987) y Feuerstein (1990).
331
332
48
333
334
RRA
PRA
Universidades.
ONGs.
Principales usuarios:
Agencias de ayuda y
Universidades.
Mtodos.
Conductas.
Extractivo, sonsacante.
Facilitador, participante.
Objetivos ideales:
49
Otro desarrollo complementario sobre las diferencias entre evaluacin e investigacin participativa
y tradicional puede encontrarse en Cornwall y Jewkes (1995:1668-1669).
335
EVALUACIN TRADICIONAL.
EVALUACIN PARTICIPATIVA.
evaluacin.
Diseo predeterminado.
Diseo flexible.
Mtodos formales.
c) Principios.
Siguiendo a Chambers, hay una serie de principios de funcionamiento que son
compartidos tanto por el RRA como por el PRA50. Son los siguientes:
50
336
Facilitar al mximo que las tareas sean realizadas por los propios beneficiarios
locales. Que ellos analicen, investiguen, aprendan, propongan y decidan.
51
El Principio de ignorancia ptima busca no saber lo que no merece la pena ser sabido, y el
Principio de imprecisin adecuada, lleva a no medir ms de lo necesario para hacer un buen
juicio.
337
Como seala el propio Chambers, es interesante notar que los principios compartidos
son de corte ms epistemolgico, mientras que las aportaciones propias del PRA versan
ms sobre conductas y procesos psicolgicos personales.
Una vez expuestos los principios de funcionamiento de estos enfoques, pasamos a
describir sus principales herramientas o mtodos de trabajo.
7.3.
cuantificaciones,
indicadores
clave,
presupuestos
participativos,
52
Una sntesis de los principales de estos mtodos se ofrece en USAID (1996:4); Guijt (1998);
Abbot y Guijt (1998); Gallego (1999); Mayoux y Chambers (2005).
338
339
SNTESIS Y VALORACIN.
340
53
La propia Metodologa de Evaluacin del MAE, recoge estos enfoques y la valoracin que de ellos
hace el CAD: MAE (1998a:92-94). Otras valoraciones del modelo participativo en: Lawrence
(1989); USAID (1996).
341
Coincidimos con Alvira (1991:30) en que hay cuatro supuestos bsicos en las tcnicas
participativas54:
1. Que puedan identificarse a todas las partes interesadas en la evaluacin. Si no es
as, el deseo de que sean los propios actores internos los protagonistas del ejercicio
evaluativo queda mermado. No es fcil integrar a todas las partes, pues hay
beneficiarios y perjudicados indirectos que pueden permanecer muy ajenos al proyecto
durante la ejecucin, y sin embargo verse sus intereses afectados en gran medida.
2. Que las partes quieran y/o puedan participar en la evaluacin. Esta observacin
parece obviada en la descripcin de los modelos participativos y bien merece tenerse en
cuenta, sobre todo en los proyectos en los que los beneficiarios no han tenido un papel
muy importante en su diseo y formulacin.
3. Que la participacin en la evaluacin les motivar a aplicar los resultados y
recomendaciones obtenidas. Aqu se supone gratuitamente que participar en una
evaluacin es motivante de por s, lo cual puede no ser cierto. Participar en una
evaluacin supone interrumpir las tareas cotidianas de trabajo, a veces insustituibles
para el sustento de sus protagonistas y su familia, y la evaluacin puede suponer una
carga adicional de esfuerzo. De hecho, uno de los factores que conviene tener en cuenta
a la hora de disear la programacin y el calendario de la evaluacin es la carga de
trabajo extraordinaria que supone para los agentes internos.
4. Que usarn los resultados. De participar en una evaluacin -que puede afectar ms
o menos al trabajo, costumbres o valores de los participantes- a asumir y aplicar los
cambios y recomendaciones ofrecidas por el informe evaluativo, hay un salto que debe
tenerse en cuenta y analizarse, y no obviar gratuitamente. De cualquier modo, habr que
probar que las recomendaciones ofrecidas por las evaluaciones participativas son
puestas en prctica en mayor medida que las recomendadas por otras metodologas55.
54
55
342
Comentados estos supuestos, ofrecemos nuestra propia valoracin segn el formato que
hemos venido manteniendo en la exposicin de los distintos modelos evaluativos.
(Cuadro 5.16.)
En definitiva, como bien sealan Cornwall y Jewkes, quiz lo ms caracterstico y
diferencial de la evaluacin e investigacin participativa no sean los mtodos o el
predominio de herramientas cualitativas, sino el centrar el poder que toda evaluacin
significa en los beneficiarios, en los agentes internos (insiders) en vez de en los
conocimientos y formalidades cientficas de agentes externos, cualquiera que sea su
metodologa y las herramientas que utilice56.
De todos modos, a pesar del creciente inters hacia estas herramientas por parte de
ONGD y organizaciones locales, la sospecha de un exceso de subjetividad, terminando
la evaluacin en simples y valiosas- puestas en comn, no termina de eliminarse. Una
buena combinacin de herramientas cuantitativas que permitan ofrecer evidencia
emprica y medidas -normalmente ejecutadas y analizadas por su complejidad por
personal externo- y que sirvan de base a los significados que se adopten -eso s por
consenso participativo-, creemos que no deben faltar. En el arco cuantitativo-cualitativo
caben muchas combinaciones posibles, pero la tendencia al equilibrio es mejor que la
polarizacin sobre un solo grupo de sujetos, intereses o herramientas, sean los insiders o
el personal investigador externo o outsiders. La buena relacin es la de complemento
mutuo, no de oposicin y tampoco hay que negar la dimensin de control de la
56
343
evaluacin, aunque prime la de obtener juntos aprendizajes sobre las buenas prcticas
contenidas en el proyecto.
Cuadro 5.16. Caracterizacin del modelo participativo.
Condiciones previas:
Evaluar es:
Intereses predominantes:
Cuestiones principales:
Mtodos ms comunes:
Diseo de la evaluacin:
Flexible e informal.
Herramientas predominantes:
Claramente cualitativas.
Ventajas:
todos
los
344
beneficiarios.
El trabajo en equipo puede fomentar la
cohesin comunitaria y los liderazgos.
Inconvenientes:
8.
345
CONCLUSIONES.
57
346
58
Para las peculiaridades de la evaluacin de la ayuda de emergencia vase Gasper (1999), CAD
(1999), Hidalgo (2007), AA.VV. (2008).
59
Gasper (1999:77) sintetiza las debilidades del EML como instrumento evaluador en estas cuatro:
simplificacin excesiva, negacin de aspectos fundamentales no cuantificables, rigidez y olvido de
los efectos no deseados. Este mismo autor, citando un documento elaborado por el Active Learning
Network on Accountability and Performance in Humanitarian Assistance (ALNAP), seala
lcidamente que como cualquier herramienta, las dificultades asociadas con el marco lgico
pueden tener ms que ver con la manera en que es utilizado que con problemas inherentes a la
propia tcnica, ALNAP (1998:13).
347
348
349
60
Este es ncleo de la relevante obra de Chambers (1997): Whose reality counts? se pregunta en el
ttulo. La respuesta la ofrece en el subttulo: Putting the first last. La realidad de los que l
denomina los lowers frente a la realidad dominadora de los uppers es la que debe contar. Una
realidad que l define como local, compleja, diversa, dinmica e impredecible. Chambers (1999:
58, 78-87, 100-101, 162-188). Vase tambin Lugrs (2008).
350
351
APNDICE.
Por su alto inters, incluyo un resumen del texto del The Joint Comittee on Standards
Evaluation, en el que se describen los estndares para evaluaciones de programas,
proyectos y materiales educativos, que son muy aplicables al contexto de evaluacin de
intervenciones de desarrollo.
NORMAS DE CALIDAD DE UNA EVALUACIN.
NORMAS DE UTILIDAD.
Las normas de utilidad estn concebidas para asegurar que una evaluacin proporcione las informaciones
prcticas que necesita una audiencia determinada. Estas normas son:
A1. Descripcin de la audiencia.
La audiencia relacionada con la evaluacin o afectada por ella debe ser descrita con el fin de que todas
sus necesidades puedan ser satisfechas.
A2. Credibilidad del evaluador.
Las personas que dirigen la evaluacin deben ser honradas y a la vez competentes para poder llevarla a
cabo, con el fin de que sus conclusiones alcancen el mximo de credibilidad y aceptacin.
A3. Alcance y seleccin de la informacin.
La informacin recopilada debe tener suficiente alcance y haber sido seleccionada de tal manera como
para incluir en s misma las cuestiones pertinentes acerca del objeto de la evaluacin y responder a las
necesidades e intereses de las audiencias concretas.
A4. Interpretacin valorativa.
Las perspectivas, procedimientos y bases lgicas utilizadas para interpretar los resultados deben ser
cuidadosamente descritas, con el fin de que queden claras las bases para el juicio valorativo.
A5. Claridad del informe.
El informe de la evaluacin debe describir el objeto que se est evaluando y su contexto, a la vez que los
propsitos, procedimientos y resultados de la evaluacin, con el fin de que las audiencias comprendan en
seguida qu se ha hecho, cmo se ha hecho, qu tipo de informacin se ha obtenido, qu conclusiones se
han sacado y qu recomendaciones se hacen.
352
353
354
355
INTRODUCCIN
es
multidimensional
difcil
de
medir
de
forma
comparable
dado resultado en pases con un desarrollo institucional y legal de larga tradicin, donde
existe cierta independencia del poder judicial y cierto nivel de meritocracia y
competencia administrativa. El incumplimiento de las amenazas por falta de resultados
o de la propia condicionalidad, ha alimentado el riesgo moral de los receptores de
ayuda, a la vez que ha hecho crecer la facturacin de bancos multilaterales y de agencias
de desarrollo. El altruismo o la buena voluntad, el destino a una buena causa ha
hecho que el sistema no se dote de evaluacin de resultados y la inercia o el inters
poltico sean variables altamente explicativas del origen y destino de flujos de ayuda.
Los estudios de asignacin de la ayuda han tratado de conciliar las necesidades del pas
receptor con las del donante (McKinley & Little 1979, Maizels & Nissanke 1984,
Neumayer 2003). Los resultados publicados muestran el predominio de variables
relativas al donante. Ser antigua colonia, o ser pas democrtico atrae ayuda
internacional (Alesina y Dollar 2000), votar en la misma direccin que el donante
explica recibir ms ayuda (Bobba & Powell 2007), ser corrupto no es obstculo para
recibir ayuda (Alesina & Weder 2002). El predominio del altruismo de los donantes
en las localizaciones geogrficas de la ayuda es tal que la fragmentacin de donantes (el
nmero de donantes y la probabilidad de que existiendo ya un donante, exista otro ms)
es una variable explicativa significativa tanto para atraer ayuda (Bobba y Powell 2007b)
como aumentar la corrupcin en el pas receptor (Djankov et al. 2006b). Sin embargo,
variables como el respeto a los derechos humanos, la calidad institucional, la estabilidad
poltica o el capital social del pas receptor no son variables que hayan aparecido como
estadsticamente significativas en los modelos retrospectivos de asignacin de la ayuda
(Neumayer 2003, McGillivray 2003a,b 2004, Hout 2002, Knowles 2002). Los recientes
modelos de selectividad estn dando cada vez ms importancia a los aspectos de
gobernanza de los pases receptores, si se quiere que la ayuda sea ms eficaz (Burnside
y Dollar 2004, Amprou et al. 2005, Dollar & Levin 2006, Radelet 2006, Cogneau &
Naudet 2007, Subramanian 2007). Otros modelos resaltan la importancia de la calidad
institucional del propio donante para una mayor eficiencia de la ayuda (Djankov et al
2006 a, b, Powell & Bobba 2006). Los donantes tienden a concentrarse geogrficamente
en sus decisiones de ayuda. Que exista un donante, aumenta la probabilidad de que
acudan ms quiz a complementarse. Estas economas de aglomeracin de la ayuda
hacen que se hable de pases amigos y de pases hurfanos de ayuda. De nuevo la
contradiccin de la eficiencia econmica de la ayuda. Para maximizar la eficiencia
econmica de los flujos de ayuda, habra que emplear una selectividad previa que hara
que los ms necesitados (pobres, mal gobernados con dbiles instituciones y muy
corruptos) sean olvidados por todos los donantes. Slo as el pas escuchara los
incentivos suficientes para abandonar las malas prcticas y pasar a las buenas a fin de
hacerse merecedor de ayuda. Pero ya hemos visto que la eficiencia econmica, en la
prctica, no pasa de ser una variable normativa (debera ser, pero no es).
Este panorama ha sido en gran medida reconocido como certero en los Encuentros de
Alto Nivel (High Level Forum) de los representantes polticos de donantes y receptores
convocados por la OCDE. Un primer encuentro importante tuvo lugar en Roma en 2003
(DAC 2003) para reafirmar la necesidad de armonizacin, coordinacin y
complementariedad de la ayuda entre los donantes. Posteriormente, en 2004, hubo un
segundo Foro de Alto Nivel en Marraquech en torno a la gestin hacia resultados. A ese
encuentro sigui otro en Pars en marzo de 2005. A su trmino, la mayora de donantes
y pases receptores ha ido ratificando lo que se conoce como la Declaracin de Pars
sobre la eficacia de la ayuda1 (CAD 2005, Larr 2005). Los firmantes se comprometen a
impulsar un sistema de ayuda basado en cinco criterios: la apropiacin o liderazgo
poltico del pas receptor, el alineamiento de sistemas y formatos de licitacin, control,
seguimiento y evaluacin a los existentes en los pases receptores, la armonizacin de la
ayuda entre los diversos donantes potenciando el apoyo presupuestario y evitando la
fragmentacin, la orientacin hacia resultados y la mutua rendicin de cuentas. El
proceso de armonizacin iniciado en Pars ha elaborado indicadores de seguimiento
para analizar su avance (DAC 2005) y una lnea de base de la situacin de esos
indicadores en 2006 (OECD 2008) para 34 pases receptores y todos los donantes
firmantes de la Declaracin. Entre el 2-4 de septiembre de 2008 tendr lugar en Accra
(Ghana), un nuevo Foro de Alto Nivel entre las partes para evaluar su cumplimiento2.
Sobre esta base de los principios de la Declaracin de Pars, voy a hacer un diagnstico
de la cooperacin espaola de cooperacin para el desarrollo, centrndome en los
aspectos evaluativos y de eficacia de la ayuda. Es lo que contiene la siguiente seccin.
El sitio web para este Foro es: Hhttp://www.accrahlf.netH La OCDE dispone de una web para los
2.
HACIA
UN
SISTEMA
DE
GESTIN
ORIENTADA
HACIA
Vanse las notas finales de la reunin de Marrakech (OECD 2004) y de Hanoi (OECD 2007b). Sobre la
materia, pueden consultarse el sistema de indicadores para resultados de IDA (2004) para la gestin de los
instrumentos de este organismo internacional perteneciente al Banco Mundial, el documento del World
Bank (2007), o las aportaciones de Kusek et al. (2005) sobre los medidores de los Objetivos del Milenio o
Wiesner (2002) para una descripcin terica de lo que un sistema de gestin hacia resultados debera
incorporar.
que se ha centrado en los flujos de los donantes a uno que se centre en los resultados de
los pases receptores en trminos de cambios sostenibles en su desarrollo? No tengo una
respuesta completa a esta amplia cuestin, pero creo que hay tres aspectos bsicos que
pueden enriquecer y que describo a continuacin.
Los tres elementos bsicos de un sistema integral de gestin hacia resultados pueden
ser: i) un marco cuantitativo de suficiente calidad que permita le medicin de los
cambios en trminos de resultados; ii) un sistema de incentivos suficientemente potente
para que este sistema sea efectivamente adoptado y no se quede en la retrica; iii) el
manejo de un lenguaje comn que site a los resultados de forma clara frente a las
necesidades y los procesos. Comento cada uno de ellos de forma un poco ms extensa.
Hasta ahora, la lgica de las intervenciones subyacente al Marco Lgico y los sistemas
de gestin de la mayora de las administraciones publicas espaolas que financian
intervenciones de desarrollo es exigir un sistema de informacin que justifique los
insumos empleados. Los financieros en trminos de copia de todas las facturas de todos
los gastos realizados y justificacin detallada del presupuesto. Los tcnicos o no
financieros, en trminos de variadas fuentes de verificacin que prueben las actividades
realizadas. Por ejemplo, listas de asistentes a sesiones de capacitacin, actas de
reuniones mantenidas, listas de materiales entregados, fotografas de los actos
realizados, copia de acuerdos o contratos establecidos con otras instituciones con las
que se ha cooperado (municipios, empresas, universidades, etc.). Todo esto da lugar, en
una sntesis apretada, al informe final escrito por la entidad ejecutora (a menudo una
ONG del Sur o la ONGD espaola con la que se ha mantenido el acuerdo de
cofinanciacin).
Este sistema se basa, en el fondo, en la desconfianza. Para solventar el problema
principal-agente, por el que la Administracin espaola (principal) libra fondos a
agentes que la representan pero a los que no puede controlar, sea porque las acciones se
realizan a distancia, por el alto coste del seguimiento, o por el simple mandato legal de
tener que justificar todos los fondos pblicos gestionados y ponerlos a disposicin del
cuerpo de interventores con las debidas competencias (sea Administracin central,
autonmica o municipal), el caso es que el grueso del sistema actual de gestin, tanto en
trminos de tiempo como de recursos humanos y financieros empleado, est centrado en
el insumo y el producto generado por l. El sistema evita cualquier rendicin de cuentas
hacia los beneficiarios (o perjudicados) finales y del Sur, sea gobierno del pas receptor,
contraparte local de la ONGD o entidad intermedia como una municipalidad con la que
un ayuntamiento tenga formado un hermanamiento.
El sistema informa de la lgica horizontal cuyo argumento correra de la siguiente
forma simplificada: a partir de dinero y actividades previstas a realizar en el Sur,
logramos controlar dnde ha ido cada unidad monetaria pblica otorgada y los
productos o actividades realmente ejecutados, ya que ello es lo que se describe en el
informe final. El sistema puede an establecer un doble control. Algunas intervenciones
son auditadas (de forma programada y externalizadas a alguna empresa de auditoria) y
se realizan algunas visitas por parte del personal tcnico o cargo pblico para verificar
que se est haciendo lo que se describi en el documento de formulacin del proyecto o
programa.
Estas mismas ideas aparecen en Larr (2005) y el Plan General de Cooperacin para el Desarrollo de la
para medir y conocer las contribuciones a los resultados necesitamos dos nuevas
herramientas. La primera es un subsistema de informacin cuantitativa que est basado
en indicadores y fuentes de verificacin bien formulados. La segunda es un subsistema
de recogida evaluativa de testimonios, sean orales o grficos. Desarrollo un poco ms
ambos subsistemas.
La teora de los indicadores bien formulados sostiene que deben ser SPICED7. Esta
teora puede concretarse en que un objetivo bien formulado debe incorporar las
siguientes dimensiones: una lnea de base con cantidad, calidad, personas destinatarias y
lugar de intervencin ms lnea proyectada con el tiempo e incremento a producir, sea
en trminos absolutos (volumen) y/o relativos (porcentajes). Por ejemplo, un indicador
SPICED bien formulado ser: de las 60 mujeres beneficiarias de acciones en turismo
rural en la comunidad XXX cuyos ingresos de partida son YYY unidades monetarias
locales (lnea de base que contiene sujetos, lugar y cantidades), un 50% (30 mujeres)
(impacto cuantitativo) encuentran empleo en turismo rural (impacto cualitativo) y
obtienen unos ingresos adicionales de ZZZ unidades monetarias locales (impacto
cuantitativo) tras un periodo de cinco aos (tiempo)8.
Desde mi limitada experiencia como evaluador, creo que esta calidad de formulacin de
los IOV en los proyectos y programas an no est presente de forma generalizada. Se
siguen cometiendo muchos errores en la formulacin de indicadores y en la inmensa
mayora de las intervenciones no se dispone de lnea de base que permita una
comparacin entre la situacin antes y despus que acerque a lo que es un resultado.
Incluso en los programas que empiezan a exigir elaborar lneas de base ms exhaustivas,
el resultado encontrado con ms frecuencia es que se elabora un diagnstico del entrono
ms profundo pero no hay, por ejemplo, un cuestionario validado y homogneo que se
pase cada seis meses o un ao a la misma poblacin, tanto beneficiaria como no
beneficiaria a modo de grupo de comparacin9.
El acrnimo responde a las siglas inglesas de especfico, inequvoco, sensible, pertinente y de duracin
limitada.
8
He desarrollado esta misma idea en Larr (2007). Un desarrollo complementario es el de Alcalde (2007)
o Gmez Galn y Sainz Ollero (2003:78-79 y 170-174), Gmez Galn y Cmara (2003:33-36).
9
Vase el informe de sntesis de las evaluaciones realizadas dentro de los programas cofinanciados por la
Comunidad de Madrid en la convocatoria de 2002 y realizadas durante 2006-2007, publicado por Larr
(2007b).
Siguiendo el ejemplo de IOV arriba propuesto una fuente de verificacin bien formulada podra ser:
una encuesta semestral durante cinco aos a las 60 mujeres beneficiarias sobre sus ingresos; si
culturalmente es posible, nminas de ingresos; contratos de nuevo empleo; encuesta o registro de
ingresos de 60 mujeres no beneficiarias lo ms parecidas a las beneficiarias (edad, lugar de residencia,
formacin, etc.). Recogidas por el director del programa con ayuda de estudiantes en turismo.
Presupuesto: XXX unidades monetarias.
11
Objetivo General
Objetivo Especfico
Resultados esperados
/Productos (outputs)
Insumos necesarios
Enfoque de resultados ex
Enfoque de resultados ex
ante
post
Resultados o efectos
(outcomes) logrados (positivos
y negativos)
Resultados o efectos
(outcomes) a lograr
Actividades a realizar
Insumos necesarios
Sostenibilidad
Contribucin al desarrollo
Impactos
Atribucin
Medios de Desarrollo
(crecimiento y equidad)
Objetivos de Desarrollo
(reduccin de pobreza)
Fuente: Elaboracin propia.
NECESIDADES
PROCESOS
RESULTADOS
En resumen, a partir de un lenguaje comn en el que todos los agentes espaoles saben
diferenciar entre resultados (outcomes) y actividades realizadas (outputs), el sistema de
gestin orientada hacia resultados debe permitir articular evaluaciones de necesidades,
de procesos y de resultados de forma que se generen aprendizajes de forma continua y
retroalimentada. Para generar este conocimiento hace falta crear incentivos positivos
que premien las evaluaciones de calidad, con independencia de que los resultados
concretos hayan sido positivos o no. Se aprende tanto o ms de los errores a evitar como
de los xitos y a menudo, los errores pueden ser ms generalizables que los factores de
xito. El sistema no puede empezar a funcionar si no se es muy exigente con el diseo
de indicadores y fuentes de verificacin que permiten levantar la informacin rigurosa
necesaria para realizar tanto las futuras predicciones de resultados como la medicin y
recogida de testimonios que expresen de forma cuantitativa y cualitativa los resultados
acontecidos durante y al finalizar las intervenciones.
4.
12
La evaluacin bajo enfoque de gnero ha sido ms ampliamente desarrollada en MAE (2004). Sobre
Las principales funciones de la DGPOLDE en evaluacin son las siguientes: programacin anual de
Internacional en la Comisin del Congreso de los Diputados, tienen referencias por primera vez- a los
aspectos de la evaluacin.
15
Aunque esto suponga tambin una menor eficiencia temporal pues los intereses de los agentes no son
siempre coincidentes y las preguntas evaluativas han tendido a ampliarse demasiado. Vase la experiencia
de la evaluacin en Marruecos en Arredondo (2008). Tambin este tema es desarrollado por S. White
(2002).
16
La primera, para las evaluaciones 2004-05 tuvo lugar en Madrid el 20 de abril de 2006 y una segunda el
14 de febrero de 2008 para las evaluaciones del plan 2006 (Araucaria, Marruecos y Microcrditos).
367
Tabla 6.1. EVALUACIONES REALIZADAS POR LA OPE/DG DE PLANIFICACIN Y EVALUACIN DE POLTICAS DE DESARROLLO
1998-2006
Director de la
OPE
Francisco
Montalbn
Informe Ao
N
1998
Evaluacin
Sector
Reactivacin del sector del
cacao Desarrollo rural y
agropecuario
Pas
Guinea Ecuatorial
(Africa)
Tipo de
Empresa
evaluacin
consultora
De proyecto /
Conjunta / de
fin de fase
Instituto Universitario
de Desarrollo y
Cooperacin, UCM /
Comisin Europea
Dotacin de servicios de
tratamiento de residuos,
2
1998
Fortalecimiento Municipal
saneamiento de agua,
Guatemala
De proyecto /
en Flores, Guatemala
capacitacin municipal y
(Centroamrica)
de fin de fase
turstica Desarrollo
DMAS
Consultora,
S.A.
municipal
Escuelas Taller en
1998
Iberoamrica para la
Colombia, Cuba,
Latina, AL)
De
instrumento
GPI Consultores
profesional
El Fondo de Ayuda al
4
1998 Equipamiento en
Iberoamrica
Manuel
De
Agroconsulting
Contravalor Sectores
(AL)
instrumento
Internacional
Per (AL)
De programa
Instituto Universitario
productivos
Programa bilateral de
Montobbio
Hispano-Peruano
cooperacin
El Programa de
6
Trabajo Infantil
Infantil en Iberoamrica
1999
Fernndez
Rica, Paraguay y
Intermedia
Repblica Dominicana y
Luis Tejada
de Adultos PAEBA
10
2001
El Programa SAIL en la
Isla de Camigun, Filipinas
Procedimientos de gestin
Hait, Repblica
De
e instrumentos de las
Dominicana (AL) y
instrumento /
ONGD
Filipinas (Asia)
Intermedia
2002
Proyecto de Reforma
Judicial en la Repblica de
Techassist
Consultores
De programa /
Alfabetizacin y educacin
El Salvador,
intermedia,
bsica de adultos
Nicaragua (AL)
expost y fin de
GPI Consultores
fase
Desarrollo integral
Filipinas (Asia)
Provincia de
Desarrollo integral
Imbabura, Ecuador
(AL)
2001
12
GPI Consultores
Per (AL)
El Proyecto de Desarrollo
11
Internacional / OIT
Intermedia
universitaria
Agroconsulting
Conjunta /
Interuniversitaria en
Mazarambroz
De programa /
De programa /
El Programa de
9
Cooperacin, UCM
Colombia, Costa
Honduras
Antonio
Intermedia
Formacin y educacin
Programa de subvenciones
1999
de Desarrollo y
Cooperacin
Iberoamrica
Colombia (AL)
pas /
Argentina, Brasil,
El Programa de
7
368
Reforma Judicial
Bolivia
Agroconsulting
De programa
Internacional
De proyecto /
DARA Consultores
Intermedia
De proyecto /
Conjunta
SEINTEX
Final
Bolivia
Programa de Cooperacin
13
14
15
2003
369
Programa
bilateral
de
cooperacin
Conservacin
Per
del Per,
patrimonio cultural
Programa de cooperacin
Hispano Boliviano
bilateral
Waterhouse
Coopers
Dominicana, Egipto
Programa de Cooperacin
Price
De programa
intermedia
De
Bolivia
Internacional
programa
pas
Intermedia
Instituto Internacional
de Gobernabilidad
Programa para la
recuperacin del
16
2004
Patrimonio Histrico-
Programa de recuperacin
Arquitectnico y para el
Cabo Verde
De Programa /
de fin de fase
OTYPSA
Desarrollo Turstico y
Agrcola de Cidade-Velha
Fondo Fiduciario Espaa
PNUD para el
**
2004 Fortalecimiento de la
Gobernabilidad en
Nicaragua
y De programa
fondo / final
Fundacin
Universidad
de
Salamanca
Centroamrica
Jos
A.
Gonzlez
Mancebo
17
/
2005
Desarrollo
de Tiguent
artesanal
integral
pesca
Mauritania
De proyecto /
intermedia
Canaest Consultores
370
Milagros
Hernando*
18
2005
Cooperacin Espaola en
el mbito sanitario
Programa de Alfabetizacin
19
Salud
Mozambique
Sectorial
y De programa /
Nicaragua
final
Programa de
20
2005
municipios
y descentralizacin
De programa /
Honduras
de fin de fase
(PRODEMHON)
21
22
2006
Medio Ambiente
Programa de cooperacin
Marruecos
bilateral
Fondo de Concesin de
23
2006
Microcrditos para
Proyectos de Desarrollo
Social Bsico en el Exterior
GPI Consultores
Unin
Iberoamericana
De programa
PETISA Int.
Marruecos
De pas
ECOTEC
Honduras
Marruecos
De
instrumento
de
Municipalistas (UIM)
Amrica Latina
Casos en Ecuador,
Microcrditos
HLSP Consulting
INYPSA
Fuente: Elaboracin propia a partir de los datos de la OPE y DGPOLDE. * En 2005, el RD 755 de 24 de junio, crea la DGPOLDE. Dentro de ella se crea la Divisin de
Evaluaciones, encargada de promoverlas desde entonces. ** Evaluacin no publicada.
PACI 2008
Directriz III: Una poltica pblica que garantice la coherencia entre todas las otras
polticas para contribuir de forma sinrgica al desarrollo.
Meta III.3. Impulsar la evaluacin y seguimiento de la CPD sobre el terreno, la
transparencia y comunicacin sobre decisiones en otras polticas de desarrollo
siguiendo las recomendaciones del Comit de Ayuda al Desarrollo
...
En este sentido, la implementacin de Evaluaciones de Impacto sobre la pobreza y el
Desarrollo de cualquier poltica o intervencin, desde una perspectiva de evaluacin
estratgica, debera ser un imperativo para todos los actores pblicos o privados (tal como
ocurre en mbitos domsticos con, por ejemplo, el impacto ambiental). La reflexin al respecto
resolver las licitaciones a tiempo, as como recibir los productos dentro de los ejercicios
fiscales anuales17.
En tercer lugar, es importante que el criterio de seleccin de evaluaciones no sea el
tamao presupuestario, ni evaluar slo grandes intervenciones (sectores en pases,
instrumentos o programas), sino que el criterio fundamental sea el potencial
aprendizaje. Eso incluye proyectos piloto, nuevas zonas o pases de intervencin,
proyectos sectoriales que marquen diferencias entre agentes (por ejemplo, una muestra
de proyectos de salud que compare la eficiencia tcnica y econmica entre los
promovidos por la AECID y por las ONGD dara fundamento a aumentar los fondos de
ayuda a las ONGD o canalizarlos a travs de la AECID). Hay que abandonar la
evaluacin como un simple ejercicio de difusin pblica de algunos resultados positivos
de intervenciones. Hay que ser valientes y atreverse tambin a evaluar potenciales
fracasos en los que los errores sean altamente pedaggicos.
En cuarto lugar hay que abordar dos instrumentos que hasta la fecha han quedado
sistemticamente excluidos de las evaluaciones: el FAD y las intervenciones de accin
humanitaria18.
En quinto lugar, es importante en coherencia con lo desarrollado en la seccin anterior
sobre la dimensin cuantitativa de los resultados- mejorar los sistemas de aprobacin y
seguimiento de indicadores cuantitativos, que permitan trabajar con herramientas que
midan dichos resultados. A menudo, los juicios evaluativos de criterios como la
eficiencia y el impacto, son meras opiniones cualitativas del equipo evaluador, pues no
dispone de ningn aparato cuantitativo que le soporte. Como muestra la Tabla 6.2, el
predominio de herramientas cualitativas en las evaluaciones llevadas a cabo hasta la
17
Por ejemplo, mientras escribo esto, abril de 2008, no estn publicadas en papel dos de las 3
evaluaciones del Plan 2006, una del Plan 2007 ha quedado desierta en la primera ronda de licitaciones
(Angola) y slo han aparecido los trminos de referencia de una de las del Plan 2008.
18
En Caete y Salazar (2003) se ofreci una revisin de una muestra de crditos FAD al que se le dio el
ttulo de primera evaluacin de impacto. Desde luego no se ajusta al contenido y, que sepamos, no ha
vuelto a haber nada parecido. Gonzlez y Larr (2004) hicieron una investigacin que probaba el efecto
positivo de los FAD en las exportaciones espaolas, pero quedaba en el aire su efecto sobre la pobreza de
los pases receptores. En cuanto a la evaluacin en ayuda humanitaria, hay una extensa experiencia
internacional y Espaa dispone de consultoras especializadas en este mbito. Un estado de la cuestin se
ofrece en Hidalgo (2007).
fecha es abrumador. Sin restar nada de valor a su aportacin, conviene reconocer que el
complemento cuantitativo es un claro reto pendiente.
En sexto lugar, la misma tabla 6.2. muestra la proliferacin de recomendaciones de los
informes. Esta inflacin de cambios pedidos es perjudicial para las evaluaciones. Si las
recomendaciones no son realistas, no se dirigen a un agente concreto, no proponen
medios concretos ni plazos oportunos para lograr introducir esas mejoras, se quedan en
simples expresiones de deseos o en juicios tan generales que apenas aportan. Una vez
que las recomendaciones estn ajustadas, merece la pena elaborar planes de mejora en
los que a cada recomendacin, pueda alegarse por el interesado sus comentarios y esa
misma ficha contradictoria en trminos de lo que emplea la Unin Europea- sea
objeto de seguimiento anual y se publique de forma electrnica. Este compromiso har
que las recomendaciones y la retroalimentacin en general, sea fructfero y podamos
medir las evaluaciones por los cambios y mejoras concretas provocadas, en un
interesante ejercicio de meta-evaluacin19. Se estar pasando de evaluar las
evaluaciones por el nmero de misiones, presupuesto destinado y dems insumos a
evaluar las evaluaciones por sus resultados o efectos, en coherencia con lo mantenido
para los flujos de AOD en este libro.
En sptimo lugar, hay mucho margen de crecimiento para la cooperacin entre las
administraciones central y descentralizadas en materia de evaluacin de intervenciones
de ayuda. La cooperacin descentralizada represent en 2007 ms de un 14% del total
de la AOD espaola. El liderazgo en materia de evaluacin le corresponde a la
DGPOLDE y est en funcionamiento un grupo de trabajo dedicado a las evaluaciones
dentro de la Comisin Interterritorial de Cooperacin Internacional (CICI). Un fruto de
este grupo ha sido una primera identificacin de qu CC.AA. estaban haciendo
evaluaciones (Tabla 6.3). La informacin obtenida muestra cierto dinamismo, aunque
hasta la fecha son escasas las evaluaciones pblicas y publicadas, no se dispone de un
portal comn donde poder obtener esa informacin y me temo que muchas de las
evaluaciones sean realmente informes finales. Pero la oportunidad es real y muchos
19
Un ejemplo de buena prctica en este sentido ha sido el documento elaborado como Anexo al PACI
2008, en el que se concretan cmo se han abordado en dicho PACI las recomendaciones obtenidas de la
evaluacin entre pares (peer review) del CAD en 2007. Si a partir de este ejemplo, se concretan sujetos,
plazos y medios para abordar cada recomendacin estratgica recibida en las evaluaciones, su eficacia y
eficiencia sern mucho ms altas.
NUMERO DE EVALUACIONES
Aragn
17 (internas)
Asturias
55
Baleares
36
Catalua
25
Extremadura
Galicia
Madrid
180*
2001: 13 intermedias y 23 ex post
2007: 12 programas
Fuente: Elaboracin propia con datos de la CICI (2007). Son externas a no ser que se indique lo contrario.
* Este dato creemos que se refiere a informes finales ms que evaluaciones ex post externas.
En octavo lugar, es importante prestar atencin a las ONGD, sus contrapartes y los
beneficiarios. Hasta ahora, las evaluaciones espaolas han estado centradas en los
intereses de los financiadores. Incorporar los intereses de los agentes sobre el terreno y
los propios beneficiarios es un reto de calado que supone manejar cambios importantes
en los diseos de la evaluacin (vase Touza 2007), en las herramientas a utilizar
(preferentemente participativas, vase Larr 2007a y Lugris 2003, 2008). Espaa
canaliza aproximadamente un tercio de su ayuda bilateral a travs de las ONGD. La
normativa sobre los convenios firmados con la AECID obliga a una evaluacin externa
intermedia, lo que va a suponer un importante insumo de conocimiento prctico, si estas
evaluaciones se gestionan con la suficiente calidad y orientacin al aprendizaje. Pero,
como ya hemos insistido, nadie aprende de preguntas ajenas. Si no se internalizan las
recomendaciones de esas evaluaciones y se reducen a un control adicional, sern un
nuevo papel abandonado en las estanteras. Por eso es esencial incorporar los intereses
de las ONGD y sus contrapartes y potenciar los procesos participativos. Pero eso es una
condicin necesaria y no suficiente para el aprendizaje evaluativo. Espritu de
autocrtica, reflexin interna, formacin y liderazgo, estabilidad de los recursos
20
descentralizada. En Larr (2004) se describen los datos de las primeras evaluaciones en la Comunidad de
Madrid en 2001 y Larr (2007b) es un informe de sntesis de las evaluaciones externas de resultados que
debieron realizar las ONGD que recibieron financiacin para programas en 2002.
humanos, son entre muchos otros- factores que contribuyen a hacer de las evaluaciones
instrumentos eficientes de cambios21.
21
Para un anlisis de las resistencias a aprender que tienen las ONGD y el propio sistema de cooperacin,
379
Fecha
Tipo
Fortalecimiento municipal en
Flores, Guatemala
Las Escuelas-Taller en
Iberoamrica
1998 formativa,
intermedia
El Fondo de Ayuda al
Equipamiento en
Iberaomrica
Programa de Cooperacin
Hispano-Peruano
El Programa de Erradicacin
del Trabajo Infantil en
Iberoamrica
El Programa de Cooperacin
Interunivarsitaria en
Iberoamrica
Programa de subvenciones a
ayudas a ONGD en Hait,
Rep. Dominicana y Filipinas
El Programa de
Alfabetizacin y Educacin
Basica de Adultos PAEBA
El Programa SAIL en la isla
de Camiguin, Filipinas
1998 formativa,
intermedia
5
6
7
8
9
10
1998 formativa y
sumativa
1998 sumativa
2,5 encuestas
informales
2,5 elaboracion
de
indicadores
3 sondeos
informales
40
N
N
conclusiones recomendaciones
16
17
si
3 DMAS Consultora
39
24
si
3 GPI Consultores
32
12
si
3 Agroconsulting Int.
31
14
13
si
46
30
24
1999 intermedia,
mixta
5 no
si
4 Agroconsulting, OIT,
peruano; 2 mujeres
50
21
2000 intermedia
5 cuestionario
si
46
40
30
si
4 Techassist
59
29
20
2000 sumativa,
ex post
no
2000/01 formativa,
intermedia
cuestionario e si
indicadores
2 GPI
70
15
15
2000/01 formativa y
sumativa
2002 formativa
intermedia
2003 sumativa,
ex post
no
si
53
29
18
no
si
48
14
no
si
3 Agroconsulting Int; 2
mujeres
2 DARA con 3 mas en
terreno
no se seala
44
11
14
3 no
si
69
30
21
no
si,
102
31
36
12
Paginas
3 encuesta
14
Evaluadores
1999 sumativa
11
13
Tiempo Herramientas
sumativa
2003 formativa,
4
PriceWaterhouseCoopers;
2 mujeres
4 Agroconsulting, + 6
Espaola
intermedia
2003 formativa,
intermedia
15
Programa de Cooperacin
Hispano-Boliviano
16
17
18
19
Evaluacin de la
Cooperacin Espaola en
Salud en Mozambique
Programa de Alfabetizacin y
Educacin Bsica de Adultos
en Honduras y Nicaragua
6 no
2,5
segn
TdR
no, pero
cuantifican
2005 Final,
sectorial
3 no
2005 Final, de
programa
3 no
380
entrevistas
si,
entrevistas
expertos en terreno
4 Instituto Internacional de
Gobernabilidad
si, entrevistas
informales y
estructuradas y
taller
participativo
Canaest Consultores
113 5 pgs
10 pgs
si,
entrevistas
4 HLSP; 3 mujeres
108 12 pags
4 pags
133 22 pags
3 pags
114 11 pags,
ordenadas
por criterios
si,
3 GPI; 0 mujeres
entrevistas
estructuradas
20 Evaluacin ex -post del Programa de
Final, de
3 cuestionario si,
3 UIM; 1 mujer
Desarrollo Local y Fortalecimiento
programa
entrevistas,
Municipal en Honduras
focus group
Fuente: Elaboracin propia a partir de los informes de evaluacin correspondientes.
95
62 sobre 19 temas
SSA
0,000
0,000
0,361
0,0029
0,1305
0,720
46
E ASIA
0,090***
0,008
10,300
0,7084
106,9000
0,000
46
EUR
-0,025
0,019
-1,290
0,0999
1,6660
0,216
46
LAC
0,215***
0,022
9,670
0,6798
93,4500
0,000
46
S ASIA
0,038***
0,004
8,410
0,6167
70,8100
0,000
46
MENA
0,034***
0,006
5,670
0,4518
32,1400
0,000
46
Nota: SSA = frica Subsahariana; E Asia = Este de Asia; EUR = Europa; LAC = Amrica Latina y el
Caribe; S Asia = Sur de Asia; MENA = Oriente Medio y Norte de Africa. Las *** significan un nivel de
confianza del 99%. Fuente: clculos propios con datos procedentes del Banco Mundial, World
Development Indicators.
frica Subsahariana
100.000,0
10.000,0
1.000,0
100,0
10,0
19
90
19
92
19
94
19
96
19
98
20
00
20
02
20
04
19
92
19
94
19
96
19
98
20
00
20
02
20
04
19
88
19
90
M_AID_SSA
19
86
19
84
19
82
19
80
19
78
19
76
19
74
19
72
19
70
19
68
19
66
19
64
19
62
19
60
1,0
GDPpcSSA
Este de Asia
10.000,0
1.000,0
100,0
10,0
M_AID_Easia
19
88
19
86
19
84
19
82
19
80
19
78
19
76
19
74
19
72
19
70
19
68
19
66
19
64
19
62
19
60
1,0
GDPpcEAsia
Europa
100.000,0
10.000,0
1.000,0
100,0
10,0
1,0
1989
1990
1991
1992
1993
1994
1995
1996
1997
M_AID_Eur
1998
1999
2000
2001
2002
2003
2004
2005
GDPpcEur
1.000,0
100,0
10,0
M_AID_LAC
GDPpcLAC
20
04
20
02
20
00
19
98
19
96
19
94
19
92
19
90
19
88
19
86
19
84
19
82
19
80
19
78
19
76
19
74
19
72
19
70
19
68
19
66
19
64
19
62
19
60
1,0
Sur de Asia
10.000,0
1.000,0
100,0
10,0
19
94
19
96
19
98
20
00
20
02
20
04
19
96
19
98
20
00
20
02
20
04
19
92
19
90
19
88
19
94
M_AID_Sasia
19
86
19
84
19
82
19
80
19
78
19
76
19
74
19
72
19
70
19
68
19
66
19
64
19
62
19
60
1,0
GDPpcSAsia
10.000,0
1.000,0
100,0
10,0
M_AID_MENA
19
92
19
90
19
88
19
86
19
84
19
82
19
80
19
78
19
76
19
74
19
72
19
70
19
68
19
66
19
64
19
62
19
60
1,0
GDPpcMENA
Fuente: elaboracin propia con datos del Banco Mundial (WDI). Datos en dlares corrientes. Los de
AOD en millones.
Europa
Amrica
10
Latina y
Caribe
Oriente Medio
38
y Norte de
frica
Asia del Sur y
31
Central
frica
63
Subsahariana
Resto Asia y
16
Oceana
Pases en
29
Desarrollo
Fuente: Frot y Santiso (2008:13).
52
22
16
42
17
42
19
11
52
20
35
25
Sobre la posibilidad de que la AOD genere efectos de este tipo vanse, Heller & Gupta (2002), Clemens
& Radelet (2003), Gomanee et al. (2003), Nkusu (2004 b,c), Rajan & Subramanian (2005), Prati &
Tressel (2006).
3
Por ejemplo, mientras que en 1940 slo 15 organizaciones internacionales multilaterales se dedicaban a
cooperacin para el desarrollo, en la actualidad hay ms de 242 programas multilaterales, 24 bancos de
desarrollo, unos 40 organismos de Naciones Unidas y ms de 280 organismos donantes bilaterales. A
estos datos debemos sumar la ingente proliferacin de ONGD. Esta industria produce un nmero
superior a los 340.000 proyectos en el mundo. No es de extraar que slo el 45% de la ayuda se
suministre en los plazos previamente fijados o que en Vietnam, se hayan encontrado con 791 misiones al
ao de los distintos donantes (ms de dos por da). Resultado de esta proliferacin es una pesada carga
burocrtica y unos altos costes de transaccin. Por ejemplo, en Tanzania los trabajadores de salud dedican
la cuarta parte de su tiempo a preparar los informes para los donantes, en vez de concentrarse en las
prioridades nacionales de su labor (Deutscher & Fyson, 2008). El estudio del CAD (OECD-DAC 2008c)
menciona que en el periodo 2005-06 hubo 38 pases en desarrollo que recibieron ayuda de 25 o ms
donantes. En 24 pases receptores, 15 o ms donantes aportaban colectivamente menos del 10% de la
ayuda total, aunque cada uno exiga que se aplicaran sus propios procedimientos de gestin. De los 263
organismos multilaterales que pueden recibir fondos para la ayuda al desarrollo, bastan 5 para concentrar
el 66%, mientras que un 2% de ellos se distribuye entre ms de 100 agencias.
4
Sobre este problema, vase la Agenda para Accin de Accra OECD-DAC (2008b), Frot & Santiso
(2008b) o Alcaide y Larr (2007).
5
Entre la numerosa literatura reciente aparecida sobre la volatilidad de la ayuda, pueden consultarse
Adam et al (2008), Agenor & Aizenman (2007), Arellano et al (2009), Borensztein et al. (2008), Bulir &
Hamann (2001, 2003, 2005, 2006, 2008), Bulir et al. (2008), Celasum & Walliser (2008 a,b), Eifert &
Gelb (2005, 2008), Fielding & Mavrotas (2005, 2008), Frot & Santiso (2008), Gelb et al. (2004),
Gemmell & McGillivray (1998), Hudson & Mosley (2008 a,b), Kharas (2008), Lensink & Morrissey
(2001), Markandya et al (2006), Nunnenkap (2001), Pallage & Robe (2001) y Prati & Tressel (2006).
Millions
1200
1000
800
600
400
200
0
1981
East Asia and Pacific
South Asia
1984
1987
1990
1993
1996
1999
2002
2005
Fuente: Datos del Banco Mundial, povcalnet y de Ravallion, Chen & Sangraula (2008).
Grfico 2. Evolucin del nmero de pobres por regiones. Lnea de pobreza de 1,25$ diarios.
Poverty Headcount
90
80
70
% population
60
50
40
30
20
10
0
1981
East Asia and Pacific
South Asia
1984
1987
1990
1993
1996
1999
2002
2005
Fuente: Datos del Banco Mundial, povcalnet y de Ravallion, Chen & Sangraula (2008).
Tabla 1. Progresos en reduccin de la pobreza absoluta por regiones. LP=1.25$ diarios.
Este Asia y
Europa y
Pacfico
Asia Central
%
poblacin
Dif 19811990
Difs 19902005
Difs
19812005
Dif 19811990
Dif 1990n pobres 2005
(millones)
America Latina y
Caribe
Oriente
Medio y
Norte de
frica
Asia del
Sur
frica SubSahariana
Total
-22,95
0,29
-1,69
-3,56
-7,64
4,16
-10,2
-37,94
1,69
-1,42
-0,71
-11,37
-6,69
-16,32
-60,89
1,98
-3,11
-4,27 -19,01
-2,53
-26,52
-198,19
2,07
0,9
-3,94
30,91
85,43
-82,81
-557,09
8,16
3,18
1,27
16,38
91,48
-436,62
Difs
-755,28
10,23
4,08
-2,67 47,29
19812005
Fuente: Clculos propios con datos de Ravallion, Chen & Sangraula (2008).
176,91 -519,43
Europa y
Asia
Central
America
Latina y
Caribe
%
16,78
3,65
8,37
poblacin
N de
316,21
17,29
46,07
pobres
(millones)
Fuente: Ravallion, Chen & Sangraula (2008).
Oriente
Medio y
Norte de
frica
Asia del
Sur
frica
SubSahariana
Total
3,6
40,34
51,2
25,25
10,99
595,58
390,59
1.376,73
Una cuarta parte de la poblacin mundial vive con un ingreso menor al de subsistencia
en 2005. Son ms de 1.300 millones de personas. Si elevamos la lnea de pobreza a los
2 dlares diarios, el porcentaje de pobres se eleva al 56,64% de la poblacin de los
pases en desarrollo y a 3.088,51 millones de personas. La esperanza de la reduccin de
pobreza absoluta, protagonizada principalmente por China e India, se vuelve una tarea
abrumadora, urgente y quiz vergonzosa para la humanidad, cuando pensamos en ms
de 3 millones de personas que viven en pobreza y vulnerabilidad, en una poca de
capacidad productiva como nunca antes en la historia se haba conseguido. Tres
millones de personas es un reto demasiado grande para los 100 mil millones de dlares
de ayuda oficial que se destinan desde 2005. Pensemos que en estos datos no estn
incluidos los efectos de la subida del precio de los alimentos ocurrido a mediados de
2008, ni los potenciales efectos de la crisis financiera global iniciada poco despus.
El problema es grave, no slo por el valor nico de cada vida humana, sino porque la
capacidad de distribuir alimentos, ingresos, de ampliar oportunidades y capacidades de
las personas es ahora mayor que nunca y los estndares de vida de los pases
desarrollados son tan elevados en comparacin con la miseria generalizada de esos tres
Log AOD
2,5
2
y = 0,8586x - 0,4644
R2 = 0,0805
1,5
1
0,5
0
3,35
3,4
3,45
3,5
3,55
3,6
Log PIBpc
Al llegar a los 500 muertos por la epidemia y con unas 12.000 personas ya contagiadas,
el presidente Mugabe declar el estado de emergencia nacional y qu solicit? Ayuda
internacional, claro! Pero no para retirarse del poder y dejar que alguien comience a
construir (ni siquiera reconstruir) un verdadero pas con un marco institucional que
pueda alimentar a sus ciudadanos, sino para que la comunidad internacional se haga
cargo de la situacin de emergencia y todo vuelva a la pobre normalidad tras la crisis
humanitaria. El marco institucional de Zimbabwe, simplemente no permite que la AOD
bilateral pueda tener efecto alguno en trminos de desarrollo humano. El reto de la
ayuda aqu no es acelerar el crecimiento econmico, sino llegar a las personas realmente
necesitadas. Ser capaz de que las elites corruptas no se la queden y salvar vidas. Es muy
probable que la ayuda en Zimbabwe deba ser canalizada exclusivamente a travs de las
ONGD. Pero hay que reconocer tambin que stas no actan de forma aislada al
contexto institucional del pas. Si hay corrupcin y captura de rentas, las ONGD
debern enfrentarse a los sobornos y a la falta de seguridad fsica y jurdica.
La ayuda en este escenario debe ser evaluada de forma minuciosa. Los aprendizajes
vendrn de los informes de resultados en niveles ms micro, en programas particulares
de atencin a la salud, saneamiento, educacin o produccin agropecuaria. La brecha de
evidencia en situaciones como la descrita, hacen de las evaluaciones rigurosas,
transparentes, crebles y tiles para la toma de decisiones un instrumento esencial para
juzgar su eficacia. Es lo que ha tratado de desarrollarse en la segunda parte del libro,
presentando qu hay que hacer en una evaluacin (captulo cuarto) y cmo puede
hacerse (o el variado marco metodolgico del captulo quinto).
En la actualidad existen iniciativas que transitan por este camino. El Banco Mundial ha
comenzado a crear un cuerpo de evaluaciones de impacto bajo rigurosa metodologa que
comienza a ofrecer evidencias muy interesantes7. Dentro del grupo de desarrollo
humano del Banco, Espaa ha creado un Fondo especfico de apoyo a evaluaciones de
impacto bajo metodologa experimental (evaluaciones aleatorizadas o experimentos con
http://web.worldbank.org/WBSITE/EXTERNAL/TOPICS/EXTPOVERTY/EXTISPMA/0,,contentMDK:
21534261~menuPK:412159~pagePK:210058~piPK:210062~theSitePK:384329,00.html
grupos de control aleatorizados) dotado con 10,4 millones de euros8. Tambin dentro
del Banco Mundial se desarrolla la Iniciativa Africana sobre Evaluaciones de Impacto9.
En el mbito acadmico sobresale el Abdul Latif Jameel Poverty Action Lab asociado al
MIT de EE.UU. que ofrece formacin y evaluaciones de impacto sobre temas como
educacin, salud, corrupcin o empoderamiento de la mujer, entre otros10, 11.
En el mbito internacional ya existe una red de apoyo a evaluaciones de impacto (la
Internacional Initiative for Impact Evaluation)12, incluso una red de redes13. Hay
pginas web dedicadas a difundir los resultados de intervenciones que han resultado
exitosas o fracasadas tras ser evaluadas de forma altamente rigurosa (por ejemplo, el
Social Program That Work)14. Es decir, hoy en da ya est en marcha un amplio
despliegue de creacin y difusin de conocimiento cientfico sobre intervenciones de
desarrollo humano que pueden y deben sumarse a la buena voluntad de todos los
agentes que estn involucrados en la lucha contra la pobreza y a la voluntad poltica (al
menos declarada) de gobernantes tanto de los pases ricos como pobres.
Espaa puede y debe contribuir a esta generacin de conocimiento y al avance de una
cultura de la evaluacin que transforme la ayuda basada en una compasin puntual y
superficial en una poltica de desarrollo, integral y coherente, que muestra resultados en
trminos de desarrollo. Es lo que se ha tratado de orientar y promover en el sexto
captulo del libro. Espaa ya no es un donante joven como se ha venido repitiendo con
frecuencia para excusar la ayuda de alta calidad- sino que debe contribuir con su
experiencia y medios crecientes a un mundo ms humano, rico y equitativo, en el que la
ayude llegue a ser historia porque la pobreza extrema fue superada. Pero sin
evaluaciones ni intervenciones basadas en evidencias, los intereses espurios, la simple
retrica o incluso el cinismo, seguir presidiendo la ayuda internacional. Entonces la
campaa en pro de que la pobreza sea historia (Making Poverty History)15 seguir
8
Spanish
World
Bank
Trust
Fund
for
Impact
Evaluation:
http://web.worldbank.org/WBSITE/EXTERNAL/TOPICS/EXTPOVERTY/EXTISPMA/0,,contentMDK:
21419502~menuPK:384336~pagePK:148956~piPK:216618~theSitePK:384329,00.html
9
Africa
Impact
Evaluation
Initiative:
http://web.worldbank.org/WBSITE/EXTERNAL/COUNTRIES/AFRICAEXT/EXTIMPEVA/0,,menuPK
:2620040~pagePK:64168427~piPK:64168435~theSitePK:2620018,00.html
10
http://www.povertyactionlab.com/
11
Una orientacin muy completa de los sitios web sobre evaluaciones de impacto puede consultarse en:
http://web.worldbank.org/WBSITE/EXTERNAL/TOPICS/EXTPOVERTY/EXTISPMA/0,,contentMDK:
20193313~menuPK:384366~pagePK:148956~piPK:216618~theSitePK:384329,00.html
12
http://www.3ieimpact.org/
13
Network of Networks on Impact Evaluation (NONIE): http://www.worldbank.org/ieg/nonie/
14
http://www.evidencebasedprograms.org/
15
http://www.makepovertyhistory.org/
teniendo supremaca sobre la que este libro intenta lanzar: hacer que la ayuda sea
historia porque muri de xito y las ONGD y agencias de desarrollo pblicas y
privadas dedican recursos y esfuerzos a causas nobles menos vergonzantes para la
humanidad como la pobreza extrema de gran parte de los seres humanos.
REFERENCIAS BIBLIOGRFICAS
REFERENCIAS BIBLOGRFICAS
AA.VV. (2006) Rescuing the World Bank. Center for Global Development. Washington.
AA.VV. (2008) Evaluar la Accin Humanitaria. Icaria. Barcelona.
ABBOT , J. y GUIJT, I. (1998) Changing views of change: participatory approaches to
monitoring the environment. SARL Discussion Paper 2. IIED. London.
ACTION AID (2005) Real Aid. An Agenda for Making Aid Work, Action Aid International.
Johannesburg.
ACHARYA, A.; A.F. DE LIMA & M. MOORE (2004) Aid Proliferation: How Responsible
Are the Donors?, IDS Working Paper 214.
ADAM, C. y OCONNELL, S. (2000) Aid versus Trade Revisited Centre for the Study of
African Economies Working Paper series 2000-19.University of Oxford.
ADAM, C.; S. OCONEELL & E. BUFFIE (2008) Aid Volatility, Monetary Policy Rules, and
the Capital Account in African Countries, World Economy and Finance Research
Programme, Working Paper Series, Birbeck, University of London.
ADDISON, T. & ROE, A. (eds.) (2004) Fiscal Policy for Development: Poverty, Reconstruction
and Growth. Palgrave Macmillan: Basingstoke.
ADDISON, T. (ed.) (2003) From Conflict to Recovery in Africa. Oxford University Press for
UNUWIDER: Oxford.
ADDISON, T.; MAVROTAS, G. & McGILLIVRAY, M. (2005) Aid, Debt Relief and New
Sources of Finance for Meeting the Millennium Development Goals, WIDER Research
Paper 2005/09.
ADDISON, T.; MAVROTAS, G. & McGILLIVRAY, M. (2005) Development Assistance and
Development Finance: Evidence and Global Policy Agendas, Journal of International
Development 17, 819-836.
ADELMAN, C. (2007) The Index of Global Philanthropy 2007, Hudson Institute. Washington.
ADELMAN, C. (2007b) Nuevo panorama en la ayuda exterior de Estados Unidos, eJournalUSA
12(11), 11-14. http://usinfo.state.gov/journals/itps/1107/ijps/adelman.htm
ADELMAN, I. (2000) The Role of government in economic development in F. TARP (ed.)
Foreign Aid and Development. Lessons learnt and directions for the future. Routledge.
London. Chapter 2, pp. 48-79.
AFRICAN EVALUATION ASSOCIATION (2000) The African Evaluation Guidelines 2000: A
checklist
to
assist
evaluators:
Draft
1.2.
http://www.afrea.org/content/index.cfm?navID=5&itemID=204
AGENOR, P-R. & AIZENMAN (2007) Aid Volatility and Poverty Traps, NBER WP 13400.
AHMED, A.; R. VARGAS; L.C. SMITH; D.M. WIESMANN & T. FRANKENBERGER
(2007) The Worlds Most Deprived. Characteristics and Causes of Extreme Poverty and
Hunger, IFPRI 2020 Discussion Paper 43
REFERENCIAS BIBLIOGRFICAS
AIYAR, S.; A. BERG & M. HUSSAIN (2005) El reto macroeconmico de la ayuda adicional,
Finanzas y Desarrollo (sep.) 28-31.
AKE, C. (1996) "Los fundamentos polticos del desarrollo sostenible en frica". Informacin
Comercial Espaola 755, 73-84.
ALBI, E. y RODRIGUEZ ONDARZA, J.A. (1988) "ACB: notas sobre su situacin actual".
Papeles de Economa Espaola 37, 482-487.
ALCAIDE, L. y J.M. LARR (2007) Corrupcin, ayuda al desarrollo, pobreza y desarrollo
humano, Boletn de Informacin Comercial Espaola 2917, 37-58.
ALCAIDE, L. y LARR, J.L. (2007b) Transparencia como elemento clave de la eficacia en la
cooperacin al desarrollo espaola, Memorando OPEX 44, Fundacin Alternativas.
ALCALDE, A.R. (2007) Las tareas de planificacin. Cmo llevar a cabo una planificacin
enfocada a los procesos de desarrollo?, en VARELA DE UGARTE, F. (dir.) La Calidad de
las Intervenciones de Desarrollo. Fundamentos y herramientas para mejorar su diseo.
CIDEAL y EPTISA Int. Madrid. Cap.4, pp.95-156.
ALDCROFT, D. (1990) Historia de la economa europea 1914-1980. Crtica. Barcelona.
ALESINA, A. y DOLLAR, D. (2000) Who Gives Foreign Aid to Whom and Why?, Journal of
Economic Growth 5(1), 33-63.
ALESINA, A. y WEDER, B. (2002) Do Corrupt Governments Receive Less Foreign Aid?
American Economic Review 92 (4) 1126-1137. [(2000) NBER Working Paper 7108 (1999
version).
ALKIN, M.C. (1985) A Guide for Evaluation Decision Makers. Sage. Beverly Hills.
ALNAP (1999) Record of the Third Meeting. Active Learning Network on Accountability and
Performance in Humanitarian Assistance. ODI. London.
ALONSO, A. (2007) La Evaluabilidad de las Intervenciones de Cooperacin al Desarrollo,
Coleccin Escuela Diplomtica 12, 27-42.
ALONSO, J.A. (1999b) La eficacia de la ayuda: crnica de decepciones y esperanzas.
ALONSO, J.A. y MOSLEY, P.(eds.) La eficacia de la cooperacin internacional al
desarrollo: evaluacin de la ayuda. Civitas. Madrid. 69-123.
ALONSO, J.A. (2001) Nuevas Direcciones en la Poltica de Ayuda al Desarrollo, Revista de
Economa Mundial 5, 11-45.
ALONSO, J.A. (2003) Globalizacin, desigualdad internacional y eficacia de la ayuda, en
ALONSO, J.A. y FITZGERALD, V. (eds.) Financiacin del desarrollo y coherencia en las
polticas de los donantes. La Catarata. Madrid. pgs. 153-178.
ALONSO, J.A. (2004) El Desarrollo como Proceso Abierto al Aprendizaje: Diez Desafos para la
Ayuda, Revista de Fomento Social 59, 359-393. Reeditado en The European Journal of
Development Research, vol. 16, n 4, winter 2004, pp.845-867.
ALONSO, J.A. (2006) Eficacia de la Ayuda : Un Enfoque Desde las Instituciones, Revista
CIDOB dAffers Internacionals 72, 17-39.
REFERENCIAS BIBLIOGRFICAS
ALONSO, J.A. (2006) El debate sobre la eficacia de la ayuda: una consideracin introductoria,
Coleccin Escuela Diplomtica 10, 23-44.
ALONSO, J.A. (Dtor.) (1999a) Estrategia para la Cooperacin Espaola. MAE-SECIPI. Madrid.
ALONSO, J.A. et al. (2003) Enfoque antipobreza de la cooperacin espaola: de las
declaraciones a los hechos, en INTERMN-OXFAM, La Realidad de la Ayuda 2003-2004.
Intermn-Oxfam. Barcelona. Pgs. 85-120.
ALONSO, J.A. y GARCIMARTIN, C. (2003) Poverty Reduction and Aid Policy, CREDIT
Research Paper 03/06. Centre for Research in Economic Development and International
Trade. University of Nottingham.
ALVIRA, F. (1991) Metodologa de Evaluacin de Programas. Centro de Investigaciones
Sociolgicas. Madrid.
AMAVILAH, VH. (1998) German Aid and Trade versus Namibian GDP and Labour
Productivity, Applied Economics 30, 689695.
AMEZCUA, C. y JIMNEZ LARA, A. (1996) Evaluacin de Programas Sociales. Dez de
Santos. Madrid.
ANGULO, G. (2004) La Opinin Pblica Espaola y la Ayuda al Desarrollo, ICEI Documento
de Trabajo 03 / 04.
ANGULO, G. (2007) Opinin pblica, participacin ciudadana y poltica de cooperacin en
Espaa, ICEI Documento de Trabajo 03 / 07.
ANTOANZAS, F. et al. (1998) El debate de la estandarizacin metodolgica en la evaluacin
de proyectos sanitarios: el caso de la tasa de descuento. Papeles de Economa Espaola 76,
159-164.
ARANA, M.J. (1997) Rescatar lo femenino para re-animar la tierra. Cuadernos Cristianismo y
Justicia N 78. Barcelona.
ARELLANO, C.; A. BULIR; T. LANE & L. LIPSCHITZ (2005) The Dynamic Implications
of Foreign Aid and Its Variability, IMF Working Paper 05/119.
ARELLANO, C.; A. BULIR; T. LANE & L. LIPSCHITZ (2009) The Dynamic Implications
of Foreign Aid and Its Variability, Journal of Development Economics 88, 87-102. [(2006)
paper presented at UNU-WIDER Conference on Aid: Principles, Policies and Performance,
16-17 june, Helsinki. (2008) Journal of Development Economics.
ARREDONDO, M. (2008) Calidad de la Ayuda y Cooperacin Descentralizada: La participacin
en los Procesos de Evaluacin, Revista Espaola de Desarrollo y Cooperacin 21, 83-95.
ARREDONDO, M. Y SANZ, B. (2007) Avances, Desafos y Oportunidades en la Evaluacin de
la Cooperacin Espaola para el Desarrollo, Coleccin Escuela Diplomtica 12, 15-26.
ARVIN, M. (2002) New Perspectives on Foreign Aid and Economic Development. Praeger
Publishers. Westport.
ATEN, B. & HESTON, A. (2003) Use of Penn World Tables for International Comparisons of
Poverty Levels: Potential and Limitations, paper for the Global Poverty Workshop,
Initiative for Policy Dialogue, Columbia University, march 31- april 1.
http://pwt.econ.upenn.edu/papers/PWTPoverty03.PDF
REFERENCIAS BIBLIOGRFICAS
ATKINSON, AB. (ed.) (2004) New Sources for Development Finance. Oxford University Press
for UNUWIDER: Oxford.
AUTY, R. (ed.) (2001) Resource Abundance and Economic Development. Oxford University
Press, Oxford.
AZAM, J.P. y LAFFONT, J.J. (2003) Contracting for Aid, Journal of Development Economics
70, 25-58.
AZAM, J.P.; DEVARAJAN, S. y OCONELL, S. (1999) Aid Dependence Reconsidered,
Working Paper Series 1999-5, Centre for the Study of African Economies. University of
Oxford.
AZQUETA, D. (1994) Aplicacin del Anlisis Coste-Beneficio a modificaciones en la calidad
del agua. AZQUETA, D. y FERREIRO, A. (eds.) Anlisis econmico y gestin de recursos
naturales. Alianza. Madrid. 311-343.
BAKER, J. (2000) Evaluacin del impacto de los proyectos de desarrollo en la pobreza. Manual
para profesionales. Banco Mundial. Washington, D.C.
BALLESTEROS, C. et al. (eds.) (2005) El Microcrdito como instrumento de reconciliacin:
Evaluacin de impacto de los microcrditos de Cruz Roja espaola en Ruanda. Foro Nantik
Lum de Microfinanzas, Cruz Roja Espaola y Universidad Pontificia Comillas. Madrid.
BAMBERGER, M. (ed.)(2000) Integrating Quantitative and Qualitative Methods in Development
Research, World Bank. Washington.
BANCO MUNDIAL (1993) The East Asian Miracle. World Bank. Washington.
BANCO MUNDIAL (1998) Assessing Aid. What Works, What Doesnt, and Why. Oxford
University Press. New York. [Traduccin espaola: Evaluacin de la ayuda. Mundi-Prensa.
Madrid.]
BANCO MUNDIAL (2000) Attacking Poverty. World Development Report 2000-2001.
Washington. Cap. 11.
BANCO MUNDIAL (2001) Examen anual de la eficacia en trminos de desarrollo 2000.
Departamento de Evaluacin de Operaciones. Banco Mundial. Washington.
BANCO MUNDIAL (2002) Globalizacin, Crecimiento y Pobreza. Construyendo una economa
mundial incluyente. Banco Mundial y Alfaomega. Mxico
BANCO MUNDIAL (2002) The Role and Effectiveness of Development Assistance. Lessons
from World Bank Experience. The World Bank. Washington.
BANCO MUNDIAL (2002) The Role and Effectiveness of Development Assistance. Lessons
from World Bank Experience. The World Bank. Washington.
BANERJEE,
A.
(2006a)
Making
Aid
http://bostonreview.net/BR31.4/contents.html
Work,
Boston
Review
31
(4).
BANERJEE, A. (2006b) The best argument for the experimental approach is that it spurs
innovation, Boston Review 31 (4).
BANERJEE, A. (ed.) (2007) Making Aid Work, MIT Press. Cambridge.
REFERENCIAS BIBLIOGRFICAS
REFERENCIAS BIBLIOGRFICAS
BID (1997) Evaluacin: Una herramienta de gestin para mejorar el desempeo de los proyectos.
Banco
Interamericano
de
Desarrollo.
Oficina
de
Evaluacin
(EVO).
http://www.iadb.org/cont/evo/SPBook/evomain.htm
BIEKART, K. (1999) Evaluacin del impacto de la ayuda privada orientada al fortalecimiento de
la sociedad civil, ALONSO, J.A. y MOSLEY, P. (eds.) La eficacia de la cooperacin
internacional al desarrollo: evaluacin de la ayuda. Civitas. Madrid. 185-238.
BIEKART, K. y FOWLER, A. (1998) Sirven realmente de algo las Organizaciones de
Cooperacin No Gubernamentales?. SOGGE, D. (ed.) Compasin y clculo. Un anlisis
crtico de la cooperacin no gubernamental al desarrollo. Icaria. Barcelona. 153-199.
BIGGS, S. (1989) Resource-poor farmer participation in research: a synthesis of experiences from
nine national agricultural research systems. OFCOR Comparative Study Paper 3.
International Service for National Agricultural Research. The Hague.
BIRDSALL, N. (2004) New Issues in Development Assistance, OED Conference on
Effectiveness of Policies and Reforms, World Bank, 4-october.
BIRDSALL, N. (2004) Seven Deadly Sins: Reflections on Donor Failings, CGD Working Paper
50.
BIRDSALL, N. ; D. RODRIK & A. SUBRAMANIAN (2005) How to Help Poor Countries,
Foreign Affairs 84 (4, jul-aug), 136-152. [traducido en Revista de Fomento Social 60, 623641.]
BLATTMAN, C. (2008) Impact Evaluation 2.0, Presentation to the DFID, London.
BOBBA, M. & POWELL, A. (2007) Aid Effectiveness: Politics Matters, IADB Working Paper
601.
BOLLEN, K.; P. PAXTON & R. MORISHIMA (2005) Assessing International Evaluations.
An Example From USAIDs Democracy and Governance Program, American Journal of
Evaluation 26 (2), 189-203.
BOONE, P. (1995) The Impact of Foreign Aid on Savings and Growth, Working Paper London
School of Economics.
BOONE, P. (1996) . Politics and the Effectiveness of Foreign Aid, European Economic Review
40 (2), 289-329.
BOONE, P. (1996) Puede la ayuda reducir eficazmente la pobreza?, Informacin Comercial
Espaola 755, 39-52
BOOTH, D. & EVANS, A. (2006) An options paper, DAC Evaluation Network: Follow-up to
the Paris Declaration on Aid Effectiveness. Revised after discussion at the 4th meeting of the
DAC Evaluation Network, 30-31 March.
BORENSZTEIN, E.; J. CAG; D. COHEN & C. VALADIER (2008) Aid Volatility and
Macro Risks in Low-Income Countries, OECD Development Centre Working Paper 273.
BOURGUIGNON, F. & SUNDBERG, M. (2007) Aid Effectiveness Opening the Black Box,
American economic Review 97 (2), 316-321.
BOURGUIGNON, F. & SUNDBERG, M. (2007) La ayuda puede funcionar. La ayuda es cada
vez ms eficaz, pero es difcil demostrarlo, Finanzas y Desarrollo, marzo, 56-57.
REFERENCIAS BIBLIOGRFICAS
REFERENCIAS BIBLIOGRFICAS
BULIR, A. & HAMANN, J. (2006) Volatility of Development Aid: From the Frying Pan into the
Fire?, IMF Working Paper 06/65.
BULIR, A. & HAMANN, J. (2008) Volatility of Development Aid: From the Frying Pan into the
Fire, World Development 36(10), 2048-2066.
BULIR, A. & LANE, T. (2002) Aid and Fiscal Management, IMF Working Paper 02/112.
BULIR, A.; A. GELB & P. MOSLEY (2008) Introduction: The Volatility of Overseas Aid,
World Development 36(10), 2045-47.
BURNELL, P. (2003) Foreign Aid Resurgent: New Spirit or Old Hangover?, WIDER
Conference on Sharing Global Prosperity. Helsinki, 6-7 September.
BURNSIDE, C. y DOLLAR, D. (1999) Aid, the Incentive Regime and Poverty Reduction,
World Bank Policy Research Working Paper 1937, Banco Mundial. Washington. [Traducido
en: Informacin Comercial Espaola 778, 31-42.]
BURNSIDE, C. y DOLLAR, D. (2000) Aid, Policies and Growth, American Economic Review
90, 847-868. [(1997) Aid, Policies and Growth, World Bank Policy Research Working
Paper 1777].
BURNSIDE, C. y DOLLAR, D. (2004) Aid, Policies and Growth: Reply, American Economic
Review 94 (3), 781-784.
BURNSIDE, C. y DOLLAR, D. (2004) Aid, Policies and Growth: Revisiting the Evidence,
World Bank Policy Research Working Paper 3251.
BUSTELO, M. (1998) Deontologa de la evaluacin: el modelo de los cdigos ticos
anglosajones, Gestin y Anlisis de Polticas Pblicas 11-12, 141-156.
BUSTELO, M. (1999) Diferencias entre evaluacin e investigacin: una distincin necesaria para
la identidad de la evaluacin de programas. Revista espaola de Desarrollo y Cooperacin
4, 9-29.
BUSTELO, M. (2002) Metaevaluation as a Tool for the Improvement and Development of the
Evaluation Function in Public Administrations, Paper presented at the The 2002 EES
Conference: Three movements in Contemporary Evaluation: Learning, Theory and
Evidence. Sevilla.
BUSTELO, M. (2003) Qu tiene de especfico la metodologa de evaluacin?, en BAOL i
MARTINEZ, R. (2002) La Evaluacin de la Accin y de las Polticas Pblicas. Daz de
Santos. Madrid. pgs. 13-32.
BUSTELO, P. (1991) Economa del desarrollo. Un anlisis histrico. Complutense. Madrid.
BUSTELO, P. (1998) Teoras contemporneas del desarrollo econmico. Sntesis. Madrid.
CAD (1991) The DAC Principles for the Evaluation of Development Assistance. OECD. Pars.
CAD (1994) Spain. Development Cooperation Report. OECD-DAC. Paris.
CAD (1995) Principios del CAD para una ayuda eficaz. Manual de la ayuda al desarrollo. MundiPrensa. Madrid.
REFERENCIAS BIBLIOGRFICAS
CAD (1996) Shaping the 21st Century: the Contribution of Development Co-operation. OECD.
Pars.
CAD (1997) Searching for impact and methods: NGO Evaluation synthesis study. DAC Expert
Group on Aid Evaluation. OEDC/DAC. Ministry for Foreign Affairs of Finland. Helsinki.
CAD (1997a) Evaluation Programmes Promoting Participatory Development and Good
Governance. Synthesis Report. DAC Expert Group on Aid Evaluation. OEDC/DAC. Pars.
CAD (1997b) Searching for impact and methods: NGO Evaluation synthesis study. DAC Expert
Group on Aid Evaluation. OEDC/DAC. Ministry for Foreign Affairs of Finland. Helsinki.
CAD (1998) Spain. Development Cooperation Report. OECD-DAC. Paris.
CAD (1998a) Results-based management in the development Co-operation Agencies. A review of
experience. Working party on Aid Evaluation. OECD. Paris.
CAD (1998b) Review of the DAC Principles for evaluation of development assistance. OECD.
Paris.
CAD (1998c) DAC Guidelines on Gender Equality & Womens Empowerment in Development
Co-operation. OECD. Paris.
CAD (1999a) Guidance for Evaluating Humanitarian Assistance in Complex Emergencies.
Evaluation and Aid Effectiveness N1. DAC Expert Group. OCDE. Paris.
CAD (1999b) Evaluating Country Programmes. Vienna Workshop, 1999. Evaluation and Aid
Effectiveness N2.DAC Expert Group. OCDE. Paris.
CAD (2000) Directrices del CAD sobre la reduccin de la pobreza. OECD-DAC. Paris.
CAD (2000a) Donor Support for Institutional Capacity Development in Environment: Lessons
Learned. Evaluation and Aid Effectiveness N3.OECD-DAC. Paris.
CAD (2000b) Effective Practices in Conducting a Joint Multi-Donor Evaluation. Evaluation and
Aid Effectiveness N4. OECD-DAC. Paris.
CAD (2001) Evaluation Feedback for Effective Learning and Accountability. Evaluation and Aid
Effectiveness N5. OECD-DAC. Paris.
CAD (2002) Directrices del CAD sobre la reduccin de la pobreza. MAE-SECIPI. Madrid.
CAD (2002) Glosario de los principales trminos sobre evaluacin y gestin basada en resultados.
Evaluation and Aid Effectiveness N6. OECD-DAC. Paris.
CAD (2002) Spain. Development Cooperation Report. OECD-DAC. Paris.
CAD (2003) Harmonizing Donor Practices for Effective Aid Delivery. DAC Guidelines and
Reference Series. OECD-DAC. Paris.
CAD (2004) Lessons Learned on Donor Support to Decentralisation and Local Governance.
Evaluation
and
Aid
Effectiveness
N7.
OECD-DAC.
Paris.
http://www.oecd.org/dataoecd/46/60/30395116.pdf
CAD (2006) Guidance for Managing Joint Evaluations. DAC Evaluation Series. OECD. Paris.
10
REFERENCIAS BIBLIOGRFICAS
CAD-OCDE (2007) Promoting Pro-Poor Growth. Practical Guide to Ex Ante Poverty Impact
Assessment, DAC Guidelines and referente Series. OECD. Paris.
CANSINO, J.M. y SNCHEZ BRAZA, A. (2004) Propuestas metodolgicas para la evaluacin
de programas pblicos de formacin. Una visin crtica, Documento de Trabajo Serie
Economa E2004/86. Universidad de Sevilla.
CANSINO, J.M. y SNCHEZ BRAZA, A. (2004b) Evaluacin de programas pblicos de
formacin mediante el estimador de diferencias en diferencias. Mtodos de clculo
alternativos a partir de datos simulados, Universidad de Sevilla. Mimeo.
CARBALLO, R. (1990) Evolucin del concepto de evaluacin: desarrollo de los modelos de
evaluacin de programas. Bordn 42-4, 423-431.
CARBALLO, R. (1992) El impacto de los estudios evaluativos. Bordn 43-4, 509-515.
CARLSSON, J. & WOHLGEMUTH, L. (2000) Learning in development co-operation.
Almqvist & Wiksell Int. Stockholm.
CARVALHO, S. & WHITE, H. (1994) Indicators for Monitoring Poverty Reduction, World
Bank Discussion Papers 254.
CASLEY, D. y KUMAR, K. (1990a) Seguimiento y evaluacin de proyectos en agricultura.
Mundi-Prensa y Banco Mundial. Madrid.
CASLEY, D. y KUMAR, K. (1990b) Recopilacin, anlisis y uso de los datos de seguimiento y
evaluacin. Mundi-Prensa y Banco Mundial. Madrid.
CASSEN, R & associates (1986) Does Aid Work ? Clarendon. Oxford.
CASTAO, T. y LARR, J.M. (coords.) (2005) Nuevas herramientas de la Cooperacin al
Desarrollo, Nuevo rol de los actores?, Entimema. Madrid.
CASTRO, R. y MOKATE, K. (1998) Evaluacin econmica y social de proyectos de inversin.
Uniandes y BID. Santaf de Bogot.
CELASUM, O. & WALLISER, J. (2008) Predictability of Aid: Do Fickle Donors Undermine
Aid Effectiveness?, Economic Policy 23 (55), 545-594.
CELASUM, O. & WALLISER, J. (2008b) Cuando la ayuda da sorpresas. Los pases no pueden
usar plenamente la ayuda si esta es imprevisible, Finanzas y Desarrollo, sep., 34-37.
CIDA (2002) Canada Making a Difference in the World. A Policy Statement on Strengthening Aid
Effectiveness. Canadian International Development Agency. September 2002.
CIRUJANO, P. (2005) La estrategia demorada. Gnero y cooperacin internacional en Espaa. La
Catarata. Madrid.
CIRUJANO, P. y CIRUJANO, M. (2004) Es la igualdad de gnero un objetivo real de la AOD
espaola?, en INTERMN-OXFAM La Realidad de la Ayuda 2004-2005. IntermnOxfam. Barcelona.
CLAESSENS, S.; D. CASSIMON & B. van CAMPENHOUT (2007) Empirical Evidence on
the New International Aid Architecture, IMF Working Paper 07/277.
REFERENCIAS BIBLIOGRFICAS
11
CLEMENS, M. & MOSS, T.J. (2005) Ghost of 0.7%: Origins and Relevance of the International
Aid Target, Center for Global Development Working Paper 68.
CLEMENS, M. & RADELET, S. (2003) The Millennium Challenge Account: How Much is
Too Much, How Long is Long Enough?, Centre for Global Development Working Paper
23.
CLEMENS, M. ; C. KENNY & T. MOSS (2004) The Trouble with the MDGs: Confronting
Expectations of Aid and Development Success, Center for Global Development Working
Paper 40.
CLEMENS, M.; RADELET, S. & BHAVNANI, R. (2004) Counting chickens when they hatch:
The short term effect of aid on growth, Center for Global Development Working Paper 44.
CLEMENTS, B. et al. (2004) Asistencia externa : Donaciones o prstamos?, Finanzas y
Desarrollo, septiembre de 2004, 46-49.
CLEMENTS, B. et al. (2004) Foreign Aid and Revenue Response: Does the Composition of Aid
Matter?, in S. GUPTA, B. CLEMENTS & g. INCHAUSTE, Helping Countries Develop:
The Role of Fiscal Policy, International Monetary Fund, Washington.
CLEMENTS, P. (1995) A Poverty-Oriented Cost-Benefit Approach to the Analysis of
Development Projects, World Development 23-4, 577-592.
CM (1998, 1999, 2000, 2001) Informe de la Cooperacin para el Desarrollo realizada por las
Administraciones Pblicas Madrileas. Ayuda Oficial al Desarrollo en la Comunidad de
Madrid. Comunidad de Madrid.
CM (2003) Evaluacin del proyecto piloto de habilitacin laboral del Programa de Alfabetizacin
y Educacin Bsica de Adultos de Nicaragua (PAEBA). Consejera de Servicios Sociales.
DG de Inmigracin, Cooperacin para el Desarrollo y Voluntariado. Comunidad de Madrid.
CM (2005) Evaluacin final Proyecto de Habilitacin Laboral Departamento de Madriz. II Fase.
2004- Ministerio de Educacin, Cultura y Deportes de Nicaragua.
COGNEAU, D. & NAUDET, J-D. (2006) Who Deserves Aid ? Equality of Opportunity,
International Aid and Poverty Reduction, World Development [(2004) DIAL Document de
Travail DT/2004/10].
COHEN, E. y FRANCO, R. (1993) Evaluacin de proyectos sociales. Siglo XXI. Madrid.
COLLIER, P. & DEHN, J. (2001) Aid, Shocks, and Growth, World Bank Policy Research
Working Paper 2688.
COLLIER, P. & DOLLAR, D. (2001a) Development Effectiveness: What Have We Learnt?,
Paper at the Joint Development Centre/DAC Experts Seminar on Aid Effectiveness,
Selectivity and Poor Performers, OECD, Paris. 17-Enero-2001.
COLLIER, P. & DOLLAR, D. (2001b) Can the World Cut Poverty in Half? How Policy
Reform and Effective Aid Can Meet International Development Goals, World Development
29 (11), 1787-1802.
COLLIER, P. & DOLLAR, D. (2004) Development effectiveness: what have we learnt?,
Economic Journal 114(496), F244F271.
12
REFERENCIAS BIBLIOGRFICAS
COLLIER, P. & GUNNING, J.W. (1999) Explaining African Economic Performance, Journal
of Economic Literature 37, 64-111.
COLLIER, P. & HOEFFLER, A. (2002) Aid, policy, and growth in post-conflict societies,
World Bank Policy Research Working Paper No. 2902.
COLLIER, P. (1999) Aid Dependency: A Critique, Journal of African Economies 8, 528-545.
COLLIER, P. y DOLLAR, D. (2002) Aid Allocation and Poverty Reduction, European
Economic Review 46 (8), 1475-1500. [(1999) Aid Allocation and Poverty Reduction,
Policy Research Working Paper 2041, World Bank, Washington.]
COMISIN (2000) The European Communitys Development Policy. Statement by the Council
and the Commission. Luxemburg.
COMISION DE LAS CC.EE. (1993) Manual Gestin del Ciclo de un Proyecto. Enfoque
integrado y Marco Lgico. Serie mtodos e instrumentos para la gestin del ciclo de un
proyecto. N 1. Bruselas.
COMISION DE LAS CC.EE. (1997) Manual of Financial and Economic Analysis of
Development Projects. Luxemburgo. [autor: Pierre FABRE].
COMISIN MUNDIAL DEL MEDIO AMBIENTE Y DESARROLLO (1988) Nuestro futuro
comn. Alianza. Madrid.
COMMISSION OF THE EUROPEAN COMMUNITIES (2007) EU Code of Conduct on
Division of Labour in Development Policy, COM (2007) 72 final. Brussels, 28.2.2007.
CONGDE (1995a) La integracin de la perspectiva de gnero en la cooperacin para el
desarrollo de la Unin Europea. Coordinadora de ONGD-Espaa. Madrid.
CONGDE (1998e) La negociacin de la UE con los pases ACP desde la perspectiva de gnero.
Documento de posicionamiento de WIDE. Coordinadora de ONGD-Espaa. Madrid.
CONGDE (2005) Informe de la CONGDE sobre el sector de las ONGD 2004. Coordinadora de
ONGD-Espaa. Madrid.
CONGDE (2005b) Informe de la CONGDE sobre la percepcin social de las ONGD: As nos ven.
Coordinadota de ONGD-Espaa. Madrid.
CONGDE (2006) Informe de la CONGDE sobre el sector de las ONGD 2005. Coordinadora de
ONGD-Espaa. Madrid.
CONGDE (2007) Informe de la CONGDE sobre el sector de las ONGD 2006. Coordinadora de
ONGD-Espaa. Madrid.
CONSEJO DE LA UNIN EUROPEA (1998) Reglamento (CE) N2836/98 del Consejo de 22
de diciembre de 1998 sobre la integracin de las cuestiones de gnero en la cooperacin para
el desarrollo. D.O. L 354 de 30.12.1998. p.5. Bruselas.
COOPER, R.N. (2004) A Half Century of Development, Paper prepared for the Annual World
Bank Conference on Development Economics, Washington, D.C. May 3-4.
CORDELLA, T. & DELLARICCIA, G. (2002) Limits of Conditionality in Poverty Reduction
Programs, IMF Working Paper 115.
REFERENCIAS BIBLIOGRFICAS
13
CORDELLA, T. & DELLARICCIA, G. (2003) Budget Support Versus Project Aid, IMF
Working Paper 03/88.
CORDELLA, T. & ULKU, H. (2004) Grants Versus Loans, IMF Working Paper 04/161.
CORDRAY, D. y LIPSEY, M. (eds.) (1987) Evaluation Studies. Review Annual. Vol.11. (1986).
Sage. Newbury Park.
CORNWALL, A. y JEWKES, R. (1995) What is Participatory Research?, Social Science and
Medicine.41 (12), 1667-1676.
COX, A. y HEALEY, J. (2000) Poverty Reduction: A Review of Donors Strategies and
Practices, en CAD, Waging the Global War on Poverty. OECD-DAC. Paris. 25-60.
COX, A. y HEALEY, J. (2000) European Development Cooperation and the Poor. ODI,
McMillan Press. London.
COX, M. & THORNTON, N. (2006) 2006 Asian Regional Forum on Aid Effectiveness:
Implementation, Monitoring and Evaluation, Synthesis Report, October.
CRACKNELL, B.E. (2001) Evaluating Development Aid. Issues, Problems and Solutions. Sage.
Thousand Oaks.
CRONBACH, L.J. (1963) Course Improvement through Evaluation, Teachers College Record
64, 672-683.
CUADRADO ROURA, J.R. (1996) "Convergencia nominal y convergencia real. El verdadero
reto para Espaa" en CUADRADO ROURA, J.R. y MANCHA, T., Espaa frente a la
U.E.M. Civitas. Madrid. Cap.1.
CUESTA, J.; M. GONZLEZ y J.M. LARR (2006) Contribuye la Ayuda al Desarrollo a
Reducir la Desigualdad?, Revista de Economa Mundial 15, 203-233.
CURTO, S. (2007) Nuevo panorama de la ayuda, Finanzas y Desarrollo, diciembre, 20-21.
CHAKRAVARTY, S. (1993) "Anlisis coste-beneficio".
econmico. Fuhem-Icaria. Madrid. 31-43.
CHAMBERS, R. (1980) Rapid Rural Appraisal: rationale and repertoire. IDS Discussion Paper
155. Brighton.
CHAMBERS, R. (1983) Rural Development: Putting the Last, First. Longman. London.
CHAMBERS, R. (1992) Rural Appraisal: Rapid, Relaxed and Participatory. IDS Discussion
Paper 311. Brighton.
CHAMBERS, R. (1994a) The Origins and Practice of Participatory Rural Appraisal, World
Development vol.22, N7, 953-969.
CHAMBERS, R. (1994b) Participatory Rural Appraisal (PRA): Analysis of Experience, World
Development vol.22, N9, 1253-1268.
CHAMBERS, R. (1994c) Participatory Rural Appraisal (PRA): Challenges, Potentials and
Paradigm, World Development vol.22, N10, 1-17.
14
REFERENCIAS BIBLIOGRFICAS
CHAMBERS, R. (1997) Whose Reality Counts? Putting the first, last. Intermediate Technology
Publications. London.
CHAMBERS, R. (2004) Ideas for Development: Reflecting Forwards, IDS Working Paper 238.
vol.VI
CHAMBERS, R. (2004) Ideas for Development: Reflecting Forwards, IDS Working Paper 238.
CHAMBERS, R. (2005) Ideas for Development. Earthscan. London.
CHANG, C., FERNANDEZ-ARIAS, F. y SERVN, L. (1999) Un Nuevo Enfoque para la
Medicin de los Flujos de Ayuda, Informacin Comercial Espaola 778, 55-80. [original:
Measuring Aid Flows: A New Approach World Bank Policy Research Working Paper
2050].
CHANG, H-J. (2005) Understanding the Relationship between Institutions and economic
Development. Some Key Theoretical Issues, WIDER Conference Thinking Ahead: The
Future of Development Economics, Helsinki, 17-18 june.
CHAUVET, L. & GUILLAUMONT, P. (2004) "Aid and Growth Revisited: Policy, Economic
Vulnerability and Political Instability" in Tungodden et al. (eds.) Toward Pro-Poor Policies.
Aid, Institutions, and Globalization. World Bank and Oxford University Press. Washington.
Pags. 95-110. [(2002) ABCDE World Bank Conference. Oslo, June 24-26.]
CHEN, S. & RAVALLION, M. (2000) How Did the Worlds Poorest Fare in the 1990s?, World
Bank Policy Research Working Paper 2409.
CHEN, S. & RAVALLION, M. (2003) Hidden Impact? Ex post Evaluation of an Anti-Poverty
Program, World Bank Policy Research Working Paper 3049.
CHEN, S. & RAVALLION, M. (2004) How Did the Worlds Poorest Fare in the 1990s?, World
Bank Policy Research Working Paper 3341.
CHEN, S. & RAVALLION, M. (2007) Absolute Poverty Measures for the Developing World,
1981-2004, World Bank Policy Research Working Paper 4211.
CHENERY, H. y STROUT, A. (1966) Foreign Assistance and Economic Development,
American Economic Review 56 (4), 679-733.
CHOI, E.K. (2005) Infrastructure Aid, Deindustrialization, and Welfare, IMF Working Paper
05/150.
CHORITZ, S. (2002) Literature Review of Evaluative Evidence on the Three Drivers of Effective
Development: Ownership, Policy, and Capacity Development. UNDP Evaluative Office.
DAC-OECD (2003) Working Party, Partners in Development Evaluation: Learning and
Accountability. Paris, 25-26 march 2003.
DAC-OECD (2006) DAC Evaluation Quality Standards (for test phase application), DAC
Network on Development Evaluation, 30-31 march.
DAHLER-LARSEN, P. (2007) Debemos Evaluarlo Todo? O de la Estimacin de la
Evaluabilidad a la Cultura de la Evaluacin, Informacin Comercial Espaola 836, 93-104.
DALE, R. (1998) Evaluation Frameworks for Development Programmes and Projects. Sage. New
Delhi.
REFERENCIAS BIBLIOGRFICAS
15
DALGAARD, C. & ERICKSON, L. (2006) Solow versus Harrod-Domar: Reexamining the Aid
Costs of the First Millennium Development Goal, IMF Working Paper 284.
DALGAARD, C. & HANSEN, H. (2006) The Return to Foreign Aid, paper presented at UNUWIDER Conference on Aid: Principles, Policies and Performance, 16-17, june, Helsinki.
DALGAARD, C. ; HANSEN, H. & TARP, F. (2004) On the Empirics of Foreign Aid and
Growth, Economic Journal 114(496) F191-F216. [(2002) Credit Research Paper 02/08.
Centre for Research in Economic Development and International Trade. University of
Nottingham.]
DALGARD, C. & HANSEN, H. (2001) On Aid, Growth and Good Policies, Journal of
Development Studies 37 (6), 17-41.
DANIDA (2003) A Review of Evaluation in DANIDA Ministry of Foreign Affairs, prepared fro
DANIDA by H. Lundgren, W. Hagen North & R. Rist, January 2003. Copenhaguen.
DAVIES, R. y DART, J. (2005) Tcnica del Cambio Ms Significante (MSC por sus siglas en
ingls), Gua para su uso. Original ingls en http://www.mande.co.uk/docs/MSCGuide.pdf
DAYTON-JOHNSON, J. & HODDINOTT, J. (2003) Aid, Policies, and Growth, Redux,
Dalhousie University, April. http://132.203.59.36/CIRPEE/conf-cirpee/conference-0403/files/j-djohnsonredux2.pdf
DE RENZIO, P. (2005) Increased Aid vs. Absorptive Capacity: Challenges and Opportunities
Toward 2015, IDS Bulletin 36 (3), 20-27.
DE SOTO, H. (2001) El Misterio del Capital: Por qu el capitalismo triunfa en Occidente y fracasa
en el resto del mundo. Pennsula. Madrid.
DEATON, A. (1997) The Analysis of Household Surveys: A Microeconomic Approach to
Development Policy. Johns Hopkins University Press , World Bank. Washington
DEATON, A. (2003a) Measuring Poverty in a Growing World (or Measuring Growth in a Poor
World), NBER Working Paper 9822.
DEATON, A. (2003b) How to Monitor Poverty for the Millennium Development Goals, Journal
of Human Development, 4 (3), 353-378.
DEATON, A. (2006) Measuremet Poverty in A. BANERJEE et al., Understanding Poverty,
Oxford Univ. PressNew York, Chap. 1, pp.3-16.
DEININGER, K. & SQUIRE, L. (1996) A New Data Set Measuring Income Inequality, World
Bank Economic Review 10 (3), 565-592.
DEININGER, K. et al. (1998) Does Economic Analysis Improve the Quality of Foreign
Assistance?, The World Bank Economic review 12 (3), 385-418.
DEMEKAS, D. et al. (2002) The Economics of Postconflict Aid, IMF Working Paper 02/198.
DENZIN, N.K. y LINCOLN, Y.S. (eds.) (1994) Handbook of Qualitative Research..Sage.
Thousand Oaks.
DEUTSCHER, E. & FYSON, S. (2008) Mejorar la eficacia de la ayuda, Finanzas y Desarrollo,
sep., 15-19.
16
REFERENCIAS BIBLIOGRFICAS
REFERENCIAS BIBLIOGRFICAS
17
DOSAL, P. (coord.) (2003) Cmo evaluar las polticas pblicas desde la perspectiva de gnero?
Diputacin Foral de Bizkaia. Bizkaia.
DOUCOULIAGOS, H. & PALDAM, M. (2006) The Aid Effectiveness Literature. The Sad
Result of 40 Years of Research, University of Aarhus, Department of Economics Working
Paper 18/4-2006.
DRAZEN, A. & ISARD, P. (2004) Can Public Discussion Enhance Program Ownership?, IMF
Working Paper 04/163.
DUFLO, E. & BANERJEE, A. (2005) Addressing Absence, MIT Working Paper.
DUFLO, E. & CHATTOPADHYAY, R. (2004) Women as Policy Makers: Evidence from
Randomized Policy Experiment in India, Econometrica 72(5), 1409-1443.
DUFLO, E. & KREMER, M. (2003) Use of Randomization in the Evaluation of Development
Effectiveness, Paper prepared for the World Bank Operations Evaluation Department
(OED) Conference on Evaluation and Development Effectiveness in Washington, D.C. 1516 July, 2003. http://econ-www.mit.edu/faculty/download_pdf.php?id=759
DUFLO, E. & KREMER, M. (2005) Use of Randomization in the Evaluation of Development
Effectiveness, in PITMAN, G.; O. FEINSTEIN & G. INGRAM (eds) Evaluating
Development Effectiveness. World Bank Series on Evaluation and Development. Vol.7.
Transaction Publishers. New Brunswick.
DUFLO, E. (2001) Schooling and Labor Market Consequences of School Construction in
Indonesia: Evidence from an Usual Policy Experiment, American Economic Review 91(4),
795-813.
DUFLO, E. (2003b) Scaling up and Evaluation, Paper prepared for the ABCDE in Bangalore.
http://econ-www.mit.edu/faculty/download_pdf.php?id=760
DUFLO, E. (2004) The Medium Run Effects of Educational Expansion: Evidence from Large
School Construction Programme in Indonesia, Journal of Development Economics 74 (1),
163-197. (nov.2001) http://econ-www.mit.edu/faculty/download_pdf.php?id=440
DUFLO, E. (2005) Field Experiments in Development Economics, paper prepared for the World
Congress of the Econometric Society, December.
DUFLO, E.; A. BANERJEE & A. DEATON (2004) Wealth, health, and services in rural
Rajasthan, AER Papers and Proceedings 94 (2).
DUFLO, E.; A. BANERJEE; S.COLE; & L.LINDEN (2004) Remedying Education: Evidence
from Two Randomized Experiments in India, MIT Working Paper.
DUFLO, E.; P.DUPAS & M. KREMER (2007) Peer Effects, Pupil-Teacher Ratios, and Teacher
Incentives: Evidence from a Randomized Evaluation in Kenya, Paper for the NEUDC,
Northeast Universities Development Consortium Conference,
26-27 october.
http://www.cid.harvard.edu/neudc07/docs/neudc07_s6_p03_duflo.pdf
DUFLO, E.; R. GLENNERSTER & M. KREMER (2006) Using Randomization in
Development
Economics
Research:
A
Toolkit.
J-PAL
Paper.
http://www.povertyactionlab.com/papers/Using%20Randomization%20in%20Development
%20Economics.pdf
18
REFERENCIAS BIBLIOGRFICAS
DURBARRY, R. et al. (1998) New Evidence on the Impact of Foreign Aid on Economic
Growth, Credit Research Paper 98/8. Centre for Research in Economic Development and
International Trade. University of Nottingham.
EASTERLY, W. (1999) The Ghost of Financing Gap: Testing the Growth Model Used in the
International Financial Institutions, Journal of Development Economics 60(2), 423-438.
EASTERLY, W. (2001) The Elusive Quest of Growth: Economists Adventures and
Misadventures in the Tropics, The MIT Press. Cambridge.
EASTERLY, W. (2002) The Cartel of Good Intentions: Bureaucracy versus Markets in Foreign
Aid, Center for Global Development Working Paper 4.
EASTERLY, W. (2002) What Did Structural Adjustment Adjust? The Association of Policies
and Growth with Repeated IMF and World Bank Adjustment Loans, Center for Global
Development Working Paper 11.
EASTERLY, W. (2003) Can Foreign Aid Buy Growth?, Journal of Economic Perspectives 17,
23-48.
EASTERLY, W. (2006) Freedom versus Collectivism in Foreign Aid, in GWARTNEY, J. &
LAWSON,R. Economic Freedom of the World. Annual Report 2006. Cato Institute and
Fraser Institute. Chapter 2. pp.29-41.
EASTERLY, W. (2006) Reliving the 50s: the Big Push, Poverty Traps, and Takeoffs in
Economic Development, Journal of Economic Growth 11(4), 289-318. [(2005) CGD
Working Paper Number 65.]
EASTERLY, W. (2006) The White Man's Burden: Why the West's Efforts to Aid the Rest Have
Done So Much Ill and So Little Good. Penguin Press, New York.
EASTERLY, W. (2007) Was Development Assistance a Mistake?, American Economic Review
97(2), 328-332.
EASTERLY, W., LEVINE, R. y ROODMAN,D. (2003) New Data, New Doubts: Revisiting
Aid, Policies and Growth, Center for Global Development Working Paper 26.
EASTERLY, W., LEVINE, R. y ROODMAN,D. (2004) Aid, Policies, and Growth: Comment,
American Economic Review 94 (3), 774-780.
ECONOMIDES, G.; S. KALYVITIS, & A. PHILIPPOPOULOS (2004) Do Foreign Aid
Transfers Distort Incentives and Hurt Growth? Theory and Evidence from 75 Aid-Recipient
Countries CESifo Working Paper 1156.
EDWARDS, M. & HULME, D. (2002) Aumentando el impacto de las ONG en el desarrollo:
aprendiendo d la experiencia, en AA.VV. Desarrollo, ONG y Sociedad civil. IntermnOxfam. Barcelona. pp.46-67.
EDWARDS, M. & HULME, D. (eds.) (1996) Beyond the Magic Bullet. NGO Performance and
Accountability in the Post-Cold War World. The Kumarian Press. Hartford.
EDWARDS, M. (1997) Organizational Learning in Non-governmental Organizations. What have
we learned?, Public Administration and Development, vol.17, 235-250.
EDWARDS, M. (1997) Organizational Learning in Non-governmental Organizations. What have
we learned? Public Administration and Development, vol.17, 235-250.
REFERENCIAS BIBLIOGRFICAS
19
EDWARDS, M. y HULME, D. (1996) (1998) Beyond the Magic Bullet: NGO Performance and
Accountability in the Post-Cold War World. Earthscan Publications Save the Children
Fund. London.
EIFERT, B. & GELB, A. (2005) El problema de la volatilidad de la ayuda, Finanzas y
Desarrollo (sept.) 24-27.
EIFERT, B. & GELB, A. (2005) Improving the Dynamics of Aid. Towards More Predictable
Budget Support, The World Bank Policy Research Working Paper 3732.
EIFERT, B. & GELB, A. (2005) Improving the Dynamics of Aid: Toward More Predictable
Budget Support, World Bank Policy Research Working Paper 3732. [paper presented at
UNU-WIDER Conference on Aid: Principles, Policies and Performance, 16-17 june,
Helsinki.]
EIFERT, B. & GELB, A. (2006) El problema de la volatilidad de la ayuda, Finanzas y
Desarrollo, sep. 24-27.
EIFERT, B. & GELB, A. (2008) Reforming Aid: Towards More Predictable, PerformanceBased Financing for Development, World Development 36(10), 2067-2081.
ELBERS, C. & GUNNING, J. (2003) Estimating vulnerability, Department of Economics, Free
University of Amsterdam.
EMMANUEL, A. (1972) El intercambio desigual. Siglo XXI. Madrid.
ENGLE, P. et al. (2006) Strategies to Avoid the Loss of Developmental Potential among 242
Million Children in the Developing World , Draft 4-17-06. Mimeo.
ESPINOSA, J. (2007) La Perspectiva de Gnero en la Evaluacin de Programas de Desarrollo
Internacional, Coleccin Escuela Diplomtica 12, 73-92.
ESTEBAN, M. y ECHEBARRA, C. (1998) Metodologas y procedimientos de evaluacin. El
caso de la poltica industrial y tecnolgica. Universidad del Pas Vasco. Bilbao.
ESTRELLA, M. y GAVENTA, J. (1998) Who Counts Reality? Participatory Monitoring and
Evaluation: A Literature Review, IDS Working Paper 70.
EUROPEAN COMMISSION (2002) Guidelines for use of Indicators in country performance
assessment. Brussels. October 2002.
EUROSTAT (1998) Indicadores de desarrollo sostenible. Estudio piloto segn la
metodologa de la Comisin de Desarrollo Sostenible de las Naciones Unidas.
Comunidades Europeas. Luxemburgo.
EVANS, A. & BOOTH, D. (2006) Review of Literature, DAC Evaluation Network: Follow-up
to the Paris Declaration on Aid Effectiveness.
EXPANSIN (1999) Diccionario Empresarial Stanford. Definicin de trminos espaol-ingls. 5
volmenes. Area Editorial. Madrid.
FEENY, S. (2003) The Impact of Foreign Aid on Poverty and Human Well-Being in Papua New
Guinea, Asia-Pacific Development Journal 10 (2), 73-93.
FEENY, S. (2005) The Impact of Aid on Economic Growth in Papua New Guinea, Journal of
Development Studies 41 (6), 1092-1117.
20
REFERENCIAS BIBLIOGRFICAS
FEINSTEIN, O. & INGRAM, G. (2003) Lessons Learned from World Bank Experiences in
Joint Evaluation, paper presented at the Development Assistance Committee Working Party
on Aid Evaluation workshop Partners in Development Evaluation: Learning and
Accountability,
Paris,
March
25-26,
2003.
http://www.minefi.gouv.fr/TRESOR/cicid/atelier/home.htm
FEINSTEIN, O. (2002) Use of Evaluations and the Evaluation of their Use, Evaluation 8(4),
433-439.
FEINSTEIN, O. (2007) Evaluacin Pragmtica de Polticas Publicas, Informacin Comercial
Espaola 836, 19-31.
FERNANDEZ DIAZ, A. et al. (1989) "El anlisis coste-beneficio como tcnica de la Poltica
Econmica". Curso de poltica econmica. A.C. Madrid. 175-186.
FETTERMAN, D. (2001) Foundations of Empowerment Evaluation. Sage. Thousand Oaks.
FETTERMAN, D. et al. (1995) Empowerment Evaluation: Knowledge and Tools for SelfAssessment and Accountability. Sage. Thousand Oaks.
FEUERSTEIN, M.T. (1990) Partners in Evaluation: evaluating development and community
programmes with participants. McMillan. London.
FEYZIOGLU, T. et al. (1998) A Panel Data Analysis of the Fungibility of Foreign Aid, World
Bank Economic Review 12, 29-58.
FIELDING, D. & MAVROTAS, G. (2005) The Volatility of Aid, WIDER Discussion Paper
2005/06.
FIELDING, D. & MAVROTAS, G. (2005) The Volatility of Aid, WIDER Discussion Paper
2005/06.
FIELDING, D. & MAVROTAS, G. (2008) Aid Volatility and Donor-Recipient Characteristics
in Difficult Partnership Countries, Economica 75 (199), 481-494.
FIELDING, D.; M. McGILLIVRAY & S. TORRES (2007) A Wider Approach to Aid
Effectiveness: Correlated Impacts on Health, Wealth, Fertility and Education, in
MAVROTAS, G. & SHORROCKS, A. (eds.) Advancing Development. Core Themes in
Global Economics. Palgrave MacMillan, Houndmills, chapter 11, pp.183-196.
FIELDING, D.; S. KNOWLES; M. McGILLIVRAY & S. TORRES (2006) Does Aid Work
for the Poor?, paper presented at UNU-WIDER Conference on Aid: Principles, Policies and
Performance, 16-17, june, Helsinki.
FINK, A. y KOSECOFF, J. (1978) An Evaluation Primer. Sage. Beverly Hills.
FISZBEIN, A. & GEVERS, C. (2005) Learning and Scaling Up through Evaluation, in
MORENO-DODSON, B. (ed.) Reducing Poverty on a Global Scale. Learning and
Innovating for Development. Findings from the Shanghai Global Learning Initiative. The
World Bank. Washington. Chapter 6, pp. 191-225.
FITZ-GIBBON, C.T. y MORRIS, L.L. (1987a) How to Design a Program Evaluation. Sage.
Newbury Park.
FITZ-GIBBON, C.T. y MORRIS, L.L. (1987b) How to Analyse Data. Sage. Newbury Park.
REFERENCIAS BIBLIOGRFICAS
21
22
REFERENCIAS BIBLIOGRFICAS
GARCA IZQUIERDO, B. (2001) Nuevos socios para nuevas ONGD. Universidad de Deusto.
Bilbao.
GARCA RAMOS, J.M. (1992) Recursos metodolgicos en la evaluacin de programas,
Bordn 43-4, 461-476.
GARCA RAMOS, J.M. (1999) Investigacin y evaluacin. Implicaciones y efectos. Algunas
reflexiones metodolgicas sobre investigacin y evaluacin educativa. Conferencia
pronunciada en Santiago de Chile. Mimeo. Sin publicar.
GASC, M. (1999) Una aproximacin a la evaluacin de proyectos de desarrollo. Boletn
Educacin Sin Fronteras 2. Barcelona.
GASPER, D. (1999) El enfoque del Marco Lgico ms all de los proyectos: el seguimiento y la
evaluacin de la ayuda humanitaria en emergencias complejas, Revista Espaola de
Desarrollo y Cooperacin 4, 51-82.
GELB, A.; B. NGO & X. YE (2004) Implementing Performance-Based Aid in Africa: The
Country Policy and Institutional Assessment, World Bank Africa Region Working Paper
Series 77.
GELB, A.; B. NGO & X. YE (2004) Implementing Performence-Based Aid in Africa, World
Bank Africa Region Working Paper 77.
GEMMELL, N & McGILLIVRAY, M. (1998) Aid and tax instability in the government budget
constraints in developing countries, CREDIT Research Paper 98/1. University of
Nottingham: Nottingham. Volatilidad
GEMMELL, N & McGILLIVRAY, M. (1998) Aid and Tax Instability in the Government
Budget Constraints in Developing Countries, CREDIT Research Paper 98/1. University of
Nottingham: Nottingham.
GIBBS, C.; FUMO, C. y KUBY, T. (1999) Nongovernmental Organizations in World BankSupported Projects: A Review. World Bank. Washington.
GOMANEE, K. & MORRISSEY, O. (2002) Evaluating Aid Effectiveness against Poverty
Reduction Criterion, Paper at DESG Conference, Nottingham, April 2002.
http://www.shef.ac.uk/uni/projects/desg/cinfo/cpapers/gomanee.pdf
GOMANEE, K. et al. (2003) Aid, Pro-Poor Government Spending and Welfare, CREDIT
Research Paper 03/03. University of Nottingham.
GOMANEE, K., S. GIRMA & O. MORRISSEY (2002) Aid and Growth in sub-Saharan Africa:
Accounting for Transmission Mechanisms, CREDIT Research Paper 02/05. University of
Nottingham.
GOMANEE, K., S. GIRMA & O. MORRISSEY (2003) Searching for Aid Threshold Effects,
CREDIT Research Paper 03/15. University of Nottingham.
GOMANEE, K., S. GIRMA & O. MORRISSEY (2005) Aid, Public Spending, and Human
Welfare: Evidence from Quantile Regressions, Journal of International Development 17
(3), 299-309.
GMEZ GALN, M. y CMARA, L. (2003) Orientaciones para la aplicacin del enfoque del
marco lgico. Errores frecuentes y sugerencias para evitarlos. CIDEAL. Madrid.
REFERENCIAS BIBLIOGRFICAS
23
24
REFERENCIAS BIBLIOGRFICAS
REFERENCIAS BIBLIOGRFICAS
25
26
REFERENCIAS BIBLIOGRFICAS
HUDSON, J. & MOSLEY, P. (2008) Aid Volatility, Policy and Development, World
Development 36(10), 2082-2102. [(2006) paper presented at UNU-WIDER Conference on
Aid: Principles, Policies and Performance, 16-17 june, Helsinki.]
HUDSON, J. & MOSLEY, P. (2008b) The Macroeconomic Impact of Aid Volatility, Economic
Letters 99, 486-489.
HUTHER, J. & SHAH, A. (2000) Anti-corruption Policies and Programs: A Framework for
Evaluation, World Bank Policy Research Working Paper 2501.
IEO (2005) Draft Isuues Paper for an Evaluation of Structural Conditionality in IMF-Supported
Programs, march 18. Independent Evaluation Office. IMF.
IFAD (2002) A Guide for Project M&E. Managing for Impact in Rural Development. International
Fund for Agricultural Development. http://www.ifad.org/evaluation/guide/index.htm
IGUIZ, J. (1991) Hacia una alternativa de desarrollo, Aportes para la Discusin 1,
FONDAD, Quito.
IMF (2005) The Macroeconomics of Managing Increased Aid Inflows: Experiences of LowIncome Countries and Policy Implications, Policy Development and Review Department,
August 8.
INRA (EUROPE) European Coordination Office (1997) Eurobarometer 46.0: Development
Aid: Building for the Future with Public Support, for the European Commission Directorate
General Development, INRA, Brussels
INRA (EUROPE) European Coordination Office (1999) Eurobarometer 50.1: Europeans and
Development Aid, for the European Commission Directorate General Development, INRA,
Brussels.
INTERMN (2000) La realidad de la ayuda 2000-2001. Intermn-Oxfam. Barcelona.
IPC (ed.) (2007) Does Aid Work? For the MDGs. Poverty in Focus. International Poverty Centre.
Brasilia. October.
JACQUET, P. (2006) Evaluations and Aid Effectiveness, in AA.VV. Rescuing the World Bank.
Center for Global Development. Washington. pp. 171-181
JTTING, J. et al. (2004) Decentralization and Poverty in Developing Countries: Exploring the
Impact, OECD Development Centre Working Paper 236.
KANBUR, R. & SHAFFER, P. (2007) Experiences of Combining Qualitative and Quantitative
Approaches in Poverty Analysis. Monogrfico de World Development 35(2).
KANBUR, R. (1993) "Precios sombra". EATWELL et al. Desarrollo econmico. Fuhem-Icaria.
Madrid. 480-483.
KANBUR, R. (2001) Economic Policy, Distribution and Poverty: The Nature of Disagreements.
World Development 29 (6), 1083-1094.
KANBUR, R. (2004) Growth, Inequality and Poverty: Some Hard Questions, commentary
prepared for the State of the World Conference, Princeton University, 13-14 february.
http://www.people.cornell.edu/pages/sk145/papers/htm.
REFERENCIAS BIBLIOGRFICAS
27
28
REFERENCIAS BIBLIOGRFICAS
LARR, J.M. (2005) La Declaracin de Pars-2005: Principios para una ayuda eficaz y
aplicaciones para las ONGD, Revista de Fomento Social 238, 243-281.
LARR, J.M. (2006) Ayuda al Desarrollo y buen gobierno en los pases de Renta Media.
Recomendaciones para Espaa, Instituciones y Desarrollo 17 (1).
LARR, J.M. (2006b) La ayuda al desarrollo, reduce la pobreza?, Coleccin Escuela
Diplomtica N 10, 75-104.
LARR, J.M. (2000) La evaluacin en los proyectos de cooperacin al desarrollo de las ONGD
espaolas. Tesis Doctoral. Universidad San Pablo-CEU. Madrid.
LARR, J.M. (2002) Razones para implantar un sistema de evaluacin en las ONGD y sus
consecuencias, Revista de Fomento Social 57 (228), 683-710.
LARR, J.M. (2003a) La eficacia de la ayuda al desarrollo. Una revisin al anlisis
macroeconmico y las evidencias empricas, Cooperacin Internacional / International
Cooperation. 9, 87-101.
LARR, J.M. (2003b) Anlisis de los resultados y metaevaluacin de los informes de
EuropeAid Documento de Discusin del CECOD 03/01. www.cecod.net
LARR, J.M. (2003b) La ayuda para los pobres funciona. La eficacia micro de la ayuda al
desarrollo, Revista de Economa Mundial 8, 97-117.
LARR, J.M. (2003c) Empoderamiento y participacin en la evaluacin de acciones de
cooperacin al desarrollo: del discurso terico a la prctica espaola, comunicacin para el
III Congreso de la Sociedad Espaola de Evaluacin de Polticas Pblicas, Conferencia
2003, Los retos tericos y metodolgicos de la evaluacin en los sectores del empleo, la
educacin
y
el
desarrollo.
Jerez,
12-14
de
noviembre
de
2003.
http://www.sociedadevaluacion.org/Eventos.htm
LARR, J.M. (2004) La Retroalimentacin en los Sistemas de Evaluacin. Experiencias en la
Cooperacin al Desarrollo. Centro de Estudios de Cooperacin al Desarrollo. Madrid.
LARR, J.M. (2005b) Nuevos instrumentos y renovados principios de la eficacia de ayuda al
desarrollo: los retos metodolgicos para su evaluacin, Sociedad Espaola de Evaluacin.
Actas de la Conferencia 2005. Evaluacin y Gobierno. Madrid, 7-9 de julio de 2005.
www.sociedadevaluacion.org/docs/conferencias/4thMadrid 2005/com221.pdf
LARR, J.M. (2007a) Los Programas de Desarrollo de la Comunidad de Madrid. Convocatoria
2002. Estudios de Cooperacin al Desarrollo. Comunidad de Madrid. Madrid.
LARR, J.M. (2007b) La Evaluacin de Impacto: Qu es, cmo se mide y qu est aportando
en la Cooperacin al Desarrollo, en J.M. LARR (coord.) Evaluacin en la Cooperacin
para el Desarrollo. Coleccin Escuela Diplomtica N12. Madrid, pgs. 109-133.
LASSO DE LA VEGA, M.C. y URRUTIA, A.M. (2000) HDPI: A framework of pollutionsensitive human development indicators. Discussion Paper n 4. Departamento de
Economa Aplicada IV, Universidad del Pas Vasco.
LAWRENCE, J. (1989) Engaging Recipients in Development Evaluation. The Stakeholder
Approach. Evaluation Review, vol.13, N 3, 243-256.
LAWSON, A. & D. BOOTH (2004) Evaluation of General Budget Support. Evaluation
Framework, ODI, London.
REFERENCIAS BIBLIOGRFICAS
29
LAWSON, A. et al. (2003) General Budget Support Evaluability Study Phase 1. Synthesis
Report, DFID Evaluation Report Ev643.
LZARO, A.J. (1992) La formalizacin de indicadores de evaluacin. Bordn 43-4, 477-494.
LENSINK & MORRISEY, O. (1999) Uncertainty of Aid Inflows and the Aid-Growth
Relationship, Credit Research Paper 99/3. Centre for Research in Economic Development
and International Trade. University of Nottingham.
LENSINK, R. & MORRISSEY, O. (2001) Aid Instability as a Measure of Uncertainty and the
Positive Impact of Aid on Growth, Journal of Development Studies 36 (3) 31-49. [(2000)
Paper at the Joint Development Centre/DAC Experts Seminar on Aid Effectiveness,
Selectivity and Poor Performers, OECD, Paris. 17-Enero-2001.] Volatilidad.
LENSINK, R. & MORRISSEY, O. (2001) Aid Instability as a Measure of Uncertainty and the
Positive Impact of Aid on Growth, Journal of Development Studies 36 (3) 31-49. [(2000)
Paper at the Joint Development Centre/DAC Experts Seminar on Aid Effectiveness,
Selectivity and Poor Performers, OECD, Paris. 17-Enero-2001.]
LENSINK, R. & WHITE, H. (1999a) Assessing Aid: Un manifiesto a favor de la ayuda para el
siglo XXI?, Informacin Comercial Econmica 778, 43-54. [(2000) Assessing Aid: A
Manifesto for Aid in the 21st Century? Oxford Development Studies 28 (1), 5-17.]
LENSINK, R. & WHITE, H. (1999b) Is there an Aid Laffer Curve?, Credit Research Paper
99/6. Centre for Research in Economic Development and International Trade. University of
Nottingham.
LENSINK, R. & WHITE, H. (2000) Asignacin de la ayuda y reduccin de la pobreza: el
informe Evaluacin de la Ayuda, en ALONSO, J.A. y FRERES, Ch.(eds.) Los
Organismos Multilaterales y la Ayuda al Desarrollo. Civitas. Madrid. 217-240. [original:
Aid Allocation, Poverty Reduction and the Assessing Aid Report, Journal of International
Development 12 (3), 399-412.]
LENSINK, R. & WHITE, H. (2001) Are There Negative Returns to Aid?, Journal of
Development Studies 37 (6), 42-65.
LEVIN, H.M. (1985) Cost-effectiveness. A primer. Sage. Beverly Hills.
LEVIN, H.M. y McEWAN, P. (2000) Cost-Effectiveness Analysis: Methods and Applications.
Sage. Thousand Oaks.
LEVINE, R. & SAVEDOFF, D. (2006) The Evaluation Agenda, in AA.VV. Rescuing the
World Bank. Center for Global Development. Washington. pp.183-193.
LIGERO, J.A. (2001) Propuesta de un nuevo criterio de evaluacin de proyectos de ayuda al
desarrollo; la cobertura, Revista Espaola de Desarrollo y Cooperacin 8, 167-181.
LINCOLN, Y.S. y GUBA, E.G. (1987) But is it Rigorous? Trustworthiness and Authenticity in
Naturalistic Evaluation. SHADISH, W.R. y REICHARDT, C.S. Evaluation Studies. Review
Annual. Vol.12 (1987). Sage. Thousand Oaks. 425-436.
LIVERANI, A. & LUNDBERG, H. (2007) Evaluation Systems in Development Aid Agencies,
Evaluation 13 (2), 241-256.
LPEZ MNDEZ, I. y ALCALDE, A.R. (coords.)(1999) Relaciones de Gnero y Desarrollo.
Hacia la equidad de la cooperacin. IUDC-UCM. Madrid.
30
REFERENCIAS BIBLIOGRFICAS
REFERENCIAS BIBLIOGRFICAS
31
32
REFERENCIAS BIBLIOGRFICAS
REFERENCIAS BIBLIOGRFICAS
33
34
REFERENCIAS BIBLIOGRFICAS
REFERENCIAS BIBLIOGRFICAS
35
36
REFERENCIAS BIBLIOGRFICAS
NARAYAN, D. (2000) La Voz de los Pobres. Hay alguien que nos escuche? Banco Mundial y
Mundi-Prensa. Madrid.
NARAYAN, D. et al. (2002) La Voz de los Pobres. Clamando por el Cambio. Banco Mundial y
Mundi-Prensa. Madrid.
NARAYAN, D. y PETESCH, P. (eds.) (2002) La Voz de los Pobres. Desde muchas Tierras.
Banco Mundial y Mundi-Prensa. Madrid.
NKUSU, M. & SAYEK, S. (2004) Local Financial Development and the Aid-Growth
Relationship, IMF Working Paper 04/238.
NKUSU, M. (2004) Are There Negative Returns to Aid? A Comment, IMF Working Paper
04/212. parece que no
NKUSU, M. (2004b) Aid and the Dutch Disease in Low-Income Countries: Informed Diagnoses
for Prudent Prognoses, IMF Working Paper 04/49.
NKUSU, M. (2004c) Financing Ugandas Poverty Reduction Strategy: Is Aid Causing More Pain
Than Gain?, FMI Working Paper 04/170. la Aid no ha causado Dutch Disease
NORAD (1997) Evaluacin de proyectos de ayuda al desarrollo. Manual para evaluadores y
gestores. IUDC-UCM. Madrid.
NOVALES, A. (1997) Econometra. McGraw-Hill.
NSANG, J.A. (1999) Seguimiento y control de proyectos de cooperacin internacional al
desarrollo. Una aproximacin a los mecanismos de la AECI. Revista Espaola de
Desarrollo y Cooperacin 4, 165-177.
NUNNENKAMP, P. (2002) Shooting the Messenger of Good News: A Critical Look at the
World Banks Success Story of Effective Aid, Kiel Institute for World economics, Working
Paper 113. www.uni-kiel.de/ifw/pub/kap/2002/kap1103.htm
NUNNENKAP, P. (2001) Too Much, Too Little, or Too Volatile? International Capital Flows to
Developing Countries in the 1990s, Kiel Working Paper 1036.
NURKSE, R. (1953) Problems of Capital Formation in Underdeveloped Countries. B.Blackwell.
Oxford.
OCONNELL, S. y SOLUDO, C. (2001) Aid Intensity in Africa, World Development 29 (9),
1527-1552.
OAKLEY, P. (ed.) (2001) THE MONITORING AND EVALUATION OF EMPOWERMENT:
Reviewing the Concept and Practice. INTRAC Publications. Oxford.
OCDE (1989) Sustainability in Development Programmes: A Compendium of Evaluation
Experience. Selected Issues in Aid Evaluation. N 1. OCDE, Pars.
OCDE (2000) Directrices del CAD sobre la reduccin de la pobreza. Ministerio de Asuntos
Exteriores y AECI. Madrid.
ODEDOKUM, M. (2003) Economics and Politics of Official Loans versus Grants, WIDER
Discussion Paper 2003/04.
REFERENCIAS BIBLIOGRFICAS
37
ODEDOKUM, M. (2004) multilateral and Bilateral Loans versus Grants: Issues and Evidence,
World Economy 27, 239-263.
OECD-DAC (----) International Development Statistics (IDS) online. Databases on aid and other
resource flows. www.oecd.org/dac/stats/idsonline
OECD-DAC (2006) Statistical Reporting Directives. DCD/DAC/STAT(2006)11/REV1. OECD.
Paris.
OECD-DAC (2006b) Is it ODA? Factsheet-October 2006.
OECD-DAC (2007) Final ODA Flows in 2006, DCD/DAC/RD(2007)15/RD2. 10 December.
OECD-DAC (2008) Debt Relief is down: Other ODA rises slightly. 04/04/2008.
OECD-DAC (2008b) Accra Agenda for Action. 3rd High Level Forum on Aid Effectiveness,
September 2-4.
OECD-DAC (2008c) Scaling Up: Aid Fragmentation, Aid Allocation and Aid Predictability.
Report of 2008 Survey of Aid Allocation Policies and Indicative Forward Spending Plans.
OECD. Paris.
OLSEN, G. R. (2001) European Public Opinion and Aid to Africa: Is There a Link?, Journal of
Modern African Studies 39 (4), 645-674 .
OPE (2000) Programa de subvenciones y ayudas a ONGD en Hait, Repblica Dominicana y
Filipinas. Informes de evaluacin 8/2000. MAE-SECIPI. Madrid.
OUATTARA, B. & STROBL, E. (2004) Disaggregating the aid and growth relationship,
Discussion Paper No. 0414. School of Economic Studies, University of Manchester:
Manchester.
OVASKA, T. (2003) The Failure of Development Aid, Cato Journal 23(2), 175-188. AID
prejudicial para crec. Interactivo con ndice de libertad ec. Mundial.
PACK, H Y J. PACK (1993) "Foreign Aid and the Question of Fungibility", Review of Economics
and Statistics, 75, 258-266.
PADAKI, V. (ed.) (1995) Development Intervention and Programme Evaluation. Sage. New
Delhi.
PALUMBO, D. J. (ed.) (1987) The Politics of Program Evaluation. Sage. Beverly Hills.
PALLAGE, S. & ROBE, M. (2001) Foreign Aid and the Business Cycle, Review of
International Economics 9 (4), 641-672. Volatilidad.
PALLAGE, S. & ROBE, M. (2001) Foreign Aid and the Business Cycle, Review of
International Economics 9 (4), 641-672.
PAMPILLN, R. (1991) El dficit tecnolgico espaol. Instituto de Estudios Econmicos.
Madrid.
PAPANEK, G. (1972) The Effect of Aid and Other Resource Transfers on Savings and Growth
in Less Developed Countries, The Economic Journal 82 (sep.) 934-950.
38
REFERENCIAS BIBLIOGRFICAS
PAPANEK, G. (1973) Aid, Foreign Private Investment, Savings, and Growth in Less Developed
Countries, The Journal of Political Economy 81, 120-130.
PATILLO, C.; J. POLAR & J. ROY (2007) Measuring the Effect of Foreign Aid on Growth
and Poverty Reduction or The Pitfalls of Interaction Variables, IMF Working Paper 07/145.
PATRICK, S. (2006) U.S. Foreign Aid Reform: Will it Fix What is Broken?, Center for Global
Development Essay, September.
PATTON, M.Q. (1978) Utilization-Focused Evaluation. Sage. Beverly Hills.
PATTON, M.Q. (1982) Practical Evaluation. Sage. Newbury Park.
PATTON, M.Q. (1987a) Creative Evaluation. Sage. Newbury Park.
PATTON, M.Q. (1987b) How to Use Qualitative Methods in Evaluation. Sage. Newbury Park.
PATTON, M.Q. (1990) (or.1980) Qualitative Evaluation and Research Methods. Sage. Newbury
Park.
PATTON, M.Q. (19973) Utilization-Focused Evaluation. The New Century Text. Sage. Thousand
Oaks.
PEDERSEN, K.R.(1996) "Aid, Investment and Incentives", Scandinavian Journal of Economics,
98 (3), 423-437.
PEA, D. (1994) Estadstica. Modelos y mtodos. 2. Modelos lineales y series temporales. Alianza
Universidad. Madrid.
PICCIOTO, R. (2002) The Logic of Mainstreaming, Evaluation 8 (3), 322-339.
PICCIOTO, R. (2005) The Evaluation of Policy Coherence for Development, Evaluation 11
(3), 311-330.
PICHARDO, A. (1997) Evaluacin del impacto social. El valor de lo humano ante la crisis y el
ajuste. Limen Humanitas. Buenos Aires.
PINTO, J.L. (1998) El uso del anlisis coste-efectividad en el establecimiento de prioridades
sanitarias. Valores sociales incluidos y excluidos. Papeles de Economa Espaola 76, 148158.
PIPA (2001) Americans on Foreign Aid and World Hunger; A Study of US Public Attitudes.
Program on International Policy Attitudes. Washington.
PNUD (1999) Informe sobre el Desarrollo Humano 1999. Mundi-Prensa. Madrid.
PNUD (2000) Development Effectiveness. Review of evaluate evidence. UNDP. New York.
PNUD (2001) Development Effectiveness. Review of evaluate evidence. UNDP. New York.
PNUD (2001) Development Effectiveness. Review of evaluate evidence. UNDP. New York.
PNUD (2001) Managing for Results: Monitoring and Evaluation in UNDP. A Rsults-Oriented
Framework. UNDP Evaluation Office. Washington.
REFERENCIAS BIBLIOGRFICAS
39
PNUD (2002) Manual de vigilancia y evaluacin de resultados. Oficina de evaluacin del PNUD.
http://stone.undp.org/undpweb/eo/evalnet/docstore3/yellowbook/spanish/index.htm
PNUD (2005) Informe sobre el Desarrollo Humano 2005. La cooperacin internacional ante una
encrucijada: Ayuda al Desarrollo, Comercio y Seguridad en un mundo desigual. MundiPrensa. Madrid.
PNUD (2006) Informe sobre el Desarrollo Humano 2006. Mundi-Prensa. Madrid.
PONS CORTS, G. (2002) El naufragio. Un anlsis de las estrategias de desarrollo econmico de
las ONGD.
POWELL, A. & BOBBA, M. (2006) Multilateral Intermediation of Foreign Aid: What is the
Trade-Off for Donor Countries?, Inter-American Development Bank Working Paper 594.
PRATI, A. & TRESSEL, T. (2006) Aid Volatility and Dutch Disease: Is There a Role for
Macroeconomic Policies?, IMF Working Paper 145.
PRATS, J. (2005) La ayuda externa en busca de calidad, Gobernanza 28, 12 de julio.
PRATS, J. (2005b) Reestructurar la ayuda externa: Ideas para un debate, Gobernanza 30, 6 de
septiembre.
PREBISCH, R. (1950) The Economic Development of Latin America and its Principal Problems,
ONU, Nueva York.
PROWSE, M. (2007) Aid Effectiveness: The Role of Qualitative Research in Impact
Evaluation, ODI Background Note, December.
PROWSE, M. (2007) Aid Effectiveness: The Role of Qualitative Research in Impact
Evaluation, ODI Background Note, December.
PUENTE, C. de la (1995) SPSS/PC+. Una gua para la investigacin. Complutense. Madrid.
PULIDO, A. (1993) Modelos economtricos. Pirmide. Madrid.
QUARTEY, P. (2003) Innovative Ways of Making Aid Effective in Ghana: Tied Aid versus
Direct Budgetary Support, WIDER Conference on Sharing Global Prosperity. Helsinki, 6-7
September.
QUIBRIA, M.Q. (2005) Rethinking Development Effectiveness, World Economics 6 (1), 101117.
RADELET, S. (2002) Challenging Foreign Aid: A Policymakers Guide to the Millennium
Challenge Account, Center fro Global development. Washington.
RADELET, S. (2004) Aid Effectiveness and the Millennium Development Goals, Center for
Global Development Working Paper 39.
RAJAN, R. & SUBRAMANIAN, A. (2005a) Aid and Growth: What Does the Cross-Country
Evidence Really Show?, IMF Working Paper 05/127. [NBER WP 11513]
RAJAN, R. & SUBRAMANIAN, A. (2005b) What Undermines Aids Impact on Growth?,
IMF Working Paper 05/126.
40
REFERENCIAS BIBLIOGRFICAS
RAJAN, R. & SUBRAMANIAN, A. (2007) Does Aid Affect Governance, American Economic
Review 97(2), 322-327.
RAJAN, R. (2005) Ayuda y crecimiento como retos econmicos. La ayuda no basta para quebrar
el ciclo de la pobreza, Finanzas y Desarrollo (diciembre), 53-55.
RAM, R. (2003) Roles of bilateral and multilateral aid in economic growth of developing
countries, Kyklos 56, 95110.
RAM, R. (2004) Recipient countrys policies and the effect of foreign aid on economic growth
in developing countries: additional evidence, Journal of International Development 16,
201211.
RAMCHARAN, R. (2002) How Does Conditional Aid (Not) Work?, IMF Working Paper
02/183.
RANAWEERA, T. (2003) Foreign Aid, Conditionality and Ghost of the Financing Gap: A
Forgotten Aspect of the Aid Debate, World Bank Policy Research Working Paper 3019.
RANIS, G. (2004) The Evolution of Development Thinking: Theory and Policy, Paper prepared
for the Annual World Bank Conference on Development Economics, Washington, D.C. May
3-4.
RANIS, G. (2007) Toward the Enhanced Effectiveness of Foreign Aid, UNU-WIDER Research
Paper 42.
RANIS, G. y STEWART, F. (2000) Strategies for Success in Human Development, QEH
Working Papers Series, 32. Oxford University.
RATHA, D. (2005) Dinero para los hogares: El movimiento de las remesas, Finanzas y
Desarrollo, diciembre, 44-45.
RAVALLION, M. & CHEN, S. (2004) Chinas (Uneven) Progress Against Poverty, World
Bank Policy Research Working Paper 3408.
RAVALLION, M. & CHEN, S. (2007) Chinas (Uneven) Progress Against Poverty, Journal of
Development Economics 82 (1), 1-42.
RAVALLION, M. (1998) Poverty Lines in Theory and Practice, Living Standard Measurement
Study Working Paper 133.
RAVALLION, M. (2001) The Mystery of the Vanishing Benefits: An Introduction to Impact
Evaluation, The World Bank Economic Review 15 (1), 115-140.
RAVALLION, M. (2004) Have We Already Met the Millennium Development Goal for
Poverty?,
Institute
for
International
Economics,
Washington,
http://www.iie.com/publications/papers/ravallion0203.pdf
RAVALLION, M. (2005) Evaluating Anti-Poverty Programs, World Bank Policy Research
Working Paper 3625.
RAVALLION, M.; S.CHEN & P. SANGRAULA (2007) New Evidence on the Urbanization of
Global Poverty, World Bank Policy Research Working Paper 4199.
RAVALLION, M.; S. CHEN & P. SANGRAULA (2008) Dollar a Day Revisited, World Bank
Policy Research Working Paper 4620
REFERENCIAS BIBLIOGRFICAS
41
42
REFERENCIAS BIBLIOGRFICAS
REFERENCIAS BIBLIOGRFICAS
43
ROODMAN, D. (2005) "An Index of Donor Performance," Center for Global Development
Working Paper 67. base de datos AOD 1960-2006.
ROODMAN, D. (2006) Aid Project Proliferation and Absorptive Capacity, Center for Global
Development Working Paper 75.
ROODMAN, D. (2007) Macro Aid Effectiveness Research: A Guide for the Perplexed, Center
for Global Development Working Paper 134.
ROODMAN, D. (2007) The Anarchy of Numbers: Aid, Development, and Cross-country
Empirics, World Bank Economic Review 21 (2), 255-277.
ROODMAN, D. (2008) Through the Looking Glass, and What OLS Found There: On Growth,
Foreign Aid, and reverse Causality, Center for Global Development Working Paper 137.
ROSENSTEIN-RODAN, P. (1961) International aid for underdeveloped countries, Review of
Economics and Statistics, 43(2), 107-38.
ROSSI, P.H. y FREEMAN, H.E. (1989) Evaluation. A Systematic Approach. Sage. Newbury
Park.
ROUND, J. y ODEDOKUM, M. (2003) Aid Effort and its Determinants, WIDER Discussion
Paper 2003/03.
RUBIN, F. (1995) A Basic Guide to Evaluation for Development Workers. Oxfam. London.
RUBIO, G.; PRENNUSHI, G. y SUBBARAO, K. (2000) Seguimiento y evaluacin. Lneas
generales y notas tcnicas. Estrategias de reduccin de pobreza. Libro de consulta. Banco
Mundial. Washington.
RUHASHYANKIKO, J-F. (2005) Why Do Some Countries Manage to Extract Growth from
Foreign Aid?, IMF Working Paper 05/53.
RUZ-MAYA, L. Et al. (1995) Anlisis estadstico de encuestas: datos cualitativos. AC. Madrid.
SACHS, J. (2005) El fin de la pobreza.Cmo lograrlo en nuestro tiempo. Debate. Barcelona.
SAGASTI, F. et al. (1999) Equidad, Integracin Social y Desarrollo. Universidad del Pacfico.
Lima
SALA-i-MARTN, X. (1994) Apuntes de crecimiento econmico. Antoni Bosch Editor.
Barcelona.
SALA-I-MARTIN, X. (2002a) The World Distribution of Income (estimated from Individual
Country Distributions), NBER Working Paper8933.
SALA-I-MARTIN, X. (2002b) The Disturbing Rise of Global Income Inequality, NBER
Working Paper 8904.
SALA-I-MARTIN, X. (2006) The World Distribution of Income: Falling Poverty and
Convergence, Period, The Quarterly Journal of Economics 121 (2), 351-397.
SALAS, J. (2002) Introduccin a la prctica de la evaluacin de proyectos de cooperacin,
Cuadernos Bakeaz 52.
44
REFERENCIAS BIBLIOGRFICAS
REFERENCIAS BIBLIOGRFICAS
45
SCRIVEN, M. (1973) Goal-Free Evaluation, HOUSE, E.R. (ed.) School Evaluation. The politics
and process. McCutchan. Berkeley.
SCRIVEN, M. (1987) New Frontiers of Evaluation, CORDRAY, D. y LIPSEY, M. (eds.)
Evaluation Studies. Review Annual. Vol.11.(1986). Sage. Newbury Park. 93-130.
SCRIVEN, M. (1988) Evaluation ideologies, MADAUS, G.F. et al.(eds.) Evaluation Models.
Viewpoints on Educational and Human Services Evaluation. Kluwer-Nijhoff Publishers.
Boston. 229-260.
SCRIVEN, M. (19914) Evaluation Thesaurus. Sage. Thousand Oaks.
SCWEINBERGER, A. & LAHIRI, S. (2006) On the provision of official and private foreign
aid, Journal of Development Economics 80, 179-197.
SEN, A.K. (1981) Poverty and Famines. An Essay on Entitlement and Deprivation, Oxford Univ.
Press, Oxford.
SEN, A.K. (1989) Development as Capability Expansion, Journal of Development Planning 19,
41-58.
SEN, A.K. (2000) Desarrollo y libertad. Planeta. Barcelona.
SHABAN, R. (1987) Testing between Competing Models of Sharecropping, Journal of Political
Economy 95(5), 893-920.
SHADISH, W.R. y REICHARDT, C.S. (1987) Evaluation Studies. Review Annual. Vol.12
(1987). Sage. Thousand Oaks.
SHAW, I y LISHMAN, J. (eds.) (1999) Evaluation and Social Work Practice. Sage. London.
SHORTELL, S.M. y RICHARDSON, W.C. (1978) Health Program Evaluation. Molby. Sant
Louis. New York.
SIERRA BRAVO, R. (1994) Tcnicas de investigacin social. Teora y ejercicios. Paraninfo.
Madrid.
SIERRA, B. (2000) Criterios para la evaluacin con perspectiva de gnero, Revista Espaola de
Desarrollo y Cooperacin 6, 95-112.
SIMON, D. (2003) Developed Countries, the Three Drivers, and Instruments to Promote
Development, Report for the UNDP Evaluations Office.
SIMON, D. (2003) Developed Countries, the Three Drivers, and Instruments to Promote
Development. For the United Nations Development Program Evaluations Office, as a
Background
Paper
for
the
Development
Effectiveness
Report
2002.
http://www.undp.org/eo/documents/DER/Background%20Paper_Development_Friendliness
_Donor%20Side.doc
SINGER, H.W. (1950) The distribution of Gains Between Investing and Borrowing Countries,
American Economic Review 40, 473-485.
SINGH, R. (1985) State Intervention, Foreign Economic Aid, Savings and Growth in LDCs:
Some Recent Evidence, Kyklos 38 (2), 216-232.
46
REFERENCIAS BIBLIOGRFICAS
SMILLIE, I. (1999) At Sea in a Sieve? Trends and Issues in the Relationship Between Northern
NGOs and Northern Governments, SMILLIE, I. y HELMICH, E. (eds.) Stakeholders.
Government-NGO Partnership for International Development. OEDC. Earthscan
Publications. London. Cap. 2. 7-35.
SMILLIE, I. y HELMICH, E. (eds.) (1999) Stakeholders. Government-NGO Partnership for
International Development. OEDC. Earthscan Publications. London.
SOGGE, D. (2004) Dar y Tomar. Qu sucede con la ayuda internacional? Icaria-Antrazyt.
Barcelona.
SOLOW, R. (1956) A contribution to the theory of economic growth, Quarterly Journal of
Economics, 70, feb.
STAKE, R. (1967) The Countenance of Educational Evaluations, Teachers College Record 68,
523-540.
STAKE, R. (1975a) Evaluating the arts in education: A responsive approach. Merril. Columbus.
STAKE, R. (1975b) Program evaluation: Particularly responsive evaluation. Occasional Paper
n5. Western Michigan University. Tambin recogido en MADAUS, G.F. et al. (1988a)
Evaluation Models. Kluwer-Nijhoff Publishers. Boston. 287-312.
STAKE, R. (1976) A theoretical statement of responsive evaluation Studies in Educational
Evaluation 2, 19-22.
STECHER, B. y DAVIS, W.A. (1987) How to Focus an Evaluation. Sage. Newbury Park.
STERN, M. (1998) Development Aid: What the Public Thinks. Working Paper 4. Office of
development Studies. UNDP/ODS. New York.
STERN, N. (2001) A Strategy for Development, ABCDE Keynote Address, Washington, World
Bank.
STEWART, S. et al. (1995) Participatory Rural Appraisal: Abstracts of Sources: An Annotated
Bibliography. IDS Development Bibliography 11. London.
STIGLITZ, J. (1998) Towards a New Paradigm for Development: Strategies, Policies, and
Processes., Prebisch Lecture at UNCTAD, Geneva, 19-Oct.-1998.
STOCK, I. (2002) Learning from Evaluation: A Case Study of Spanish Non Governmental
Organisations, Thesis submitted to the University of Nottingham, School of Sociology and
Social Policy fro the Master Degree by Research and Thesis in Evaluation Research,
September.
STOCK, I. (2005) Aprendizaje a travs de evaluaciones en las ONGD espaolas: Una utopa?,
Revista Espaola de Desarrollo y Cooperacin 16, 189-207.
STOREY, A. (1997) Non neutral humanitarism: NGOs and the Rwanda crisis, Development in
Pactice 7 (4), 384-394.
STOREY, A. (1997) Non-neutral humanitarianism: NGOs and the Rwanda crisis, Development
in Practice vol.7, n.4 (nov.) 384-394.
STUFFLEBEAM, D.L. y SHINKFIELD, A.J. (1993) Evaluacin sistemtica. Gua terica y
prctica. Temas de educacin Paids./M.E.C. Barcelona.
REFERENCIAS BIBLIOGRFICAS
47
SUBRAMANIAN, S. (2007) International Aid in Light of Global Poverty and Inequality. Some
Unsubtle Propositions, UNU-WIDER Research Paper 2007/31.
SUMNER, A. (2007) Meaning versus Measurement: Why Do Economic Indicators of Poverty
Still Predominate?, Development in Practice 17 (1), 4-13.
SVENSSON, J. (1999) Aid, Growth and Democracy, Economics and Politics 11(3), 275-297.
SVENSSON, J. (2000a) Foreign Aid and Rent-Seeking, Journal of International Economics 51,
437-461.
SVENSSON, J. (2000b) "When is Foreign Aid Policy Credible? Aid Dependence and
Conditionality", Journal of Development Economics 61, 61-84.
SVENSSON, J. (2003) Why Conditional Aid Does Not Work and What Can Be Done About It?,
Journal Of Development Economics 70, 381-402.
SWAROOP, V.; JHA, S, & RAJKUMAR, A. (2000) Fiscal effects of foreign aid in a federal
system of governance: the case of India, Journal of Public Economics 77, 307330.
SZKELY, M.; N. LUSTING; M. CUMPA & J.A. MEJA (2000) Do We Know How Much
Poverty There Is?, Inter-American Development Bank Working Paper 437.
TARP, F. (ed.) (2000) Foreign Aid and development. Lessons learnt and directions for the future.
Routledge. London.
TAVARES, J. (2003) Does Foreign Aid Corrupt?, Economic Letters 79, 99-106.
TELFORD, J. & COSGRAVE, J. (2006) Joint Evaluation of the International response to the
Indian Ocean Tsunami: Synthesis Report, Tsunami Evaluation Coalition, London.
TEZANOS, S. (2006) Es progresiva la distribucin geogrfica de la ayuda espaola?, Coleccin
Escuela Diplomtica 10, 131-166.
THE ECONOMIST (1998) Making Aid Work, Nov. 14th.
THE ECONOMIST (1999) How to Make Aid Work, June 14th.
THE JOINT COMITTEE ON STANDARDS FOR EDUCATIONAL EVALUATION (1981)
(19942) Standards for Evaluations of Educational Programs, Projects, and Materials.
McGraw-Hill. New York. [De la primera edicin, hay traduccin castellana de 1988, en la
editorial Trillas, Mxico].
THOMPSON, M. y FORTESS, E. (1980) Cost-effectiveness analysis in health program
evaluation, Evaluation Review vol.4. Sage. Beverly Hills.
THORBECKE, E. (2000) The Evolution of The Development Doctrine in F. TARP (ed.)
Foreign Aid and Development. Lessons learnt and directions for the future. Routledge.
London. Chapter 1, pp. 1-47.
THORBECKE, E. (2004) Conceptual and Measurement Issues in Poverty Analysis, WIDER
Discussion Paper 04.
THORBECKE, E. (2005) The Evolution of The Development Doctrine, WIDER Conference
Thinking Ahead: The Future of Development Economics, Helsinki, 17-18 june.
48
REFERENCIAS BIBLIOGRFICAS
TOKARICK, S. (2006) Inmiserizing Foreign Aid: The Roles of Tariffs and Nontraded Goods,
IMF Working Paper 129.
TOOLEY, J. & DIXON, P. (2006) Los fracasos de la educacin pblica en los pases en
desarrollo y la respuesta popular, en MILES, M.; K.R. HOMES & M.A. OGRADY (eds.)
Index of economic Freedom, Chapter 2, pp.29-39. The Heritadge Foundation & Wall Street
Journal. Washington
TORROBA, I. (1992) Evaluar a travs de la observacin. Bordn 43-4, 495-507.
TORSVIK, G. (2004) Foreign Economic Aid; Should Donors Cooperate?, Journal of
Development Economics 77, 503-515.
TOUZA, I. (2007) Respuestas vlidas a Preguntas tiles: Consecuencias de un Diseo de
Evaluacin Orientado a las Necesidades de los Usuarios, Coleccin Escuela Diplomtica
12, 43-72.
TRUMBULL, W. y WALL, H. (1994) Estimating Aid-allocation Criteria with Panel Data,
Economic Journal 104, 876-882.
TSIKATA, T. (1998) Aid Effectiveness: A Survey of the Recent Empirical Literature, IMF
Papers on Policy Analysis and Assessment. PPAA/98/1.
TUNGODDEN, B.; N. STERN & I. KOLSTAD (eds). (2004) Toward Pro-Poor Policies. Aid,
Institutions, and Globalization. Annual World Bank Conference on Development
Economics, Europe, 2003. World Bank and Oxford University Press. Washington.
TYLER, R.W. (1942) General statement on evaluation, Journal of Educational Research 35,
492-501.
TYLER, R.W. (1988) A Rationale for Program Evaluation, MADAUS, G.F. et al.,(eds.)
Evaluation Models. Viewpoints on Educational and Human Services Evaluation, KluwerNijhoff Publishers. Boston. 67-78.
URIEL, E. et al. (1990) Econometra. El modelo lineal. AC. Madrid.
URIEL, E. y MUIZ, M. (1988) Estadstica econmica y empresarial. Teora y ejercicios. AC.
Madrid.
USAID (1996) Conducting a participatory evaluation. Performance Monitoring and Evaluation
TIPS N1. Washington.
VALLS, M. (1997) Tcnicas cualitativas de investigacin social. Reflexin metodolgica y
prctica profesional. Sntesis. Madrid.
VAN WIJNBERGEN, S. (1986) Macroeconomic Aspects of the Effectiveness of Foreign Aid:
on the Two-Gap Model, Home Goods Disequilibrium and Real Exchange Rate
Misalignment, Journal of International Economics 21, 123-136.
VARELA DE UGARTE, F. (2007) Los fundamentos del desarrollo y la pobreza. Qu tipo de
desarrollo se est promoviendo verdaderamente a travs de las acciones?, en VARELA DE
UGARTE, F. (dir.) La Calidad de las Intervenciones de Desarrollo. Fundamentos y
herramientas para mejorar su diseo. CIDEAL y EPTISA Int. Madrid. Cap. 6, pp.195-245.
VARELA DE UGARTE, F. (dir.) (2007) La Calidad de las Intervenciones de Desarrollo.
Fundamentos y herramientas para mejorar su diseo. CIDEAL y EPTISA Int. Madrid.
REFERENCIAS BIBLIOGRFICAS
49
50
REFERENCIAS BIBLIOGRFICAS
WHITE, H. (2005) The Case for Doubling Aid, IDS Bulletin 36 (3), 8-13.
WHITE, H. (2007a) Evaluating Aid Impact: Approaches and Findings, in LAHIRI, S. (2007)
Theory and Practice of Foreign Aid. Elsevier. Amsterdam. Chapter 12, pp.187-209.
WHITE, H. (2007b) Evaluating Aid Impact: Approaches and Findings, in LAHIRI, S. (2007)
Theory and Practice of Foreign Aid. Elsevier. Amsterdam. Chapter 12, pp.187-209.
WHITE, H. (2007c) Evaluating Aid Impact, UNU-WIDER Research Paper 75.
WHITE, H. y LUTTIK, J. (1994) The Countrywide Effects of Aid, Policy Research Working
Paper 1337, World Bank, Washington.
WHITE, H. y McGILLIVRAY, M. (1992) Descriptive Measures of the Allocation of
Development Aid, International Social Studies Working Paper 125, The Hague.
WHITE, S.C. (2002) Despolitizando el desarrollo: los usos y abusos de la participacin, en
AA.VV. Desarrollo, ONG y Sociedad civil. Intermn-Oxfam. Barcelona. pp.158-173.
WHYTE, W.F. (ed.) (1991) Participatory Action Research. Sage. Newbury Park.
WIEGERSMA, N. y MEDLEY, J. (2000) US Development Policies Towards the Pacific Rim.
Successes and Failures of US Aid. Macmillan Press. London.
WIESNER, E. (2002) La Evaluacin de Resultados en la Modernizacin del Estado en Amrica
Latina, Revista de Economa Institucional 4 (6), 132-152.
WOLFENSOHN, J. & BOURGUIGNON, F. (2004) Development and Poverty Reduction.
Looking Back, Looking Ahead. The World Bank. Washington.
WOLFENSOHN, J. (1999) Comprehensive Development Framework. Banco Mundial. New
York.
WORLD BANK (1997) 1997 Annual Review of Development Effectiveness. Operations
Evaluation Department. World Bank. Washington.
WORLD BANK (1998) Assessing Aid. What Works, What Doesnt, and Why. Oxford University
Press. New York.
WORLD BANK (1999) 1998 Annual Review of Development Effectiveness. Operations
Evaluation Department. World Bank. Washington. [Resumen ejecutivo disponible en
castellano].
WORLD BANK (1999) 1999 Annual Review of Development Effectiveness: Toward a
Comprehensive Development Strategy. Operations Evaluation Department. World Bank.
Washington.
WORLD BANK (2000) 2000 Annual Review of Development Effectiveness: From Strategies to
Results. Operations Evaluation Department. World Bank. Washington. [Resumen ejecutivo
disponible en castellano].
WORLD BANK (2001) 2001 Annual Review of Development Effectiveness: Making Choices.
Operations Evaluation Department. World Bank. Washington.
REFERENCIAS BIBLIOGRFICAS
51
WORLD BANK (2002) TOOL KIT. Techniques and tools for evaluating the poverty impact of
economics
policies.
World
Bank.
Washington.
http://www.worldbank.org/poverty/psia/tools.htm
WORLD BANK (2002b) 2002 Annual Review of Development Effectiveness. Achieving
Development Outcomes: The Millennium Challenge. Operations Evaluation Department.
World Bank. Washington.
WORLD BANK (2003) Evaluating Development Effectiveness: Challenges and the Way
Forward.-Papers.
Operations
Evaluation
Department
Conference
2003.
http://www.worldbank.org/oed/conference2003/papers.html
WORLD BANK (2004) Influential Evaluations: Evaluations that Improved Performance and
Impacts of Development Programs. The World Bank. Washington. [hay traduccin espaola:
Evaluaciones influyentes: evaluaciones que mejoraron el desempeo y los efectos de los
programas de desarrollo. Departamento de Evaluacin de Operaciones. Banco Mundial.
Washington.]
WORLD BANK (2005) Improving the World Banks Development Effectiveness. What Does
Evaluation Show? Operations Evaluation Department. Washington.
WORLD BANK (2005b) World Development Report 2006. Equity and Development. Oxford
University Press. Washington.
WORLD BANK (2006a) Impact Evaluation and the Project Cycle, Thematic Group on Poverty
Analysis, Monitoring and Impact Evaluation, Doing Impact Evaluation Series 1. The World
Bank. Washington.
WORLD BANK (2006b) Conducting Quality Impact Evaluations under Budget, Time and Data
Constraints, Independent Evaluation Group. World Bank. Washington.
WORLD BANK (2006c) Impact Evaluation for Slum Upgrading Interventions, Thematic Group
on Poverty Analysis, Monitoring and Impact Evaluation, Doing Impact Evaluation Series 3.
The World Bank. Washington.
WORLD BANK (2006d) A Guide to Water and Sanitation Sector Impact Evaluation, Thematic
Group on Poverty Analysis, Monitoring and Impact Evaluation, Doing Impact Evaluation
Series 4. The World Bank. Washington.
WORLD BANK (2006e) Impact Evaluation: The Experience of the Independent Evaluation
Group of the World Bank. World Bank. Washington.
WORLD BANK (2008) Global Monitoring Report 2008. MDGs and the Environment Agenda for
Inclusive and Sustainable Development. World Bank. Washington.
WORLD BANK (2008b) Governance, Growth, and development Decision-making. Reflections by
Douglass North, Daron Acemoglu, Francis Fukuyama, Dani Rodrik. World Bank.
Washington.
ZALL KUSEK, J. & RIST, R. (2005) Diez Pasos Hacia un Sistema de Seguimiento y Evaluacin
Basado en Resultados. The World Bank. Washington.
ZIMMERMANN, F. (2005) The International Aid System: A Question of Perspective, OECD
Development Centre Policy Insights 12.
52
REFERENCIAS BIBLIOGRFICAS
ZINNES, C. & BOLAKY, A. (2002) Harnessing the Power of Incentives. A framework for
Increasing Aid Effectiveness by Design, Forum Series on the Role of Institutions in
Promoting Growth. USAID. IRIS Center. Washington.