Documente Academic
Documente Profesional
Documente Cultură
(UNEG)
Estndares de evaluacin
en el Sistema de las Naciones Unidas
29 de abril de 2005
1.
Un marco institucional integral para la gestin de la funcin de evaluacin y la
realizacin de evaluaciones, es crucial para garantizar un proceso de evaluacin efectivo.
2.
Promover una cultura que valore la evaluacin como una base para el
aprendizaje.
Estndar 1.2:
3.
La poltica de evaluacin debe ser aprobada por los rganos de gobierno de las
organizaciones y/o el jefe/a de stas y debe ser coherente con las Normas de Evaluacin
de UNEG que sean aplicables, as como con los objetivos y estrategias corporativos. La
poltica de evaluacin debe incluir:
Estndar 1.3:
4.
Los rganos de gobierno y/o el jefe/a de la organizacin deben recibir no
solamente el plan de evaluacin sino tambin un informe de avance acerca de la
ejecucin tanto del plan de evaluacin como de las recomendaciones que emanan de las
evaluaciones.
Estndar 1.4:
5.
Deben existir mecanismos apropiados para el seguimiento de las evaluaciones al
interior de la organizacin, de tal suerte que garanticen que las recomendaciones de las
evaluaciones sean debidamente utilizadas y oportunamente implementadas, y que sus
hallazgos sean vinculados a actividades futuras.
6.
Una poltica de divulgacin debe garantizar la difusin transparente de los
resultados de las evaluaciones, lo cual incluye poner los informes a disposicin general
de los rganos de gobierno y del pblico, salvo en aquellos casos en que se requiera
proteccin y confidencialidad razonables para algunas de las partes interesadas.
7.
Dentro del marco institucional global, la gestin de la funcin de evaluacin,
encomendada al jefe/a de evaluacin, debe garantizar que:
Estndar 1.6:
8.
2. Competencias y tica
1.
Todas las personas involucradas en el diseo, la realizacin y la gestin de
actividades de evaluacin deben aspirar a realizar un trabajo de alta calidad, que se rija
por estndares profesionales y principios ticos y morales.
Competencias
Estndar 2.1: Las personas involucradas en el diseo, la realizacin y la gestin de
actividades de evaluacin deben poseer competencias medulares en
materia de evaluacin.
2.
Las competencias en materia de evaluacin se refieren a las calificaciones,
destrezas, experiencia y atributos requeridos de quienes trabajan en la funcin de
evaluacin para desempear sus funciones de la manera estipulada y para garantizar la
credibilidad del proceso.
3.
Las competencias se requieren para todas las personas que participan en el diseo,
realizacin y gestin de actividades en materia de evaluacin, la supervisin de
evaluadores/as, la realizacin de actividades de capacitacin y de desarrollo de
capacidades y en el diseo e implementacin de metodologas y sistemas de evaluacin.
4.
Algunas destrezas son especialmente tiles para aquellas personas que realizan
evaluaciones asumiendo el rol de evaluadores/as, mientras que otras son necesarias
para las personas que son responsables de coordinar evaluaciones, asumiendo el rol de
gerentes de la evaluacin. El trmino evaluadores/as que se utiliza de aqu en
adelante, engloba ambos roles.
5.
Los evaluadores/as deben comunicar a los clientes cualquier conflicto de inters
antes de emprender un proyecto de evaluacin, as como en cualquier momento en que
dicho conflicto ocurriera. Esto incluye conflictos de inters ya sea del evaluador/a o de la
parte interesada.
6.
Los evaluadores/as deben demostrar, con precisin, su nivel de destrezas y
conocimiento. Del mismo modo, los evaluadores/as deben ejercer dentro de los lmites de
su formacin y competencia profesionales, y declinar la realizacin de evaluaciones que
recaigan, de manera significativa, fuera de dichos lmites.
Estndar 2.2: Los evaluadores/as deben poseer
capacitacin relevantes, en materia de evaluacin.
educacin,
calificaciones
7.
Los evaluadores/as deben poseer, de preferencia, un grado universitario avanzado
o estudios equivalentes en ciencias sociales u otras disciplinas pertinentes, con
capacitacin especializada en reas tales como evaluacin, gestin de proyectos,
estadsticas sociales, investigacin y anlisis estadstico avanzado.
8.
Los evaluadores/as deben esforzarse permanentemente por mantener y mejorar
sus competencias, a fin de ofrecer el ms alto nivel posible de desempeo en sus
evaluaciones. Este desarrollo profesional permanente podra incluir, seminarios y talleres
formales, auto-estudio, evaluaciones de sus propias prcticas y trabajo con otros
evaluadores/as a fin de aprender de sus destrezas y experticia.
Estndar 2.3: Los evaluadores/as deben contar con experiencia de trabajo profesional
relevante en materia de evaluacin.
9.
Estndar 2.4: Los evaluadores/as deben tener conocimiento tcnico especfico de, y
estar familiarizados con, la metodologa o enfoque que se requerir para la evaluacin
especfica a ser ejecutada, as como ciertas destrezas gerenciales y personales.
10.
Especialmente til ser poseer experiencia especializada y/o conocimiento
tcnico-metodolgico, incluyendo algunas destrezas especficas de recoleccin y anlisis
de datos, en las siguientes reas:
11.
El evaluador/a, cuyas responsabilidades incluyan la coordinacin o supervisin
de evaluaciones, requiere destrezas gerenciales especficas:
12.
El evaluador/a requiere, asimismo, ciertas destrezas personales que resultan
especialmente valiosas para la evaluacin:
Consideraciones ticas
Estndar 2.5:
13.
En lnea con la Declaracin Universal de los Derechos Humanos de las NU y
otras convenciones de derechos humanos, los evaluadores/as deben operar en
concordancia con valores internacionales.
14.
Los evaluadores/as deben ser conscientes de las diferencias en trminos de
cultura, costumbres locales, creencias y prcticas religiosas, interaccin personal y roles
de gnero, discapacidad, edad y etnicidad, y deben estar atentos a las potenciales
implicaciones de dichas diferencias al planificar, llevar a cabo e informar sobre las
evaluaciones.
15.
Los evaluadores/as tienen que garantizar la honestidad e integridad de todo el
proceso de evaluacin. Los evaluadores tienen asimismo la responsabilidad primordial de
garantizar que las actividades de evaluacin sean independientes, imparciales y exactas.
Estndar 2.6: Los evaluadores/as deben cerciorarse de que sus relaciones con las
personas se caractericen por el respeto.
16.
Los evaluadores/as deben evitar ofender la dignidad y el amor propio de las
personas con las que entran en contacto en el curso de la evaluacin.
17.
Conscientes de que la evaluacin a menudo podra afectar negativamente los
intereses de algunas partes interesadas, los evaluadores/as deben llevar a cabo la
evaluacin y comunicar el propsito y los resultados de la misma de una manera
claramente respetuosa de la dignidad y del amor propio de las partes interesadas.
Estndar 2.7: Los evaluadores/as deben proteger el anonimato y la confidencialidad de
informantes particulares.
18.
Los evaluadores/as deben anunciarse con la mxima anticipacin, minimizar las
exigencias sobre el tiempo de las personas y respetar el derecho a la privacidad.
19.
Los evaluadores/as deben respetar el derecho de las personas a proporcionar
informacin de manera confidencial, y deben garantizar que para aquellas informaciones
de carcter sensible, no se rastreen las fuentes. Deben informar, asimismo, a los
participantes acerca del alcance y los lmites de la confidencialidad.
20.
Los evaluadores/as no deben evaluar a las personas y deben mantener un
equilibrio entre la evaluacin de las funciones de gestin y este principio general.
21.
Los evaluadores/as tienen la responsabilidad de mencionar aspectos y hallazgos
que pueden no estar directamente vinculados a los trminos de referencia. Deben
consultar con otras entidades de supervisin competentes en caso de que surgiera alguna
duda acerca de la conveniencia de informar sobre dichos aspectos por ejemplo,
evidencia de infraccin y sobre la forma de cmo hacerlo.
Estndar 2.8: Los evaluadores/as son responsables de su desempeo y de su(s)
producto(s).
22.
Los evaluadores/as son responsables de la presentacin escrita y/u oral clara,
precisa y justa de las limitaciones, hallazgos y recomendaciones del estudio.
23.
Los evaluadores/as deben ser responsables de culminar la evaluacin dentro de un
plazo razonablemente programado, dejando constancia de cualesquier demoras
imprevistas que se produjeran como consecuencia de factores fuera del control del
evaluador/a.
10
3. Realizacin de evaluaciones
Diseo
Estndar 3.1:
La evaluacin debe ser diseada de manera tal que garantice
informacin oportuna, vlida, confiable y relevante sobre la intervencin que est siendo
evaluada.
1.
La realizacin de las evaluaciones se rige por la planificacin cclica a varios
niveles, la cual se compone de distintas etapas: planificacin, diseo, ejecucin y
seguimiento ex post.
Estndar 3.2: Los trminos de referencia deben precisar el propsito y describir el
proceso y el producto de la evaluacin.
2.
El diseo de una evaluacin debe describirse de la manera ms precisa posible en
los trminos de referencia, que deben incluir los siguientes elementos:
contexto de la evaluacin;
propsito de la evaluacin;
alcance (descripcin de lo que cubre y no cubre la evaluacin);
criterios de evaluacin (entre otras cosas, relevancia, eficiencia, efectividad,
impacto, sostenibilidad);
preguntas clave de la evaluacin;
metodologa enfoque para la recoleccin y el anlisis de datos y para la
participacin de las partes interesadas;
plan de trabajo, organigrama y presupuesto;
productos e informes;
uso de los resultados de la evaluacin, lo cual incluye responsabilidades en
relacin con dicho uso.
11
Estndar 3.4:
4.
La intervencin que ser evaluada, debe ser descrita en trminos de lo que aspira
a alcanzar, la forma en que los diseadores pensaron que se abordara el problema que
haban identificado, las modalidades de ejecucin, as como cualesquier cambios,
intencionales o no, en la ejecucin.
5.
Otros elementos incluyen la importancia o los parmetros de la intervencin que
ser evaluada; entre otras cosas, el costo y el peso relativo de la misma en relacin con,
por ejemplo, las actividades generales de la organizacin. Como mnimo indispensable, la
descripcin debe incluir el nmero de participantes o personas cubiertas por la
intervencin.
Estndar 3.5: Los objetivos especficos de la evaluacin deben ser realistas y
alcanzables, a la luz de la informacin que puede ser recolectada en el
contexto de la intervencin. El alcance de la evaluacin debe ser tambin
claramente definido.
6.
Los objetivos especficos deben desprenderse del propsito de la evaluacin.
Deben ser claros y gozar del consenso de todas las partes involucradas.
7.
El alcance determina los lmites de la evaluacin, adaptando los objetivos
especficos y criterios de evaluacin a la situacin dada. Debe consignar, asimismo y de
manera explcita, la cobertura de la evaluacin (el plazo, la fase en ejecucin, el rea
geogrfica y las dimensiones de la participacin de las partes interesadas que est siendo
examinada). Los lmites de la evaluacin tambin deben ser reconocidos en el alcance.
8.
Las evaluaciones tambin pueden ser orientadas por preguntas de evaluacin.
stas aaden mayor detalle a los objetivos especficos y contribuyen a definir el alcance.
9.
Los objetivos especficos y el alcance de la evaluacin constituyen referentes
crticos para determinar la metodologa de evaluacin y los recursos requeridos.
Estndar 3.6:
El diseo de la evaluacin debe detallar claramente los criterios a partir
de los cuales se evaluar la intervencin.
10.
Los criterios de evaluacin ms comnmente aplicados son los siguientes:
relevancia, eficiencia, efectividad, impacto, valor por dinero, satisfaccin del cliente y
sostenibilidad. Los criterios para respuestas humanitarias deben incluir asimismo:
cobertura, coordinacin, coherencia, conectividad y proteccin. No todos los criterios son
aplicables a todas las evaluaciones.
12
Estndar 3.8:
14.
Recurriendo a una gama de enfoques para el anlisis de los costos, desde el
elaborado anlisis de costo-efectividad y de costo-beneficio, pasando por el anlisis de
costo-eficiencia, hasta la comparacin rpida de costos, una evaluacin debe intentar
responder, en la medida de lo posible, las siguientes preguntas generales:
15.
El anlisis de costos en la evaluacin se basa en informacin financiera, pero
puede entraar asimismo calcular costos econmicos tales como: recursos humanos,
trabajo en especies, costos-oportunidad, etc.
16.
El alcance del anlisis de costos es decir, si se hace una comparacin de los
costos en relacin con los impactos, los efectos o los productos - depender del
propsito de la evaluacin y de las preguntas de evaluacin planteadas. El anlisis de
13
costos debe ser explcito en cuanto a las diferentes perspectivas a partir de las cuales se
analizan los costos (donantes, una sola organizacin, interesados primarios) y las
limitaciones complejidad de la intervencin (objetivos programticos mltiples,
socios, sistemas financieros), disponibilidad de datos, as como el tiempo y los recursos
invertidos.
17.
El anlisis de costos no siempre es factible. Cuando la evaluacin no haya
incluido un anlisis de costos, deber proporcionarse alguna explicacin de las razones de
dicha exclusin en la seccin sobre los objetivos especficos o en la metodologa.
18.
Se espera que los evaluadores/as identifiquen aquellas reas en las que el uso de
los recursos es obviamente ineficiente.
Estndar 3.9: El diseo de la evaluacin debe incluir, donde sea relevante,
consideraciones sobre hasta qu punto el compromiso del sistema de las
NU con el enfoque basado en los derechos humanos ha sido incorporado
en el diseo de la intervencin que ser evaluada.
19.
Los organismos de las NU se rigen por la Carta de las Naciones Unidas y tienen la
responsabilidad y la misin de ayudar a los Estados Miembros a honrar sus obligaciones
frente a la realizacin de los derechos humanos de las personas que viven dentro de su
jurisdiccin. Los tratados, mecanismos e instrumentos de derechos humanos otorgan a
las entidades de las NU un marco de referencia rector y un fundamento legal de
principios ticos y morales, y deben guiar el trabajo de evaluacin. Debe prestarse
atencin, adems, a los aspectos de gnero y a los grupos vulnerables y difciles de
acceder.
20.
El diseo de la evaluacin podra incluir adems, algn proceso de revisin tica
del diseo original de la intervencin que ser evaluada., que incluya lo siguiente:
14
Proceso
Estndar 3.10: La relacin entre el evaluador/a y la institucin o instituciones que
comisionan la evaluacin tiene que caracterizarse, desde el principio, por el respeto
mutuo y la confianza.
21.
Las responsabilidades de las partes que convienen en realizar una evaluacin
(especificando qu, cmo, por quin y cundo deber realizarse qu) deben establecerse
en un convenio escrito con la finalidad de obligar a las partes contratantes a cumplir con
todas las condiciones acordadas o, en caso contrario, renegociar el acuerdo. Debern
establecerse convenios - por ejemplo, trminos de referencia - al menos en las siguientes
reas: financiacin, marco cronolgico, personas involucradas, informes a ser producidos
o publicados, contenido, metodologa, y procedimientos. Un convenio de esta naturaleza
reduce la probabilidad de que surjan malentendidos entre las partes contratantes y facilita
la resolucin de los mismos en caso de que llegaran a surgir. Presentar un informe inicial
al comienzo de la evaluacin, es una manera provechosa de formalizar dicho convenio y
de garantizar una interpretacin adecuada de los trminos de referencia.
22.
Los evaluadores/as deben consultar con la institucin o instituciones que
comisionan la evaluacin acerca de decisiones contractuales tales como:
confidencialidad, privacidad, comunicacin y propiedad de los hallazgos e informes.
Estndar 3.11:
23.
Es necesario identificar a las partes interesadas y consultar con ellas (temas clave,
metodologa, plazos, responsabilidades), al planificar la evaluacin as como mantenerlas
informadas a todo lo largo del proceso de evaluacin. El enfoque de evaluacin debe
considerar oportunidades de aprendizaje y participacin (por ejemplo, talleres, grupos de
aprendizaje, reuniones para informar sobre procesos concluidos o debriefings,
participacin en visitas de campo), a fin de asegurar que actores clave sean integrados
plenamente al proceso de aprendizaje que implica la evaluacin.
24.
Ah donde sea factible, puede crearse un grupo medular de aprendizaje o
coordinacin, integrado por representantes de las diversas partes interesadas en la
evaluacin. El rol del mencionado grupo consiste en actuar como caja de resonancia as
como facilitar y revisar el trabajo de evaluacin. Dicho grupo puede asumir, asimismo, la
tarea de facilitar la difusin y aplicacin de los resultados y otras actividades de
seguimiento.
Estndar 3.12:
15
25.
Dependiendo del alcance y de la complejidad de la evaluacin, puede ser til
establecer una revisin de pares o un grupo referencial integrado por expertos en los
tpicos tcnicos cubiertos por la evaluacin. Dicho grupo dara una orientacin sustantiva
al proceso de evaluacin (por ejemplo, aportando insumos respecto de los trminos de
referencia y ejerciendo control de calidad sobre el borrador del informe).
Estndar 3.13:
26.
El nmero de evaluadores/as de un equipo depender del tamao de la evaluacin.
Las evaluaciones que incluyan facetas mltiples, tienen que ser realizadas por equipos
multidisciplinarios.
27.
Los evaluadores/as deben ser seleccionados sobre la base de sus competencias y
por medio de un proceso transparente.
28.
Los evaluadores/as seleccionados deben introducir distintos tipos de experticia y
experiencia en el equipo. De ser posible, al menos un miembro del equipo debe contar
con experiencia en el sector o en las reas tcnicas que aborda la evaluacin, o debe tener
un slido conocimiento de la intervencin que ser evaluada. De preferencia, al menos un
miembro adicional debe ser especialista en evaluacin y tener experiencia en el uso de las
metodologas de evaluacin especficas que se emplearn en esta evaluacin. El equipo
de evaluacin debe poseer, asimismo, un amplio conocimiento y comprensin de los
principales temas y problemas de desarrollo econmico y social en el pas o pases donde
se desarrolla la evaluacin o en pases similares de la regin. Es posible que se requieran,
asimismo, antecedentes o familiaridad con situaciones de emergencia, tanto para la
realizacin del ejercicio en s como para entender el contexto particular de la evaluacin.
Estndar 3.14:
29.
Empresas o individuos profesionales calificados, competentes y experimentados
de los pases concernidos deben participar en la realizacin de las evaluaciones cada vez
que sea posible, a fin de garantizar, entre otras cosas, que el conocimiento y la
informacin a nivel nacional y/o local sean debidamente tomados en cuenta en las
evaluaciones y para contribuir a la construccin de capacidad en evaluacin en los pases
en desarrollo. La realizacin de las evaluaciones tambin puede ser tercerizada a
organizaciones nacionales del sector privado y la sociedad civil. Del mismo modo, deben
incentivarse las evaluaciones conjuntas con los gobiernos y otras partes interesadas.
16
30.
Los miembros del equipo de evaluacin deben familiarizarse tambin con los
valores y caractersticas culturales y sociales de los receptores y beneficiarios previstos.
De este modo, estarn mejor preparados para entender y respetar las costumbres,
creencias y prcticas locales a todo lo largo del trabajo de evaluacin.
Ejecucin
Estndar 3.15: Las evaluaciones deben llevarse a cabo de una manera profesional y tica.
31.
Las evaluaciones deben llevarse a cabo de una manera participativa y tica, y
debe darse el respeto y la consideracin debidos al bienestar de las partes interesadas
(derechos humanos, dignidad y justicia). Las evaluaciones deben ser sensibles a los
aspectos culturales y de gnero y respetar los aspectos de confidencialidad, proteccin de
la fuente y dignidad de los entrevistados.
32.
Los procedimientos de evaluacin deben llevarse a cabo de manera realista,
diplomtica, consciente de los costos y costo-efectiva.
33.
Las evaluaciones deben ser precisas, estar slidamente documentadas y emplear
mtodos transparentes que generen informacin vlida y confiable. Los miembros del
equipo de evaluacin deben tener la posibilidad de disociarse de opiniones y
recomendaciones particulares. En el informe se dejar constancia de cualesquier
diferencias de opinin que no hubieran sido resueltas al interior del equipo.
34.
Las evaluaciones deben llevarse a cabo de una manera integral y balanceada, de
manera tal que las diferentes perspectivas sean consideradas y analizadas. Los hallazgos
clave deben ser sustentados por medio de la triangulacin. Cualquier conflicto de inters
debe ser abordado de una manera abierta y honesta, de modo tal que no socave el
resultado de la evaluacin.
35.
Los evaluadores/as deben discutir, de una manera apropiada para el contexto,
aquellos valores, supuestos, teoras, mtodos, resultados y anlisis que pudieran afectar
significativamente la interpretacin de los hallazgos de la evaluacin. Esto se aplica a
todos los aspectos de la evaluacin, desde su concepcin inicial hasta el uso eventual de
los hallazgos.
36.
Los derechos y el bienestar de las personas no deben verse afectados
negativamente durante la planificacin y ejecucin de una evaluacin. Esto tiene que ser
comunicado a todas las personas que participan en una evaluacin, y sus consecuencias
previsibles para la evaluacin deben ser discutidas.
Informes
17
Estndar 3.16: El informe final de evaluacin debe contar con una estructura lgica,
contener hallazgos basados en evidencia, conclusiones, lecciones y
recomendaciones y estar libre de informacin irrelevante para el anlisis
general. El informe debe ser presentado en un formato que permita que la
informacin sea comprensible y accesible.
37.
el propsito de la evaluacin;
qu, exactamente, se evalu;
cmo se dise y llev a cabo la evaluacin;
qu evidencias se encontr;
qu conclusiones se extrajeron;
qu recomendaciones se hicieron;
qu lecciones se derivaron.
38.
Si los evaluadores/as identificaran fraude, malos manejos, abuso de poder y
violaciones de derechos debern derivar el asunto, confidencialmente, a las autoridades
competentes de las NU para la investigacin de estos hechos. Las evaluaciones no deben
sustituir, o ser usadas para, la toma de decisiones respecto de asuntos individuales
relacionados con los recursos humanos.
39.
Los evaluadores/as deben permitir a todos los actores pertinentes, acceso a
informacin procedente de la evaluacin que sea apropiada, y, de ser posible, deben
difundir activamente dicha informacin entre las partes interesadas. Las comunicaciones
a una parte interesada deben incluir, siempre, los resultados importantes que pudieran
afectar sus intereses. En todos los casos, los evaluadores/as deben esforzarse por
presentar los resultados con la mayor claridad y sencillez posible, de manera tal que los
clientes y otras partes interesadas puedan entender fcilmente el proceso y los resultados
de la evaluacin.
Seguimiento
Estndar 3.17: La evaluacin requiere de una respuesta explcita por parte de las
autoridades de gobierno y gerencia afectadas por sus recomendaciones.
40. Al igual que en el caso de las Normas, dicha respuesta puede adoptar la forma de
una respuesta de gerencia, un plan de accin y/o un acuerdo especificando claramente las
responsabilidades y rendiciones de cuentas.
41. Debe hacerse un seguimiento sistemtico de la implementacin de las
recomendaciones de la evaluacin que hubieran sido aceptadas por la gerencia y/o los
rganos de gobierno.
18
42. Debe realizarse, asimismo, un informe peridico acerca del estado de ejecucin de
las recomendaciones de la evaluacin. Dicho informe debe ser presentado a los rganos
de gobierno y/o el jefe/a de la organizacin.
4. Informes de evaluacin
Estndar 4.1:
1.
La siguiente informacin debe ser fcilmente accesible en las primeras pginas
del informe:
Estndar 4.2:
2.
El resumen ejecutivo debe ofrecer una sinopsis de los aspectos sustantivos del
informe de evaluacin. Para facilitar la lectura, el resumen ejecutivo debe ser corto, de
dos o tres pginas, y auto-contenido. El nivel de la informacin debe permitir al lector/a
no letrado, una comprensin clara de los hallazgos, recomendaciones y lecciones de la
evaluacin.
3.
19
Estndar 4.3:
4.
El informe de evaluacin debe describir claramente el propsito de la
intervencin que est siendo evaluada y de qu manera pensaron los diseadores que sta
respondera al problema identificado. Otros elementos importantes incluyen: importancia,
alcance y escala de la intervencin que se est evaluando; descripcin de los receptores /
beneficiarios previstos y de las partes interesadas; y cifras presupuestarias.
5.
La descripcin de la intervencin que se est siendo evaluada debe ser lo ms
sucinta posible, al tiempo de asegurar que contendr toda la informacin pertinente. Si se
estima necesario incluir detalles adicionales puede adjuntarse, en un anexo, una
descripcin que incluya el modelo lgico.
Estndar 4.4:
6.
El informe debe describir quines participan en la intervencin que est siendo
evaluada, sus roles y sus contribuciones, incluyendo recursos financieros, aportes en
especies, asistencia tcnica, participacin, tiempo del personal, capacitacin, liderazgo,
incidencia poltica, cabildeo y cualesquier contribuciones de los interesados primarios,
por ejemplo, las comunidades. Se debe intentar aclarar qu socios contribuyeron a qu
efecto en particular.
7.
Los usuarios querrn comparar esta informacin con los actores que participaron
en la evaluacin para evaluar la forma en que se incluyeron distintos puntos de vista.
Estndar 4.5:
8.
El propsito debe indicar por qu se est efectuando la evaluacin, cmo ser
utilizada y qu decisiones se tomarn una vez culminada. El contexto debe ser descrito a
fin de permitir la comprensin del entorno en el cual se desarroll la evaluacin.
Estndar 4.6:
20
9.
No todos los criterios son aplicables a todas las situaciones. Las razones
fundamentales para no emplear un criterio en particular deben figurar en el informe, as
como cualesquier restricciones a la aplicacin de criterios de evaluacin. Se debe
describir tambin los estndares o parmetros de desempeo que se utilizaron en la
evaluacin.
10.
Es importante exponer de forma transparente los fundamentos que subyacen a los
juicios de valor.
Estndar 4.7:
11.
Los objetivos especficos originales de la evaluacin deben ser consignados, as
como cualesquier cambios efectuados al diseo de la evaluacin.
12.
Debe describirse el alcance de la evaluacin, explicitando la cobertura de la
misma. Igualmente, deben mencionarse los lmites de la evaluacin.
13.
Deben consignarse las preguntas originales de la evaluacin, as como aqullas
que hubieran sido aadidas en el transcurso de sta. Se trata de referentes bsicos contra
los cuales se contrastar el contenido del informe.
14.
Los objetivos especficos y el alcance de la evaluacin son, asimismo, referentes
fundamentales para establecer si la metodologa seleccionada y los recursos asignados
fueron los adecuados.
Estndar 4.8:
15.
El informe de evaluacin debe incluir una descripcin de lo siguiente, entre otros
aspectos:
21
Estndar 4.9:
16.
fuentes de informacin;
descripcin de los mtodos de recoleccin y anlisis de datos (que incluya el
nivel de precisin requerido para los mtodos cuantitativos, as como las
escalas de valores o codificaciones empleadas en el anlisis cualitativo);
descripcin del muestreo (rea y poblacin por representar, razn
fundamental de la seleccin, mecnica de seleccin, nmeros seleccionados
de entre los potenciales sujetos, restricciones de la muestra);
indicadores y parmetros referenciales, ah donde sea relevante (indicadores
previos, estadsticas nacionales, etc.);
el equipo de evaluacin, incluyendo la participacin de miembros
individuales del equipo;
el plan de evaluacin;
restricciones clave.
Estndar 4.10:
17.
Debe incluirse una descripcin del nivel de participacin de las partes interesadas
en la evaluacin, incluyendo la razn fundamental para haber seleccionado dicho nivel
de participacin en particular. Si bien no todas las evaluaciones pueden ser participativas
22
Estndar 4.11:
18.
El informe debe contener una descripcin satisfactoria de las consideraciones
ticas, incluyendo la base lgica detrs del diseo de la evaluacin y los mecanismos para
proteger a los participantes donde fuera apropiado. Esto incluye la proteccin de la
confidencialidad, dignidad, derechos y bienestar de los seres humanos, incluyendo a la
niez, y el respeto por los valores de las comunidades beneficiarias.
Estndar 4.12:
19.
Los hallazgos relativos a los insumos para el cumplimiento de las actividades o
los logros a nivel de proceso, deben ser claramente diferenciados de los productos, los
efectos y del impacto.
20.
Los efectos e impactos deben incluir cualesquier resultados no intencionales, ya
sean beneficiosos o perjudiciales. En adicin, deber incluirse cualesquier efectos
multiplicadores o a nivel micro, de la intervencin que est siendo evaluada. En la
medida de lo posible, cada uno de stos efectos deber ser medido ya sea cuantitativa o
cualitativamente. Al utilizar dichas mediciones, deber hacerse referencia a parmetros
referenciales.
21.
El informe debe hacer una distincin lgica en los hallazgos, mostrando la
progresin de la ejecucin hacia los resultados, incluyendo una medicin y un anlisis
apropiado de la cadena de resultados, o una explicacin de por qu este anlisis no habra
sido incluido.
22.
Los datos no tienen que consignarse en su totalidad; nicamente merecen ser
enunciados aquellos datos que respalden un hallazgo. La versin completa de los datos
puede adjuntarse en un anexo. En adicin, los informes no deben segregar los hallazgos
por fuente de informacin.
23
23.
Los hallazgos deben cubrir todos los objetivos especficos de la evaluacin y
hacer uso de los datos recolectados.
Estndar 4.13:
24.
Los resultados atribuidos a la intervencin que est siendo evaluada, deben ser
vinculados a las contribuciones de las diferentes partes interesadas. Debe haber un
sentido de proporcionalidad entre las contribuciones relativas de cada parte interesada y
los resultados observados. ste es un elemento integral de la rendicin de cuentas frente a
los socios, donantes e interesados primarios.
25.
Si dicho anlisis no es incluido en el informe, deber indicarse claramente la
razn por la que no se hizo. Por ejemplo, si una evaluacin se lleva a cabo en una etapa
temprana del ciclo de gestin, posiblemente no se hallen resultados o los vnculos de
estos con una parte interesada.
Estndar 4.14:
26.
El informe de evaluacin debe ir ms all de una simple descripcin de la
implementacin y de los efectos e incluir un anlisis, basado en los hallazgos, de las
causas subyacentes, las restricciones, las fortalezas que hay que capitalizar y las
oportunidades. Deben identificarse y analizarse, en la medida de lo posible, los factores
externos que contribuyen a los logros y dificultades, entre ellos la situacin social,
poltica o ambiental.
27.
Una explicacin del contexto contribuye a la utilidad y precisin de la evaluacin.
La comprensin de los factores externos que contribuyeron al xito o fracaso de la
intervencin que est siendo evaluada, ayuda a determinar la forma en que dichos
factores afectarn el futuro de la intervencin o la posibilidad de replicarla en otro lugar.
Estndar 4.15:
Las conclusiones tienen que ser sustentadas por hallazgos que sean
consistentes con los datos recolectados y por la metodologa; asimismo,
deben aportar elementos de juicio conducentes a la identificacin y/o
solucin de problemas o temas importantes.
28.
Las conclusiones deben agregar valor a los hallazgos. La lgica detrs de las
conclusiones y la correlacin de stos con los hallazgos deben ser evidentes.
24
29.
Las conclusiones deben concentrarse en temas trascendentes para la intervencin
que est siendo evaluada. Deben estar determinadas por los objetivos especficos y por
las preguntas clave de la evaluacin. Las conclusiones simples, que ya se conocen o
resultan evidentes, no son tiles y deben evitarse.
30.
Las conclusiones referidas a la atribucin de los resultados, que en la mayora de
los casos son de carcter tentativo, exigen detallar lo que se sabe y lo que puede ser
asumido como plausible, a fin de hacer ms transparente la transicin lgica de los
hallazgos a las conclusiones y fortalecer con ello la credibilidad de las conclusiones.
Estndar 4.16:
31.
Por razones de precisin y credibilidad, las recomendaciones deben ser
implicaciones lgicas de los hallazgos y de las conclusiones. Asimismo, las
recomendaciones deben ser relevantes para la intervencin que est siendo evaluada, y
pertinentes a los trminos de referencia y los objetivos especficos de la evaluacin;
adems, deben estar formuladas de una manera clara y concisa. Adicionalmente y en la
medida de lo posible, las recomendaciones deben ser priorizadas.
32.
Las recomendaciones deben especificar, en la medida de lo posible, las
responsabilidades y el marco cronolgico para su implementacin.
Estndar 4.17:
33.
No todas las evaluaciones generan lecciones. Las lecciones deben ser extradas
solamente si representan contribuciones al conocimiento general. Deben estar
slidamente respaldadas por los hallazgos y conclusiones de la evaluacin. Pueden
fortalecer o complementar lecciones comnmente aceptadas, pero no deben ser una mera
repeticin del conocimiento comn.
34.
Un buen informe de evaluacin identifica correctamente las lecciones que se
desprenden lgicamente de los resultados, presenta un anlisis de cmo stas pueden ser
aplicadas a diferentes contextos y/o sectores y toma en cuenta limitaciones evidentes tales
como generalizaciones a partir de observaciones puntuales.
Estndar 4.18:
35.
36.
26