SSSSII: tema 9 Página 1 de 6

Tema IX: La evaluación de diseño

1.- Definición
2.- La estructura del plan de evaluación de diseño

1.- Definición
La evaluación del diseño, tiene como finalidad detectar y conocer las posibles debilidades
de un programa antes de su implementación. Entra dentro de lo que se denomina la lógica de
la intervención social para mejorar los programas de intervención social en la fase de
planificación y de controlar la calidad de los procesos de intervención en un contexto social
determinado.

La intervención social es costosa. Los costes deben ser analizados (economía como
esfuerzo y tiempo de los profesionales de la intervención social). La evaluación de diseño
“puede ayudar a malgastar” todos esos esfuerzos sin un costo elevado. Si fuese costosa, sería
mas rentable que gasten todos los recursos y esfuerzos en la intervención. El evaluador tiene
el deber de hacer una evaluación lo más eficaz y útil posible. La evaluación del diseño es un
medio para asegurar usos más prudentes con los escasos medios humanos y materiales como
para ayudar a lograr intervenciones sociales más factibles que logren sus objetivos con
mayor probabilidad.

La evaluación nos indica sobre si es la mejor alternativa para responder a las necesidades
objeto de la intervención, y sobre la viabilidad de la aplicación de la alternativa en ese
momento.
SSSSII: tema 9 Página 2 de 6

2.- La estructura del plan de evaluación de

diseño
La elaboración de la evaluación del diseño (ED) es de máxima relevancia porque se
responde a las grandes preguntas de cualquier evaluación (que, quien, como, cuándo)

Aspectos que debe incluir Quien lo elabora

Descripción del programa
Contextualización del programa
Opciones evaluativas
A. Externa Expertos
B. Global en
C. Inicial Evaluación
D. Cualitativa
Tipo de Evaluación: Diseño
Objetivos específicos de la Evaluación
Determinar la idoneidad de un programa previa a su aplicación
Contenidos a Evaluar
1.- El porqué del programa Comisión
2.- La idoneidad del programa de
3.- Respaldo político Evaluación
4.- Objetivos
5.- objetivos
5.1.- Viabilidad
5.2.- Ajustados a la realidad
5.3.- Claros y bien definidos.
6.- Diagnóstico de necesidades:
6.1.- Beneficiarios o usuarios (cobertura)
6.2.- Contexto social al que va dirigido
7.- Diseño de la intervención
7.1.- Modelo y marco conceptual
7.2.- Estructura
7.3.- Temporalización
7.4.- Actividades
7.5.- Personal (funciones)
8.- Recursos (viabilidad económica).
9.- Situación de llegada deseada (análisis de los efectos)
10.- Evaluabilidad del programa
Enfoque o modelo
1.- De Revisión profesional
2.- Toma de decisiones
3.- Basados en objetivos
Decisiones metodológicas
1.- Indicadores
2.- Instrumentos de evaluación
2.1.- Delphi
2.2.- Cuestionario

Se debe conocer bien el programa, como las experiencias cualitativas para familiarizarnos
SSSSII: tema 9 Página 3 de 6

con el programa: todas y cada una de las peculiaridades del objeto de estudio. Debemos
describir por tanto:

- El problema que intenta resolver

- El origen del problema
- La incidencia del problema
- Las características sociodemográficas de los afectados
- Los lugares donde se manifiesta el problema
- Las características de los profesionales implicados en el desarrollo de la
intervención
- Los lugares donde no se produce o tiene menos intensidad el problema
- La evolución del problema
- Las fuentes de información utilizadas para elaborar la intevención

El porqué del programa nos ayuda a conocer qué se pretende conseguir, como se piensa
conseguir, a quién va dirigido y donde se piensa aplicar. Todo programa se realiza en un
marco que tiene consecuencias para su eficacia. Conocer el contexto social próximo es una
cuestión máxima, ya que de él depende el éxito o fracaso de la intervención social ¿éste es el
mejor programa de intervención social para este contexto social?

Una cuestión muy importante es el respaldo político de la intervención. Un programa sin

el respaldo político de los responsables del mismo, difícilmente podrá implementarse y
menos aun que tenga éxito. Por lo que debemos preguntarnos ¿cuenta el programa con el
respaldo político suficiente para su aplicación?

También es necesario conocer la literatura especializada referente a la evaluación de

programas similares: Con ello nos haremos una idea de cómo diseñar nuestro programa de
evaluación, comparar las características comunes y establecer paralelismos y diferencias.
Esto se denomina estado de la cuestión o antecedentes y nos sirve para:

- Conocer el origen del problema y qué teorías o explicaciones dan los

planificadores del programa.
- Conocer los fenómenos responsables de la permanencia del problema
- Conocer las estrategias, actividades e intervenciones que pueden modificar el
problema

Conocido lo anterior, debemos decidir sobre las opciones evaluativos: evaluación interna,
externa o coevaluación, finalidad de la evaluación o un enfoque global o parcial, o final, o la
perspectiva que utilicemos. Al ser una ED se aconseja una evaluación externa (agentes
externos analizan su funcionamiento que no han tnido nada que ver con el diseño) porque lo
propio es que cada profesional haga las cosas lo mejor que sepa.

Entre las finalidades que puede tener la ED realizar una evaluación formativa es la
prioritaria, ya que contribuye al perfeccionamiento de la intervención antes de que termine.
La evaluación de diseño se hace la mejora antes de su puesto en práctica, por lo tanto, es una
evaluación planteada para poder decidir lo necesario para readaptar los componentes del
proceso a los objetivos inicialmente fijados.
SSSSII: tema 9 Página 4 de 6

Los contenidos de la evaluación se unen a la opción evaluativo de si la evaluación es

parcial, global o mixta. En la ED se aconseja hacerla global, molar u oolítica (todas las fases
del desarrollo del programa deben ser tenidos en cuenta de manera globalizadota). El
programa responde al principio de unidad, como elemento esencial, que explica la
elaboración, aplicación y resultados del programa. Por ello, el contenido de la evaluación
está formado por todos los elementos que configuran la intervención social:

¿Están los objetivos claramente definidos?

¿Hay que añadir algunos?
A) Objetivos
¿Hay que reducir o eliminar los otros?
¿qué considera evidencia aceptable del logro de los objetivos
operativos del programa)
¿qué obstáculos pueden impedir el logro de los objetivos?

¿están claramente delimitados?

Usuarios o ¿Es necesario ampliar o reducir los posibles usuarios?

Beneficiarios
Del programa
¿Responden los usuarios con el perfil que describe el
programa?

¿cuál es la razón de elegir a éstos y no a otros?

¿Está bien definida?

¿Se adapta a los objetivos del programa?

Metodología de
¿intervienen todas las instituciones implicadas en el programa?
la intervención
¿es necesario modificar o ampliar algún aspecto?

¿son suficientes (humanos y económicos)?

¿Se deberían añadir algunos para mayor eficiencia y eficacia en la

consecución de objetivos?

¿Tiene viabilidad económica?

Recursos
¿Están temporalizadas?

¿Quién realiza cada una de ellas?

SSSSII: tema 9 Página 5 de 6

¿Están bien definidas?

¿Se adecuan a los objetivos del programa?

Las actividades ¿Habría que eliminar, reducir o ampliar algunas?

¿Quién realiza cada una de ellas?

Otro de los contenidos a evaluar es de la evaluabilidad del programa. La Evaluación de la

evaluavilidad es la medida en la que un programa puede ser evaluado, lo que depende de
cómo ha sido planificado y como hasta que punto pueden existir barreras que dificulten la
evaluación. La evaluación de la evaluabilidad es un PRE-requisito de la evaluación y como
vía para juzgar si el planificador ha realizado un buen trabajo durante el ciclo de
intervención.

Wholey ha identificado cuatro áreas problemáticas que maximizan su dificultad e

inoperancia:

1.- Falta de definición del problema implantado y de los objetivos y resultados de

predichos.
2.- Falta de base en la teoría del programa.
3.- Falta de claridad en los propósitos de la evaluación.
4.- Falta de claridad en las prioridades de la evaluación.

La experiencia evaluadora ha revelado que un previo análisis de la capacidad de evaluar

un programa evita costes: mas de la mitad de los programas no son evaluables por tener
ciertos problemas (especificación de objetivos, problemas de implementación, problemas de
aplicación de un conjunto coherente de actividades o todo ello conjuntamente).Wholey, por
ello, platea la necesidad de evaluar la evaluabilidad de un programa que evite costes
innecesarios.

Otra de las cuestiones es la perspectiva en la que se enmarca la evaluación, predomina

dentro de la ED la perspectiva cualitativa, porque se trata de la descripción de los hechos
para interpretarlos en el contexto global en el que se producen. Se trata de proporcionar un
punto de vista comprensible de la totalidad del programa. La perspectiva cuantitativa
también está presente. Se utiliza mucho la técnica delfín.

Referente a los objetivos a conseguir con la ED de un programa de intervención social es

determinar la idoneidad de un programa antes de su aplicación (si la intervención social se
ajusta a las necesidades a cubrir). En definitiva:

1.- Estudiar la pertinencia del proyecto con la realidad social a modificar

2.- Conocer la coherencia y congruencia den programa en cuanto: objetivos, métodos de
intervención, duración y resultados.
SSSSII: tema 9 Página 6 de 6

3.- Analizar la viabilidad de los recursos

4.- Estudiar las previsiones de evalualuación del programa.

Referente a los enfoques, se consideran más útiles en la ED:

1.- Enfoque de revisión profesional. (acreditación). Este enfoque es de gran utilidad en

la ED de programas de intervención social (evaluación global de programas).

2.- Enfoque basado en objetivos o metas. Puede partirse de los objetivos formulados en
las necesidades sociales y comprobar que el diseño elaborado es el más adecuado para
erradicar el problema a corregir. Es un enfoque sencillo y directo con muchas
limitaciones. Permite decidir si con el programa se resolverá el problema, pero no la
eficiencia y eficacia.

3.- Enfoque de toma de decisión. Tiene presente la conexión entre la evaluación y la

toma de decisiones. La evaluación tiene que estructurarse mediante decisiones reales
que hay que tomar (alude al responsable máximo). La metodología descansa en la toma
de decisiones, que delimita la evaluación y objetivos de la misma.