Descripcin de la Unidad 3

Para el desarrollo de la Unidad 3, el contenido sobre las tcnicas para evaluacin

de polticas educativas permitir reflexionar sobre las acciones realizadas en el
contexto laboral y su contribucin en atencin a las necesidades educativas para
el nivel medio.

Introduccin
En la presente Unidad, se examinarn aspectos tericos sobre la evaluacin de
las polticas educativas, lo cual requiere de la identificacin de enfoques de
anlisis, tipos de evaluacin e indicadores, en correspondencia con el proceso
cclico de configuracin de las polticas, para comprender el objetivo de las
mismas y los usos que pueden drseles, de acuerdo con el tipo de evaluacin
aplicada.
Adicionalmente, se analizan las tcnicas racionales de evaluacin de las polticas
y los modelos de evaluacin que, en teora, se reflejan en el proceso de las fases
de las polticas.
Al final de la Unidad, se realizar una propuesta de poltica educativa en atencin
a un problema social educativo, con el propsito de que el participante aplique los
conocimientos, anlisis y reflexiones aprendidas durante del mdulo.
Dentro de las polticas educativas, la formacin ciudadana es un contenido
transversal que debe aplicarse a lo largo de toda la instruccin formal. Debe
abarcar contenidos como democracia, derechos humanos, identidad, diversidad,
equidad de gnero y cuidado del ambiente.

1. Evaluacin de las polticas educativas

A continuacin, se desarrollarn los aspectos tericos a considerar en la
evaluacin de las polticas educativas.

A. ANLISIS DE POLTICAS
Se define como una disciplina profesional, orientada a buscar e implementar
soluciones a los problemas sociales. Se fundamenta en teoras, mtodos, avance
del conocimiento producido por las disciplinas cientficas, las ciencias sociales, el
desarrollo de diversas profesiones y de los aportes filosficos sociales y polticos
(Dunn segn Olavarra, 2007).
Este tipo de anlisis permite identificar las condiciones sociales, econmicas y
polticas relacionadas con los problemas que estn siendo abordados por las
mismas, para establecer as, cules son las condiciones que los provocan,
determinan o influyen. As mismo, permite comprender cmo, por qu y bajo qu
condiciones surgen las respuestas del sistema poltico frente a las demandas que
plantean los ciudadanos y otros actores ante las situaciones que los afectan
(Olavarra, 2007, pg. 25).
Es de importancia establecer las razones para realizar el anlisis de polticas
pblicas, segn Olavarra (2007), quien cita a Dye (2002) y Kraft & Furlong (2004),
se definen as:

Comprender y caracterizar una situacin que ha sido identificada o es

susceptible de ser catalogada como problema pblico, el tipo de
intervenciones de poltica pblica que podra resolverla, aminorarla o
contenerla, y los resultados, efectos o impactos de esas intervenciones.
Asesorar profesionalmente a las autoridades u otros actores que
participan en el proceso de la poltica pblica, entender el problema e
identificarlo, dar posibles soluciones y proponer formas de abordar el
problema y el tipo de intervencin para lograr los resultados e impactos
deseados. (Olavarra, 2007, pg. 25).
Apoyar y promover la participacin de los ciudadanos en las diversas
etapas del proceso de la poltica. Entre ms informacin exista, habr ms
posibilidades de implementacin y los ciudadanos podrn participar en el
proceso. Esto permitir ampliar y enriquecer el debate de la poltica pblica
(2007, pg. 25).
En este mbito, el anlisis de la poltica realizado por diversas organizaciones,
agrupaciones ciudadanas y partidos polticos deciden sus posiciones sobre un
tema de relevancia, que es sometido a debate (2007, pgs. 25-26).
Influir sobre las decisiones de la poltica pblica. Luego de la
comprensin del problema, los analistas deben identificar alternativas de
solucin aportadas por los participantes en el proceso de la poltica. El
avance y evolucin en el debate determinar la seleccin de soluciones a
ser consideradas en el diseo y decisin de la poltica (2007, pg. 26).

1. Evaluacin de las polticas educativas II

B. APRENDIZAJE DEL ANLISIS DE LA POLTICA

Para Dye (2002), citado por Olavarra (2007), un anlisis de polticas pblicas se
puede aprender de acuerdo con los siguientes pasos:
Reconocimiento de la situacin
Por medio de la descripcin ms precisa de la situacin que est siendo abordada
a travs de la poltica pblica, se identifica el problema que ha sido reconocido por
el gobierno, de acuerdo con su importancia y prioridad. Adems, se establecen
cules son las referencias conceptuales de la poltica, enfoques, contenidos,
poblacin beneficiada, resultados esperados y recursos requeridos.
Correspondencia entre el problema y la poltica
El anlisis de correspondencia aporta elementos decisivos de juicio, para que
autoridades y actores involucrados, puedan comprobar si la implementacin y
proyeccin de la poltica son adecuadas al contexto y problema identificado.

Consecuencias generadas por la poltica

Las evaluaciones realizadas a la poltica permitirn identificar impactos,
resultados, efectividad, eficacia y eficiencia de la poltica en la distribucin de
bienes y servicios a la poblacin beneficiada, as como las dificultades
presentadas durante la implementacin.
Es probable que la poltica no logre los resultados esperados, no obstante que s
haya correspondencia entre el diseo y el problema. En ese caso, el anlisis se
centrar en detectar por qu la implementacin del diseo fue inadecuada.
Segn Flores (2008), la problemtica justifica la relevancia del anlisis de polticas
pblicas en educacin y se puede observar desde tres vertientes generales:

1. Evaluacin de las polticas educativas III

El reto de la poltica pblica ante nuevas problemticas
Debido a los complejos cambios en el entorno poltico y social de los pases, las
nuevas realidades construyen nuevos referentes que obligan a repensar los
problemas sociales y educativos, y sus formas alternativas de solucin.
 La necesidad de la renovacin terica y analtica
Al ejecutar una poltica, deben implementarse ajustes a las polticas para que
estos sean acordes con la realidad.
Existe confusin entre los trminos poltica, reforma, ley, programa y proyecto, lo
cual conduce a una visin limitada o fragmentada de los efectos y resultados.
Los anlisis tienden a perder el referente que los origina y profundizan en la
descripcin de elementos contextuales poco relacionados con el proceso de la
poltica. Asimismo, muestran de forma muy escasa las evidencias del grado de
participacin de otros actores diferentes al gobierno, los que intervienen en el
diseo e instrumentacin de las polticas educativas. Conocer sobre otros actores
y su participacin contribuira a explicar lo que ocurre en la poltica educativa
(Anlisis de poltica pblica en educacin: lnea de investigacin, 2008, pgs. 8-
11).
La bsqueda de la efectividad de las polticas
Los especialistas afirman que muchas veces las polticas son limitadamente
efectivas, porque: se disean sin aprovechar los conocimientos disponibles; no se
consideran las condiciones de los actores encargados de implementarlas y la
complejidad de las relaciones humanas; desconocimiento o desinformacin sobre
los factores polticos y los sistemas complejos que operan las polticas educativas.
Una accin poltica en estas condiciones pierde sentido y no arroja los resultados
esperados, entre otros factores como el menosprecio por los hallazgos de la
investigacin educativa, presin poltica, frgiles procesos de implementacin,
desconocimiento de los actores ejecutores de las polticas y programas y la falta
de claridad del funcionamiento (2008, pg. 16).
La Unesco (2014) considera que el anlisis de las polticas educativas consiste en
exmenes crticos de los aspectos internos y externos del sistema educativo;
donde se debe analizar la dinmica interna del sistema desde distintos ngulos,
tales como el contexto macroeconmico y sociodemogrfico. Entre los aspectos
ms importantes para el anlisis de polticas estn:
Los marcos macroeconmicos y sociodemogrfico
Los aspectos relativos al acceso y la equidad en la educacin
La calidad de la enseanza
La eficacia externa
Los costos y la financiacin de la educacin
 Los aspectos administrativos e institucionales

Segn Francesc Pallares (1988), una de las funciones que se desarrollan a lo

largo del proceso de implementacin es el control de los estndares de
rendimiento definidos en la fase de formulacin. Estos indicadores, relacionados
directamente con los productos de las polticas, no expresan por s mismos que la
poltica est alcanzando los resultados deseados. El hecho de que el nmero de
escuelas construidas desde la puesta en prctica de una determinada poltica
educativa sea el previsto no implica que su objetivo de mejora en el rendimiento
escolar se est consiguiendo. Mostrar, en todo caso, que el proceso de
implementacin se desarrolla correctamente, pero no que la poltica est
resultando realmente efectiva; es decir, si su diseo era el correcto para producir
los resultados deseados. Controlar este ltimo aspecto es precisamente la funcin
de la evaluacin de las polticas. La evaluacin de las polticas debe hacerse con
referencia a los objetivos establecidos, pero sobre la base fundamental de los
resultados alcanzados, tanto en los aspectos previstos como en los no previstos.
En su forma ms simple y esquemtica, la evaluacin consistira en el proceso
necesario para medir el grado en el que se estn alcanzando (Pallares, 1988; pg.
158).

1. Evaluacin de las polticas educativas V

C. LA EVALUACIN DE POLTICAS EDUCATIVAS

Las polticas deben ser objeto de juicio por parte de la ciudadana, en su carcter
universal y su relacin con el mundo de los valores, aspiraciones y expectativas,
por tratarse de un proyecto colectivo. Sin embargo, estos juicios deben basarse en
evaluaciones objetivas.
La evaluacin es un elemento til para la poltica y la administracin de la
educacin, la cual no debe apoyarse en prejuicios o posiciones ideolgicas.
Precisa de la existencia de un anlisis cientfico de la realidad que se enjuicia a la
luz de valores explcitos de referencia. Tambin, puede considerarse desde una
perspectiva de microenfoque centrando sus acciones a nivel de aula o centro
educativo; y desde una perspectiva de macroenfoque, en acciones de valoracin
de los distintos niveles o modalidades educativas, apreciando la eficacia y efectos
de las polticas educativas y del sistema escolar (Pedr & Puig, Las reformas
educativas, 1998, pg. 67).
Por lo tanto, la evaluacin puede definirse como cualquier tipo de juicio basado en
informacin sistemtica sobre el funcionamiento de los aspectos clave de los
sistemas educativos. As mismo, como un aspecto de la regulacin de estos
sistemas.
Existen varios mecanismos que regulan los sistemas, entre ellos:
 Fuente: Pedr y Puig (Las reformas educativas, 1998, pg. 68 y 69).

Evaluacin de las polticas educativas VI

Por un sinfn de razones tcnicas, organizativas y de gestin, la evaluacin de las
polticas es indispensable y es la ltima fase de la configuracin de las polticas
por ser un proceso cclico.
Considerando que los problemas pblicos rara vez tienen una solucin definitiva,
las polticas que intentan satisfacer completamente las necesidades del problema
rara vez satisfacen esta aspiracin. La situacin ms comn tras la evaluacin es
la introduccin de variaciones en una poltica existente o la sucesin por otra ms
adecuada al estado en que se encuentra el problema.
Segn Warrin (1993), la evaluacin de las polticas es un mecanismo poltico que
tiene para los sistemas democrticos las siguientes utilidades:
Evaluacin de las polticas educativas VII

D.TIPOS DE EVALUACIN
Para Rossi & Freeman (1989), la evaluacin y el anlisis de las polticas no son
disciplinas autnomas, toman de las disciplinas cientficas y sociales lo que
necesitan para la aplicacin sistemtica de procedimientos de la investigacin
social y as valorar la conceptualizacin, el diseo, la implantacin y la utilidad de
los programas de intervencin social (Baon & Carillo, 1997, pg. 18).
Segn Braon & Carrillo (1997, pgs. 18-19), existen diversos tipos de evaluacin,
de acuerdo con cada fase del proceso, as:
 Evaluacin anticipada
Produce informacin para alimentar el proceso de definicin del problema y la
formulacin de soluciones. Se enfoca en analizar el contexto poltico,
administrativo, legal, social y econmico en el cual se desarrollar la poltica y en
analizar el problema a enfrentar. Tambin proporciona informacin de utilidad para
establecer las conexiones entre la poltica pblica y los factores crticos del
entorno en el que se aplicar.
Evaluabilidad de la poltica
Se realiza un primer anlisis breve de la filosofa, los elementos y los instrumentos
de la poltica. Su objetivo es redescubrir los eventuales puntos dbiles del diseo y
ofrecer informacin para su implementacin.
Este tipo de evaluacin es adecuada en situaciones caracterizadas por la escasez
de recursos.
Evaluacin de necesidades
Su objetivo es conocer a profundidad el problema y tratar de eliminar los lmites,
caractersticas esenciales del problema, su gravedad, su evolucin, el volumen, la
estructura y la distribucin geogrfica de los grupos sociales a los que afecta.
Adems, pretende identificar el alcance y las posibles conexiones con otros
problemas implcitos.
Evaluacin de teora y diseo
Busca explicar cmo el diseo de la poltica permite el logro de metas y objetivos
propuestos. Su utilidad es asegurar la conexin entre la teora que sustenta la
poltica y los instrumentos de la intervencin.

Evaluacin de las polticas educativas VIII

Evaluacin de la viabilidad poltica/contexto
Es una variante de evaluacin anticipada que se enfoca en la comprensin del
contexto y entorno especficos en los cuales se desarrolla la poltica. Produce
informacin para preparar las condiciones para afrontar amenazas y aprovechar
las oportunidades presentes en el contexto. Adicionalmente, se emplea para
identificar a los actores que tienen intereses en juego en el problema, mediante la
elaboracin de un mapa de apoyos y resistencia que enfrentar la poltica en sus
distintas fases

Evaluacin de implantacin/procesos
Se produce informacin para alimentar el proceso de adopcin de decisiones
durante la implementacin y gestin de las polticas. Su objetivo es determinar en
qu nivel se estn cumpliendo directrices estipuladas en la poltica, al contrastar
el diseo inicial de la intervencin con el funcionamiento en la prctica.
Evaluacin de seguimiento de programas
Se realiza de forma conjunta mientras se ejecuta la poltica, con el objetivo de
detectar variaciones en la naturaleza del problema y ocasionales desviaciones
respecto al plan de implementacin inicial.
Implica la definicin de criterios operatorios de logro y la construccin de
indicadores de proceso, de gestin, de rendimiento, de cobertura, de uso de
servicios econmicos; los cuales se aplicarn sistemticamente durante el
desarrollo de la intervencin.
Evaluacin de impacto/eficacia
Provee informacin de los efectos e impactos de la poltica. Se pretende
demostrar en qu medida los efectos se atribuyen a la poltica implementada y no
a otros cambios en las condiciones ajenas a esta, o a la intervencin de otras
polticas. Su objetivo es medir la eficacia de la poltica, al comparar los impactos
previstos con los observados. Los resultados se emplean para determinar la
conveniencia de continuar actuando sobre el problema y sobre la adecuacin de la
poltica actual.
Evaluacin de la calidad
Esta evaluacin no se circunscribe a una fase especfica del proceso de
configuracin de una poltica, lo considera de manera integral. Su fin es mostrar
las relaciones entre los diversos elementos y la satisfaccin de las expectativas de
los beneficiarios de la poltica, as mismo, conocer los beneficios que produjo la
poltica y si estos son los esperados.
Esta evaluacin difiere de las anteriores porque utiliza los objetivos y valores de
los usuarios como criterios para valorar la poltica, y niega el papel protagonista a
los objetivos y metas de los responsables (Baon & Carillo, 1997, pgs. 19-20).

Evaluacin de las polticas educativas IX

E. INDICADORES EN LAS POLTICAS

Un indicador es la magnitud asociada a una actividad, el cual permite comparar
los estndares y valorar peridicamente las actividades. Son de utilidad en las
fases del ciclo de configuracin de polticas

Los indicadores tienen una funcin descriptiva que aporta informacin sobre una
situacin especfica y evoluciona en el tiempo; y una funcin valorativa cuyo
objetivo es determinar los efectos provocados por una actuacin. Los indicadores
ideales son los que se pueden expresar por medio de un valor numrico (Delgado,
2010, pg. 9).
Un indicador vlido debe tener objetividad, univocidad, sensibilidad, precisin,
fidelidad y accesibilidad.
Para establecer indicadores, Delgado (2010) propone seguir la siguiente
secuencia:
Saber qu se quiere medir
Determinar la informacin necesaria
 Seleccionar los indicadores
Definir los estndares
Disear el procedimiento para la recoleccin de datos
Comparar los datos

Evaluacin de las polticas educativas X

F. TIPOS DE INDICADORES
En las fases de configuracin de las polticas, los indicadores son de utilidad para
la identificacin y definicin del problema, la implementacin y evaluacin de las
polticas. Para Delgado (2010), los diferentes tipos de indicadores presentan las
siguientes caractersticas:
Indicadores en la identificacin y definicin del problema
Este tipo de indicadores permite cuantificar la incidencia del problema.
Por ejemplo, tasa de desempleo de jvenes (nmero de jvenes
desempleados/nmero de jvenes econmicamente activos).
Indicadores en la implementacin de las polticas
Estos indicadores de gestin contribuyen a movilizar recursos para producir
realizaciones concretas, especficas e individualizadas. Consisten en la
transformacin de medios o recursos de entrada: recursos humanos, financieros,
materiales, etc., en productos o realizaciones de salida: kilmetros de carretera,
jvenes escolarizados.

Por ser la fase ms asociada a la gestin, un criterio importante para valorarla es

la eficiencia, la cual se expresa en generar mayor cantidad de productos
empleando el mnimo de recursos.
Para asegurarse de que la implementacin de la poltica se lleva a cabo segn lo
previsto, es importante el seguimiento a travs de indicadores. Los ms utilizados
para este tipo de valoracin son los siguientes:

Indicadores de recursos
Miden la disponibilidad, oferta y consumo de recursos lo cual se utiliza para poner
en marcha o no las polticas. Son utilizados por los gestores y responsables
directos de los procesos. Ejemplos de los indicadores de procesos son el gasto
ejecutado mensual, coste del material fungible mensual, nmero de escuelas que
reciben el fondo de gratuidad, entre otros.
Indicadores de actividades
Miden aspectos relacionados con la cantidad, calidad, oferta y eficiencia. Algunos
de los ejemplos de estos indicadores son: tiempo de visitas de seguimiento a las
escuelas, nmero de das efectivos de clases, nmero de asistencias pedaggicas
a las escuelas/mes, entre otros.
Indicadores de resultados
Miden los resultados finales, incluyen productos finales e impactos de la accin
pblica. Se utilizan siempre que se pueda asumir su costo. Entre estos indicadores
estn: costo del estudiante del ciclo bsico/ao, cobertura escolar en el nivel de
educacin media, entre otros.
Indicadores en la evaluacin de las polticas
En esta fase, se pretende determinar si las salidas han generado los efectos,
impactos o resultados esperados; por ejemplo, aumentar el desarrollo econmico
de la regin, disminuir el ndice de analfabetismo.
Sin embargo la relacin entre productos y efectos no es directa. La valoracin de
estos efectos cae en la fase de evaluacin de las polticas, porque valorar los
impactos es valorar la eficacia de las polticas.
Este tipo de indicadores es til para medir la eficacia de las polticas, siendo el
principal criterio el logro y el cumplimiento de los objetivos. Por ejemplo, si el
principal objetivo es aumentar la cobertura en el nivel de educacin media, habr
que identificar indicadores que permitan medir el nmero de jvenes que inician y
finalizan el ciclo bsico y diversificado.

Existen indicadores como los descritos en este apartado en Mineduc? Ha tenido

acceso a ellos como funcionario durante el desempeo de su trabajo? Hay
relacin entre los indicadores de desempeo y la formacin para el trabajo dentro
del CNB?

2. Tcnicas racionales
La formulacin terica del modelo de decisin racional se basa en contar con la
informacin completa sobre el objetivo deseado de un sistema o problema sobre el
que se debe tomar una decisin. Adems, se conocen todas las medidas
alternativas relevantes o los indicadores internos que conducirn a dicho objetivo,
as como la funcin matemtica que especifica el acoplamiento ms eficaz entre
indicadores internos y externos. La toma de decisiones es cuestin de clculo,
como lo sugieren la teora de decisin matemtica o la de produccin econmica
(Pedr & Puig, 1998, pg. 70).
La evaluacin en el enfoque racional es parte de la toma de decisiones polticas,
donde los mtodos y conocimientos cientficos se utilizan para guiarlas. En este
enfoque, el ideal de una evaluacin imperturbable no existe en la prctica, pues el
proceso puede alterarse cuando las distintas partes intervienen en el programa del
objeto de la evaluacin (Pedr & Puig, Las reformas educativas, 1998, pgs. 69-
71).
Es importante considerar que el empleo de tcnicas racionales en la evaluacin
puede ser problemtico. Esto porque el contexto de toma de decisiones puede ser
menos racional de lo que usualmente se supone, ya que los aspectos ms difusos
del proceso de toma de decisiones impactarn sobre el uso de la evaluacin y
sobre las condiciones en las que estas se aplicarn, alejando a la evaluacin del
sistema imparcial y objetivo que se pretende.
Por lo tanto, el grado hasta el que se puede considerar la evaluacin como un
proceso racional depende de las siguientes variables:
La institucionalizacin de la funcin evaluadora: si existen institutos de
investigacin especializados.
La formacin cientfica y cultural de los usuarios de los resultados de la
evaluacin.
El grado de orientacin hacia la prctica que muestran los evaluadores, en
el sentido de comprender el sentido final de la labor que llevan a cabo.
Diferenciar entre rendicin de cuentas y mejoras educativas (1998, pg.
73).

La rendicin de cuentas no es solo cuestin de proveer y analizar informacin, se

refiere tambin a la toma de acciones previstas por las autoridades competentes,
en forma de sanciones o recompensas. Asimismo, los docentes pueden estar en
desacuerdo con la metodologa de los investigadores porque consideran que, en
s, ellos son la mejor fuente de conocimiento de lo que sucede en las aulas.
Elementos que permiten diferenciar los distintos enfoques para realizar
evaluacin educativa:
2. Tcnicas racionales II
Para Pedr y Puig (1998), se deben considerar los distintos modelos
de evaluacin, los cuales no estn bajo un estado puro:
Monitoreo de polticas pblicas

1. MONITOREO.
Usualmente, se piensa que con la implementacin de una poltica pblica se
culmina el proceso de la misma. Sin embargo, su xito depende de la capacidad
para disminuir o erradicar el problema planteado, as como de ser vigente a travs
del tiempo para seguir brindando respuestas. (Borge, 2012).

Para lograr esa efectividad en la poltica, se hace necesario del monitoreo y

evaluacin como medios de gestin administrativa y estratgica, para detectar
deficiencias y corregirlas en tiempo y generar aprendizajes en las instituciones e
individuos involucrados.
De acuerdo a Di Virgilio y Solano (2012), el monitoreo es el seguimiento que se
realiza durante la ejecucin de una poltica, programa o proyecto [] constituye un
insumo indispensable para la gestin administrativa y estratgica de una iniciativa
pblica. (p.41)
Por su parte, SIEMRO y UNESCO segn Di Virgilio y Solano, (2012) indican que
el monitoreo consiste en un examen continuo y peridico que se efecta durante la
implementacin de un proyecto. Su objetivo es indagar y analizar
permanentemente el grado en que las actividades realizadas y los resultados
obtenidos cumplen con lo planificado, con el fin de detectar a tiempo eventuales
diferencias, obstculos o necesidades de ajustes en la planificacin y ejecucin.
(p.45)
El monitoreo es continuo y brinda informacin para la toma de decisiones
estratgicas que corrijan o mejoren la poltica en ejecucin.
Para la Cooperacin Alemana al Desarrollo (GIZ), el monitoreo es un proceso
sistemtico (un sistema) que suministra informacin sobre el avance en el logro de
los resultados, permite observar posibles riesgos y registra las perspectivas de los
actores involucrados en el proyecto. Es decir, un sistema de monitoreo suministra
informacin de retorno sobre la eficacia del programa o proyecto para que se
puedan tomar decisiones razonables (Giz, GmbH, 2015).

Monitoreo de polticas pblicas II

Mientras que para la Organizacin para la Cooperacin y el Desarrollo Econmico
(OCDE) el monitoreo es una actividad continua que usa la recoleccin sistemtica
de datos sobre indicadores especficos, para guiar a, con informacin sobre las
dimensiones del progreso, en la consecucin de objetivos y la utilizacin de los
fondos destinados, (OECD, 2002).
En consecuencia, el monitoreo NO es un mecanismo de contralora. El control NO
se convierte en un fin en s mismo: controlar por controlar, controlar para
reportar, no para aprender.
Por su lado, Cruz (2010) indica que el monitoreo posee las siguientes
caractersticas:
 Fuente:Recuperado de
http://www.academia.edu/1737222/An%C3%A1lisis_de_pol%C3%ADticas_p%C3%BAblicas_monit
oreo_y_evaluaci%C3%B3n
Monitoreo de polticas pblicas III

II. MONITOREO Y EVALUACIN

El monitoreo y la evaluacin son procesos interrelacionados y con funciones
especficas, complementarias y diferenciadas. La siguiente tabla, muestra un
primer panorama orientador de estos temas.

Fuente: Basado en Mokate. Di Virgilio y Solano (2012). Monitoreo y evaluacin de polticas,

programas y proyectos sociales. P.46

Para la OCDE, la evaluacin es una apreciacin sistemtica y objetiva de un

proyecto, programa o poltica en curso o concluido, de su diseo, su puesta en
prctica y sus resultados. El objetivo es determinar la pertinencia y el logro de los
objetivos, as como la eficiencia, la eficacia, el impacto y la sostenibilidad para el
desarrollo. (OECD, 2002 b).
Monitoreo de polticas pblicas IV
Otros autores indican que las evaluaciones son exmenes peridicos y objetivos
de un proyecto, programa o poltica programada, en curso o completada. Las
evaluaciones se usan para responder a preguntas especficas, relacionadas con
frecuencia con el diseo, la ejecucin y los resultados (Gertler, Martnez,
Premand, Rawlings, Vermeersch (2011).
Para la Cooperacin Alemana al Desarrollo (GIZ), el monitoreo y la evaluacin
(M&E) de los programas y proyectos van interrelacionados en un sistema. Este
sistema de M&E posee las funciones de conduccin/gestin, rendicin de cuentas
y de aprendizajes; y se intersectan para la consecucin de los fines planteados.
El siguiente cuadro genera la respectiva aclaracin conceptual.

Fuente: GIZ, 2013.

Otros autores como Rawlings y Avitabile (2013) muestran las funciones
complementarias entre el monitoreo y evaluacin de la siguiente manera:

Monitoreo de polticas pblicas V

II. MONITOREO ORIENTADO A RESULTADOS.

II.1 Indicadores.
El sistema de monitoreo proporciona datos importantes sobre el QUE, esto es, el
logro de los objetivos planteados, y para esto se apoya en indicadores, los cules
son la medida para establecer los alcanzas del objetivo.
Los indicadores permiten medir de manera directa o indirecta una situacin dentro
del marco de la poltica, dando lugar a la inferencia de conclusiones respecto a su
comportamiento.
Fuente: Basado en Mokate. Di Virgilio y Solano (2012). Monitoreo y evaluacin
de polticas, programas y proyectos sociales.P.47
Para la OCDE, un indicador es una variable o factor cuantitativo o cualitativo que
proporciona un medio sencillo y fiable para medir logros, reflejar los cambios
vinculados con una intervencin o ayudar a evaluar los resultados de un
organismo de desarrollo. (OCDE, 2002).
Existen varias propuestas para establecer indicadores. Requerimientos de diversa
ndole, en funcin de la fuente o paradigma que proviene. Uno de los ms
aceptados propone que estos deben cumplir con el criterio SMART, trmino que al
parecer fue acuado inicialmente por Doran (1981). Desde entonces, es uno de
los criterios ampliamente usados en la literatura de proyectos, monitoreo y
evaluacin; y desde su concepcin original propone que los indicadores deben
cumplir con cada una de las dimensiones:
Specific (Especfico): el indicador debe dirigirse a un rea especfica para mejorar.
Measurable (Medible): debe cuantificar o por lo menos sugerir un indicador de
progreso. Los cambios son verificables objetivamente?
Assignable (Asignable): especificar quien lo har.
Realistic (Realistas): se refiere a los resultados que pueden alcanzarse de forma
real, en funcin de los recursos disponibles.
Time-related (tienen un tiempo especfico): se refiere a la dimensin del tiempo
para alcanzar los resultados.
Los crticos aducen que el criterio SMART no es adecuado para metas a largo
plazo, debido a su falta de flexibilidad. Indican que, si las circunstancias cambian a
lo largo del tiempo, las metas establecidas bajo un criterio SMART pueden fallar.
Otros ven en el criterio SMART una especie de check-list, que obliga la excesiva
focalizacin de la meta, en detrimento de la creatividad o de otras formas
innovadoras. No obstante, estos argumentos en contra esgrimidos anteriormente,
el criterio SMART es de amplio uso en la actualidad.
El Banco Mundial, propone una adaptacin al castellano mediante el acrnimo
EMARF, que realiza unas leves modificaciones. Segn (Gertler, et.al, 2011), la
propuesta es as:
Especficos: para medir la informacin necesaria con la mxima proximidad.
Medibles: para asegurar que es factible obtener la informacin.
Atribuibles: para asegurar que cada indicador est relacionado con los logros del
proyecto
Realistas: para asegurar que los datos se pueden obtener puntualmente, con una
frecuencia razonable y a un costo razonable.
Focalizados: en la poblacin objetivo.
Monitoreo de polticas pblicas VI
II.2. Construccin de indicadores.
En relacin a un sistema de monitoreo orientado a resultados, Martinez (2013)
propone que un indicador debe considerar adecuadamente las dimensiones,
CUANDO, QU, QUIN, DNDE, CUNTO; para que cumpla su finalidad. En tal
virtud, un ejemplo de indicador es:
Al 31 de diciembre de 2017, el nivel de desercin de los jvenes del 12vo. grado
en los institutos del departamento de Guatemala, ha disminuido en un 10%.
II.2. Monitoreo orientado a resultados? Qu significa?
Para la comprensin de un sistema de monitoreo orientado a resultados es
necesario retomar la propuesta del Marco Lgico, as como la Cadena de
Resultados. Los siguientes esquemas muestran ambas posiciones.
Una aproximacin con amplia vigencia al da de hoy, lo propuso Binnendijk,
(2000); quien estableci un esquema vertical para comprender la linealidad de las
intervenciones, as como la estrecha relacin entre la fase de implementacin y de
resultados.
Monitoreo de polticas pblicas VII
En consecuencia, un sistema de monitoreo basado en resultados prioriza el logro
de los resultados; en comparacin a los sistemas antiguos, que consistan en un
recuento de actividades o la descripcin en la fase de implementacin.
En la matriz del marco lgico, este ordenamiento que va desde los insumos hasta
los resultados se muestra en el siguiente esquema.

Otra forma de comprender la interrelacin de las actividades necesarias para la

consecucin de los fines, lo propone la cadena de resultados, que se resume en el
siguiente esquema.
La correspondencia entre el marco lgico y la cadena de resultados se ve en el
siguiente esquema:
Monitoreo de polticas pblicas VIII
II.3. La matriz de un Sistema de Monitoreo y Evaluacin.
Una vez comprendido adecuadamente los temas abordados en todas las
secciones previamente analizadas, ya se est en condiciones de elaborar un
Sistema de M&E. Esto, tiene relacin con el adecuado abordaje de cada una de
las dimensiones consideradas en la siguiente matriz.

Monitoreo de polticas pblicas IX

II.4. Diseo de un sistema de monitoreo
El diseo de un sistema de monitoreo tiene varias vertientes en funcin de la
naturaleza de la entidad que la propone. Por ejemplo, el Banco Mundial, plantea
una construccin basada en 10 pasos (Kusek & Rist, 2004).
Hacer una estimacin de la preparacin
Elegir los resultados/efectos para monitorearlos y evaluarlos
Seleccionar indicadores clave para monitorear los efectos
Establecer y recolectar datos bsicos sobre indicadores
Planificar para mejorar. Seleccionar objetivos de resultados
Hacer seguimiento para obtener resultados
Utilizar informacin de evaluacin para respaldar un sistema de gestin
basado en resultados
Presentar informes sobre hallazgos
Utilizar los hallazgos
Mantener el sistema de Monitoreo y Evaluacin dentro de la organizacin.

Aspectos clave del Mdulo 7

La formulacin e implementacin de polticas educativas para el nivel medio,
acordes con la realidad y necesidades educativas reales, puede generar cambios
sustanciales en la vida de los jvenes guatemaltecos y contribuir con la calidad de
los conocimientos adquiridos. Sin embargo, las polticas educativas deben
considerar ms all del acceso a la educacin, el asegurar que esta se brinde en
el marco de los derechos humanos.
Para la integracin de los diferentes contenidos y reflexiones del presente Mdulo
se desarrollaron las unidades en esta secuencia:
En la Unidad 1, se realiz la revisin conceptual sobre las definiciones bsicas de
la poltica educativa y otros conceptos relacionados, lo cual permiti comparar y
conocer diferentes concepciones y enfoques, as como los elementos que
intervienen.
La Unidad 2 permiti conocer las fases cclicas para la configuracin de una
poltica, las aproximaciones conceptuales y los actores que intervienen durante el
proceso. Algunos de estos aspectos son abstractos, sin embargo, al reconocer sus
caractersticas o formas de expresin, se puede identificar y comprender la funcin
que desempean en la operativizacin de las polticas educativas.
Para finalizar, en la Unidad 3 se examin la teora en la cual se fundamenta el
anlisis y evaluacin de las polticas educativas, los tipos de evaluacin que
pueden aplicarse en el proceso de configuracin de las polticas educativas y los
tipos de indicadores que contribuyen en el proceso de medicin.
Se considera que con los conocimientos y reflexiones de las tres unidades, los
participantes podrn realizar una propuesta de poltica educativa para el nivel
medio, en atencin a los problemas educativos que an no han sido atendidos y
que forman parte de la realidad de la juventud en Guatemala.