Documente Academic
Documente Profesional
Documente Cultură
Seccin
II:
Marco
Otros
Indicadores
de
Calidad
Educativa
35
36
1.
de
convivencia
cvica
pacfica;
que
conozcan
sus
derechos
responsabilidades; que asuman compromisos consigo mismo y con los otros; que
desarrollen planes de vida y proyectos personales; que reconozcan y respeten la
diversidad cultural, religiosa y tnica y las diferencias entre las personas, as como la
igualdad de derechos entre hombres y mujeres, y desarrollen capacidades de empata
con los otros; que trabajen individualmente y en equipo, con esfuerzo, perseverancia,
responsabilidad y tolerancia a la frustracin; y que adquieran hbitos de vida activa y
saludable (ver tabla N 1). Asimismo, la ley seala que estas metas deben cumplirse
en condiciones de equidad, de modo que todos los estudiantes cuenten con las mismas
oportunidades para alcanzar estos objetivos.
37
38
identidad nacional, capacitando a las personas para conducir su vida en forma plena,
para convivir y participar en forma responsable, tolerante, solidaria, democrtica y
activa en la comunidad, y para trabajar y contribuir al desarrollo del pas (LGE, art.
2). Por tanto, los Otros Indicadores de Calidad consideran tanto aspectos del
desarrollo personal como aspectos que benefician a la sociedad en su conjunto.
La nocin de que el desarrollo de las habilidades personales y sociales son importantes
para las personas y la sociedad no es nueva. Goleman (1997) se ha referido
extensamente a la importancia del desarrollo de la inteligencia emocional, ya que el
buen ajuste de una persona no depende de su coeficiente intelectual o de sus estudios
acadmicos si no de este aspecto. El autor define la inteligencia emocional como la
capacidad de reconocer los sentimientos propios y los de los dems, de auto
regulacin, de autoeficacia, de adoptar una actitud emptica y social, y as conocer
las emociones y
sentimientos
propios,
manejarlos,
reconocerlos,
crear
la
propia motivacin y gestionar las relaciones. Respecto del mbito social, Pea (2007)
seala la importancia de que las personas sean capaces de tener lealtades entre ellas y
estn dispuestas a cumplir las reglas para as lograr una sociedad democrtica justa.
Los establecimientos son un espacio de transmisin de valores, donde se promueven
habilidades de formacin para la convivencia ciudadana y la participacin democrtica
(MINEDUC, 2004).
Sin embargo, la incorporacin de estas habilidades en la evaluacin de los resultados
educativos, y ms precisamente en los sistemas de responsabilizacin de los
establecimientos, es relativamente reciente. Hopkins (2006) destaca que es importante
tener en cuenta, cuando se piensa en establecer un nuevo sistema de clasificacin y
responsabilizacin, que el desempeo de los estudiantes no solo se debe basar en
exmenes acadmicos sino tambin en factores relacionados al desarrollo social y
personal de los individuos.
La nocin de que es relevante evaluar aspectos que van ms all de los conocimientos
acadmicos est avalada por la importancia que estos tienen para la vida de las
personas, y el funcionamiento de la sociedad y la democracia. Tambin est
respaldada por los hallazgos de las investigaciones sobre los factores no cognitivos.
Los factores no cognitivos se definen como un rango de hbitos y actitudes, de
carcter no intelectual ni analtico, que facilitan el funcionamiento del individuo en la
escuela, en el trabajo y en la sociedad (Rosen, et al. 2010). Estos autores mencionan
entre
los
factores
no
cognitivos
la
motivacin,
esfuerzo,
auto
regulacin,
39
2006).
Asimismo,
estos
autores
muestran
que
estas
habilidades
son
trascendentales para el logro de una buena convivencia social, ya que permiten formar
ciudadanos responsables, autnomos y capaces de resolver conflictos. Bassi et al.
(2012) explican que el desarrollo de las denominadas habilidades blandas ha
demostrado ser crucial para una insercin optima en el mercado laboral, ya que
adems de las destrezas acadmicas que la escuela debe formar, los empleadores
estn buscando en los jvenes una serie de habilidades socioemocionales relacionadas
con el comportamiento, las cuales contribuyen a una insercin laboral exitosa.
Las habilidades cognitivas, tanto como las no cognitivas, se combinan, se influencian
mutuamente y se complementan en sus efectos en las personas. En este contexto, las
habilidades no cognitivas tienen un efecto directo sobre aspectos crticos en la vida de
los jvenes, como la escolaridad, las conductas de riesgo y las remuneraciones futuras.
Adicionalmente, las destrezas cognitivas se traducen en xitos que retroalimentan las
habilidades socioemocionales de los nios, como la autoestima y la confianza en s
mismos (Heckman, Stixrud & Urza, 2006). De modo inverso, el desarrollo de
habilidades socioemocionales como la motivacin y la perseverancia estimulan el
aprendizaje y pueden reforzar el desarrollo de las habilidades cognitivas (Cunha et al.,
2006, citado en Bassi et al., 2012). Al respecto, se ha demostrado la relevancia de
factores no cognitivos en el mbito acadmico, ya que juegan un rol de importancia
en revertir o compensar las deficiencias en el desarrollo cognitivo y el rendimiento
acadmico del estudiante, y complementan sus esfuerzos para obtener logros (Rosen
et al., 2010).
40
contempla
diferentes
instancias
de
monitoreo
evaluacin
de
los
Asimismo, la Agencia de Calidad tambin cubrir otros aspectos en las visitas que
llevar a cabo para evaluar el desempeo de los establecimientos y sus sostenedores,
segn la ley SNAC tendr que abordar los siguientes aspectos:
41
Gestin pedaggica
42
2.
Criterios de seleccin
otros requisitos de
educacin y la libertad de
enseanza
Respetar los principios de la
Requisitos
metodolgicos establecidos
en la ley SNAC
Vlidos
Confiables
Medibles mediante
instrumentos y
procedimientos objetivos y
estandarizados
Censales
Otros requisitos de
construccin
No generar efectos
indeseados
Modificables por prcticas
de gestin escolar
Coherentes con otros
Comparables en el tiempo
Transparentes
43
ii.
alumnos
alumnas,
independientemente
de
sus
condiciones
iv.
v.
vi.
Responsabilidad. Todos los actores del proceso educativo deben cumplir sus
deberes y rendir cuenta pblica cuando corresponda.
vii.
viii.
ix.
x.
xi.
xii.
Validez
La validez implica garantizar que los instrumentos utilizados evalen efectivamente los
aspectos que se buscan medir, lo que se puede verificar mediante evidencia lgica o
emprica (ETS, 2002). La verificacin de la validez del instrumento es fundamental
para asegurar que las inferencias e interpretaciones de los resultados obtenidos a
partir de estos sean correctas (Muiz, 2005).
En el caso de los Otros Indicadores de Calidad Educativa, se considera para su
construccin que estos cumplan con tres tipos de validez:
-
45
Validez
de
constructo:
permite
garantizar
que
el
instrumento
mide
Confiabilidad
La confiabilidad est relacionada con la estabilidad o consistencia de los resultados
obtenidos cuando el proceso de medicin se repite (Prieto & Delgado, 2010). Esto
quiere decir que al aplicar el mismo instrumento o formatos equivalentes a poblaciones
similares o a la misma poblacin en distintos momentos, este entregue resultados
estables (Muiz, 2005).
Por un lado, para lograr consistencia en los resultados, es importante asegurar la
representatividad de las muestras seleccionada para la medicin de los indicadores. En
trminos concretos, si las muestras son poco representativas, aumentar la volatilidad
de los resultados. As, por ejemplo, los resultados de dos establecimientos podran
resultar distintos, aun cuando no existan diferencias reales entre ambos (Hill y
DePascale, 2002).
Por otra parte, es importante analizar la confiabilidad de los instrumentos de medicin,
para lo cual pueden utilizarse distintas tcnicas estadsticas. En el caso de los
cuestionarios, se han considerado las siguientes:
-
El
coeficiente
Alfa
de
Cronbach
que
permite
determinar
el
grado
de
Split Half Method, que consiste en dividir aleatoriamente los tems que forman
un cuestionario para verificar la consistencia interna de estos, a travs de su
coeficiente de correlacin.
46
Censales
Dado que los Otros Indicadores de Calidad se utilizarn como insumo en el sistema de
Ordenacin, es necesario que estos sean censales para cumplir con los requisitos
establecidos en la ley. En este sentido la ley explicita que se deben recoger datos para
todos los establecimientos cada vez que se realicen evaluaciones censales: La Agencia
ordenar, mediante resolucin fundada, a todos los establecimientos educacionales
reconocidos por el Estado, de acuerdo a los resultados de aprendizaje de los alumnos,
en funcin del grado de cumplimiento de los estndares de aprendizaje referidos a los
objetivos generales sealados en la ley y sus respectivas bases curriculares y al grado
de cumplimiento de los otros indicadores de calidad educativa propuestos por el
Ministerio de Educacin y aprobados por el Consejo Nacional de Educacin (ley SNAC,
art. 17). La ordenacin se realizar anualmente y considerar el grado de
cumplimiento de los estndares de aprendizaje y el grado de cumplimiento de los otros
indicadores de calidad educativa de los establecimientos educacionales en tres
mediciones consecutivas vlidas, en caso de que stas sean anuales, y dos en caso de
que se mediciones consecutivas vlidas, en caso de que se realicen cada dos aos o
ms (ley SNAC, art. 18).
Comparables en el tiempo
La ley SNAC explicita que los resultados obtenidos en los Otros Indicadores de Calidad
deben ser comparables en el tiempo. Esto es esencial si el objetivo es monitorear la
mejora. Especficamente, esto se seala en el artculo referido a requerimientos
47
Transparencia
La transparencia tiene como finalidad asegurar que la metodologa y los datos
obtenidos resulten accesibles, con el debido resguardo de la confidencialidad de los
datos individuales, tanto a los establecimientos educacionales como a todos los
miembros de la comunidad educativa que estn interesados en conocerlos.
17
Ver detalle de las listas de asistentes a las reuniones con expertos, consultores y actores del sistema
educacional en el Anexo 1: Jornadas de validacin.
48
Asimismo,
el
sentido
de
evaluar
estos
indicadores
es
que
los
3.
Decisiones
A continuacin se exponen las decisiones tomadas para elaborar los Otros Indicadores
de Calidad Educativa, las cuales sintetizan puntos ya expuestos en el marco conceptual
y en los requerimientos derivados de la ley que mandata su elaboracin, y a su vez
incluyen decisiones que se derivan de la naturaleza de los indicadores seleccionados.
En este sentido se decidi que los Otros Indicadores de Calidad deben:
1. Estar centrados en resultados de aprendizaje de los alumnos
Los Otros Indicadores de Calidad estarn referidos a resultados obtenidos por los
estudiantes. En el actual Sistema de Aseguramiento de la Calidad se contemplan
diferentes instancias de monitoreo y evaluacin de los establecimientos con una
visin coordinada y sistmica. En este diseo, es importante tener en cuenta los
objetivos de cada evaluacin y velar para que no se dupliquen y superpongan
innecesariamente. En este sentido, se ha decidido que los Otros Indicadores de
Calidad deben acotarse principalmente a la evaluacin de los objetivos de
aprendizaje asociados al mbito personal y social, dado que las pruebas Simce se
hacen cargo del mbito del conocimiento y la cultura a travs de la evaluacin de
los Estndares de Aprendizaje. Asimismo, el cumplimiento de la normativa
quedar cubierto con las fiscalizaciones de la Superintendencia de Educacin, y
49
indicadores
que
apuntan
al
desarrollo
de
habilidades
no
cognitivas
En general, en los sistemas de responsabilizacin con consecuencias no se evala
de manera censal el desarrollo de las habilidades no cognitivas. En estos
sistemas normalmente se incluyen indicadores relacionados con los aprendizajes
acadmicos y aquellos que se derivan de datos duros como los de asistencia,
retencin y equidad en los resultados. Un ejemplo de esto se puede observar en
la mayora de los estados de Estados Unidos, en los cuales se consideran los
resultados en las pruebas estatales de matemtica y lenguaje e indicadores como
asistencia y tasa de graduacin.
En los sistemas que consideran aspectos relacionados con el desarrollo personal y
social de los estudiantes, estos son evaluados en las visitas inspectivas y las
conclusiones se incluyen en informes cualitativos que sealan fortalezas y
debilidades. Estos informes tienen consecuencias y forman parte del sistema de
50
responsabilizacin que da origen a una serie de efectos al igual que los sistemas
que solo utilizan resultados de pruebas estandarizadas.
Aun as, en el diseo de los Otros Indicadores de Calidad se decidi integrar la
evaluacin de indicadores relacionados con el mbito del desarrollo personal y
social de manera censal mediante cuestionarios aplicados a los estudiantes, los
docentes y los padres y apoderados.
Esta decisin tiene un componente principal de carcter pedaggico, que se
refiere a la importancia de que el sistema de responsabilizacin entregue una
seal y focalice los esfuerzos de los establecimientos en el desarrollo integral de
los alumnos y no oriente sus esfuerzos solo al mbito acadmico. Se sabe que los
sistemas de responsabilizacin pueden producir estrechamiento curricular y la
inclusin en la evaluacin de otros aspectos ayuda a paliar esta deficiencia.
4. Considerar en la evaluacin de los indicadores percepciones y actitudes en
base a cuestionarios autoreportados
Se ha decidido considerar las percepciones de los alumnos, docentes, padres y
apoderados porque ellas revelan una dimensin de la realidad escolar importante
de tener en cuenta. La percepcin es el proceso mediante el cual el individuo
selecciona, organiza e interpreta los estmulos en un todo significativo y
coherente (Schiffman & Kanuk, 2007), y en base a estas interpretaciones los
individuos actan. Un conjunto importante de investigaciones y teoras en
psicologa muestran que el modo en que los individuos perciben su ambiente es
un predictor slido del desempeo social, emocional y acadmico, incluso de
mayor
peso
que
lo
que
realmente
sucede
(Bandura,
1986,
1997;
Bronfenbrenner, 1979; Arum, 2003; Bear, 2010; Pianta, 1999). Es as como las
percepciones de los individuos sobre su ambiente social y sobre las interacciones
sociales, se consideran ms relevantes que la realidad objetiva per se (Bandura,
1986, 1997; Bronfenbrenner, 1979).
Las actitudes juegan un rol similar, ya que estas constituyen una predisposicin a
actuar de manera consistente con respecto a un determinado objeto o situacin
(Schiffman & Kanuk, 2007). Por lo tanto, al evaluar los componentes afectivos
(emociones o sentimientos), cognitivos (creencias) y conductuales (tendencia o
disposicin a actuar) propios de las actitudes de los estudiantes, se obtiene un
acercamiento ms completo al aprendizaje adquirido por los alumnos.
Por otra parte, medir mediante cuestionarios obedece a razones prcticas
derivado de la exigencia legal de contar con Otros Indicadores de Calidad para
todos los establecimientos reconocidos por el Estado. La ley exige considerar en
51
uno
los
Otros
Indicadores
de
Calidad
probablemente
tendr
una
Adems del 67% destinado al cumplimiento de los estndares de aprendizaje, la ley estipula que se debe
considerar al promedio de resultados en el Simce e indicadores de tendencia, por lo tanto se estima que
se podra distribuir aproximadamente el 27% entre los Otros Indicadores si es que se les asigna un porcentaje por partes iguales a todo lo que no es Estndares de Aprendizaje.
52
los establecimientos segn los idearios de sus propios Proyectos Educativos. Por
ejemplo, la repitencia es uno de los factores de eficiencia interna que
frecuentemente se sugiere incluir entre los Otros Indicadores de Calidad, sin
embargo, genera fuertes discusiones. Hay grupos que destacan los problemas de
la promocin automtica en trminos de los efectos de promover de curso a
estudiantes que no estn preparados para los cursos superiores y los problemas
que acarrean en trminos de la responsabilidad e incentivos por el estudio si no
hay consecuencias asociados a los malos resultados. Y por otra parte figuran los
argumentos en contra de la repitencia asociados a los estudios que demuestran
que los alumnos que repiten no mejoran su rendimiento en cursos posteriores,
los problemas derivados de la sobre edad, y las consecuencias psicolgicas y
sociales derivadas de repetir de curso, adems de los costos para la familia y el
Estado. Es por este motivo que se decidi no incluir este tipo de factores entre
los ndices elegidos.
La definicin de los Objetivos Generales de la Educacin, de la cual se
desprenden parte de los indicadores, fue sometida a una amplia discusin
democrtica logrando un consenso y por lo tanto son un buen marco para la
eleccin de los indicadores. Sin embargo alguno de ellos, como el desarrollo en el
mbito moral y espiritual tampoco se aborda mediante los Otros Indicadores de
Calidad dado que se opt por seguir el lineamiento entregado en la ley SNAC que
propone que se evale la formacin de los alumnos en consonancia al Proyecto
Educativo
de
cada
establecimiento
durante
el
transcurso
de
las
visitas
de
vulnerabilidad
de
sus
estudiantes,
de
su
ubicacin
geogrfica,
53