La evaluacin en las polticas de Educacin de Adultos

Mara Isabel Infante Roldn Coordinadora Nacional de Educacin de Adultos

Contenidos
Consideraciones generales. Influencia de las evaluaciones internacionales en la poltica. La evaluacin de los aprendizajes de procesos educativos y su importancia en Educacin de Adultos: La evaluacin en la modalidad flexible de nivelacin de estudios; La evaluacin en la Campaa Contigo Aprendo. La evaluacin de programas como base para la construccin de polticas. Sntesis y conclusiones.

Consideraciones generales
Existe consenso en que el proceso educativo, ms que otros procesos, es opaco : la sociedad no percibe los resultados, incluso los maestros no tienen referencias externas para contrastar los aprendizajes de los alumnos. En Educacin de Adultos, en general, no ha habido una tradicin de evaluacin.

Consideraciones generales
En el contexto de las grandes exigencias actuales es fundamental poder basarse en evaluaciones vlidas para definir, realimentar, revisar y disear las polticas educativas. En la Educacin de Adultos, surgen muchos interrogantes basados en la prctica docente respecto de la evaluacin de los aprendizajes.

Consideraciones generales
No est claro para los docentes qu competencias deben exigir o medir y en qu etapa de estudio y qu validez tienen Qu nivel de desempeo se debe establecer en los distintos sectores de aprendizaje para la aprobacin de la educacin bsica? Y de la Educacin Media? Cmo establecer niveles, dejando de lado la calificaciones basadas en porcentajes de lo que se ha aprendido o enseado?

Consideraciones generales
Cmo establecer niveles de calidad nacionales, que tengan alguna relacin con las exigencias de la sociedad actual? En Educacin de Adultos, es conveniente establecer estndares nacionales de desempeo en los distintos sectores de aprendizaje? En el marco de la Formacin Permanente, cmo reconocer y evaluar los aprendizajes o competencias adquiridas en la vida, relativas a los desempeos generales en diferentes mbitos o las competencias laborales?

Participacin de Chile en evaluaciones internacionales

La investigacin sobre alfabetismo funcional impulsada por UNESCO (1994-1998): Participaron 7 pases de AL: Argentina, Brasil, Colombia, Chile, Mxico, Paraguay y Venezuela; Muestras representativas de la poblacin urbana (capital o ciudades importantes) entre 15 y 54 aos; Propsito: definir los grados de alfabetismo de la poblacin urbana de grandes ciudades o capitales; Se aplicaron instrumentos que medan comprensin en prosa, esquemas o documentos y clculo, basndose en investigaciones de Europa y Norteamrica; Inclua una medicin cuantitativa y una fase cualitativa.

Participacin de Chile en evaluaciones internacionales

Principales resultados: El desempeo de la poblacin urbana del Gran Santiago no fue muy diferente de la de otros pases; Toda la poblacin pudo ser ubicada en niveles de alfabetismo; Los niveles estuvieron influidos, fundamentalmente, por la escolaridad y el desempeo en el trabajo; Las personas que haban cursado menos de 8 aos de escolaridad se ubicaban en el Primer o Segundo Nivel (los ms bajos);

Participacin de Chile en evaluaciones internacionales

Principales resultados: El salto definitivo, en cuanto a competencias, se daba en la educacin universitaria; la escolaridad completa no garantiza un dominio real de las competencias de lectoescritura y matemticas; El aprendizaje se da tambin por otros medios, los que se relacionan con las estrategias que usa la poblacin para enfrentar el mundo letrado; Las competencias se mantienen slo cuando hay un uso efectivo de las mismas en el trabajo; Frente a un texto escrito, la oralidad sigue siendo el medio cultural ms importante para la comprensin.

Participacin de Chile en evaluaciones internacionales

La investigacin de OECD (SIALS): Particip Chile como nico pas latinoamericano, en el ao 1998; Se trabaj con una muestra representativa de la poblacin entre 15 y 64 aos a nivel nacional; Midi las competencias de comprensin en prosa, esquemas o documentos y clculo o matemticas; Mostr que las competencias de la poblacin adulta son dbiles en los tres dominios: ms del 50% de la poblacin poda ubicarse en el Primer Nivel, el ms bajo; Slo la escolaridad media completa garantizaba que la mayora no estuviera en el Primer Nivel.

Niveles alcanzados por la poblacin entre 15 y 65 aos en el estudio de OECD

60
50,6 57,1 52,2

50 40 30 20 10 0 Prosa Nivel 1 Documentos Nivel 2 Nivel 3 Cuantitativa Nivel 4 y 5

13,2 1,6 11,4 1,4 34,6 35 26,2 14 2,7

Porcentaje de adultos en Nivel 1 de competencias por nivel educacional

100 90 80 70 60 50 40 30 20 10 0 Prosa Bsica Incompleta Media Completa Documento Bsica Completa Superior Cuantitativo Media Incompleta 13,1 15,9 17,1 86,7 69 83,8 68,3 58 47,7 30,2 51 35,1 40,1 88,3 77,4

Participacin de Chile en evaluaciones internacionales

Se pudo demostrar la correlacin directa entre bajas competencias y nivel de pobreza; Se pudo corroborar con la CASEN: Slo con Educacin Media completa se poda acceder mayoritariamente al IV quintil de ingreso (CASEN 2000).

Nivel educacional por quintil de ingreso (CASEN 2000)

40 35 30 25 20 15 10 5 0 I Sin ed. Bsica Inc. II Media Inc. III Media Comp IV Sup.Inc. V Sup.Comp.

Influencia de las evaluaciones de aprendizaje en las polticas de Educacin de Adultos

Los resultados de ambas evaluaciones. Los datos de CASEN e INE (5 millones de personas de 15 aos y ms sin escolaridad completa). La necesidad de aumentar la competitividad del pas en el marco de la globalizacin. Condujeron a: Destacar como una de las prioridades del pas a la Educacin de las Personas Adultas; Insertarla en el Programa triministerial Chilecalifica, de Formacin Permanente, financiado con prstamo del Banco Mundial;

Influencia de las evaluaciones de aprendizaje en las polticas de Educacin de Adultos

Impulsar una profunda reforma de la Educacin de Personas Jvenes y Adultas, con el fin de: Ampliar su cobertura y mejorar su calidad; Incluirla bajo la perspectiva de una educacin permanente. Acciones: Se impuls una modalidad flexible de nivelacin de estudios (60.000 personas al ao), con lo que se ha alcanzado a unas 200.000 personas; Se disearon propuestas educativas diferenciadas segn la poblacin;

Influencia de las evaluaciones de aprendizaje en las polticas de Educacin de Adultos

Se dise un nuevo marco curricular para su aplicacin progresiva; Se apoyaron acciones relacionadas con la reforma: Perfeccionamiento docente (aprox. 1000 al ao); Equipamiento de los centros de educacin de adultos para la formacin en oficios; Elaboracin de textos y entrega de recursos de aprendizaje; Mejoramiento de la infraestructura; Aumento sustantivo de la subvencin para la educacin regular de adultos.

La evaluacin de los aprendizajes de procesos educativos

La evaluacin en la modalidad flexible de nivelacin de estudios: La ampliacin de las instituciones y la instalacin de una forma flexible de horario hizo necesaria una evaluacin nica, nacional, simultnea; La evaluacin de los aprendizajes es de alto impacto para los alumnos (certificacin) y para la instituciones (pago por resultado); Se comienza la construccin de un Sistema Nacional de Evaluacin y Certificacin de estudios bsicos y medios; Los instrumentos son elaborados por un equipo de especialistas del Ministerio de Educacin de acuerdo a un marco de evaluacin;

La evaluacin de los aprendizajes de procesos educativos

La evaluacin en la modalidad flexible de nivelacin de estudios: Los instrumentos son aplicados por establecimientos educacionales designados regionalmente; Los instrumentos son validados pre y post; se aplica la estadstica tradicional y el mtodo de TRI (teora de respuesta al tem); Se ha optado por un enfoque que intenta descubrir qu competencias logran las personas en determinados niveles; para ello, los estudiantes deben elaborar sus respuestas; Los tems se presentan en forma contextualizada; Con los tems validados se construye un banco digital de tems.

La evaluacin de los aprendizajes de procesos educativos

La evaluacin en la modalidad flexible de nivelacin de estudios: Los resultados constituyen una poderosa seal para el servicio educativo; Ms adelante, el banco podr ofrecer instrumentos para evaluar y certificar a todas las personas que hayan desarrollado competencias fuera del sistema escolar; Puede servir como base para una medicin de la calidad de la Educacin de Adultos, en general.

La evaluacin de los aprendizajes de procesos educativos

La evaluacin de aprendizajes en la Campaa de Alfabetizacin Contigo Aprendo Datos de contexto: 480.865 personas declaran no saber leer ni escribir, lo que corresponde al 4,3% de la poblacin; La Campaa Contigo Aprendo se desarrolla desde 2003 y atiende a unas 15.000 personas anualmente. Supuestos: Siempre se pueden descubrir niveles de alfabetismo y tambin en un proceso de alfabetizacin; se puede hablar de un continuum de habilidades; El dominio del cdigo escrito y su uso es un fenmeno multicausal; se inscribe dentro del conjunto de las prcticas que crean y reproducen la distribucin social del conocimiento.

La evaluacin de los aprendizajes de procesos educativos

La evaluacin de aprendizajes en la Campaa de Alfabetizacin Contigo Aprendo: El Sistema Nacional de Evaluacin realiza dos mediciones de las habilidades de los participantes: una al comienzo, de diagnstico en la que se ubican los niveles de alfabetizacin y otra, al final, para evaluar los aprendizajes logrados en el perodo y certificar el Primer Nivel de Educacin Bsica (4 ao Educacin Bsica), si corresponde. Como resultado del diagnstico se han identificado tres niveles de desempeo, de acuerdo a las habilidades que demuestran los participantes: desde no escribir su nombre completo o identificar las vocales hasta leer comprensivamente un texto muy breve y expresarse por escrito con errores.

Niveles de alfabetismo en pruebas de diagnstico y final

P_diagns 2004 - N = 1270 P_final 2004 - N = 1270

+23,7%

43,1% 31,4% 25,5%

-15,0% -8,7%

16,8%

28,1%

55,1%

Primer nivel

Segundo Nivel

Tercer nivel

La evaluacin de los aprendizajes de procesos educativos

La evaluacin en la Campaa de Alfabetizacin Contigo Aprendo: Opiniones de las personas respecto del servicio educativo: Ms del 90% alaba el trabajo de grupo, los temas del libro, la utilidad de los mismos para aprender y la ayuda del monitor; Sus expectativas dan cuenta de que este proceso no es un proceso de trmino: casi todos expresan que quieren seguir estudiando y piensan que se seguirn reuniendo con su grupo.

La evaluacin de programas como base para la construccin de poltica

Es igualmente necesario evaluar y monitorear los procesos y programas para tener elementos para las propuestas de cambios. Estudios realizados: Estudio evaluacin del programa de nivelacin bsica de trabajadores en comparacin con CEIAs y terceras jornadas (Departamento de Sociologa de la Universidad Catlica, 2002); Diagnstico de los Centros de Educacin Integrada de Adultos (CEIA) (Asesoras para el Desarrollo, 2003); Evaluacin de la oferta de educacin de adultos en las terceras jornadas (Asesoras para el Desarrollo, 2004).

La evaluacin de programas como base para la construccin de poltica

Estudios realizados: Estudio de evaluacin de impacto de la modalidad flexible de nivelacin de estudios, del programa de educacin y capacitacin permanente, Chile Califica (Consultores en Economa y Desarrollo, 2004). Incluy tres aspectos: el impacto de la nivelacin de estudios en los ingresos generados por el trabajo; el impacto en la tasa de ocupacin y; por ltimo, los efectos relacionados con aspectos de valoracin y aspiracin personal. Esta investigacin ha servido para continuar y mejorar el servicio de la modalidad flexible de nivelacin de estudios, especialmente en las variables que pueden ser controladas por el programa, como las variables relacionadas con la metodologa de enseanza aprendizaje.

Evaluacin y monitoreo
En la Educacin regular de adultos no existen procedimientos instalados para el seguimiento y monitoreo de la calidad del servicio que desarrollan los establecimientos. A nivel experimental se est trabajando en un modelo de mejoramiento de la gestin, la que incluye, en cuanto a procesos: liderazgo; convivencia escolar y apoyo a los estudiantes; recursos y gestin curricular; y en cuanto a resultados: logros de los estudiantes y satisfaccin de la comunidad. Este modelo se aplica en 10 Centros de Educacin Integrada de Adultos.

Evaluacin y monitoreo

Para evaluar en unos aos ms el avance de la Educacin de Adultos por todos los dispositivos de la reforma, y especialmente, el avance en cuanto a aprendizajes, se realizar una medicin, a una muestra de alumnos del ltimo ao, que establezca una lnea de base para poder comparar el estado de la educacin de adultos ( y especialmente de los aprendizajes) en unos aos ms.

Sntesis y conclusiones
Importancia de la evaluacin para tomar decisiones de poltica: evaluacin de aprendizajes, evaluacin de procesos, evaluaciones de impacto. Existen mayores dificultades para evaluar en educacin de adultos: muchos programas diferentes, poblacin heterognea, condiciones de vida. En las mediciones de aprendizajes, se avanza en el enfoque de niveles, tanto para la comparacin como para apoyar la didctica. Falta todava trabajar ms el tema de los estndares.

Sntesis y conclusiones
Es importante apoyar la construccin de sistemas de evaluacin de aprendizajes, con requerimientos de calidad, de modo que las evaluaciones sean vlidas y confiables. Algunos aspectos que hay que considerar: claridad de propsitos; conocimiento de la poblacin evaluada; conocimiento tcnico respecto de los procedimientos de elaboracin de instrumentos; claridad y responsabilidad sobre la informacin y uso de los resultados; devolucin de los resultados con fines pedaggicos y para apoyar la formacin docente.

Sntesis y conclusiones
Falta todava avanzar ms, para que todos los programas, todas las campaas, todas las reformas vayan acompaadas de un proceso de registro, sistematizacin y evaluacin. En Educacin de las Personas Jvenes y Adultas debemos llegar a una cultura de la evaluacin, que permita tener una base slida para instalar en nuestros pases una educacin efectiva a lo largo de toda la vida, posible de mejoramiento progresivo, adecuada a los requerimientos de las personas y a las exigencias de la sociedad.

Muchas gracias!