Pruebas Pisa

PISA (Programme for International Student Assessment) es un estudio internacional comparativo de evaluacin educativa liderado por la Organizacin para la Cooperacin y el Desarrollo Econmico OCDE. Tiene como fin valorar las competencias en las reas de lectura, matemticas y ciencias de los estudiantes de 15 aos que cursan entre 7 y 11, donde se analizan los resultados en funcin de variables de contexto y de sistemas escolares. Colombia particip en PISA 2006 (nfasis en ciencias) y 2009 (nfasis en lectura). Para el ao 2012 La Fundacin Luker en convenio con el Municipio de Manizales y el Instituto Colombiano para el Fomento de la Educacion ICFES, implementar las pruebas "PISA 2012" con nfasis en matematicas en la ciudad de Manizales teniendo dentro de la muestra a los estudiantes pertenecientes a colegios de Escuela Activa Urbana.
Los resultados de PISA han sido inquietantes para muchos pases. Algunos han celebrado y otros han lamentado esos resultados, pero pocos han permanecido indiferentes. El gran desafo est, sin duda alguna, en salir de las reacciones momentneas y pasar a la ms laboriosa pero prometedora tarea de analizar a fondo los resultados de las evaluaciones, y empezar a disear y poner en prctica polticas pblicas adecuadas a la atencin de los problemas descubiertos. Varios de esos problemas tienen que ver, seguramente, con las escuelas, pero muchos otros se relacionan tambin con las condiciones de vida de las familias, el acceso a medios de comunicacin de calidad, el adecuado funcionamiento y la difusin de las bibliotecas pblicas, y otras muchas cosas. En particular, ha sido dramtico descubrir que segmentos importantes de la poblacin estudiantil de algunos pases europeos se encontraban en el nivel ms bajo de evaluacin de PISA, y que este fenmeno est estrechamente ligado con la migracin. Los hijos de inmigrantes, en Alemania y otros pases, muestran resultados muy inferiores al resto de la poblacin. La realizacin de PISA y su distribucin entre los miembros de la OCDE y algunos pases adherentes a la iniciativa ya ha tenido resultados importantes: los gobiernos y la opinin pblica han volcado su atencin en el tema de la educacin y nadie soslaya su prioridad; se reconoce claramente el vnculo entre la calidad de la educacin y el progreso de los pases, y se ha visto, objetivamente, la grave desigualdad en opciones de educacin en la comunidad internacional y dentro de cada pas. Algunos resultados relevantes de la evaluacin de 2009. Pueden ser un aviso para el mundo occidental: Corea y Finlandia son los pases de la OCDE con mejor rendimiento escolar (Lectura comprensiva, matemticas y ciencias). Sin embargo, China (Shanghi) va muy por delante de los anteriores. Tambin estn arriba en las diversas clasificaciones Hong-Kong Singapur y

Canad. Despus de Finlandia, los pases europeos con mejores resultados medios son Pases Bajos, Blgica, Noruega, Estonia, Suiza, Polonia, Suecia y Alemania (que figuran entre los 20 primeros). Espaa no ha sacado resultados brillantes y no entra en los treinta primeros. Le preceden la mayora de los pases europeos, incluso Portugal. Hay que preguntarse por qu un pequeo pas como Finlandia consigue estar muy por encima de pases grandes desarrollados Los autores del Informe sacan ellos mismos algunas conclusionesinteresantes: Los sistemas de educacin de mejor rendimiento dispensan una enseanza de calidad a todos los alumnos sin distincin, independientemente de su condicin socioeconmica. Los mejores sistemas de educacin son los que conceden una mayor autonoma individual a los establecimientos en la elaboracin de los programas y polticas de evaluacin. En los pases de la OCDE, en general los establecimientos privados obtienen resultados anlogos a los alumnos de establecimientos pblicos. Los sistemas de educacin con mejores resultados tienden a dar ms importancia al salario de los enseantes y no a la reduccin del tamao de las clases. Los alumnos desfavorecidos tienen a veces ms profesores a su disposicin pero estos no son necesariamente de la mejor calidad. El ambiente familiar influye sobre el xito escolar, y la escuela parece en muchas ocasiones reforzar este impacto. Vivir en un entorno socioeconmico desfavorecido no lleva necesariamente consigo malos resultados escolares, pero el perfil socioeconmico de los alumnos y de los establecimientos de enseanza tiene con toda evidencia un impacto importante en el rendimiento. Los alumnos que, independientemente de su entorno socioeconmico, frecuentan un establecimiento en los cuales el grueso de los alumnos es ms favorecido, tienen tendencia a obtener resultados ms altos que alumnos inscritos en un establecimiento donde el grueso es ms desfavorecido. En los pases de la OCDE, los alumnos que proceden de la inmigracin llamada de primera generacin, o los que han nacido en el extranjero de padres nacidos en el extranjero, tienen unos resultados medios ms bajos que los autctonos. Los alumnos que frecuenten un establecimiento urbano tienen mejores resultados que los otros. Los alumnos que viven en una familia monoparental tienen resultados algo peores que los que viven en otra estructura familiar. En la OCDE, la proporcin de los alumnos que leen diariamente por placer ha disminuido en los ltimos aos. En todos los pases, los alumnos que ms gusto cogen a la lectura sobrepasan con mucho en lectura comprensiva a los alumnos a los que les gusta menos. Y las chicas ganan en esto a los chicos en todos los pases participantes, porque en general a los chicos les gusta menos leer. Factores como la predisposicin, el temperamento, la presin de los dems y la socializacin contribuyen aparentemente a explicar porqu los chicos se interesan menos a la lectura, pero es posible animar a los chicos a leer con ms gusto. Los ltimos aos esta diferencia entre las chicas y las chicas ha aumentado.

(En este ltimo punto conviene remarcar que antes de saber escribir bien hay que saber leer bien. Es fundamental, porque por mucho que uno sabe y buenas notas saca en matemticas y ciencias, si no sabe comunicar sus conocimientos por escrito, de poco le sirven. Y a los chicos: Leer ms y menos play station! Mi nieta est leyendo ahora los libros que a su madre y a sus tas les gustaban tanto cuando tenan su edad. Para conservar estos tesoros sirve el camarote)

En las dos ltimas dcadas, el nmero de pases que participa en evaluaciones internacionales de logro educativo para obtener informacin sobre el diseo y mejora de sus polticas educativas ha ido aumentando signi cativamente. Sin embargo, esta participacin es uno de los temas ms controvertidos en el campo educativo2 , en tanto que el valor y validez de este tipo de evaluaciones es an materia de intensas discusiones en los medios acadmicos PISA se sustenta en un enfoque abierto de la evaluacin, es decir, no se basa en los marcos curriculares nacionales. De all que PISA no est diseado para evaluar el nivel de aprendizaje de los contenidos espec cos establecidos en los currculos ni aporta informacin sobre el grado en que este se est implementando. Los instrumentos que utiliza PISA se disean a partir de un conjunto de estndares de contenido y desempeo, elaborados por un grupo de expertos y especialistas en diferentes reas de conocimiento que se consideran imprescindibles para la adecuada insercin de los jvenes en la sociedad y en el mundo laboral de hoy El Programa Internacional para la Evaluacin de Estudiantes (PISA) PISA se concibe como un programa que se caracteriza principalmente por tres aspectos: i) establecer un marco conceptual comprensivo

y riguroso para evaluar lectura, matemtica y ciencia; ii) explorar habilidades y caractersticas de los estudiantes que van ms all de los contenidos propiamente escolares; y iii) analizar las caractersticas de los sistemas, escuelas y estudiantes que se asocian a los resultados escolares (OCDE 2008). Una de las caractersticas esenciales de PISA es su regularidad, es decir, se trata de un programa diseado en tres ciclos evaluativos de tres aos cada uno, con la nalidad de hacer un seguimiento al progreso educativo de los pases participantes (UMC 2002). En cada ciclo se 12 El lector interesado en profundizar en las caractersticas de PISA puede revisar las distintas publicaciones que hay al respecto en su pgina web: http://www.pisa.oecd.org Los instrumentos que utiliza PISA se disean a partir de un conjunto de estndares de contenido y desempeo que se consideran imprescindibles para la adecuada insercin de los jvenes en la sociedad y en el mundo laboral de hoy. 001_28 PISA.indd 9 1_28 PISA.indd 9 110/23/09 6:38:47 PM 0/23/09 6:38:47 PM10 Serie: La educacin del futuro estudia en profundidad una de las reas evaluadas, que se traduce en la aplicacin de un mayor nmero de tems del rea privilegiada en relacin con las otras dos, lo que permite reportar los resultados de

dicha rea en trminos de subescalas13 y de niveles de competencia. Nuestro pas particip en el primer ciclo de evaluacin en el ao 2001, y se ha vuelto a reintegrar para el ciclo 200914. En ambos casos el nfasis de la evaluacin ha estado centrado en la lectura. Quiz una de las caractersticas ms importantes de PISA sea el innovador concepto de competencia (literacy), que [introduce] y que se re ere a la capacidad de los alumnos de aplicar sus conocimientos y habilidades en reas acadmicas fundamentales y de analizar, razonar y comunicar e cazmente cuando plantean, resuelven e interpretan problemas relacionados con distintas situaciones (OCDE 2005: 20). Esta nocin de competencia supone abandonar la visin dicotmica que ha imperado en el mbito educativo, y al hablar de niveles de competencia se asume la idea de que las personas desarrollan de manera progresiva sus conocimientos, destrezas y habilidades en distintos contextos a lo largo de la vida. En tal sentido, PISA evala los conocimientos y habilidades de los estudiantes como un contnuum. Dicho enfoque, entonces, no permite responder preguntas de si los estudiantes saben o no leer, sino que aporta informacin sobre el tipo de habilidades y destrezas que ponen en juego los estudiantes al leer y el grado en que las han adquirido. En tal sentido, un elemento relevante de PISA 2009 es la introduccin de un conjunto de tems de menor di cultad que permitir describir lo que saben, comprenden y pueden hacer los estudiantes de pases que mostraron un bajo nivel de desempeo en lectura. Como es conocido, en el ciclo 2000 una proporcin importante de estudiantes de los pases participantes pero en particular en los pases que no pertenecan a la OCDE15 se ubic en el grupo por debajo del primer nivel de competencia establecido en lectura, lo que no permita

describir los conocimientos y habilidades que estaban asociados 13 Por ejemplo, para el caso de lectura, las subescalas establecidas son: i) recuperacin de informacin, ii) interpretacin de textos y iii) re exin y evaluacin. 14 Es decir, no particip en el 2003 ni en el 2006, que tuvieron como nfasis la evaluacin de competencias matemticas y cient cas, respectivamente. 15 En el caso del Per, de los cinco niveles de competencia considerados, el 54% de los estudiantes se ubic por debajo del nivel 1. Dicho enfoque aporta informacin sobre el tipo de habilidades y destrezas que ponen en juego los estudiantes al leer y el grado en que las han adquirido. Esta nocin de competencia supone abandonar la visin dicotmica que ha imperado en el mbito educativo. 001_28 PISA.indd 10 1_28 PISA.indd 10 110/23/09 6:38:48 PM 0/23/09 6:38:48 PM11 Adicionalmente, PISA estudia en cada ciclo evaluativo otras habilidades y caractersticas de los

estudiantes de 15 aos, tales como sus actitudes hacia la lectura, la matemtica y la ciencia. Importancia de PISA 2009 a dicho desempeo. Una razn adicional para incluir este tipo de tems ms fciles es que la experiencia de los estudiantes con menor nivel de desempeo sea ms satisfactoria16 . Un aspecto importante de PISA es que se aplican diferentes cuadernillos a los estudiantes evaluados. Cada cuadernillo est organizado por bloques de tems pertenecientes a las tres reas evaluadas, que, a su vez, tienen tems nicos e tems en comn con los otros cuadernillos. Los bloques estn distribuidos en los cuadernillos en distinto orden, de manera que no siempre queden al inicio o al nal en todos los cuadernillos en los que aparecen. Este diseo, llamado Bloques Incompletos Balanceados, permite, por un lado, que los estudiantes se enfrenten a un nmero razonable de preguntas que sirvan para medir su desempeo de manera adecuada, evitando el factor cansancio, y por otro lado, que se logre evaluar todo el espectro de conocimientos, capacidades y habilidades que se especi can en el marco conceptual de la evaluacin. No obstante, es preciso tener en cuenta que este diseo, adems de otras consideraciones tcnicas17, tiene algunas implicancias, como el hecho de que no permite reportar resultados a nivel individual; es decir, PISA no est diseada para obtener resultados a nivel de escuela o de estudiante evaluado. Adicionalmente a la evaluacin de las reas de lectura, matemtica y ciencias, PISA estudia en cada ciclo evaluativo otras habilidades y

caractersticas de los estudiantes de 15 aos, tales como sus actitudes hacia la lectura, la matemtica y la ciencia18, sus concepciones sobre s mismos, las estrategias que siguen en su proceso de aprendizaje, su sentido de pertenencia con la escuela, entre otros. Con el n de recoger informacin sobre el contexto en que se desenvuelven los estudiantes evaluados y de estimar el aporte de los factores que se asocian a sus resultados, PISA utiliza un conjunto Los Bloques Incompletos Balanceados permiten evaluar todo el espectro de conocimientos, capacidades y habilidades que se especi can en el marco conceptual de la evaluacin. 16 Es importante destacar la conformacin del Grupo Iberoamericano de PISA, que est integrado por Argentina, Brasil, Chile, Colombia, Espaa, Mxico, Panam, Per, Portugal y Uruguay, cuyo propsito es fomentar la colaboracin entre los pases de Iberoamrica que participan en PISA. Este grupo elabor un conjunto de tems que fueron seleccionados por PISA, y que se monitorearon en el ciclo 2009. 17 Entre otros, se puede sealar el carcter muestral de la evaluacin, el hecho de evaluar a un mximo de 35 estudiantes por escuela. 18 Por ejemplo, en el 2006 la actitud de los estudiantes hacia la ciencia fue estudiada a travs de un conjunto de preguntas que buscaban indagar sobre i) el inters en la ciencia, ii) la aceptacin del pensamiento cient co como va de

conocimiento y iii) la responsabilidad hacia el uso de los recursos y el medio ambiente. 001_28 PISA.indd 11 1_28 PISA.indd 11 110/23/09 6:38:48 PM 0/23/09 6:38:48 PM12 Serie: La educacin del futuro de cuestionarios dirigidos a los estudiantes y a los directivos de las instituciones educativas de los pases participantes. A travs de estos instrumentos busca obtener informacin sobre las condiciones econmicas, sociales, culturales y familiares de los estudiantes, adems de las caractersticas antes sealadas, as como acerca de la calidad de los recursos nancieros, materiales, humanos de las escuelas, las caractersticas institucionales, las prcticas directivas, entre otros. Los programas de capacitacin debern ayudar al docente a ampliar sus concepciones acerca de la lectura y sus criterios para la seleccin de textos y preguntas adecuados para desarrollar la comprensin lectora de los estudiantes. De hecho una informacin importante que proveen los

resultados de PISA est referida a evaluar en qu medida los sistemas educativos estn garantizando una distribucin equitativa de las oportunidades de aprendizaje. Dichas evaluaciones pueden ser un mtodo efectivo de concentrar la atencin de los alumnos en los resultados de aprendizaje que se valoran, promoviendo razonamientos y re exiones de mayor nivel de complejidad [...] y estimulando a los estudiantes a alcanzar niveles de logro aun mayores. Las decisiones de poltica educativa debieran ser valoradas por la medida en que se

estn cumpliendo estos objetivos. Esta informacin, sumada a otras, proporcionar un insumo fundamental para hacer una evaluacin objetiva de las polticas educativas aplicadas, y del funcionamiento del sistema durante este periodo. La participacin en estos proyectos puede ser valiosa para los pases, incluso para los pases en desarrollo, siempre y cuando se tomen ciertas previsiones con respecto a las caractersticas tcnicas de las pruebas y a las condiciones polticas e institucionales para su aplicacin.

Adicionalmente, PISA estudia en cada ciclo evaluativo otras habilidades y caractersticas de los estudiantes de 15 aos, tales como sus actitudes hacia la lectura, la matemtica y la ciencia. Los Bloques Incompletos Balanceados permiten evaluar todo el espectro de conocimientos, capacidades y habilidades que se especi can en el marco conceptual de la evaluacin. Una de las caractersticas esenciales de PISA es su regularidad, es decir, se trata de un programa diseado en tres ciclos evaluativos de tres aos cada uno, con la nalidad de hacer un

seguimiento al progreso educativo de los pases participantes. Esta nocin de competencia supone abandonar la visin dicotmica que ha imperado en el mbito educativo. Las evaluaciones internacionales sobre educacin constituyen esfuerzos para obtener informacin con able y comparable, con el n de que puedan ser utilizados como insumo en el diseo y mejoramiento de polticas educativas. Cada evaluacin ha supuesto un aprendizaje que ha permitido enriquecer y mejorar el diseo y elaboracin de los instrumentos

que buscan evaluar el rendimiento estudiantil Un buen sistema de evaluacin debe de nir claramente las preguntas que busca responder y los usos que se pretende dar a sus resultados. 3 Es importante tener en cuenta que esto reduce las tensiones y dilemas que enfrentan los sistemas de evaluacin, pero no los desaparece del todo. Un sistema de evaluacin debe buscar ofrecer informacin complementaria a travs de los distintos estudios que lleve a cabo. La medicin de la calidad educativa es uno de los principales temas en la agenda educativa mundial en los ltimos 20 aos. Los tcnicos y los responsables de la educacin de cada pas han ido tomando conciencia de la necesidad e importancia de evaluar los sistemas educativos y los niveles de aprendizaje de los estudiantes. La prueba PISA, la ms conocida internacionalmente, est siendo aplicada el 2009 a adolescentes de ms de 60 pases. Esta es la segunda vez en la que participa el Per, y el rea principal de la evaluacin es la comprensin lectora, tal como ocurri en el 2000 y 2001.