LA EVALUACIN CON TECNOLOGAS DE LA INFORMACIN Y COMUNICACIN: RECOMENDACIONES DIDCTICAS.

M. Teresa Fontn y Ianis Basdos. RESUMEN: Con los ordenadores en red, los mrgenes de informacin y comunicacin en la prctica habitual de la evaluacin se amplan; el profesor deja de ser su nico responsable e intervienen el propio alumno, los compaeros y otros docentes. La evaluacin no est exclusivamente circunscrita al aula, referida a los alumnos y limitada al control de los conocimientos adquiridos a travs de un examen. Con la evaluacin a travs de Internet se emplean adems de las tcnicas escritas, las visuales, auditivas y multimedias, y se aaden herramientas de intercomunicacin tanto sincrnicas (chats, pantallas compartidas y videoconferencias) como asincrnicas (correo electrnico, foro de discusin y FAQ). Todas estas fuentes de informacin no slo facilitan la comprensin de cmo se produce el aprendizaje y la accin didctica realizada, sino que adems sistematizadas, con ayuda de aplicaciones informticas y programas, hace ms sencillos y rpidos los anlisis cuantitativos y cualitativos de esos procesos. Todo esos datos sern la base para mejorar la prctica de los profesores, y desde luego, el contexto y el funcionamiento de nuestras instituciones educativas. Con la evaluacin con TIC tratamos de integrar dimensiones en interaccin: innovacin educativa, investigacin en el aula, perfeccionamiento y profesionalizacin de los docentes. La tecnologa como apoyo a la evaluacin. Definicin de conceptos. En la evaluacin, habitualmente, la tecnologa se aplica a tres actividades: presentacin de las preguntas del examen, entrada de las respuestas y anlisis de esa prueba. Cuando slo alguna de esas actividades es a travs del ordenador se conoce con la expresin

Computer-Assisted Assessment (CAA) y cuando su automatizacin es completa, con la de Computer-Based Assessment (CBA)1. La distincin se establece con criterios tcnicos: assisted y based, que supone la ayuda parcial o total del ordenador al proceso de evaluacin de los aprendizajes discentes. Adems, en uno y otro caso, la distribucin de la informacin y comunicacin para evaluar puede ser a travs de un ordenador aislado, sin necesidad de estar conectado con otros en red. En los procedimientos citados, el uso de las tecnologas para la evaluacin pretende optimizar la aplicacin de los exmenes (presentacin de las preguntas y elaboracin de las respuestas), su correccin y anlisis. En el cuadro N 1, titulado MODOS DE ADMINISTRAR LOS EXMENES, se compara el modo tradicional de evaluar los aprendizajes discentes con aquellos otros que usan el ordenador. En las estrategias tradicionales de evaluacin no hay informatizacin porque la presentacin de las preguntas y la elaboracin respuestas son en soporte papel, la correccin es manual con o sin plantilla, se distribuyen las calificaciones en papel, y el profesor hace la interpretacin y el anlisis del examen sin ayuda del ordenador. Por el contrario, el trmino Computer-Assisted Assessment (CAA) integra dos modos de usar el ordenador cuando se evala. En uno de ellos, la presentacin de las preguntas de los exmenes y elaboracin de sus respuestas son en soporte papel, la correccin es automtica en hojas de lectura ptica (Optical Mark Reader, OMR)2, las calificaciones son electrnicas, y se usa el ordenador en la interpretacin y en el anlisis de los exmenes. Y en el otro, la presentacin de las preguntas del examen es en papel y se usa el ordenador en la contestacin, calificacin, interpretacin y anlisis del examen. Frente a estos dos procedimientos est la modalidad del ComputerEn la lengua inglesa el trmino espaol evaluacin tiene diferentes significados. Measurement o testing se refiere al proceso de asignar una cantidad numrica a algo. Assessment se reserva para la evaluacin de las aptitudes y actitudes de las personas, y por tanto alude a la evaluacin de los aprendizajes discentes. Y evaluation se emplea cuando se evalan entidades abstractas como programas, curricula, o determinadas variables de una organizacin. 2 Optical Mark Reader (OMR) es una mquina que procesa rpidamente formularios en papel escaneando las marcas, o cruces, que sealan las opciones. Los exmenes que emplean este modo de correccin deben tener preguntas objetivas.
1

Based Assessment (CBA) en donde la evaluacin se automatiza por completo, es decir, el ordenador se emplea no slo en la presentacin de las preguntas de las pruebas de evaluacin y en la elaboracin de sus respuestas, sino tambin en su calificacin, interpretacin y anlisis. PRESENTACIN DE LAS PREGUNTAS RESPUESTAS Papel Papel Manual CORRECCIN ENTREGA DE LAS CALIFICACIONES INTERPRETACIN Y ANLISIS DEL EXAMEN Tradicional CAA CBA Profesor Profesor Ordenador Ordenador Ordenador Papel Papel Electrnica Ordenador Ordenador Manual (con plantilla) Papel Automtica (OMR) Teclado Teclado Papel Papel Papel Papel Ordenador

Automtica Automtica (software) (software)

CUADRO N1: MODOS DE ADMINISTRAR LOS EXMENES FUENTE: Basado en Lara (2001:169)

La incorporacin de las redes de telecomunicacin ha supuesto la sustitucin progresiva de los conceptos anteriores por los de Web-Assisted Assessment (WAA) y Web-Based Assessment (WBA) que indican, respectivamente, la menor o mayor automatizacin de la evaluacin en red; con independencia que sea en una red local de ordenadores, una Intranet o Internet. Ambos trminos definen, en su generalidad, modos de evaluacin de los aprendizajes discentes que usan los ordenadores en red. Las tcnicas y estrategias de evaluacin en Internet son, en principio, las utilizadas tradicionalmente en la enseanza presencial y a distancia. Pero adems emplea tcnicas diferentes a las escritas: visuales, auditivas y multimedias, y aade herramientas de intercomunicacin tanto sincrnicas (chats, pantallas compartidas y videoconferencias) como asincrnicas (correo electrnico, foro de discusin y FAQ. En el cuadro N2 titulado HERRAMIENTAS PARA WEB-BASED ASSESSMENT (WBA) se incluyen algunas de las elaboradas por universidades y su direccin en Internet. La valoracin general que hacemos de esas herramientas, es que siguen manteniendo una evaluacin exclusivamente circunscrita al aprendizaje discente reglado, referida slo a los alumnos y limitada al control de los conocimientos adquiridos a travs de un examen escrito, preferentemente, en la modalidad de pruebas objetivas. La gestin automtica de las pruebas de evaluacin no cuestiona, a priori, el modelo de evaluacin empleado3.

HERRAMIENTA
3

PROCEDENCIA

URL Internet

Los modelos son diversos, entre ellos destacamos: el de verificacin de logros, de evaluacin respondiente, toma de decisiones, sin referencia a metas, evaluacin iluminativa y crtica artstica, que tiene como autores representativos respectivamente a Tyler, Stake, Stufflebeam, Scriven, Parlett y Hamilton, y Eisner. El modelo de evaluacin de las herramientas analizadas es el de verificacin de logros.

CASTLE CVU GEODATA

Leicester University Strathclyde University Southhamptom University

http://le.ac.uk/cc/ltg/castle cvu.strath.ac.uk/assessment/idex.html http://www.geodata.soton.ac.uk/ElecPu

b/Qbrochure.html WEBTEST Edimburg University http://www.hw.ac.uk/sitemap.htm WAMCQ Dundee University http://www.dundee.ac.uk/meded/mcq/ NETQUEST Bristol University http://www.bristol.ac.uk/ / QUIZWIZARD Pennsylvania University http://its.psu.edu/ QUIZMAKER Hawaii University http://www.otted.hawaii.edu/ NETTEST Utah State University http://usu.edu/ CUADRO N2: HERRAMIENTAS PARA WEB-BASED ASSESSMENT (WBA) Concepto de evaluacin. Inicialmente el profesor se debera cuestionar no slo el modelo y el sentido de la evaluacin sino tambin la utilidad de la insercin de los ordenadores en esa prctica. Para ello, debe disponer de formacin didctica en evaluacin y conocimientos tcnicos en TIC que le permitan clarificar y desmitificar su uso en el proceso de enseanza-aprendizaje. La concepcin terica y prctica que el profesor tenga de evaluacin ser determinante para mejorar tanto la calidad de las acciones de formacin como su evaluacin con TIC. Recordemos que siempre la evaluacin implica un juicio de valor sobre las cualidades que tiene algo o sobre su valor, de ah que se deba abordar desde su carcter formativo, es decir, como instrumento para el perfeccionamiento del proceso didctico y de cada uno de sus componentes curriculares. Ello permitir, por tanto, las posibles medidas de mejora, no slo del aprendizaje del alumno sino de las tareas docentes implicadas en el diseo y desarrollo curricular. Pero, en multitud de ocasiones, la evaluacin educativa sigue aquejada de una patologa general (Santos, 1993:15-31) En el cuadro N3, titulado EVALUACIN CON TIC, se ofrece la posible curacin de algunos de los aplicaciones informticas. sntomas de esa patologa con

Los ordenadores en red aportan diferentes fuentes de informacin para evaluar los aprendizajes discentes y nuevos modos de acceder, generar y transmitir datos para ese proceso, facilitando la adopcin de decisiones docentes relativas al diseo y al desarrollo del curriculum. La evaluacin con TIC ayuda al dilogo, comprensin y mejora de los programas educativos.

PATOLOGA DE LA EVALUACIN Slo se evala al alumno

EVALUACIN CON TIC Adems, a otros responsables del proceso educativo: profesor, tutor, experto... Cualquiera de los elementos curriculares: objetivos, contenidos, actividades, entornos de aprendizaje, los medios empleados, el procedimiento de evaluacin... El profesor deja de ser el nico responsable de la evaluacin. Se desarrolla la autoevaluacin y la evaluacin por compaeros. Importa no slo lo conseguido sino el proceso (con qu medios, con qu ritmo...) Se evalan tambin actitudes y procedimientos: trabajar en equipo, colaborar, buscar informacin, solucionar problemas, etc. La socializacin: respetar al otro, formular opiniones, entrar en debates, negociacin, etc. Adems, datos cualitativos sobre actitudes personales de participacin y colaboracin en trabajos individuales y de grupo: tutoras electrnicasforos, chats, etc. La evaluacin es individualizada, si el alumno compite es consigo mismo. Los alumnos siguen su ritmo de aprendizaje.

Slo evala el profesor Se evalan solamente los Resultados Se evala slo los conocimientos

Slo se evala cuantitativamente Se evala competitivamente

CUADRO N 3: EVALUACIN CON TIC.

La integracin de las TIC en el proceso evaluador. Principios.

La evaluacin lleva implcita el planteamiento para qu educamos, en el sentido de que esta prctica es un instrumento de aprendizaje, y por lo tanto de formacin docente y discente. Cuando los ordenadores se usan en la evaluacin son herramientas a su servicio, y somos los profesores quienes debemos seleccionarlas, adaptarlas y utilizarlas en funcin del papel que les otorguemos en ese proceso educativo. La insercin de los recursos tecnolgicos de Internet en el proceso evaluador nunca puede obviar la reflexin sobre unos principios didcticos bsicos:

Requiere un proyecto educativo previo que les d sentido y cobertura terica. El

proceso didctico est relacionado con el qu y cmo se aprende, es decir, con sus resultados finales y con los procedimientos a travs de los cuales se aprende y se llega a ellos. Los fundamentos curriculares (pedaggicos, psicolgicos, sociolgicos y epistemolgicos) debern estar presentes, en el diseo y desarrollo de los procesos de enseanza-aprendizaje con TIC, sino tambin en los de evaluacin.

Las TIC son unos elementos curriculares que funcionan en interaccin con otros su significacin en el

(objetivos, contenidos, actividades...). Y en consecuencia,

proceso de enseanza-aprendizaje depender de las decisiones que se adopten respecto al resto de los elementos curriculares, y al mismo tiempo, esas decisiones repercutirn en los dems elementos del sistema. Se trate de enseanza a distancia, presencial o semipresencial, la funcin del profesor no es la de transmitir exclusivamente informacin, sino organizar y crear determinados entornos para el aprendizaje de los alumnos. La evaluacin deber estar en consonancia con estas decisiones didcticas, y contemplar en sus anlisis los resultados y procesos de aprendizaje en esos entornos.

El contexto organizativo facilitar o dificultar su uso. Para que las TIC no sean

algo marginal en nuestros centros escolares, las medidas organizativas son fundamentales: nmero de ordenadores por alumno, adecuacin de su instalacin, 7

mantenimiento... Pero si nos referimos a la teleformacin, la plataforma tecnolgica elegida ser decisiva. La evaluacin es una parte integrante del proyecto educativo, no algo aadido al final del mismo, por tanto, tiene que ser congruente e interaccionar con los dems elementos curriculares; no en vano se pregunta por el valor de los programas y de sus acciones formativas. Cuando una evaluacin se disea y se pone en funcionamiento, ser imprescindible conocer qu es lo que se consigue por el hecho mismo de poner esa iniciativa en accin, por qu esa y no otra, por qu de ese modo y para esos fines. Las respuestas a estas cuestiones dependern del punto de vista y del cuadro de valores desde el que se parta. Las TIC no son algo mgico que resuelve los problemas tericos y prcticos de la evaluacin, porque en el proceso de enseanza-aprendizaje son nada ms y nada menos que unos elementos curriculares cuyo sentido lo adquieren en ese proyecto educativo. Por todo lo cual, cualquier innovacin o remodelacin en la prctica de la evaluacin no viene dada por la simple insercin de las TIC sino por la intervencin directa de los participantes, alumnos y profesores, que son los que en ese proceso las dotan de sentido curricular. Con las TIC se puede ampliar la cantidad y calidad de la informacin para evaluar, pero esto no significa que la evaluacin sea entonces ms rica y positiva, ya que su verdadero significado depender del contexto curricular en el que se inserte, las interacciones que establezca con los dems elementos curriculares, y los requerimientos que se les demande. Las TIC pueden, y deben, liberar al profesor y optimizar las tareas de interaccin humana, evaluacin contnua y mejora de los entornos de aprendizaje.

Las TIC pueden ayudar a evaluar. En el proceso evaluador, el uso de los ordenadores en red debera suponer no slo la automatizacin de algunas de sus actividades ineludibles referidas a los exmenes: presentacin de las preguntas, entrada de las respuestas y anlisis e interpretacin de las calificaciones, sino tambin incluir en su proceso las virtualidades que Internet tiene para acceder, generar, archivar, transmitir e intercambiar informacin para evaluar. Las tcnicas y estrategias de evaluacin en Internet son, en principio, adems de las utilizadas en la enseanza presencial las que se derivan de las herramientas de informacin y comunicacin que se pueden utilizar en ese entorno. Las posibilidades de la red relacionadas con el proceso de evaluacin son las siguientes: TUTORIA: En los tutoriales y lecciones hipermedia para la enseanza a distancia, presencial y semipresencial, las fuentes de informacin para evaluar dependern de las plataformas e interfaz que se utilicen. Aunque todava la tecnologa no permite que la acreditacin de los aprendizajes se pueda realizar de forma no presencial. Las tcnicas y estrategias de evaluacin ms usuales son pruebas objetivas de diversos tipos, ejercicios de autoevaluacin adaptativos y no adaptativos, e intercomunicaciones sincrnicas y asincrnicas entre alumnos y profesores. EDICIN: La web al almacenar en memoria los trabajos y proyectos multimedia on line de los alumnos, puede proporcionar a cada uno de ellos una visin de conjunto de su rendimiento y progreso a lo largo del curso. Pero adems puede publicar esa informacin, lo que permite que la evaluacin la realice a su vez el docente que orienta al alumno en su aprendizaje u otros docentes, el grupo de alumnos, o la clase entera. La incorporacin de estas estrategias de edicin facilita no slo la autoevaluacin sino un mejor control del proceso de aprendizaje y de sus resultados.

 FORUM. Las listas de discusin y las news constituyen herramientas de intercambio de informaciones, materiales, opiniones, etc., como base de debates y de descubrimiento virtual de conocimiento. Adems las herramientas sincrnicas y asincrnicas y el software especfico (NetMeeting, BSCW...) pueden estimular el aprendizaje colaborativo. Unas y otras facilitan el dilogo y el debate tan necesarios para los juicios y la toma de decisiones de la evaluacin. NAVEGACIN: La exploracin y bsqueda en la web por el alumno, aportar informacin sobre su capacidad de establecer relaciones entre los conocimientos presentados, profundizar en ellos, analizarlos desde diferentes perspectivas, etc. Datos de gran utilidad tambin para la evaluacin de las actitudes e intereses de los alumnos. Las mltiples herramientas que nos proporciona la red son un medio para instrumentalizar las acciones formativas de la evaluacin entendida, no slo como medicin sino como ayuda y orientacin de los procesos de enseanza-aprendizaje. La evaluacin concierne tanto a la calidad de la enseanza como a la del aprendizaje. Empleamos las herramientas TIC para orientar a los alumnos acerca de sus aprendizajes y dificultades, y para que el profesor mejore su docencia. Las fuentes de informacin para evaluar con TIC son, entre otras: a. Resultados obtenidos en las pruebas objetivas pretest y postest (opcin mltiple, respuesta breve, rellenar huecos, relacionar, etc.) b. Grado de cumplimiento de las actividades y tareas sugeridas. c. Grado de participacin en las tareas de grupo. d. Grado y calidad de las contribuciones al chat y a las listas de discusin. e. Frecuencia y objeto de contacto con el profesor a travs del correo electrnico. f. Pginas de Internet que el alumno ha visitado. g. Recursos adicionales a los ofrecidos por el profesor, que el alumno ha aportado (webs de inters, artculos, etc.) y elaborado (textos, imgenes...)

10

Exigencias formativas Disponemos ya hoy de una tecnologa con estndares aceptados, que nos permiten a los profesores realizar diferentes procedimientos e instrumentos de evaluacin (pruebas pretest y postest, tareas en grupo, ejercicios de autocomprobacin adaptativos y no adaptativos, tutoras, mecanismos de almacenamiento y edicin, etc.) y obtener informacin suficiente para evaluar con unos parmetros de calidad y fiabilidad verdaderamente aceptables. En el contexto de ayuda y orientacin de la evaluacin, Internet ofrece la posibilidad no slo de optimizar la aplicacin, la correccin y el anlisis de los exmenes, sino ofrecer, durante y al final del curso, una ampla informacin sobre las actividades desarrolladas por los alumnos, que quedan registradas y son los datos de la evaluacin. Los problemas posiblemente vengan de qu hacer, cmo hacerlo, para quin y por qu hacerlo. Pese a todo las TIC en la evaluacin de los aprendizajes discentes son posibilidades que suman en vez de restar.

BIBLIOGRAFA LARA, S. (2001): La evaluacin formativa en la Universidad a travs de Internet. Pamplona, EUNSA. SANTOS, M. A. (1993): La evaluacin: un proceso de dilogo, comprensin y mejora. Mlaga, Ediciones Aljibe.

11