Evaluacin educativa: definicin, tipos, instrumentos y tcnicas

Mdulo 4 Elaboracin de instrumentos de evaluacin docente

1. DIFERENCIAS ENTRE TCNICA E INSTRUMENTO DE EVALUACIN 2. CARACTERSTICAS DE LOS INSTRUMENTOS DE EVALUACIN

2.1. Fiabilidad 2.2. Validez 2.3. Dificultad 2.4. Discriminacin

3. PRINCIPALES TCNICAS E INSTRUMENTOS DE EVALUACIN

3.1. Pruebas objetivas 3.2. Pruebas libres 3.3. Pruebas diagnstico

4. CRITERIOS DE APLICACIN DE LAS TCNICAS E INSTRUMENTOS DE EVALUACIN

1.

DIFERENCIAS ENTRE TCNICA E INSTRUMENTO DE EVALUACIN

Un ejemplo de esta distincin es la siguiente:

TCNICA

Hasta ahora no hemos hecho distincin alguna entre test, tcnicas, instrumentos, etc., no obstante, ya que existen diferencias, es importante aclarar la distincin entre tcnica e instrumento de evaluacin. Tcnica Es un conjunto ms amplio que un instrumento. As, las tcnicas constituyen metodologas de actuacin que abarcan procedimientos especficos para obtener la informacin necesaria que nos ayude a determinar si los alumnos al alcanzado los objetivos educativos, incluyendo, por tanto, distintos instrumentos. Instrumentos Son herramientas o materiales especficos que se aplican para obtener informacin estructurada y objetiva a partir de la cual tomar decisiones educativas.

OBSERVACIN

INSTRUMENTOS PARA DESARROLLAR LA OBSERVACIN

LISTAS DE COMPROBACIN, ESCALAS DE OBSERVACIN, ETC.

En los siguientes apartados se expondrn de forma clara las distintas tcnicas e instrumentos de evaluacin evaluativa ms empleados.

Mdulo 4

Elaboracin de instrumentos de evaluacin docente

2.

CARACTERSTICAS DE LOS INSTRUMENTOS DE EVALUACIN

Como vimos en mdulos anteriores, la evaluacin consiste en un proceso de recogida de informacin a travs de la cual se toman decisiones en funcin de unos criterios determinados. Por tanto, una de las medidas que se deben tomar antes de comenzar con el proceso evaluativo es cmo vamos a llevarlo a cabo. Es en este punto cuando entran en juego las decisiones que nos permiten seleccionar aquellas tcnicas e instrumentos de evaluacin ms apropiados. No obstante, para otorgar un cierto orden y estructura a la temtica que nos ocupa vamos a presentar de forma breve en qu consiste un instrumento de evaluacin. En este sentido, Osterlind (1998) lo define como: Un instrumento de medida que propone al alumno un estmulo y una forma prescriptiva de emitir una respuesta, a partir de la cual se puede deducir la consecucin de un objetivo de aprendizaje. Dicho de otro modo, podemos entender como instrumentos de evaluacin didctica, todos aquellos procedimientos que se ponen en marcha como medio de recogida fiable de informacin y que nos permiten comprobar si los alumnos han adquirido las competencias y contenidos del aprendizaje que estaban previstos.
4 Mdulo 4

Otro de los aspectos que debemos tener en cuenta antes de especificar los distintos tipos de pruebas de evaluacin existentes son las caractersticas que stas deben cumplir para llevar a cabo su funcin, esto es, para que sean considerados unos buenos instrumentos de evaluacin. As, las caractersticas que toda prueba debe cumplir son las que veremos a continuacin.

2.1. FIABILIDAD
Se puede definir la fiabilidad de una determinada prueba como el grado de consistencia de una determinada medida. De este modo, hay varios procedimientos que permiten establecer la fiabilidad de un instrumento de evaluacin:
Test-retest:

este procedimiento consiste en la repeticin de la prueba a la misma muestra en dos momentos temporales diferentes. De este modo, la fiabilidad del test se establece a travs de la correlacin de los resultados en ambas pruebas. Para ello se emplea el coeficiente de correlacin de Pearson, el cual, muestra el grado de estabilidad de los resultados a travs del tiempo. Formas paralelas: este procedimiento consiste en establecer el coeficiente de fiabilidad de una prueba a travs de la administracin de dos formas equivalentes, aunque no iguales, del mismo test. Para ello tambin se emplea el coeficiente de correlacin de Pearson.

Elaboracin de instrumentos de evaluacin docente

 El procedimiento de las dos mitades: cuando se construye

Validez

el instrumento, ste se divide en dos mitades que se administran en una solo aplicacin, para posteriormente comparar los resultados mediante la frmula Spearman-Brown. Coeficiente alfa: nos muestra la consistencia interna de un test. Se establece a partir de la frmula de Cronbach. Por su parte, cuando estudiamos el tema de la fiabilidad no podemos dejar pasar aquellos factores que afectan a la misma. As, estos factores son: longitud del instrumento: cuantas ms preguntas o tems presente una prueba para evaluar la misma variable ms fiable ser la misma. La variabilidad: a ms variabilidad de calificaciones ms fiabilidad.
La

predictiva: es aquella que muestra el grado en que un test predice un criterio, esto es, acontecimiento o conducta futura. Para ello se emplean las tcnicas de regresin simple y mltiple (Muiz, 2003).

2.3. DIFICULTAD
Se entiende por ndice de dificultad de un tem la proporcin de sujetos que lo acierta del total que intentan resolverlo.

2.4. DISCRIMINACIN
Se dice que un tem discrimina si distingue entre aquellos sujetos que puntan alto en la prueba y los que puntan bajo. En consecuencia, el ndice de discriminacin se define como la correlacin entre las puntuaciones de los sujetos en el tem y sus puntuaciones en la prueba (Muiz, 2003). As, nos indica en qu medida un tem discrimina entre los sujetos de alto y bajo rendimiento en el test.

2.2. VALIDEZ
Hace referencia a la capacidad de la prueba para medir aquello para lo que fue construida. Se distinguen distintos tipos de validez: de constructo, de contenido y predictiva.
Validez de constructo: trata de garantizar la existencia de

un constructo que subyaga y d sentido y significado a las puntuaciones del instrumento. Para determinarla se emplean el anlisis factorial y la matriz multirasgo-multimtodo (Muiz, 2003). Validez de contenido: es aquella que indica que un test presenta tems o preguntas representativas del constructo que se pretende medir.

Mdulo 4

Elaboracin de instrumentos de evaluacin docente

3.

PRINCIPALES TCNICAS E INSTRUMENTOS DE EVALUACIN

Los instrumentos de evaluacin ms empleados en la prctica educativa se muestran en la Tabla siguiente para ser descritos ms ampliamente posteriormente PRUEBAS OBJETIVAS Verdadero/falso Eleccin mltiple V/f mltiple Respuestas combinadas Emparejamiento Clasificacin Respuesta doble Respuesta limitada

PRUEBAS LIBRES Respuesta abierta Pruebas mixtas Examen oral Portafolios Prueba prctica real Proyecto

PRUEBAS DIAGNSTICO Observacin Encuesta

Tabla. Clasificacin de los tipos de instrumento. (Adaptacin de la clasificacin de Tefilo Rodrguez, Luis lvarez, Paloma Gonzlez-Castro, Julio A. Gonzlez-Pienda, Jos Muiz, Jos C. Nez y Enrique Soler, 2006).

Mdulo 4

Elaboracin de instrumentos de evaluacin docente

3.1. PRUEBAS OBJETIVAS

Este tipo de instrumentos son aquellos en los que el alumno, previa elaboracin mental y/o elaboracin de algn tipo de actividad, elige una respuesta entre una serie de alternativas dadas, entre las que solamente existe una correcta, por lo que no deja dudas a las interpretaciones subjetivas. Debemos tener en cuenta que el docente, a la hora de construir este tipo de instrumentos de evaluacin, debe conseguir que los tems del instrumento evalen los objetivos acadmicos preestablecidos de forma precisa. Veamos a continuacin ejemplos de este tipo de instrumentos.

3. Una vez hayamos seleccionado las fuentes debemos extraer las ideas clave de las mismas, esto es, las proposiciones, las cuales sern la base de los tems. 4. Formular las preguntas. Para ello debemos formular expresiones paralelas y opuestas de cada proposicin. Un ejemplo de este tipo de tems sera:
El autor de Poeta en Nueva York es Garca Mrquez (V/F)

XX Eleccin mltiple
Son los tems en los que el alumno debe seleccionar la respuesta correcta a un problema que, normalmente termina en una frase incompleta o una pregunta, entre un conjunto de respuestas dadas, de las cuales slo una es correcta, siendo las dems distractores o respuestas plausibles incorrectas. Otra de las versiones de este tipo de tems es la que consiste en eliminar la opcin incorrecta. En esta segunda versin, todas las respuestas dadas al problema o pregunta planteada son correctas a excepcin de una, que es la que el alumno debe seleccionar. El proceso de construccin de este tipo de pruebas es anlogo al de las pruebas V/F: 1. Objetivo 2. Proposiciones 3. Formulacin de tems: para lo cual se redacta una pregunta incompleta, se proporciona una respuesta acertada a la respuesta y otras alternativas distractoras/falsas. Como ejemplo de este tipo de pruebas mencionaremos las preguntas de las evaluaciones de cada mdulo.
Elaboracin de instrumentos de evaluacin docente 11

XX Verdadero/falso
Este tipo de pruebas son aquellas en las que el evaluado debe determinar si una proposicin especfica es verdadera o falsa. El proceso de construccin de las pruebas V/F incluye cuatro pasos: 1. Tener presente el objetivo de aprendizaje que se quiere evaluar mediante la prueba V/F, ya que es lo que guiar el proceso de construccin. 2. Seleccionar las fuentes de donde se desprendern las preguntas. Normalmente suele ser la materia explicada en clase, apuntes, libros de texto y materiales complementarios. En este punto hay que ser cuidadosos pues no debemos centrarnos en repetir la informacin de dichos materiales (estaramos evaluando nicamente las capacidades memorsticas) sino en redactar preguntas que evalen los objetivos del aprendizaje.
10 Mdulo 4

XX V/F mltiple
Se trata de una propuesta mixta de las dos versiones anteriores. As el alumno debe determinar si cada una de las alternativas de respuesta a un determinado problema es verdadera o falsa. Por tanto, ya no se debe seleccionar la respuesta correcta de entre un conjunto sino clasificar cada una de las alternativas de respuesta como Verdadera o Falsa. A modo de ejemplo:
Dentro de las obras escritas por Federico Garca Lorca se encuentran: a) La Casa de Bernarda Alba (V/F) b) Bodas de Sangre (V/F) c) El Lazarillo de Tormes (V/F)
Respuestas

Seala la respuesta correcta: a) A y B b) A y C c) B y C

Emparejamiento:

la actividad a desarrollar en este tipo de formato es la de relacionar los elementos de dos listas, una de premisas y otra de respuestas.

Para construir este tipo de tems se debe tener en cuenta: 1. Respetar el principio de homogeneidad, es decir, que las premisas y las respuestas correspondan nicamente a una categora. 2. Brevedad: no usar frases largas. 3. Longitud: Se recomienda establecer 6 7 premisas y 4 5 respuestas y a la inversa. 4. Ordenar las listas por orden alfabtico o numrico para no dar pistas. A modo de ejemplo:
Relacionar emparejando obras y autores: F. Garca Lorca Juan Ramn Jimnez Miguel Delibes Platero y Yo El Camino La Zapatera Prodigiosa El Lazarillo de Tormes

combinadas: en este caso, al igual que en el anterior, se sintetizan los formatos de Verdadero /Falso y Eleccin Mltiple. De este modo la pregunta comienza con un formato de V/F para luego, en formato Eleccin Mltiple, pedir la respuesta correcta. Por ejemplo:
Dentro de las obras escritas por Federico Garca Lorca se encuentran: a) La Casa de Bernarda Alba b) Bodas de Sangre c) El Lazarillo de Tormes

12

Mdulo 4

Elaboracin de instrumentos de evaluacin docente

13

XX Clasificacin
Este formato de pregunta es similar al anterior, as, consiste en una lista de premisas que hay que relacionar con una lista de respuestas, con la diferencia de que en este caso la misma premisa se empareja con ms de una respuesta. Ejemplo:
Relacionar emparejando obras y autores: a) F. Garca Lorca b) Miguel Delibes c) Juan Ramn Jimnez 1. El Camino 2. La Casa de Bernarda Alba (a) 3. El Prncipe Destronado 4. Bodas de Sangre (a) 5. Poeta en Nueva York (a)

Ahora debes escoger el ao de publicacin de las obras de las afirmaciones sealadas como correctas: 1. 1917 2. 1996 3. 1936 4. 1802 5. 2001

XX Respuesta limitada
En este tipo de preguntas se pide una respuesta abierta pero corta, esto es, la pregunta se contesta con una o dos palabras, a lo sumo una oracin corta. La construccin de este tipo de pruebas requiere: 1. Deben construirse preguntas de respuesta nica. 2. Es recomendable tener clara la respuesta antes de escribir la pregunta. De este modo sta ser nuestra gua. 3. Las formulaciones interrogativas facilitan este tipo de formato, por lo que son preferibles a las oraciones incompletas. 4. Evitar las pistas en la construccin de la oracin: determinadas palabras, el tamao de los espacios en blanco, etc. 5. Para evitar confusiones debemos ser concisos en la redaccin de los tems.

XX Respuesta doble
Este tipo de formato sirve para comprobar la comprensin del alumno. Para ello, combina el V/F y el Emparejamiento. Un ejemplo sera:
De las siguientes afirmaciones, seala cul es verdadera y cul falsa: a) F. Garca Lorca escribi La Casa de Bernarda Alba (V/F) b) Miguel Delibes escribi Romancero Gitano (V/F) c) Juan Ramn Jimnez escribi Platero y Yo (V/F) d) F. Garca Lorca escribi Romancero Gitano (V/F)

14

Mdulo 4

Elaboracin de instrumentos de evaluacin docente

15

3.2. PRUEBAS LIBRES

Este tipo de formato permite al alumno dar una respuesta libre, esto, es l el que debe organizar sus conocimientos y tener la capacidad de plasmarlos de forma adecuada y clara. A continuacin mostramos algunos de los tipos de pruebas.

Realizar preguntas que exijan una respuesta breve, ya que

XX Respuesta abierta
Son los tradicionales exmenes de desarrollo, en los cuales los alumnos redactan sus respuestas. Uno de los problemas principales de este tipo de instrumento es que la puntuacin depende de la subjetividad del que corrige, de lo que entienda por un argumento que debe ser considerado correcto, que entienda lo que el alumno le pretende comunicar, etc. En el proceso de construccin de este tipo de pruebas se debe tener presente:
Los

esto nos permitir realizar un mayor nmero de preguntas especficas, lo que aumenta la fiabilidad. Es recomendable no agregar preguntas opcionales ya que de este modo, al elegir los alumnos preguntas diferentes, la base de comparacin se debilita y por consiguiente la fiabilidad.

XX Pruebas mixtas
Digamos que este tipo de pruebas combinan los beneficios de las objetivas y de las abiertas. As, consistiran en una primera parte en la que el alumno responde de forma libre a la pregunta (nos permite conocer sus procesos de razonamiento y estructuracin) y una segunda en la que se le vuelve a preguntar sobre lo que desarroll esta vez de forma objetiva, por ejemplo a travs de un tem de respuesta mltiple.

objetivos del aprendizaje. Esto es, las preguntas que se redacten debe satisfacer los objetivos del aprendizaje anteriormente prefijados. Las instrucciones que se presentan a los alumnos deben ser claras y precisas evitando cualquier tipo de malentendido, por ello, debemos ser especficos al determinar qu es lo que queremos preguntar, el tiempo que tienen para presentar su examen, etc. Normas: asegurar la fiabilidad de la prueba, a travs del desarrollo de preguntas o tareas definidas y del cuidado en la correccin de las mismas para evitar, en lo que se pueda, la subjetividad.

XX Examen oral
Se trata de un tipo de prueba consistente en un dilogo entre docente y alumno en el que el primero formula varias preguntas que el alumno debe responder. Los problemas que plantea, a parte de la consabida subjetividad en la evaluacin de la respuesta, es que no existe una unidad, esto es, no se les suelen realizar las mismas preguntas a todos los alumnos.

16

Mdulo 4

Elaboracin de instrumentos de evaluacin docente

17

Para intentar que el proceso sea el ms adecuado se recomienda: 1. Que los trminos utilizados en la formacin de la pregunta sean precisos. As, el alumno sabr si se le pide un contenido especfico, una relacin, una comparacin, etc. 2. Que se proporcione un tiempo de espera prudencial para que el alumno responda. 3. Seguir preguntando aunque ste falle. 4. Tener planificadas las respuestas y registrar las mismas en un formato adecuado (hoja de registro).

3.3. PRUEBAS DIAGNSTICO

Son tiles para aumentar el conocimiento acerca de los alumnos.

XX Observacin
Esta metodologa es muy til para aumentar el conocimiento acerca de la conducta de nuestros alumnos, sentimientos, intenciones, actitudes o aptitudes. As, Garca (1999, p.67 define la observacin como mirar, or, intentando prestar atencin selectiva hacia determinados aspectos importantes y relevantes de una situacin, o de la conducta de un sujeto o grupo. Por otra parte, la observacin puede ser espontnea o estructurada. La primera, hace referencia a un tipo de observacin incidental que se desarrolla en el aula y que es til para la evaluacin formativa, aunque presenta el problema denominado visin tnel y es que nos fijamos normalmente en los alumnos que nos llaman ms la atencin, es por esto que si necesitamos ampliar la informacin acerca de los alumnos debemos emplear la observacin planificada o estructurada. En cuanto a la sta, es un tipo de observacin que persigue obtener informacin ms precisa, objetiva y con mayor valor educativo. Para desarrollar la evaluacin estructurada es necesario seguir una serie de normas, como son: la subjetividad a travs de un acuerdo inter-jueces, esto es, el acuerdo entre diferentes observadores. Procurar ser imparciales, para no detenernos en los detalles familiares, que nos llaman la atencin habitualmente. Evitar la reactividad (modificacin de la conducta natural del sujeto observado) a travs de la familiarizacin previa con los alumnos.
Evitar
Elaboracin de instrumentos de evaluacin docente 19

XX Prueba prctica real

Es un tipo de prueba costoso ya que requiere una gran cantidad de tiempo. No obstante, resulta til al evaluar materias relacionadas con la vida profesional debido a que el alumno debe demostrar las destrezas prcticas semejantes a las requeridas en la vida real (ejemplo: alumnos de auxiliar de clnica: tomar la tensin).

XX Proyecto
Tambin conlleva un gran coste. Consiste en realizar una serie de actividades, normalmente de tipo profesional, que tiene como resultado un producto a evaluar (memoria de prcticas, proyecto arquitectnico, etc.).

18

Mdulo 4

 Se debe ser concreto en las conductas objeto de observa-

cin y seguir unos criterios especficos. Utilizar herramientas de codificacin de las conductas: plantillas de observacin, registros anecdticos, listas de corroboraciones, escalas calificativas, escalas de actitud, etc.

No obstante, independientemente del tipo de entrevista que decidamos emplear, sta debe seguir el siguiente proceso:
Preparacin de la entrevista. Realizacin de la misma. Conclusiones obtenidas.

XX Encuesta
Consiste en obtener datos a partir de tcnicas de interrogacin (Davis, 1975; Hunkins, 1972; Cohen y Manion, 1990; Colas y Buenda, 1992). Entre este tipo de tcnicas se encuentran la entrevista y los cuestionarios. La entrevista es un proceso conversacional empleado como medio de recogida de informacin verbal y no verbal en el que participan dos o ms personas. Puede ser estructurada, semi-estructurada o libre. Las estructuradas son aquellas que siguen una gua de interrogacin previa inflexible, tanto en el contenido como en el orden de aplicacin. Son tiles cuando se necesita entrevistar a mltiples alumnos. La entrevista semi-estructurada es aquella que aunque sigue una gua previa, es ms flexible y permite fluctuar a travs de las temticas que se desean conocer. Por ltimo, las entrevistas libres o no estructuradas no presentan una gua a seguir y solamente se centran en una o varias temticas relacionadas, son tiles cuando tenemos pocos alumnos.

Los cuestionarios son instrumentos compuestos por un nmero de tems (preguntas cerradas o abiertas) que nos permiten obtener informacin acerca de la persona que lo cumplimenta. Pueden ser abiertos, cerrados o mixtos. Los cuestionarios abiertos son aquellos construidos con tems de respuesta abierta, un ejemplo puede ser: Qu opinin le suscita el servicio de comedor de su centro? En cuanto a los cuestionarios cerrados, decir, que se trata de instrumentos formados por pruebas objetivas. Entre ellos se encuentran:
Dicotmicos: preguntas cuya respuesta es SI/NO o V/F.

Por ejemplo: Tienes inters por el estudio de la literatura?

20

Mdulo 4

Elaboracin de instrumentos de evaluacin docente

21

 Alternativas mltiples excluyentes: cuestiones con forma-

to de eleccin mltiple de nica respuesta. Por ejemplo: Qu mtodo prefieres para la evaluacin de esta asignatura?
a) Examen final. b) Exmenes parciales. c) Trabajo final.
Alternativas mltiples no excluyentes: cuestiones con for-

Por ltimo, los cuestionarios mixtos son aquellos que junto a una pregunta cerrada aaden una pregunta abierta. Presentan las ventajas de los dos mtodos anteriores. Por ejemplo: Seala tus materias favoritas:
Explica las razones por las que has decidido elegir esas materias: a) Lengua y literatura. b) Matemticas. c) Dibujo. d) Msica. PAUTAS PARA CONSTRUIR UN CUESTIONARIO Para construir un cuestionario es necesario tener en cuenta las siguientes pautas:
Determinar

mato de eleccin mltiple de varias respuestas. Por ejemplo: Seala tus materias favoritas:
a) Lengua y literatura. b) Matemticas. c) Dibujo. d) Msica. e) Fsica y qumica.
Clasificacin:

se pide que el sujeto ordene una serie de alternativas en funcin de su preferencia. Por ejemplo: Cita por orden de preferencia las siguientes materias:
a) Lengua y literatura. b) Matemticas. c) Dibujo. d) Msica. e) Fsica y qumica.

las variables que se pretenden medir, ya que los tems que elaboremos deben ser una muestra representativa de las mismas. Elegir un vocabulario adecuado a la poblacin a la que va dirigido y tener en cuenta que ste siempre debe ser claro y correcto. Presentar el cuestionario con unas instrucciones claras. Comenzar exponiendo tems de carcter general para pasar a los especficos.

22

Mdulo 4

Elaboracin de instrumentos de evaluacin docente

23

4.

CRITERIOS DE APLICACIN DE LAS TCNICAS E INSTRUMENTOS DE EVALUACIN

Una vez presentados los principales instrumentos de evaluacin vamos a mostrar los criterios que nos permiten asegurarnos de que estamos empleando los ms adecuados en cada momento, para ello adaptamos los criterios propuestos por Santiago Castillo Arredondo y Jess Cabrerizo Diago (Evaluacin Educativa y Promocin Escolar, 2007) que se muestran en la siguiente tabla. CRITERIOS DE SELECCIN DE LOS INSTRUMENTOS DE EVALUACIN
Un sujeto: observacin, cuestionarios, entrevista. N reducido: observacin, tcnicas de grupo. Gran N: encuesta, pruebas objetivas, examen convencional.

NMERO DE SUJETOS

RECURSOS ECONMICOS

Pocos recursos: pruebas objetivas. Altos recursos: encuesta.

TIEMPO DISPONIBLE

Poco tiempo: tcnicas objetivas. Mucho tiempo: entrevista, encuesta.

CONTENIDOS A EVALUAR

Conceptuales: pruebas objetivas, encuestas. Procedimentales: observacin. Actitudinales: encuesta, entrevista.

REFERENCIA

Evaluacin normativa: test. Evaluacin criterial: pruebas objetivas, examen convencional.

SOBRE QUIN

Heteroevaluacin: pruebas objetivas, encuesta, observacin. Autoevaluacin: auto-observacin, cuestionarios. Coevaluacin: tcnicas grupales.

24

Mdulo 4

Elaboracin de instrumentos de evaluacin docente

25