Captulo IV: Evaluacin y anlisis de los elementos del test

199. En la tabla siguiente aparecen las frecuencias de sujetos, ordenados en 5 percentiles segn su puntuacin, que respondieron a un tem de un test de rendimiento en lengua con 4 opciones de respuesta, donde la opcin C es la correcta. La media y varianza en el test de los sujetos fue de 6 y 4 respectivamente, mientras que la media en el test de los sujetos que acertaron el tem fue de 7.

A 20% superior 20% siguientes 20% siguientes 20% siguientes 20% inferior
p

B
17 39 53 61 70 0,18

e
207 223 183 113 106 0,64

D 11 25 32 29 39 0,10

8 11 16 17 43 0,07

Calcular: 1. El ndice de dificultad del tem sin corregir y corrigiendo el azar. 2. El ndice de discriminacin del tem.

200.

Si el test anterior est compuesto por 11 elementos.

1. Cuntos tems se espera que acierte un sujeto que responde a todos los tems de forma aleatoria. 2. LQu puntuacin obtendr una vez descontado el efecto del azar?

201. Las respuestas de 20 examinados a un tem de un test compuesto por 30 elementos dicotmicos se muestran en la siguiente tabla, donde los 1O primeros sujetos son los que peores puntuaciones globales han obtenidos mientras que los 1O ltimos los que mejores.

68
Psicometra : problemas resueltos Sujetos con peores puntuaciones Sujetos 1 2 3 4 5 6 7 8 9 10 Respuestas al tem Puntuacin total 8 12 5 10 7 8 9 4 5 6 Sujetos con mejores puntuaciones Sujetos 11 12 13 14 15 16 17 18 19 20 Respuestas al tem 1 Puntuacin total

11

o o o o o o o o
1 1

27
28 30 27 25 20 30 25 22 23

o
1 1 1

o
1 1 1
1

Calcular: 1. El ndice de dificultad en ambos grupos. 2. El ndice de discrim inacin en ambos grupos.

202. Se quiere investigar si un test de razonamiento matemtico presenta sesgo en uno de sus tems. Para ello se contabilizaron los aciertos y errores en un grupo de los nios y otro de nias en las categoras de baja y alta competencia.
Baja competencia Aciertos Nios Nias Errores Alta competencia Aciertos Nios Nias 12 9 Errores 8 11

4 3

6
7

Analizar si existe sesgo tomando como referencia el grupo de los nios.

203. En la tabla adjunta aparecen las respuestas de 200 sujetos a las tres alternativas de respuesta (A, B, C) de un tem extrado de un test compuesto por 20 elementos, de las cuales slo la B es correcta . Tambin se exponen las medias obtenidas en el test por los sujetos que respondieron a cada alternativa.
A 50% superior 50% inferior Media test 26 35 9 B 60 28 14

e
14 37 12

1. Calcular el ndice de dificultad del tem . 2. Sabiendo que la varianza de las puntuaciones empricas en el test es 9, calcular el ndice de discriminacin del tem.

69
Evaluacin y anlisis de los elementos del test

204. En la tabla adjunta se presentan las puntuaciones de 5 sujetos en un test de 3 tems.

1
A

3 1 1

o
1 1 1 1 0,2

o
1

e
D

o
1 1 0,4

o
1 1 0,6

E ndice de validez

Calcular: 1. Los ndices de discriminacin de cada tem. 2. El coeficiente de validez del test. 3. Si los tems constaran de 5 opciones de respuesta, Lcul sera la puntuacin obtenida por el sujeto A una vez corregido el efecto del azar?

205. En la tabla siguiente aparecen las caractersticas psicomtricas de 1O tems: dificultad, discriminacin, varianza, el porcentaje de respuestas a cada una de las opciones y la correlacin biserial.
1. Comentar la calidad psicomtrica de cada uno de los tems. 2. Basndose en la distribucin de respuestas y en la correlacin biserial entre cada una de las opciones y la puntuacin en el test, sealar las alternativas que no estn funcionando de forma adecuada. Razonar su respuesta. 3. En los tems 2 y 6 indicar qu opcin parece ser la ms correcta en funcin de las respuestas de los sujetos.

tems 1 2 3 4 5 6 7 8 9 10

Dificultad

Discriminacin 0,212 - 0,098 0,326 0,643 0,744 - 0,015 0,713 0,834 0,264 0,345

%1 0,2 0,5 0,1 0,05 0,45 0,5 0,2

rbis 1 0,212 0,20 0,186 - 0,055 0,744 - 0,133 - 0,186

-

%2 0,4 0,3 0,2 0,55 0,1 0,25 0,5 0,4 0,1 0,2

rbis2 - 0,303 - 0,098 0,146 0,643 0,009 - 0,015 - 0,504 0,834 0,009 0,345

%3 0,4 0,2 0,35 0,25 0,35 0,2 0,3 0,45 0,35 0,4

rbis3 0,13 0,013 0,326 - 0,261 - 0,509 0,345 0,713 - 0,43 - 0,008 0,076

Correcta 1 2 3 2 1 2 3 2 1 2

o o
0,025 0,325 O, 175

o o
0,1 0,175

o
0,45 0,2

0,264 - 0,119

70
Psicometra: problemas resueltos

:1

206. La siguiente matriz de datos representa las respuestas dadas por 8 sujetos a un test de eleccin mltiple de seis elementos, cada uno de ellos con 4 alternativas de respuesta. Por simplicidad, en la matriz se ha indicado nicamente si el sujeto ha elegido la opcin correcta (con un 1) o una opcin incorrecta (con un 0) .
Sujetos/elementos
1 2 3 4 5 6 7 8

1
1 1 1 1 1 1 1 1

5 1 1

1 1 1

o
1 1

o
1

o
1

o
1 1

o o
1

o
1

o
1

o o

o o

o o o o o
1

o o o o o o o o

Calcular: 1. El ndice de dificultad del elemento n.o 2 2. El ndice de homogeneidad del elemento n.o 4. 3. Determinar el nmero de discriminaciones que puede hacer el tem n.o 5.

207. En la siguiente tabla se presentan los ndices de dificultad y discriminacin de los siete tems dicotmicos de un test de comprensin lectora.
1. Indicar qu dos tems habra que eliminar debido a que no contribuyen a la medida de la comprensin lectora . Razonar la respuesta. 2. Calcular el ndice de fiabilidad del tem que mejor contribuye a la medida de la comprensin lectora . Razonar la respuesta .
tem
IT01 IT02 IT03 IT04 IT05 IT06 IT07

p
0,71 0,97 0,80 0,47 0,34 0,73 0,53

rbp

0,35 0,03 - 0,04 0,50 0,45 0,20 0,44

208. Con el fin de descartar la posibilidad de sesgo en contra de las nias en un test de lgebra, se llev a cabo un anlisis del funcionamiento diferencial de los tems. Por ese motivo, se formaron dos grupos de nivel de aptitud a partir de las puntuaciones en el test. En la siguiente tabla se muestra el nmero de respuestas correctas (C) e incorrectas (1) de los nios y de las nias en funcin del nivel del nivel de apti-

71
Evaluacin y anlisis de los elementos del test

tud en el primer tem del test. Analizar si existe FDI tomando como grupo de referencia el grupo de los nios.
NIOS
X

NIAS
1

e
16
99

e
12 60

0-20 21-40

64 66

58 125

209. Un test de 150 elementos es contestado por 300 sujetos. El elemento 35 es acertado por 120 de los sujetos. cul es su ndice de dificultad?
21 O. Un elemento de un test es contestado por 400 sujetos. Lo contestan correctamente 190; de ellos, 100 pertenecen al 27% de los que mejor puntuacin obtienen en el test y 70 al 27% de los que dan un rendimiento ms bajo en el test. Calcular:
1. El ndice de dificultad del elemento. 2. El ndice discriminativo. 3. El nmero mximo de discriminaciones que el elemento realiza en esta muestra.

211. En un test cada uno de sus 300 elementos tiene 4 alternativas de las cuales slo una es correcta.
1. Qu puntuacin le correspondera a un sujeto que ha contestado 251 elementos del test y de stos 200 los ha acertado? 2. Qu puntuacin le correspondera si hubiera contestado a todos los elementos y hubiera acertado 2197 3. Si hubiera contestado todos los elementos al azar, cuntos elementos se espera que hubiera acertado? Qu puntuacin le correspondera? 4. cul es la probabilidad de que acierte todos los elementos si contesta al azar? cul la de que los falle todos?

212. Aplicamos un test de inteligencia a un grupo de 300 sujetos. La respuesta se exige en el formato verdadero-falso. El elemento n. 0 16 del test es contestado por todos los sujetos, pero slo 180 lo hacen de forma correcta. La X en el test de los sujetos que responden correctamente el tem 16 es de 70 puntos. La media obtenida por el grupo en el test es de 65 puntos y la varianza de 256. La varianza del elemento n.o 16 es de 0,24. cul es el ndice de discriminacin o de homogeneidad de dicho elemento? 213. Aplicamos un test de aptitud numrica a un grupo de 600 sujetos. De los 162 sujetos que obtienen una mejor puntuacin en el test, 150 contestan correctamente al elemento 1O. Del 27% de sujetos con peor nota en el test 60 sujetos tambin contestan correctamente. Calcular el ndice de discriminacin del tem 1O.

72
Psicometra: problemas resueltos

1
Elementos
1 2 1 1 1 3

214. Un grupo de 6 sujetos obtuvo en un test de 4 elementos las puntuaciones que aparecen en la tabla adjunta. (En la tabla, el 1 significa que el sujeto acert el elemento y el O que lo fall).
Sujetos A
1 1 1

4
1

o
1

e
D

o
1

o o
1

E F

o o
1

o o
1

o
1

o
1

Calcular:

1. El ndice de dificultad y el nmero de discriminaciones de cada elemento .

2. El ndice de homogeneidad del elemento n.o 3. La desviacin tpica de este elemento fue 0,50. Razone la respuesta y comente el resultado.

215. Se ha construido un test que se corrige clasificando a los sujetos en dos categoras: aptos-no aptos. Todos los elementos del test son dicotmicos . Se aplica el test a un grupo normativo y deseamos calcular el ndice de homogeneidad de uno de sus elementos. Los sujetos han contestado segn muestra la tabla adjunta.
TEST
Aptos Acierta Falla
120 20

No aptos
30 150

216. Hemos construido un test de rendimiento acadmico. El test sigue una distribucin normal. Sus elementos aunque normales y continuos estn dicotomizados. Deseamos calcular el ndice de homogeneidad del elemento 4. La media del test es de 50 puntos y la desviacin tpica de 15. La media en el test de los sujetos que han acertado el elemento 4 es de 55. La varianza del elemento es 0,81 y la proporcin PIY es igual a 1,7549. cul es el ndice de homogeneidad de dicho elemento? 217. Se construye un test de inteligencia . Se aplica a un grupo normativo pertinente. El test se distribuye segn la curva normal. Los elementos son dicotmicos. Se desea conocer el ndice de homogeneidad del elemento 25 del test. La media del test en nuestra muestra es de 60 y la desviacin tpica de 12. La media en el test de los sujetos que han contestado correctamente a nuestro tem es de 70. El elemento es acertado por el 45 % de los sujetos que responden al test. La varianza del elemento es de 0,45 . cul es el ndice de homogeneidad del elemento?

73
Evaluacin y anlisis de los elementos del test

218. Se desea averiguar el ndice de validez de un elemento dicotmico de un test. El criterio utilizado es continuo y tiene una distribucin normal con una media de 100 puntos y una varianza de 196. La media en el criterio de los sujetos que han contestado adecuadamente al elemento es de 108. A dicho elemento han contestado bien 300 de los 500 sujetos a los que se les haba aplicado el test. LCul es el ndice de validez del elemento? 219. Se ha elaborado un test para la seleccin de personal en cierta empresa . Se ha correlacionado con un criterio de buen rendimiento en el trabajo . Las puntuaciones de cierto grupo de sujetos en este criterio tienen una desviacin tpica de 9 y una media de 20. Los sujetos que obtienen cualquier puntuacin por encima de la media se supone que tienen un buen rendimiento en el trabajo, mientras que aquellos cuya puntuacin est por debajo de la media se consideran que tienen un rendimiento inadecuado. A estos mismos sujetos se les aplic el test anteriormente mencionado. La relacin entre sus calificaciones en el rendimiento y el haber acertado o fallado el elemento 12 del test se muestran en la tabla adjunta.
Buen rendimiento Acierto en el elemento Fallo en el elemento 300 100 Mal rendimiento 60 240

LCul es el ndice de validez de dicho elemento?

220. Las respuestas de los sujetos al elemento n.o 15 de un test, se distribuyeron segn la tabla siguiente:
Subgrupo A 27% superior 27% inferior 12 12 Alternativas del tem B 10 20

e o o

D 120 40

E
12 82

La respuesta correcta es la O y tanto las puntuaciones en el test como en el elemento se distribuyen normalmente. Averiguar el ndice de discriminacin del elemento 15.

221. Las respuestas de los sujetos de una muestra a un elemento de un test, se distribuyeron segn la tabla siguiente:
Subgrupo A 27% superior 27% inferior 10 10 Alternativas del tem B

e
120 30

D 10 100

o o

La respuesta correcta es la C y tanto las puntuaciones en el test como en el elemento se distribuyen normalmente. Averiguar el ndice de discriminacin del elemento del test.

74
Psicometra : problemas resueltos

1 1

222. A un grupo de vendedores se les aplic un test de 186 elementos. Los 50 primeros slo tenan dos alternativas cada uno, es decir, eran de verdadero o falso; los 100 elementos siguientes tenan 5 alternativas de las cuales slo una era correcta y los 36 elementos restantes tenan 4 alternativas, con slo una correcta .
1. Un sujeto contesta todos los elementos; de los 50 primeros acierta 40; de los 100 siguientes falla 20 y de los restantes acierta tantos como falla. Qu puntuacin corregida obtuvo? (Puntuacin corregida es aquella de la que se han eliminado los efectos del azar). 2. Decir si es verdadera o falsa la siguiente frase: la puntuacin del sujeto del punto 1 est por encima de la media del grupo que realiz el test. Razonar la respuesta.

3. Si un sujeto no sabe nada y contesta al azar, cuntas preguntas es de esperar que acierte? Qu puntuacin corregida se espera que obtenga? Razone las respuestas.

223. A un grupo de 300 sujetos se les ha aplicado un test de 50 elementos . Cada elemento tiene 5 alternativas de las que slo una es correcta. Las respuestas dadas al elemento 40 del test son las que se dan en la tabla adjunta. (La respuesta C es la correcta) .
1. Analizar las respuestas dadas a dicho elemento. 2. Calcular el ndice de dificultad sin corregir y corregido . 3. Calcular el nmero de discriminaciones del elemento.
Subgrupo A 50% superior 50% inferior 15 15 B 10 70 Alternativas del tem

e
90 30

D 30 10

Omisiones 5 10

o
15

224. Realizado el anlisis de elementos del test de razonamiento se encontr que las respuestas de los universitarios a un elemento del test se distribuan como se indica en la tabla siguiente:
Subgrupo 27% superior 27% inferior A B

e
37 14

D 3 13

E
2 12

o o

8
11

La respuesta correcta es C y tanto las puntuaciones en el test como en el elemento se distribuyen normalmente. Averiguar e interpretar:
1. El ndice de discriminacin del elemento.

2. Qu puede decirse acerca de las respuestas incorrectas al elemento?

75
Evaluacin y anlisis de los elementos del test

225. Un grupo de 6 sujetos obtuvo las siguientes puntuaciones en un test: 1, (4), 4, (5), 6, (1 O). nicamente los tres que aparecen entre parntesis acertaron la ltima pregunta del test, a pesar de que todos intentaron resolverla .
Calcular: 1. El ndice de dificultad de la ltima pregunta y comentar el resultado . 2. El nmero de discriminaciones que hace la ltima pregunta.

226. Un grupo de 500 universitarios realiz un test que constaba de 260 preguntas. Las ochenta primeras eran de verdadero o falso, es decir, cada pregunta tena dos alternativas, y slo una de ellas era correcta; las 120 preguntas siguientes tenan cada una 5 alternativas (5 posibles respuestas) y slo una de ellas era correcta. Las 60 ltimas eran de tres alternativas con slo una correcta.
1. Un sujeto de los que realizaron el test contest todas las preguntas: de las 80 primeras fall 1O; de las 120 siguientes acert 100; y de las 60 ltimas acert tantas como fall. LQu puntuacin corregida obtuvo? 2. Diga si es verdadera o falsa la siguiente frase: La puntuacin del sujeto del punto 1 est por encima de la media del grupo que realiz el test. Razone la respuesta. 3. Si un sujeto no sabe nada y contesta al azar, Lcuntas preguntas es de esperar que acierte? LQu puntuacin corregida se espera que obtendra? Razone las respuestas .

227. A un grupo de 500 sujetos se les ha aplicado un test de 100 elementos. Cada elemento tiene 5 alternativas de las cuales slo una es cor recta . Las respuestas dadas al elemento 80 del test son las que figuran a continuacin . (La respuesta C es la correcta.)
1. Analizar las alternativas de dicho elemento . 2. Calcular el ndice de discriminacin. 3 . Calcular el nmero de discriminaciones del elemento.
Subgrupo 27% superior 27% inferior Alternativas del tem A 5 25
B

e
80 20

E 20 20

Omisiones

10 60

20 5

o
5

228. Las respuestas de los universitarios a un elemento del test se distribu an como se indica en la tabla siguiente:
Subgrupo 50% superior 50% inferior

1
14 22

2 3 13

3 3
9

5 80 54

o
2

76
Psicometra: problemas resueltos

!1

La respuesta correcta es 5 y tanto las puntuaciones en el test como en el elemento se distribuyen normalmente. Averiguar: 1. La dificultad de ese elemento. 2. LQu puede decirse acerca de las respuestas incorrectas al elemento?

229. En un test, cada una de sus 200 cuestiones tiene 4 alternativas de las cuales slo una es correcta.
1. LQu puntuacin le correspondera a un sujeto que habiendo contestado a todas las preguntas acertase 80? 2. LQu puntuacin obtendra si, habiendo contestado 80, hubiese dejado sin contestar 30? 3. Si contestase al azar, Lcuntas acertara? LQu puntuacin obtendra? 4. LCul sera la probabilidad de acertar todos los tems contestando al azar? y la de fallarlos todos?

230. Un grupo de 1O sujetos obtuvo en un test de 6 elementos la matriz de puntuaciones adjunta. (El 1 significa correcto y el O incorrecto).
Elementos

Sujetos
A

1 1 1 1 1 1 1 1 1 1 1

3
1

e
D

o o
1

o
1

E
F
G
H
1

o
1 1 1 1 1

o o
1 1 1 1

o o o o
1 1 1 1

o o
1 1 1 1 1

o
1 1 1

o o
1 1

o o

o o o

o o

1. Calcule los ndices de dificultad de todos los elementos y diga cul es el ms difcil. 2. LCul es el elemento con mayor poder discriminativo y cuntas discriminaciones hace?

231. A un grupo de vendedores se les aplic un test de 260 elementos. Los 80 primeros slo tenan dos alternativas cada elemento, es decir, eran de verdadero o falso. Los 120 elementos siguientes tenan 5 alternativas de las que slo una era correcta y los 60 elementos restantes tenan 4 alternativas con slo una correcta.

77
Evaluacin y anlisis de Jos elementos del test

1. Un sujeto contesta todos los elementos; de los 80 primeros acierta 70; de los 120 siguientes falla 20 y de los restantes acierta tantos como falla. LQu puntuacin corregida obtuvo? 2. Si un sujeto no sabe nada y contesta al azar, Lcuntas preguntas es de esperar que acierte? LQu puntuacin corregida se espera que obtenga? Razone las respuestas.

232. Al realizar el anlisis de los elementos de un test se encontr que las respuestas dadas por un grupo de 400 sujetos a uno de los elementos se distribuy segn la tabla adjunta. Suponiendo que tanto el test como el elemento son variables normales aunque dicotomizadas, averiguar:
Subgrupo 50% superior 50% inferior A 10 40 B 40 60 C* 120 70 D 30 30

1. ndice de dificultad del elemento. 2. Comentario sobre las respuestas incorrectas.

233. Sometemos cinco sujetos (A, B, C, D y E) a un test de 4 tems para medir una variable continua y normal. Las calificaciones en cada uno de los tems as como en el test, aparecen en el siguiente cuadro junto con las notas obtenidas por los sujetos en el criterio del test empleado.
tems test Test 21 25 Criterio 4 6 7

h
A B 5 6 6 7 5

i 6 7 7

j
4 5 6 6 4

k
6 7

e
D

8 8
5

27
29 20

8
6

8
5

Calcular, con tres cifras decimales:

1. ndice de homogeneidad del elemento h.

2. ndice de validez del elemento h. 3. El coeficiente de validez del test.
4. El error tpico de estimacin del criterio a partir del test.

5. Es posible que los estadsticos calculados en las cuatro cuestiones anteriores, sobre un test con 4 elementos y con 5 sujetos, le permitan hacer algunas crticas sobre la sensatez y utilidad -en un caso real- de su clculo. Hgalas .

78
Psicometra: problemas resueltos

1 1

234. Se le aplica una escala tipo Likert a un grupo de 1000 sujetos. La varianza de la escala es de 49 y el tem 25 tiene una varianza de 2. La correlacin rjx del tem con el test es de 0,40 . LCul ser el ndice de homogeneidad de dicho tem? 235. Se quiere estudiar cierta actitud de los ejecutivos espaoles. Para ello se ha elaborado una escala tipo Likert. Se ha aplicado a una muestra de 300 sujetos para hacer un estudio previo del poder discriminativo de los tems. La puntuacin media del 25% con calificacin ms alta en el tem 8 ha obtenido una puntuacin media de 6,25 y una varianza de 2, 12. El 25% con menor calificacin en este tem ha obtenido una media en el mismo de 2 y una varianza de 2,7. LEs la diferencia entre ambas medias estadsticamente significativa? NC 95%. 236. Se desea saber si un tem de una escala de Likert podra discriminar adecuadamente. Se aplica el tem a un grupo de 400 personas. Este grupo se dicotomiza en dos por la mediana. Las puntuaciones del grupo pueden verse en la tabla adjunta:
Grupo superior Puntuacin sobre la mediana Puntuacin bajo la mediana Total 176 24 200 Grupo inferior 80 120 200 Total 256 144 400

LQu podemos decir sobre la capacidad discriminativa del tem? NC 95%.

237. Para medir una determinada actitud se quiere construir una escala siguiendo la tcnica de Likert. Se escoge una muestra de 60 sujetos a los que se les aplica un conjunto inicial de 30 elementos. Cada uno de estos elementos tiene 5 categoras de respuesta que van del 1 al 5. Ordenados los sujetos segn la puntuacin total obtenida, seleccionamos el 25% que obtuvo puntuaciones ms altas y el 25% de los que obtuvieron puntuaciones ms bajas. Las puntuaciones obtenidas por ambos grupos en el elemento n.o 15 de la prueba fueron las siguientes:
Grupo alto 25% superior Grupo bajo 25% inferior

1. Calcular el poder discriminante del tem mediante la prueba estadstica t de Student utilizando un nivel de confianza del 95%. 2. Utilizando el test de la mediana y aplicando la prueba de Chi cuadrado, Lpodemos decir que el tem es discriminativo al NC del 99%7
Nota. No tener en cuenta el pequeo tamao de la muestra.

238. Para la elaboracin de una escala tipo Likert, se somete a una muestra de sujetos (N = 60) a un conjunto inicial de 20 tems. Cada uno de los tems tiene cinco categoras de respuesta cuyas puntuaciones van del 1 al 5. Ordenados los sujetos segn la puntuacin total obtenida, seleccionamos el 25% que obtuvo puntuaciones

79
Evaluacin y anlisis de los elementos del test

ms altas y el 25% de los que obtuvieron puntuaciones ms bajas. Las puntuaciones obtenidas por ambos grupos en el elemento nmero 20 de la prueba fueron las siguientes:
Grupo alto 25% superior Grupo bajo 25% inferior

Utilizando el test de la mediana y aplicando la prueba de significacin Chi cuadrado, Lpodemos decir que el tem nmero 20 es discriminativo? Utilizar el nivel de confianza del 95%. Nota. No tener en cuenta el pequeo tamao de la muestra, ya que se trata de un ejemplo.