TALLER DE CAPACITACIÓN SOBRE

REDACCIÓN DE ÍTEMS

Prof. Luis Ramos

Junio, 2018
Conceptos básicos

 Definir bién el propósito de la prueba

 Desarollar especificationes de la prueba
(contenido y nivel de complejidad)
 Redacción de ítems (primera versión)
 (Revisión y corrección con colegas)
 Correciones a la primera versión – versión final
¿Importancia de la calidad de los Ítems?
El Proceso de Evaluación se divide en 4 etapas:
Los tres tipos de evaluaciones que se utilizan
en el proceso educativo:
 ¿Qué es un Reactivo o Ítem?

Elemento o componente básico del test.

Una situación estándar que presentada
como estímulo a un sujeto provoca una
respuesta relacionada con el atributo
medido por el test..
 Para la elaboración de los reactivos se
recomienda utilizar los siguientes criterios:

ESTÁNDARES
TAXONOMÍA DE CRITERIOS
SESGOS
BLOOM TÉCNICOS
La Taxonomía de Bloom
 Preguntas abiertas
Taxonomía de Bloom

• Evaluación complejidad cog alta

• Síntesis (cómo? Por qué?)
• Análisis

Preguntas cerradas
• Aplicación
• Comprensión complejidad cog baja
• Conocimiento (qué?, cuándo?,dónde?)
Especificaciones de pruebas
 Niveles de complejidad
 No solo deben existir especificaciones sobre diferentes áreas del
contenido del currículo.
 Es importante también diferenciar entre diferentes habilidades que
los estudiantes deben adquirir en su estudio  estos corresponden a
“niveles de complejidad cognitiva” requerida para la solución de los
ítems en la prueba.
 Hoy en día mas énfasis en “habilidades” de resolución de problemas
que en memorizar nombres, datos, fórmulas,…
Como ser un buen “redactor de ítems” ?
 Por una parte es “técnica” (conocimentos de la materia y técnicas
especificas de redacción; práctica), por otra parta es “arte” y afinidad
para estas tareas
 Actitud: entender la importancia del trabajo; aceptación de críticas y
sugerencias de revisión
 Habilidad linguística y sensibilidad
 PRACTICA, PRACTICA, PRACTICA…
 Componentes de un ítem selección múltiple
Premisa (Stem)…la pregunta

3. Carlos lleva al mercado 130 lempiras. Gastó 50

lempiras en la compra de arroz. ¿Cuántos lempiras le
quedan a Carlos?

distractor A) 110

distractor B) 100
Alternativas (options)
Clave (Key) C) 80 *

distractor D) 50
Lea el texto siguiente y responda las preguntas 2, 3 y 4.
Platero es pequeño, peludo, suave, tan blanco por fuera que se diría todo de algodón, que no lleva
huesos. Sólo los espejos de azabache de sus ojos son duros cual dos escarabajos de cristal negro.
Lo dejo suelto y se va al prado, y acaricia tibiamente con su hocico, rozándolas apenas, las florecillas
rosas, celeste y gualdas.

2. ¿Cómo es Platero? Pasaje de texto –

stimulus (ingl)
Grande
Suave
Débil
Veloz

3. ¿Qué hace Platero al quedar suelto?

Grupo de
Se va al río. preguntas (item
Se va al cerro. set)
Se va al prado.
Se va al bosque. (todas basados en el
mismo texto)
4. ¿Qué significa la palabra subrayada en el texto?

Largo
Fuerte
Manso
Oscuro
Criterios de Calidad para pruebas educativas

1. Validez
2. Confiabilidad
3. Objetividad/”Fairness”
4. Eficacia
5. Aceptabilidad
Guías generales relacionados con estos criterios

1. Validez Items deben medir lo que se supone que miden

 Asegurar que el ítem responde a las especificaciones.
 Que ponga a prueba aspectos relevantes del currículo.
 Evitar preguntas que son de conocimiento común; sentido
común o que requieren conocimentos específicos de otras
áreas
 Ciencias: Asegurar que el ítem está al tanto del conocimiento
científico actual(muchos libros de textos son viejos o contienen
errores….)
 Los distractores deben ser bien desarollados (no debe haber
respuestas posiblemente correctas ni deben ser obviamente
falsos)
2. Confiabilidad
Que los ítems miden bién, es decir, que distinguen bien entre
estudiantes con muchos y los con pocos conocimientos

 Formular las preguntas de forma clara y concisa

 Evitar ambiguedad como se puede interpretar la
pregunta
 Ejemplos en que buenos y malos estudiantes lo
hagan igual de bien o mal.
 Evitar dar pistas en la pregunta (o en como se
presentan las diferentes alternativas)
 ….Pistas sin intención…

- Misma y similar palabra en la premisa y la clave.

- Clave es mas larga que las demás opciones
- Clave es diferente de otra manera (la única da una
respuesta específica, mientras los otros son
afirmaciones generales)
- Repuestas de sentido común que no requieren
entendimiento/comprensión lectora profunda
3. Objetividad

 Evitar ítems con posible sesgo por género, cultural

o socio-económico (Ej. “deportes”)
 Evitar temas que son conflictivos y pueden causar
estress para estudiantes que les desconcentra de
la tarea (desastres; accidentes, etc.)
 Evitar “doble-penalización” : ítems muy
dependientes, si no sabe la primera, tampoco va a
saber la otra
4. Eficacia
Items deben obtener la mayor información sobre sus
conocimientos/habilidades.

 Solo presente información que es relevante para

la tarea. Evite información adicional no
necesaria, ilustraciones que no aportan nada
específico.
 Pero donde la ilustración es central para la tarea,
puede resultar mas eficaz que una larga
descripción escrita
 En vez de repetir ciertas palabras en cada opción
 llevarlo a la premisa
 Usar el mismo texto/premisa para elaborar ítems
adicionales
5. Aceptabilidad
Items deben ser considerados como relevantes y válidos por
el público en general
 Usar contextos de la vida real si es posible
 Usar textos/temas interesantes, bien escritos
(lectura)
 Evite temas controversiales o estereotipos
 No usar preguntas “trampas”
 Usar ítemes que permiten mostrar conocimiento
(en vez de problemas demasiado complicadas;
demasido enfasis en detalles o excepciones en
vez de aspectos centrales del currículo, etc)
En el ítem y especialmente en la premisa:

- Use lenguaje simple y claro

- Sea conciso
- Evite información irrelevante
Lineamentos general para ítems de selección
múltiple
– Enfocar la pregunta en un solo tema .
– Usar preguntas cerradas, evitar preguntas como:

El protagonista ________
A. es alto
B. vive con su madre
C. esta enojado con su amigo
D. ya le perdonó
Algunos lineamientos para distractores

- Si es posible se debe usar errores comunes

(Matemática) o algo que se puede confundir (Lectura:
algo que está en el texto pero no correcto)
- No pueden ser correctos bajo ningun punto de vista.
- Son claramente falsos (evitar “trampas”- detalles que lo
excuyen como respuesta correcta ; uso de dos
afirmaciones donde solo uno es incorrecto; )
- Suenan plausibles para estudiantes que no saben la
respuesta.
- Estan consistentes en gramática, longitud, y contenido
con la premisa.
En un aula hay 27 estudiantes. Se le repartieron 12
lápices a cada uno.
¿Cuántos lápices se repartieron en total?

A) 322 A) 24

B) 323 B) 324

C) 324 C) 1724

D) 325 D) 10,324
Un carro tiene un tanque de 35 l de capacidad. Gasta 7.5 l de
combustible por cada 100 km recorridos. Si empieza un viaje de
250 km con el tanque lleno. ¿Cuánto combustible quedará en el
tanque al final del viaje?

A. 16.25 l
B. 17.65 l
C. 18.75 l
D. 23.75 l

Porque distractor C?

Es dar sólo el primer paso para resolver el problema y olvidar

el segundo, es decir, elegir la cantidad de gasolina gastada en el viaje
y no lo que queda en el depósito.
Ana pagó L.80.00 por su almuerzo y desea dejar una propina del
20%. ¿cuánto debe dejar de propina?
A L. 1.60
B L. 4.0
C L.16.0
D L.40.0
 DISCUSION: C es la respuesta correcta porque para calcular
una propina del 20%, el examinando debe multiplicar $8.00
por 0.20. El examinando que selecciona A ha multiplicado el
total por 0.02. El examinando que selecciona B ha dividido el
total entre 0.02. El examinando que selecciona D ha dividido el
total entre 2.
 Algunas lineamientos para distractores
- Evite palabras absolutos como “todos”, “nunca”,
“siempre”.
Ej: Según el texto los expertos afirman que los juegos
electrónicos_______
…..D siempre son malos
- Evite referirse a distractor anterior en vez de
concordar con la premisa
- Evite un distractor que contradice la premisa (que
problemas de salud causa la sustancia ABC?
Distractor: “ABC no causa problemas”
- Evite usar antonimos de la clave como distractor
 Si hay dos antonimos entre las opciones muchas
veces es una pista que la clave es o la una o la otra…
Evite “Todas afirmaciones anteriores
estan correctos/incorrectas “ como
alternativa.

Porque?

- Casi nunca es la respuesta correcta

- No concuerda con la premisa
- Si uno solo sabe que uno de los
alternativas es incorrecta puede
excluir tambien la opción “Todas las
afirmaciones anteriores son
correctas”  quedan solo dos en vez
de tres alternativas viables
y ahora a Practicar!