Evaluación educativa:

¿cómo se hacen?

Presenta:
Jerson Chuquilin Cubas Oaxacao, agosto del 2016
 Elementos básicos del proceso de evaluación

REALIDAD OBJETO DE EVALUACIÓN

REALIDAD OBJETO DE EVALUACIÓN

REFERENTE
Construcción conceptual de
la realidad
¿Qué evaluar?
PROPÓSITOS DE EVIDENCIA
LA EVALUACIÓN EMPÍRICA

• ¿Qué consecuencias JUICIOS DE VALOR • Muestra los aspectos

tendrá la evaluación? de la realidad a
• ¿Cuáles serán los evaluar.
• Contrasta la evidencia
usos que se darán a empírica con el referente.
• Selección de fuentes
los resultados? • Juicios de valor de información.
• ¿Quién hará uso de absolutos (referidos a un • Necesita de
los resultados? criterio) instrumentos.
• Juicios de valor relativos
(comparación entre
unidades de análisis)

TOMA DE DECISIONES
Consecuencia sobre la realidad (promover cambios en
la realidad.
 1. Referente de evaluación
• La realidad a evaluar requiere ser construida
conceptualmente
• Puede ser percibida y conceptualizada de diversas
maneras.

• La realidad a evaluar se le denomina referente

• Es lo deseable o lo que se desea alcanzar
• Cuanto más explícito sea el referentes, es más fácil
construir instrumentos.

• ¿Cómo construir el referente conceptual?

• Tabla de especificaciones
• Estructura de los instrumentos de evaluación.
 1. Referente de evaluación

Tipos de referentes

a. Referente interno

• Se valora al estudiante según sus propias capacidades.

• Evaluación centrada en el alumno.

a. Referente externo

• Se valora al estudiante según criterios comunes de tipo

absoluto o relativo igual para todos.
• Evaluación normativa.
• Evaluación criterial.
3
 2. Propósitos de la evaluación

• Los propósitos y las consecuencias de la evaluación son

fundamentales en el proceso de evaluación.

• Implica responder a las siguientes preguntas:

• ¿A qué preguntas responde la evaluación?
• ¿Qué tipo de consecuencias tendrá la evaluación?
• ¿Qué usos se dará a los resultados de la evaluación?
• ¿Quién hará uso de esos resultados?

4
 3. Producción de evidencia empírica

¿Qué es la evidencia empírica?

• Información sobre aquellos aspectos relacionados con

el referente de evaluación.
• Aspecto relevante de la realidad que nos interesa conocer
y evaluar.

¿Cómo producir evidencia empírica?

• A través de instrumentos de evaluación:

• Dispositivos construidos para recoger evidencia empírica
en forma sistemática.

5
 3. Producción de evidencia empírica

¿Cómo producir evidencia empírica?

• La diversidad de fuentes de información dan mayor solidez a

la evaluación.

• Coherencia entre los propósitos, los referentes y los

instrumentos de evaluación.

• Adecuada relación y coherencia entre el referente de

evaluación y los contenidos de los instrumentos de
evaluación.

• Los instrumentos para la recolección de evidencia empírica

pueden ser muy variados.

6
 3. Producción de evidencia empírica

• Verdadero /falso
• Múltiple elección de respuesta
• Verdadero /falso múltiple
• Respuestas combinadas
• Emparejamiento
• Clasificación
• Respuesta doble.
Pruebas • Respuesta limitada.
bjetivas

7
 3. Producción de evidencia empírica

• Respuesta abierta
• Pruebas mixtas
• Examen oral.
• Prueba práctica real.
Pruebas • Proyectos.
libres • Simulaciones
• Portafolios

8
 3. Producción de evidencia empírica

• Observación.
• Encuesta
Pruebas
diagnóstico

9
3. Producción de evidencia empírica

10
 Cómo construir instrumentos

• Se debe empezar por la explicitación de lo que se va a

comprobar (variable que se quiere medir).

• En el contexto educativo la evaluación es criterial:

• La variable es un objetivo de aprendizaje explicitado en
indicadores observables.

• Los materiales de enseñanza son la fuente ideal para

formular las preguntas.

• Conseguir un máximo de relación entre el objetivo y el

ítem evaluado.
• Influye directamente en la validez y fiabilidad de los
resultados.
11
 Cómo construir instrumentos

• Matriz de programación:
• Lograr que la prueba sea representativa de los objetivos
que queremos evaluar.

Objetivos / Total
competencias
Contenidos ítems
C P A

Evaluación como elemento integral del proceso 10 6 6 22

de enseñanza y aprendizaje.

Proceso técnico de evaluación de aprendizajes. 6 12 6 24

TOTAL 46

12
 Matriz de especificaciones

Objetivo de Tipo de Instrumentos Tipo de

Indicador
aprendizaje contenido sugeridos ítem/Tarea

Analiza los argumentos Cuadro

de la evaluación Conceptual, comparativo.
estandarizada y la procedimental Prueba
evaluación en el aula. objetiva.
Argumenta
criterios propios .
en torno a la Evalúa la importancia de
evaluación Conceptual,
la evaluación
estandarizada y actitudinal
estandarizada.
la evaluación en
el aula. Valora las implicancias
de la evaluación
centrada en el aula en Conceptual,
los procesos de actitudinal.
enseñanza y aprendizaje
13
 Pruebas verdadero/falso

¿Qué son?

• Una serie de alternativas, en las que el alumno o alumna

debe contestar si una oración, palabra, número, etc. es
verdadero o falso, de acuerdo con las indicaciones
dadas.

¿Qué miden?

• Diferenciar hechos y opiniones

• Identificar relaciones causa-efecto
• Distinguir conclusiones válidas de las que no son.
14
 Pruebas verdadero/falso

¿Cuáles son los riesgos?

• Reconocer una proposición como falsa no garantiza que

conozca la respuesta correcta.

• Es difícil encontra situaciones reales en que algo sea

categoricamente falso o verdadero.

• La incidencia del azar es del 50%.

Recomendaciones para su elaboración

• Escribir el enunciado en forma simple, clara y concisa.

• La construcción conceptual que se quiere evaluar es el primer
paso en el proceso de evaluación estandarizada.
15
 Pruebas verdadero/falso

• Cada enucniado solo debe incluir una idea o concepto.

• La evaluación estandarizada es externa al aula y pretende
cuantificar el aprendizaje.
• Primer concepto: es externa al aula
• Segundo concepto: pretende cuantificar el aprendizaje.

• Evitar formulaciones negativas y especialmente la doble

negación.
• Las evaluaciones estandarizadas no focalizan su atención
en los resultados del aprendizaje.
• Las evaluaciones estandarizadas focalizan su atención en
los resultados del aprendizaje.

16
 Pruebas verdadero/falso

• La verdad o falsedad de los ítems debe ser lo más

categórica posible.
• La cuantificación de los resultados de la evaluación de los
aprendizajes depende de los propósitos de la evaluación.

• Las proposiciones muy generales deben evitarse.

• Las evaluaciones estandarizadas se caracterizan por
evaluar los aprendizajes básicos de todos los ciudadanos.
• Las evaluaciones estandarizadas se proponen evaluar los
aprendizajes que han sido definidos como básicos en la
formación común de todos los ciudadanos.

17
 Pruebas verdadero/falso múltiples

¿Qué son?

• Una serie de afirmacione a las que el estudiante debe

responder decidiendo la verdad o falsedad de cada
afirmación por separado.

• Tienen una base cómun similar a los ítems MER.

¿Qué miden?

• Diferenciar hechos y opiniones.

• Identificar relaciones causa-efecto.
• Distinguir conclusiones válidas de las que no son.
18
 Pruebas verdadero/falso múltiples

Ejemplo:

Entre las principales características de las evaluaciones

estandarizadas se pueden mencionar las siguientes:

• Son externas al aula de clases. ( ) ( )

• Pretenden cuantificar el logro de los aprendizajes. ( ) ( )

• Focalizan su atención en los procesos del aprendizaje. ( ) ( )

• Evaluan los aprendizajes que han sido definidos como básicos en la

formación común de todos los ciudadanos. ( ) ( )

• Brindan información útil para brindar ayuda ajustada a las necesidades de

aprendizaje de los estudiantes. ( ) ( )
19
 Pruebas de respuestas combinadas

¿Qué son?

• Son una variante que sintetiza los formatos V/F y MER.

• Tienen una base cómun similar a los ítems MER.

• Se agrupan varias alternativas como en los ítems V/F

múltiples, luego se agrupanpara pedir, en formato, MER, la
combinación correcta.

¿Cuáles son los riesgos?

• Requieren más tiempo de preparación y respuesta.

• Son menos eficaces y dan calificaciones menos fiables.
• Los alumnos los perciben más difíciles.
20
 Pruebas de respuestas combinadas

Ejemplo:
Entre las principales características de las evaluaciones estandarizadas se pueden
mencionar las siguientes:
1. Son externas al aula de clases.
2. Pretenden cuantificar el logro de los aprendizajes.
3. Focalizan su atención en los procesos del aprendizaje.
4. Evaluan los aprendizajes que han sido definidos como básicos en la formación
común de todos los ciudadanos.
5. Brindan información útil para brindar ayuda ajustada a las necesidades de
aprendizaje de los estudiantes.
Elegir la combinación correcta:
a. 1, 2 y 3
b. 1, 2 y 4
c. 1, 2 y 5
d. 3, 4 y 5
21
 Pruebas de emparejamiento /correspondencia

¿Qué son?
• Una serie de afirmacione a las que el estudiante debe responder emparejando las
afirmaciones de la lista de premisas con la lista de respuestas.
¿Qué miden?
• Capacidad de identificar relaciones basándose en el conocimiento de asociaciones
concretas (comprensión)
• Generalmente miden memorización de información factual específica.
Recomendaciones para su construcción
• Elegir premisas y respuestas cuyo contenido sea homogéneo (una sola categoría)
• El uso de frases más largas como premisas y las más cortas como respuestas,
facilita la tarea de encontrar la pareja correcta.
• Proponer 6 o 7 premisas para emparejar 4 o 5 respuestas.
• Ordenar tanto las premisas como las respuestas en orden alfabético.
• Escribir instrucciones claras para eparejar ambas listas.

22
 Pruebas de emparejamiento /correspondencia
Relaciona mediante flechas los elementos del proceso de evaluación
con sus respectivas definiciones.
Definiciones
Elementos
1. Acciones destinadas a transformar la
realidad. a) Evidencia empírica.
2. Construcción conceptual de la realidad a b) Juicios de valor.
evaluar.
c) Propósitos.
3. Contrastación de la evidencia empírica con
el referente.
d) Referente.
4. El diseño de instrumentos es la primera
tarea en los procesos de evaluación e) Toma de decisiones.
5. Finalidades y consecuencias de la
evaluación.

6. Información que muestra algún aspecto de

la realidad a evaluar.
23
 Problemas comunes a las evaluaciones

PROBLEMAS COMUNES A LAS EVALUACIONES

VALIDEZ CONFIABILIDAD

REALIDAD OBJETO DE EVALUACIÓN

REALIDAD OBJETO DE EVALUACIÓN

mundo y de la realidad
Valores y visiones del

Validez de
constructo La
confiabilidad Juicio subjetivo
es condición de evaluadores
Validez de contenido necesaria
pero no
suficiente
Validez predictiva para la
validez. Error de
Garantizar la medición
Validez de uso validez

Validez de condiciones de
aplicación

Calidad y pertinencia de la evaluación.

Uso apropiado de los resultados de la evaluación.

9:29
 Problemas comunes a las evaluaciones

¿Qué es la confiabilidad?

• Precisión de las medidas y de la evidencia empírica empleada en la

evaluación.

• Consistencia en los resultados de la medición a traves del tiempo y su

correlación con sus equivalentes.

¿Cómo se calcula la confiabilidad?

• Existen diversos procedimiento y todos producen coeficientes de

confiabilidad.
• Los coeficientes oscilan entre O y 1. Donde “O” significa nula confiabilidad y 1
representa un máximo de confiabilidad (confiabilidad total).
• Entre mas se acerque el coeficiente a cero (0), hay mayor error en la medición.
 Problemas comunes a las evaluaciones

¿Cuáles son los procedimientos para determinar la confiabilidad?

• Medida de estabilidad (confiabilidad por test-retest).

• Un mismo instrumento de medición (o ítems o indicadores) es aplicado dos o más veces a un mismo grupo de
personas, después de un periodo de tiempo.

• Si la correlación entre los resultados de las diferentes aplicaciones es altamente positiva el instrumento se
considera confiable.

• Método de formas alternativas o paralelas.

• Se administra dos o más versiones equivalentes del instrumento.

• Las versiones son similares en contenido, instrucciones, duración y otras características.

• Las versiones son administradas a un mismo grupo de personas dentro de un periodo de tiempo relativamente
corto.

• El instrumento es confiable si la correlación entre los resultados de ambas administraciones es

significativamente positiva.

26
 Problemas comunes a las evaluaciones

Método de mitades partidas (split-halves)

El conjunto total de ítems (o componentes) es dividido en dos mitades y las puntuaciones o
resultados de ambas son comparados.

Si el instrumento es confiable, las puntuaciones de ambas mitades deben estar fuertemente

correlacionadas.

La confiabilidad varía de acuerdo al número de ítems que incluya el instrumento de

medición. Cuantos más ítems la confiabilidad aumenta.

Coeficiente alfa de Cronbach

Requiere una sola administración del instrumento de medición y produce valores que
oscilan entre O y 1. Su ventaja reside en que no es necesario dividir en dos mitades a los
ítems del instrumento de medición, simplemente se aplica la medición y se calcula el
coeficiente.

27
 Problemas comunes a las evaluaciones

¿Qué es la validez?

• Grado en que los juicios de valor que se formulan en la evaluación están

adecuadamente sustentados en evidencia empírica y están efectivamente
relacionados con el “referente” definido para la evaluación.

• Grado en que la evidencia empírica y la teoría dan sustento a las interpretaciones de

los resultados de una medición.

¿Cuáles son los procedimiento para determinar la validez?

Validez de constructo

• Debe haber consistencia entre el instrumento empleado para recoger evidencia

empírica (la prueba) y el referente de la evaluación (aquello que ha sido definido
como la realidad a evaluar)

28
 Problemas comunes a las evaluaciones

Validez de contenido

• La prueba debe cubrir adecuadamente la diversidad de

conocimientos y competencias definidos en el referente.

Validez predictiva

• Precisión con que las puntuaciones de las pruebas

predicen puntuaciones de criterio, según lo indica la
correlación entre la prueba (predictor) y un criterio del
desempeño futuro.

29
 4. Juicios de valor

EVIDENCIA
REFERENTE
EMPÍRICA JUICIOS DE
VALOR

• Juicios de valor absolutos (criteriales)

• Relacionados con el referente.
• Juicios de valor relativos (normativos)
• Comparación entre unidades de análisis.

Lo más importante en una evaluación, no son los datos en sí

mismos, sino la valoración de la realidad objeto de evaluación.
30
 4. Juicios de valor

Precisiones

• La esencia de una evaluación es establecer juicios de

valor.

• El juicio de valor surge de contrastar el dato con el

referente.

• Los datos (resultados) no son la realidad, sino una

aproximación a ella.
• Hacer uso reflexivo y ponderado de los resultados.
• Las visiones simplistas:
• Hacen que la evaluación pierda su potencial.
• Conduzca a debates estériles o a decisiones inapropiadas.

31
 5. Toma de decisiones

¿La evaluación debe tener consecuencias sobre la

realidad evaluada?

• Ninguna evaluación se hace por simple curiosidad.

• Sus resultados se usan de uno u otro modo para fines
específicos.

¿Quién toma las decisiones?

• Las personas comprometidas con el proceso evaluador.

• Quien esta ajeno a ella, puede desvirtuar el proceso
mismo y la toma misma de decisiones.

32
 5. Toma de decisiones

¿Qué características debe tener la toma de decisiones?

• Coherencia con los propósitos de la evaluación.

• Es producto de un proceso de reflexión sobre aquello que
a de cambiarse y/o mejorarse.

• No finaliza cuando la decisión se toma; esta debe ser

implementada.

¿Es necesario evaluar las decisiones tomadas?

• Permite retroalimentar la decisión tomada:

• Positiva: el camino recorrido es correcto.
• Negativo: la decisión requiere más atención, tiempo
recursos, esfuerzos, reflexión.
33
 5. Toma de decisiones

¿Qué tipo de decisiones se pueden tomar?

• Decisiones selectivas (consecuencias duras):

• Relacionadas con las decisiones atribuidas a la evaluación
sumativa.
• Pueden tener efectos negativos o perversos.
• Deben adoptarse con precaución y prudencia.
• Clases de decisiones selectivas:
• Promoción: Integración de juicios o calificaciones parciales.
• Concesión de premios:
• Repetición: Conflictiva para quienes la toman y quienes la
sufren
34
 5. Toma de decisiones

• Decisiones modificativas (consecuencias

blandas)
• Relacionadas con la evaluación inicial y formativa.
• Tiene en cuenta el rendimiento de los estudiantes
para determinar actividades de recuperación.
• Clase de decisiones modificativas:
• Ejecutivas.
• Consultivas.

35
 5. Toma de decisiones

Actividad para trabar en grupo

• En el programa de evaluación que están trabajando:

• ¿Qué tipo de decisiones prevén tomar? Explíquenlo en
detalle.
• Considerando el enfoque racional de toma de decisiones,
expliquen los pasos y las acciones que desarrollarán para la
toma de decisiones.

9:29 36