CONSTRUIR INSTRUMENTOS DE

EVALUACIÓN DE CALIDAD

Relator:
José Córdova García
 Y para que la
EVALUACIÓN sea JUSTA…
TODOS realizarán la
MISMA Prueba.
¡Subirán a ese árbol!
¿Qué es evaluar?
 CULTURAS DE EVALUACIÓN

Centrada en la CULTURAS DE Centrada en el

CALIFICACIÓN EVALUACIÓN
APRENDIZAJE

Proceso de Enseñanza-Aprendizaje y Procesos estrechamente relacionados

evaluación disociados

Criterios de evaluación compartidos

Criterios de evaluación ocultos

Resultados trabajados a nivel individual

Tendencia al ranking Foco en progreso individual.

 Para qué Qué
evaluar evaluar

EL CICLO
EVALUATIVO Cómo
Tomar
decisiones evaluar

Analizar
resultados
 Asume que cada
estudiante es capaz de
mejorar su desempeño

Es parte intima y Indica a los estudiantes

esencial del proceso lo que tienen que hacer
de enseñanza y para mejorar su
aprendizaje desempeño

Evaluación para
Involucra a los
estudiantes en el Aprendizaje Reconoce todos
su propia los logros de
evaluación aprendizaje

Requiere que los

profesores compartan
con sus estudiantes los Instala la cultura de
logros de aprendizaje la colegialidad y
esperados flexibilidad
 FUNCIÓN PEDAGÓGICA DE LA
EVALUACIÓN

Todas las evaluaciones Sistematizar los

pueden y deberían ser
utilizadas con el fin de procesos evaluativos
comprender mejor la permite que el
realidad con la que se docente se instale
está trabajando y como un mediador
contribuir a mejorarla. efectivo en el proceso
de aprendizaje de
nuestros estudiantes.
 VALIDEZ y CONFIABILIDAD

Son los conceptos centrales para cualquier

evaluación, permiten resguardar la función
pedagógica.

• Validez: el instrumento mide lo que

pretende medir.
En la actualidad, también se integra la
finalidad del instrumento.
 Validez de contenido

• Construcción de un Marco de Evaluación:

– Definición de un dominio disciplinar.

– Relevancia de dicho dominio.
– Representatividad del dominio.

• Selección pertinente y representativa de los

contenidos/habilidades AE (cubiertos por el curso, la
unidad, la clase, otros) que se evaluarán.
 Ejemplos de transgresión a la Validez de Contenido

Tiempo atrás tuve que leer una novela que

me encantó. Hablaba de temas súper
profundos. Sin embargo, la profesora solo
preguntó por los nombres de los
personajes .
Como sabíamos que nuestra profesora
de Historia solo nos preguntaba por las
fechas. Aprendíamos todo de memoria y
nos iba súper bien. Lo malo es que ahora
no recuerdo nada de ese ramo.

En una clase de matemática, el profesor nos

pidió rotar un triángulo en un plano
coordenado. Sin embargo, terminó
evaluando mejor los que tenían más colorido.
 Sugerencias para resguardar la
Validez de Contenido

• Construir matrices y tablas de especificaciones

para cada instrumento de evaluación,
contemplando referencia y énfasis curricular,
indicadores de logro (habilidades, contenidos,
actitudes, otros).

• Verificar a través de jueces la adecuación de las

situaciones e instrumentos de evaluación para
medir los contenidos planteados en el
aprendizaje (trabajo con pares).
 Validez instruccional

• Aplicación de la validez de contenido.

• Lo que los estudiantes han tenido la oportunidad de

aprender, durante las clases, para responder
correctamente. (Cracker et al, 1988)

• Sin validez instruccional los estudiantes no tienen

oportunidad de demostrar lo que aprendieron, y los
profesores no tienen la posibilidad de evaluar lo que
han enseñado.
Ejemplo de transgresión a la Validez Instruccional
Cuando leemos los textos en clases
puedo responder casi todas las
preguntas que hace el profesor, pero en
las pruebas nunca entiendo lo que quiere
que responda, eso me frustra mucho.

La profesora de biología nos había enseñado

las partes del aparato respiratorio, por
separado. Pero en la prueba nos pidió integrar
y relacionar cada parte y eso nunca lo
habíamos visto. A todos nos fue pésimo, ¡sus
pruebas son de terror!
 Sugerencias para resguardar la validez
instruccional
• Asegurarse de que cada situación de evaluación contenga
los contenidos tratados en las actividades de aprendizaje
(implementar el uso de la bitácora).

• Implementar situaciones de evaluación similares a las

actividades de aprendizaje realizadas en clases.

• Considerar que las planificaciones son una guía flexible.

 Validez Consecuencial

• Las evaluaciones detonan efectos (buscados o no) en el

proceso de enseñanza/aprendizaje.
• Perseguir como objetivo que cada situación de evaluación sea
una oportunidad de aprendizaje.
• Buscar que las evaluaciones nos permitan tomar decisiones
sobre la planificación, la didáctica y las futuras evaluaciones.
• Diseñar procesos de análisis de datos de las evaluaciones que
permitan entregar información de los logros de aprendizaje
tanto para docentes como para estudiantes.
 Ejemplos de transgresiones a la validez consecuencial

El SIMCE y las pruebas de nivel miden solo

un eje de contenido del currículo. Por lo
tanto, este semestre no voy a pasar los
otros tres ejes en profundidad.
¡Quiero que mis alumnos saquen buenos
resultados en las pruebas!
El profesor de Física nunca nos
hace aplicar la materia, solo
pregunta fórmulas, así que me las
voy a aprender de memoria y me
aseguro un 7.
 Sugerencias para resguardar la validez
consecuencial
• Definir claramente los propósitos y usos de la
evaluación. ¿Para qué evaluamos?

• Identificar las evidencias útiles para el propósito

evaluativo. ¿ Qué necesito saber para cumplir con el
propósito propuesto para la evaluación?, ¿qué tipo
de evidencia me entrega esa información?

• Una buena planificación permite resguardar esta

correspondencia.
 Confiabilidad

• Moss plantea que la confiabilidad en el aula pasa por

el análisis sobre la Suficiencia de Información.
• Las conclusiones y posteriores decisiones respecto
de la forma de abordar el proceso de enseñanza
aprendizaje deben estar basadas en la evidencia
suficiente para no cometer errores o al menos
minimizarlos.

¿Puede haber validez sin la confiabilidad?

Moss,P.(1994)
 Transgresiones a la suficiencia de
información
El profesor de ciencias me dijo que, por lo que vio
en mi prueba, yo no sé interpretar gráficos.
Tengo rabia, porque yo sí sé hacerlo, pero él solo
puso una pregunta de eso en la prueba y no
entendí muy bien lo que había que hacer.

¡Reprobé tecnología!
Es que me puse muy nerviosa, ya que había
que presentar el trabajo frente al curso y
todos me estaban mirando.
Sugerencias para resguardar la suficiencia
de información

• Aplicar variadas situaciones de evaluación que

midan los mismos aprendizajes a los mismos
estudiantes.

• Propiciar para las diferentes instancias de

evaluación ambientes, recursos, espacios y tiempo
similares y adecuados.
Herramientas curriculares
para la evaluación de
aprendizajes
 Cuatro herramientas puestas a
disposición del aprendizaje
• El siguiente esquema muestra las
herramientas del Currículum Nacional.
• Estos instrumentos tiene diversas funciones,
cada una orientada al logro de los
aprendizajes que se definen en los Marcos
Curriculares
 Marcos de Evaluación
• Cruce entre ejes de contenido y ejes de
habilidades.

• ¿Cómo organizar las habilidades evaluadas?

• Uso de taxonomías.

• 2 o 3 ejes de habilidades, tipos de competencias

o dominios cognitivos (agrupar un conjunto de
habilidades).
 Contenidos
Ajuste Lenguaje Matemática Ciencias ……..
2009 Naturales
……..

Estructura y función
de los seres vivos.
Organismos,
Comunicación Números.
ambiente y sus
Oral. Algebra.
Contenidos interacciones.
Lectura. Geometría.
La materia y sus
Escritura. Datos y azar.
trasformaciones.
Fuerza y movimiento.
Tierra y universo.
 Habilidades
Ajuste 2009 Lenguaje Matemática Ciencias ……..
naturales
…….

Comprensión
Localizar. Conocer.
conceptual.
Interpretar y Resolución de
Habilidades Habilidades de
relacionar. problemas.
pensamiento
Reflexionar. Razonamiento.
científico.
Taxonomía de los Pensamiento de
Orden Superior

Objetivos de la Educación
EVALUACIÓN

SÍNTESIS

ANÁLISIS

APLICACIÓN

COMPRENSIÓN

MEMORIA
Pensamiento de
Orden Inferior
Habilidades del Pensamiento Revisión de la Taxonomía de Bloom
Benjamín Bloom Anderson y Krathwohl

EVALUACIÓN

SÍNTESIS EVALUAR

ANÁLISIS ANALIZAR

APLICACIÓN APLICAR

COMPRENSIÓN COMPRENDER

MEMORIA RECORDAR
Taxonomía de Bloom para la ERA Digital
Churches

Digital
 Procesos Psicológicos

memoria / pensamiento
memoria pensamiento
 Ejemplos de ejes de habilidades
Memoria Memoria /Pensamiento Pensamiento

TIMSS
Conocer Aplicar Razonar
(MAT)

TIMSS Manejar Razonar y

Comprender conceptos
(CIENCIAS) conocimientos Analizar

Extraer Reflexionar y
PISA Interpretar
información Evaluar
(LECTURA)

CIENCIAS
Conocer y Analizar e
SOCIALES Aplicar
comprender interpretar
(SIMCE)
TALLER DE APLICACIÓN DE LOS
EJES DE HABILIDADES
PARTE A (indicadores)

• Agrupe los indicadores de ambos Niveles de

Logro, de acuerdo a los ejes de habilidades
definidos.

• Determine los indicadores en los que hay

dudas respecto de dónde clasificarlo.
PARTE B (Preguntas)

• Analicemos preguntas de todos los

subsectores, clasificándolas de acuerdo a los
ejes de habilidades.
 MATEMÁTICA
Una niña le da 6 caramelos a cada uno de sus 5
amigos y le sobran 2.

¿Cuántos caramelos tenía?

A. 32
B. 28
C. 13
D. 8
¿En cuál de las siguientes figuras se ha pintado 3/4?
Mónica corta un cuadrado en 3 pedazos. Cada
pedazo tiene cuatro lados.

María también corta un cuadrado en 3

pedazos. Cada pedazo tiene tres lados.
En el cuadrado que aparece a continuación,
dibuja cómo María podría haber hecho los
cortes.
 CIENCIAS NATURALES
El picaflor se alimenta del polen y del néctar de algunas flores.
Al buscar su alimento en los jardines, puede ser cazado por
gatos domésticos.
Fuera de las ciudades, lo cazan el traro, el halcón peregrino y
el gato montés.
De acuerdo con esta información, ¿cuál de las siguientes
clasificaciones corresponde al picaflor?

A. Herbívoro y presa.
B. Carnívoro y presa.
C. Carnívoro y depredador.
D. Herbívoro y depredador.
 En la Tierra habitan animales muy distintos entre sí,
pero tienen necesidades muy importantes para vivir
que son comunes a todos. Por ejemplo, necesitan
agua.
Señala otras 2 necesidades importantes para la vida
que tienen todos los animales.

1 ----------------------------------------------------------------------
------------------------------------------------------------------------
2 -----------------------------------------------------------------------
-------------------------------------------------------------------------
 CIENCIAS SOCIALES
Observa el siguiente diagrama.

¿Cuál es el recurso natural en el proceso productivo que se ve en el diagrama?

A. Cuadernos.
B. Celulosa.
C. Papel.
D. Árbol.
 Lee la siguiente noticia.

Algunas personas protestaron porque los organizadores del mundial:

A. negaron los recursos para comprar sillas de ruedas.

B. permitieron la entrada a personas con discapacidad.
C. descuidaron derechos de personas con discapacidad.
D. autorizaron la construcción de estadios muy pequeños.
• Lee el siguiente texto.

• Trayenko es una pequeña localidad rodeada de cerros con bosques

nativos. Debido a la falta de caminos, sus pobladores debían caminar
alrededor de cinco horas para llegar al pueblo más cercano. Hace dos
meses se terminó de construir un camino a través del cual pueden llegar
autos, camiones y buses directo hasta Trayenko.
• Sara y Jorge viven en Trayenko y, pensando en los habitantes de su
comunidad, comentan:
• ¿Por qué Sara podría estar contenta por la construcción
del camino?
• ------------------------------------------------------------------------
• ------------------------------------------------------------------------
• ¿Por qué Jorge podría estar preocupado por la
construcción del camino?
• -------------------------------------------------------------------------
• -------------------------------------------------------------------------
LECTURA
Cuando Valeria señala que “las personas que no ven
televisión están desconectadas” quiere decir que esas
personas:

A. son tristes y solitarias.

B. viven en lugares lejanos.
C. no se preocupan por sus familias.
D. se pierden información importante.
Alberto y Richard piensan que:

A. la televisión no es muy entretenida.

B. el fútbol es lo mejor en la televisión.
C. la televisión hace que los ojos se pongan cuadrados.
D. algunos programas de televisión son más informativos que otros.

¿Con la opinión de cuál estudiante estás más de acuerdo acerca de la

televisión?
A. Ana B. Richard C. Alberto D. Valeria

Basándote en el texto, explica por qué estás de acuerdo con ese(a)

estudiante.

---------------------------------------------------------------------------------------------
---------------------------------------------------------------------------------------------
 Bibliografía y Referencias

• Miguel Ángel Santos Guerra (1998). La evaluación como

comprensión. Dimensión crítica/reflexiva.

• Moss, P. (1994). Can there be validity without reliability?

Educational Researcher, 23(2), 5-12.

• Vygotsky, L. El Desarrollo de los Procesos Psicológicos Superiores.

Cap. 6.: Interacción entre Aprendizaje y Desarrollo. Ed. Grijalbo.
México. 1988

• Mide UC (2011). Material del Diplomado de Medición y

evaluación de aprendizajes.
• Mineduc (2004). Evaluación para el aprendizaje.

• Mineduc – UCE. Niveles de Logro. Consultado en

www.mineduc.cl el 27 de junio de 2011.

• Mineduc – UCE. Mapas de progreso. Consultado

en www.mineduc.cl el 27 de junio de 2011.

• Leslie Maxwell y Giovanni Pierattini. Material de

capacitación para la construcción de instrumentos
de evaluación de calidad (2011).
ANEXOS A LA
PRESENTACIÓN
 ¿Para qué evaluar?
• Para diagnosticar
• Para monitorear
• Para certificar

• Para fortalecer el PEA

 ¿Qué evaluar?
• Aprendizajes Previos
• Procesos
• Resultados

• Conocimientos
• Habilidades
• Actitudes
• Conocimientos/habilidades
• Conocimientos/habilidades/actitudes
 ¿Cómo evaluar?
• Elección del instrumento
– Prueba, registro de observación, situación de
desempeño, otros.

• Elección del momento (evaluación auténtica):

– Al comienzo.
– Durante.
– Al final.
Analizar resultados - Juicios
 Tomar decisiones
• Reflexionar sobre el PEA.
• Avanzar (en contenido y desarrollo de
habilidades superiores).
• Re-pensar el PEA (los tiempos, la metodología,
el contenido y las habilidades).
• Otros.
 Zona de Desarrollo Próximo (ZDP)
Vygotsky

Nivel
Tutor

Nivel de
Desarrollo
Potencial ZDP
Zona de
Desarrollo
Real

Participación
Aprendiz Guiada Tutor
 AGENTES EDUCATIVOS

1
FAMILIA

3 2
ESCUELA ENTORNO
 Cultura de la
tradicional
Colegialidad de la
colegialidad

basada basada
en una
DOCENCIA en una

Cultura
Cultura
Colaborativa
Individualista
donde el
docente
en que el docente

es el único trabaja en
responsable de colaboración
lo que sucede en con el resto
su aula los docentes
El Marco Curricular para la enseñanza básica y media define los Objetivos
Fundamentales (OF), es decir, el aprendizaje que se espera que todos los alumnos y
alumnas del país logren. Tienen carácter obligatorio y son el referente en base al cual
se construyen los programas de estudio, los mapas de progreso y los niveles de
Logros SIMCE

Los Programas de estudio son una organización didáctica del año escolar para el
logro del los OF definidos en el Marco Curricular. En los programas se definen
aprendizajes esperados, por semestre o Unidades, que corresponden a objetivos
de aprendizajes acotados en el tiempo. Los Programas de estudio de Mineduc son
una propuesta didáctica, pudiéndose establecer programas propios

Los Mapas de Progreso describen la secuencia en que comúnmente progresa el

aprendizaje en determinadas áreas o competencias clave, considerados como
fundamentales en la formación de los estudiantes. Así, ofrecen un marco de
referencia para observar el aprendizaje promovido por el currículum a los largo de
los 12 años de escolaridad. Cada Mapa contiene 7 niveles de aprendizaje, que
además muestran ejemplos de trabajos de alumnos que ilustran dicho nivel.

El SIMCE y los Niveles de Logro. Entrega información Nacional y por

establecimiento sobre cuántos estudiantes se están aproximando o logrando el
aprendizaje promovido por el currículum en determinados sectores y momentos, y
cuántos obtienen logros intermedios o iniciales.
La información que provee el SIMCE se utiliza para evaluar las políticas nacionales
de educación y para que los establecimientos analicen sus estrategias
institucionales y sus prácticas pedagógica, de manera de contribuir al diseño de
planes de mejoramiento.