reporte de lectura

¿POR QUÉ LAS PRUEBAS ESTANDARIZADAS NO MIDEN LA CALIDAD

EDUCATIVA?
W. James Popham

los sistemas educativos con el paso del tiempo han realizado una serie de ajustes, los
cuales se fundamentan en una mejora del mismo, teniendo en cuenta que la educacion de
manera global es considerada como un factor importante para el desarrollo social,
económico, cultural y político, pues esta potencializa los diferentes conocimientos de las
personas, al igual que sus destrezas y habilidades generando las herramientas necesarias
para la vida laboral y cotidianidad del sujeto, es por esa razón que la educación al ser un
proceso tan importante para el desarrollo de ellos requiere de estar en una continua
evaluación, para mejorar los procesos administrativos, de cobertura, calidad y así lograr
que el desarrollo de la educación en un país especifico, cumpla con los requerimientos y
necesidades de la comunidad en la que se aplicara.

en este sentido popham, realiza un analisis sobre la funcion de las pruebas estandarizadas
en los sistemas educativos como forma de medicion de los estandares de calidad en las
instituciones.

argumenta que los educadores viven una presión casi implacable para demostrar su
eficacia. Desafortunadamente, el principal indicador con el cual la mayoría de las
comunidades evalúa el éxito del cuerpo docente de una escuela es el desempeño de los
estudiantes en pruebas estandarizadas.

sin embargo es necesario indagar 3hasta que punto una prueba evaluar la labor de un
docente o en su efecto el conocimiento de un estudiante4

La mayoría de los educadores no comprenden realmente por qué una prueba

estandarizada proporciona una evaluación equívoca sobre la eficacia del cuerpo de
docentes de una escuela.

frente a lo anterior el autor advierte que es muy importante distinguir que hay dos tipos
de pruebas estandarizadas: pruebas de aptitud y pruebas de logros., la aptitud predicen
cuán bien es probable que los estudiantes se desempeñen en algún espacio o nivel
educativo subsiguiente y pero a la hora de evaluar la eficacia de una escuela, los
ciudadanos y los miembros de los consejos escolares se apoyan en los puntajes obtenidos
por los alumnos en pruebas estandarizadas de logros.

La misión evaluadora de las pruebas estandarizadas.

Lo que se trata de hacer es crear herramientas de evaluación que permitan hacer una
inferencia válida sobre los conocimientos y/o las destrezas que posee un estudiante
determinado en un área particular de contenidos.

las pruebas estandarizadas de logros a menudo tienen que cumplir su labor de medición
con un conjunto mucho menor de ítems que el que se usaría si el tiempo que requiere una
prueba no fuera problema. Para salir de esta complicación laspruebas estandarizadas de
logros muestrean los conocimientos y/o las destrezas de una esfera o dominio de
contenidos. Frecuentemente esas pruebas intentan cumplir su labor evaluadora con solo
40 o 50 ítems -- a veces menos -- en el campo de una asignatura.

La diferenciación precisa como deidad

Los diseñadores de las pruebas estandarizadas de logros tienen la tarea de crear un
instrumento de evaluación que, con un puñado de ítems, proporcione interpretaciones
válidas, referidas a normas, sobre la situación de un estudiante respecto a una porción
sustancial de contenidos. Los ítems que cumplen mejor la labor de diferenciar o
discriminar entre los estudiantes son aquellas que aproximadamente la mitad de ellos
responden correctamente. Los diseñadores evitan los ítems que son respondidos
correctamente por demasiados estudiantes o por muy pocos de ellos.
las pruebas estandarizadas de logros hacen una excelente labor suministrando la
evidencia necesaria para hacer interpretaciones referidas a normas respecto a los
conocimientos y/o a las destrezas de los estudiantes en relación a
aquéllos de los demás estudiantes del país. Esas interpretaciones tienen una utilidad
educativa considerable. Las pruebas estandarizadas de logros son, en realidad, bastante
notables, si tomamos en cuenta las dimensiones de las esferas o dominios de contenido
que están representadas y el número limitado de ítems que los diseñadores de pruebas
tienen a su disposición. Hacen lo que se supone deben hacer.
Pero las pruebas estandarizadas de logros no deberían ser usadas para evaluar
la calidad de la educación.

Midiendo la temperatura con una cuchara.

Por varias razones importantes, las pruebas estandarizadas de logros no deberían ser
utilizadas para evaluar la calidad de la educación. La razón primordial por la cual los
puntajes de los estudiantes en estas pruebas no suministran un indicio preciso de la
eficacia de la enseñanza es que cualquier inferencia acerca de la calidad educativa basada
en los logros de los estudiantes en las pruebas estandarizadas de logros tiende a no ser
válida.

tres razones significativas por las cuales es totalmente inválido basar inferencias
respecto a la calidad de la educación en los puntajes de las pruebas estandarizadas
de logros:

1. Desajustes entre la enseñanza y la medición.

En vista de la sustancial diversidad curricular, los diseñadores de pruebas se ven

obligados a crear una serie de evaluaciones “talla única”. Pero, como sabemos la mayoría
de los que hemos intentado usar ropa talla única, a veces la talla única no le queda bien a
todos.
Los diseñadores de estas pruebas hacen lo mejor que pueden al seleccionar los
ítems que puedan medir todos los conocimientos y destrezas de un área de contenido que
los educadores nacionales consideran importantes. Pero no pueden conseguirlo
realmente. Así, pues, las pruebas estandarizadas incluirán siempre muchos ítems que no
están alineados con lo que se enfatiza en la enseñanza en un contexto determinado.

2. Una tendencia psicométrica a eliminar ítems importantes de las pruebas.

Una segunda razón por la cual no deberían usarse pruebas estandarizadas de

logros para evaluar la calidad educativa surge directamente del requerimiento de que
estas pruebas permiten hacer comparaciones significativas entre estudiantes basadas en
sólo un conjunto pequeño de ítems.

3. Causalidades confundidas.

Afirmar que puntajes bajos o altos en las pruebas son resultado de la calidad de la
enseñanza es ilógico porque el desempeño de los estudiantes en las pruebas
estandarizadas de logros está fuertemente influenciado por tres factores, sólo uno de los
cuales está vinculado a la calidad educativa.

El problema de causalidad confusa está relacionado con los tres factores que
contribuyen al puntaje de los estudiantes en las pruebas estandarizadas de logros: (1)lo
que se enseña en la escuela, (2) la capacidad intelectual innata del estudiante, y (3) el
aprendizaje del estudiante fuera de la escuela.

- Qué se enseña en la escuela. Algunos de los ítems de las pruebas miden los
conocimientos o destrezas que los estudiantes aprenden en la escuela. En ciertas
asignaturas tales como las matemáticas, los niños aprenden la mayor parte de lo que
saben sobre el tema en la escuela. Pocos padres pasan mucho tiempo enseñando a sus
hijos álgebra o cómo probar un teorema.
Si los ítems en las pruebas estandarizadas de logros midieran sólo lo querealmente se ha
enseñado en la escuela, no me opondría al uso de estas pruebas para determinar la calidad
educativa. Sin embargo, como se verá pronto, en las pruebas estandarizadas de logros se
esconden otros tipos de ítems.
- La capacidad intelectual innata de un estudiante:
el rendimiento academico de un estudiante depende de las capacidades intelectuales que
tiene cada uno, no todos aprenden de la misma manera y por ende se deberia hacer una
medicion diferenciada los ítems que básicamente miden diferencias en las capacidades
intelectuales innatas de los estudiantes obviamente no contribuyen a hacer inferencias
válidas acerca “cuán bien se ha enseñado a los niños”. ¿Nos gustaría que a todos los
niños les fuera bien en esos ítems de “inteligencia innata”? Claro que sí. Pero usar esos
ítems para evaluar la eficacia educacional es simplemente erróneo.
´- Aprendizaje fuera de la escuela.
Los ítems más problemáticos en las pruebas estandarizadas miden lo que los estudiantes
han aprendido fuera de la escuela.
Desafortunadamente, en las pruebas estandarizadas de logros, encontrará más ítems de
éstos que los que sospecha. Si los niños proceden de familias aventajadas y de ambientes
ricos en estímulos, entonces son más capaces de tener éxito en los ítems de la prueba
estandarizada que otros niños cuyos entornos no encajan tan bien con lo que las pruebas
miden.
¿Qué debe hacer un educador?
He descrito una situación que, desde la perspectiva de un educador, se ve bastante
desoladora. ¿Qué puede hacer? Sugiero un triple abordaje al problema. Primero, pienso
que se necesita saber más sobre las interioridades de las pruebas estandarizadas de logros.
Segundo, pienso que se necesita llevar a cabo una campaña educativa eficaz, de manera
que los colegas educadores, los padres de familia, y los diseñadores de políticas
educativas comprendan cuáles son realmente las debilidades evaluativas de las pruebas
estandarizadas de logros. Por último, pienso que se necesita organizar una forma más
apropiada de reunir evidencias basadas en la evaluación.
- Aprendiendo sobre las pruebas estandarizadas de logros.
Los educadores necesitan darse un buen tiempo con las pruebas de logros, analizándolas
ítem por ítem para ver lo que realmente están midiendo
- Difundir la noticia
Si trata de explicar a la opinión pública, a los padres y a los diseñadores de políticas por
qué los puntajes de las pruebas probablemente suministran un cuadro engañoso de la
calidad educativa, asegúrese de señalar que no está escabulléndose de la
responsabilización. Por el contrario, usted debe estar dispuesto a identificar otras
evidencias más confiables del logro estudiantil.
Presentar otras evidencias. Si va a argumentar en contra de las pruebas estandarizadas
de logros como fuente de evidencia educacional para determinar la calidad de la escuela,
y si aún desea ser educacionalmente responsable, entonces necesitará ofrecer de
antemano otra forma de evidencia para mostrar al mundo que realmente está haciendo un
buen trabajo educacional.
El punto fundamental es éste: si los educadores aceptan la posición de que los puntajes de
las pruebas estandarizadas de logros no deberían ser usados para medir la calidad de la
enseñanza, entonces deben suministrar otra evidencia confiable que pueda usarse para
establecer la calidad de la enseñanza. Una evidencia imparcial, reunida cuidadosamente
ex ante y ex post, sobre la manera en que los profesores promueven conocimientos y
destrezas innegablemente importantes podría resolver el
problema,
Objetivos correctos, herramientas incorrectas
Los educadores deben ser, definitivamente, responsabilizados. La enseñanza de los hijos
de una nación es demasiado importante como para no darle seguimiento. Pero evaluar la
calidad educativa mediante el uso de instrumentos de evaluación erróneos es una
subversión de la sensatez. Aunque los educadores necesitan producir evidencia válida
respecto a su eficacia, las pruebas estandarizadas de logros son herramientas equivocadas
para esa tarea.

las anteriores afirmaciones de Popham dan cuenta de la necesidad de crear otras

estrategias que permitan realizar una medicion real de la calidad de la educacion en
las instituciones educativas que esten acordes a las realidades contextuales y que
permitan dar una luz que sirva de orientacion para que la comunidad estudiantil
·(docentes, alumnos y comunidad en general) establezcan estrategias de mejoras.

en colombia al igual que otros paises latinoamericanos en las ultimas decadas se ha

venido trabajando el termino "calidad educativa" de manera ligada con los terminos de
eficiencia y la eficiencia. los cuales entendido en cuanto aspectos económicos, la eficacia es
asociada a la calidad en términos de costo – efectividad y la eficiencia está relacionada a dos
criterios fundamentales, el primero se centra en la manera de brindar una mejor educación a
la población y el segundo se centra en la cobertura, pero para que esto suceda se requiera
propiamente que el estado o el sistema educativo en general se encargue de garantizarlo, a
través de adecuados planes de educación que tengan en cuenta aspectos de la complejidad y
la totalización, para así poder abordar “la calidad docente, de los aprendizajes, de la
infraestructura y de los procesos” (Aguerrondo, 2005, p.10) con el fin de que la calidad
educativa tenga una relación directa con la transformación educativa de un país, debido a que
la calidad es un eje importante en la toma de decisiones, porque sirve de patrón para la
comparación y evaluación de decisiones y reajuste de procesos.

en cuanto los estandares de evaluacion el gobiermo colombiano de la mano del ministerio de

educacion realiza las siguientes pruebas:
SABER. Se aplica a estudiantes de 5° y 9° grado. Comenzó en 1991 con aplicaciones
muestrales y entre 2002 y 2003 se llevó a cabo la primera aplicación censal, que constituye
una línea de base en las áreas de Lenguaje, Matemáticas, Ciencias Naturales y Competencias
Ciudadanas. A partir de 2005 se incluyó Ciencias Sociales.

ICFES. Se aplica a los estudiantes de calendario A y B que terminan el grado 11, en las áreas
de lenguaje, matemática, física, química, biología, geografía, historia, filosofía, idioma
extranjero (electivo entre inglés, francés y alemán) e interdisciplinar (electiva entre medio
ambiente y violencia y sociedad).

ECAES. Se orienta a evaluar los aprendizajes y las competencias de los estudiantes que
concluyen el ciclo de educación superior, en las áreas y componentes propios de su programa
académico. Se realiza una aplicación anual y pueden participar egresados de la superior o
ciudadanos que aspiren a confrontar su dominio en un determinado campo.

La tendencia permite inferir que aquellos estudiantes que logran un alto resultado en la
prueba ICFES poseen una alta probabilidad de lograrlo también en los ECAES.

Docentes y Directivos docentes. Evalúa las competencias disciplinares de los aspirantes a

ingresar a la carrera docente o a ocupar el cargo de directivo docente, con aplicación de
pruebas anuales. Se busca proveer cargos docentes y directivos, a través de concursos
convocados por las entidades territoriales del país. Hay pruebas específicas en el campo de la
etnoeducación.

Referenciación internacional. Al país le interesa conocer el impacto de sus políticas en

educación Básica y Media, en relación con otros países. Para este propósito, participa en
Programme for International Student Assessment (PISA) 2006, Segundo Estudio Regional
Comparativo y Explicativo (SERCE) 2006 y Trends in International Mathematics and
Science Study (TIMSS) 2007.
En términos de los resultados asociados con las áreas académicas y las habilidades evaluadas,
los proyectos internacionales han confirmado que los estudiantes colombianos alcanzan
niveles medios de desempeño, comparados con los de América Latina y el Caribe, y niveles
bajos, en relación con estudiantes del primer mundo.

Es reiterada la observación sobre las dificultades en la comprensión analítica de textos y la

solución de problemas complejos, que requieren un juicio crítico y un saber teórico
específico, observación que también corresponde a los análisis de los resultados alcanzados
de las pruebas nacionales.
Colombia efectivamente el proceso de evaluación ha influido trascendentalmente en la
calidad educativa, porque ha permitido a lo largo del tiempo reconocer elementos que son
importantes para responder a las necesidades educativas del país, como lo es la educación
bajo el enfoque de lo diferencial, así mismo el trabajo cooperativo entre cada uno de las
instituciones encargadas de regular la educación ha llevado a mejorar cada vez más la calidad
educativa.
No obstante, se identifica que es necesario que el gobierno comience a abarcar los tres ejes
específicos dentro de los procesos educativos como lo es el epistemológico, el pedagógico y
la organización, como aspectos que pueden aportar directamente al desarrollo social,
económico, político y cultural. Al igual es importante que el gobierno colombiano y demás
entes estatales encargados de regular la educación, puedan desarrollar un sistema de
evaluación objetiva que reconozca de manera diferencial cada una de las características de la
población para la que será aplicada haciendo un reconocimiento de los aspectos
socioculturales de cada zona del país, para lograr dar mayor coherencia a la aplicación de las
mismas y a los resultados que estas arrojan, asimismo se daría un acceso equitativo a los
incentivos que da el estado por obtener buenos resultados en las pruebas estandarizas.

Por otra parte las pruebas estandarizadas han sido utilizadas por diferentes sujetos y grupos
para determinar la calidad educativa de una Institución, sin embargo por su estructura y
planeación estas pruebas no alcanzan a medir los diferentes componentes de la calidad
educativa, ya que el objetivo de estas pruebas únicamente se centra en la medición de
conocimientos por áreas para identificar las fortalezas y debilidades de los sujetos. Por tanto
sería importante que el Estado Colombiano o los Entes gubernamentales comiencen a
planificar una estrategia para medir la calidad educativa de las diferentes Instituciones, de
esta forma se podría mejorar los procesos educativos de las instituciones logrando mejor
cobertura y equidad entre otra seria de aspectos importantes para esta.

bibliografia:
- Popham (sin fecha). ¿Por qué las pruebas estandarizadas no miden la calidad educativa?
- Abreo ( 2018 ). Análisis a la evaluación educativa estandarizada en Colombia