Documente Academic
Documente Profesional
Documente Cultură
Factores que determinan la falta de confiabilidad: Existen mltiples motivos por los
cuales los puntajes obtenidos mediante la aplicacin de un test determinado pueden no
ser confiables. Se explicaran estos en los distintos momentos del proceso de evaluacin.
A) Se construye la prueba:
En todos los test objetivos la mayor fuente de medicin lo constituye el
muestreo de contenido. Tanto si el muestreo es tendencioso, como si no
es lo suficientemente extenso, los puntajes resultantes no poseern una
elevada confiabilidad.
Muchos tems de test no requieren que la persona formule una respuesta
sino que reconozca la respuesta correcta. Estos ltimos reciben el
nombre de tems de reconocimiento y su ejemplo ms sencillo lo
constituyen los reactivos verdadero-falso. Siempre que el tem suponga
reconocimiento de una o ms respuestas correctas la posibilidad de
adivinacin desempea un papel en los puntajes obtenidos en el test. Para
contrarrestar la adivinacin y aumentar la confiabilidad lo mejor es
aumentar el nmero de respuestas alternativas.
Otra fuente de no-confiabilidad son los errores debidos a la inestabilidad
de los puntajes. En muchas situaciones de aplicacin de tests, se espera
que el puntaje de un individuo represente no solo su posicin inmediata,
sino tambin la que ocupara durante un cierto tiempo. Por el contrario,
tenemos la expectativa de que otro tipo de medidas psicolgicas varen
en periodos relativamente corto. Siempre que los individuos participan
en un experimento, de modificacin de actitudes por ejemplo, es
esperable que se produzcan cambios de algn tipo y que las medidas
reflejen tales cambios en el comportamiento.
B) Se administra la prueba
Se debe tratar de examinar a todos los participantes en condiciones
uniformes. As, deben intentar reducirse las diferencias generales en el
ambiente en que se administran los tests. Ej. Iluminacin del lugar, nivel
de ruido o confort del lugar.
Es deseable que las instrucciones del test sean lo suficientemente
estandarizadas como para que todos los evaluadores las impartan de la
misma manera y presente los materiales en idntico orden y forma a
todos los examinados. Si bien la estandarizacin debe estar prevista
claramente en el material del test, y correspondera a la instancia de
construccin del mismo, puede presentar variaciones en el momento de
la administracin.
Parte del error de medicin se origina en las fluctuaciones azarosas en la
persona examinada, que aumentan o disminuyen su puntaje.
Distracciones momentneas, preocupaciones de ndole personal y otros
acontecimientos semejantes pueden influir en los puntajes de tests.
C) Se evala la prueba
Al evaluar, otros factores que afectan la confiabilidad. En los tests de
opcin mltiple, los errores que se comenten al evaluarlos, son
puramente mecnicos, Ej. Calificar de forma errnea una respuesta. En
los tests evaluados por PC se elimina esa posibilidad. En los tests de
composicin o ensayo una de las fuentes principales de no-confiabilidad
es que los diferentes profesores utilicen criterios de calificacin distintos.
El error tambin puede originarse por como el docente modifica su
criterio mientras corrige las pruebas y este se va a ver afectado
dependiendo de la posicin casual que ocupa el alumno en el grupo.
si distintos evaluadores deben dar su punto de vista sobre algo es
probable que no coincidan entre s en algunas de las evaluaciones. Ya que
Cuando en el proceso de evaluacin de un individuo interviene de
manera importante el criterio del evaluador se presentan variaciones que
disminuyan la confiabilidad.
Dimensiones de la confiabilidad
Todo factor que incida en el puntaje de un sujeto y que no est relacionado con
lo que el instrumento intenta medir, representa una fuente de error; de manera que
debera haber tantas variedades de confiabilidad de tests, como condiciones que
afectasen las puntuaciones de los mismos. Sin embargo, ninguno de estos aspectos
es universalmente preferible a otro, la eleccin depende del uso a que se destinen las
puntuaciones del test. As es que:
1- Planteo experimental
2- Tratamiento estadstico de los datos
Validez
Se refiere al grado en que un instrumento realmente mide la variable que
pretende medir.
Fuentes de evidencia
Evidencia relacionada con el contenido: Se refiere al grado en que
un instrumento refleja un dominio especfico de contenido de lo que
se mide.
Evidencia relacionada con el criterio: Se establece al validar un
instrumento de medicin al compararlo con algn criterio externo
que pretende medir lo mismo.
Evidencia relacionada con el constructo: Le concierne en
particular el significado del instrumento, esto es, qu est midiendo y
como opera para medirlo. Integra la evidencia que soporta la
interpretacin del sentido que poseen las puntuaciones del
instrumento. Resumiendo: debe explicar el modelo terico emprico
que subyace a la variable de inters.
Validez total: Esta se evala sobre la base de todos los tipos de
evidencia. Cuanto mayor la evidencia de validez de contenido, de
validez de criterio y de validez de constructo tenga un instrumento de
medicin, ste se acercara ms a representar la(s) variable(s) que
pretende medir.
VALIDEZ TOTAL= Validez de contenido + Validez de criterio +
Validez de constructo
Evidencia basada en la estructura interna del test: Indica si las
relaciones entre tems y dimensiones permite confirmar la existencia
de los que permite medir.
Evidencia basada en el proceso de respuesta: Interaccin entre lo
cognitivo y psicometra donde el anlisis de los proceso cognitivos
comprometidos con un proceso de respuesta adquieren importancia
Externos:
Evidencia de las consecuencias de la aplicacin: Las
consecuencias de aplicacin solo es vlido cuando se relaciona con
fuentes de invalidez.
Evidencia convergente o discriminante: Se debe comparar puntajes
obtenidos tanto con otros tests para medir el mismo atributo.
Evidencia de las relaciones entre puntuaciones y criterios
externos:
Correlacin bivariada: Correlacin entre puntuacin obtenida y
puntuacin de algn criterio externo.
Correlacin mltiple: Ponderar la contribucin independiente
realizada por cada variable predictora para la explicacin de un
criterio determinado, as como estimar la contribucin conjunta de
un conjunto de predictores a la explicacin del criterio.
El primer propsito tiene que ver con decisiones que afectan a las
personas a las que se les aplica el test. El autoconocimiento facilitado por
tests sirve a la persona, en primer lugar y, solo marginalmente, a las
instituciones. La clasificacin sirve, primordialmente a las instituciones y se
produce cuando cualquier persona es asignada a una categora clasificatoria
y no a otra. En las situaciones de clasificacin la evidencia de las relaciones
test-criterio debe corroborarse con procedimientos especficos.