Validez y Confiabilidad de Instrumentos

Profesor Jorge Fabres Campos

REQUISITOS DEL INSTRUMENTO DE MEDICIN

 Validacin?

Controlar sesgos

Controlar variables confusas

Es un proceso metodolgico que intenta

Generar el mejor proceso estndar

Interpretar de mejor modo los procedimientos realizados

VALIDEZ

La validez, se refiere al grado en que un instrumento realmente mide la variable que pretende medir.

Validez Total

Validez de Contenido
Validez de Criterio Validez de Constructo

Validez de Contenido
Se refiere al grado en que un instrumento refleja un dominio especfico de contenido de lo que se mide. Es el grado en que la medicin representa el concepto medido. Un instrumento de medicin debe tener representados a todos los items del dominio de contenido de las variables a medir.

Validez de Criterio
La validez de criterio establece la validez de un instrumento de medicin comparndola con algn criterio externo. Este criterio es estndar con el que se juzga la validez del instrumento . Entre los resultados del instrumento de la medicin se relaciona ms al criterio, la validez del criterio ser mayor.

Validez de Constructo

Es posiblemente la ms importante sobre todo desde una perspectiva cientfica y se refiere al grado en que una medicin se relacione consistentemente con otras mediciones de acuerdo con hiptesis derivadas tericamente y que conciernen a los conceptos que estn siendo medidos.

Etapas de la Validez de Constructo

Relacin terica entre conceptos y el marco terico

Se relacionan ambos conceptos y se analiza

Interpretacin de la evidencia emprica

El proceso de validacin de un constructo est vinculado con la teora.

No es posible llevar a cabo una validacin de constructo, a menos que exista un marco terico que soporte a la variable en relacin con otras variables

Factores que afectan la confiabilidad y validez

Improvisacin. Instrumentos no contextualizados. Instrumento inadecuado a las personas a las que se le aplica. Condiciones en que se aplica el instrumento

Formas de Medicin de Confiabilidad

Medida de estabilidad (confiabilidad por test-retest)

Un mismo instrumento de medicin es aplicado dos o ms veces a un mismo grupo de personas, despus de un perodo de tiempo

Si la correlacin entre los dos resultados de las diferentes aplicaciones es altamente positiva, el instrumento se considera confiable.

Se determina mediante el clculo coeficiente de correlacin de Pearson

de

Mtodos de forma alternativa o paralelas:

Este procedimiento analiza dos equivalente de instrumentos.

ms

versiones

Las versiones son similares en contenido, instrucciones, duracin y otras caractersticas

Las versiones, son administradas a un mismo grupo de personas dentro de un periodo de tiempo relativamente corto. El instrumento es confiable si la correlacin entre los resultados de amplias administraciones e significativamente positiva.

Los patrones de respuesta debe variar poco entre las aplicaciones

Mtodo de mitades partidas:

Requiere solo una aplicacin de la medicin

El conjunto total de itemes es dividido en dos mitades y la puntuacin o resultados de ambas son comparados.

Si el instrumento es confiable las puntuaciones de ambas mitades deben estar fuertemente correlacionadas. Un instrumento con baja puntuacin en una mitad tendr que mostrar tambin una baja puntuacin en la otra mitad.

Criterio de Confiabilidad
Coeficiente alfa de Cronbach Requiere de una sola administracin del instrumento. Produce valores que oscilan entre cero (0) y uno (1). Aplicable a escala de varios valores posibles.

Su frmula determina el grado de consistencia y precisin Escala de valores -1 a 0: No es confiable 0,01 a 0,49: Baja confiabilidad 0,5 a 0,75: Moderada confiabilidad 0,76 a 0,89: Fuerte confiabilidad 0,9 a 1: Alta confiabilidad

Valor del coeficiente Cronbach para determinar la confiabilidad del instrumento, resultado de confiabilidad que puede ser expresado en %.

:Nmero de tems de la prueba

:Es la varianza de los tems

:Varianza de la prueba total

JUICIO DE EXPERTOS

Se entiende por experto tanto al individuo en s como a un grupo de personas u organizaciones capaces de ofrecer valoraciones conclusivas de un problema en cuestin y hacer recomendaciones respecto a sus momentos fundamentales con un mximo de competencia.

ETAPAS DEL MTODO DE EVALUACIN DE EXPERTOS

Elaboracin del objetivo

Seleccin de los expertos

Elaboracin del cuestionario o gua.

Eleccin de la metodologa.
Ejecucin de la metodologa.

Procesamiento de la informacin

Criterios para la seleccin de los expertos

Competencia
Disposicin a participar en el proceso
Capacidad de anlisis

Capacidad de Autocrtica
Efectividad de su actividad profesional.

Competencias de un Experto
La competencia de un experto esta dada por el nivel de calificacin en una determinada rama o disciplina de la ciencia o el arte y se encuentra determinada por la actividad cientfico-investigativa y profesional del especialista el nivel y profundidad de conocimientos de los logros de la ciencia y la tcnica en el mundo la comprensin del problema que se investiga las perspectivas de su desarrollo.

MTODOS PARA DETERMINAR LA COMPETENCIA DE UN EXPERTO

Autovaloracin

Coeficiente de competencia K

Efectividad de la actividad profesional

El coeficiente de competencia k

La competencia de los expertos se determina por el coeficiente K, el cual se calcula de acuerdo con la opinin del candidato sobre su nivel de conocimiento acerca del problema que se esta resolviendo y con las fuentes que le permiten argumentar sus criterios.

El experto deber marcar una cruz en la casilla que estime pertinente 0 1 2 3 4 5 6 7 x 8 9

Kc 7 (0.1) 0.7 para una pregunta determinada de la encuesta. El Kc de cada experto se calcula promediando los valores de cada pregunta.

El valor 0 indica absoluto desconocimiento de la problemtica que se evala El valor 1 indica pleno conocimiento de la referida problemtica. .

El coeficiente K se calcula de la siguiente manera

Kc Ka K -------------------2 Ka: Es el coeficiente de argumentacin o fundamentacin de los criterios del experto determinado como resultado de la suma de los puntos alcanzados a partir de una tabla patrn.

Cul es la calidad de los instrumentos que aplicamos? De qu forma pueden ser ms confiables y vlidos en una institucin educativa?