VALIDEZ DE CONTENIDO Y

JUICIO DE EXPERTOS: UNA

APROXIMACIÓN A SU
UTILIZACIÓN
 Validez de contenido

Cohen & Swerdik Ding y Hershberge Concepto esencial

Qué tan adecuado Componente Los ítems de un

es el muestreo que importante de la instrumento de
hace una prueba estimación de la medición deben ser
del universo de validez de relevantes y
posibles conductas, inferencias representativos del
de acuerdo con lo derivadas de los constructo para un
que se pretende puntajes de las propósito evaluativo
medir. pruebas. particular.
 Posible universo de
reactivos Constructo medido
Será utilizado para el
diagnóstico, la
medición de
- Adecuada Aspectos fundamentales habilidades o la
conceptualización tanto para la estimación medición de
- Operacionalización del como para la desempeño, entre
constructo conceptualización de la otros
validez de contenido
 JUICIO DE EXPERTO
A través Es una
Experiencia
Reputación en
Validez de Opinión de la comunidad
criterios
contenido personas
conocedoras Disponibilidad
del tema
Parcialidad

Cantidad sujeta
al autor

Abarca de 2 –
20 expertos

80% es apto
PASOS PARA REALIZAR UN JUICIO DE
EXPERTOS

Skjong y Wentworht y de Arquer propusieron:

 Preparar instrucciones y planillas
 Seleccionar los
expertos y entrenarlos
 Explicar el contexto
 Posibilitar la discusión
 Establecer el acuerdo entre los expertos por medio del cálculo de
consistencia.
Existen varios métodos para la
obtención de juicios de expertos,
que pueden clasificarse según si la
evaluación se realiza de manera
individual o grupal.
 Método de
agregados
individuales

Individuales

Método Delphi

Métodos

La Nominal

Grupales

El consenso

La precisión de los juicios según Stewart, Roebber y Bosart, (1997)

depende
tanto de las características de los jueces y de su experiencia, como
de las características de la tarea.
 GUÍA PARA LA REALIZACIÓN DE UN
JUICIO DE EXPERTO
Elaboración
de
Calcular la conclusiones
concordancia
Diseño de entre jueces
planillas Importante
Establecer los para la
pesos descripción
diferenciales Kappa y
Especificar el psicométrica
objetivo de la de las Kendall
En relación de la prueba
Explicitar prueba dimensiones con los
dimensiones e objetivos
Selección de indicadores
Se realiza
los jueces
cuando hay
Definir el pesos
objetivo La proporción
Juez evalúa: de información diferentes
• Relevancia genera:
Mínimo de 5
• Suficiencia • >
jueces
Finalidad del • Pertinencia especificidad
objetivo • >
contextualiza
ción
ESTADÍSTICOS PARA ANÁLISIS

Para determinar el grado de acuerdo entre los jueces se han utilizado

diferentes procedimientos:
 Calcular el porcentaje de acuerdo
 Medidas de correlación (Índices de acuerdo)
 Coeficiente de Kappa
 Weighted k-coefficient
 Coeficiente de Kendall
Recomendaciones

 Dentro del juicio de expertos que no pueden ser controlados por el

investigador, como por ejemplo la complejidad o el nivel de dificultad de la
tarea.
 El investigador debe propiciar el contexto adecuado para obtener la mayor
cantidad de información posible de los jueces expertos y solicitar opiniones
adicionales.
 Recordar que aunque una prueba obtenga una muy buena evaluación de
los jueces y un alto índice de concordancia, debe estar en continua revisión y
mejoramiento.