Fundamentos de psicometra

Captulo IX

Por: Mgter. Felipe Costales

Quito, Noviembre de 2014

1
 1. Objetivos de aprendizaje

Al final del captulo los estudiantes estarn en

capacidad de:

Explicar el concepto de validez

Describir los diferentes tipos de validez

2
 2. Definiciones

La validez, se refiere a la capacidad que posee un test o

cualquier instrumento, de medir efectivamente lo que est
diseado para medir y no otras cosas.

Un instrumento es vlido en la medida en que las inferencias

realizadas a partir de l sean apropiadas, significativas y tiles. Es
decir, qu tan apropiado es un instrumento para predecir o sacar
inferencias sobre ciertos criterios.

Una medida vlida produce estimaciones correctas de lo que se

est midiendo.

Un test no puede ser vlido si primero no es confiable. Es

imposible que un instrumento haga lo que est diseado a hacer,
si no hay evidencia de la consistencia de sus mediciones.

3
 2. Definiciones

La validez, se enfoca en la precisin con la qu se est midiendo,

la confiabilidad en la consistencia de la medicin.

La validez de un instrumento no se determina de manera aislada,

por el contrario se busca recolectar la mayor cantidad de
evidencia que demuestre el grado en el que est presente.

Existen tres principales fuentes de evidencia de validez:

Evidencia de Validez relacionada con el contenido

Evidencia de Validez relacionada con criterios

Evidencia de Validez relacionada con constructos

4
 3. Fuentes de evidencia

Evidencia relacionada con el contenido:

La validez de contenido se refiere a la capacidad que

posee una muestra de tems de ser representativa del
universo de tems que se pudieran utilizar para disear un
test.

Para establecer este tipo de evidencia, hay que

responder lo siguiente: Son los tems de un test una
muestra representativa de todo lo que se puede preguntar
sobre un tema determinado?.

5
 3. Fuentes de evidencia

Evidencia relacionada con el contenido:

Una opcin para identificar este tipo de evidencia, es

someter al instrumento a un panel de expertos en el tema.

El panel calificar cada tem del test como esencial, til

pero no esencial o no necesaria para el desempeo del
trabajo o habilidad examinada.

Posteriormente, se introducen los datos de las

calificaciones de cada tem en la frmula de la Razn de
Validez de Contenido.

6
 3. Fuentes de evidencia

Razn de Validez de Contenido:

Donde:
RVC = Razn de Validez de Contenido
=Nmero de expertos que eligieron al tem como
esencial
N = Nmero total de expertos

7
 RAZN DE VALIDEZ DE
CONTENIDO CON R
COMMANDER
(PSYCHOMETRIC
PACKAGE)

8
 Ejemplo: se evaluar el tem 1 utilizando un
panel de 5 expertos

Evaluador 1 = esencial
Evaluador 2 = esencial
Evaluador 3 = esencial
Evaluador 4 = til
Evaluador 5 = no necesario

Nmero de evaluadores que consideran al tem

como esencial = 3
CVratio(5,3)
9
 Nmero de expertos que calificaron al tem como esencial

Nmero de expertos

10
 Resultado

11
 3. Fuentes de evidencia

Evidencia relacionada con el contenido:

Finalmente, se analizan los resultados que se han obtenido al

aplicar la RVC a cada uno de los tems del instrumento examinado.

Los valores de la RVC tienen un rango entre -1 a +1. Valores

cercanos a +1 indican que el tem es considerado como esencial por
parte de los expertos. Cualquier valor menor a 0, significa que no
existe en nivel necesario de acuerdo entre los expertos, de que el
tem es esencial para el desempeo en el trabajo o la habilidad
evaluada por el instrumento.

La RVC se enfoca en determinar la validez de contenido de los

tems de un instrumento determinado.

12
 Ejercicio: completar la tabla

ITEM 1 ITEM 2 ITEM 3 ITEM 4 ITEM 5

Experto 1 Esencial Esencial Esencial Esencial Esencial

Experto 2 Esencial Esencial Esencial til til

Experto 3 Esencial Esencial til til til

Experto 4 til Esencial No No Esencial

necesario necesario
Experto 5 No til No No til
necesario necesario necesario

13
 ITEM 1

ITEM 2

ITEMS 3 - 5

ITEM 4

14
 3. Fuentes de evidencia

Evidencia relacionada con criterios:

La validez de criterio busca determinar el grado en que

un instrumento predice o se relaciona (a travs del
coeficiente de correlacin) con un criterio determinado.

rea de estudio A partir de qu se predice Qu se predice

Metodologa Variable Independiente Variable Dependiente

Psicometra Predictor Criterio

15
 3. Fuentes de evidencia

Evidencia relacionada con criterios:

Existen dos clases principales de validez de criterio:

Validez Concurrente: se obtienen los puntajes del predictor y

el criterio simultneamente. Se utiliza para determinar o
diagnosticar el estado actual o existente del criterio.

Validez Predictiva: se obtienen los puntajes del predictor y el

criterio en ocasiones diferentes. Se utiliza para pronosticar el
estado futuro del criterio (seleccin y evaluacin del
desempeo)

16
 3. Fuentes de evidencia

Evidencia relacionada con criterios:

Cuando los puntajes predictores se relacionan con las

puntuaciones criterio, la correlacin resultante se
denomina coeficiente de validez.

Entre mayor sea la correlacin entre predictores y

criterios, ms sabemos sobre el criterio en base al
predictor.

17
 ONET- GUA PARA LA INTERPRETACIN DE
COEFICIENTES DE VALIDEZ
Coeficiente de validez Interpretacin

Mayor a 0,35 Muy til

0,21 0,35 til
0,11 0,20 Depende de las
circunstancias /Utilidad
limitada
Menor a 0,11 Poco til

18
 Validez media Pesos Beta
Familias de trabajos Cog. Perc. Mot. Cog. Mot. R
Directivo (manager) 0,53 0,43 0,26 0,50 0,08 0,53
Oficinista 0,54 0,46 0,29 0,50 0,12 0,55
Vendedor 0,61 0,40 0,29 0,58 0,09 0,62
Personal de seguridad 0,42 0,37 0,26 0,37 0,13 0,43
Personal de servicios 0,48 0,20 0,27 0,44 0,12 0,49
Trabajador de artes y oficios 0,46 0,43 0,34 0,39 0,20 0,50
Trabajador elemental
industrial 0,37 0,37 0,40 0,26 0,31 0,47
Operador de vehculos 0,28 0,31 0,44 0,14 0,39 0,46
Dependiente de ventas 0,27 0,22 0,17 0,24 0,09 0,28
Nota: Cog.= capacidad cognitiva o intelectual general; Perc. = Capacidad general
perceptiva; Mot. = Aptitud general psicomotriz; R = Correlacin mltiple

Reanlisis de Hunter (1981) sobre el trabajo de Guiselli (1979) acerca de

la validez predictiva media. (Juan-Espinosa, 1996).

19
 3. Fuentes de evidencia

Evidencia relacionada con criterios:

20
 DETERMINACIN DE
VALIDEZ PREDICTIVA DE
INSTRUMENTOS DE
SELECCIN DE PERSONAL
EN EXCEL

21
22
23
24
 3. Fuentes de evidencia

Evidencia relacionada con constructos:

Un constructo es un grupo de variables interrelacionadas,

generadas desde un punto de vista terico. Son conceptos
desarrollados dentro de teoras.

La validez de constructo busca establecer un vnculo entre lo

que mide un determinado instrumento y un constructo terico.

En definitiva, hay que determinar el nivel en que un

instrumento es una medida precisa del constructo que se
propone medir.

25
 2. Fuentes de evidencia

Evidencia relacionada con constructos:

Para determinar el nivel de precisin con que un instrumento mide

un constructo, es importante realizar dos comparaciones:

Comparar el nivel de asociacin que tienen las puntuaciones

del instrumento, con puntuaciones obtenidas de otros
instrumentos validados que midan lo mismo. A este tipo de
coeficientes de correlacin se los denomina de validez
convergente (reflejan el nivel de convergencia de los diferentes
puntajes al medir el mismo constructo).

Comparar el nivel de asociacin de los puntajes del

instrumento con puntajes de otros tests que midan constructos
diferentes. Este tipo de coeficientes se denominan de validez
divergente (reflejan el nivel de divergencia de los puntajes al
evaluar constructos no relacionados).

26
 3. Fuentes de evidencia

Evidencia de validez relacionada con constructos:

Luego de recopilar, evaluar y comparar muchsima

informacin, se acumula un cuerpo de evidencia que
apoya la nocin de que un instrumento mide un
constructo psicolgico determinado.

Solamente en esta condicin, podemos afirmar que un

instrumento tiene validez de constructo.

27
 Consideraciones finales

Validez Aparente:

Se refiere a la apariencia de que los tems de un

instrumento son apropiados para el uso que se les
pretende dar.

Se basa en las apreciaciones de los evaluados sobre la

legitimidad y objetividad de los instrumentos con los que
se los evala.

28
 Consideraciones finales

29
 Modelos multivariados de prediccin

Resumen del modelob

Estadsticos de cambio

R cuadrado Error tp. de Cambio en R Sig. Cambio Durbin-

Modelo R R cuadrado corregida la estimacin cuadrado Cambio en F gl1 gl2 en F Watson
1
,988a ,976 ,976 1,64199 ,976 3509,865 3 259 ,000 1,924

a. Variables predictoras: (Constante), Resultados, Desempeo, Actividades

b. Variable dependiente: Alcanzado

ANOVAa
Suma de
Modelo cuadrados gl Media cuadrtica F Sig.
1 Regresin 28389,307 3 9463,102 3509,865 ,000b
Residual 698,301 259 2,696
Total 29087,608 262
a. Variable dependiente: Alcanzado
b. Variables predictoras: (Constante), Resultados, Desempeo, Actividades

30
 Modelos multivariados de prediccin

Resumen del modelog

Error tp. Estadsticos de cambio

R de la Cambio Sig.
R cuadrado estimaci en R Cambio Cambio Durbin-
Modelo R cuadrado corregida n cuadrado en F gl1 gl2 en F Watson
1 ,881a ,776 ,774 2,37271 ,776 573,638 1 166 ,000
2 ,923b ,852 ,850 1,93570 ,076 84,414 1 165 ,000
3 ,931c ,867 ,865 1,83686 ,016 19,235 1 164 ,000
4 ,938d ,880 ,877 1,75233 ,013 17,205 1 163 ,000
5 ,941e ,885 ,881 1,71985 ,005 7,213 1 162 ,008
6 ,944f ,890 ,886 1,68489 ,005 7,793 1 161 ,006 1,895
a. Variables predictoras: (Constante), ORDETAL

b. Variables predictoras: (Constante), ORDETAL, ORLOG

c. Variables predictoras: (Constante), ORDETAL, ORLOG, PLANIFICAC

d. Variables predictoras: (Constante), ORDETAL, ORLOG, PLANIFICAC, INICIATIV

e. Variables predictoras: (Constante), ORDETAL, ORLOG, PLANIFICAC, INICIATIV, MOTIVAR

f. Variables predictoras: (Constante), ORDETAL, ORLOG, PLANIFICAC, INICIATIV, MOTIVAR, CUMPNOR

g. Variable dependiente: DESEMP

31
 REFERENCIAS
Salkind, N.J. (2013). Test and
measurement for peolple (who think
they) hate test and measurement.
California: SAGE Publications Inc.
U.S. Department of Labor (2000).
Testing and assessment: an employers
guide to good practices.

32