Sunteți pe pagina 1din 56

a Validar

Validacin de Instrumentos de
Investigacin en Ciencias
Sociales
Dra Liliana Sumarriva B.

Validacin
Controlar sesgos
Controlar variables confusas
Es un proceso
metodolgico
que intenta

Generar el mejor proceso estndar

Interpretar de mejor
modo los
procedimientos
realizados

Requisitos de la Medicin
La confiabilidad y validez son ms difciles
de lograr mientras ms abstracto sea el
constructo que se desea medir (motivacin,
actitudes, inteligencia, valores, etc.)
En este sentido, toda medicin est
expuesta a un margen de error de
medicin,
por lo que sta nunca es
perfecta.
La manera de controlar el error de la
medicin es calculando la confiabilidad y
validez de los instrumentos de medicin.

Requisitos de
la Medicin

Validez
Validez de
Contenido

Validez de
Criterio

Confiabilidad
Validez de
Constructo

Factores Que Atentan Contra La Validez Y Confiabilidad

FACTORES QUE AFECTAN A LA VALIDEZ Y


CONFIABILIDAD

La improvisacin en la medicin y seleccin del


instrumento.
Utilizacin de instrumentos extranjeros sin previa
adaptacin y estandarizacin.
Instrumento inadecuado a las personas que se les aplica.
Condiciones en las que se administra el instrumento de
medicin.

La improvisacin. (Se tienen que conocer muy bien


las variables de la investigacin).

Factores que
pueden afectar
la confiabilidad
y la validez

Aplicacin de instrumentos generados en el


extranjero que no han sido validados para nuestro
contexto.
El instrumento resulta inadecuado para las personas
a quienes se les aplica. (Se utiliza un lenguaje
elevado para el sujeto participante, no se toma en
cuenta diferencias en cuanto a gnero, edad,
conocimientos, memoria, nivel ocupacional y
educativo, motivacin para contestar, capacidades
de conceptualizacin y otras diferencias en los
participantes, son errores que llegan a afectar la
validez y la confiabilidad del instrumento de
medicin).
Quien realiza una investigacin debe siempre
adaptarse a los sujetos participantes y no stos a l
o ella, ya que es necesario brindarles todo tipo de
facilidades.

Factores que
pueden afectar
la confiabilidad
y la validez

Diversas cuestiones vinculadas con los estilos


personales de los sujetos participantes, tales como:
deseabilidad social (tratar de dar una impresin muy
favorable a travs de las respuestas), tendencias a
sentir con respecto a todo lo que se pregunta, dar
respuestas
inusuales
o
contestar
siempre
negativamente.

Las condiciones en las que se aplica el instrumento


de medicin (el ruido, la iluminacin, el frio, una
encuesta de casa en casa, un instrumento
demasiado largo o tedioso, una encuesta telefnica
seguida de otra y extempornea, el horario, etc.).

La validez y la confiabilidad no se asumen, se prueban.


Supongamos que vamos a probar un arma con tres
tiradores. Cada uno debe realizar cinco disparos, entonces:

Instrumento de
medicin

Tirador 1
Ni confiabilidad ni validez

Tirador 2
Confiabilidad pero no validez

Tirador 3
Confiabilidad y validez
Ejemplo de Bostwick y Kyte, 2005

Instrumento
de medicin

VALIDEZ
Indica la capacidad del instrumento
para medir las cualidades para las
cuales ha sido construida y no otras
parecidas.
"Un instrumento tiene validez
cuando verdaderamente mide lo que
afirma medir".

Tipos:
Validez de contenido: se refiere al grado en que un
instrumento refleja un dominio especfico de contenido

Instrumento

de lo que mide.

de medicin

Una prueba de operaciones aritmticas no tendra


validez de contenido si slo incluye problemas de resta y
excluye problemas de suma, multiplicacin y divisin.
Si el dominio de un instrumento es demasiado estrecho
con respecto al dominio de la variable, el primero no
representar a esta.

EVIDENCIA RELACIONADA CON EL


CONTENIDO
Se determina hasta donde los itemes
de
un
instrumento
son
representativos de las variables que
se
desea
medir
(grado
de
representatividad). Palella y Martins;
2006

No puede ser
expresada
cuantitativame
nte (Ruiz;
2003)

Mtodo: Validez de Contenido


Tcnica: Juicio de Expertos
tems

1
2
4
5
6
7
8
9
10
11

Congruenci
a

Claridad

Tendenciosida
d

Si

No

Si

No

Si

No

.
.
.
.
.
.
.
.
.
.

.
.
.
.
.
.
.
.
.
.

.
.
.
.
.
.
.
.
.
.

.
.
.
.
.
.
.
.
.
.

.
.
.
.
.
.
.
.
.
.

.
.
.
.
.
.
.
.
.
.

Observaciones

__________________________
__________________________
__________________________
__________________________
__________________________
__________________________
__________________________
__________________________
__________________________
__________________________
__________________________

1) VALIDEZ DE CONTENIDO JUICIO DE EXPERTOS


Experto: Persona que trabaja en el rea de
estudio y tiene conocimiento de las variables y
caractersticas.
Ejm: docentes, jefes de servicio, jefes de
departamentos, etc (no necesariamente que
tenga un cargo directivo sino el conocimiento)
Mnimo cinco, mejor > o = 8 expertos.
* Villemeur menciona que en algunas ocasiones
pueden utilizarse ms de ocho expertos.

VALIDEZ DE CONTENIDO: JUICIO DE


EXPERTOS
Se aplica:
1. Preguntas cuyas respuestas se valoran
con puntajes.

Ejm: conocimiento, actitud, calidad de


vida laboral, autoestima, satisfaccin,
desgaste profesional, etc (variables
blandas)

VALIDEZ DE CONTENIDO: JUICIO DE


EXPERTOS
2. Fichas o guas cuyos aspectos o
tems no reciben puntuaciones.
Ejm: fichas clnicas, instrumentos
que registran aspectos objetivos,
historias clnicas, etc.

Ejemplos de preguntas para jueces

VALIDEZ DE CONTENIDO: JUICIO


DE EXPERTOS
Utilizando la prueba binomial se determina
la
significacin
estadstica
de
la
concordancia entre los evaluadores para
cada pregunta, cuando el valor de p < 0,05
se
dice
que
existe
concordancia
significativa entre expertos en esa
pregunta.
No procede obtener el promedio de valores
de p.
Si alguna pregunta del cuestionario de

FORMULA PRUEBA
BINOMIAL

Ck, i n . pk . q
(n- k)

Ck, i n

(n-K)!K!

n!
. pk . q

(n- k)

N= nmero de jueces expertos

K= n de ceros
p=posibilidad de ocurrencia
q=1p

Tab
la b
inom
ial

2) VALIDEZ DE CRITERIO
Se establece al validar un instrumento
de medicin al compararlo con algn
criterio
externo
que
pretende
medir lo mismo.
Puede ser Validez Concurrente (criterio
se fija en el mismo momento) y
Predictiva (se fija en el futuro)

Tipos:

Instrumento de
medicin

Validez de criterio: establece la validez de un


instrumento de medicin al compararla con algn
criterio externo que pretende medir lo mismo .
La validez de criterio se establece al validar un
instrumento de medicin cuando se compara con
algn criterio externo que pretende medir lo mismo.

Tipos:
Validez de criterio:
Ejemplo: supongamos que Fernando trata de medir el

Instrumento de

grado en que es aceptado por Laura. Entonces decide


que va a tomarla de la mano y observar su reaccin.

medicin

Supuestamente, si ella no retira la mano, esto indicara


cierta aceptacin, pero para asegurarse que su medicin
es vlida decide utilizar otra forma de medicin adicional,
por ejemplo, mirarla fijamente sin apartar la vista de sus
ojos, en apariencia, si Laura le sostiene la mirada, esto
sera otro indicador de aceptacin. As, su medicin de
aceptacin se valida mediante dos mtodos al comparar
dos criterios.

Validez de criterio: Si diferentes instrumentos o criterios


miden el mismo concepto o variable, deben arrojar
resultados similares. Bostwick y Kyte (2005) lo expresan
de la siguiente forma: Si hay validez de criterio, las
puntuaciones obtenidas por ciertos individuos en un

Instrumento de

instrumento deben estar correlacionadas y predecir las


puntuaciones de estas mismas personas logradas en otro

medicin

criterio.
Pregunta: en qu grado el instrumento comparado con
otros criterios externos mide lo mismo?, o qu tan
cercanamente las puntuaciones del instrumento se
relacionan con otro(s) resultado(s) sobre el mismo
concepto?

3) VALIDEZ DE CONSTRUCTO
Desde la perspectiva cientfica es la ms
importante, por lo que se refiere a que tan
exitosamente un instrumento representa a
un concepto terico.

El proceso est relacionado con la teora y se


debe contar con una marco terico que
soporte la variable en relacin con otras
variables.
Se evala:
Mtodo de grupos extremos
Validez convergente
Validez divergente
Anlisis factorial

Validez de constructo: este proceso est vinculado con


la teora. No es conveniente llevar a cabo tal validacin, a
menos que exista un marco terico que soporte la
variable en relacin con otras variables. No tiene que ser

Instrumento

una teora extensa, pero s una investigacin que haya


demostrado que los conceptos se relacionan.

de medicin

La validez de constructo incluye tres etapas (Carmines y


Zeller, 1991):
1.Se establece y especifica la relacin terica entre los
conceptos (sobre la base del marco terico).
2.Se

correlacionan

los

conceptos

se

analiza

cuidadosamente la correlacin.
3.Se interpreta la evidencia emprica de acuerdo con el

Validez de constructo: cuanto ms elaborada


y comprobada se encuentre la teora que apoya

Instrumento de
medicin

la hiptesis o variables de inters, la validacin


del constructo arrojar mayor luz sobre la
validez general de un instrumento de medicin.
Pregunta: el concepto terico est realmente
reflejado en el instrumento?, qu significan las
puntuaciones del instrumento?, el instrumento
mide el constructo y sus dimensiones?, por qu
s o por qu no?, cmo opera el instrumento?

Validez para respuestas


politmicas
Mtodo Item test
Coeficiente de correlacin r de
Pearson/ (Coeficiente Correlacin
Intraclase)
n Xy-( x)( y)
r=
(n x2)- ( x)2 (n y2)- ( y)2

Si r 0,20 el item es vlido


(Garrett H.)

Informe
de la
validacin
del
instrument
o

p = proporcin de sujetos con una de las dos modalidades


posibles de la variable Y.
q= proporcin de sujetos con la otra modalidad.
Xp= media en X de los sujetos cuya proporcin es p.
Xq= media en X de los sujetos cuya proporcin es q.
X= media en X de todos los sujetos.
sx = desviacin tpica en X de todos los sujetos.

r 0,20 el item es vlido


(Garrett H.)

Validez para respuestas dicotmicas


Mtodo item test:
Coeficiente de Correlacin Biserial
Puntual

VALIDEZ TOTAL
Validez de contenido.
Consulta a expertos.
Validez de criterio.
Correlaciona su medicin con el criterio.
Validez Constructo.
Anlisis factorial

VALIDEZ CONTENIDO

VALIDEZ DE CRITERIO

VALIDEZ DE CONSTRUCTO
VALIDEZ TOTAL

VALIDEZ LOGICA

VALIDEZ TOTAL

CONFIABILDAD
Grado en que la aplicacin repetida de un
instrumento al mismo individuo u objeto
produce
resultados
consistentes
y
coherentes. (Hernndez, 2010)
Grado
de
congruencia
con
que
un
instrumento mide el atributo para el que fue
diseado (Polit, 2000
Si los resultados no son coherentes no se
puede confiar en ellos. A menor variacin
en
las
mediciones
repetidas
mayor
confiabilidad.

Instrumento
de medicin

Interpretacin del coeficiente de Confiabilidad

Rangos

Magnitud

0.81 a1.00

Muy alta

0.61 a 0.80

Alta

0.41 a 0.60

Moderada

0.21 a 0.40

Baja

0.01 a 0.20

Muy Baja

Aceptable

La confiabilidad est en relacin


directa
con
la
extensin
del
instrumento:
n<10
n>30

aumenta el error de
medicin
se incrementa la

Error
Estndar
de
Medicin
: EEM

1
5

Clculo de la Confiabilidad
Vara de acuerdo al nmero de tems
que incluya el instrumento de medicin,
cuntos ms tems, mayor confiabilidad.
Formas:
1.Estabilidad (prueba Test Retest)
2.Equivalencia
3.Congruencia o consistencia interna

CONFIABILIDAD
Estabilidad temporal: Es la concordancia obtenida
entre los resultados del test al ser evaluada la
misma muestra por el mismo evaluador en dos
situaciones distintas (fiabilidad test-retest).
Concordancia
interobservadores.
Nivel
de
acuerdo obtenido al ser evaluada la misma
muestra en las mismas condiciones por dos
evaluadores distintos o en diferente tiempo,
(fiabilidad interobservadores- ejemplo coeficiente
kappa).

CONFIABILIDAD

Consistencia Interna:
Se refiere al nivel en que los diferentes tems o
preguntas de una escala estn relacionados
entre s.
Esta homogeneidad entre los tems nos indica
el grado de acuerdo entre los mismos y, por
tanto, lo que determinar que stos se puedan
acumular y dar una puntuacin global.

Consistencia Interna
Requiere sola administracin del
instrumento
Se calcula el coeficiente:
Coeficiente Alfa de Crombach: tems
politmicos
Coeficiente Kudder Richardson (KR-20):
tems dicotmicos

El valor del coeficiente varia de 0 a 1,


valores ms elevados indican mayor
nivel de consistencia interna.
Coeficiente > 0.70 (Aceptable)

SUJETOS

ITEMS
1

4 5 6

..

TOTAL

s2K

s2T

1
2

n
VARIANZAS

s21 s22 s23

s2i = s21 + s22 + s23 + + s2K

Confiabilidad para respuestas


politmicas
Coeficiente alfa de CRONBACH

s i
k

1 2
s T
k 1

Donde:
s2i = varianza de cada tem
s2T = varianza de los puntajes totales del instrumento
k = nmero de tems del instrumento
*En Excel las varianzas se hallan con la
opcin VAR

ALFA DE CROMBACH
Se trata de un ndice de consistencia
interna que toma valores entre 0 y 1
y que sirve para comprobar si el
instrumento que se est evaluando
recopila informacin defectuosa y
por tanto nos llevara a conclusiones
equivocadas o si se trata de un
instrumento fiable que hace
mediciones estables y consistentes.

CALCULO COEFICIENTE ALFA DE CROMBACH


PERSONAL DE MANTENIMIENTO

ENCUESTADO

E1
E2
E3
E4
E5
E6
Media Xi
Calculo

P1

P2

P3

P4

P5

P6

P7

POLITICAS MTTO.

P8

P9

P10

P11

P12

P13

SISTEMA DE INFORMACIN

P14

P15

P16

P17

P18

P19

CONDICIN DE LOS EQUIPOS

P20

P21

P22

P23

P24

P25

P26

P27

P28

1
1
1
1
4
4
4
4
4
1
4
1
1
1
4
4
4
4
4
4
4
4
4
4
4
4
4
4
2
3
2
3
1
3
4
1
2
1
3
1
1
2
1
2
3
1
1
3
1
1
1
2
2
3
3
4
4
4
4
4
4
4
4
4
4
4
4
2
2
2
2
4
4
4
4
4
4
4
4
4
4
4
4
4
4
4
4
4
4
4
4
4
4
4
4
4
4
4
4
4
4
4
3
3
3
3
4
4
4
4
4
4
4
4
4
4
4
4
3
2
3
3
3
3
3
4
4
4
4
3
3
3
4
3
4
3
4
4
4
2
4
4
4
4
4
4
4
4
4
4
4
4
4
4
4
4
4
4
4
4
4
4
4
4
4
4
4
4
3,17 3,33 3,17 3,33 3,50 3,83 3,83 3,17 3,50 2,83 3,67 2,50 2,50 2,83 3,17 3,67 3,83 3,33 3,17 3,50 3,33 3,17 3,50 3,50 3,67 3,83 3,83 3,67
S1

S2

S3

S4

S5

S6

S7

S8

S9

S10

S11

S12

S13

S14

S15

S16

S17

S18

S19

S20

S21

S22

S23

S24

S25

S26

S27

S28

Varianza 1,47 1,22 1,47 1,22 1,25 0,14 0,14 1,47 0,58 1,81 0,22 1,58 1,58 1,47 1,47 0,56 0,14 1,22 1,14 0,25 1,22 1,14 1,25 0,58 0,56 0,14 0,14 0,56
DOCUMENTACIN
ORGANIZACIN DE MANTENIMIENTO
GESTIN DE MATERIALES
CONTRATOS
ENCUESTADO P29 P30 P31 P32 P33 P34 P35 P36 P37 P38 P39 P40 P41 P42 P43 P44 P45 P46 P47 P48 P49 P50 P51 P52 P53 P54 P55 P56
E1
4
4
4
4
4
4
4
4
4
4
4
4
4
3
3
4
3
3
3
1
3
4
4
4
4
4
3
4
E2
1
1
1
2
3
1
2
3
2
3
4
4
3
1
1
2
1
3
2
1
1
3
1
2
1
2
1
2
E3
2
4
2
4
4
2
4
4
2
2
3
4
4
4
4
4
4
4
4
4
4
4
4
4
3
4
4
4
E4
4
3
4
4
4
4
4
3
3
4
3
4
4
3
4
3
4
3
4
4
4
4
4
4
2
4
4
4
E5
2
3
3
3
4
4
3
3
3
3
4
4
4
3
3
3
3
4
4
3
3
3
4
4
3
3
4
4
E6
4
4
4
4
4
3
4
4
4
4
4
4
3
4
4
4
4
4
4
4
4
4
4
4
4
4
4
4
Media Xi
2,83 3,17 3,00 3,50 3,83 3,00 3,50 3,50 3,00 3,33 3,67 4,00 3,67 3,00 3,17 3,33 3,17 3,50 3,50 2,83 3,17 3,67 3,50 3,67 2,83 3,50 3,33 3,67

Calculo

S29

S30

S31

S32

S33

S34

S35

S36

S37

S38

S39

S40

S41

S42

S43

S44

S45

S46

S47

S48

S49

S50

S51

S52

S53

S54

S55

S56

Varianza 1,58 1,17 1,36 0,61 0,25 2,03 0,69 0,36 0,92 0,81 0,22 2,25 1,58 1,03 1,14 0,67 1,58 0,28 0,69 2,25 1,17 0,47 1,25 0,58 1,83 0,69 1,47 0,56
PLANIF. Y PROGRAM.

INDICADORES DE MANTENIMIENTO

ENCUESTADO P57 P58 P59 P60 P61 P62 P63 P64 P65 P66 P67 P68 P69 P70 P71 P72 P73

Total

(xi-X)2

E1

244

E2

148

9409

E3

267

484

E4

276

961

E5

245

E6

290

2025

245

12880

Media Xi
Calculo

3,67 3,83 3,17 2,83 3,33 3,33 3,67 3,50 3,17 3,00 3,50 3,17 3,83 3,67 3,17 3,33 2,67
S57

S58

S59

S60

S61

S62

S63

S64

S65

S66

S67

S68

S69

S70

S71

S72

S73

Varianza 0,47 0,39 1,14 2,06 0,58 0,81 0,25 0,36 1,25 0,36 0,28 0,92 1,92 0,92 0,47 1,33 2,25

Si
57,67

= 0,99

Clculo de confiabilidad.
n

= (nmero total de encuestados) = 6

si = (R1 - Xi) + (R2 - Xi) + (R3 - Xi) + . + (Rn - Xi) / n


S1 = (1 - 3,17) + (2 - 3,17) + (4 - 3,17) + (4-3,17) + (4 - 3,17) + (4-3,17) / 6 = 1,47
CALCULANDO:
St = (X - X) / n , sustituyendo se obtiene :
St = 12880 / 6
St = 2146,67
= ( K / K 1 ) * ( 1-( si / st))
= ( 73 / 73 1 ) * ( 1-( 57,67 / 2146,67))
= (73 / 72 ) * ( 1-( 0,02686))
= ( 1,013 ) * ( 0,973)

= 0,985

CLCULO CON EL SPSS


V.15

Obtencin de datos

Resultados
Como se puede
apreciar, el
resultado tiene
un valor de .
977, lo que
indica que este
instrumento
tiene un alto
grado de
confiabilidad,
validando su
uso para la
recoleccin de
datos.

Confiabilidad para respuestas


dicotmicas
Frmula 20 de KUDER RICHARDSON
(Frmula 20 K R)

1
k 1
r Donde:
=
K-R
piqi = varianza de cada
tem
s2T = varianza de los
puntajes totales
k = nmero de tems del
instrumento

pi q i
2
s T

st 2 p.q
k
rtt
*
k 1
st 2

__

xi x

st 2
n

p=personas que responden


afirmativamente a cada tem.
q=personas que responden
negativamente a caca tem.
.

*En Excel los valores de piqi se hallan con la opcin

Clculo de confiabilidad.
Matriz de datos de instrumento de 6 items aplicado a 15 unidades de estudio
__

PREGUNTAS o TEMS

PUNTAJE TOTAL (xi)

(xi-X)2

ENCUESTADO

P1

P2

P3

P4

P5

P6

E01

1,96

E02

0,16

E03

0,16

E04

0,16

E05

0,16

E06

0,36

E07

6,76

E08

5,76

E09

2,56

E10

1,96

E11

0,36

E12

0,16

E13

0,36

E14

0,16

E15

2,56

TOTAL

12

10

11

10

51

23,60

MEDIA

0,80

0,67

0,73

0,67

0,40

0,13

3,40

0,80

0,67

0,73

0,67

0,40

0,13

0,20

0,33

0,27

0,33

0,60

0,87

p.q

0,16

0,22

0,20

0,22

0,24

0,12

1,16

x 51 / 15 3.4

st 2 23,6 / 15 1,57
2
st
p.q
k
rtt
*
k 1
st 2

6 1,57 1,16
rtt
*
6 1
1,57

rtt=0,31

TIPOS DE CONFIABILIDAD
MTODO

TCNICA

PROPSITO

Test/retest

Coeficiente r
correlacin de
Pearson

Consistencia en el
tiempo de los
puntajes

Formas Equivalentes

Coeficiente r
correlacin de
Pearson

Estabilidad Temporal,
consistencia de las
respuestas.

Divisin por dos


mitades

Pearson/SpearmanBrown.
Ruln
Guttman

Homogeneidad de los
itemes al medir el
constructo

Anlisis de
homogeneidad de los
Itemes

KR 20

Coeficientes de
fiabilidad como
consistencia interna
para itemes
dicotmicos (KR20).

Alfa de Cronbach

Homogeneidad de los
itemes con escala
tipo Lickert.

Gracias
SELECCIONAR SOLAMENTE
LO QUE VAMOS A UTILIZAR

S-ar putea să vă placă și