PROPRIETI PSIHOMETRICE

FIDELITATEA
Prof. univ. Dr. Mihaela Minulescu

Definiie

Fidelitatea se refer la msurarea lipsit de erori Reflect acurateea i stabilitatea scorurilor la test Poate fi msurat statistic prin utilizarea coeficienului de corelaie

definiie...

Fidelitatea reprezint tradiional: precizia, consistena i stabilitatea msurrii realizate de test". Termenii de consisten i stabilitate continu s fie utilizai i n prezent n legtur cu fidelitatea testelor, avnd sensul de repetabilitate a rezultatelor msurrii. Standards for Educational and Psychological Tests, 1985, definesc fidelitatea ca fiind gradul n care scorurile testului sunt consistente sau repetabile, adic gradul n care ele nu sunt afectate de erorile de msur".

Probleme privind msurarea

Testele ncearc s msoare o trstur sau caracteristic psihologic utiliznd o unitate de msur care este influenat de surse de eroare Scopul msurrii este de a gsi scorul real al persoanei i a reduce eroarea de msurare Eroare standard de estimare, SEE indic ct de mult, n medie, variaz scorul unei persoane de la scorul real al acesteia

consecin

Orice test psihologic este fidel dac ndeplinete urmtoarele cerine:

este lipsit de erori de msur , deci este precis orice persoan obine scoruri egale la test i la o form paralel a acestuia n situaia cnd erorile de msur la cele dou teste pentru orice persoan sunt independente.

erori de msur

erorile de msur sunt aleatoare nu sistematice, deci sunt complet nepredictibile, indiferent de cunotinele pe care le avem despre persoanele msurate sau despre procesul de msurare. n consecin, corect este s nu vorbim despre fidelitatea unui instrument e msur ci despre fidelitatea acelui test aplicat pe o anumit populaie i n anumite condiii.

Forme de fidelitate
metoda test - retest, metoda analizei consistenei interne; metoda formelor paralele; coeficieni de fidelitate interevaluatori;

Tipuri de coeficieni conform tipurilor de forme:

A. Coeficienii de stabilitate - se calculeaz prin metoda test-retest, corelnd scorurile obinute la test i la retest (acelai test aplicat dup un interval de timp). Arat ct de stabile sunt scorurile n timp.

B. Coeficienii de echivalen rezult din metoda formelor paralele, prin corelarea scorurilor obinute la dou teste paralele, administrate aproape n acelai timp. Arat ct de asemntoare sunt cele dou instrumente de msur.

C. Coeficienii consistenei interne - se calculeaz n cadrul analizei consistenei interne, pe baza scorurilor obinute la un test administrat o singur dat. Din aceast categorie fac parte coeficientul a al lui Cronbach, coeficientul 3 al lui Guttman i coeficienii Kuder- Richardson. Ei indic concordana diferitelor pri ale testului.

D. Coeficienii de fidelitate inter evaluatori - se calculeaz pentru teste al cror scor este rezultatul aprecierii subiective fcute de evaluator. Ei arat n ce msur prerile mai multor evaluatori concord ntre ele.

Fidelitatea test - retest

Determin dac scorurile variaz n timp; se msoar prin testarea persoanei n dou momente diferite (interval de timp) i apoi se coreleaz scorurile obinute Problema principal: scorurile sunt influenate de aspecte are in de att de administare ct i de persoana testat Ca urmare, procedura tinde s supraestimeze fidelitatea. Este nevoie de un nivel de corelare de .90 (.80 este un nivel acceptabil al corelaiei)

test-retest: procedur

Metoda test-retest evalueaz gradul n care scorurile obinute la un test de acelai subiect sunt constante de la o administrare la alta. Se procedeaz astfel: (1) Se administreaz testul unui grup de persoane. (2) Dup un interval de timp se administreaz testul, acelorai persoane, n aceleai condiii ca i prima dat. (3) Se calculeaz coeficientul de corelaie liniar ntre scorurile observate n cele dou situaii. Valoarea obinut se folosete pentru estimarea fidelitii testului, considerndu-se c testul este paralel cu el nsui, ceea ce nseamn c ntre cele dou administrri ale sale, scorurile reale ale persoanelor nu s-au schimbat.

test-retest

Coeficientul de corelaie calculat prin aceast metod se numete coeficient de stabilitate. Metoda test-retest este util atunci cnd scorurile reale ale testului msoar caracteristici durabile, generale i specifice, ale persoanelor.

test - retest

Dezavantajul metodei test-retest const n faptul c pretinde dou administrri ale testului, ceea ce necesit timp i cheltuieli materiale

Fidelitatea determinat prin utilizarea unor forme paralele / alternative

Utilizeaz de obicei 2 forme diferite ale aceluiai test; ambele forme sunt date tuturor subiecilor n cadrul aceleiai edine, echilibrnd administarea ca test prim i secundar Dac nu sunt date n acceai zi, se numete forme alternative ntrziate Sunt corelate cele dou scoruri ale aceleiai persoane

forme paralele procedur:

Metoda formelor paralele const n administrarea a dou teste, care reprezint instrumente de msur paralele, la momente foarte apropiate unul de altul i determinarea coeficientului de corelaie liniar ntre scorurile observate ale celor dou forme. Valoarea calculat se numete coeficient de echivalen. Dac cele dou teste sunt paralele i dac pentru fiecare persoan erorile de msur la cele dou administrri sunt variabile aleatoare independente, atunci coeficientul de echivalen coincide cu coeficientul de fidelitate al fiecrui test.

forme paralele: metoda njumtirii

Un caz particular al metodei formelor paralele l constituie metoda njumtirii (split-half). n literatura de specialitate, aceasta este inclus uneori n cadrul analizei consistenei interne.

split-half procedur:

Metoda njumtirii are urmtorii pai:

Se administreaz testul unui lot de persoane. Se mparte testul n dou pri ct mai asemntoare ntre ele. Se calculeaz coeficientul de corelaie ntre scorurile observate la cele dou jumti.

forme paralele -utilitate

Metoda formelor paralele este potrivit n cazul cnd se urmrete msurarea unor caracteristici generale ale persoanelor. Obs. Asemenea caracteristici vor influena n acelai mod scorurile ambelor teste.

Fidelitatea Kuder - Richardson

Msoar statistic consistena intern a testului, formula KR estimnd care este fidelitatea medie dac ai administra testul realiznd toate tipurile de njumtiri posibile Un tip special este KR 20, care realizeaz acelai lucru pentru acele teste unde itemii sunt dihotomici

coeficieni de consisten intern:

Coeficieni de consisten intern indic msura n care itemii testului se refer la acelai lucru. Metoda analizei consistenei interne utilizeaz pentru estimarea fidelitii unui test dispersiile i covarianele scorurilor observate ale itemilor. Se practic o singur administrare a testului. Pe baza scorurilor le itemilor se calculeaz de obicei unul dintre urmtorii coeficieni:

coeficientul Alfa () al lui Cronbach; coeficientul Lambda () al lui Guttman; coeficientul : r20 sau r21 al lui Kuder-Richardson (dac itemii testului sunt binari).

consisten intern utilitate:

Aceti coeficieni sunt utili pentru calculul fidelitii testelor care msoar o caracteristic (trstur) unidimensional. Indic caracterul omogen al itemilor testului sau scalei acestuia.

Coeficieni de fidelitate interevaluatori

n cazul testelor care nu au o cotare obiectiv, cum sunt testele proiective sau cele de creativitate, scorurile subiecilor sunt influenate i de persoana care face evaluarea rspunsurilor. Pentru a verifica n ce msur scorurile testului sunt dependente de cel care a fcut cotarea, se calculeaz coeficientul de corelaie liniar ntre scorurile atribuite acelorai subieci de evaluatori diferii.

Eroarea standard de msurare

Un indice statstic care exprim fidelitatea Indic care este influena fidelitii asupra interpretrii scorurilor testului: Cu ct indicele ESM (SEM) este mai mic cu att este mai mare fidelitatea SEM =DS 1- F

Factori care afecteaz fidelitatea

Numrul de itemi: adugarea de itemi poate crete fidelitatea datorit faptului c se lrgete reprezentativitatea domeniului Formula spearman Brown poate fi utilizat pentru a estima de ci itmei ai nevoie pentru a atinge nivelul dorit de fidelitate Itemi buni i itemi slabi: se realizeaz o analiz de itemi, respectiv o corelare a fiecruia dintre itemi i scorul total al testului, sau modul cum sunt ncrcai de un factor care este asociat testului (trstura int) Atenuarea, reprezint gradul de descretere al fidelitii datorat erorii de msurare Pentru a estima fidelitatea fr nici o eroare de msurare se poate folosi o statistic denumit Corectarea pentru atenuare (de ex., Corelaia real dintre variabile)

Coeficient de corelaie

Calcul statistic care reflect situaia n care dou variabile sunt corelate semnificativ, covariaz; dar chiar i situaia unei corelaii puternice nu ne da dreptul s vorbim despre cauzalitate Coeficient de corelaie: reflect acele puncte care tind sa se grupeze de-a lungul aceleiai linii; corelaia poate fi pozitiv, peste 0, sau negativ, sub zero i evolueaz ntre + 1 i 1
Nivelul de semnificaie statistic al unei corelaii: se caut n tabelul t pentru a afla dac relaia este determinat de altceva dect ans, ntmplare...

Tipuri de corelaii:

Coef. de C. prin momentul produselor, Pearson: gradul de variaie al unei variabile care poate fi estimat din cunoaterea celeilalte variabile Corelaia rho a lui Spearman: afl asocierea dintre dou seturi de ranguri; ambele seturi trebuie s fie dihotomice Corelaie biserial: determin relaia dintre o variabil continu i o variabil dihotomic Corelaie multipl: cnd ai 2 predictori pentru acelai criteriu

Sursele de variaie ale erorii n funcie de tipul de fidelitate:

test - retest : eantionarea timpului forme alternative (aplicare imediat) : eantionarea coninutului forme alternative (la interval mai mare de timp) : eantionare timp i coninut mprirea n dou jumti: eantionarea coninutului Kuder-Richardson: eantionarea coninutului i eterogenitatea acestuia inter evaluatori : diferene de caracteristici ale personalitii evaluatorilor

SEE eroarea standard de estimare

Este deviaa standard a rezidurilor (diferena dintre scorurile reale i cele anticipate) Este o msur a acurateii prediciei: cu ct este mai mare SEE cu att este mai puin acurat predicia

Interpretarea coeficienilor de fidelitate

Cnd avem de ales dintr-o mulime de teste avnd toate celelalte caracteristici egale, este de preferat testul care are cea mai mare fidelitate. Dar, testul cel mai fidel poate fi cel mai scump sau mai dificil de administrat. Dar, caracteristicile testelor sunt rareori egale. Reguli:

Se vor cere nivele nalte de fidelitate testelor folosite pentru a se lua decizii importante asupra persoanelor i celor care mpart indivizii n mai multe categorii pe baza unor diferene relativ mici ntre ei. n selecia profesional, de pild, se vor folosi teste care au coeficieni de fidelitate mai mari dect 0.90.

reguli...

Se vor accepta nivele sczute de fidelitate atunci cnd testele se utilizeaz pentru a lua decizii preliminare, nu finale, i n cazul testelor care mpart persoanele ntr-un numr mic de categorii, pe baza unor diferene individuale mari. Dac un test servete la compararea grupelor de persoane, coeficientul su de fidelitate poate fi mai mic, chiar cuprins ntre 0.6 i 0.7. Dac, testul se folosete pentru compararea persoanelor, una cu alta, coeficientul su de fidelitate trebuie s fie mai mare dect 0.85. n practic se folosesc adesea teste care sunt valide pentru populaia i situaia n care sunt administrate, dar care nu au coeficieni de fidelitate foarte mari

interpretarea coef...2

Nu este posibil s se specifice un nivel minim care s fie impus coeficienilor de fidelitate ai tuturor testelor. n practica obinuit sunt utile urmtoarele recomandri: 1. Se vor cere nivele nalte de fidelitate testelor folosite pentru a se lua decizii importante asupra persoanelor i celor care mpart indivizii n mai multe categorii pe baza unor diferene relativ mici ntre ei. n selecia profesional, de pild, se vor folosi teste care au coeficieni de fidelitate mai mari dect 0,90(J. C. Nunnally, dup Hammond, 1995). 2. Se vor accepta nivele sczute de fidelitate atunci cnd testele se utilizeaz pentru a lua decizii preliminare, nu finale, i n cazul testelor care mpart persoanele ntr-un numr mic de categorii, pe baza unor diferene individuale mari.

interpretarea coef...3
3. Dac un test servete la compararea grupelor de persoane, coeficientul su de fidelitate poate fi mai mic, chiar cuprins ntre 0.6 i 0.7. Dac, ns testul se folosete pentru compararea persoanelor, una cu alta, coeficientul su de fidelitate trebuie s fie mai mare dect 0.85 (Aiken, 1994). Observaii practice: Fidelitatea chestionarelor de personalitate i a celor de interese tinde s fie mai mic dect cea a testelor cognitive (de cunotine, de inteligen, de aptitudini speciale, Aiken, 1994). n general, se ntlnesc de obicei coeficieni de fidelitate cuprini ntre 0.70 i 0.98 (Guilford, 1965). Testele cotate obiectiv care msoar aptitudini cognitive pot furniza, n loturi eterogene de persoane, coeficieni de fidelitate mai mari dect 0.8.

interpretarea coef...4
Testele cotate subiectiv care msoar aptitudini, testele de cunotine i cele care evalueaz performane tipice (de exemplu chestionare de personalitate) au, adesea, coeficieni de fidelitate mai mici dect 0.80 (Traub, 1994). Testele standardizate de cunotine au, n general, o fidelitate mare spre moderat. Testele cu alegere multipl pot avea o fidelitate mai sczut. Coeficientul lor de fidelitate este apropiat de 0.75. n practic se folosesc adesea teste care sunt valide pentru populaia i situaia n care sunt administrate, dar care nu au coeficieni de fidelitate foarte mari.