Documente Academic
Documente Profesional
Documente Cultură
Statm 08 An Itemi
Statm 08 An Itemi
Uneori indicele de dificultate este calculat i ca procent al rspunsurilor greite, ceea ce nu modific
dect optica nu i raionamentele cu privire la acest indicator.
2
Referinele sunt la SPSS v22
1
2/20
Actualizat la: 06.05.2014 13:28
imaginea analizei de frecvene pentru un item oarecare, i_01, al unui test cu 22 de itemi, unde
valoarea 0 nseamn rspuns greit iar valoarea 1, rspuns corect.(3)
Indicele de dificultate se citete pe coloana Percent, dac variabila nu are valori lips,
i pe coloana Valid Percent, dac exist valori lips. n cazul nostru, indicele de dificultate al
itemului 01 este de 81.8% (0.81).
2. Indicele de discriminare
Procentajul rspunsurilor corecte (indicele de dificultate) nu este o condiie suficient
pentru a judeca calitatea unui item. La fel de important este ca numrul rspunsurilor corecte
la un item s fie n legtur cu nivelul abilitii (sau trsturii, dac este un test de
personalitate) pe care intenionm s o msurm cu acel instrument. Acest aspect este surprins
de indicele de discriminare. Dac cei care rspund corect (sau n sensul trsturii, pentru un
test de personalitate), la un anumit item, au un nivel ridicat al abilitii (trsturii), n timp ce
cei care rspund greit au nivel sczut, sau dac ambele grupuri au acelai nivel al abilitii
(trsturii), atunci este clar c itemul respectiv este, fie formulat greit, fie msoar altceva
dect se presupune c msoar.
Un item care dispune de capacitate de discriminare are un procentaj al rspunsurilor
corecte mai mare pentru subiecii care obin rezultate mai mari la nivelul scorului global, i un
procentaj mai mic pentru subiecii care obin o valoare mai mic la scorul global. n absena
unui criteriu extern de validare a rspunsului, scorul global, obinut, s zicem, prin nsumarea
rspunsurilor corecte, este utilizat drept criteriu de discriminare. Pentru calcularea indicelui de
discriminare se procedeaz n felul urmtor:
se calculeaz scorul total;
se formeaz dou grupuri distincte, fiecare reprezentnd un anumit procent
din subiecii evaluai, aflai la extremele distribuiei. Procentul selectat este
arbitrar. Cu ct este mai mic, cu att indicele de discriminare este mai mare
dar, n acelai timp, mai puin sigur. De aceea, se recomand un selectarea
unui procent cuprins ntre 25% i 33%, care reprezint un compromis
rezonabil.
odat grupurile selecionate, se poate calcula un indice de discriminare,
simbolizat cu "D", dup urmtoarea formul:
D
unde:
U
L
nU nL
Dac numrul subiecilor din cele dou grupuri extreme este egal, atunci D=(U-L)/n.
3
3/20
Actualizat la: 06.05.2014 13:28
4/20
Actualizat la: 06.05.2014 13:28
i apoi, dup acionarea butonului Old and New Values: declarm valorile, aa cum se
vede n caseta de mai jos
n urma acestei operaii am obinut variabila "grup", ale crei valori, 1, 2 sau 3,
marcheaz apartenena subiecilor la unul dintre cele trei grupe valorice.
d) Declarm mprirea fiierului cu date n trei categorii de subieci, cu procedura
Data/Split File, aa cum se vede n imaginea de mai jos.
5/20
Actualizat la: 06.05.2014 13:28
Efectul acestei aciuni este acela c, orice prelucrare vom face cu SPSS n continuare,
aceasta va fi efectuat separat pentru fiecare din cele trei categorii separate prin valorile
variabilei "grup".
e) n fine, acum se poate rula procedura Frequencies din meniul Statistics, pentru
variabila i_01. Datorit efectului de mprire a bazei de date prin comanda Split file,
rezultatul va fi structurat pentru fiecare subgrup valoric n parte, aa cum se vede n imaginea
de mai jos:
i_01
grup
1,00
Valid
2,00
3,00
Valid
Valid
0
1
Total
1
0
1
Total
Frequency
3
4
7
4
1
10
11
Percent
42,9
57,1
100,0
100,0
9,1
90,9
100,0
Valid Percent
42,9
57,1
100,0
100,0
9,1
90,9
100,0
Cumulative
Percent
42,9
100,0
100,0
9,1
100,0
Tabelul din imaginea de mai sus prezint frecvena rspunsurilor corecte, citit pe
coloana Percent (sau pe coloana Valid Percent, dac exist valori lips). Aa cum se observ,
indicele de dificultate pentru grupul valoric inferior este mai mic (57.1%) dect pentru grupul
superior (90.9%).
Aplicnd manual formula, obinem indicele de discriminare cutat:
10 4
0.33
11 7
Rezultatul arat c itemul i_01 are un indice pozitiv de discriminare de 0.33 care, n
conformitate cu criteriile lui Ebel, indic o capacitate bun de discriminare. Chiar dac
obinem i unii indici de discriminare mai mici, dac dorim s avem o scal care are putere de
discriminare i la extremele sale, acetia pot fi pstrai.
Not: Se observ c se poate ajunge la o valoare similar, exprimat n procente,
prin simpla diferen a celor doi indici de dificultate "D=90.9-57.1=33.7)
Mai departe, ar trebui efectuat procedura Frequencies pentru toi cei 22 de itemi ai
testului i extragerea concluziilor care se impun.
Dei uor de calculat i utilizat, indicele D sufer de un mare neajuns: prin
compararea a doar dou grupuri extreme, selectate arbitrar din ansamblul subiecilor testai, o
parte din informaie este ignorat, deoarece subiecii care fac parte din grupul de performan
intermediar nu sunt luai n considerare. Soluia acestei probleme ar putea fi aceea de a
mpri ansamblul valorilor scalei n mai multe subgrupuri, n funcie de numrul subiecilor
i de fineea dorit a analizei. n acest fel, indicele de dificultate al fiecrui item ar putea fi
analizat prin raportare la fiecare subgrup valoric. n mod ideal, indicele de dificultate
(procentul rspunsurilor corecte) al unui item bine calibrat trebuie s fie mai mic pentru
subiecii din grupul valoric inferior i s creasc progresiv, pe msur ce este calculat pentru
grupurile cu performane mai mari la scorul global (Peladeau, 1995).
6/20
Actualizat la: 06.05.2014 13:28
7/20
Actualizat la: 06.05.2014 13:28
8/20
Actualizat la: 06.05.2014 13:28
9/20
Actualizat la: 06.05.2014 13:28
de consisten intern a unui instrument psihologic compus din mai muli itemi care sunt
nsumai ntr-un scor unic. Formula de calcul se bazeaz pe media coeficienilor de corelaie
dintre itemi i numrul itemilor:
N rm
1 N 1 * rm
unde:
N=numrul itemilor
rm=media coeficienilor de corelaie dintre itemi
Indicele Cronbach alfa tinde s fie este mai mare:
- Cu ct numrul itemilor este mai mare. Ca urmare, putem fi tentai s utilizm
chestionare cu un numr mai mare de ntrebri. Acest lucru poate genera cel puin
dou probleme pe care trebuie s le lum n considerare:
o din motive practice, testele mai scurte sunt de dorit, date fiind reducerea
costurilor de realizare i a duratei de aplicare;
o n cazul testelor cu numr mare de itemi pot exista ntrebri care, chiar
dac au o corelaie pozitiv cu scala, contribuie la reducerea indicelui
Cronbach alfa sau au o contribuie minor la consistena general a
scalei.
- Cu ct corelaia medie dintre itemi este mai mare sau numrul corelaiilor egale
dintre itemi este mai mare (vezi tabelul 1). Itemii care dau corelaii cu ali itemi
de 0.4 sau mai mari, contribuie ntr-o msur important la creterea valorii
indicelui Cronbach alfa.
- Cu ct volumul eantionului mai mare. n practic, cu ct corelaie dintre itemi
este mai redus, cu att volumul eantionului necesar pentru a atinge un nivel
acceptabil pentru Cronbach alfa este mai mare (vezi tabelul 2).
- Numrul variantelor de rspuns este mai mare. Proprietile psihometrice ale
scalelor sunt afectate de numrul alternativelor de rspuns. Cu ct subiecii pot
alege dintre mai multe variante, att indicele Cronbach alfa tinde s fie mai mare,
ct i validitatea scalei. Scalele cu 5 sau 7 variante de rspuns sunt preferabile. De
remarcat faptul c cel mai sczut nivel de consisten intern se obine pe scalele
cu trei niveluri de rspuns, chiar mai sczut dect pentru scalele cu dou variante
(Lozano, Garcia-Cueto, & Muniz, 2008).
Tabelul 1. Volumul eantionului n funcie de diferite valori Cronbach Alfa i media
coeficienilor de corelaie r (Zeller, 2001)
Cronbach alfa
r
mediu 0.7 0.8 0.9
21 36 81
0.1
10 16 36
0.2
6
10 21
0.3
4
6
14
0.4
3
4
9
0.5
2
3
6
0.6
1
2
4
0.7
1
1
3
0.8
Dac analizm datele din tabelul 1 observm c cu ct itemii coreleaz mai puternic
cu att este nevoie de mai puini subieci pentru a se atinge niveluri ridicate ale indicelui
Cronbach alfa. Mai departe, datele din tabelul 2 ne arat c numrul necesar de itemi pentru
aceeai valoare a indicelui Cronbach alfa este mai mic pe msur ce numrul de itemi crete
i corelaia medie dintre acetia crete i ea.
10/20
Actualizat la: 06.05.2014 13:28
11/20
Actualizat la: 06.05.2014 13:28
Variabilele care conin valorile itemilor de analizat vor fi trecute n lista Items.(5)
Atenie, variabilele trebuie s conin valori care exprim semnificaia rspunsului n
raport cu scala global i nu rspunsul efectiv al subiectului. De exemplu, dac variantele de
rspuns sunt codificate cu 1, respectiv 2, pot exista ntrebri pentru care varianta 1
aduce un punct la scal iar varianta 2 aduce zero puncte la scal. ntr-o asemenea situaie,
pentru analiza de itemi valorile codificate de rspuns vor fi transformate n valori
corespunztoare (0 i 1). n acelai mod se va opera i pentru itemii care au mai multe
variante de rspuns, cum este cazul scalelor de tip Lickert. Codurile convenionale ale
variantelor de rspuns vor fi transformate n valori, n funcie de semnificaia contribuiei lor
la construirea scorului global.
n lista Model se poate alege unul dintre urmtoarele modele de analiz:
Alpha. Calculeaz Cronbach alfa care pentru date dihotomice este echivalent cu
coeficientul Kuder-Richardson 20 (KR20)
Split-half. Pentru corelaia dintre forme paralele, coeficientul de fidelitate
Guttman, coeficientul Spearman-Brown, coeficientul alfa pentru fiecare
jumtate.
Modele Gutman. Coeficienii lambda, de la 1 la 6 (lambda 3 este identic cu
Cronbach alfa)
Modele paralele i strict paralele. Testele pentru gradul de coresponden
(goodness-of-fit), variana comun i alte caracteristici ale raporturilor dintre
itemi.
Pentru analiza de consisten intern se alege modelul Alfa.
n continuare, se fac setri de analiz prin deschiderea casetei Statistics:
12/20
Actualizat la: 06.05.2014 13:28
n practic, bifarea opiunilor marcate pe caseta din imaginea de mai sus ofer
informaiile cele mai importante pentru analiza itemilor unui test. Celelalte opiuni sunt
explicitate n Help-ul casetei i pot fi utilizate pentru o analiz mai rafinat a datelor.
n continuare vom analiza un set de 10 itemi ipotetici, alei doar n scop didactic.
Pentru o scal real acest numr ar fi cu totul insuficient. Ca regul general, numrul itemilor
din faza de dezvoltare a unui astfel de instrument ar trebui s aib cel puin dublul numrului
de itemi pe care l preconizm la final. Acest lucru se impune deoarece analiza de itemi este
un proces selectiv care are drept scop alegerea itemilor adecvai pentru constituirea unei scale
cu cel mai ridicat nivel de consisten intern posibil.
Rularea procedurii, cu setrile de mai sus ne ofer mai multe categorii de informaii:
Valoarea lui Cronbach alfa, n cazul nostru .458, care este o valoare foarte sczut6:
SPSS raporteaz valoarea lui Cronbach alfa cu trei zecimale, dar n lucrri se va raporta doar cu dou
zecimale.
6
13/20
Actualizat la: 06.05.2014 13:28
Este afiat matricea corelaiilor dintre itemi, care ofer o imagine a gradului de asociere
dintre acetia:
Valorile sunt utile, pe de o parte, pentru a sesiza itemii care tind s aib relaii
negative cu ceilali, fiind un semn al unei posibile probleme de construire respectivilor itemi.
Din tabelul de mai sus rezult c itemii i_02 i i_03 tind s se asocieze negativ cu majoritatea
celorlali itemi. Pe de alt parte, valori extrem de ridicate ale unor corelaii, aproape de 1, ar
putea sugera c itemii respectivi prezint un grad excesiv de similitudine care nu justific
utilizarea lor n aceeai scal (ar putea fi, de exemplu itemi formulai extrem de asemntor).
n fine, cea mai important dintre categoriile de informaii, tabelul Item-Total
Statistics, care descrie relaia dintre itemi i scorul global.
Coninutul fiecrei coloane este urmtorul:
- Scale mean if item Deleted media scorului la scal, fr itemul respectiv;
- Scale variance if item Deleted variana scorului scalei, fr itemul respectiv
- Corected Item-Total Correlation - corelaia dintre item i scorul global construit
fr participarea itemului respectiv
- Squared Multiple Correlation coeficientul de regresie multipl, pentru itemul
respectiv n calitate de criteriu i toi ceilali itemi n calitate de predictori.
- Cronbachs Alpha if Item Deleted - valoarea lui Cronbach alfa, dac respectivul
item ar fi eliminat).
14/20
Actualizat la: 06.05.2014 13:28
Dac da, atunci singura soluie posibil este eliminarea itemilor n cauz. Observm, de
asemenea, c itemul i_02 are o corelaie extrem de mic cu scorul global (0.017). Contribuia
sa la scorul global este nerelevant. Cu alte cuvinte, nici nu stric, dar nici nu ajut.
Valoare lui Cronbach alfa, care este de 0.45, poate fi crescut prin eliminarea itemilor
nepotrivii, n primul rnd a celor care coreleaz negativ cu scorul global. Ca urmare, se va
relua analiza, cu eliminarea itemilor negativi. n general, nu este recomandabil eliminarea
mai multor itemi simultan, dar itemii negativi pot fi scoi fr reineri. Iat care este rezultatul
obinut dup reluarea analizei cu eliminarea itemilor 3 i 9. Valoarea lui Cronbach alfa i
limitele de ncredere pot fi citite din tabelul de mai jos:
Aa cum se observ, nivelul lui Cronbach alfa a crescut la 0.68, ceea ce este aproape
de limita valorii minime recomandate.
Dac analizm din nou tabelul Item-Total Statistics, vom vedea c itemul i_02, care
anterior avea o corelaie pozitiv, dar extrem de mic, a dobndit o corelaie negativ cu scala.
Aa cum se observ pe ultima coloan a tabelului, eliminarea acestui item ar conduce la
creterea valorii lui Cronbach alfa la 0.75.
n principiu, chiar i itemii pozitivi, care au corelaii cu scala mai mici de 0.1, nu
trebuie pstrai, pentru simplul motiv c nu contribuie la constructul psihologic vizat, fiind
doar consumatoare de timp n aplicarea instrumentului. n realitate, atunci cnd construim o
scal i avem un numr suficieni de itemi, i putem pstra doar pe cei care au corelaii cu
scala mai mari de 0.3 sau 0.4.
Refacem analiza fr itemul i_02 i se obine urmtoarea configuraie de rezultate:
De data aceasta avem o valoare acceptabil pentru Cronbach alfa (0.757). Mai mult,
limita inferioar a intervalului de ncredere este i ea mai mare de 0.70, ceea ce este cu att
mai bine. S nu uitm c dac indicele Cronbach alfa ar avea valoarea 0.70, asta nseamn c
valoarea sa real ar putea fi, cu o probabilitate de 0.95 mai mic dect 0.70.
n plus, dac privim coloana Alfa if Item Deleted din tabelul Item-Total Statistics,
vedem c prin eliminarea oricrui item dintre cei rmai nu am obine o valoare mai ridicat
dect cea obinut. n acest moment analiza poate fi oprit, itemii selecionai putnd fi
constituii ntr-un instrument de msurare psihologic. n practic, autorul unui test psihologic
poate fi nevoit sau interesat s reduc numrul itemilor, fr a afecta consistena intern a
15/20
Actualizat la: 06.05.2014 13:28
scalei. n acest scop, valoarea Cronbach alfa n cazul eliminrii itemului (Alpha if item
deleted) este un indicator foarte util. Eliminnd succesiv itemii a cror prezen contribuie la
reducerea valorii Cronbach alfa, sau au o contribuie redus la aceasta, se poate ajunge la un
numr suficient de mic de itemi n condiiile obinerii unei valori mai mari pentru Cronbach
alfa.
n concluzie, cu ocazia iteraiilor succesive se vor elimina, n ordine:
itemii care au o corelaie negativ cu scorul global
itemii cu corelaii mici, nerelevante
Cu ct avem mai muli itemi n aceast faz, cu att avem posibilitatea s pstrm
itemi care coreleaz mai intens cu scala i, deci, s atingem un nivel mai ridicat de consisten
intern. Este de la sine neles c n cazul n care construim un instrument ale crui ntrebri
se adreseaz unor scale diferite, consistena intern se va evalua separat pentru setul de
ntrebri corespunztor fiecrei scale.
O scal care este consistent intern ne ofer garania c itemii instrumentului nostru
merg mpreun, msoar acelai construct psihologic. Atenie ns, acest lucru nu nseamn
c avem de a face cu un construct unidimensional i nici c instrumentul analizat msoar
exact ceea ce n-am propus s msoare. Aceast problem va fi rezolvat ulterior, prin studii
de validare.
Estimarea numrului de itemi necesari pentru o scal
n procesul de construcie al unei scale de msurare psihologic pot apare unele
dificulti, pe care statistica ne ajut s le surmontm. De exemplu, ne putem afla n situaia n
care itemii elaborai nu ating nivelul minim acceptabil de consisten intern i trebuie s
adugm noi itemi. Ct de muli itemi ar trebui s mai elaborm pentru a atinge un indice
Cronbach alfa acceptabil? Numrul itemilor necesari pentru a completa o scal care nu a atins
valoarea acceptabil a indicelui Cronbach alfa, poate fi estimat cu ajutorul formulei
Spearman-Brown:
k * (1 x )
x * (1 k )
unde:
x este valoarea curent a lui Cronbach alfa
k este nivelul dorit al lui Cronbach alfa
k este factorul de multiplicare a scalei pentru a se obine k
ntr-un mod similar se poate estima valoarea lui Cronbach alfa (k) care ar fi atins
pornind de la un anumit nivel calculat al acestuia x i un anumit factor de multiplicare al
numrului de itemi (k):
k * x
1 ((k 1) * x )
Exemplu:
Avem o scal cu 20 de itemi i x=0.50
Ci itemi ar trebui adugai pentru a atinge un nivel de 0.70?
k * (1 x ) .70 * (1 .50)
2.33
x * (1 k ) .50 * (1 .70)
16/20
Actualizat la: 06.05.2014 13:28
k * x
2.5 * .50
0.71
1 ((k 1) * x ) 1 ((2.5 1) * .50)
Desigur, se presupune c noii itemi adugai vor fi la fel de buni ca i cei deja
utilizai. De aceea este posibil ca rezultatul formulei s fie o estimare uor optimist, dar nu
mai puin util.
O soluie convenabil pentru rezolvarea problemei numrului de itemi este utilizarea
programului Alpha-Validity Prophesing Computator (Garbin & Hoffman, 2007):
Chenarul 1: Estimarea numrului necesar
de itemi pentru a atinge un nivel dorit al
lui alfa.
Dac am obinut un alfa=0.50 i vizm o
valoare de 0.80, trebuie s multiplicm cu
4 (valoarea K) numrul itemilor pe care i
avem deja.
17/20
Actualizat la: 06.05.2014 13:28
rpq
rp 'q '
rp ' p ' * rq 'q '
unde
rpq = coeficientul de corelaie corectat dintre p i q
rpq= coeficientul de corelaie necorectat dintre p i q
rpp= coeficientul de fidelitate al variabilei p
rqq= coeficientul de fidelitate al variabilei q
De exemplu, o corelaie calculat r=0.50, ntre dou variabile al cror coeficient
Cronbach alfa este de 0.70, devine prin corecie 0.71.
rpq
0,50
0,71
0,70 * 0,70
18/20
Actualizat la: 06.05.2014 13:28
19/20
Actualizat la: 06.05.2014 13:28
20/20
Actualizat la: 06.05.2014 13:28