Documente Academic
Documente Profesional
Documente Cultură
Spss 11 Analizadeitemi PDF
Spss 11 Analizadeitemi PDF
Analiza de itemi
n cazul unui chestionar psihologic sau a unui test de performan, este posibil ca unii
dintre itemii care le compun s nu funcioneze aa cum ne-am dorit: pot crea confuzii, pot fi
interpretai greit, pot fi prea uori sau prea dificili, etc. Motivele care pot genera astfel de
situaii sunt variate:
formulare confuz (de exemplu, prin utilizarea negaiei);
alte informaii care acompaniaz itemul (grafice, imagini, diagrame, etc.) pot fi
neclare sau greite;
nu exist un rspuns corect evident, situaie n care una dintre variantele greite
(distractor) este considerat corect;
exist itemi care se refer la un alt coninut (atribut) dect cel vizat de restul itemilor;
exist un efect discret de incompatibilitate al unor itemi n raport cu caracteristicile
subiecilor investigai (legat de sex, grup etnic, vrst, etc.)
Pn la un punct, aceste neajunsuri pot fi, fie prevenite, fie eliminate, mai ales cnd
sunt evidente, prin analiza calitativ, intuitiv. Precizia operaiei poate fi ns mult
mbuntit dac se apeleaz la un set de prelucrri statistice special destinate analizei de
itemi. Aceste proceduri contribuie la ameliorarea calitilor psihometrice ale unui instrument
de evaluare psihologic, prin identificarea itemilor improprii (greii sau redundani) care ar
trebui eliminai sau modificai.. Toate aceste proceduri sunt denumite generic analiza de
itemi.
n funcie de obiectivele urmrite, procedurile clasice ale analizei de itemi, care sunt
cele mai frecvent utilizate, sunt urmtoarele:
1. evaluarea indicelui de dificultate a itemilor;
2. evaluarea capacitii de discriminare a itemilor.
3. evaluarea consistenei interne a instrumentului;
Atunci cnd itemii sunt selectai pe baza indicelui de dificultate, mai trebuie luai n
considerare doi factori suplimentari:
1
Se utilizeaz datele din fiierul didactic alfa_tema.sav
2/15
Actualizat la: 17.04.2006
M. Popa Analiza de itemi
U L
D=
nU nL
unde:
U=numrul subiecilor din grupul superior (Upper group) care au rspuns
corect la un item
nU=numrul subiecilor din grupul superior
L=numrul subiecilor din grupul inferior (Lower group) care au rspuns
corect la un item
nL=numrul subiecilor din grupul inferior
Dac numrul subiecilor din cele dou grupuri extreme este egal, atunci
D=(U-L)/n.
O valoare pozitiv va indica faptul c itemul discrimineaz corect, n concordan cu
constructul psihologic msurat. Cu ct mai mare este diferena, cu att mai mare este
capacitatea itemului de discriminare ntre subiecii buni i cei slabi sub aspectul acelui
construct. Pe de alt parte, o valoare negativ sugereaz o discriminare negativ ntre
grupurile extreme, fapt care este o dovad puternic a unei probleme n construcia acelui
3/15
Actualizat la: 17.04.2006
M. Popa Analiza de itemi
item. Ebel (1965) sugereaz eliminarea sau revizuirea complet itemilor a cror indice de
discriminare este mai mic de 0.20 i revizuirea itemilor al cror indice este ntre 0.20 i 0.30.
Un indice de discriminare bun se plaseaz ntre 0.30-0.39, iar unul foarte bun, peste 0.40.
4/15
Actualizat la: 17.04.2006
M. Popa Analiza de itemi
scor
Cumulative
Frequency Percent Valid Percent Percent
Valid 7,00 1 4,5 4,5 4,5
9,00 1 4,5 4,5 9,1
10,00 1 4,5 4,5 13,6
12,00 2 9,1 9,1 22,7
13,00 2 9,1 9,1 31,8
15,00 2 9,1 9,1 40,9
16,00 1 4,5 4,5 45,5
17,00 1 4,5 4,5 50,0
18,00 4 18,2 18,2 68,2
19,00 3 13,6 13,6 81,8
20,00 2 9,1 9,1 90,9
21,00 1 4,5 4,5 95,5
22,00 1 4,5 4,5 100,0
Total 22 100,0 100,0
i apoi, dup acionarea butonului Old and New Values: declarm valorile aa cum se
vede n caseta de mai jos
5/15
Actualizat la: 17.04.2006
M. Popa Analiza de itemi
n urma acestei operaii am obinut variabila "grup", ale crei valori, 1,2 sau 3,
marcheaz apartenena subiecilor la unul dintre cele trei grupe valorice.
Efectul acestei aciuni este acela c, orice prelucrare vom face cu SPSS n continuare,
aceasta va fi efectuat separat pentru fiecare din cele trei categorii separate prin valorile
variabilei "grup".
e) n fine, acum se poate rula procedura Frequencies din meniul Statistics, pentru
variabila i_01. Datorit efectului de mprire a bazei de date prin comanda Split file,
rezultatul va fi structurat pentru fiecare subgrup valoric n parte, aa cum se vede n imaginea
de mai jos:
i_01
Cumulative
grup Frequency Percent Valid Percent Percent
1,00 Valid 0 3 42,9 42,9 42,9
1 4 57,1 57,1 100,0
Total 7 100,0 100,0
2,00 Valid 1 4 100,0 100,0 100,0
3,00 Valid 0 1 9,1 9,1 9,1
1 10 90,9 90,9 100,0
Total 11 100,0 100,0
6/15
Actualizat la: 17.04.2006
M. Popa Analiza de itemi
10 4
D= = +0.33
11 7
Rezultatul arat c itemul i_01 are un indice pozitiv de discriminare de 0.33 care, n
conformitate cu criteriile lui Ebel, indic o capacitate bun de discriminare. Chiar dac
obinem i unii indici de discriminare mai mici, dac dorim s avem o scal care are putere de
discriminare i la extremele sale, acetia pot fi pstrai.
Mai departe, ar trebui efectuat procedura Frequencies pentru toi cei 22 de itemi ai
testului i extragerea concluziilor care se impun.
N rm
=
1 + ( N 1)* rm
unde:
N=numrul itemilor
rm=media coeficienilor de corelaie dintre itemi
7/15
Actualizat la: 17.04.2006
M. Popa Analiza de itemi
Principalul motiv pentru care am introdus aici formula lui Cronbach este pentru a
scoate n eviden faptul c valoarea sa poate fi crescut pe dou ci:
- fie prin creterea similaritii dintre itemi, care conduce la coeficieni mai mari de
corelaie interitemi;
- fie prin creterea numrului de itemi.
8/15
Actualizat la: 17.04.2006
M. Popa Analiza de itemi
Variabilele2 care conin valorile itemilor de analizat vor fi trecute n lista Items.
2
Se utilizeaz fiierul didactic saq_10_itemi.sav
9/15
Actualizat la: 17.04.2006
M. Popa Analiza de itemi
n practic, bifarea opiunilor marcate pe caseta din imaginea de mai sus ofer
informaiile cele mai importante pentru analiza itemilor unui test. Celelalte opiuni sunt
explicitate n Help-ul casetei i pot fi utilizate pentru o analiz mai rafinat a datelor.
n continuare, vom analiza un set de 10 itemi ipotetici, alei doar n scop didactic.
Pentru o scal real acest numr ar fi cu totul insuficient. Ca regul general, numrul itemilor
din faza de dezvoltare a unui astfel de instrument ar trebui s aib cel puin dublul numrului
de itemi pe care l preconizm la final. Acest lucru se impune deoarece analiza de itemi este
un proces selectiv care are drept scop alegerea itemilor adecvai pentru constituirea unei scale
cu cel mai ridicat nivel de consisten intern posibil.
Rularea procedurii, cu setrile de mai sus ne ofer mai multe categorii de informaii:
Un tabel cu indicatori descriptivi, media i abaterea standard a itemilor. Analiza
valorilor permite evidenierea tendinei centrale i a mprtierii rspunsurilor pentru fiecare
item n parte:
10/15
Actualizat la: 17.04.2006
M. Popa Analiza de itemi
Corelaiile itemilor ofer o imagine a gradului de asociere dintre acetia. Valorile sunt
utile, pe de o parte, pentru a sesiza itemii care tind s aib relaii negative cu ceilali, fiind un
semn al unei posibile probleme de construire respectivilor itemi. Din tabelul alturat rezult
c itemii i_02 i i_03 tind s se asocieze negativ cu majoritatea celorlali itemi. Pe de alt
parte, valori extrem de ridicate ale unor corelaii, aproape de 1, ar putea sugera c itemii
respectivi prezint un grad de similitudine care nu justific utilizarea lor n aceeai scal (ar
putea fi, de exemplu itemi formulai extrem de asemntor).
n fine, cea mai important dintre categoriile de informaii, tabelul relaiilor dintre
itemi i scorul global. Dou dintre coloanele tabelului au o importan particular: Corected
Item-Total Correlation (corelaia dintre item i scorul global) i Alpha if Item Deleted
(valoarea lui Cronbach alfa, dac respectivul item ar fi eliminat).
Dac privim coloana Corected Item-Total Correlation observm c doi dintre itemi
(i_03 i i_09) au corelaii negative cu scorul global. Cu alte cuvinte, ei nu aduc informaie
util n raport cu atributul msurat ci, dimpotriv, merg ntr-o alt direcie dect acesta. n
primul rnd trebuie s verificm dac valorile itemilor respectivi au fost corect codificate.
Dac da, atunci singura soluie posibil este eliminarea itemilor n cauz. Observm, de
asemenea, c itemul i_02 are o corelaie extrem de mic cu scorul global (0.015). Contribuia
sa la scorul global este nerelevant. Cu alte cuvinte, nici nu stric, dar nici nu ajut.
11/15
Actualizat la: 17.04.2006
M. Popa Analiza de itemi
Pe ultima linie a imaginii gsim valoare lui Cronbach alfa, care este 0.4576, o valoare
care este modest n raport cu nivelul minim necesar (0.70), dar care poate fi crescut prin
eliminarea itemilor nepotrivii, n primul rnd a celor care coreleaz negativ cu scorul global.3
Urmtoarea faz este reluarea prelucrrii, cu eliminarea itemilor negativi. n general,
nu este recomandabil eliminarea mai multor itemi simultan, dar itemii negativi pot fi scoi
fr reineri. Iat care este rezultatul obinut dup reluarea analizei cu eliminarea itemilor 3 i
9:
Ca urmare a noii iteraii se observ c itemul i_02, care anterior avea o corelaie
pozitiv, dar extrem de mic, a dobndit o corelaie negativ cu scala. n consecin, va fi
eliminat. n principiu, chiar i itemii pozitivi, care au corelaii cu scala mai mici de 0.1, nu
trebuie pstrai, pentru simplul motiv c nu contribuie la constructul psihologic vizat, fiind
doar consumatoare de timp n aplicarea instrumentului. De altfel, se i observ c prin
eliminarea acestui singur item, valoarea lui Cronbach alfa ar crete la 0.75.
Se face din nou prelucrarea fr itemul i_02 i se obine urmtoarea configuraie de
rezultate:
Rezultatul arat o valoare Cronbach alfa de 0.75. n plus, dac privim coloana Alfa if
Item Deleted, vedem c prin eliminarea oricrui item nu am obine o valoare mai ridicat
3
Dei programele statistice calculeaz Cronbach alfa cu patru zecimale, el se raporteaz n mod
obinuit cu dou zecimale.
12/15
Actualizat la: 17.04.2006
M. Popa Analiza de itemi
dect aceasta. n acest moment analiza poate fi oprit, itemii selecionai putnd fi constituii
ntr-un instrument de msurare psihologic.
Cu ct avem mai muli itemi n aceast faz, cu att avem posibilitatea s pstrm
itemi care coreleaz mai intens cu scala i, deci, s atingem un nivel mai ridicat de consisten
intern. Este de la sine neles c, n cazul n care construim un instrument ale crui ntrebri
se adreseaz unor scale diferite, consistena intern se va evalua separat pentru setul de
ntrebri corespunztor fiecrei scale.
O scal consistent intern ne ofer garania c itemii instrumentului nostru merg
mpreun, msoar acelai construct psihologic. Atenie, ns, acest lucru nu ne permite
nc s afirmm c msoar exact ceea ce n-am propus s msoare. Aceast problem va fi
rezolvat ulterior, prin studii de validare.
k * (1 x )
k=
x * (1 k )
unde:
x este valoarea curent a lui Cronbach alfa
k este nivelul dorit al lui Cronbach alfa
k este factorul de multiplicare a scalei pentru a se obine k
ntr-un mod similar, se poate estima valoarea lui Cronbach alfa (k) care ar fi atins
pornind de la un anumit nivel calculat al acestuia x i un anumit factor de multiplicare al
numrului de itemi (k):
k * x
k =
1 + (( k 1) * x )
Exemplu:
Avem o scal cu 20 de itemi i x=0.50
Ci itemi ar trebui adugai pentru a atinge un nivel de 0.70?
k * (1 x ) .70 * (1 .50)
k= = = 2.33
x * (1 k ) .50 * (1 .70)
13/15
Actualizat la: 17.04.2006
M. Popa Analiza de itemi
k * x 2.5 * .50
k = = = 0.71
1 + (( k 1) * x ) 1 + (( 2.5 1) * .50)
Desigur, se presupune c noii itemi adugai vor fi la fel de buni ca i cei deja
utilizai. De aceea este posibil ca rezultatul formulei s fie o estimare uor optimist, dar nu
mai puin util.
1. Itemii a cror corelaie cu scala (scorul global) este negativ, sunt eliminai (dup
ce se verific n prealabil dac au fost valorizai corect).
2. Itemii a cror corelaie cu scala (scorul global) este mai mic de 0.15, ar trebui
probabil revizuii, deoarece nu sunt ncrcai n suficient msur cu atributul
vizat de test, sau de subscala cruia i aparine. n orice caz, itemii cu corelaii sub
0.1 nu sunt utilizabili. n principiu, un test este cu att mai bun cu ct itemii sunt
mai omogeni.
3. n cazul itemilor cu variante de rspuns, variantele greite (distractori) care nu
sunt alese de nici un subiect, ar trebui reformulate sau eliminate, deoarece nu
contribuie la discriminarea ntre subiecii cu performan slab i cei cu
performan bun. Faptul c variantele greite nu sunt alese cu aceeai frecven
nu reprezint, ns, o problem. De asemenea, un item la care majoritatea
rspunsurilor sunt greite nu trebuie n mod necesar eliminat, dar o analiz atent
a acestuia se impune.
4. Corectitudinea unui item la care frecvena de alegere a unei variante distractor
este mai mare dect a variantei corecte, trebuie analizat cu atenie, mai ales
atunci cnd corelaia cu scorul global este pozitiv.
5. Itemii la care se obin (aproape) numai rspunsuri corecte sunt inutili i ar trebui
eliminai sau nlocuii.
14/15
Actualizat la: 17.04.2006
M. Popa Analiza de itemi
La adaptarea unui test psihologic, prin traducerea dintr-o limb strin. ntr-o
astfel de situaie, chiar dac versiunea original beneficiaz de documentaia
complet din punct de vedere psihometric, traducerea itemilor poate aduce
modificri substaniale care s modifice comportamentul statistic al acestora n
noul mediu cultural.
Atunci cnd se obine un test aflat n uz, dar despre care nu exist o documentaie
adecvat sub aspectul caracteristicilor psihometrice.
Atunci cnd se schimb destinaia (populaia) pe care este utilizat un test, chiar
dac exist o documentaie complet cu privire la caracteristicile psihometrice ale
acestuia pentru utilizarea anterioar.
Dup trecerea unei perioade ndelungate (de ordinul anilor) de la efectuarea
analizei de itemi, pentru evaluarea diminurii poteniale a caracteristicilor sale
psihometrice. Acest lucru se poate ntmpla, de exemplu, ca urmare a modificrii
lente a unor caracteristici ale populaiei pe care este aplicat.
Aa cum am vzut, atunci cnd corelaiile inter-itemi sunt ridicate acest lucru
evideniaz faptul c acetia msoar acelai construct psihologic, cu alte cuvinte, au o
component unidimensional. O valoare sczut a lui Cronbach alfa poate sugera ns faptul
c itemii sunt multidimensionali, adic se grupeaz pe dou sau mai multe dimensiuni, aa
cum, de exemplu, itemii chestionarului Cattell 16 PF se grupeaz pe un numr de 16
dimensiuni (factori) distinci. n situaii de acest gen, coeficientul de consisten intern (),
calculat pe toi itemii chestionarului, va avea o valoare mic, dar calculat pe grupe de itemi,
va avea o valoare mare. Problema este cum identificm grupele de itemi atunci cnd nu tim
dac acetia sunt sau nu multidimensionali? Soluia se afl n aplicarea unei analize factoriale4
pe valorile itemilor, care ne va spune n ce msur acetia tind s se grupeze, i care sunt
itemii afereni fiecrui grup (dimensiune). n final, dac se accept gruparea itemilor n
conformitate cu rezultatele analizei factoriale, se va calcula coeficientul Cronbach alfa pentru
fiecare grup de itemi separat.
Exist i situaii n care analiza de itemi nu este adecvat. De exemplu, atunci cnd
o scal este utilizat pentru evaluarea cunotinelor cu privire la un anumit subiect sau tem
educaional, pentru alte scopuri dect cele de selecie sau discriminare, unele dintre tehnicile
de analiza de itemi nu sunt adecvate pentru selectarea itemilor. Acest lucru este adevrat
deoarece ne aflm ntr-o situaie de nvare i dorim s evalum performana elevilor ca
urmare a unui proces de instruire, i nu ca trstur inerent a fiecruia. Dac aplicm un test
nainte de parcurgerea materiei respective vom obine un procentaj foarte sczut de rspunsuri
corecte i o corelaie item-total aproape de zero, fapt care reflect necunoaterea de ctre elevi
a materiei respective (rspunsuri greite, rspunsuri la ntmplare, etc.). n acest caz soluia nu
const n eliminarea sau refacerea itemilor, ci n instruirea elevilor. Dac aplicm testul
respectiv dup parcurgerea perioadei de instruire, vom obine procentaje mari de rspunsuri
corecte, ceea ce ar fi interpretabil drept redus capacitate discriminativ a itemilor. n
realitate, eliminarea acestor itemi ar fi de asemenea o eroare, deoarece am elimina tocmai
itemii care pun n eviden succesul nvrii, ceea ce este exact obiectivul msurrii.
n astfel de situaii, utilizarea indicelui de consisten intern Cronbach alfa este
inadecvat. Cu toate acestea, analiza de itemi poate fi utilizat ca modalitate de identificare a
itemilor greit formulai, a celor nerelevani sau, pur i simplu, pentru a scoate n eviden
erorile tipice pe care le fac subiecii la anumite ntrebri.
4
Procedur statistic de grupare a variabilelor. Prezentarea ei face obiectul cursurilor avansate de
statistic.
15/15
Actualizat la: 17.04.2006