Documente Academic
Documente Profesional
Documente Cultură
Ghid de Elaborare A Testelor de Cunostinte PDF
Ghid de Elaborare A Testelor de Cunostinte PDF
TESTELOR DE CUNOTINE
SC COGNITROM SRL
Introducere
Ca i manager nu v putei permite s alegei pe un post o persoan care nu
corespunde cerinelor acestuia. Candidaii pentru un job difer foarte mult n ceea ce
privete competenele, cunotinele, deprinderile, interesele, stilul de munc, etc. Aceste
diferene vor influena n mod inevitabil performanele n realizarea sarcinilor. De cele
mai multe ori, aceste diferene nu sunt la suprafa, simpla observaie nu este suficient
pentru a putea prezice succesul lui ca i angajat.
Utilizarea unor instrumente de evaluare adecvate este primul pas pentru a gsi omul
potrivit la locul potrivit. Vom obine astfel informaii care ne vor permite s identificm
potrivirea ntre persoan i job.
Ghidul de fa se adreseaz n primul rnd acelor persoane care sunt implicate direct n
procesul de evaluare (psihologi, manageri, profesori, etc.). El descrie procedura de
scriere, evaluare i revizuire a diferitelor tipuri de itemi care pot fi inclui ntr-un test (n
special ntr-un test de cunotine). ntr-o manier ct se poate de simpl ncercm s
prezentm cele mai bune idei, sugestii i consideraii practice care s v ajute s v
dezvoltai propriile teste de cunotine.
2
Ce sunt testele de cunotine?
Testul de cunotine este o prob utilizat pentru a evalua cunotinele pe care un
individ le are ntr-un anumit domeniu bine precizat, n raport cu un grup definit de
subieci (Albu, 1993).
Termenul de criteriu de referin n testare este un concept cu mai multe faete (Berk,
1980). n general, criteriul de referin permite accesul la competenele individului i se
refer la o variabil estimat o deprindere de munc, competena ntr-un anumit
domeniu de activitate. Pentru interpretarea rezultatelor la un test de cunotine cu
referire la un anumit criteriu trebuie cunoscut relaia ntre scorurile testului (variabila
predictor sau variabila independent) i valorile variabilei criteriu (dependente).
3
Cum construim un test de cunotine
Etape principale n elaborarea unui test de cunotine
Recomandabil Nerecomandabil
4
Ci itemi vor fi inclui n test?
Numrul de itemi care trebuie inclui ntr-un test depinde de timpul pe care l alocai
evalurii i de tipul itemilor utilizai.
Mai jos v este prezentat un tabel cu principalele tipuri de ntrebri care pot fi incluse
ntr-un test, respectiv durat aproximativ de care are nevoie un subiect pentru a
rspunde la o astfel de ntrebare (item).
AVANTAJE DEZAVANTAJE
Relativ uor de scris i de formulat Subiectul poate s ghiceasc rspunsul
Uor de corectat Este greu de a face diferena ntre itemii
dificil efectiv sau rspunsurile ghicite
Uor de administrat Mai puin discriminativ comparativ cu itemii
cu rspunsuri la alegere
Eficieni fie c sunt administrai n scris fie Pot s nu reflecte acurat situaiile
c sunt administrai oral care nu sunt absolut corecte sau greite
Nu presupun abiliti de citire sau de Deseori sunt criticai deoarece
scriere ncurajeaz memorarea
O mare cantitate de informaie poate fi
evaluat ntr-o perioad scurt de timp
Pot fi supui prelucrrilor de analiz
5
Cteva sugestii n scrierea itemilor de tip adevrat-fals
Pentru a crete gradul de eficien al evalurii, fiecare item de acest tip ar trebui
s se adreseze unui singur fapt i s se refere la o singur idee. Acest lucru
prentmpin erori legate de nenelegerea afirmaiei sau pe cele legate de
confuzii.
Cercetrile arat c persoanele tind s aleag adevrat cnd rspund la
ntmplare, deci itemii discrimineaz ntre persoanele cu abiliti sczute i
ridicate. Se recomand un numr aproximativ egal de itemi la care rspunsul s
fie adevrat sau fals.
Pentru a preveni memorarea mecanic, evitai utilizarea exact a cuvintelor din
materialul dat pentru nvare.
n general, afirmaiile lungi cel mai probabil sunt false. Prin urmare pentru a
nltura aceast biasare ncercai ca toi itemii s aib aceeai lungime.
Pentru a face o distincie ct mai acurat ntre persoanele bine pregtite i cele
mai puin pregtite putei face ca rspunsul greit s fie foarte atractiv formulat.
Asigurai-v c itemii se bazeaz pe declaraii care sunt cu siguran adevrate
sau false, cu alte cuvinte valoarea lor de adevr este apreciat la fel de ctre
orice persoan care cunoate coninutul supus evalurii.
Atunci cnd elaborai itemi de acest gen, evitai folosirea cuvintelor absolute (
ntotdeauna, niciodat etc.), sau a unor generalizri (uneori, n general).
Pentru a preveni confuziile sau argumentrile, rspunsurile trebuie s fie clar
false sau adevrate.
Evitai folosirea dublei negaii atunci. Folosirea negaiei duce la confuzie i testul
nu mai msoar acurat cunotinele.
6
ntrebri de verificare
Itemii cu rspunsul la alegere sunt cei mai comuni itemi utilizai n testele de cunotine.
Acest gen de itemi sunt construii din dou pri: trunchiul itemului i variantele de
rspuns, din care doar una este rspunsul corect (Airasian, 1991).
Itemii cu rspunsuri la alegere sunt n mare parte utilizai datorit faptului c pot
rspunde unui numr mare de obiective (pentru evaluarea cunotinelor, nelegerii,
analizei, sintezei). Cu toate c prezint un numr mare de avantaje i acest tip de itemi
au limite. n mod specific acest gen de itemi nu sunt eficieni pentru msurarea abilitii
de organizare sau de exprimare a unei idei, de formulare a unor argumente etc.
7
AVANTAJE DEZAVANTAJE
Acoper o gam larg de obiective Sunt itemi dificil de construit
Pot oferi informaii de diagnostic analiznd Tendina de a centra itemii pe obiectivele
paternul de rspunsuri greite cu un nivel sczut de dificultate
Permit evaluarea unui eantion mare de Performana subiecilor poate fi biasat de
subieci i a unui coninut extins abilitatea lor de citire
Permite compararea i evaluarea unor idei Pot supraestima nvarea datorit abilitii
relatate, concepte sau teorii de a utiliza diverse procese de eliminare a
rspunsurilor
Permit manipularea nivelului de dificultate Nu msoar abilitatea de organizare i
prin ajustarea gradului de similaritate exprimare a unor idei
dintre rspunsuri
Pot fi supui diverselor prelucrri i analize
Sunt limitai biasrilor de cotare
Sunt uor de administrat
Cotarea se poate face manual sau pe
baza unui program
Performana subiecilor nu este influenat
de abilitatea lor de scriere
Alegerea rspunsului corect este mai puin
influenat de ntmplare
8
Pentru a reduce redundana, trunchiul poate include orice cuvnt care ar putea fi
repetat n fiecare variant de rspuns
Asigurai-v c fiecare trunchi conine suficient informaie pentru a permite
identificarea rspunsului corect, dar c nu conine detalii nesemnificative
Atunci cnd formulai itemii sub forma unei afirmaii incomplete punei spaiul gol
la sfrit mai degrab dect la mijloc sau la nceputul trunchiului
Evitai utilizarea unui limbaj stereotipal sau termeni mult prea tiinifici
ncercai s folosii ct mai puin formulrile negative deoarece acest lucru poate
produce biasarea rspunsului i complic raionamentul. Atunci cnd este
necesar, subliniai aceste formulri pentru a atrage atenia persoanelor
9
ntrebri de verificare
Itemii de tip asociere sunt de obicei utilizai pentru a evalua abilitatea persoanelor de a
nelege relaia dintre termeni, evenimente, teorii similare. Presupune identificarea sau
recunoaterea asociaiei corecte ntre alternativele oferite. Acest gen de itemi au o
singur premis corect. Tipic, persoanelor li se ofer o list cu scurte explicaii,
descrieri sau definiii (numite premise) i este necesar s fac asocierea acestor
premise pe baza unor analize logice sau factuale cu alternativa corect (numite
rspunsuri) din cea de-a doua list. Sunt ideali pentru evaluarea abilitii de
discriminare, categorizare i asociere ntre concepte omogene.
AVANTAJE DEZAVANTAJE
Permit compararea unor concepte, idei, Dificil de generat un numr suficient de
teorii premise plauzibile
Eficieni n evaluarea asociaiei ntre o Nu sunt eficieni pentru testarea unor fapte
varietate de itemi din cadrul aceleai izolate sau informaii
categorii
ncurajeaz integrarea informaiei Pot limita evaluarea la un nivel sczut de
nelegere
Relativ uor de cotat Rspunsurile pot fi ghicite
Uor de administrat
Nu depind de abilitile de scriere ale
subiectului
10
Cteva sugestii n scrierea itemilor de tip adevrat-fals
Punctul tare al acestui gen de itemi se refer la faptul c evalueaz relaia dintre
concepte i termeni omogeni. Deci, pentru a fi mai eficieni asigurai-v c toate
premisele i rspunsurile fac parte din aceeai categorie
Toate premisele ar trebui s fie plauzibile pentru fiecare rspuns
Pentru a v asigura c deprinderile de citire i memoria nu influeneaz
evaluarea propriu zis prezentai premisele scurt i clar
n timp ce asociaia ntre premise i rspunsuri pot fi clare pentru dvs. asigurai-
v c acest lucru este clar i pentru persoana evaluat. Dai direcii clare care
specific relaia
Plasai premisele i rspunsurile ntr-o ordine logic. Acest lucru permite
subiectului s reciteasc itemul i s localizeze rapid premisa sau rspunsul
Pentru c asocierea presupune o comparaie continu, asigurai-v c toate
premisele i rspunsurile unui item sunt prezentate pe aceeai pagin.
n mod tradiional premisele sunt prezentate ntr-o coloan vertical n partea
stng a paginii, iar rspunsurile sunt prezentate ntr-o alt coloan n partea
dreapt a paginii.
Pot fi utilizate numere sau litere pentru a permite asocierea ntre premise i
rspunsuri.
Asigurai-v c exist o singur asociere corect.
ntrebri de verificare
11
Itemi cu rspunsuri scurte
Itemii cu rspunsuri scurte sunt eficieni pentru msurarea abilitii persoanelor de a-i
reaminti o informaie specific. Pot fi formulai sub forma unei ntrebri sau sub forma
unei afirmaii incomplete, sarcina celor evaluai este de a genera independent propriul
rspuns.
AVANTAJE DEZAVANTAJE
Rspunsurile sunt mai puin influenate de Rspunsurile pot fi influenate de abilitatea
ans sau ntmplare de scriere a persoanei
Implic abiliti cognitive n elaborarea Scorurile pot fi influenate de
rspunsului subiectivismul examinatorului
Ofer informaii cu caracter de diagnostic n general sunt limitai la cunotinele
subiectului i la modul de nelegere a
ntrebrii
Relativ uor de construit Nu pot fi prelucrai statistic
Eficieni att pentru examinarea scris ct Criticai pentru c ncurajeaz memorarea
i pentru cea oral
Rapid de completat de ctre persoanele
evaluate
ntrebri de verificare
12
Analiza de itemi
Analize de itemi ne permite s identificm care vor fi itemii care intr n alctuirea
testului. Pentru construirea unui test de o bun calitate aceasta este o etap absolut
necesar (Albu, 1999).
Exist mai multe tehnici care pot fi folosite pentru a studia caracteristicile itemilor:
Studierea indicelui de dificultate, de discriminare,
Studierea curbei caracteristice itemului
Analiza factorial
Studiul distribuiei scorurilor
b) indicele de discriminare
Indicele de discriminare al unui item msoar ct de bine reuete un item s separe
sau s discrimineze subiecii care au obinut scoruri mari de cei care au obinut scoruri
mici la test. Mai precis, un item este considerat discriminativ dac subiecii care au
obinut o performan bun la test au rezolvat corect itemul, respectiv dac cei care au
obinut o performan sczut la test nu au rezolvat corect itemul. Dac majoritatea
subiecilor cu performan mare la test nu au rezolvat corect un item, nseamn c
itemul respectiv nu discrimineaz ntre categorii diferite de subieci. Se recomand ca
indicii de discriminare ai tuturor itemilor inclui ntr-un test s aib valoarea de minim
0,30.
c) analiza factorial
Una dintre metodele utilizate n validara de construct este analiza factorial. Analiza
factorial este definit ca un set de proceduri matematice utilizate pentru a identifica
dimensiunile care stau la baza uneui set de msurori empirice. Cel mai adesea este
utilizat pentru:
identificarea factorilor care stau la baza performanei la un test de aptitudini
identificarea unor dimensiuni ale personalitii
identificarea unor sindroame clinice
identificarea factorilor relaionai cu satisfacia n munc
13
n continuare vor fi discutate principalele concepte implicate n analiza factorial.
Concepte generale
Un concept teoretic central al analizei factoriale l constituie deci relaia dintre atributele
interne i cele de suprafa. Principiul de baz este acela c atributele interne
influeneaz sistematic atributele de suprafa. Acest fapt implic ideea c atunci cnd
avem o msur a unui atribut de suprafa, aceast msur este, cel puin n parte,
rezultatul influenei atributelor interne. De exemplu, scorul obinut de o persoan la un
test de adunare (atribut de suprafa) este influenat de aptitudinea numeric (atribut
intern). Tradiional, aceste relaii dintre atributele de suprafa i cele interne sunt
considerate a fi lineare.
n continuare este util s distingem ntre 2 tipuri de atribute interne sau factori: factori
comuni i factori specifici. Factorul comun este definit ca un atribut intern care afecteaz
/influeneaz mai mult de o variabil de suprafa. De exemplu, dac factorul aptitudine
numeric influeneaz mai mult dect o variabil de suprafa (s presupunem c
influeneaz att adunarea ct i nmulirea) atunci acesta factor este un factor comun.
Factorii specifici influeneaz doar o singur variabil de suprafa; astfel poate exista
un numr de factori specifici pentru fiecare variabil de suprafa. Prin schimbarea
variabilelor de suprafa factorul comun se poate transforma n factor specific dac se
nltur toate variabilele de suprafa care l alctuiesc, mai puin una; sau dimpotriv,
dac lrgim bateria, un factor specific se poate transforma ntr-un factor comun dac el
influeneaz mai multe variabile de suprafa.
n afara celor 2 variabile interne (factorii comuni i specifici) care influeneaz variabilele
de suprafa, exist o a treia influen asupra acestora. Aceast a treia influen o
constituie erorile de msur asociate observrii atributelor de suprafa. Aceste erori
sunt reprezentate n analiza factorial ca factori adiionali, dei ele nu fac parte din
cadrul atributelor interne; adic nu reprezint caracteristici neobservate ale indivizilor.
Mai degrab erorile de msur apar ca rezultat al influenelor datorate msurtorii
atributelor de suprafa. Se poate observa relaia direct ntre factorii de suprafa i
erorile de msur; astfel, cu ct fidelitatea msurtorilor este mai mare cu att erorile
sunt mai mici. Deci, utilizarea unor teste mai puin fidele va influena erorile de msur,
dar nu n mod necesar factorii comuni sau specifici. De asemenea, adugarea sau
nlturarea unor variabile de suprafa va influena factorii comuni sau specifici, ns nu
va influena erorile de msur.
14
Factorii specifici i erorile de msur caracteristice unui set de observaii se pot combina
rezultnd factori unici. Un factor unic este alctuit dintr-un factor specific caracteristic
unei singure variabile de suprafa precum i din eroarea de msur asociat variabilei
de suprafa respective. Factorul unic se va modifica la orice modificare a factorului
specific sau a erorii de msur.
Pornind de la aceste definiii ale factorilor, innd cont de faptul c factorii influeneaz
atributele de suprafa se poate nelege c factorii se combin pentru a putea explica
un anumit nivel al trsturilor de suprafa. Mai precis, orice nivel al atributelor de
suprafa poate fi vzut ca o rezultant a factorilor relevani. De exemplu, scorul unei
persoane la un test de adunare poate fi vzut ca o rezultant a factorului comun
aptitudine numeric i a factorului specific asociat adunrii. De asemenea, eroarea de
msur contribuie la scorul obinut la testul de adunare. Generaliznd putem spune c
diferenele individuale sau variana atributelor de suprafa poate fi atribuit factorilor
adiaceni acestor atribute. Astfel diferenele la nivelul atributelor de suprafa sunt
datorate diferenelor la nivelul factorilor ce influeneaz aceste atribute i de asemenea
diferenele sunt datorate i erorilor de msur.
Distincia realizat anterior ntre factorii comuni, specifici i eroarea de msur ne ajut
s nelegem modul n care factorii explic variana atributelor de suprafa. Este
important de reinut faptul c variana observat la nivelul atributelor de suprafa poate
rezulta din trei surse. O parte din varian este datorat influenei factorilor comuni
aceasta poart numele de varian comun sau comunalitate. O alt parte din variana
atributelor de suprafa poate fi datorat factorului specific aceast varian este
denumit varian specific sau specificitate. Cea de-a treia surs de varian este
datorat erorilor de msur i este denumit variana erorii de msur. Variana
specific este adesea combinat cu variana erorii de msur i formeaz variana unic
sau unicitatea. Altfel spus, variana observat la nivelul unui atribut de suprafa este
datorat n parte factorilor care influeneaz i alte atribute de suprafa i n parte
factorilor care influeneaz doar atributul respectiv.
Este extrem de important a se reine faptul c doar factorii comuni pot explica corelaia
variabilelor de suprafa; factorii unici nu determin astfel de corelaii. La fel, factorii
specifici sau erorile de msur nu pot determina corelaii ntre atributele de suprafa
deoarece prin definiie ei influeneaz doar o singur variabil de suprafa.
Pentru a sumariza aceste principii putem spune c ntr-un anumit domeniu exist un
numr mic de factori comuni care influeneaz un vast numr de atribute de suprafa.
15
Variaia factorilor de suprafa este datorat n parte variaiei factorilor comuni. Ceea ce
rmne se datoreaz factorilor unici sau factorilor specifici i erorilor de msur.
Covariana variabilelor de suprafa este atribuit dependenei acestora de aceiai
factori comuni.
Este important de reinut faptul c teoria factorial este o teorie care explic dinamica i
influenele care determin variaia i covariaia atributelor de suprafa.
Screeningul variabilelor
O a doua utilizare a analizei factoriale se refer la analiza pe baz de screening a
variabilelor care ulterior pot fi incluse n investigaii statistice ca analiza de regresie.
Deoarece analiza factorial identific grupe de variabile care sunt corelate ntre ele
putem opta la alegerea unei singura variabile din fiecare factor i includerea acestei
variabile ntr-o ecuaie de predicie.
Sumarizarea datelor
O alt aplicaie a analizei factoriale se refer la flexibilitatea de a extrage ci factori se
dorete dintr-un set iniial de variabile. Primii factori extrai dintr-un set de variabile
explic cea mai mare parte din variana acestora; cu fiecare extragere ulterioar se
obine tot mai puin.
Selecia variabilelor
AF ne permite extragerea factorilor diferii dintr-un set de variabile. De exemplu dac se
pune problema selecie caracteristicilor definitorii ale unui automobil n vederea
construciei unei reclame ne intereseaz s pstrm un numr de variabile rezonabil
pentru a putea construi reclama. Este important ns ca acest variabile selectate s nu
se refere la acelai factor, ele trebuind s nu coreleze ntre ele.
16
Tipuri de validitate a unui test de cunotine matematice (Anastasi, 1976).
Tehnicile de analiz calitativ a itemilor unui test constituie un procedeu des ntlnit n
analiza itemilor unui test. Tabelul de mai jos prezint o serie de aspecte ale analizei
calitative de itemi pe care trebuie s le ia n calcul o persoan care construiete un test.
17