Conferina Naional de nvmnt Virtual, ediia a VI-a, 2008 77

Principiile psihopedagogice de elaborare a

testelor informatizate


Elena Railean,
Universitatea de Stat din Moldova,
e-mail: raileanu@usm.md


Abstract
Evaluarea informatizat constituie o modalitate eficient de nvare n mediile educaionale
virtuale. Unitatea elementara a evalurii este testul pe calculator, util att n evaluarea
diagnostic, ct i formativ i sumativ. n lucrare se analizeaz corelaia dintre tipul
evalurii, tipul testelor i tipul itemilor. Conceptele teoretice sunt argumentate prin
rezultatele experimentrilor practice, fapt care a permis de a generaliza principiile
psihopedagogice de elaborare a testelor informatizate. Corelaia datelor experimentale este
analizat prin metoda Kuder Richardson.

Cuvinte cheie: teste informatizate, validitate, fidelitate, evaluare diagnostic,
evaluare formativ, evaluare sumativ


1. Introducere

Tehnologiile de informare i comunicaie ofer o posibilitate unic eficacitii
procesului de nvmnt prin prezentare de feedback imediat[1, p.112]. Procesele de
evaluare informatizat sunt realizate prin testul pe calculator. Testul pe calculator,
asemeni testului clasic, constituie un instrument de cercetare alctuit dintr-un
ansamblu de itemi, care vizeaz cunoaterea fondului informativ i formativ dobndit
de subiecii investigai, respectiv identificarea prezenei / absenei unor cunotine,
analiza comportamentului sau a proceselor psihice[2]. Testul pe calculator este
compus din itemi informatizai, clasificndu-se, ca i n cazul testului clasic, n itemi
obiectivi (itemi cu alegere dual, itemi cu alegere multipl, itemi de tip pereche etc.),
itemi semiobiectivi (itemi cu rspuns scurt, completarea spaiilor libere etc.) i itemi
subiectivi (tip eseu)[3]. Deosebirea const n modalitatea de elaborare a itemilor care
necesit respectarea unor principii psihopedagogice deosebite.
n abordare psihopedagogic testul pe calculator constituie o metod efectiv de
formare a cunotinelor / abilitilor / competenelor. Aceast concluzie deriv din
ipoteza c instruiii i fixeaz atenia asupra procesrii informaiilor din itemii
informatizai datorit faptului c procesul este monitorizat rapid. Astfel, procesarea
informaiilor la nivel cognitiv superior se produce dac este iniiat actul de atenie[4].
Atenia depinde de: 1)timpul de prezentare a datelor; 2)natura, cantitatea i calitatea
informaiilor; 3)semnificaia datelor pentru instruit; 4)caracterul datelor: tiinific sau
empiric i de faptul dac 5) instruitul dispune de structuri cognitive complete,
complexe, flexibile, aflate la un nalt grad de organizare i dezvoltare[5, p.267].





78 Universitatea din Bucureti i Universitatea Ovidius Constana

Timpul de prezentare a datelor este echivalent cu 20 minute[6, 10]. Aceast valoare
corespunde parametrului automatizare() care include valori 0 K 1. Testul se
consider valid dac K =0.5 pentru domeniile care nu includ caracteristica fluency i,
respectiv 1 pentru performana care necesit caracteristica fluency[6, p.33]. Parametru
identificat este echivalent cu timpul de meninere a ateniei - 15-20 minute[6, 10].
Cantitatea informaiilor este echivalent cu 30 -100 operaii de test[7, 8]. Natura i
calitatea informaiilor este determinat de diversitatea formelor elective (itemi care
necesit rspunsuri nchise) i constructive (itemi care necesit rspunsuri deschise)[9].
Este important de a personaliza maximal posibil att formele constructive, ct i
elective, astfel nct informaia s devin semnificativ pentru instruit, iar diversitatea
formelor s coreleze cu diversitatea formelor alternative programate preventiv.
Formele de rspunsuri preventiv programate depind de utilitarul selectat. De cele
mai dese ori se utilizeaz Questionmark, Hot Potatoes, Moodle, eFront etc.
Questionmark este un utilitar de creare i modificare rapid a coninuturilor itemilor
informatizai, ct i de publicare webalizat a testelor sub form de examene, teste
gril, sondaje de opinie i chestionare. Hot Potatoes este un sistem format din ase
instrumente JQuiz, JMatch, JMix, JCross, JClose i Master care permite de a crea itemi
cu mai multe variate de rspunsuri dintre care una este corect; cu rspunsul nscris n
caseta de editare; cu mai multe variante de rspunsuri corecte; cu identificarea
interdependenelor dintre dou coloane; de amplasare n ordine a cuvintelor; de creare
a integramelor / rebusurilor sau de completare a golurilor n fraze. Setul de itemi
construii n platformele Moodle i eFront este mult mai sofisticat.

2. Autoevaluarea informatizat

Autoevaluarea informatizat constituie o metod eficient de automatizare a
competenelor n procesul de obinere a performanei. Esena metodei const n
verificarea independent de ctre instruit a cunotinelor acumulate i analiza
computerizat a calitii rspunsurilor. Eficiena autoevalurii informatizate este
demonstrat la etapa iniial (autoevaluarea de diagnostic) i intermediar
(autoevaluarea formativ). Autoevaluarea este realizat cu condiia c instruiii posed
competena de autoreglare. Dup cum constat (2007) competena de
autoreglare este determinat de valoarea coeficientului de asimilare (K):
p
K

=
,
unde a - numrul de operaii corect realizate, iar p numrul total de operaii.
n linii generale valorile coeficientului de asimilare sunt stabilite n limitele 0Ka 1.
Real sunt posibile mai multe situaii: 1)K

0.7 - procesul de instruire este considerat

finalizat i instruitul posed competena de autoreglare; 2)0.3 < K

< 0.7 instruitul

comite greeli sistematice pe care nu le poate corecta independent i necesit ajutor din
partea profesorului (real sau virtual) i 3) K

< 0.3 nvarea este la nivel iniial,

instruitul nu cunoate obiectele, procesele, fenomenele i aciunile i nu poate
autoregla procesul su de nvare, dar nici nu manifest interes. Cu toate c primul i
al doilea caz poate fi corectat prin diverse intervenii n coninutul electronic, cel de al
treilea caz necesit prezena real a profesorului i metode cu accent motivaional.
Tabelul 1. Corelaia aciuni de nvare - obiective itemi informatizai





Conferina Naional de nvmnt Virtual, ediia a VI-a, 2008 79

A Obiectivele i verbele de aciune Itemi
R
e
p
r
o
d
u
c
t
i
v
e

1. de cunoatere(senzaia!)- cunoaterea prin recunoatere a
terminologiei, evenimentelor, mijloacelor, clasificrilor,
criteriilor, metodelor, tendinelor; detectarea, receptarea i
diferenierea simplist a stimulilor
Verbe de aciune: a diferenia, a separa, a alege, a combina,
a accepta, a controla, a distinge, a selecta, a separa, a izola,
a acumula, a combina, a accepta
Itemi cu selecie
multipl
itemi de tip hibrid,
itemi cu alegere
multipl, scala
Linket, potrivire
2. de nelegere(percepia!) gruparea datelor prin detecie,
discriminare, rezoluie, identificare, manipulare
Verbe de aciune: a completa spaiile libere, a exprima prin
cuvintele proprii, a schimba ordinea, a rescrie, a redefini, a
reorganiza, a diferenia, a extinde, a interpola, a extrapola
rspuns scurt,
clasament, itemi
de tipul drag and
drop, HotSpot,
Da/Nu etc.
P
r
o
d
u
c
t
i
v
e

3. de aplicare(reprezentarea!) reprezentarea mintal a
calitii senzoriale a unui obiect lips din cmpul perceptiv [76, p.188]
Verbe de aciune: a specifica, a asista, a ajuta, a nega, a
dezbate, a argumenta, a detecta, a identifica, a clasifica, a
recunoate, a categoriza, a deduce, a ncerca, etc.
cuvine ncruciate
itemi de detectare
a cuvintelor care
lipsesc, selectare
n spaiu
4. de analiz(gndire!)- identificarea ierarhiei ideilor i (sau)
a raporturilor n ideile exprimate prin evidenierea
elementelor, relaiilor i a principiilor de organizare;
organizarea valorilor n sistem prin identificarea
interdependenelor
Verbe de aciune: a distinge, a detecta, a identifica, a
clasifica, a categorisi, a deduce, a analiza, a constata, a
compara, a distinge, a discuta, a compara, a organiza, a
defini, a formula, etc.


Itemi de tip eseu,
studii de caz,
matrice de
cunotine
5. de sintez(memoria!) combinarea fragmentelor, prilor
i elementelor ntr-un plan sau structur, derivarea
concretului din ansamblu de relaii abstracte, ierarhizarea
valorilor prin organizare ntr-un sistem intrinsec coerent.
Verbe de aciune: a produce, a constitui, a crea, a modifica,
a proiecta, a specifica, a dezvolta, a combina, a organiza, a
sintetiza, a clasifica, a deduce, a dezvolta, a formula, a
modifica, a revizui, a schimba, a completa, a pretinde a fi
bine apreciat de ctre cei egali cu tine pentru o aciune sau o
calitate oarecare, a rezolva, a executa

descrcare de
fiiere, completare
de spaii libere,
matrice rezumat,
evaluarea semeni,
hri conceptuale,
concluzii i
generalizri
6. de evaluare i creare (imaginaie!) formularea
judecilor calitative sau cantitative asupra valorii
materialelor i metodelor aplicate cu scop exact, adaptarea
i crearea unui nou sistem de micri
Verbe de aciune: a judeca, a argumenta, a valida, a evalua,
a decide, a considera, a compara, a contrasta, a standardiza,
a evolua a adapta, a schimba, a modifica, a revizui a crea, a
proiecta, a iniia)

discuii n grup,
studiu de caz,
proiecte, portofolii
electronice





80 Universitatea din Bucureti i Universitatea Ovidius Constana

Specificul testelor de autoevaluare informatizat este prezentarea de feedback
imediat. n baza rezultatelor cercetrilor experimentale a fost constatat c la includerea
activ a instruitului n procesul de evaluare informatizat starea iniial a sistemului su
cognitiv tinde spre starea prognozat independent cu condiia c K 0.7, K =15-20
min. Este demonstrat trecerea sistemului cognitiv din starea iniial la una din
strile intermediare n dependen de zona de dezvoltare proxim, dar, totui,
probabilitatea obinerii unui nivelul cognitiv depinde de tipologia itemilor programai,
de nivelul de cunotine al instruitului, de scopul instruitului i de competena digital.
Itemii sunt programai ca o interdependen dintre verbele de aciune extrase din
totalitatea taxonomiilor cognitive, afective i psihomotorii (tabelul 1). n raport cu
nivelul de nivelul de cunotine al instruitului constatm c pentru facilitarea nivelului
de cunoatere se programeaz itemii obiectivi, iar pentru facilitarea nivelului de
nelegere - semiobiectivi. Indiferent de aceste rigorii este necesar ca instruitului s
cunoasc obiectivele finale i modalitatea de evaluare, de exemplu a proiectului final.
n proiectarea itemilor este important de a deosebi corelaia dintre forma i coninutul
itemilor i forma i coninutul rspunsului. Astfel, rspunsul corect la itemii obiectivi
se obine prin selectarea unei singure sau a mai multor opiuni din rspunsurile
prezentate n premis. Premisa poate fi elaborat n form de propoziie complet,
incomplet sau comun inclus n indicaii, dar important este de a scrie condiiile sub
form de raionament[11]. Spre deosebire de itemii obiectivi, prin itemii semiobiectivi
se testeaz o gam mai larg de abiliti cognitive i competene digitale datorit
complexitii sporite a sarcinilor. Itemii semiobiectivi se clasific n itemi cu ntrebri
structurate i itemi cu rspuns scurt. Testele informatizate care includ itemi cu
ntrebri structurale sunt utile n cazul n care este necesar de a cunoate prin nelegere
o formul, un simbol, o propoziie, o operaie algebric etc.(figura 1).



Figura 1. Test de autoevaluare cu itemi care includ ntrebri semistructurale






Conferina Naional de nvmnt Virtual, ediia a VI-a, 2008 81

Testele informatizate care includ itemi cu ntrebri cu rspuns scurt sunt utile n
cazul n care este necesar de a cunoate prin aplicare o formul, un simbol, o
propoziie, o operaie algebric. Rspunsul este verificat dup introducerea de ctre
instruit a datelor, cifrelor, definiiilor etc.(figura 2).



Figura 2. Teste de autoevaluare cu itemi care includ rspuns scurt

Avantajul utilizrii testelor cu itemi obiectivi i semiobiectivi const n
autoevaluarea prin automatizare rapid a celor nvare. Aceste categorii nu vizeaz
capacitatea instruitului de a formula, a descrie, a explica sau a argumenta cele nvate
este demonstrat utilitatea itemilor cercetai , n special a itemilor cu alegere multipl i
care includ rspuns scurt, n automatizarea mecanismelor cognitive primare.

3. Validitatea i fidelitatea testelor informatizate

Cea mai important etap a procesului de elaborare a testelor informatizate este
proiectarea itemilor de calitate. Testele realizate n varianta computerizat necesit de a
fi pretestate cu scopul de a identifica dac msoar cea ce a fost proiectat s msoare.
Pentru a realiza acest obiectiv testul prototip este administrat unui grup de instruii,
iar datele colectate sunt analizate. Situaia ideal se obine cnd testul informatizat este
testat pe un grup de instruii care studiaz n condiii similare cu populaia - int. Ca
rezultat sunt determinate dou caracteristici de baz a testelor: validitatea i fidelitatea.

3.1 Validitatea testelor informatizate

Validitatea se refer la faptul dac testul msoar ceia ce este destinat s
msoare[12, p.20]. Principala condiie este ca n premisa unui test informatizat s nu
existe elemente de interferen. Validitatea se clasific dup n: validitate de construct,
validitate concurent, validitate predictiv, validitate de faad i validitate de





82 Universitatea din Bucureti i Universitatea Ovidius Constana

construct[3, 12]. Cea mai util pentru testul informatizat este validitatea de construct.
Aceast modalitate permite de a determina msura n care testul informatizat acoper
uniform elementele de coninut pe care le testeaz.
n cazul manualului electronic determinarea validitii de construct a testelor de
autoevaluare poate fi realizat prin metoda dublei expertize. Aceast metod const n
compararea rezultatelor grupului de experi i grupului de instruii la etapa final a
nvrii prin intermediul manualului electronic. Analiza rezultatelor se calculeaz n
fiecare caz aparte dup formula:
4
Ev E P T
Ec
+ + +
=
,
4
Ev E P T
Sc
+ + +
=

unde Ec expert, Sc student , T tehnologie, P planificare, E executare i
monitorizare, Ev evaluare.
Analiza comparativ a rezultatelor obinute de ctre grupul de experi (cel puin 3)
i grupul de instruii (cel puin 25) sunt analizate dup formula de determinare a
indicelui de calitate.
n
Sc Sc Sc
n
Ec Ec Ec
Ic
n n
... ...
2 1 2 1
+ +
+
+ +
=

unde I
C
indicele de calitate calculat pentru fiecare expert (E
C1
, ...E
Cn
) i
pentru fiecare student (S
C1,
...S
Cn
).
Componente tehnologie, planificare, executare, monitorizare i evaluare au fost
elaborate n baza chestionarelor TELESTUDENTS-SRL i TELEEXPERT realizate de
Institutul de Tehnologie Didactic din Genova, Italia. n cazul cercetat a fost obinut
valoarea indicelui de calitate a manualului electronic egal cu 4.6 din 5 posibile.

3.2 Fidelitatea testelor informatizate

Fidelitatea testelor informatizate reprezint calitatea unui test de a produce
rezultate constante n cursul aplicrii repetate. Dintre diversele metode de determinare
a fidelitii, descrise de Havrleanu (2000), metoda Kuder Richardson, prezint un
interes deosebit. Procedeul experimentat prin combinarea metodelor test retest i a
testelor paralele a constat n prezentarea aceleiai forme a testului generat aceluiai
grup de subiecii la un interval de o sptmn. Coeficientul de echivalen a fost
calculat dup formula:
( )

=
2
1
1 k
x k n
k
k
KR

unde k numrul de itemi, x media aritmetic, - derivaia standard.

Datele colectate n experimentul realizat pe data de 8.04.08 i repetat pe data
16.04.08 la liceul G. Clinescu, Chiinu au fost analizate dup formula elucidat:
21 . 1
8 . 1 30
) 9 30 ( 10
1
1 30
30
2
=

= KR

Obinerea valorii coeficientului de fidelitate ~1 demonstreaz c testul este calitativ,
fidelitatea exprimnd obinerea rezultatelor echivalente n perioade diferite de timp.






Conferina Naional de nvmnt Virtual, ediia a VI-a, 2008 83

4. Evaluarea sumativ informatizat

n nvarea informatizat evaluarea sumativ informatizat constituie o metod
efectiv de msurare, dar i de generalizare a cunotinelor la sfrit de modul sau curs.
n cazul n care se pune accent pe msurare evaluarea sumativ este mai aproape de
evaluarea de diagnostic (figura 3).



Figura 3. Testul informatizat de diagnostic

Scopul de generalizare poate fi realizat n cazul n care instruiii posed competena
de autoreglare. Din aceste considerente este demonstrat eficiena n manualul
electronic pentru clasele superioare. Pentru construirea testelor, n mod analog ca i n
cazul testelor clasice se apeleaz la recomandrile lui Stoica (2001) de a construi
matricea de specificaii.

5. Principiile psihopedagogice de elaborare a testelor informatizate

n elaborarea testelor informatizate se aplic dou principii: 1)scrierea sarcinilor
sub form de raionament i 2)principiul claritii coninuturilor itemilor.
Scrierea sarcinilor sub form de raionament. n opinia lui ,
i (1989) nu este corect de a folosi ntrebarea n construirea
textului sarcinii: raionamentul este orientat spre obinerea unei concluzii axat pe un
gnd finit, nu permite instruitului de a se eschiva de la rspuns i micoreaz
probabilitatea de a rspunde incorect. Din punct de vedere psihopedagogic aceast idee
este validat de Zlate (2004).
Principiul claritii coninuturilor itemilor enun c coninuturile de instruire i
itemii informatizai sunt expuse clar i sunt semnificativi pentru instruit. Acest
principiul este validat prin respectarea urmtoarelor reguli:
a. itemii informatizai trebuie prezentai scurt i n acelai stil;
b. timpul de vizualizare nu va depi 1.5 2 minute;
c. sarcinile nu trebuie s includ date neverificate sau neclare. n caz contrar
exist probabilitatea apariiei strii de inconfort psihologic, inhibiia sistemului
cognitiv sau encodarea datelor greite





84 Universitatea din Bucureti i Universitatea Ovidius Constana

d. n compunerea itemilor informatizai sunt utilizate nomenclatura i simbolurile
cunoscute de instruit
e. n elaborarea testelor informatizate se aplic itemi de diferit nivel de
complexitate i dificultate
f. este necesar de a reduce la minimum probabilitatea de a ghici rspunsul
corect prin nlocuirea n toate cazurile posibile a itemilor obiectivi cu itemi
semiobiectivi i subiectivi.
n baza cercetrilor realizate n cadrul experimentului de validare a manualelor
electronice la Informatic, Logic i Chimie nu a fost argumentat regula: O sarcin
include un singur rspuns corect. Nu se permit ntrebri de tipul: Determinai care din
produse reaciei de reducere a acidului azotic se formeaz la interaciunea HNO
3
(d) cu
ZnN? nsoite de opiunile NH
4
NO
3
, N
2
i NO. Constatm c neexactitatea se refer la
scrierea coninutului itemului informatizat, dar nu n enunarea rspunsurilor corecte.
O condiie important de elaborare a testelor informatizate este respectarea parametrilor de
diagnosticare a scopului. Astfel, un test informatizat este efectiv dac este lucrativ timp de 20
minute i dac include cel puin 30 operaii de test. Instruiii manifest interes fa de procesul
de evaluare informatizat, astfel nct n nici un caz din cele cercetate nu au fost obinute valori
procentuale mai mici dect 70%.

6. Concluzii i generalizri

Evaluarea informatizat este o metod eficient de formare a abilitilor. Acest rezultat se
obine dac testele informaionale ocup un loc strict determinat n metodica de nvare a
conceptelor i dac n elaborarea testelor de evaluare se respect principiul claritii scrierii
coninuturilor i a itemilor. Principiul este validat prin condiia de respectare a parametrilor de
diagnosticare a scopului.

9. Bibliografie

[1] . ., . ., . .,
, : , 2004
[2] Boco, M. Teoria i practica cercetrii pedagogice, Editura Casa Crii de tiin, Cluj-
Napoka, 2003
[3] Stoica A., Musteaa S. Evaluarea rezultatelor colare. Chiinu , 2001
[4] H, , : , 2000
[5] Zlate Mielu, Psihologia mecanismelor cognitive, Iai: Polirom, 2004
[6] Melnic B Fiziologia omului i a animalelor, Chiinu: tiina, 1999
[7] . ., ,
, N1, 2007, c. 19-34
[8] . ., . .:, 1988, p.160
[9] . .,
, : 1969
[10] Nicola Ioan., Pedagogie, Chiinu: Dom Farca, 1993
[11] . ., . ., . ., ,
, 1989
[12] Havrleanu C., Cunoaterea psihologic a persoanei., Iai: Polirom, 2000, 240