Investete n oameni!

Proiect cofinanat din Fondul Social European prin Programul Operaional Sectorial pentru Dezvoltarea Resurselor Umane 2007 2013 Axa prioritar 1 Educaia i formarea profesional n sprijinul creterii economice i dezvoltrii societii bazate pe cunoatere Domeniul major de intervenie 1.1 Acces la educaie i formare profesional iniial de calitate Titlul proiectului: Instrumente digitale de ameliorare a calitii evalurii n nvmntul preuniversitar Beneficiar: Ministerul Educaiei, Cercetrii, Tineretului i Sportului Numar de identificare a contractului: 3074 Nr. de inregistrare al AMPOSDRU: POS DRU/1/1.1/S/3

SUPORT CURS
,,FORMARE SPECIALITI N EVALUARE INSAM
din cadrul proiectului ,, INSTRUMENTE DIGITALE DE AMELIORARE A CALITII EVALURII N NVMNTUL PREUNIVERSITAR (realizat n baza contractului POS DRU/1/1.1/S/3; ID: 3074)

Cuprins
0. Introducere ........................................................................................................................................... 3 Descriere succint a proiectului ................................................................................................................ 3 Accesarea sistemului informatic INSAM ................................................................................................... 6 1. Reactualizarea cunotinelor privind metodele alternative de evaluare din perspectiva structurii platformei naionale de evaluare INSAM ................................................................................................... 10 Evaluare centrat pe competene .......................................................................................................... 10 Calitile probelor de evaluare ............................................................................................................... 13 Strategii, metode i tehnici de evaluare, criterii, standarde, indicatori de evaluare a competenelor. 20 Itemi de evaluare .................................................................................................................................... 24 2. Managementul testelor n cadrul platformei INSAM i administrarea acestora ctre elevi .............. 29 Ce este un test?........................................................................................................................................ 29 Generarea automat de teste ................................................................................................................... 32 Generarea manual de teste..................................................................................................................... 40 Administrarea testelor ctre o clas (grup de elevi) ................................................................................ 49 Administrarea unui test ctre un elev (individual) ................................................................................. 55 3. Corectarea testelor, rezultatele elevilor, statistici i rapoarte n platforma INSAM .......................... 59 Seciunea teste de corectat ...................................................................................................................... 59 Seciunea teste corectate ......................................................................................................................... 61 Corectarea unui test................................................................................................................................. 62 Identificarea itemilor deschii ............................................................................................................. 62 Notarea i evaluarea unui item ............................................................................................................ 62 Finalizarea corectrii ........................................................................................................................... 63 Editarea mesajului pentru elev ............................................................................................................ 63 Vizualizarea i analiza rezultatelor elevilor ............................................................................................ 64 Rezultate pe test, pe clas, pe coal ................................................................................................... 64 Alte rapoarte i analize pe rezultatele elevilor .................................................................................... 65 Seciunea Rapoarte.................................................................................................................................. 66 Principalele rapoarte existente n aplicaie.......................................................................................... 66

0. Introducere Descriere succint a proiectului

Proiectul INSAM (Instrumente digitale de ameliorare a calitii evalurii n nvmntul preuniversitar) are ca obiectiv dezvoltarea i implementarea de instrumente i mecanisme digitale de mbuntire a proceselor evaluative i de autopozitionare / autoevaluare a elevilor din nvmntul preuniversitar liceal. Proiectul vizeaz sistemul de nvmnt preuniversitar, cu o focalizare special pe nivelul liceal, unde nevoile de evaluare / autoevaluare / autopoziionare sunt mai acute, din perspectiva diversificrii traseelor de nvare i a oportunitilor existente la final de ciclu. Proiectul adreseaz prioritatea strategic Dezvoltarea resurselor umane, promovarea ocuprii i a incluziunii sociale i ntrirea capacitii administrative din Planului National de Dezvoltare 2007 - 2013 si mai exact rspunde obiectivului de dezvoltare a capitalului uman i de cretere a competitivitii acestuia pe piaa muncii, prin asigurarea oportunitilor egale de nvare pe tot parcursul vieii i dezvoltarea unei piee a muncii moderne, flexibile i inclusive. Proiectul urmrete s abordeze aspecte problematice legate de procesele evaluative prin oferirea unui sistem informatic performant de evaluare accesibil tuturor participanilor la procesul de educaie (elevi, cadre didactice) i stimularea acestora n procesul unei educaii adaptate nevoilor pietei muncii si societatii bazate pe cunoastere. Prezentul proiect vine sa sustina aceste deziderate prin modernizarea i diversificarea modului de furnizare a educaiei de la nivel preuniversitar, prin utilizarea resurselor i serviciilor digitale care vor constitui o baza pentru dezvoltarea rutelor flexibile de nvare i pentru asigurarea calitii procesului educational. Obiectivul general l constituie dezvoltarea i implementarea de instrumente i mecanisme digitale de mbuntire a proceselor evaluative i de autopozitionare / autoevaluare a elevilor din nvmntul preuniversitar liceal. Obiectivul principal va fi ndeplinit prin intermediul obiectivelor specifice propuse:

mbuntirea evalurii performanelor elevilor prin dezvoltarea unor aplicaii informatice i a unei baze de date cu resurse digitale specifice (itemi de evaluare) care s poat fi utilizate att de ctre profesori ct i de ctre elevi n cadrul proceselor de evaluare i autoevaluare. mbuntirea proceselor de autopoziionare/autoevaluare a elevilor din nvmntul preuniversitar prin dezvoltarea de metodologii i instrumente de evaluare care s implice utilizarea de resurse digitale specifice. Creterea calitii proceselor de evaluare a elevilor prin facilitarea accesului cadrelor didactice i elevilor la resurse i servicii digitale pentru evaluarea/ autoevaluarea performanelor, a dezvoltrii personale i a perspectivelor privind evoluia n carier a acestora.

Creterea capacitii cadrelor didactice i a elevilor de a utiliza evaluarea prin instrumente/servicii digitale pentru mbuntirea nvrii i a orientrii colare i profesionale a elevilor. Dezvoltarea unui corp comun de metodologii, proceduri si instrumente de evaluare a cror aplicare s asigure premisele instaurrii unei culturi a evalurii la nivelul nvmntului preuniversitar din Romnia. Dezvoltarea unui sistem informatic de evaluare care s pun la dispoziia elevilor i cadrelor didactice responsabile cu evaluarea instrumente i mecanisme digitale de evaluare.

Proiectul INSAM i-a propus elaborarea a 150 000 de itemi de evaluare pentru urmtoarele discipline de studiu: Limba i literatura romn, Limba francez, Limba german, Limba englez, Matematic, Fizic, Chimie, Biologie, Istorie, Discipline socio-umane, Geografie, Informatic+TIC.

Aceti itemi de evaluare au fost elaborai de ctre cadrele didactice de specialitate, formate n acest sens, pe baza unor modele stabilite n cadrul proiectului i cu ajutorul unor aplicaii digitale de ncrcare i management al itemilor.

n cadrul sistemului informatic de evaluare INSAM sunt prevzute mai multe categorii de utilizatori. Pentru cadrele didactice sunt prevzute 3 roluri, fiecare dintre ele cu drepturile de acces de rigoare i cu aciuni specifice n cadrul sistemului digital i in cadrul activitii de elaborare a itemilor. n cadrul sistemului vor exista astfel 3 nivele de acces pentru profesori: Nivelul 1 va permite profesorilor s creeze teste n cadrul sistemului pe baza itemilor predefinii existeni n sistem. Vor putea s administreze aceste teste, s le livreze ctre utilizatorii selectai sau direct ctre o clas de elevi, vor putea s analizeze rezultatele obinute la teste i s vizualizeze diferite rapoarte, ierarhii sau clasamente. Vor putea comunica cu ceilali profesori prin intermediul uneltelor de comunicare existente n sistem sau vor putea s citeasc ghiduri i
4

metodologii de evaluare. Pentru a identifica rapid itemii necesari crerii de teste sau alte informaii din cadrul sistemului, profesorii vor avea la dispoziie funcionaliti de cutare. Nivelul 2 de acces presupune, pe lng activitile descrise mai sus, i posibilitatea de a crea i edita itemi, de a-i introduce n sistem, de a-i trimite spre validare i, odat validai, s se poat crea i livra teste cu acetia. De asemenea, pentru acest nivel de acces vor exista faciliti de import i export de itemi. Suplimentar, profesorii de nivel 3 sunt acei profesori care pot valida itemii creai i trimii spre validare de ctre profesorii de nivel 2.
Tabel roluri principale pentru cele 3 categorii de utilizatori profesori:

ROL

Profesor nivel 1 Profesor nivel 2 Profesor nivel 3

Creeaz Teste n sistem pe baza itemilor existeni X X X

Creeaza i ncarc Itemi noi n sistem

Valideaz Itemii noi propui (aprob / resping)

X X

n figura de mai jos este reprezentat fluxul sistemului de evaluare i rolul itemilor din sistem n cadrul acestui flux.

Flux sistem de evaluare

Accesarea sistemului informatic INSAM

Aplicaia este disponibil online i se poate accesa de pe un calculator normal, cu un sistem de operare obinuit. La prima autentificare n sistemul informatic sunt necesare cteva precizri i verificri, dup cum vom detalia n continuare.

Pentru autentificarea n sistemul informatic parcurgei urmtorii pai: Pasul 1: deschidei un browser (Internet Explorer, Mozilla Firefox, Google Chrome etc.). Recomadm utilizarea browserului Internet Explorer, o versiune mai recent (7+).

Asigurai-v n prealabil c staia de pe care accesai sistemul informatic dispune de conexiune la internet i c aceasta este pornit.

Pasul 2: n bara de adrese a browserului tastai adresa http://insam.softwin.ro/insam

Pasul 3: n zona de autentificare, tastai numele de utilizator i parola care v-au fost comunicate i apsai butonul Intr n cont.

Atentie! n cazul n care nu ai primit datele de autentificare (nume de utilizator i parol), v rugm s contactai imediat administratorul aplicaiei sau persoana responsabil cu administrarea aplicaiei la nivelul unitii dvs de nvmnt!

Dup completarea datelor de autentificare i apsarea butonului Intr n cont, n zona de autentificare va aprea un mesaj de ntmpinare.

n cazul n care autentificarea nu a funcionat, aplicaia va afia un mesaj de eroare.

n aceste condiii v rugm s v asigurai c:

nu este apsat tasta Caps Lock ai scris corect numele de utilizator, respectiv parola nu ai copiat din greeal i spaii, n cazul n care ai completat numele de utilizator, respectiv parola prin copiere din alt document (funcia copy-paste ctrl+c si ctrl+v).

Repetai procesul de autentificare, completnd cu atenie numele de utilizator, respectiv parola. Daca autentificarea nu funcioneaz n continuare, v rugm s contactai administratorul aplicaiei, specificnd datele Dvs de identificare (nume, prenume, nume de utilizator, parola pe care ai primit-o).

Pasul 4: verificai corectitudinea datelor asociate utilizatorului Dvs, astfel: verificati dac dup mesajul de ntmpinare Bine ai venit... apare numele Dvs i dac acesta este corect. n meniul Profilul Meu apar datele Dvs i informaiile legate de utilizatorul Dvs n cadrul sistemului informatic INSAM.

n cazul n care datele nu corespund, v rugm s anunai acest lucru imediat administratorului aplicaiei sau persoanei desemnate ca fiind responsabil de administrare la nivelul unitii Dvs de nvmnt!

1. Reactualizarea cunotinelor privind metodele alternative de evaluare din perspectiva structurii platformei naionale de evaluare INSAM Evaluare centrat pe competene
Caracteristica esenial a activitii evaluative o reprezint astzi abordarea acesteia att n termeni de procese, ct i de proceduri privind msurarea rezultatelor nvrii, activitatea presupunnd desfurare, procesualitate, reglare, autoreglare etc. Cutarea echilibrului ntre nvarea ca proces i nvarea ca produs, ntre aspectele sumative, clasificatoare, certificatoare permit identificarea cauzelor/dificultilor ntmpinate de elevi n nvare, precum i ntre mecanismele reglatorii i cele autoreglatorii. n prezent, teoria pedagogic ,dar i practica n domeniu au drept int: diversificarea metodologiei, dispozitivelor, tehnicilor i instrumentelor de evaluare pentru a realiza ceea ce G. de Landsheere aprecia: evaluarea colar s devin mai exact din punct de vedere tiinific i mai echitabil din punct de vedere moral; regndirea culturii controlului i examinrii i promovarea a ceea ce numim cultur a evalurii, centrat pe procesele socio-cognitive, metacognitive n nvare; asigurarea feedbackului orientat spre finalitile proiectului evaluativ, complementarizarea metodelor tradiionale (evaluri orale, scrise, probe practice etc) cu altele noi, moderne (portofoliul, proiectul, investigaia, autoevaluarea etc), elaborarea probelor prin integrarea de itemi obiectivi, semiobiectivi i subiectivi, prin realizarea i aplicarea de matrici de evaluare, de statistici privind evoluia rezultatelor elevilor, de diminuare a erorilor mai frecvente n procesul evaluativ.

10

11

12

Calitile probelor de evaluare

Probele de evaluare trebuie s ndeplineasc o serie de ,,condiii riguroase, mai ales de natur tehnic, n msur s le asigure funcionalitatea. Aceste condiii riguroase reprezint de fapt calitile probelor de evaluare. Aceste calit sunt: identitatea, validitatea, fidelitatea, i consistena, omogenitatea, amplitudinea, sensibilitatea, standardizarea, etalonarea, utilitatea, economicitatea, operativitatea, legtura cu alte teste etc. Standardizarea Un test standardizat este un instrument a crui construcie, aplicare i interpretare sunt complet i riguros urmrite, n baza unor norme i criterii clare, acceptate i respectate de evaluatori i evaluai. Standardizarea dar i respectarea altor caliti ale testelor asigur un sistem unic de raportare valoric a tuturor subiecilor. Standardizarea este una din calitile eseniale. De aceast calitate/caracteristic depind obiectivitatea i corectitudinea testului, independent de context ori persoana evaluatorului. Fidelitatea testului sau a unei probe reprezint calitatea acestora de a oferi rezultate constante (similare) n condiiile administrrii identice, pe populaii similare sub aspect statistic. Aceast calitate ne conduce la ideea posibilitii de generalizare a instrumentului respectiv, n vederea aplicrii lui pe populaii colare cu aceleai caracteristici. Dac populaia supus analizei este o populaie standard, iar condiiile de administrare sunt i ele tipice, fidelitatea apropie testarea de condiiile de standardizare a instrumentelor. Validitatea vizeaz corespondena dintre ceea ce trebuie evaluat i ceea ce s -a evaluat efectiv. Un instrument care are caracteristica de a fi valid evalueaz ceea ce trebuie s evalueze: nimic n plus, nimic n minus, nimic altceva. Obiectivitatea testului/ probei reprezint gradul de concordan ntre aprecierile fcute de mai muli evaluatori. Testele cu o foarte mare obiectivitate sunt testele standard. Evaluarea educaional, ca i alte activiti subsumate educaiei instituionalizate nu poate evita ralierea la standardele calitii. Mai mult, se justific dezvoltarea unui mecanism propriu de asigurare a calitii care s jaloneze politicile i managementul evalurii colare. Acesta propune: - definirea standardelor calitative ale evalurii; - evaluarea calitii procedurilor de evaluare;
13

- abilitarea cadrelor didactice n operarea cu sistemele conceptuale i metodologice specifice evalurii academice; - asumarea responsabilitii pentru calitatea evalurii; - modernizarea sistemului de nregistrare i comunicare a rezultatelor obinute de ctre studeni. n mod cert, este nevoie de protejarea, meninerea i creterea calitii evalurii. Un numr de indicatori calitativi pot aduce servicii n aceast direcie i pot inspira, cu succes, concepia i practicile evaluative ale cadrelor didactice: evaluarea este conceput i se aplic, difereniat, potrivit funciilor pe care i le asum: diagnostic, prognostic, de informare, de selecie, de certificare, de orientare-consiliere etc. evaluarea este utilizat ca factor reglator al interaciunii predare-nvare i nu doar ca o component final a procesului de formare. tipurile fundamentale de evaluare sunt corelate funcional i valorificate echilibrat. exist o coresponden clar ntre obiectivele nvrii, ceea ce se pred i ceea ce se nva i cunotinele, capacitile i atitudinile evaluate (coerena curriculum-evaluare) sarcinile de evaluare vizeaz competene profesionale specifice, dar i competene generice transversale. focalizarea probelor pe sarcini autentice situaii, probleme reale, cu impact semnificativ. proiectarea probelor de evaluare se realizeaz profesional, asigurndu-se condiiile necesare de validare i fidelitate. se folosete o varietate de metode, astfel nct limitele metodelor particulare s fie minimalizate, iar efectul lor cumulativ potenat. notele sunt acordate transparent i obiectiv, pe baza rezultatelor nvrii i a criteriilor privind nivelul de performan. elevii primesc un feedback evaluativ sistematic care s le permit organizarea procesului de nvare. implicarea elevilor n procese de evaluare i autoevaluare.

14

probele de evaluare sunt controlate pentru a se asigura c nu exist influene subiective care pot defavoriza grupuri particulare. transparena criteriilor i procedurilor de evaluare; accesarea lor fr dificulti. crearea unui climat cu impact emoional pozitiv, motivant i securizat; reducerea strilor de stres i anxietate prin ambian i comportamentul cadrului didactic deschis, cooperant, prietenos.

prevenirea i combaterea, prin reguli clare i aplicate, a fraudelor academice (copiat, plagiat, importul de lucrri etc).

Din punctul de vedere al temei examinate evaluarea computerizat pe baza digitalizrii coninuturilor/ curriculumului ntemeiate pe valorizarea metodelor alternative de evaluare a rezultatelor elevilor, se recunoate importana i relevana competenei i experienei aduse de evaluatorii externi n asigurarea consistenei probelor de evaluare calitativ raportate la calitatea proceselor de instruire i nvare, propuse de specialitii n curriculum. O astfel de concepie reduce parial din limitele delicatei probleme a credibilitii datelor/ informaiilor obinute. S recunoatem, nc de la nceput, c, n ciuda unor eforturi de transparen se impune armonizarea tehnicilor noi cu cele tradiionale n ansambluri de bune practici care tind spre complexitate. i aceasta, n msura n care dorim s surprindem progresul n stpnirea unui domeniu disciplinar prin atribute interdisciplinare, absente uneori din coninutul probelor de evaluare sau al baremelor construite grbit, necreativ. O alt idee care nu satisface dect parial condiiile asigurrii calitii noului sistem de evaluare digital este convingerea c noul model/sistem ar permite armonizarea evalurii cu calitatea proceselor i stilurilor de nvare, corespondena i coerena ntre probele de evaluare prezente n platforma evaluativ digital i probele existente n manuale. n condiii disfuncionale evidente, practica ne arat existena a nu puine nepotriviri ntre ceea ce se evalueaz profesional prin metode clasice orale, prin exerciiile la tabl i controlul direct oral i rezultatele obiective obinute prin evaluri scrie i bareme evident mai ecranate de aceste noi achiziii metodologice.
15

ale

coninuturilor

digitalizate. De aici, lipsa de acceptare sau de rezisten, nmulirea surselor de contestaii,

Este de amintit i o alt posibil limit n calea unui standard al calitii evalurii computerizate. Aceasta ine de psihologia elevilor, mult mai reactivi astzi, dar i mai adaptabili la ceea ce noi socotim a fi obiectivitate, transparen i etos n evaluarea modern. Avem n vedere un fapt exprimat simplu de Vogler ( p.219) astfel: Elevii par s se acomodeze foarte bine diversitii de probe care sunt puse n aplicare pentru a-i evalua. Ele i incit s elaboreze numeroase tactici. Mentalitatea elevilor evoluez nspre o tendin de a investi n ceea ce este util, adic a cuta un efect maxim cu un efort minim. Lipsete aici complementaritatea dintre controlul regulat i identificarea reuitelor vs. a dificultilor ntmpinate (adesea formate prin nvare negativ n.a.) de anumii elevi, urmare a rupturii dintre evaluarea formativ, continu, adaptat uneori ad-hoc, fr grile criteriale i evaluarea sumativ, derulat prin practici i tehnici pedagogice de tip e-evaluation. Unde se situeaz corelativ evaluarea procesual, spre exemplu la matematic, dac se vor considera numai rezultatele la probele de control? Unde , ct i cum este evaluat la tiinele socio-umane investiia n competena de tip argumentativ sau n formarea competenei lectorale prin studiu reflectiv i atitudinal vs. performana conceptual? Cum sunt evaluate eforturile profesorului de istorie n a face cuvenitele transformri transpoziii sau transinformaii didactice ale manualelor n moduri de a nelege i utiliza filosofia leciei de istorie? Cum va putea evalua profesorul micile progrese ale elevului n nelegerea efectelor geopolitice n istoria lumii moderne? S ne mai ntrebm: ce semnific modernizarea tehnicilor de nvare eficient comparativ cu ce s-ar putea defini drept transformarea profund a nvrii i a modului de evaluare a progresului realizat de elev/ elevi pentru a fi consemnat n fiele personale la literatur (n msura n care acestea vor deveni obiect al responsabilitii profesorului la clas?). Nu omitem din analiza calitii i etosului evalurii i dou alte probleme critice, cunoscute n retorica public i declarate nereale de ctre funcionarii administraiei. n literatura de specialitate (vezi Vogler, p.220, 221) acestea iau urmtoarea form:

16

a) Evaluarea elevilor nu nseamn doar notarea unui exerciiu n raport cu o anumit program. Evaluarea, afirm un expert al problemei, G. Vincent (1994), pune n discuie configuraia istoric particular care este forma didactic, colar, care are printre alte caracteristici pe aceea de a multiplica i repeta exerciiile, neavnd alt funcie dect pe aceea de a nva, de a nva dup reguli sau avnd drept scop, scopul acestora. b) Rezultatele evalurii pot leza unele interese ideologice. De aici, prudena administraiei colare, a unor directori de coli sau inspectori, n prezentarea integral a rapoartelor corectate i a prestigiului unor profesori. i, spun unii autori, voina de rigoare i fiabilitate a rezultatelor colare n metodele de evaluare se poate opune unor exigene de alt ordin, de exemplu procentul acceptabil de eecuri la evalurile naionale, cu efecte asupra finanrii colii, salarizrii personalului, evalurii anuale i promovrii cadrelor didactice, directorilor, inspectorilor. O bun parte din aceste limite ale calitii evalurii pot fi sensibil ameliorate de ceea ce conceptorii programului de fa ar putea numi i nscrie printre valorile paradigmatice, anume promovarea activitii personale de formare pentru autoevaluare (vezi i Vogler, p.221). Marcat prin accesul, desigur codat, al elevului la baza de date, la itemii evaluativi, la grilele de autoanaliz, la indicatorii de reluare a lecturilor, la exerciiile de sprijin prezente n manuale, sau la ghidurile metodologice mult mai elaborate etc., acest instrument de evaluare digital cu funcii i complementare poate integra inteniile experilor curriculari sau decidenilor din politica educaional. Avem n vedere explicit: a) formarea de competene interdisciplinare (vezi matematica, fizica, tiinele naturii, tehnologiile); b) introducerea progresiv, n proiectele de dezvoltare profesional sau personal, a unor noi coduri de referin i repertorii curriculare exprimate prin noi competene - valori, cunotine, corela criterii fr a mri suprancrcarea elevilor. Pentru aceasta este nevoie de timp, de dialog, de o semnificativ cultur a evalurii, asigurat prin stagii de formare (training) continu, de o nou viziune, de confruntri cu soluii la dificultile de nvare sau de punere n practic a celor studiate pentru a deveni operaionale, sub forma unor evidene sau documente, care cad sub incidena creaiei/ inovaiei pedagogice. abiliti, evaluate ns prin noi grile perfecionate n materie de concepe i scrie matrici de specificaie sau bareme de corectur, de a

17

Calitatea instrumentelor electronice de evaluare utilizate, scalele de valori construite pe populaii atent i bine definite (ealonate), practicile psihotehnice i informaiile legate de acestea sunt definibile prin caracteristici acceptate de experi ca reprezentative repere calitative. Astfel, se pot invoca: sensibilitatea la noile experiene i instrumente tehnologice vzute ca noi achiziii n domeniul evalurii, apte s sesizeze excelena, s diferenieze sau ierarhizeze subiecii evaluai; fidelitatea, ca o calitate exprimnd stabilitatea i constana rezultatelor evalurilor repetate, n condiii similare (fr schimbri semnificative); omogenitatea, ca o caracteristic a calitii evalurii de a putea msura corect aceeai dimensiune supus evalurii; validitatea, calitate specific att criteriilor, ct i coninutului probelor sau itemilor din baremele de evaluare. Explicit, aceast caracteristic semnific, la nivelul criteriilor, valoarea lor prognostic, n sensul anticiprii reuitei, al performanei colare. La nivelul coninutului, validitatea trimite la valorile de pertinen i reprezentativitate a semnificaiei sarcinilor propuse n instrumentul evaluativ. Pe fond, aceast calitate este considerat ca un argument pentru stpnirea curriculumului, precum i pentru anumite contexte i condiii de aplicare a proceselor evaluative; interpretarea, neleas drept acea calitate care exprim att calificarea evaluatorului care interpreteaz, dar i adecvaia probelor evaluative la anumite eantioane de elevi (corespondena ntre nivelul grupului evaluat i gradul de dificultate a testelor administrate). adecvaia, pertinena i echilibrul ponderilor ntre cunotine, abiliti, valori i atitudini n conformitate cu obiectivele pentru care sunt organizate i administrate testele de evaluare. absena oricror cunotine, valori i atitudini/ opinii cu caracter discriminativ politic, religios, rasial, de gen etc., n afara unui acord scris al celor evaluai (dac sunt majori) sau ale responsabilului legal al minorului, acceptnd c informaiile de acest gen sunt susceptibile de a aduce prejudicii vieii intime, private sau altor valori constituional ;
18

consacrate

 prudena psihologic n comunicarea bilanului rezultatelor aplicrii testelor, mai ales criticarea acestora drept eecuri colare, acceptnd ideea c exist posibilitatea generrii unor reacii personale, familiare, instituionale, sociale, comunitare. Astfel de riscuri vor fi supuse controlului, asumnd obligaia moral de a examina i suporta consecinele, de a propune seturi de aciuni de remediere a rezultatelor obinute. Invocm, de asemenea, nelegerea psihologic a rezervelor metodologice i chiar rezistena la evaluarea alternativ, numite n cercetrile americane (vezi D. Wiener, 2002) evaluarea supleant, destinat n special persoanelor cu dizabiliti complexe i care nu pot fi evaluate strict cu teste standardizate, vzute drept singur suport pentru atingerea unor niveluri ale competenelor. Calibrarea metodelor tradiionale cu cele moderne, alternative, conduce n mod limpede, poate uneori mai greu de evaluat direct, la satisfacerea standardelor de calitate, a dovezilor performanei academice, inclusiv realizarea satisfaciei actorilor evalurii. Deontologia transparenei rezultatelor evalurii trimite i la riscul utilizrii inadecvate, forate, prtinitoare, pariale, tendenioase, deturnate fie de unii actori ai evalurii, fie de mijloacele mass-media. Semnalm tendina acestora de a decupa informaii destinate publicului larg cu statut de rezultate negative, potrivit unei politici i ideologii partizane, a orientrii publicaiei sau posturilor de radio, tv, n numele imperativelor democraiei, att de necesare i att de greu gestionabile social. Efectele sunt vizibile, reaciile celor interesai la astfel de demersuri nu sunt chiar neutre, ci, dimpotriv comport riscuri (v. Vogler, p.109) i msuri, interpretri eronate (voluntare sau nu), efecte de normatizare abuziv (voluntare sau nu), provocri la adresa factorului de decizie, nevoit s remedieze disfunciile constatate. Precizm c mizele importante pentru toi cei implicai n evaluare sunt: a) contientizarea riscurilor; b) calitatea controlului; c) adoptarea strategiilor de ameliorare; d) deconcentrarea controlului gestiunii rezultatelor evalurii mergnd pn la participare i autoanaliz a elevilor; e) intrarea global n normalitate a reglrii dispozitivelor sistemului evaluativ al unui sistem pentru a fi/ deveni calitativ eficace i eficient;
19

f) mobilizarea energiilor i motivaiilor participative la realizarea calitii triadei nvare, predare i evaluare, de a asigura reuita reformei n nvmntul preuniversitar din Romnia.

Strategii, metode i tehnici de evaluare, criterii, standarde, indicatori de evaluare a competenelor

n domeniul educaional, strategia evaluativ este un demers care prefigureaz perspectiv din care va fi conceput evaluarea. Un rol esenial l au: proiectarea dispozitivului de evaluare, construcia acestuia, aplicarea i emiterea judecilor de valoare privind procesul nvrii i rezultatele obinute de ctre elevi. n diferenierea strategiilor evaluative identificam dou perspective de analiz: perspectiva criteriala i perspectiva axelor polare. 1. Perspectiva criterial n principial, strategiile educaionale evaluative se proiecteaz n temeiul urmtoarelor criterii: - Actorii evalurii. (elevi sau profesori), rezultnd o evaluare centrat pe elev i pe personalitatea sa i o evaluare centrat pe profesor, pe corectitudinea - Instrumentele evalurii pe baza crora distingem ntre: A) strategii obiective (evaluare obiectiv) bazate pe teste, probe standardizate i alte instrumente care pot msura ct mai fidel prestaia/performana elevului i B) strategii calitative centrate mai ales pe calitatea rezultatelor, fundamentate pe criterii caltative. - Obiectul evalurii conform cruia identificm: A) strategii sumative (evaluare sumativ), axat pe produsul final/rezultatele nvrii elevilor B) strategii formative (evaluare formativ), axate pe procesul de nvare ce conduce spre produs. - Forma de organizare (numrul subiecilor) potrivit creia avem: A) strategii de evaluare frontal (eantionul integral) B) strategii de evaluare de grup C) strategii de evaluare individual

20

Evaluarea formativ Este acel tip de evaluare care se realizeaz pe tot parcursul unui demers pedagogic, este frecvent sub aspect temporal i are ca finalitate remedierea lacunelor sau erorilor svrite de elevi; nu-l judec i nu-l claseaz pe elev;. compar performana acestuia cu un prag de reuit stabilit dinainte (Bloom; G. Meyer ). Caracteristici: este o evaluare criterial, bazat pe obiectivele nvrii; face parte din procesul educativ normal; accept nereuitele elevului, considerndu-le momente n rezolvarea unei probleme; intervine n timpul fiecrei sarcini de nvare; informeaz elevul i profesorul asupra gradului de stpnire a obiectivelor, ajutndu-i pe acetia s determine mai bine achiziiile necesare pentru a aborda sarcina urmtoare, ntr-un ansamblu secvenial; asigur o reglare a proceselor de formare a elevului; ndrum elevul n surmontarea dificultile de nvare; este continu, analitic, centrat mai mult pe cel ce nva dect pe produsul finit.

Evaluarea formatoare Evaluarea formatoare este din ce n ce mai mult invocat n ultima perioad, n acord cu achiziiile tiinei i cu evoluiile din planul teoriei i practicii educaionale. Evaluarea formatoare este considerat forma des vrit a evalurii formative. Reprezint o nou etap, superioar de dezvoltare a evalu f rii ormative, care va fi funcional odat cu instaurarea obiectivului de asumare de ctre elevul nsui a propriei nvri: la nceput contientizarea, eventual negocierea obiectivelor de atins i apoi integrarea de ctre subiect a datelor furnizate prin demersul evaluativ n administrarea propriului parcurs. Evaluarea formatoare, are drept scop: promovarea activitii de nvare ca motor motivaional pentru elev, sprijin n contientizarea metacognitiv, autoreglare (J. Vogler); Dispozitivul de evaluare reprezint ansamblul metodelor, tehnicilor i instrumentelor de evaluare stabilite de evaluator pentru a culege, a prelucra, a interpreta, a prezenta i a valorifica informaia evaluativ. Dispozitivul articuleaz metodele, tehnicile i instrumentele de c ulegere, prelucrare i prezentare a informaiei referitoare la procesul i produsul nvrii. Acesta precizeaz: Circumstanele (mprejurrile) i momentele sau etapele cnd se face evaluarea; Natura informaiei ce trebuie culeas (obiectul evalurii: cunotine, abiliti etc.) Instrumentele cu ajutorul crora se va realiza aceast activitate.
21

Metodele, tehnicile i instrumentele evalurii colare sunt din ce n ce mai frecvent i mai complex abordate. Odat cu extinderea i modernizarea evalurii, cu deplasarea accentului dinspre rezultate spre procese, metodelor i tehnicilor tradiionale li s-au adugat altele, mai moderne. Pe lng multiplicarea i diversificarea cantitativ, s-a nregistrat o mbuntire calitativ. Astfel nct se poate spune c astzi profesorul/ evaluatorul are la dispoziie o gam larg i diversificat de metode, tehnici i instrumente specifice. Metoda de evaluare reprezint calea de aciune comun profesor - elevi care conduce la punerea n aplicare a oricrui demers evaluativ, n vederea colectrii informa privind procesul i iilor produsul nvrii, prelucrrii i valorificrii lor n diverse scopuri. Modalitile de evaluare disponibile la ora actual alctuiesc un ansamblu metodologic coerent. Ele au caracter sistemic. Fr a-i pierde entitatea specific, metodele se mbin, se completeaz i se influeneaz reciproc. Metodele de evaluare dispun de o serie de caracteristici generale, valabile n orice mprejurare, dar i de caracteristici specifice, n funcie de tipul de evaluare, de context etc. Astfel: din perspectiva nv mntului modern, predominant formativ, metodele de evaluare nso esc i faciliteaz desfurarea procesului instructiv- educativ. ntr-un context de evaluare formativ, nsoesc i permit reglarea desfurrii procesului de nvmnt; se elaboreaz i se aplic n strns legtur cu diferitele componente ale procesului de nvmnt, aflate n ipostaza de obiecte ale evalurii ; se concep, se mbin i se folosesc n legtur cu particularitile de vrst i individuale, cu modul de acionare al factorilor educativi; au caracter dinamic, fiind deschise nnoirilor i perfecionrilor; raporturile dintre ele se schimb n funcie de context. Trebuie remarcate ra porturile dinamice dintre aceste concepte. n diverse contexte educaionale unele dintre acestea pot fi metode prin intermediul crora este condus procesul evaluativ, n timp ce n alte mprejurri pot deveni mijloace de culegere, prelucrare a informaiilor sau de comunicare social profesor- elev.

22

Folosirea metodelor alternative este benefic cel puin din dou perspective: Perspectiva procesual, n sensul n care evaluarea modern nu mai este centrat n principal pe produsele nvrii de ctre elev ci pe procesele pe care aceasta le presupune (de la evaluare la activitate evaluativ); Perspectiva de comunicare profesor - elev, n msura n care acestea sunt considerate instrumente de evaluare care corespund unui demers de evaluare democratic i autentic, ntruct faciliteaz cooperarea ntre parteneri i ncurajeaz autonomia. Prin complexitatea i bogia informaiei pe care o furnizeaz, att n desfurarea procesului de nvare ct i ca sintez a activitii elevului de-a lungul timpului, metodele alternative sunt n msur: a) s preia o parte din sarcinile evalurii continue, formative, putnd s elimine tensiunile induse de metodele tradiionale de evaluare/verificare; b) s constituie parte integrant a unei evaluri sumative sau chiar parte a unei examinri. Ideile for care fundamenteaz extinderea folosirii metodelor alternative de evaluare sunt, n esen, urmtoarele: 1) funcia principal a evalurii moderne este aceea de a da ncredere, a ntri, fortifica, ajuta elevul n procesul de nvare. 2) Din perspectiva nvmntului modern, se dorete renunarea la ideea unei evaluri cu coloratur penalizant care judec prea adesea elevul n raport cu lipsurile sale. Din contr noi dorim s subliniem/accentum progresul elevului n nvare. 3) Metodele alternative de evaluare favorizeaz reflecii de ordin metacognitiv. n lucrrile recente despre metacogniie este ncurajat abordarea unei evaluri formatoare care acord o mare parte din responsabilitate elevilor nii. 4) Metodele moderne mbin funciile formativ i informativ ale evalurii. Demersul de evaluare cu ajutorul metodelor alternative dezvolt elevului o contientizare (luare la cunotin) a funcion rii sale cognitive i o investigare/ c / utare cercetare personal (cu ajutorul profesorului) a mijloacelor pentru a regla propria nvare. Prin folosirea acestora elevul se implic i vizualizeaz, contientizeaz progresul u. Aceast manier contrabalanseaz o s abordare foarte rspndit realizat cu ajutorul testelor standardizate - care evalueaz elevii fr a ine seama de contextul de nvare.
23

Itemi de evaluare
Instrumentul de evaluare se compune din itemi care solicit tehnici de declanare/ prezentare/ redactare a rspunsurilor. Cele trei concepte sunt intim asociate. Dei vizeaz realiti diferite ale procesului evaluativ, se afl ntr-o strns interdependen. ntre itemii de evaluare, tehnicile de evaluare i instrumentele de evaluare este o legtur indisolubil. Itemul nseamn sarcina de lucru, forma sub care se prezinta plus rspunsul ateptat. Itemul pedagogic, n limbaj cotidian, reprezint cea mai mic component identificabil a unui test sau a unei probe de evaluare. Din punct de vedere tiinific, itemul este un element component al unui chestionar standardizat care vizeaz evaluarea elevului n ii de maxim condi rigurozitate (Gilbert de Landsheere, 1992, pag. 173). n practica colar cotidian, unde nu se practica ntotdeauna evaluri realizate n condiii de maxim rigurozitate, itemii reprezint elementele chestionarului sau probei unui examen sau ale unei evaluri normale, la clas. Itemul pedagogic reprezint cerina, ntrebarea la care trebuie s rspund elevul; este un element al unei probe de evaluare sau al unui test pedagogic, deci al instrumentului de evaluare. Se exprim prin formularea unei ntrebri care se integreaz n structura unei probe de evaluare. Itemii (sau elementele) unui test constituie, n ansamblu, un eantion dintr-un univers de itemi care, la modul ideal, ar trebui s acopere n totalitate coninutul testat (P. Lisievici, op. Cit.). Tehnica de evaluare constituie modalitatea prin care evaluatorul declaneaz i orienteaz obinerea unor rspunsuri din partea subiecilor, n conformitate cu obiectivele sau specificaiile testului. Fiecare tip de item declaneaz anumit tehnic la care elevul o apeleaz pentru a da rspunsul su. Spre exemplu, un item cu alegere multipl (IAM) va face apel la tehnica rspunsului cu alegere multipl. Elevul va ncercui, va bifa sau va marca printr-o cruciuli varianta de rspuns pe care o consider corect. Un item tip completare de fraz va face apel la tehnica textului lacunar. Elevul va completa iile libere din spa textul respectiv. O prob cu mai muli itemi poate solicita una sau mai multe tehnici de evaluare, n funcie de tipurile de itemi pe care i include: itemii cu alegere dual sau multipl vor declana tehnica rspunsului la alegere; itemii tip eseu structurat vor declana tehnica elaborrii rspunsului n funcie de cerinele exprimate etc.

24

Instrumentul de evaluare este o prob, o gril, un chestionar, un test de evaluare care colecteaz informaii, produce dovezi semnificative despre aspectele sau rezultatele luate n considerare. Instrumentul de evaluare se compune, de regul, din mai mulitemi. O prob de evaluare (un i instrument) se poate compune dintr- un singur item (o singur ntrebare, cerin problem etc., , ndeosebi atunci cnd rspunsul pe care trebuie s- l formuleze elevul este mai complex) sau din mai muli itemi. Clasificarea itemilor de evaluare Literatura de specialitate ofer mai multe clasificri ale itemilor. Criteriul asigurrii obiectivitii n notarea sau aprecierea elevilor este, fr ndoial, cel mai important. Dup acest criteriu identificm: 1. itemi obiectivi 2. itemi semiobiectivi 3. itemi subiectivi n cadrul sistemului informatic INSAM, itemii au fost concepui i introdui conform aceluiai criteriu. Astfel, n sistemul INSAM avem mai multe tipuri de itemi, dup cum urmeaz: 1. itemi obiectivi a. Tip pereche cu sgei b. Tip pereche cu liste c. Alegere dual adevrat / fals d. Alegere multipl cu mai multe variante de rspuns, una singur corect e. Alegere multipl cu mai multe variante de rspuns, mai multe corecte f. Alegere multipl Zon imagine 1X3 mai multe rspunsuri corecte g. Alegere multipl Zon imagine 2X2 mai multe rspunsuri corecte h. Alegere multipl Zon imagine 3X1 mai multe rspunsuri corecte i. Alegere multipl Zon imagine 3X3 mai multe rspunsuri corecte

25

2. itemi semiobiectivi a. De completare Selecie din list b. De completare Gsete cuvntul c. De completare Gsete cuvintele d. Cu rspuns scurt Completeaz cuvntul e. ntrebare structurat Rspuns liber f. Cu rspuns deschis Rspuns liber g. Cu rspuns multiplu Intrepretare Rspuns liber 3. itemi subiectivi a. Eseu nestructurat Rspuns liber b. Eseu structurat Rspuns liber c. Text indus Rspuns liber d. Rezolvare de probleme Rspuns liber e. Rspuns scurt puin elaborat Rspuns liber Din perspectiva interaciunii pe care o socilit itemul elevului respondent, itemii din sistemul informatic INSAM presupun diferite aciuni: Completarea rspunsului de la tastatur (texte, rspunsuri numerice etc.). Spre ex. ntrebare structurat Rspuns liber; Rezolvare de probleme Rspuns liber etc. Completarea unui termen lacunar (de la tastatur). Spre ex. Cu rspuns scurt Completeaz cuvntul Selectarea unui anumit termen dintr-un text dat, prin aciunea de click pe termenul respectiv. Spre ex. De completare Gsete cuvntul; De completare Gsete cuvintele Completarea unui text lacunar prin selectarea variantei potrivite dintr-o list dat - Spre ex. De completare Selecie din list Selectarea rspunsului sau rspunsurilor corecte dintr-o imagine, prin aciunea de click pe zona de imagine corespunztoare - Spre ex. Alegere multipl Zon imagine 3X1 mai multe rspunsuri corecte; Alegere multipl Zon imagine 2X2 mai multe rspunsuri corecte
26

Selectarea rspunsului sau rspunsurilor corecte (prin bifare) dintr-un set de rspunsuri date - Spre ex. Alegere multipl cu mai multe variante de rspuns, una singur corect; Alegere dual adevrat / fals

Realizarea unor corespondene corecte ntre dou seturi de elemente (potrivire) - Spre ex. Tip pereche cu liste; Tip pereche cu sgei

Pentru fiecare item, n sistemul informatic INSAM este definit i salvat un set comun de informaii, precum i informaii particulare n funcie de tipul de item: Descriere item Disciplin Capitol / Tem Subcapitol / Subtem Competene adresate Dificultate Cuvinte cheie Enun / Sarcin de lucru / Cerin / ntrebare Rspunsuri Elemente multimedia asociate itemului, dac este cazul (imagini, filme, audio) Text lacunar / de lucru (dac este cazul) Imagine cu mai multe zone de rspuns, dac este cazul Indiciu de rezolvare (dac este cazul) Instruciune pentru utilizarea itemului de ctre elev Barem de corectare (pentru profesorul corector; este obligatoriu pentru itemii subiectivi), inclusiv fiiere dac e cazul Punctajul orientativ pentru acel item

27

Exemplu de informaii definite n sistem pentru un item tip Alegere dual adevrat / fals, la disciplina Geografie.

Afiarea n modul rezolvare (pentru elev, n cadrul unui test) a itemului luat ca exemplu mai sus:

28

2. Managementul testelor n cadrul platformei INSAM i administrarea acestora ctre elevi

Ce este un test? Un test este o colecie de itemi de evaluare, organizat dup anumite criterii, n funcie de scopul acestuia. n sistemul informatic INSAM, un test poate fi compus din minim 1 item i maxim 30 itemi. Itemii din cadrul unui test pot fi subiectivi, semi-obiectivi i / sau obiectivi, dup cum exist acetia definii n baza de itemi INSAM. n interiorul fiecrei categorii de itemi (subiectivi, semi-obiectivi, obiectivi) exist mai multe tipuri de itemi, din punct de vedere al construciei i al interaciunii ateptate de la elev: Completarea rspunsului de la tastatur (texte, rspunsuri numerice etc.). Spre ex. ntrebare structurat Rspuns liber; Rezolvare de probleme Rspuns liber etc. Completarea unui termen lacunar (de la tastatur). Spre ex. Cu rspuns scurt Completeaz cuvntul Selectarea unui anumit termen dintr-un text dat, prin aciunea de click pe termenul respectiv. Spre ex. De completare Gsete cuvntul; De completare Gsete cuvintele Completarea unui text lacunar prin selectarea variantei potrivite dintr-o list dat - Spre ex. De completare Selecie din list Selectarea rspunsului sau rspunsurilor corecte dintr-o imagine, prin aciunea de click pe zona de imagine corespunztoare - Spre ex. Alegere multipl Zon imagine 3X1 mai multe rspunsuri corecte; Alegere multipl Zon imagine 2X2 mai multe rspunsuri corecte Selectarea rspunsului sau rspunsurilor corecte (prin bifare) dintr-un set de rspunsuri date - Spre ex. Alegere multipl cu mai multe variante de rspuns, una singur corect; Alegere dual adevrat / fals Realizarea unor corespondene corecte ntre dou seturi de elemente (potrivire) - Spre ex. Tip pereche cu liste; Tip pereche cu sgei
29

n cadrul unui test, itemii sunt afiai paginat (cte un item pe fiecare pagin). Navigarea ntre itemi se va face prin utilizarea butoanelor de tip nainte / napoi Urmtorul / Anteriorul, sau direct prin selectarea itemului dorit (reprezentat printr-un tab cu numarul aferent itemului n cadrul testului). Dat fiind c pentru un test exist stabilit o limit la nivel de sistem de maxim 30 de itemi vor exista n cadrul ecranului de test maxim 30 de taburi, corespunztoare itemilor din componena testului. n pagina ultimului item din test, nu mai exist buton de nainte Urmtorul, ci exist doar posibilitatea de ntoarcere la itemul anterior. n cadrul sistemului informatic, un element de tip test este definit prin urmtoarele tipuri de date si informaii: - lista itemilor asociai acestui test (minim 1, maxim 30) - autorul testului numele de utilizator al autorului care a creat testul - data crerii data calendaristic la care a fost creat testul (n format zz/ll/aaaa) - data start test reprezint data de start a valabilitii testului (format zz/ll/aaaa). Un test nu poate fi parcurs / completat de ctre elevi dect dac data curent a sistemului este mai mare sau cel puin egal cu data de start a valabilitii testului. Spre exemplu, un test care are ca dat start a valabilitii data de 3 noiembrie 2011 nu poate fi completat de ctre elevi n mai 2011, adic nainte de data de 3 noiembrie 2011. - data final test - data de final a valabilitii testului (formatul datei este zz/ll/aaaa). Un test nu poate fi completat de ctre elevi dect dac data curent a sistemului este mai mic sau cel puin egal cu data de final a valabilitii testului. Spre exemplu, un test care are ca dat de final a valabilitii data de 22 iulie 2011 nu poate fi completat de ctre elevi n septembrie 2011, adic dup de data de 22 iulie 2011. - denumire test o denumire a testului respectiv Spre exemplu, un test care reprezint o evaluare de final de semestru poate avea o denumire sugestiv Test recapitulativ semestru 1 . - descriere test o scurt descriere a testului, util cadrului didactic care i dorete s selecteze un anumit test din baza de teste existente n sistemul INSAM - cuvinte cheie o colecie de cuvinte cheie asociate testului respectiv. Acestea se vor agregra la nivelul testului pe baza cuvintelor cheie definite pentru itemii ce intr n componena testului.
30

Spre exemplu, un test care conine un item cu cuvintele cheie funcie, matrice, necunoscut i un alt item cu cuvintele cheie unghi, bisectoare, con va avea specificate ca i cuvinte cheie pe test urmtoarele : funcie, matrice, necunoscut, unghi, bisectoare, con. - grad de dificultate la nivel de test valori posibile: uor, mediu, dificil. - disciplina disciplina pe care o adreseaz testul respectiv. Dac este vorba de un test care cuprinde itemi din mai multe discipline, testul va fi marcat ca fiind interdisciplinar si se vor preciza i disciplinele pe care le adreseaz. Exemplu: test interdisciplinar Chimie-Biologie - tip test dac este cazul (valori posibile: test de verificare, test tip examen, test recapitulare) - timp de rezolvare se indic timpul maxim de rezolvare dat pentru acest test, n format hh:mm, unde h = ore i m = minute. Exemplu: 01:30 pentru o or i jumatate timp dat de rezolvare. - prin intermediul itemilor care intr n componena testului, vor fi disponibile i urmtoarele metadate: - nivel: pentru limbile strine; valori posibile A1, A2, B1, B2 - clasa: valori posibile IX, X, XI, XII - capitol: n funcie de disciplin i nivel/clas - subcapitol: n funcie de disciplin, nivel/clas, capitol - competene: n funcie de selecia de capitol i subcapitol

Exemplu de list cu 3 teste disponibile pentru utilizatori tip elev

31

Generarea automat de teste Generarea automat a testelor n sistemul INSAM se realizeaz prin parcurgerea unui proces care const n mai muli pai. Pentru procesul de generare automata a testelor a fost proiectat un wizard n 3 pai, care trebuie parcuri succesiv. n afar de primul pas, un utilizator se poate ntoarce oricnd ntr-un pas anterior pentru a completa i modifica setrile i informaiile introduse. Descrierea pailor necesari pentru generarea automat a unui test n sistemul INSAM PAS 1: const n definirea filtrelor pentru generarea automata, pentru a restrnge numrul de itemi din baza de date, astfel nct acetia s corespund criteriilor dorite de utilizatorul de tip profesor.

Utilizatorul va seta filtrele, prin definirea / selectarea valorilor urmatoarelor seturi de date de la nivelul itemilor: - cuvinte cheie - numr itemi de dificultate uoar: numeric, o valoare cuprinsa intre 0 si 30, unde 30 este numarul maxim de itemi permis per test. Utilizatorul va alege ci itemi uori s intre n componena testului pe care l definete. - numr itemi de dificultate medie: numeric, o valoare cuprinsa intre 0 si 30, unde 30 este numarul maxim de itemi permis per test. Utilizatorul va alege ci itemi de dificultate medie s intre n componena testului pe care l definete. - numr itemi de dificultate mare: numeric, o valoare cuprinsa intre 0 si 30, unde 30 este numarul maxim de itemi permis per test. Utilizatorul va alege ci itemi de dificultate mare s intre n componena testului pe care l definete. n dreptul acestora, va fi afiat automat numrul total de itemi definit. Spre exemplu, pentru o selecie de tipul: numr itemi de dificultate uoar: 3 numr itemi de dificultate medie: 4 numr itemi de dificultate mare: 3
32

Numrul total de itemi afiai automat n acest cmp va fi de 3 + 4 + 3 = 10 - disciplina: se va selecta din lista de discipline; valoarea implicit din lista de discipline este cea asociat utilizatorului de tip profesor. Spre exemplu, un utilizator profesor cruia i este asociat disciplina matematic va avea ca valoare implicit (adic deja selectat) disciplina matematic .

Observaie : un utilizator de tip profesor poate avea acces i la categoria interdisciplinar i la a doua disciplina (dac este cazul, adic dac exist definit la nivel de sistem a doua sa specializare). - nivel (opional): se va selecta din lista de valori a cmpului Nivel (A1, A2, B1, B2) valabile pentru disciplinele limbi strine - clasa (opional): se va selecta din lista de valori a cmpului Clas (IX, X, XI, XII) - capitol (opional): se va selecta din lista de valori a cmpului Capitol - subcapitol (opional): se va selecta din lista de valori a cmpului Subcapitol - competene (opional) : n funcie de selecia de capitol i subcapitol vor fi afiate competenele asociate. Se pot bifa una sau mai multe competene. - lista cuprinznd toate tipurile de itemi: Se pot bifa unul sau mai multe tipuri de itemi din cei existeni n sistem. Dac utilizatorul profesor dorete ca generatorul automat s selecteze din baza de date doar itemi de un anumit tip (spre exemplu doar itemi de tip Alegere dual
adevrat / fals), atunci va trebui s bifeze numai acest tip de item. Dac, dimpotriv, dorete ca generatorul automat s selecteze din baza de date toate tipurile de itemi va trebui s bifeze toate

tipurile de itemi.

33

Reprezentare schematic a informaiilor definite n primul pas al procesului de Generare automat test :

Dupa completarea filtrelor, utilizatorul de tip Profesor va apsa butonul Genereaz test conform criteriilor, i va trece automat la Pasul 2 al wizardului de Generare automata test. n cazul n care utilizatorul nu a completat toate cmpurile i informaiile obligatorii, acesta va fi atenionat printr-un mesaj de eroare. Sistemul informatic va cuta n baza de date toi itemii care corespund criteriilor definite de utilizator i va afia n pasul urmtor o list a acestora, conform filtrelor definite de utilizator.

34

PAS 2: const n previzualizarea testului generat automat de ctre sistem pe baza criteriilor de filtrare definite la pasul anterior de ctre utilizator. n aceast pagin, utilizatorul de tip Profesor va putea vizualiza lista itemilor selectai de ctre sistem pentru a fi inclui n testul generat automat. Afiarea itemilor se va face n aceeai pagin, unul sub cellalt. n cazul n care sunt muli itemi se va folosi bara de scroll din partea dreapt a ferestrei browserului. n cadrul listei de itemi selectai de ctre sistem pentru a fi inclui n testul generat automat, itemii vor fi afiai sub forma enun + rspunsuri. Spre exemplu, un item de tip Alegere dual adevrat / fals va fi afiat n list astfel : Peste 30 % din populatia SUA sufera de subnutriie, n timp ce aproximativ 50 % din copiii sub 5 ani ai unor state africane (Etiopia, Eritreea) i asiatice (Nepal, Afganistan) sufer de obezitate. o Adevrat o Fals

n plus, pentru fiecare item vor fi afiate i urmtoarele cmpuri i butoane: - cu cmp de tip text, editabil, ce conine punctajul aferent itemului; Valoarea iniial va fi preluat din punctajul definit la crearea itemului de ctre autorul itemului. Profesorul poate modifica valoarea din acest cmp cu orice alta valoare numeric ntre 0 i 100. - buton "Vezi rspunsul corect" ; La apsarea acestuia se va afia ntr-o fereastr nou rspunsul corect introdus de ctre autorul itemului la crearea acestuia. - buton "Vezi barem".

35

La apsarea acestuia se va afia ntr-o fereastr nou baremul de corectare introdus de ctre autorul itemului la crearea itemului respectiv. Baremul este obligatoriu pentru itemii subiectivi, i opional pentru ceilali itemi. - buton "nlocuiete item". La apsarea acestuia, sistemul va cuta n baza de itemi un alt item cu aceleai caracteristici (filtre) definite - acelai nivel de dificultate i orice alt filtru care a fost completat de ctre utilizator n pasul 1 din definirea testului. - buton Sgeat Sus pentru modificarea poziiei itemului n cadrul testului, adic mutarea lui n sus n cadrul listei de itemi. - buton Sgeat Jos pentru modificarea pozitiei itemului in cadrul testului, adic mutarea lui n jos n cadrul listei de itemi.

Mai jos o reprezentare schematic a informaiilor care pot fi completate n pasul 2 al procesului de Generare automat teste.

36

PAS 2': este un pas opional, suplimentar, i const n rularea testului (aa cum se va afia acesta utilizatorului final elevul). Scopul acestui pas este de a da profesorului posibilitatea s experimenteze n mod real cum va rula elevul acel test, pentru a decide componena final a itemilor din cadrul testului. Testul va fi afiat profesorului exact ca i elevului, simulnd toate condiiile i restriciile care vor fi impuse utilizatorilor de tip elev n rularea testelor.

PAS 3: Presupune salvarea testului definit n paii anteriori i definirea cmpurilor care mai sunt necesare pentru finalizarea i publicarea testului n sistemul informatic. n acest pas utilizatorului de tip profesor i se afieaz punctajul total al testului, care se calculeaz ca sum a punctajelor itemilor, conform punctajelor per item definite la pasul anterior. Pentru finalizarea testului trebuie completate i urmtoarele seturi de informaii: - denumire test: o denumire a testului respectiv Spre exemplu, un test care reprezint o evaluare de final de semestru poate avea o denumire sugestiv Test recapitulativ semestru 1 .
37

- descriere test <optional> o scurt descriere a testului, util cadrului didactic care i dorete s selecteze un anumit test din baza de teste existente n sistemul INSAM - cuvinte cheie <optional> o colecie de cuvinte cheie asociate testului respectiv. Acestea se vor agregra la nivelul testului pe baza cuvintelor cheie definite pentru itemii ce intr n componena testului. Spre exemplu, un test care conine un item cu cuvintele cheie funcie, matrice, necunoscut i un alt item cu cuvintele cheie unghi, bisectoare, con va avea specificate ca i cuvinte cheie pe test urmtoarele : funcie, matrice, necunoscut, unghi, bisectoare, con. - data start - reprezint data de start a valabilitii testului (format zz/ll/aaaa). Un test nu poate fi parcurs / completat de ctre elevi dect dac data curent a sistemului este mai mare sau cel puin egal cu data de start a valabilitii testului. Spre exemplu, un test care are ca dat start a valabilitii data de 3 noiembrie 2011 nu poate fi completat de ctre elevi n mai 2011, adic nainte de data de 3 noiembrie 2011. - data final <optional> data de final a valabilitii testului (formatul datei este zz/ll/aaaa). Un test nu poate fi completat de ctre elevi dect dac data curent a sistemului este mai mic sau cel puin egal cu data de final a valabilitii testului. Spre exemplu, un test care are ca dat de final a valabilitii data de 22 iulie 2011 nu poate fi completat de ctre elevi n septembrie 2011, adic dup de data de 22 iulie 2011. - grad de dificultate la nivel de test <optional> cu valori posibile: uor, mediu, dificil. - instructaj test contine un text de instructaj predefinit, care va aprea elevilor la nceperea testului. Textul poate fi modificat de ctre utilizatorul Profesor care creeaza testul n acest pas. - opiune amestec ordinea ntrebrilor (se bifeaz acest cmp dac se dorete ca acelai test s afieze ordine diferit a itemilor n cadrul lui pentru elevi diferii); implicit acest cmp nu este bifat. - bif Test generat automat nu se poate modifica, se completeaz automat de ctre sistem i marcheaz n sistemul informatic faptul c testul curent a fost creat prin generare automat. - buton Trimite spre validare acest buton va trimite testul creat spre validare naional (ceea ce nseamn c, dac testul va fi validat, el va fi public i vizibil la nivel naional, adic n ntreg sistemul informatic) sau validare la nivel de coal (ceea ce nseamn c, dac testul va fi validat, el va fi public i vizibil doar la nivelul unitii colare a profesorului creator).
38

Mai jos este o reprezentare schematic a informaiilor din cadrul ultimului pas al procesului de generare automat teste INSAM.

39

Generarea manual de teste Crearea manual a testelor n sistemul INSAM se va realiza tot prin parcurgerea unui proces de tip wizard (n pasi). Pentru procesul de generare manuala a testelor a fost proiectat un wizard in 3 pasi, care trebuie parcursi succesiv. La fel ca i la procesul de generare automat a testelor, un utilizator se poate ntoarce oricnd ntr-un pas anterior pentru a corecta / completa altfel criteriile sau informaiile necesare crerii testului respectiv. Descriere Succesiune Pai Generare manuala test PAS 1: const n selecia itemilor din baza de date, conform unor criterii de filtrare / selectare Utilizatorul va seta filtrele, prin definirea / selectarea valorilor urmtoarelor seturi de date la nivelul itemilor: - denumire item - descriere - disciplina - nivel de dificultate (optional) - nivel limba (optionale) - clasa (optionale) - capitol (optional) - subcapitol (optional) - competene (optional) : depinde de selecia de capitol i subcapitol - cuvinte cheie - tipurile de itemi se bifeaz tipurile dorite de itemi din baza de itemi existeni - cmp de bifat include audio se bifeaz acest cmp dac utilizatorul profesor dorete ca sistemul s caute n baza de itemi acei itemi care au asociate fiiere audio - cmp de bifat include video se bifeaz acest cmp dac utilizatorul profesor dorete ca sistemul s caute n baza de itemi acei itemi care au asociate fiiere video
40

Mai jos o reprezentare a cmpurilor i informaiilor care pot fi definite n cadrul acestui pas al procesului de generare manual de teste.

Rezultatul acestei cutari conform criteriilor va fi afiat ntr-o pagin nou. n partea de sus a paginii vor fi afiate informaii referitoare la numrul de itemi rezultai n urma cutarii. Itemii vor fi afiai paginat, cte 10 pe fiecare pagina. Navigarea ntre pagini se va face prin utilizarea butoanelor de navigare disponibile n partea de jos a paginii.

41

Mai jos o reprezentare a paginii ce conine lista de itemi rezultat n urma cutrii efectuate de sistemul informatic n baza de itemi, conform criteriilor i filtrelor definite de utilizator n pasul 1.

n cadrul unei pagini de vizualizare, itemii vor fi afiai n format tabelar, cuprinznd urmtoarele coloane: - denumire item - disciplina - capitol - subcapitol - clasa / nivel - tip item - dificultate - Audio - Video - Data crerii
42

Elementele din tabel vor fi sortabile dup capul de tabel. Pentru a ordona itemii n funcie de unul din criterii (coloan) se apas coloana respectiv din capul de tabel. Pe fiecare item din tabel se pot face urmtoarele aciuni: - la click pe nume => aciune vizualizare: ntr-o fereastr nou (tip pop-up) se afieaz itemul respectiv n mod examen, adic similar cu modul de vizualizare al elevului. - icon "adaug la test" => aciune de adugare la test: itemul va fi adugat la testul ce urmeaz a fi generat

Afisare ntr-o fereastra tip pop-up a itemului n mod examen

43

PAS 2: const n previzualizarea testului generat de ctre sistem pe baza criteriilor de filtrare i cutare itemi definite manual de ctre utilizator la pasul anterior. n aceast pagin, utilizatorul de tip Profesor va putea vizualiza lista itemilor selectai de ctre sistem pentru a fi inclui n testul generat manual. n cadrul listei de itemi selectai de ctre sistem pentru a fi inclui n test, acetia vor fi afiati sub forma enun + rspunsuri. Spre exemplu, un item de tip Alegere dual adevrat / fals va fi afiat n list astfel : Peste 30 % din populatia SUA sufera de subnutriie, n timp ce aproximativ 50 % din copiii sub 5 ani ai unor state africane (Etiopia, Eritreea) i asiatice (Nepal, Afganistan) sufer de obezitate. o Adevrat o Fals

n plus, pentru fiecare item vor fi afiate i urmtoarele cmpuri i butoane: - cu cmp de tip text, editabil, ce conine punctajul aferent itemului; Valoarea iniial va fi preluat din punctajul definit la crearea itemului de ctre autorul itemului. Profesorul poate modifica valoarea din acest cmp cu orice alta valoare numeric ntre 0 i 100. - buton "Vezi rspunsul corect" ; La apsarea acestuia se va afia ntr-o fereastr nou rspunsul corect introdus de ctre autorul itemului la crearea acestuia. - buton "Vezi barem". La apsarea acestuia se va afia ntr-o fereastr nou baremul de corectare introdus de ctre autorul itemului la crearea itemului respectiv. Baremul este obligatoriu pentru itemii subiectivi, i opional pentru ceilali itemi. - buton "Elimina item din test". La apasarea acestuia, sistemul va elimina itemul respectiv din lista de itemi selectati pentru testul curent.

44

- buton Sgeat Sus pentru modificarea poziiei itemului n cadrul testului, adic mutarea lui n sus n cadrul listei de itemi. - buton Sgeat Jos pentru modificarea pozitiei itemului in cadrul testului, adic mutarea lui n jos n cadrul listei de itemi. Mai jos o reprezentare schematic a informaiilor din pasul 2 de generare manual a testului, pasul de previzualizare a testului generat.

45

PAS 2': este un pas opional, suplimentar, i const n rularea testului (aa cum se va afia acesta utilizatorului final elevul). Scopul acestui pas este de a da profesorului posibilitatea s experimenteze n mod real cum va rula elevul acel test, pentru a decide componena final a itemilor din cadrul testului. Testul va fi afiat profesorului exact ca i elevului, simulnd toate condiiile i restriciile care vor fi impuse utilizatorilor de tip elev n rularea testelor.

PAS 3: Presupune salvarea testului definit n paii anteriori i definirea cmpurilor care mai sunt necesare pentru finalizarea i publicarea testului n sistemul informatic. n acest pas utilizatorului de tip profesor i se afieaz punctajul total al testului, care se calculeaz ca sum a punctajelor itemilor, conform punctajelor per item definite la pasul anterior. Pentru finalizarea testului trebuie completate i urmtoarele seturi de informaii: - denumire test: o denumire a testului respectiv Spre exemplu, un test care reprezint o evaluare de final de semestru poate avea o denumire sugestiv Test recapitulativ semestru 1 .
46

- descriere test <optional> o scurt descriere a testului, util cadrului didactic care i dorete s selecteze un anumit test din baza de teste existente n sistemul INSAM - cuvinte cheie <optional> o colecie de cuvinte cheie asociate testului respectiv. Acestea se vor agregra la nivelul testului pe baza cuvintelor cheie definite pentru itemii ce intr n componena testului. Spre exemplu, un test care conine un item cu cuvintele cheie funcie, matrice, necunoscut i un alt item cu cuvintele cheie unghi, bisectoare, con va avea specificate ca i cuvinte cheie pe test urmtoarele : funcie, matrice, necunoscut, unghi, bisectoare, con. - data start - reprezint data de start a valabilitii testului (format zz/ll/aaaa). Un test nu poate fi parcurs / completat de ctre elevi dect dac data curent a sistemului este mai mare sau cel puin egal cu data de start a valabilitii testului. Spre exemplu, un test care are ca dat start a valabilitii data de 3 noiembrie 2011 nu poate fi completat de ctre elevi n mai 2011, adic nainte de data de 3 noiembrie 2011. - data final <optional> data de final a valabilitii testului (formatul datei este zz/ll/aaaa). Un test nu poate fi completat de ctre elevi dect dac data curent a sistemului este mai mic sau cel puin egal cu data de final a valabilitii testului. Spre exemplu, un test care are ca dat de final a valabilitii data de 22 iulie 2011 nu poate fi completat de ctre elevi n septembrie 2011, adic dup de data de 22 iulie 2011. - grad de dificultate la nivel de test <optional> cu valori posibile: uor, mediu, dificil. - instructaj test contine un text de instructaj predefinit, care va aprea elevilor la nceperea testului. Textul poate fi modificat de ctre utilizatorul Profesor care creeaza testul n acest pas. - amesteca ordinea intrebarilor (se bifeaza acest camp daca se doreste ca acelasi test sa aiba ordine diferita a itemilor in cadrul lui pentru elevi diferiti); implicit acest camp nu este bifat. - bifa Test creat manual nu se poate modifica, se completeaz automat de ctre sistem. - buton Trimite spre validare acest buton va trimite testul creat spre validare naional (ceea ce nseamn c, dac testul va fi validat, el va fi public i vizibil la nivel naional, adic n ntreg sistemul informatic) sau validare la nivel de coal (ceea ce nseamn c, dac testul va fi validat, el va fi public i vizibil doar la nivelul unitii colare a profesorului creator).
47

Mai jos o reprezentare schematic a informaiilor din ultimul pas al procesului de generare manual a unui test n cadrul sistemului informatic INSAM.

48

Administrarea testelor ctre o clas (grup de elevi) Precizri i constrngeri legate de vizibilitatea testelor i administrarea acestora n cadrul sistemui INSAM: n cadrul sistemului informatic au fost definite urmtoarele niveluri de vizibilitate pentru testele existente n sistem: - privat (vizibil doar de ctre profesorul autor i elevii la care asigneaz - trimite testul spre rezolvare) - public la nivel de coal (test vizibil pentru toi profesorii din aceeai unitate colar ca i autorul testului respectiv) - public la nivel naional (test vizibil pentru toi profesorii, la nivel naional, indiferent de unitatea colar din care fac parte). Un test nu poate fi rezolvat de ctre un elev sau asignat spre rezolvare de sine stttor, n afara unei sesiuni de testare. Pentru a putea administra un test unui elev sau unui grup de elevi, profesorul va trebui s creeze n prealabil o sesiune de testare n cadrul sistemului informatic. Data de final pentru o sesiune de testare va fi limitat la durata unui an colar. Daca un profesor va dori sa aib aceeai sesiune de testare i n anul urmator, va trebui s creeze sesiunea din nou, cu valabilitatea corecta. O sesiune de testare expir atunci cnd: -> a expirat perioada de valabilitate (se face o verificare la data serverului) automat se va nchide sesiunea de testare. -> au completat testul toi elevii asignai - automat se va nchide sesiunea de testare. -> profesorul decide sa nchid sesiunea (se inregistreaza in baza de date faptul c sesiunea a fost inchisa manual) - se va nchide sesiunea de testare manual. Pentru crearea unei sesiuni de testare exist n cadrul sistemului INSAM dou modaliti, reprezentate mai jos prin varianta A i varianta B.

49

n varianta A se creeaz mai nti sesiunea de testare i apoi se selecteaz testul care st la baza sesiunii de testare. Pentru varianta B se selecteaz mai nti testul i pe baza lui se creeaz o sesiune de testare.

Descriere Varianta A de creare a unei sesiuni de testare

Pas 1: n fereastra pasului 1 se definesc umrtorii parametri i informaii pentru sesiunea de testare ce se dorete a fi creat n sistemul informatic: - denumirea sesiunii de testare - descriere sesiune (opional) - perioada de valabilitate a sesiunii de testare (data start, data final)

Pas 2: const n cutarea testului, previzualizarea testului i selectarea testului ce va sta la baza sesiunii de testare. Testele disponibile vor fi afiate sub forma unei liste tabelare, nsoite de informaiile care l descriu. Pentru a restnge lista de teste disponibile se pot utiliza filtrele definite n pagin. Utilizatorul profesor va putea vizualiza n aceast list tabelar numai testele la care are acces, conform drepturilor sale de utilizator i conform cu nivelurile de vizibilitate ale testelor: - privat (vizibil doar de ctre profesorul autor) - public la nivel de coal (test vizibil pentru toi profesorii din aceeai unitate colar ca i autorul testului respectiv) - public la nivel naional (test vizibil pentru toi profesorii, la nivel naional, indiferent de unitatea colar din care fac parte). Spre exemplu, un profesor din unitatea colar X nu va putea vedea n lista de teste dect testele : o Create de el nsui o Create de ceilali profesori din unitatea colar X o Testele publice la nivel naional.
50

Un test se poate previzualiza prin deschiderea acestuia. Dac utilizatorul profesor a ales unul din testele din list pentru a-l folosi n cadrul sesiunii de testare pe care dorete s-o creeze, va trebui s selecteze testul respectiv i s treac la pasul urmtor. n concluzie, ca i aciuni posibile n aceast pagin sunt: - cutare teste n list ( prin utilizarea criteriilor de filtrare pentru restrngerea listei de teste posibile) - previzualizarea unui test - selecie test pentru a fi utilizat n cadrul sesiunii de testare. Pas 3: n cadrul acestui pas se definesc utilizatorii de tip elev care vor accesa sesiunea de testare curent. n aceast pagin vor fi afiate informaiile ntr-un tabel format din dou coloane. Pe prima coloan vor fi disponibile toate grupurile de tip clas definite n sistemul informatic la care are acces utilizatorul profesor respectiv. n a doua coloan vor trebui completate grupurile de tip clas ctre care se va administra testul prin intermediul unei sesiuni de testare curente. Implicit, coloana a doua (cea din dreapta) va fi necompletat la accesarea paginii. Observaie : utilizatorul de tip profesor va putea vizualiza n aceast pagin doar grupurile de tip clas la care are acces n sistemul informatic, conform drepturilor sale de acces definite (clasele din unitatea sa colar). Pentru administrarea unui test prin intermediul unei sesiuni de testare ctre o clas de elevi, se va selecta din prima coloan grupul de tip clas, apoi se va aciona butonul de trimitere n lista coloana 2. Dup selecie, utilizatorul va observa c denumirea grupului de tip clas apare n coloana 2 i nu mai este afiat n coloana 1. n cazul n care utilizatorul de tip profesor dorete s selecteze alt grup de tip clas care sa susin testul respectiv, va trebui s parcurg urmtorii pai : o Selecteaz pe coloana 2 denumirea grupului de tip clas ales anterior o Acioneaz butonul de trimitere n lista coloana 1 o Selecteaz din lista coloana 1 un nou grup de tip clas o Acioneaz butonul de trimitere n lista coloana 2
51

Pas 4: ultimul pas de definire a sesiunii de testare const n previzualizarea tuturor informaiilor i parametrilor setai n paii anteriori i finalizarea crerii sesiunii de testare. n aceast pagin se pot face urmtoarele aciuni: - se vizualizeaz toate campurile definite anterior; n cazul n care utilizatorul tip profesor dorete s modifice una din informaii sau unul din parametri afiai n aceast seciune va trebui s se ntoarc la pasul corespunztor. - se seteaz dac sesiunea de testare curent va permite accesare multipl sau nu. Prin accesare multipl se nelege faptul c un test poate fi accesat de mai multe ori de ctre un elev. Dac nu se permite accesare multipl, atunci testul respectiv va fi administrat n regim de examen : odat ce a fost deschis de elev se consider c s-a consumat singura accesare permis. Dac elevul decide s ias din test (indiferent dac l-a completat total sau parial) nu va mai putea s acceseze din nou testul. - se definete un mesaj care va fi inclus n notificarea automat a elevilor. Acest text al mesajului va fi implicit precompletat, dar utilizatorul profesor are posibilitatea de a-l edita. Textul respectiv este acelai ctre toi elevii din grupul de tip clas care au fost selectai pentru a susine sesiunea de evaluare curent. Nu se pot completa teste difereniate pentru elevi. - se acioneaz butonul Creeaz sesiunea de testare.

Descriere Varianta B de creare a unei sesiuni de testare n varianta B de creare a unei sesiuni de testare, testul care st la baza sesiunii de testare care urmeaz a fi definit a fost deja selectat din lista de teste disponibile. Astfel, se pacurg urmtorii pai: Pas 1: n fereastra pasului 1 se definesc umrtorii parametri i informaii pentru sesiunea de testare ce se dorete a fi creat n sistemul informatic: - denumirea sesiunii de testare - descriere sesiune (opional) - perioada de valabilitate a sesiunii de testare (data start, data final)
52

Pas 2: se previzualizeaz n aceast pagin denumirea testului selectat anterior intrrii n pasul 1 de definire a sesiunii de testare. n aceast pagin singura aciune posibil este cea de navigare ctre pasul urmtor (pas 3) sau ctre pasul anterior (pas 1). Pas 3: n cadrul acestui pas se definesc utilizatorii de tip elev care vor accesa sesiunea de testare curent. n aceast pagin vor fi afiate informaiile ntr-un tabel format din dou coloane. Pe prima coloan vor fi disponibile toate grupurile de tip clas definite n sistemul informatic la care are acces utilizatorul profesor respectiv. n a doua coloan vor trebui completate grupurile de tip clas ctre care se va administra testul prin intermediul unei sesiuni de testare curente. Implicit, coloana a doua (cea din dreapta) va fi necompletat la accesarea paginii. Observaie : utilizatorul de tip profesor va putea vizualiza n aceast pagin doar grupurile de tip clas la care are acces n sistemul informatic, conform drepturilor sale de acces definite (clasele din unitatea sa colar). Pentru administrarea unui test prin intermediul unei sesiuni de testare ctre o clas de elevi, se va selecta din prima coloan grupul de tip clas, apoi se va aciona butonul de trimitere n lista coloana 2. Dup selecie, utilizatorul va observa c denumirea grupului de tip clas apare n coloana 2 i nu mai este afiat n coloana 1. n cazul n care utilizatorul de tip profesor dorete s selecteze alt grup de tip clas care sa susin testul respectiv, va trebui s parcurg urmtorii pai : o Selecteaz pe coloana 2 denumirea grupului de tip clas ales anterior o Acioneaz butonul de trimitere n lista coloana 1 o Selecteaz din lista coloana 1 un nou grup de tip clas o Acioneaz butonul de trimitere n lista coloana 2 Pas 4: ultimul pas de definire a sesiunii de testare const n previzualizarea tuturor informaiilor i parametrilor setai n paii anteriori i finalizarea crerii sesiunii de testare. n aceast pagin se pot face urmtoarele aciuni:

53

- se vizualizeaz toate campurile definite anterior; n cazul n care utilizatorul tip profesor dorete s modifice una din informaii sau unul din parametri afiai n aceast seciune va trebui s se ntoarc la pasul corespunztor. - se seteaz dac sesiunea de testare curent va permite accesare multipl sau nu. Prin accesare multipl se nelege faptul c un test poate fi accesat de mai multe ori de ctre un elev. Dac nu se permite accesare multipl, atunci testul respectiv va fi administrat n regim de examen : odat ce a fost deschis de elev se consider c s-a consumat singura accesare permis. Dac elevul decide s ias din test (indiferent dac l-a completat total sau parial) nu va mai putea s acceseze din nou testul. - se definete un mesaj care va fi inclus n notificarea automat a elevilor. Acest text al mesajului va fi implicit precompletat, dar utilizatorul profesor are posibilitatea de a-l edita. Textul respectiv este acelai ctre toi elevii din grupul de tip clas care au fost selectai pentru a susine sesiunea de evaluare curent. Nu se pot completa teste difereniate pentru elevi. - se acioneaz butonul Creeaz sesiunea de testare.

54

Administrarea unui test ctre un elev (individual)

Pentru administrarea unui test ctre un singur elev este de asemenea necesar crearea unei sesiuni de testare. La fel ca i la administrarea unui test ctre o clas sau grup de elevi, crearea unei sesiuni de testare se poate face n cadrul sistemului INSAM prin dou posibiliti: varianta A i varianta B, dup cum este detaliat mai jos. n varianta A se creeaz mai nti sesiunea de testare i apoi se selecteaz testul care st la baza sesiunii de testare. Pentru varianta B se selecteaz mai nti testul i pe baza lui se creeaz o sesiune de testare.

Descriere Varianta A de creare a unei sesiuni de testare Pas 1: n fereastra pasului 1 se definesc urmtorii parametri i informaii pentru sesiunea de testare ce se dorete a fi creat n sistemul informatic: - denumirea sesiunii de testare - descriere sesiune (opional) - perioada de valabilitate a sesiunii de testare (data start, data final) Pas 2: const n cutarea testului, previzualizarea testului i selectarea testului ce va sta la baza sesiunii de testare. Testele disponibile vor fi afiate sub forma unei liste tabelare, nsoite de informaiile care l descriu. Pentru a restnge lista de teste disponibile se pot utiliza filtrele definite n pagin. Utilizatorul profesor va putea vizualiza n aceast list tabelar numai testele la care are acces, conform drepturilor sale de utilizator i conform cu nivelurile de vizibilitate ale testelor: - privat (vizibil doar de ctre profesorul autor) - public la nivel de coal (test vizibil pentru toi profesorii din aceeai unitate colar ca i autorul testului respectiv) - public la nivel naional (test vizibil pentru toi profesorii, la nivel naional, indiferent de unitatea colar din care fac parte).
55

Spre exemplu, un profesor din unitatea colar X nu va putea vedea n lista de teste dect testele : o Create de el nsui o Create de ceilali profesori din unitatea colar X o Testele publice la nivel naional. Un test se poate previzualiza prin deschiderea acestuia. Dac utilizatorul profesor a ales unul din testele din list pentru a-l folosi n cadrul sesiunii de testare pe care dorete s-o creeze, va trebui s selecteze testul respectiv i s treac la pasul urmtor. n concluzie, ca i aciuni posibile n aceast pagin sunt: - cutare teste n list ( prin utilizarea criteriilor de filtrare pentru restrngerea listei de teste posibile) - previzualizarea unui test - selecie test pentru a fi utilizat n cadrul sesiunii de testare.

Pas 3: n cadrul acestui pas se definesc utilizatorii de tip elev la care se dorete administrarea testului. n aceast pagin vor fi afiate informaiile ntr-un tabel format din dou coloane. Pe prima coloan vor fi disponibili toi utilizatorii de tip elev definii n sistemul informatic la care are acces utilizatorul profesor respectiv. n a doua coloan va trebui completat numele de utilizator al elevului destinatar al testului. Implicit, coloana a doua (cea din dreapta) va fi necompletat la accesarea paginii. Observaie : utilizatorul de tip profesor va putea vizualiza n aceast pagin doar utilizatorii de tip elev la care are acces n sistemul informatic, conform drepturilor sale de acces definite (elevii din unitatea sa colar). Pentru administrarea unui test prin intermediul unei sesiuni de testare ctre un anumit elev, se va selecta din prima coloan numele de utilizator al elevului dorit, apoi se va aciona butonul de trimitere n lista coloana 2. Dup selecie, utilizatorul de tip profesor va observa c numele de utilizator tip elev apare n coloana 2 i nu mai este afiat n coloana 1.

56

Pas 4: ultimul pas de definire a sesiunii de testare const n previzualizarea tuturor informaiilor i parametrilor setai n paii anteriori i finalizarea crerii sesiunii de testare. n aceast pagin se pot face urmtoarele aciuni: - se vizualizeaz toate campurile definite anterior; n cazul n care utilizatorul tip profesor dorete s modifice una din informaii sau unul din parametri afiai n aceast seciune va trebui s se ntoarc la pasul corespunztor. - se seteaz dac sesiunea de testare curent va permite accesare multipl sau nu. Prin accesare multipl se nelege faptul c un test poate fi accesat de mai multe ori de ctre un elev. Dac nu se permite accesare multipl, atunci testul respectiv va fi administrat n regim de examen : odat ce a fost deschis de elev se consider c s-a consumat singura accesare permis. Dac elevul decide s ias din test (indiferent dac l-a completat total sau parial) nu va mai putea s acceseze din nou testul. - se definete un mesaj care va fi inclus n notificarea automat a elevului. Acest text al mesajului va fi implicit precompletat, dar utilizatorul profesor are posibilitatea de a-l edita / completa / rescrie conform nevoii sale. - se acioneaz butonul Creeaz sesiunea de testare.

Descriere Varianta B de creare a unei sesiuni de testare n varianta B de creare a unei sesiuni de testare, testul care st la baza sesiunii de testare care urmeaz a fi definit a fost deja selectat din lista de teste disponibile. Astfel, se pacurg urmtorii pai: Pas 1: n fereastra pasului 1 se definesc urmtorii parametri i informaii pentru sesiunea de testare ce se dorete a fi creat n sistemul informatic: - denumirea sesiunii de testare - descriere sesiune (opional) - perioada de valabilitate a sesiunii de testare (data start, data final) Pas 2: se previzualizeaz n aceast pagin denumirea testului selectat anterior intrrii n pasul 1 de definire a sesiunii de testare. n aceast pagin singura aciune posibil este cea de navigare ctre pasul urmtor (pas 3) sau ctre pasul anterior (pas 1).
57

Pas 3: n cadrul acestui pas se definesc utilizatorii de tip elev care vor accesa sesiunea de testare curent. n aceast pagin vor fi afiate informaiile ntr-un tabel format din dou coloane. Pe prima coloan vor fi disponibili toi utilizatorii de tip elev definii n sistemul informatic la care are acces utilizatorul profesor respectiv. n a doua coloan va trebui completat numele de utilizator al elevului destinatar al testului. Implicit, coloana a doua (cea din dreapta) va fi necompletat la accesarea paginii. Observaie : utilizatorul de tip profesor va putea vizualiza n aceast pagin doar utilizatorii de tip elev la care are acces n sistemul informatic, conform drepturilor sale de acces definite (elevii din unitatea sa colar). Pentru administrarea unui test prin intermediul unei sesiuni de testare ctre un anumit elev, se va selecta din prima coloan numele de utilizator al elevului dorit, apoi se va aciona butonul de trimitere n lista coloana 2. Dup selecie, utilizatorul de tip profesor va observa c numele de utilizator tip elev apare n coloana 2 i nu mai este afiat n coloana 1. Pas 4: ultimul pas de definire a sesiunii de testare const n previzualizarea tuturor informaiilor i parametrilor setai n paii anteriori i finalizarea crerii sesiunii de testare. n aceast pagin se pot face urmtoarele aciuni: - se vizualizeaz toate campurile definite anterior; n cazul n care utilizatorul tip profesor dorete s modifice una din informaii sau unul din parametri afiai n aceast seciune va trebui s se ntoarc la pasul corespunztor. - se seteaz dac sesiunea de testare curent va permite accesare multipl sau nu. Prin accesare multipl se nelege faptul c un test poate fi accesat de mai multe ori de ctre un elev. Dac nu se permite accesare multipl, atunci testul respectiv va fi administrat n regim de examen : odat ce a fost deschis de elev se consider c s-a consumat singura accesare permis. Dac elevul decide s ias din test (indiferent dac l-a completat total sau parial) nu va mai putea s acceseze din nou testul. - se definete un mesaj care va fi inclus n notificarea automat a elevului. Acest text al mesajului va fi implicit precompletat, dar utilizatorul profesor are posibilitatea de a-l edita / completa / rescrie conform nevoii sale. - se acioneaz butonul Creeaz sesiunea de testare.
58

3. Corectarea testelor, rezultatele elevilor, statistici i rapoarte n platforma INSAM n cadrul sistemului INSAM exista 3 modaliti de evaluare a testelor: o Corectarea automat a sistemului (se efectueaz numai pe itemii nchii / obiectivi ce pot fi evaluai automat de ctre sistemul informatic) o Corectarea manual a itemilor deschii / subiectivi dintr-un test de ctre utilizatorul de tip profesor o Autoevaluarea - Corectarea manual a itemilor deschii / subiectivi dintr-un test de tip autoevaluare de ctre utilizatorul de tip elev pe baza baremelor existente la nivelul itemilor.

n continuare vom detalia procesul de corectare manual realizat de ctre utilizatorul de tip profesor pe itemii subiectivi din cadrul testelor pe care le-a administrat acesta elevilor si. Pentru a ncepe corectarea, utilizatorul de tip profesor va accesa submeniu Corectare. n acest submeniu, utilizatorul-profesor va putea vizualiza toate testele pe care le-a primit prin intermediul sistemului de la elevii si pentru corectare. Un test de corectat pentru un profesor este acel test care contine cel puin 1 item deschis (care nu poate fi evaluat de catre sistem). Rezultatele din aceste pagini vor fi filtrate numai pt elevii la care are acces profesorul.

Seciunea teste de corectat n seciunea teste de corectat, utilizatorul profesor va putea vizualiza toate testele venite pentru corectare de la elevii si, ntr-un format tabelar Vor fi afiate aici numai testele care nu au fost nc evaluate, ordonate cresctor dup data calendaristic a primirii lor spre corectare. Astfel, cele mai vechi teste vor fi afiate primele n lista de teste pentru corectat.

59

n cadrul listei de teste pentru corectat vor aprea doar testele care au cel puin un item deschis, deci care nu poate fi evaluat automat de ctre sistemul informatic. Tabelul va fi sortabil, dup coloanele care l definesc. Pentru a sorta elementele din tabel n funcie de unul din criteriile definite ca i cap de coloan se apas capul de tabel. Testele din tabel vor fi marcate vizual cu culori, n funcie de gradul lor de urgen. Astfel, un test care este venit spre corectare de mai mult de 7 zile se va marca cu rou, un test care ateapt corectarea de un numr de zile cuprins n intervalul 3 7 zile se va marca cu culoarea galben, iar un test care ateapt corectarea de mai puin de 3 zile va fi marcat cu culoarea verde. Pentru fiecare test venit spre corectare vor fi afiate n tabel urmtoarele informaii: o nr curent, o numele sesiunii testare, o disciplina, o clasa, o nume si prenume elev, o data susinerii i ora, o numrul de itemi care trebuie corectai, o nota parial pe test (obinut n urma evalurii automate a testului)

Pentru a restrnge lista de teste de corectat se pot utiliza filtrele definite n pagin: filtre pe nume sesiune testare si nume elev si clasa. Pentru a deschide un test n vederea corectrii acestuia, utilizatorul de tip profesor va trebui s selecteze testul dorit prin click pe linia de tabel corespunztoare acestuia din cadrul listei de teste de corectat. Ulterior, se va afia o pagin de corectare a testului respectiv.

60

Seciunea teste corectate

n aceast seciune va putea fi regsit un test care trebuie recorectat. n seciunea teste corectate vor fi afiate sub form de lista tabelar testele care au fost corectate / notate / evaluate de ctre utilizatorul de tip profesor. Pentru fiecare test din aceast list sunt afiate urmtoarele informaii: o nr curent, o numele sesiunii testare, o disciplina, o clasa, o nume si prenume elev, o data susinerii i ora, o numrul de itemi corectai, o punctaj acordat in urma corectarii automate o punctaj acordat in urma corectarii manuale o nota finala per test (punctaj acordat in urma corectarii automate+punctaj acordat in urma corectarii manuale) Testele din aceast list sunt afiate n ordinea datei calendaristice, ns ordinea este invers cronologica (cele mai recent corectate sunt primele n list). De asemenea, fa de lista de teste pentru corectare nu mai exist marcarea grafic a testelor dup criteriul urgenei. Pentru a restrnge lista de teste de corectat se pot utiliza filtrele definite n pagin: filtre pe nume sesiune testare si nume elev si clasa. Pentru a deschide un test n vederea recorectrii acestuia, utilizatorul de tip profesor va trebui s deschid testul dorit prin click pe butonul Recorecteaz din linia de tabel corespunztoare acestuia. Ulterior, se va afia o pagina de corectare a testului respectiv.

Observaie: Un test deja corectat nu mai poate fi recorectat / editat decat pana la sfarsitul anului scolar
61

Corectarea unui test Pentru a deschide un test n vederea corectrii acestuia, utilizatorul de tip profesor va trebui s selecteze testul dorit prin click pe linia de tabel corespunztoare acestuia din cadrul listei de teste de corectat. Ulterior, se va afia o pagin de corectare a testului respectiv.

Identificarea itemilor deschii n modul de corectare, profesorul va vedea ntreg testul sustinut de elev cu tot cu rspunsurile elevului i punctajele aferente fiecarui item, fara a putea interveni asupra punctajului acordat automat. n mod implicit, testul de corectat se va deschide la primul item care trebuie corectat. Itemii din cadrul testului care necesit corectare / evaluare din partea utilizatorului de tip profesor vor fi evideniai grafic.

Notarea i evaluarea unui item Pentru corectarea unui item deschis din cadrul unui test se parcurg urmtorii pai: o n cadrul testului, n modul de corectare, se deschide itemul ce se dorete a fi corectat / evaluat / notat o se studiaz cerina itemului, sarcina de lucru i elementele asociate enunului dac este cazul o se deschide baremul de corectare, prin click pe butonul Vezi barem o se evalueaz rspunsul elevului la acel item, comparnd cu indicaiile specificate n barem o se deschide fereastra de Observaii corectur, prin click pe butonul aferent, pentru cazurile n care profesorul corector dorete s fac observaii elevului n corectarea itemului respectiv o se apreciaz gradul de completitudine a itemului respectiv, prin completarea procentului n cmpul aferent notrii o se apas butonul nregistreaz punctaj o se trece la itemul urmtor care trebuie corectat / evaluat.

62

Finalizarea corectrii Dup finalizarea evalurii tuturor itemilor deschii din cadrul testul deschis n modul de corectare, utilizatorul de tip profesor va putea ncheia corectarea testului prin acionarea butonului ncheie corectare test. n acest moment sistemul informatic va verifica automat dac au fost evaluai i notai toi itemii deschii din cadrul testului respectiv. Dac da, atunci utilizatorului de tip profesor i se va afia o pagin n care va putea vizualiza un sumar al testului respectiv, punctajul parial acordat dup corectarea automat, punctajul parial acordat dup corectarea manual i punctajul final pe test (inclusiv transfomrarea n not). Dac nu, atunci utilizatorul va fi atenionat de ctre sistem c nu au fost notai toi itemii deschii din acel test. Utilizatorul de tip profesor va putea suspenda corectarea n acel moment, pentru a o relua la o dat ulterioar, sau va putea alege s continue notarea itemilor deschii din cadrul testului respectiv, pentru a finaliza corectura. n plus, va fi afiat o caset text n care vor putea fi vizualizate toate observaiile pe care le-a fcut profesorul corector de-a lungul evalurii / corectrii testului respectiv (pentru fiecare item corectat), caset de text n va mai putea aduga un comentariu (mesaj) pt elev ca feedback pe test. Corectarea unui test se consider ncheiat atunci cand toi itemii deschii din acel test au fost corectai / notai (adic a fost completat procentul de completitudine pentru fiecare dintre aceti itemi). n momentul n care un test se consider corectat, atunci acesta va disprea din lista de teste de corectat i va fi mutat automat n lista "Teste corectate". Editarea mesajului pentru elev n caseta de text care conine toate observaiile pe care le-a fcut profesorul corector de-a lungul evalurii / corectrii testului respectiv (pentru fiecare item corectat), este recomandat ca utilizatorul profesor s completeze i un mesaj de feedback per ansamblu, pentru a-i fi de ajutor elevului. Astfel, se recomand utilizarea de feedback constructiv pozitiv, prin evidenierea n acest mesaj a rezolvrilor bune, aprecieri pozitive i ncurajri pentru activitatea viitoare a elevului, alturi de recomandri i sfaturi pentru corectarea aspectelor mai puin bune reieite n urma evalurii testului.
63

Vizualizarea i analiza rezultatelor elevilor n cadrul sistemului informatic INSAM, rezultatele obinute de elevi n urma administrrii testelor vor fi salvate i utilizate n diverse rapoarte i statistici, pentru a servi cadrelor didactice, dar i elevilor, la analiza acestor rezultate n funcie de diverse criterii. Rezultate pe test, pe clas, pe coal Pentru a vizualiza rezultatele obinute de elevi pe un anumit test (n cadrul unei sesiuni de testare definite), utilizatorul de tip profesor va putea vizualiza ntr-o pagin de rezultate urmtoarele informaii: o denumire sesiune de testare o perioada valabilitii sesiunii de testare o clasa la care a fost aplicat testul o disciplina o numrul de elevi care au susinut testul respectiv, cu buton de detalii pentru a vedea lista complet a elevilor care au susinut testul o numrul de elevi care au abandonat testul o punctaj mediu obinut o cel mai mic punctaj o cel mai mare punctaj o ci elevi se situeaz cu punctajul obinut n ultimii 10% o ci elevi se situeaz cu punctajul obinut n primii 10% Pentru un anumit test creat de utilizatorul profesor, vor putea fi accesate statistici pe test efectiv, spre exemplu: de cte ori a fost accesat testul respectiv de ctre ali profesori de cte ori a fost utilizat n sesiuni de testare testul respectiv de ctre ali profesori cati elevi au facut acel test, pe perioade de timp, cati au abandonat testul, cati din acesti elevi sunt elevii profesorului care vizualizeaza, de cate ori a fost accesat destul in medie pe saptamana/luna etc., itemii care compun testul in cate alte teste mai sunt inclusi etc
64

Alte rapoarte i analize pe rezultatele elevilor

Sistemul ofera i alte rapoarte si statistici detaliate pentru teste. Aceste statistici pot fi fcute lund n considerare unul sau mai multe elemente, iar datele sunt afiate sub form de tabel sau de grafic. Pentru sesiunile de testare exist o serie de rapoarte pentru utilizatori i clase (grupuri) de utilizatori, pe criterii i categorii de itemi. Rezultatele la testele date sunt pstrate n cadrul sistemului informatic, putnd fi consultate n orice moment de ctre utilizatorii cheie. Rezultatele la teste sunt disponibile pentru fiecare utilizator ntr-un raport virtual n care sunt nregistrate toate activitile acestuia. Pentru teste exist o serie de rapoarte i statistici pentru utilizatori i grupuri de utilizatori, pe criterii i categorii de itemi, tipul rspunsului, punctaj obinut, parcurgeri ale testelor etc. Exista, de asemenea, i statistici generale care afieaz numrul de nscrieri, statistici pe teste ncheiate i statistici privind evaluarea pentru testul selectat (daca este cazul) precum si o clasificare n funcie de scor. n cadrul sistemului informatic INSAM exist i statistici pe clase de utilizatori - utilizatorul poate vedea statistici pentru grupurile nscrise la testul selectat. Utilizatorii cheie vor putea analiza testele date se va deschide o pagina ce contine rezultatele utilizatorilor la testul selectat. De asemenea, n funcie de rezultate se vor ntocmi automat clasamente. clasament general clasament pe materii clasament pe teste clasamente zonale

65

Seciunea Rapoarte Principalele rapoarte existente n aplicaie Rapoartele existente n sistemul informatic INSAM vor putea fi accesate din meniul corespunztor acestora. Tipul de raport, precum i datele coninute n acestea vor fi accesibile utilizatorilor n funcie de drepturile lor de acces setate la nivelul sistemului. Astfel, un utilizator nu va putea vizualiza rapoarte dect pentru elevii la care are acces i pentru testele pentru care are acces. Rapoartele se pot genera i salva pe calculatorul utilizatorului, avnd specificate n denumire data generrii raportului. Rapoartele din sistemul informatic sunt de mai multe tipuri: rapoarte de evaluare (care conin date legate de rezultatele sesiunilor de evaluare) rapoarte de utilizare a sistemului (care conin date legate de activitatea utilizatorilor la care are acces utilizatorul de tip profesor) rapoarte de activitate proprie rapoarte tip clasamente - clasament general - clasament pe materii - clasament pe teste - clasamente zonale Clasamentele pot fi vizualizate de ctre utilizatorii profesori de toate nivelurile i de ctre utilizatorii elevi. Pentru fiecare din tipurile de clasamente de mai sus vor exista cmpuri pentru filtrarea rezultatelor n vederea facilitrii realizrii de statistici pe diverse criterii, pentru ca factorii decizionali s poat avea o imagine de ansamblu a procesului educaional la nivel local, regional sau naional. De asemenea, filtrarea rezultatelor asigur posibilitatea de autoevaluare i autopoziionare pentru elevi, compararea cu ali elevi i cu standardele. n clasamente se va putea face sortare dup anumite tipuri de date, precum: jude, coal, localitate i cutare dup nume i prenume elev i profesor, punctaj. Numrul curent va funciona ca loc n clasament atunci cnd se fac sortri. Sortarea va fi evideniat grafic. n funcie de mrimea listei, aceasta va fi afiat paginat.
66