Specificarea si evaluarea utilizabilitatii in

aplicatiile interactive
Bugnaru Gelu Alexandru
Curs Sisteme Interacive, 2013-2014
Universitatea Tenica din Clu!-"a#$ca
%ugnaru&gelu'(a$$&c$m
Rezumat
In #re)ent exista #utine a%$rdari in s#eci*icarea si evaluarea utili)a%ilitatii in a#licatiile interactive& +ucrarea de
*ata isi #r$#une sa #re)inte c$nce#tul de utili)a%ilitate , du#a care sa #re)inte evaluarea utili)a%ilitatii in sistemele
interactive , iar a#$i sa #re)inte cateva a%$rdari in aut$mati)area evaluarii utili)a%ilitatii& In #artea de *inal se va
reali)a un studiu de ca) #entru a anali)a utili)a%ilitatea unui site ,e%al unei #rimarii& Utili)a%ilitatea a#licatiil$r
in*$rmatice din unitatile administrativ terit$riale este $ cerinta #ri$ritara#entru im#lemntarea cu succes a s$cietatii
in*$rmati$nale& -in #acate, #e #lan nati$nal un exista inca $ #ractica curenta de evaluare a #r$dusel$r in*$rmatice
inainte de a *i instalate la utili)at$r&Acest artic$l se c$ncentrea)a #e #re)entarea unei met$d$l$gii si a unui studiu
de ca) in evaluarea *$rmativa a utili)a%ilitatii situril$r ,e% dintr-$ #rimarie &
1. Introducere
Im#$rtanta utili)a%ilitatii in sistemele in*$rmatice a crescut in ultima decada& Utili)a%ilitatea are un r$l
esential in succesul sau esecul unui #r$dus in*$rmatic& Acest *a#t a determinat numer$ase c$m#anii sa reli)e)e
unele sesiuni de evaluare #entru utili)a%ilitate& Cu tim#ul s-au *$rmat numer$ase de*initii ale utili)a%ilitatii, cateva
dintre ele *iind enuntate in cele ce urmea)a&
Standardul IS. /IS. 0241-11, 10001 de*ineste utili)a%ilitatea ca *iind 2masura 3n care un #r$dus #$ate *i
*$l$sit de utili)at$ri s#eci*ici #entru a atinge sc$#uri s#eci*ice cu e*icienta, e*icacitate si satis*actie 3ntr-un c$ntext
s#eci*ic de utili)are4& 5*icienta se re*era la ra#$rtul dintre resursele c$nsumate si acuratetea si c$m#letitudinea cu
care utili)at$rii 3nde#linesc sc$#uri& 5*icacitatea se re*era la acuratetea si c$m#letitudinea cu care utili)at$rii
3nde#linesc sarcini s#eci*icate& Satis*actia este $ masura su%iectiva re*erit$are la c$n*$rtul si acce#tarea #r$dusului
de catre utili)at$rii *inali& 617
Sa8el a de*init utili)a%ilitatea ca *iind ca#acitatea unui sistem de a *i *$l$sit e*icient si us$r de $ categ$rie
s#eci*ica de utili)at$ri, care au avut #arte de $ instruire s#eci*ica si de asistenta in vederea utili)arii unui #r$dus,
#entru a inde#lini un d$meniu s#eci*ic intr-un cadru s#eci*ic& -e*initia c$ntine #atru criteria de %a)a 9 e*icienta,
usurinta de invatare, *lexi%ilitate si atitudine& 627
5valuarea *$rmativa a utili)a%ilitatii se e*ectuea)a iterativ, #e #arcursul ciclului de de)v$ltare in sc$#ul
identi*icarii si eliminarii un$r #r$%leme de utili)a%ilitate cat mai devreme&637& -aca aceste #r$%leme v$r *i
identi*icate devreme, cu atat va *i mai #utin c$stisit$r e*$rtul de re)$lvare& 5valuarea este denumita *$rmativa,
#entru a $ distinge de evaluarea sumativa, care este e*ectuata, du#a ce un sistem sau $ c$m#$nenta *$st de)v$ltata&
647 5valuarea sumativa se e*ectuea)a #rin testarea cu un numar mare de utili)at$ri re#re)entativi si are ca sc$#
identi*icarea #unctel$r tari sau sla%e #recum si c$m#ararea un$r s$lutii de #r$iectare alternative sau a un$r sisteme
similare&
In ultimii ani utili)a%ilitatea situril$r ,e% a devenit $ #re$cu#are ma!$ra a de)v$ltat$ril$r de a#licatii si
situri ,e% de$arece acesta este un *act$r ceie in succesul unui site&:$,ell 6;7 #$rnind de la de*initia data de
standardul IS. 0241-11 de*iniste ca un site ,e% este utili)a%il daca #$ate *i *$l$sit de catre $ameni #entru a
inde#lini anumite $%iective intr-$ maniera e*icienta si cu satis*actie& <rug6=7 s#une ca utili)a%ilitatea este
certitudinea ca ceva *uncti$nea)a %ine si #$ate *i *$l$sit *ara disc$m*$rt&
-i*erite met$de si tenici au *$st #r$#use #entru evaluarea utili)a%ilitatii, unele *iind ada#tate #entru
utili)a%ilitatea situril$r ,e%9 ins#ectii *acute de ex#erti, revi)uiri c$gnitive, evaluari euristice, *$cus-gr$u#ul,
ins#ectarea res#ectarii sa%l$anel$r de #r$iectare a inter*etel$r utili)at$r, testarea cu utili)at$ri si calculul val$ril$r
#entru di*erite metrici& -intre acestea, cea mai e*icienta ram>ne testarea cu utili)at$ri reali, 3nsa este si cea mai
c$stisit$are& ?n *iecare an, siturile universitatil$r sunt accesate de mii de #ers$ane 3n cautarea anumit$r in*$rmatii&
?n @$m>nia, viit$rii studenti *$l$sesc siturile universitatil$r 3n cautarea di*erit$r date des#re admiterea la *acultate,
la di*erite nivele /licenta, master sau d$ct$rat1 #recum9 s#eciali)ari $*erite, numar de l$curi dis#$ni%ile, criterii de
selectie, taxe, ca)areA
Ingineria utili)a%ilitatii re#re)inta un #r$cess care se des*as$ara de-a lungul ciclului de viata al unui
#r$gram& Biecare #r$iect este di*erit si *iecare inter*ata va arata alt*el& Se #resu#une $ a%$rdare in de)v$ltarea
sistemel$r in*$rmatice care im#lica #artici#area utili)at$ril$r inca de al ince#ut, care garantea)a e*icacitatea
#r$dusului #rin intermediul un$r metrici ale utili)a%ilitatii si a un$r s#eci*icatii legate de utili)a%ilitate& Are ca
sc$# #rinci#al identi*icarea de met$de de im#lemntare a nev$il$r utili)at$ril$r si asigurarea e*icientei,
$#erativitatii si satis*actiei& Cetricile utili)a%ilitatii re#re)inta una din m$dalitatile de a masura utili)a%ilitatea& 5le
#ermit urmarirea #r$gresului de la $ versiune la alta #entru a evalua #r$gresul #e #iata, #entru a decide daca este
m$mentul ideal #entru lansarea unui n$u #r$dus #e #iata&

2.Evaluarea utilizabilitatii in aplicatiile interactive
5valuarea utili)a%ilitaii unei a#licatii #$ate avea l$c in d$ua m$duri #$si%ile9 #e #arcursul #r$iectarii unui
sistem sau du#a de)v$ltarea acestuia& Se #$ate reli)a #rin testari cu utili)at$rii, iar re)ultatele acest$r testari sunt
cele mai relevante dar in acelasi tim# si cele mai c$stisit$are& :rin *$l$sirea scenariil$r se #$t $%tine date #rivind
vite)a de executie si numarul de er$ri care sunt indicat$ri ai utili)a%ilitatii& Cesti$narele de utili)a%ilitate sau
DUIS ne $*era in*$rmatii standardi)ate des#re utili)a%ilitatea sistemel$r si a#licatiil$r&Cet$dele care $*era estimari
ale utili)a%ilitatii sistemel$r inca din *a)a de #r$iectare re#re)inta alegerea #re*erata de de)v$ltat$rii de sisteme&6E7
Ast*el de met$de sunt cele care asigura ins#ectarea utili)a%ilitatii sau evaluarea res#ectarii sa%l$anel$r de
#r$iectare a inter*etel$r utili)at$r& Ins#ectarea utili)a%ilitatii re#re)inta $ revi)uire a sistemului #e %a)a unui set de
rec$mandari& @evi)uirea este c$ndusa de un gru# de ex#erti *amiliari)ati cu c$nce#tele utili)a%ilitatii 3n #r$iectare&
As#ectele evaluate #$t *i9 lim%a!ul *$l$sit 3n interactiune, masura 3n care se a#elea)a la aducerea aminte a
utili)at$rului si m$dul 3n care sistemul $*era *eed%ac8 utili)at$ril$r& Ins#ectarea utili)a%ilitatii #$ate *i reali)ata
#rin diverse met$de #recum9
@evi)uiri c$gnitive9 #$t *i e*ectuate in $rice eta#a a de)v$ltarii unui #r$dus, *$l$sind un d$cument
a#artinand #r$iectarii c$nce#tuale, un #r$dus *inal sau de asemenea un #r$t$ti#& Un gru# de evaluat$ri
#arcurg sarcina #as cu #as #e %a)a sc$#uril$r utili)at$ril$r& Sc$#ul re#re)inta $ stare care se d$reste a *i
atinsa *$l$sind sistemul interactiv& @evi)uirile c$gnitive iau 3n c$nsiderare #r$cesul de g>ndire care
determina luarea deci)iil$r, #recum 3ncarcarea mem$riei si a%ilitatea de a rati$na&
@evi)uiri #luralistice - *$l$seste 3nt>lniri de gru#uri 3n care de)v$ltat$ri, utili)at$ri si s#ecialisti 3n *act$ri
umani #arcurg un scenariu si discuta *iecare element #entru un dial$gF
Ins#ectarea c$nsistentei - un gru# de #r$iectanti care #artici#a la reali)area un$r #r$duse similare
ins#ectea)a inter*ata #entru a vedea daca #ermite reali)area *uncti$nalitatii 3n acelasi m$d ca si #r$dusele
#r$#riiF
ins#ectarea caracteristicil$r sistemului - se listea)a secventele *$l$site 3n reali)area unei sarcini, se cauta
secventele #rea lungi, #asii c$n*u)i, actiunile care nu sunt selectate natural de catre utili)at$r, #asii care
necesita cun$stinte extensive sau ex#erti)a #entru a reali)a un sc$#
5valuarea euristica - este $ tenica de determinare a #r$%lemel$r de utili)a%ilitate cu $ inter*ata& Un
numar mic de evaluat$ri ins#ectea)a se#arat $ inter*ata *$l$sind euristici& A#$i, c$m%ina re)ultatele
evaluaril$r si *ac $ clasi*icare a #r$%lemel$r& Sunt general acce#tate cele 10 euristici ale lui "ielsen9
vi)i%ilitatea starii sistemului, #$trivirea dintre sistem si lumea reala, c$ntr$lul utili)at$rului si li%ertatea,
c$nsistenta si standarde, #revenirea er$ril$r, recun$astere ,*lexi%ilitate si e*icienta 3n utili)are, design
minimalist si estetic, a!ut$rul utili)at$ril$r sa recun$asca, diagn$stice)e si sa recu#ere)e er$rile, el# si
d$cumentare 6G7
*$cus gr$u#s - *$cus gru#urile re#re)inta $ met$da *$arte e*icienta de a culege reactii de la utili)at$ri si de
a a#recia reactiile initiale la #r$iectare, dar si #entru a identi*ica di*erentele dintre aste#tarile utili)at$ril$r
si im#lementarea actuala &
Aceste met$de #resu#un existent un$r ex#erti in utili)a%ilitate, iar acest lucru #$ate *i c$stisit$r& :rivind acest
c$ntext aut$mati)area #r$cesului de evaluare a utili)a%ilitatii #$ate deveni $ s$lutie mai %una&
3. Abordari in automatizarea evaluarii utilizabilitatii
:entru a evalua un sistem in*$rmatic tre%uie #arcursi urmat$rii #asi 9
c$lectarea de date F
anali)a datel$r 9 met$de statistice de gru#are a datel$r F
#r$#unerea un$r im%unatatiri asu#ra sistemului s$*t,are &
In tim#ul unui test evaluat$rul #r$#une un scenariu de utili)are a sistemului in*$rmatic& Acest scenariu
are ca sc$# testarea un$r as#ect din inter*ata utili)at$r& ?n tim#ul testului de utili)a%ilitate s#ecialistul 3n
utili)a%ilitate $%serva m$dul 3n care utili)at$rul executa sarcinile, c$m#$rtamentul sau si c$mentariile #e care le
*ace& +a s*>rsitul testului are l$c $ discutie #rivind m$dul de reali)are a sarcinil$r si gradul de satis*actie a
utili)at$rului 3n ra#$rt cu sistemul *$l$sit& Avanta!ele #e care le aduce aut$mati)area evaluarii utili)a%ilitatii sunt9
reducerea necesarului de resurse umane, reducerea necesarului de ex#erti)a umana, c$m#letitudine si #$si%ilitatea
c$m#ararii re)ultatel$r testel$r de utili)a%ilitate&
Anali)a si !urnali)area evenimentel$r re#re)inta surse val$r$ase de determinare a #r$%lemel$r de
utili)a%ilitate& :rin !urnali)are se #$t $%tine in*$rmatii #recise des#re ce *ace utili)at$rul, ce date *$l$seste si in ce
$rdine executa actiuni& @e)ulta ca *recventa de *$l$sire a unei *uncti$nalitati sau numarul de er$ri #$t *i calculate
din *isierele de !urnali)are& 5xista si alte m$dalitati de evaluare a acest$r metrici /3nregistrarea vide$ a sesiunii de
testare, n$tarea manuala1, dar *$l$sind !urnali)area evenimentel$r acest lucru se #$ate reali)a aut$mat&
Hurnali)area aut$mata are si nea!unsuri9 unul din acestea *iind im#$si%ilitatea sur#rinderii reactiil$r utili)at$rului&
Hurnali)area necesita $ *$arte %una cun$astere a structurii a#licatiei de$arece #resu#une inserarea un$r linii de c$d
in cadrul a#licatiei&
3.1 Utilizarea AOP pentru captarea evenimentelor din interactiunea utilizator sistem
A.: /As#ect .riented :r$gramming 1 este $ #aradigma recent de)v$ltata #entru !urnali)area
evenimentel$r din inter*ata utili)at$r& Aceasta #aradigma este rec$mandata in situatii in care tre%uie sa se trate)e
situatii in *uncti$nalitati transversal& . *uncti$nalitate transversal re#re)inta $ caracterista a sistemului a carei
in#lementare este im#artasita #rin c$dul sursa al a#licatiei, s#re exem#lu !urnali)area& A.: a intr$dus #atru
n$tiuni n$i 9 9 !$in-#$int, #$intcut, advice, as#ect&
5xista extensii A.: #entru diverse lim%a!e de #r$gramare cum ar *i 9 Hava, CII sau CJ& In aceasta
a%$rdare s-au scris diverse metrici #entru a *i evaluate& Avanta!ul #e care 3l aduce a%$rdarea #r$#usa este acela ca
m$dulele care reali)ea)a #r$cesele de evaluare a utili)a%ilitatii sunt se#arate de c$dul sursa al a#licatiei& ?n #lus,
atasarea acest$r m$dule la a#licatie sau m$di*icarile a#arute 3n m$dulele de evaluare a utili)a%ilitatii nu necesita
m$di*icarea c$dului a#licatiei, ci d$ar m$di*icarea as#ectel$r si
rec$m#ilarea sistemului &
3.2 Utilizarea bibliotecilor pentru aplicatii de tip suport pentru captarea evenimentelor din interactiunea
utilizator!sistem
. met$da alternativa #entru !urnali)area in*$rmatiil$r #resu#une utili)area Hava Accesi%ilit( A:I& Acest
A:I este destinat de)v$ltarii un$r a#licatii #entru #ers$ane cu di)a%ilitati& Clasa S,ing5ventC$nit$r din Hava
Accessi%ilit( A:I va *i adaugata ca listener la t$ate evenimentele de interes& Casina virtuala Hava tre%uie
c$n*igurata 3nainte de rularea a#licatiei a*lata 3n evaluare #entru a n$ti*ica clasa n$astra asu#ra evenimentel$r de
interes& Aceasta c$n*igurare tre%uie *acuta $ singura data si este dis#$ni%ila #entru t$ate a#licatiile a*late 3n
evaluare &
3.1 O abordare bazata pe a"enti
Un agent re#re)inta $ entitate care isi #erce#e mediul #rin intermediul un$r sen)$ri si acti$nea)a asu#ra
mediului sau #rin actiuni 6G7& Un agent inteligent are un set de cun$stinte initiale si ca#acitatea de a invata& 5l are
sarcina de a asista utili)at$rul, de a reali)a unele sarcini in l$cul lui si de a-l invata& Agentul este caracteri)at #rin 9
c$m#$rtament K actiuni e*ectuate du#a $ secventa
#r$gram K re#re)inta *uncti$nalitatea interna a agentului
C$delul c$nce#tual al utili)at$rului se c$nstruieste #e %a)a interactiunii cu sistemul si #e %a)a un$r
ex#eriente cu alte sisteme&@$lul agentului este de a m$nit$ri)a interactiunea agentului cu sistemul si de a
rec$nstrui m$delul sarcinil$r a#artinand utili)at$rului& Agentul care evaluea)a utili)a%ilitatea, denumit
TAC., este situat ast*el 3ntr-un mediu s$*t,are& Acesta *$l$seste A.: #entru a culege in*$rmatii des#re mediul
sau& Aritectura generala a acestui sistem este #re)entata 3n Bigura 1&

#i"ure 1. Ar$itectura sistemului bazat pe a"enti
:rinci#alele c$m#$nente ale sistemului9
A#licatia s$*t,are /SA1 - e un sistem interactiv caruia i se evaluea)a utili)a%ilitatea
Utili)at$rul /U1 - $ #ers$ana care *$l$seste SA #entru a reali)a un set sta%ilit de sarcini
Agentul /TAC.1 - este un agent s$*t,are care are r$lul de a m$nit$ri)a actiunile utili)at$rului si de a
c$m#ara actiunile e*ectuate de utili)at$r
C$dulul de 3nvatare /+C1 - este un m$dul s$*t,are care 3nvata c$m#$rtamentul utili)at$rului si transmite
*eed%ac8 evaluat$rului inter*etei utili)at$r 607
%. &etodolo"ie
%.1 'omponentele metodolo"iei si activitati de evaluare
Cet$d$l$gia din acest #r$iect tine seama de #revederile standardului IS.LI5C 14;0G-;9100G cu #rivire la structura
unui #r$ces de evaluare si im#lica
Sta%ilirea cerintel$r de evaluare, a sc$#ului de evaluare, a #r$dusului tinta #recum si s#eci*icarea
m$delului utili)a%ilitatiiF
S#eci*icarea evaluarii im#lica s#eci*icarea unui #r$dus tinta, a c$ntextului si scenariil$r de utili)are,
alegerea met$del$r si tenicil$r, selectarea un$r metrici, sta%ilirea niveluril$r de a#reciere #entru acestea,
#recum si sta%ilirea cerintel$r de masurareF
:r$iectarea evaluarii 9 im#lica ela%$rarea unui #lan de evaluareF
5xecutarea evaluarii9 masurarea caracteristicil$r, c$lectarea datel$r si anali)a #reliminara a re)ultatel$rF
C$nclu)ia evaluarii9 #resu#une *inali)area anali)ei #recum si ra#$rtarea re)ultatel$r&
Cet$d$l$gia integrata in acest #r$iect cu#rinde trei met$de de evaluare *$rmative 9 evaluare em#irica, evaluare
euristica #recum si testarea cu utili)at$ri&
A#licarea mai mult$r met$de de evaluare este %ene*ica din urmat$arele m$tive 9
Cresterea gradului de incredere si validitatii
C$m#lementaritatea met$del$r
Im%unatatirea ex#erti)ei de utili)are a *iecarei met$de in #arte
:regatirea #entru $ evaluare sumativa &
Cet$dele sunt c$m#lementare de$arece se %a)ea)a #e testarea de catre d$ua categ$rii de utili)at$ri 9 ex#erti in
utili)a%ilitate si utili)at$ri re#re)entativi& In ca)ul testarii cu utili)at$ri se #$t c$lecta si alte ti#uri de masurari 9
masurari ale e*icacitatii, ale e*icientei si ale satis*actiei& In acest *el se $%tin date su#limentare *ata de cele $%tinute
#rin evaluare euristica&
@e#etarea evaluarii cu $ alta met$da, dar utili)and acelasi set de sarcini relevante va mari increderea in
re)ultatele $%tinute& Biecare met$da necesita c$m#etente s#eci*ice& C$m#ararea re)ultatel$r $%tinute #ermite
anali)a #r$cedurii, identi*icarea greselil$r de evaluare #recum si im%unatatirea unei #ractici de evaluare& Malidarea
re)ultatel$r evaluarii euristice #rin testare cu utili)at$ri #ermite si $ c$m#aratie c$recta a re)ultatel$r $%tinute, *a#t
care im%unatateste ex#erti)a individuala&
Cet$d$l$gia integrata de evaluare a utili)a%ilitatii cu#rinde mai multe activitati #rintre care 9
S#eci*icarea evaluarii9 anali)a cerintel$r, #lani*icarea si #regatirea evaluarii, s#eci*icarea
m$delului utili)a%ilitatii F
5valuare euristica in care se va utili)a setul extins de criterii erg$n$mice #rin veri*icarea
inde#linirii rec$mandaril$r de utili)a%ilitate&
5valuarea #rin testare cu utili)at$ri& C$m#$rtamentul utili)at$ril$r este inregistrat atat audi$ cat
si #rin $%servare& Se va utili)a #r$t$c$lul 2gandire cu v$ce tare4& Inregistrarile v$r *i a#$i
anali)ate de evaluat$r care extrag si d$cumentea)a #r$%lemele de utili)a%ilitate&
Anali)a c$m#arativa a re)ultatel$r $%tinute #rin cele trei met$de

@e)ultatele $%tinute se v$r anali)a din d$ua #ers#ective 9
1&A de)v$ltat$rului, care tre%uie sa remedie)e de*icientele c$nstatate la evaluare
2&A evaluat$rului, care va anali)a e*icienta si e*icacitatea activitatii de evaluare

5valuarea euristica este e*ectuata cu un set de 24 de euristici, structurate in = categ$rii si sunt #re)entate in
Ta%elul1
Acest set de euristici este c$m#us din c$m%inarea setului de criterii erg$n$mice a lui Bastien si Sca#in
6107 cu setul de euristici ale lui Ha8$% "ielsen6117& Intre aceste d$ua seturi exista $ su#ra#unere destul de mare&
Stiind ca cele d$ua seturi de euristici au *$st validate, #utem c$nsidera ca gradul de ac$#erire al setului integrat de
euristici este su*icient de mare atat in ceea ce #riveste #uterea ex#licativa cat si identi*icarea #r$%lemel$r de
utili)a%ilitate& -escrierea #r$%lemel$r de utili)a%ilitate urmea)a *$rmatul #r$#us in 6127 cu #reci)area ca du#a
descrierea cau)el$r se v$r include si unele sugestii de remediere&
(. Studiu de caz
.%iectivul evaluarii a *$st situl :rimariei munici#iului Bistrita avand adresa de ,e% 9
tt#9LL,,,&#rimaria%istrita&r$L & Acest site a su*erit de curand m$di*icari dar cu t$ate acestea inca nu se ridica la
nev$ile utili)at$ril$r& Asa cum se estimea)a acest site este accesat de a#r$ximativ ;000 de $ameni lunar, d$rind sa
a*le di*erite in*$rmatii& Aceste in*$rmatii cu#rind 9 $tarari ale c$nsiliului l$cal, #r$iecte si $tarari cu caracter
n$rmativ, regulamente de interes #u%lic, $%ligatii ale cetatenil$r, un )iar ti#arit, #recum si alte #anuri si in*$rmatii
ce tre%uie sa c$ntina $ unitate administrative-terit$riala&
5valuarea utili)a%ilitatii #resu#une identi*icarea utili)at$ril$r tinta, identi*icarea nev$il$r acest$r
utili)at$ri tinta, c$m#ararea in*$rmatiei $%tinute cu ceea ce $*era #rin c$ntrast alte situri ale #rimariil$r din diverse
$rase ale tarii& Cetatenii care au testat situ-ul au remarcat un as#ect neatragat$r, #rea multa in*$rmatie c$ncentrata
#e #agina #rinci#ala, existand un amalgam de in*$rmatie nestructurata, care #entru un numar mare de utili)at$ri
nu #re)inta interes& In*$rmatii cu #rivire la is$rtia si ge$gra*ia $rasului li#sesc cu desavarsire de #e site, iar aceste
as#ecte sunt #rintre #unctele *$rte ale $rasului Bistrita&
Am ales sa *ac acest studiu #entru acest site de$arece am rude care lucrea)a la #rimariei nu de #utine $ri
au *$st discutii cu #rivire la as#ectul sitului, la ceea ce $*era si la m$dul de utili)are& :entru $ #arte de cetateni este
*$arte greu sa gasesca $ anumita in*$rmatie de$arce nu sunt structurate c$res#un)at$r& :entru c$lectarea
in*$rmatiil$r de la #$tentialii utili)at$ri se v$r *$l$si met$de calitative si cantitative #recum interviul, *$cus-gru#ul
si cesti$narele $nline&
). Evaluare si rezultate
).1 Evaluare Empirica

In #rima *a)a am reali)at $ evaluare em#irica a sitului #rimariei& In c$ntinuare v$i descrie #rinci#alele
as#ecte in c$ntextul acestei evaluari 9
Aspectul
Siturile #rimariil$r nu tre%uie sa urme)e un anumit *$rmat sau anumite standarde sau sa%l$ane s#eci*ic
#rimariil$r& Biecare Site are #r$#riul *$rmat insa exista in*$rmatii care tre%uie sa a#ara #e $rice site al unei
#rimarii cum ar *i 9 c$m#$nenta de#artamentel$r de c$nducere, regulamente de interes #u%lic, $tarari cu
caracter n$rmativ&
In ca)ul n$stru avem un site neatragat$r cu elemente *$arte im#$rtante ale unui site ,e% care se a*la in
c$n*lict& S#re exem#lu #$rtiunea de l$gin se a*la in #artea stanga !$s *$arte greu de $%servat& :rintre #r$%lemele
legate de as#ect mai enumeram9 *$l$sirea un$r nuante de cul$ri asemnat$are, meniuri #rea stu*$ase si incarcate,
*$l$sirea ine*icienta a s#atiului dis#$ni%il, scrisul este mult #rea mic #entru un utili)at$r n$rmal si asta in ca)ul in
care vi)uli)area a *$st *acuta la re)$lutia 13== x E=G & Aceste lucruri ar #utea *i im%unatatite cu e*$rtul minim in
studierea #rinci#alele$r reguli ale de)v$ltarii unui site #r$*essi$nal&
Informatia prezentata si structurarea ei
Situl c$ntine in*$rmatii minime cu #rivire la ist$rie, ge$gra*ie #recum si #$#ulatia $rasului& In #lus
l$cali)area l$r este greu de *acut de$arece se a*la in meniul descrierea Bistritei, Ceniul Servicii $nline este #us
d$ar de dec$r, in urma accesarii lui nu va a#area nimic& Sectiunea imagini live necesita instalarea %r$,serului
Internet 5x#l$rer si Duic8 Time& Cand vede aceste lucruri aut$mat $rice utili)at$r isi #ierde interesul de a
vi)uali)a&
Un alt meniu cu #r$%leme este cel care s$licita scim%area lim%ii in lim%a engle)a& C$nsider ca acest
lucru se #utea *ace mult mai sim#u cu un %ut$n am#lasat in #artea drea#ta sus decat sa $cu#e l$c cu un meniu
#rinci#al& Ceniul +in8-uri c$ntine #utina in*$rmatie, iar de cele mai multe $ri aceste lin8uri nu *uncti$nea)a sau
serverul este $cu#at&
-e asemenea li#sesc in*$rmatii cu #rivire la institutiile culturale l$cale in a*ara de numele si adresa l$r nu
este #reci)at nimic altceva& In #artea de sus a ecranului este a*isata adresa #rimariei dar este *$arte greu de citit din
cau)a negli!entei cul$ril$r&
Informatia afisata in doua limbi
In*$rmatiile #re)entate #e acest site sunt a*isate d$ar in d$ua lim%i 9 r$mana si engle)a & C$nsider ca s-ar
im#une a*isarea acest$r in*$rmatii in mai multe lim%i de$arece Bistrita a *$st un $ras sasesc lucru care im#une si
*$l$sirea lim%ii germane& -e asemenea #$#ulatia $rasului are un numar semni*icativ de magiari, si ar *i util sa se
adauge si acesta lim%a din res#ect #entru min$ritati&
In urma studiului mai mult$r situri cu #rimarii am c$nstatat ca multe din ele #ermit a*isarea in*$rmatiil$r
in #atru lim%i 9 r$mana , engle)a, germana si magiara&
Informatii le"ate de turism
In ciuda marimii im#resi$nante a situril$r nu a#ar lucruri utile #entru turisti sau cetateni din a*ara tarii&
-e asemnea sitului ii li#seste $ arta care sa indice #rinci#alele $%iective, institutii, centre culturale& In a*ara de
adresa s#eci*icata adica strada si numar nu a#ar alte in*$rmatii des#re l$curile care ar #utea *i vi)itate& . arta este
cel mai %un lucru de a l$cali)a un $%iectiv, in e#$ca n$astra s#eci*icarea adresei si numarului nu are $ su*icienta
relevanta tinand c$nt ca exista $rase cu mii de stra)i&
&odalitate interactiva de orientare
Situl nu #re)inta $ m$dalitate interactiva de $rientare si l$cali)are gen G$$gle Ca#s&In urma unei cautari
avansate am $%servat ca multe situri de #rimarii inclusiv ale un$r c$mune $*era serviciul G$$gle Ca# care este
gratuit& C$nsider ca acest lucru ar limina multe din criticile acestui site&
#acilitate de cautare
Serviciul de cautare este *$arte %ine #us la #unct si $*era mai multe #$si%ilitati de cautare& :e langa ti#ul
cautarii, $*era #$si%ilitatea de a alege in ce d$meniu d$rim cautarea, #$si%ilitatea s$rtarii re)ultatel$r /du#a data
#recum si in $rdine al*a%etica1 si #$si%ilitatea sa s#eci*icam cate re)ultate ale cautarii v$r *i a*isate intr-$ #agina &
6147

*abelul 2 Sinteza rezultatelor evaluarii
'riteriu +un Satisfacator ,esatiscator
1&As#ectul N N
2&In*$rmatia #re)entata si structurarea ei N
3&In*$rmatia a*isata in d$ua lim%i N
4& In*$rmatii legate de turism N
;& C$dalitate interactiva de $rientare N
=& Bacilitate de cautare N
).2 Evaluare Euristica
Sarcinile sta%ilite #entru evaluare sunt #re)entate in Ta%elul 3
*abelul 3. Sarcini de *estare
1& /T11 -is#$ni%ilitatea d$cumentel$r
2& C$nsultare *$rmulare acte
3& Accesare d$cumente
4& C$m#letare *$rmulare
;& /T21 Inregistrare client n$u #entru #lata $nline
=& Inregistrare client
E& Accesare c$nt
G& S$licitare a!ut$r
5valuarea a *$st reali)ata in #eri$ada decem%rie K mai 2013 de catre $ eci#a *$rmata din ; evaluat$ri, 2
evaluat$ri su#eri$ri si 3 intermediari&
@e)ultatele $%tinute du#a identi*icarea individuala a #r$%lemel$r de utili)a%ilitate cu care se c$n*runta situl
:rimariei sunt #re)entate in Ta%elul 4&
*abelul %. Probleme de utilizabilitate identificate pe evaluator
Sarcina
*otal -in care ma.ore
5v1 5v2 5v3 5v4 5v; 5v1 5v2 5v3 5v4 5v;
T1 ; 4 3 ; 4 3 2 1 3 2
T2 3 2 1 1 2 3 2 1 1 2
*otal / ) % ) ) ) % 2 % %
Anali)and datele din ta%elul de mai sus se $%serva ca #rimul evaluat$r a identi*icat in t$tal 14 #r$%leme
de utili)a%ilitate /= ma!$re1, al d$ilea evaluat$r a identi*icat 10 #r$%leme /4 ma!$re1, al treilea evaluat$r a
identi*icat = #r$%leme /2 ma!$re1, al #atrulea evaluat$r a identi*icat 10 #r$%leme /4 ma!$re1, iar al cincilea
evaluat$r a identi*icat t$t 10 #r$%leme /4 ma!$re1&
+istele individuale de #r$%leme au *$st c$ns$lidate #e sarcina, #e %a)a criteriului 2m$di*icari similare4& In
t$tal lista c$ns$lidata de #r$%leme de utili)a%ilitate cu#rinde 22 de #r$%leme de utili)a%ilitate dintre care =
#r$%leme ma!$re& +ista este #re)entata in Ta%elul ;&
*abelul (. 0ista consolidata de probleme unice de utilizabilitate
Sarcina *otal ma.ore moderate minore
T1 1; 4 E 4
T2 E 2 3 2
*O*A0 22 ) 11 )
-in #unctul de vedere al criteriil$r erg$n$mice care nu au *$st res#ectate, ma!$ritatea #r$%lemel$r de
utili)a%ilitate antici#ate de evaluarea euristica, res#ective 1; /=;O1, se dat$rea)a gidarii nec$res#un)at$are a
utili)at$rului&
@ata de detectie individuala, calculata du#a c$ns$lidarea c$la%$rativa, a variat intre 20O si 40O cu $
medie de 32&2;O& 5ste $ rata destul de mica intrucat #entru ; evaluat$ri, rata medie de detective este de cel #utin
2GO& C$e*icientul de agregare mediu a *$st de 14,4;O&
).3 Evaluare prin testare cu utilizatori
Testarea cu utili)at$ri s-a *acut #entru aceleasi sarcini #re)entate in ta%elul de mai sus de$arece studiul
n$stru are caracter ex#erimental &
+a testare au #artici#at 4 utili)at$ri, 2 de sex *eminin si 2 de sex masculin, cu varste cu#rinse intre 30-4G
de ani / Cedia varstel$r P 30,; ani1& T$ti utili)at$rii au ex#erienta anteri$ara in utili)area calculat$rului, d$i dintre
ei avand ciar studii tenice& Cu t$ate acestea niciun utili)at$r nu a *$st *amiliari)at cu siturile evaluate&
5valuarea a *$st reali)ata in *e%ruarie 2014 de $ eci#a alcatuita din 3 evaluat$ri& Sarcinile de inde#linit
au *$st #re)entate atat in scris cat si $ral utili)at$ril$r #e #arcursul sesiunil$r de testare& -e-a lungul sesiuni$r de
testare cei 3 evaluat$ri au *$st alternativ *acilitat$ri #e #arcursul sesiunil$r de testare&
In #rima eta#a #rimul evaluat$r a identi*icat in t$tal 22 de #r$%leme de utili)a%ilitate dintre care = au *$st
ma!$re, al d$ilea a identi*icat 1G #r$%leme dintre care ; au *$st ma!$re, in tim# ce al treilea a identi*icat 20 de
#r$%leme dintre care = au *$st ma!$re& -u#a c$ns$lidarea re)ultatel$r #e sarcina de catre *iecare evaluat$r s-a
int$cmit urmat$rul ta%el&
*abelul ). Probleme dupa consolidarea individuala
Sarcina *otal -in care ma.ore
5v1 5v2 5v3 5v1 5v2 5v3
T1 ; 4 = 2 2 1
T2 ; 3 4 1 1 2
-u#a c$ns$lidarea re)ultatel$r au ramas in t$tal 10 #r$%leme de utili)a%ilitate dintre care 2 ma!$re, E
m$derate si una min$ra& +ista este #re)entata in Ta%elul E &
*abelul 2. 0ista consolidata de probleme unice
Sarcina *otal ma.ore moderate minore
T1 ; 1 3 1
T2 ; 1 4 0
*O*A0 11 2 2 1
. anali)a a criteriil$r erg$n$mice neres#ectate arata ca cele mai multe #r$%leme de utili)a%ilitate se dat$rea)a
e*$rtului de $#erare /42,24O1 si a li#sei de gidare /2G,42O1& @ata de detective individuala a *$st ridicata
variind intre E0,24O si G=,;0O & @ata de detective medie a *$st de EG&2;O, in tim# ce c$e*icientul de agreere
a *$st de E1,2; O& Atat rata de detective cat si c$e*icientul de agreere au val$ri *$arte ridicate, mai ales in
c$m#aratie cu evaluarea euristica& . ex#licatie ar *i *a#tul ca s-au testat d$ar d$ua sarcini destul de sim#le,
iar numarul de utili)at$ri au *$st destul de mic 4 / *iind numarul minim de utili)at$ri acce#tati #entru testare1
re)ulta ca acest *a#t a dus la identi*icarea unui numar redus de #r$%leme de utili)a%ilitate&
2. Analiza comparativa a rezultatelor
+a sarcina T1 din cele 1; #r$%leme de utili)a%ilitate antici#ate , au *$st c$n*irmate d$ar d$ua de catre
utili)at$ri& Un numar de 4 #r$%leme reale ale utili)a%ilitatii nu au *$st des$#erite in evaluarea euristica +a sarcina
T2 din cele ; #r$%leme de utili)a%ilitate antici#ate, au *$st c$n*irmate d$ar d$ua de catre utili)at$ri, iar un numar
de 3 #r$%leme reale ale utili)a%ilitatii nu au *$st identi*icate in evaluarea euristica&
S-a c$nstatat $ di*erenta intre #r$%lemele de utili)a%ilitate antici#ate si cele reale& Aceasta di*erenta este
destul de mare in ciuda testarii rigur$ase& :e de $ #arte, numarul de #r$%leme de utili)a%ilitate $mise arata limitele
evaluarii euristice si utilitatea testarii cu utili)at$ri& :e de alta #arte tendinta evaluat$ril$r este de a identi*ica mai
multe #r$%leme min$re, in tim# ce la utili)at$ri tendinta este de a identi*ica #r$%leme ma!$re&6137
"umarul #r$%lemel$r antici#ate, a cel$r c$n*irmate si a cel$r reale de#ind atat de numarul si ex#eri)a
evaluat$ril$r cat si de numarul de utili)at$ri& In *a#t atat gradul de incredere cat si validitatea tre%uie sa *ie #rivite
cu #rudenta&
Acest studiu re#re)inta una din #rimele ex#erimentari sistematice in @$mania a unei met$d$l$gii de
utili)a%ilitate& In m$d *iresc exista $ serie de limitari ale studiului& . #rima limita ar *i numarul redus de utili)at$ri
care au testat numai d$ua sarcini, #recum si numarul mic de evluat$ri ceea ce a c$ndus la identi*icarea unui numar
mic de #r$%leme de utili)a%ilitate& . alta limita este re#re)entata de ex#erienta minimala a evaluat$ril$r& In
cl$nclu)ie un numar de 3 evaluat$ri ince#at$ri #$t detecta a#r$ximativ 40O din #r$%lemele existente intr-$
inter*ata&
/. 'oncluzii
In acest artic$l mai intai a *$st #re)entat c$nce#tul de utili)a%ilitate, de*initie si #rinci#alele caracteristici&
A#$i s-a v$r%it des#re evaluarea utili)a%ilitatii in a#licatii interactive, intre care am #re)entat cateva a%$rdari in
aut$mati)area evaluarii utili)a%ilitatii& In #artea *inala a *$st #re)entat un studiu de ca) in care a *$st evaluat situl
:rimariei munici#iului Bistrita, evaluarea *iind im#artita in trei 9 em#irica, euristica si #rin testare cu utili)at$ri&
In urma evaluarii em#irice #r$%lemele ma!$re cu care se c$n*runta situl sunt urmat$arele9 structurarea
de*icitara a in*$rmatiei $*erite, li#sa un$r in*$rmatii de interes, in*$rmatii a*isate d$ar in d$ua lim%i #recum si
li#sa un$r *acilitati de $rientare atat #entru cetateni cat si #entru turisti& :e viit$r ne #r$#unem sa extindem
evaluarea e*ectuata #entru a include teste cu di*eriti utili)at$ri #recum si luarea in c$nsiderare a alt$r caracteristici
cum ar *i accesi%ilitatea& -e asemnea ne #r$#unem #e %a)a alt$r exem#le de situri sa ela%$ram un set de reguli , un
sa%l$n des#re cum ar tre%ui sa arate un site al unei unitati administrative terit$riale&
In ceea ce #riveste evaluarea euristica, res#ectiv testarea cu utili)at$ri, am%ele #r$duc descrieri ale
#r$%lemel$r #e %a)a unui *$rmat unic& -in acest m$tiv e*$rtul de descriere este redus, intrucat $ mare #arte din
#r$%leme, res#ectiv cele antici#ate si c$n*irmate sunt #re)entate in evaluarea euristica& Anali)a re)ultatel$r *iecarei
met$de are si sc$#ul de a *urni)a un *eed%ac8 util asu#ra #er*$rmantel$r *iecarui evaluat$r, ra#$rtat la
#er*$rmantele eci#ei de evaluare& Anali)a c$m#arativa a re)ultatel$r $%tinute de cele d$ua met$de #ermite
calcularea indicat$ril$r de e*icacitate si e*icienta a evaluarii euristice si $*era $ c$n*irmare #rivind validitatea
#r$%lemel$r de utili)a%ilitate identi*icate in evaluarea euristica&
:e viit$r se intenti$nea)a e*ectuarea unui n$u studiu de ca) in a#licarea met$d$l$giei integrate in care sa
*ie #re)enti un numar mai mare de utili)at$ri&
3. Referinte biblio"rafice
617 IS. 0214-11 /10011& 5rg$n$mic @eQuirements *$r .**ice R$r8 ,it M-TSs K Guidance $n Usa%ilit(
627 H$nes, C&-&, A&B& Smit, and 5&B& @$%erts, Book Title, :u%liser, +$cati$n, -ate&
637 Te$*an$s, C& T Duesen%er(, R&, 200;& T$,ards te -esign $* 5**ective B$rmative Test @e#$rts& In H$urnal $*
Usa%ilit( Studies, Issue 1, M$l&1& ##& 2E-4;
647 Scriven, C&, 1001& 5valuati$n tesaurus& 4t ed& "e,%ur( :ar8, CA9 Sage :u%licati$ns
6;7 :$,ell, :& /20001& Re% -esign9 Te C$m#lete @e*erence& "e, U$r89 CcGra,-Vill
6=7 <rug, S& /200=1& -$nWt Ca8e Ce Tin8X9 A C$mm$n Sense A##r$ac t$ Re% Usa%ilit(&
Ber8ele(9 "e, @iders
6E7 SUCI S$*t,are,are Usa%ilit( Ceasurement Invent$r(, 100=&
tt#9LL,,,&ucc&ieL*rgLQuesti$nnairesLsumiL
6G7 @ussell, S& and "$rvig, :&, Arti*icial Intelligence - A C$dern A##r$ac& :rentice-Vall,Inc&, 2003
607 Caes, :&, S$cial Inter*ace Agents9 AcQuiring C$m#etence %( +earning *r$m Users and .ter Agents& SS-04-
03, #ages E1KEG& AAAI :ress, 1004
6107 Bastien, C& T Sca#in, -&+& /10031 5valuating a User Inter*ace ,it 5rg$n$mic Criteria& I"@IA @e#$rt,
@$Quenc$urt&
6117 "ielsen, H& /10021& Binding usa%ilit( #r$%lems tr$ug euristic evaluati$n& :& Bauers*eld, H& Bennett T G&
+(nc /5ds&1, ACC :ress&&
6127 Vvann%erg, 5&T& and +a,, 5&+&-C&, +arusd$tir, C&C& /200E1 2Veuristic 5valuati$n9 C$m#aring ,a(s $*
*inding an re#$rting usa%ilit( #r$%lems Interacting ,it C$m#uters 10, 2;;-240&
6137 C$c8t$n, G&, R$$lr(c, A& /20011& Understanding ins#ecti$n met$ds9 less$ns *r$m an assessment $*
euristic evaluati$n& Bland*$rd, A&, Manderd$nc8t, H&, Gra(, :&-& /5ds&1, :r$ceedings $* :e$#le and
C$m#uters NM& S#ringer-Merlag, 1E1Y1G2
6147 Grig$reta-S$*ia C$!$car, Adriana-Ciaela Guran /20121 2As#ecte s#eci*ice #rivind utili)a%ilitatea situril$r
,e% #entru admiterea la *acultate4 , @evista @$m>na de Interactiune .m-Calculat$r &