Introductionl valuation Introduction lvaluation desInterfacesHommeMachine

Dr.KavehBazargan Kaveh.Bazargan@unige.ch K hB @ i h Dr.PatrickRoth Dr Patrick Roth Patrick.Roth@unige.ch

WorldUsabilityDay@UniversitdeGenve CUIUNIGE,10.11.2011

10/11/2011

Plan
Dfinition Mesurer lutilisabilit Approches etmthodes dvaluation
CardSorting q Evaluationheuristique Testsdutilisabilit

Le Common Industry Format (CIF) LeCommonIndustryFormat (CIF) Conclusion

10/11/2011 2

Contexte

10/11/2011

(Anderson,2011)
3

10/11/2011

4 4

Dfinition

Unsystmeestutilisablelorsqu'ilpermetl'utilisateurde ff ff f ralisersatcheavecefficacit,efficience etsatisfaction danslecontexted'utilisationspcifi

(NormeISO924111) (Norme ISO 924111)

10/11/2011

Mesurerl utilisabilit(1) Mesurer lutilisabilit (1)

Efficacit :Vrifierquelesobjectifsvisspar l'utilisateursontatteints. Efficience :Mesurerlesressourcesncessaires pouratteindrecesobjectifs(p.ex.temps, tt i d bj tif ( t erreurs,etc.). Satisfaction :Dterminersilesystmeest agrableutiliser. agrable utiliser
10/11/2011 6

Mesurerl utilisabilit(2) Mesurer lutilisabilit (2)

10/11/2011

(Hornbaek,2006)

Mesurer lutilisabilit (3): SingleUsabilityMeasure(SUM) i l bili ( )

10/11/2011

(Sauro andKindlund,2005)

8 8

Approches dvaluation d valuation

Approches analytiques (expertbased): (expert based): examin selon desheuristiques,critres ergonomiques,parcours ergonomiques parcours cognitif Automatique :logiciel (ex.:outil W3Cpourla verificationdelaccessibilit d ifi i d l ibili dunsiteWeb) i W b) Approche empirique (userbased):mtriques, scnarios &tches,observerdirectement les utilisateurs,analyse desdonnes
10/11/2011 9

Mthodes dvaluation (1) d valuation

(Usability.gov,2010)
10/11/2011 10

Mthodes dvaluation (2) d valuation

(Usability.gov,2010)
10/11/2011 11

CardSorting(1) Card Sorting (1)

Techniquepermettantdexplorerlamanire dontlesusagersgroupentdeslments
(Gaffney, 2000)

10/11/2011

12

CardSorting(2) Card Sorting (2)

Utilepour il
Catgoriserleslmentsduneinterface(onglets, dialogue,etc.) d l ) Dfinirlastructuredunsiteweb

10/11/2011

13

CardSorting(3) Card Sorting (3)

Prparation Ecrirechaquelmentcatgoriseretchaque groupesurunecarteindividuelle Ajouterdescartesblanches Conduitedutest Demanderauxparticipantsderegrouperles lmentsquiontunsens Analyse Entrerlesrsultatsdansunsystmedanalysedes regroupements(EZSort,xSort)
10/11/2011 14

CardSorting(4) Card Sorting (4)

(Usability.gov,2010)

10/11/2011

15

CardSorting(5) Card Sorting (5)

Dendrogramme du site eLearning@unige

10/11/2011 16

CardSorting:mise enpratique

10/11/2011

17

CardSorting:miseenpratique Card Sorting : mise en pratique

10/11/2011

18

Evaluationheuristique(1) Evaluation heuristique (1)

Mthoded'inspectiondunlogicielpermettantun expertd identifierlesproblmesd utilisabilit de expert d'identifier les problmes d'utilisabilit de lInterfaceUtilisateur
( (Usability.gov,2008) yg , )

10/11/2011

19

Evaluationheuristique Evaluation heuristique (2)

Heuristiques
Tognazzini Schneiderman(consistance,raccourcis,etc.) ( ) Nielsen(prventiondesproblmes,etc.) Bastien&Scapin

10/11/2011

20

Evaluationheuristique (3):example Principes deTognazzini

A i i Anticipation i

Autonomie Vision des couleurs Visiondescouleurs Valeurspardfaut Efficacit de l'utilisateur Efficacitdel utilisateur Interfaceexplorable Loi de Fitts LoideFitts Objetsdel'interface Rductiondutempsdelatence p "Learnability"
10/11/2011

Utili ti d Utilisationdes mtaphores Protection du travail Protectiondutravail del'utilisateur Lisibilit Conservationdel'tat Navigation visible Navigationvisible

(AskTog.com,2011)
21

Evaluationheuristique :mise enpratique

10/11/2011

22

Evaluationheuristique :mise enpratique

10/11/2011

23

Evaluationheuristique :mise enpratique

10/11/2011

24

Evaluationheuristique :mise enpratique Evaluation heuristique : mise en pratique

10/11/2011

25

Evaluationheuristique:miseenpratique Evaluation heuristique : mise en pratique

10/11/2011

26

Evaluationheuristique:miseenpratique Evaluation heuristique : mise en pratique

10/11/2011

(Usability.gov,2010)

27

Evaluationheuristique:miseenpratique Evaluation heuristique : mise en pratique

10/11/2011

28

Testsd utilisabilit(1) Tests dutilisabilit (1)

Letestconsisteobserverdirectement i b di l'utilisateur entraindeseservirde l'application. l' li i

10/11/2011

29

Testsd utilisabilit(2):avantages Tests dutilisabilit (2): avantages

Avantages
Permetd'observerl'utilisateurdansuncontexte reld utilisation. rel d'utilisation Lesproblmesidentifissontceuxquel'utilisateur rencontrelorsqu ilsesertdulogiciel. rencontre lorsqu'il se sert du logiciel.

Inconvnients
Peutdifficilementcouvrirl'ensembledes fonctionnalitsdulogiciel.
10/11/2011 30

LeCommonIndustryFormat Le Common Industry Format (CIF)

L'InstitutAmricaindesNormesproposeunformalisme (ISO/IEC25062:2006)pournormaliserlestests: Descriptionduproduitouduprototype, Description du produit ou du prototype, Objectifsdutest, Slectiondesparticipants Snarios S i ettchesutilisateur, h ili Designexperimental dutest, Mthodologieetprotocoledutest, g p , Mtriquesdutilisabililt etrecolte desdonnes Mesurequalitativeetquantitative Mthodedeprsentationdesrsultats Mthode de prsentation des rsultats Annexes
31

10/11/2011

Rapportdutilisabilit:structureselon leCIF
1.TitlePage 2.ExecutiveSummary 3.Introduction 4.FullProductDescription 5.TestObjectives 5. Test Objectives 6.Method
A. B. C. D. E. F. G. A. B.
10/11/2011

8.UsabilityMetrics
A. B. B C. Effectiveness Efficiency Satisfaction DataAnalysis Data Analysis DataScoring DataReduction StatisticalAnalysis PresentationoftheResults PerformanceResults SatisfactionResults

9.Results
A. B. C. D. E. F. G.

Participants ContextofProductUseintheTest Tasks TestFacility ParticipantsComputingEnvironment TestAdministratorTools ExperimentalDesign ParticipantGeneralInstructions ParticipantTaskInstructions

10.Appendices d 11.References

7.Procedure

32

Exemple:utilisabilit destechniquesde visualisationdinformationsabstraites l d f b

(VFC-3 2008) 3D, ) (SITG, 2010)
33 (Linnean-3D, 2010)

10/11/2011

(Fanvenus3D, 2010)

Exemple:mthodologiepourlestests dutilisabilit d l b l
SelonleformatCIF(CommunIndustry Format): ( y ) OutildeprototypagedEV3Dinteractif Slectiondesparticipants
Questionnairedeprslection p Mthodedchantillonnage

Tches Designexprimental g p
Two withinsubjects /repeated measures design Contrebalancementpourlordredestches/techniques Mtriques:tempsdexcutiondelatcheetprsence(IPQ,2008)

Procduredemiseenuvreduplandetest
Excutionsemiautomatiqueduplandetestvialamanette

Mthodologiepourlacollectedesdonnes,lanalyseetlaprsentations desrsultats d lt t
AdaptationdeloutilUsability DataLogger(Userfocus,2010)
10/11/2011 34

Exemple:testsd utilisabilit Exemple: tests dutilisabilit

Generic task: goal oriented exploration

10/11/2011

(Bazargan,2011)

35

Conclusion(1)

Unsystmeestutilisablelorsqu'ilpermetl'utilisateurde ff ff f ralisersatcheavecefficacit,efficience etsatisfaction danslecontexted'utilisationspcifi

(NormeISO924111) (Norme ISO 924111)

10/11/2011

36

Conclusion(2)

Approchesd valuation: Approches dvaluation: Analytiques(expertbased) Automatique Empirique(userbased)

10/11/2011

37

Conclusion(3)

Le test dutilisabilit est loutil de plus performant pour Letestd utilisabilit l outil deplusperformant pour mesurer lutilisabilit dune applicationou dunsiteweb LeCIF facilite laplannification etlexcution destests dutilisabilit

10/11/2011

38

References
Spencer,D.(2009).Cardsorting:Designingusablecategories.Brooklyn, N.Y:RosenfeldMedia Tullis,T.,andAlbert,B.(2008)Measuringtheuserexperience:Collecting, analyzingandpresentingusabilitymetrics.MorganKauffmanPublishers, Burlington,MA. Rubin,J.(1994)HandbookofUsabilitytesting,WileyTechnical CommunicationLibrary. BAZARGANHARANDI,K.(2011).AbstractInformationVisualizationin , ( ) Interactive3DVirtualEnvironments:ConceptualizationandUsability Evaluation.Thse dedoctorat:Universit deGenve,2011,no.SES747, EditionSES Universit deGenve,ISBN9782889030057. IndustryUsabilityReporting(IUSR)Project NationalInstituteof StandardsandTechnology(NIST),2011. MaryTheofanos (2005).CommonIndustryFormatapprovedas y ( ) y pp internationalstandard.interactions12,5(September2005),pp.4647.
39

10/11/2011

Questions? Questions ?
Kaveh.Bazargan@unige.ch : :kaveh.bazargan : : kaveh.bazargan :kaveh.bazargan Patrick.Roth@unige.ch :@rothp : @rothp :patrickroth :rothp

10/11/2011

40