Les différentes méthodologies dévaluation en IPM Cours MALTT - Ingénierie cognitive 20 janvier 2006 Mireille Bétrancourt - TECFA - FPSE TECFA Technologies pour la Formation et lApprentissage

Trois types de méthodes Approche par inspection experte Approche par enquête ou observation sur le terrain Approche par tests utilisateurs

Enquêtes - Observation de terrain Obtenir des informations sur ce que les utilisateurs pensent du système, en attendent, ou ce quils en font réellement. Objectif : Caractéristique : Porte sur lusage et lutilisation sur le terrain

Enquêtes - Observation de terrain représentation Ce que jen sais ou crois que jen sais attitudes Ce que jen pense, ce que jaime ou non… pratiques effectives Ce que je fais réellement avec le système… Trois dimensions :

Enquêtes - Observation de terrain représentation attitudes pratiques effectives observation entretiens « traçage » questionnaires focus groups

Enquêtes - Observation de terrain Relation entre utilisabilité, utilité et acceptabilité Nielsen, 1993 Facile à apprendre Efficient Aide la mémorisation Prévient les erreurs Satisfaisant, plaisant utilisabilité utilité théorique Utilité pratique acceptabilité pratique Cout Compatibilité Fiabilité … Acceptabilité sociale Acceptabilité

Enquêtes - Observation de terrain Relation entre utilisabilité, utilité et acceptabilité Utilité Dillon & Morris, 1996

Enquêtes - Observation de terrain Relation entre utilisabilité, utilité et acceptabilité Utilité effective Ketola & Roykkee, 2001 Acceptabilité Utilisabilité

Approches par inspection experte Vérifier lutilisabilité de linterface à partir de connaissances expertes générales sur les recommandations ergonomiques Objectif : Caractéristique : Doit être faite par des experts en ergonomie des IPM, mais ayant une connaissance du contexte

Approches par inspection experte Facilité dapprentissage Efficience Prévention des erreurs Satisfaction Par fonctionnalité Evaluation heuristique Cognitive walkthrough

Evaluation heuristique: les 10 recommandations de Nielsen Heuristiques basées sur l optimisation de 4 critères : apprentissage efficience gestion des erreurs satisfaction Approches par inspection experte

Evaluation heuristique: Les normes ISO Normes définissant la qualité d un produit informatisé Principes de dialogue Utilisabilité des systèmes Présentation visuelle Guidage de lutilisateur Styles de dialogue : menus, manipulation directe, langage de commande ou formulaires Approches par inspection experte

Evaluation heuristique: les critères de Bastien & Scapin recueil dun grand nombre de données expérimentales (800) et de recommandations individuelles (guidelines) traduction de ces données en règles distinction de classes de règles Stratégie de construction des critères : Approches par inspection experte

Approches par test utilisateurs Vérifier que le système soit utilisable pour les utilisateurs novices Objectif : Caractéristique : Doit être faite par des « vrais utilisateurs » à partir de scénarios dusage réels

Approche par test utilisateurs Verbalisation provoquée Auto confrontation Suivi ethnographique Approche « clinique » Test de reconnaissance Test oculomoteur Test d exploration en temps limité Test de classification Test de scénarios Approche « expérimentale »