Les procédures expérimentales pour l'évaluation de l'ergonomie dans les interactions homme-machine sont des méthodes utilisées pour identifier et évaluer des problèmes d'utilisabilité et d'utilité dans la réalisation d'une tâche ayant recours à des interactions homme-machine (IHM).

Le recours à la réalisation d'une tâche dans les interactions hommes-machines s'applique lors de l'utilisation de logiciels, de systèmes interactifs ou d'une interface à travers un environnement informatique.

Classification Il existe plusieurs classification disponibles dans la littérature. Elles permettent de représenter les méthodes d'évaluations pour en simplifier la sélection selon 3 critères : les objectifs d'évaluation, la source des données d'évaluation et le moment de l’évaluation.

Une des premières classification a été réalisée par Bernard Senach en 1990, elle distingue deux approches, une approche empirique et une approche analytique. L'approche empirique permet de recueillir des informations lors de l'utilisation de l'interface. Les informations recueillies se composent d'une récolte de données qui concerne le comportement de l'utilisateur. On cherche à analyser les performances de l'utilisateur pour la réalisation d'une action spécifique. L'approche analytique examine la conception de l'interface. Les méthodes utilisées dans cette approche cherchent à prédire les propriétés et les comportements que pourrait rencontrer l'utilisateur sans que sa présence soit requise.

En 1991, Andy Whitefield & al. mettent en avant la présence réelle ou représentative de l'utilisateur pour classifier les méthodes utilisées par un grand nombre d'ergonomes. Quatre approche d'évaluation se distinguent : les méthodes analytiques, d'observations, les rapports de spécialistes et d'utilisateurs.

Selon Holyer (1993), quatre types de méthodes se fondant sur leur philosophie d'origine. Elles sont issues de la psychologie cognitive et/ou sociale, des sciences sociales, de l'ingénierie.

Selon Balbo (1994), les méthodes d'évaluations sont réparties selon : les connaissances requises, les ressources matérielles, les facteurs situationnels, les moyens humains et les résultats fournis.

Selon Grislin et Kolski (1996), les méthodes sont classées selon leur approches. Les approches sont centrées sur les avis et/ou les activités des utilisateurs, des experts et sur la modélisation de l'interface.

Selon Farenc (1997), l'utilisateur présent ou non, la ou les tâche(s) et l'interface sont les données permettant la classification.

Selon Dix, Finlay, Abowd et Beale (1998), les méthodes sont répertoriées selon l'évaluation d'experts à travers l'analyse, l'observation et l'expérimentation.

Selon Bastien et Scapin (2001), les utilisateurs produisent des rapports. Ils sont observés.

L'interface est caractérisé par les utilisateurs et la tâche.

Inventaire des outils

+ Méthodes d'évaluations Types de données Temps ParticipantsTests utilisateurQualitativesDifféréUtilisateurEntretiensQualitativesDifféréUtilisateurIncidents critiquesQualitativesDifféréUtilisateurTests utilisateursQuantitatives et QualitativesRéel et DifféréUtilisateurBrainstormingQualitativesDifféréUtilisateurInstruction au sosieQualitativesDifféréUtilisateurFocus GroupQualitativesDifféréUtilisateurEnquête contextuelleQualitativesRéel UtilisateurÉvaluation heuristiqueQualitatives Réel ErgonomeCheminement cognitifQualitativesDifféréDéveloppeurÉvocationQualitativesDifféréUtilisateurProtocoles verbauxQualitativesDifféréUtilisateurTri de cartesQualitativesDifféréUtilisateur"Penser à voix haute"QuantitativesRéelUtilisateurQuestionnaireQuantitatives et QualitativesDifféréUtilisateurData LogQuantitatives Réel UtilisateurMouvement oculaireQuantitatives Réel Utilisateur

Tests d'utilisateurs Les tests utilisateurs permettent la mise en situation de l'utilisateur afin d'observer et de mesurer ses comportements. Les tests peuvent être réalisés sur un prototype, une maquette et/ou sur un produit fini. Ils donnent aussi la possibilité aux développeurs de détecter des erreurs conceptions auxquelles ils n'auraient pas penser.

Entretiens En amont de la réalisation du produit, les entretiens servent à recueillir les attentes, souhaits et opinions des futurs utilisateurs. Ils mettent également en lumière le profil des utilisateurs. L'évaluateur doit être capable de stimuler les réponses du participant afin de pouvoir détecter une mauvaise compréhension de la question, recadrer le participant s'il s'éloigne du thème de l'entretien.

Incidents critiques Cette technique permet de recueillir les incidents fréquemment rencontrés par des utilisateurs en amont de la conception ou de la refonte d'un produit. L'utilité de la méthode des incidents critiques est d'identifier les vulnérabilités qui peuvent être liées à des risques et à la sécurité.

Brainstorming Le "remue méninges" donne la possibilité d'engendrer un grand nombre d'idée lors de la conception et de la refonte d'un produit. Il permet de définir les caractéristiques importantes ou inutiles d'une interface.

Instruction au sosie Particulièrement utilisée dans les domaines hautement spécialisés comme le domaine médical ou financier dans le cadre d'une automatisation des tâches. Cette technique, utilisée en phase de conception d'un produit, rend possible la structuration des informations et des mécanismes de fonctionnements d'une tâche. L'utilisateur explique à son sosie, l'évaluateur, les actions qu'ils réalisent à l’exécution d'une tâche.

Focus Group L'intérêt du Focus group est l'utilisation d'un ou de plusieurs groupes d'utilisateur appartenant à l'utilisateur cible du produit. Ce groupe se compose de 7 à 8 personnes maximum. Le but de cette méthode est de récolter des avis et comportements sur la réalisation d'une tâche.

Enquête contextuelle Utilisée en phase de conception d'un produit, cette technique collecte des données sur les actions précises que doit effectuer l'interface par rapport au contexte d'utilisation. Elle aide à diminuer une méconnaissance du domaine d'application du produit (non habituelles, émergentes) et/ou améliorer un produit déjà existant. L'évaluateur observe l'utilisateur dans son travail. Il est aussi amené à poser des questions pour comprendre le déroulement des actions et des stratégies mise en place par l'utilisateur.

Cheminement cognitif Le cheminement cognitif nommé en anglais le "Cognitive Walkthrough", est un procédé permettant la reproduction du parcours de l'utilisateur à travers l'interface. Le but étant la vérification de critères d'utilisabilité préalablement définis. L'évaluation peut être faite sur une maquette ou sur un prototype. L'expérience dans l'analyse des interface permet à un évaluateur de bien identifier les éléments ne respectant pas les critères d'utilisabilité. L'évaluateur doit être également capable d'effectuer un profil des utilisateurs finaux afin de créer à travers le contexte d'utilisation de l'interface, des scénarios. de l'interface.

Évaluation heuristique

Les évaluations heuristiques sont produites en observant une interface. Cette observation consiste à mettre en avant les bonnes et les mauvaises élaborations de l'interface à travers l'utilisation de règles.

Ces règles se basent sur des principes d'utilisabilité. Les principes incluent la simplicité et le naturel des dialogues, l'utilisation de la langue de l'utilisateur, la minimisation du temps de réflexion de l'utilisateur, la solidité de l'interface, la capacité à produire un commentaire, la disposition de points de sortie de l’interface, la faculté à présenter des raccourcis, l'apparition de messages d'erreur correct et la prévention des erreurs.

Le nombre d'évaluateurs conseillé est de 3 pour pouvoir détecter une grande majorité des problèmes, le nombre optimal étant de 5 évaluateurs. Leur nombre impaire permet de trancher plus facilement dans le cas d'un résultat de l'évaluation contradictoire entre les évaluateurs.

Évocation L'utilisateur, après avoir utilisé le produit ou un prototype, dessine des parties des pages explorées définies préalablement par l'évaluateur. La sélection des points à évoquer par l'utilisateur doit être réalisée par un ergonome puisque seul ce type de profil est capable de connaître les mécanisme cognitifs mis en jeu dans la représentation spatiale.

Cette technique permet la connaissance des éléments gardés en mémoire par l'utilisateur et de révéler quels éléments graphiques ont été compris ou non.

Protocoles verbaux Grâce à la réalisation d'une tâche bien définie d'un utilisateur cible du futur produit fini tout en exprimant ses raisonnement à hautes voix, ces protocoles donne lieu à une collecte d'informations précises sur le raisonnement et les décisions effectués par l'utilisateur.

L'évaluateur est une personne capable de mener un entretien technique (présentation de la consigne, guidage de l'expérience).

Tri de carte Le tri de cartes reproduit la représentation d'éléments présents dans l'interface comme des boutons, des titres, des paragraphes, des liens, etc.) sur des feuilles en papier. Les éléments représentant sont choisis avec le plus grand soin selon l'évaluation souhaitée.

Cette méthode peut être utilisée pendant la conception (modéliser l'architecture), le développement (cohérence et fonctionnalités), l'évaluation (identification des problèmes d'ergonomie). Le but est de rassembler en groupe et de nommer ces groupes grâce aux éléments disponibles.

L'interprétation des résultats requiert une expérience en analyse de données et en ergonomie afin de comprendre le produit en termes d'utilisabilité.

"Penser à voix haute" Proche dans son principe de la méthode des protocoles verbaux, la technique du "penser à voie haute" se différencie dans le fait de la nécessité l'interaction d'un produit plus ou moins fini.

Les sujets de l'évaluation sont des futurs utilisateurs, connaissant et étant expert de la réalisation de la tâche à l'aide du produit.

Il est recommandé de faire appel à un ergonome ou un psychologue expérimenté dans les protocoles verbaux afin de bien dérouler l'entretien avec le sujet. L'expérimentateur doit également être capable de bien connaître l'utilisateur d'un point de vue cognitif et les causes pouvant le gêner.

Questionnaire Comportant des questions ouvertes, fermées, phrases à compléter, etc., les questionnaires permettent la connaissance des utilisateurs (niveau d'expertise du domaine de l'application, degré de familiarité avec les technologies, composantes socio-démographiques, degré de handicap), leurs opinions et avis sur un produit fini ou en cours de réalisation.

Data Log Dans le but mettre en avant les possibles erreurs, les stratégies de déplacements, de pointage et les comportements des utilisateurs, l'analyse des fichiers log (en anglais Data Log) tracent l'activité de l'utilisateur à travers une interface.

Ses fichiers peuvent prendre plusieurs formes comme des captures d'écrans, des enregistrements vidéo, des fichiers journalisations

Mouvement oculaire

Contraintes Les contraintes à réaliser des évaluations se mesurent et s'établissent selon le temps requis à mettre en place celles-ci par rapport au temps pour produire l'interface, l'expertise prescrite ou simplement les tendances et les traditions.

Histoire 1940 - 1950 : Fiabilité

Les premières évaluations concernaient la fiabilité. Réalisées sur la première génération d'ordinateurs (utilisation de tubes électroniques), elles étaient utilisées pour minimiser les pannes. En effet, les premiers ordinateurs étaient de larges machines composées d'une quantité importante de composants.

On peut citer comme l'un des premiers ordinateurs, l'ENIAC.

Les évaluations étaient accomplies pendant l'utilisation de la machine.

Les utilisateurs, ingénieurs et mathématiciens étaient les principaux évaluateurs.

1950 - 1960 : Performance