M. Beaudouin-Lafon, Université Paris-Sud - Cours de W. E. Mackay (INRIA) Conception et Évaluation des Interfaces Homme-Machine 1 2 Plan : Cours Conception et Évaluation des Interfaces Homme-Machine • • • • • • • • • • • • • • • • • • • • • • • • • • • • • • • • • • • • Michel Beaudouin-Lafon Université Université Paris-Sud Paris-Sud Cours Cours de de Wendy Wendy E. E. Mackay Mackay (( I.N.R.I.A.) I.N.R.I.A.) 3 Plan : Travaux Dirigés • • • • • • • • • • • • • • • • • • • • • 1 : Observation des utilisateurs 2 : Analyse de donnés qualitatives 3 : Brainstorming 4 : Prototypage 5 : Expérimentation 6 : Evaluation qualitative 7 : Présentation finale 1 : Présentation générale 2 : Méthodes qualitatives 3 : Géneration des idées 4 : Prototypage 5 : Méthodes quantitatives 4 Notation du module • • • • • • • • • • • • • • • • • • • • • Projet en groupe 3-4 3-4 personnes personnes par par groupe groupe Vidéo présentation de 15 minutes Version Version révisée révisée du du projet projet Rapport de 5 pages pour la direction Résumé Résumé Justification Justification des des choix choix de de conception conception M. Beaudouin-Lafon, Université Paris-Sud - Cours de W. E. Mackay (INRIA) Conception et Évaluation des Interfaces Homme-Machine 1 2 Interaction Homme-Machine • • • • • • • • • • • • • • • • • • • • • Fonctionnalité : Informatique Tâches : Ergonomie Interaction : Aujourd'hui • • • • • • • • • • • • • • • • • • • • • IHM 3 Pourquoi ce cours ? • • • • • • • • • • • • • • • • • • • • • Les ingénieurs savent Comment Comment trouver trouver la la solution solution d'un d'un problème problème Mais Mais ne ne se se posent posent jamais jamais la la question question ... ... Est-ce Est-ce que que c'est c'est une une bonne bonne question question ?? La conception participative : Redéfinition Redéfinition du du problème problème et et Résolution Résolution du du problème problème L'Interaction Homme-Machine est un domaine pluridisciplinaire Sciences Sciences de de la la nature nature & & "Design" "Design" Méthodes d'évaluation qualitatives Introspection Introspection Observation Observation directe directe Interviews Interviews Questionnaires Questionnaires 4 Pourquoi ces T.D.'s ? • • • • • • • • • • • • • • • • • • • • • Les ingénieurs savent Comment Comment faire faire des des abstractions abstractions Mais Mais pas pas comment comment concevoir concevoir :: les les détails détails de de l'interaction l'interaction homme-machine homme-machine La conception participative : Comprendre Comprendre l'interaction l'interaction dans dans un un contexte contexte réel réel Intégrer Intégrer le le contexte contexte dans dans le le système système M. Beaudouin-Lafon, Université Paris-Sud - Cours de W. E. Mackay (INRIA) Conception et Évaluation des Interfaces Homme-Machine 1 2 Interaction Homme-Machine • • • • • • • • • • • • • • • • • • • • • Relations de l'IHM avec les Sciences et le Design • • • • • • • • • • • • • • • • • • • • • Pluri-disciplinaire Fait Fait appel appel àà de de nombreuses nombreuses sciences sciences humaines humaines et et disciplines disciplines de de design design Emprunte Emprunte des des méthodes méthodes et et en en crée crée de de nouvelles nouvelles Pas une science de la nature ! Phénomènes Phénomènes artificiels, artificiels, pas pas naturels naturels A la fois théorique et appliqué 3 IHM & Sciences humaines • • • • • • • • • • • • • • • • • • • • • Psychologie Cognition Cognition Apprentissage Apprentissage Perception Perception Ecologie Ecologie Sociologie Attitudes Attitudes Communication Communication Anthropologie Ethnographie Ethnographie Domaines appliqués Ergonomie Ergonomie Sciences Sciences de de gestion gestion Epistémologie Sciences de la Nature Psychologie Sociologie Anthropologie IHM Design Industriel Arts graphiques Typographie Art & Design 4 Méthodes d'investigation • • • • • • • • • • • • • • • • • • • • • Psychologie Expérience Expérience contrôlée contrôlée Quantitative Quantitative Sociologie Quasi-Expériences Quasi-Expériences Questionnaires Questionnaires Quantitatifs Quantitatifs & & Interviews Interviews Qualitatifs Qualitatifs Anthropologie Etudes Etudes sur sur le le terrain terrain Qualitatives Qualitatives M. Beaudouin-Lafon, Université Paris-Sud - Cours de W. E. Mackay (INRIA) Conception et Évaluation des Interfaces Homme-Machine 1 2 Approches concurrentes • • • • • • • • • • • • • • • • • • • • • Psychologie Expériences • • • Hypothèse • Hypothèse • Théorie Théorie • • • • • • • Observation Observation • • • • • • • • • Psychologie cognitive "Plans" "Plans" et et analyse analyse de de tâches tâches Très Très quantitatif quantitatif Ethnographie "Situated "Situated Action" Action" -- Action Action en en situation situation Très Très qualitatif qualitatif 3 Anthropologie Etudes de terrain • • Cadre Cadre de de travail travail • Cadre modifié • Cadre de de travail travail modifié • Théorie Théorie • • • • • • • Observation Observation • • • Observation Observation Observation Observation • générale spécifique générale spécifique • • • • • Nouvelle Nouvelle hypothèse hypothèse Expérience Expérience 4 IHM & Design • • • • • • • • • • • • • • • • • • • • • Arts graphiques Film et Vidéo Typographie Design industriel Architecture etc. Nouvelles Nouvelles expérience expérience M. Beaudouin-Lafon, Université Paris-Sud - Cours de W. E. Mackay (INRIA) Conception et Évaluation des Interfaces Homme-Machine 1 2 Processus de conception : Ingenieurs • • • • • • • • • • • • • • • • • • • • • Interaction Homme-Machine • • • • • • • • • • • • • • • • • • • • • Cycle de vie du produit Modèle Modèle en en cascade cascade Modèle Modèle en en V V Modèle Modèle de de la la spirale spirale Conception itérative Evaluation Evaluation indépendante indépendante Conception Conception et et évaluation évaluation intégrées intégrées 3 Interaction Homme-Machine Théorie Théorie Interaction Interaction avec avec un un artefact artefact Monde Monde réel réel • • • • • • • • • • • • • • • • • • • • • Modèle Modèle Observation Observation Evaluation Evaluation Études Études qualitatives qualitatives & & quantitatives quantitatives Design : Création indépendante Architectures Architectures & & Guides Guides de de style style IHM : Conception et évaluation intégrées Conception Conception itérative itérative Conception Conception participative participative Prototypage Prototypage avec avec les les utilisateurs utilisateurs 4 Triangulation Nouveau Nouveau modèle modèle Simulation Simulation Science : Evaluation indépendante Prototype Prototype • • • • • • • • • • • • • • • • • • • • • Il est difficile d'être sûr Utiliser différentes paramétrisations Faire Faire varier varier le le dispositif dispositif expérimental expérimental Utiliser différentes méthodes Expérience Expérience Etude Etude de de cas cas Interviews Interviews M. Beaudouin-Lafon, Université Paris-Sud - Cours de W. E. Mackay (INRIA) Conception et Évaluation des Interfaces Homme-Machine 1 2 Méthodes qualitatives • • • • • • • • • • • • • • • • • • • • • Comprendre les utilisateurs • • • • • • • • • • • • • • • • • • • • • Produisent des descriptions Peuvent être subjectives N'essaient pas forcément de supprimer le biais de l'observateur Peuvent ne pas être reproductibles Peuvent ne pas être généralisables 3 Introspection • • • • • • • • • • • • • • • • • • • • • Le concepteur essaie le système Est-ce Est-ce que que le le système système lui lui convient convient ?? Le plus fréquent Le plus susceptible d'erreurs Ce que l'on peut faire systématiquement : Evaluation Evaluation heuristique heuristique "Design "Design Walkthroughs" Walkthroughs" Introspection Observation directe Interviews Questionnaires 4 Observation directe • • • • • • • • • • • • • • • • • • • • • Observer et enregistrer les utilisateurs se servant du système En laboratoire ou sur le terrain Important pour identifier les gros problèmes La validité dépend des détails Utiliser au moins 2 observateurs pour enregistrer indépendamment le comportement Etablir Etablir le le degré degré de de concordance concordance (5%) (5%) M. Beaudouin-Lafon, Université Paris-Sud - Cours de W. E. Mackay (INRIA) Conception et Évaluation des Interfaces Homme-Machine 1 2 Observation directe Observation directe Etude d'utilisabilité • • • Définir une mission spécifique • Exécuter Exécuter une une série série de de tâches tâches • • Résoudre Résoudre un un problème problème • Dérouler • Dérouler un un scénario scénario • • Fournir des instructions standard • • Choisir 2 utilisateurs ou plus • parmi parmi le le public public visé visé • • • Choisir le cadre du test • en en laboratoire laboratoire ou ou sur sur le le terrain terrain • • • • • • • • • • • • • • • • • • • • • • • • • 3 Observation directe • • • • • • • • • • • • • • • • • • • • • Enregistrement Papier: Papier: bon bon marché, marché, peu peu de de détails, détails, incomplet incomplet Audio: Audio: parfois parfois utile, utile, difficile difficile àà analyser analyser Vidéo: Vidéo: le le plus plus détaillé, détaillé, intrusif intrusif ?, ?, difficile difficile àà analyser, analyser, analyse analyse rétrospective rétrospective Actions Actions sur sur le le clavier clavier et et la la souris souris Codage Définir Définir des des catégories catégories Evénements Evénements discrets discrets ou ou continus continus Mesurer Mesurer le le degré degré de de concordance concordance Décider ce que l'on veut mesurer Temps Temps d'exécution, d'exécution, erreurs erreurs Demander aux utilisisateurs d'effectuer les tâches Observation Observation simple simple Expliquer Expliquer àà haute haute voix voix Apprentissage Apprentissage coopératif coopératif ou ou co-découverte co-découverte Combiner avec des interviews ou des questionnaires 4 Interviews • • • • • • • • • • • • • • • • • • • • • Buts : Obtenir Obtenir l'opinion l'opinion de de l'utilisateur l'utilisateur sur sur le le système système Identifier Identifier les les besoins besoins et et les les tâches tâches de de l'utilisateur l'utilisateur Suppositions : Les Les opinions opinions sont sont subjectives subjectives Les Les utilisateurs utilisateurs rationalisent rationalisent souvent souvent les les événements événements M. Beaudouin-Lafon, Université Paris-Sud - Cours de W. E. Mackay (INRIA) Conception et Évaluation des Interfaces Homme-Machine 1 2 Concevoir un interview • • • • • • • • • • • • • • • • • • • • • Information Lens • • • • • • • • • • • • • • • • • • • • • Questions dirigées Mêmes Mêmes questions, questions, même même format format pour pour tout tout le le monde monde Ajouter Ajouter des des questions questions et et re-interroger re-interroger les les sujets sujets Technique de l'incident critique Interroger Interroger àà propos propos d'un d'un événement événement marquant marquant récent récent (la (la semaine semaine dernière) dernière) Généraliser Généraliser àà partir partir d'un d'un cas cas particulier particulier Questions ouvertes Permettre Permettre aux aux utilisateurs utilisateurs d'expliquer d'expliquer ce ce qu'ils qu'ils font font àà leur leur manière manière 3 Exemple : Information Lens Questions dirigées • • 1. Combien de messages avez-vous reçu • • aujourd'hui ? • • 2. Est-ce une journée typique ? sinon • expliquez pourquoi. • • 3. Vous lisez votre courrier tous les combien ? • • 4. Lisez-vous tout votre courrier ? • • 5. Quel est le pourcentage de messages que • vous voudriez n'avoir jamais vu ? • • • 6. Combien de règles de filtrage avez-vous ? • • 7. Est-ce que l'une d'elles a été utilisée quand • vous avez lu votre courrier ce matin ? • Filtrage du courrier électronique (Malone, (Malone, 1986) 1986) Etude de 2 ans à Xerox PARC (Mackay, (Mackay, 1989) 1989) Les utilisateurs ont changé leur façon de gérer le courrier Les utilisateurs ont changé le modèle des concepteurs du système 4 Exemple : Information Lens Technique de l'incident critique • • • 1. Vous souvenez-vous avoir, la semaine • dernière, cherché un ancien message ? • • Décrivez ce que vous avez fait pour le • trouver. • • • 2. Vous souvenez-vous avoir eu besoin, • la semaine dernière, d'une information • technique ? Décrivez ce que vous avez fait • • pour la trouver. • • 3. Vous souvenez-vous si, la semaine • dernière, l'une de vos règles de filtrage • • n'a pas fonctionné comme vous vous y • attendiez ? Qu'avez-vous fait ? • M. Beaudouin-Lafon, Université Paris-Sud - Cours de W. E. Mackay (INRIA) Conception et Évaluation des Interfaces Homme-Machine 1 2 Exemple : Information Lens Questionnaires Questions ouvertes • • • 1. Décrivez comment vous utilisez • la messagerie. • • • 2. Descrivez comment vous classez • vos messages. • • 3. Quand préférez vous utiliser le courrier • électronique ? le téléphone ? • • une conversation face-à-face ? • • 4. L'utilisation de Information Lens • a-t-il changé la façon dont vous • • communiquez avec vos collègues ? • • • • • • • • • • • • • • • • • • • • • • • • 3 Concevoir un questionnaire • • • • • • • • • • • • • • • • • • • • • Quelle information recherchez-vous ? Demander Demander seulement seulement ce ce qui qui est est pertinent pertinent Poser Poser des des questions questions appropriées appropriées Qui est le public ? 50 50 -- 1000 1000 personnes personnes Comment l'envoyer et le récupérer ? En En ligne ligne ?? Par Par courrier courrier ?? Comment analyser les résultats ? Les Les questions questions déterminent déterminent les les statistiques statistiques But : Résumé Résumé utile utile des des avis avis de de nombreux nombreux utilisateurs utilisateurs Suppositions : On On teste teste quelque quelque chose chose de de réel réel Les Les utilisateur utilisateur répondent répondent honnêtement honnêtement Les Les questions questions concernent concernent le le phénomène phénomène auquel auquel on on s'intéresse s'intéresse 4 Styles de questions • • • • • • • • • • • • • • • • • • • • • Informations générales Depuis Depuis combien combien d'années d'années utilisez-vous utilisez-vous le le courrier courrier électronique électronique ?? Questions ouvertes Décrivez Décrivez comment comment vous vous utiliser utiliser le le courrier courrier électronique électronique ?? Questions dirigées Combien Combien de de messages messages avez-vous avez-vous reçu reçu aujourd'hui aujourd'hui ?? Choix multiple J'utilise J'utilise la la fonction fonction de de destruction destruction de de message message oo souvent souvent oo parfois parfois oo rarement rarement oo jamais jamais M. Beaudouin-Lafon, Université Paris-Sud - Cours de W. E. Mackay (INRIA) Conception et Évaluation des Interfaces Homme-Machine 1 2 Styles de questions • • • • • • • • • • • • • • • • • • • • • Principes de conception des questions • • • • • • • • • • • • • • • • • • • • • Scalaire Je Je peux peux facilement facilement gérer gérer mon mon courrier courrier Pas Pas d'accord d'accord -2 -2 -1 -1 00 11 D'accord D'accord 22 Classement Classer Classer les les fonctions fonctions suivantes suivantes par par ordre ordre d'utilité d'utilité :: ___ ___ Copie Copie aveugle aveugle ___ ___ Copie Copie automatique automatique àà une une liste liste de de distribution distribution ___ ___ Copie Copie automatique automatique àà moi-même moi-même 3 4 Technique de l'Incident Critique • • • • • • • • • • • • • • • • • • • • • But Générer Générer des des exemples exemples spécifiques spécifiques de de problèmes problèmes rencontrés rencontrés par par les les utilisateurs utilisateurs Procédure Interviewer Interviewer un un utilisateur utilisateur dans dans son son environnement environnement de de travail travail Lui Lui demander demander de de se se souvenir souvenir d'un d'un problème problème particulier particulier Donner Donner une une limite limite de de temps temps -en en général général la la semaine semaine dernière dernière Demander Demander àà l'utilisateur l'utilisateur de de décrire décrire chaque chaque incident incident en en détail détail Demander Demander àà l'utilisateur l'utilisateur ce ce qui qui est est habituel habituel et et ce ce qui qui ne ne l'est l'est pas pas dans dans l'incident l'incident • • • • • • • • • • • • • • • • • • • • • • • Structure parallèle des phrases Ordre cohérent : positif vers négatif • Zéro est soit une réponse moyenne soit "je ne sais pas" • • Penser à ajouter un degré de confiance Poser plusieurs fois la même question de façon différente pour comparer les résultats Eviter les réponses prévisibles •