Plan : Travaux Dirigés Notation du module Conception et Évaluation

M. Beaudouin-Lafon, Université Paris-Sud - Cours de W. E. Mackay (INRIA)
Conception et Évaluation des Interfaces Homme-Machine
1
2
Plan : Cours
Conception et Évaluation des
Interfaces Homme-Machine
•
•
•
•
•
•
•
•
•
•
•
•
•
•
•
•
•
•
•
•
•
•
•
•
•
•
•
•
•
•
•
•
•
•
•
•
Michel Beaudouin-Lafon
Université
Université Paris-Sud
Paris-Sud
Cours
Cours de
de Wendy
Wendy E.
E. Mackay
Mackay (( I.N.R.I.A.)
I.N.R.I.A.)
3
Plan : Travaux Dirigés
•
•
•
•
•
•
•
•
•
•
•
•
•
•
•
•
•
•
•
•
•
1 : Observation des utilisateurs
2 : Analyse de donnés qualitatives
3 : Brainstorming
4 : Prototypage
5 : Expérimentation
6 : Evaluation qualitative
7 : Présentation finale
1 : Présentation générale
2 : Méthodes qualitatives
3 : Géneration des idées
4 : Prototypage
5 : Méthodes quantitatives
4
Notation du module
•
•
•
•
•
•
•
•
•
•
•
•
•
•
•
•
•
•
•
•
•
Projet en groupe
3-4
3-4 personnes
personnes par
par groupe
groupe
Vidéo présentation de 15 minutes
Version
Version révisée
révisée du
du projet
projet
Rapport de 5 pages pour la direction
Résumé
Résumé
Justification
Justification des
des choix
choix de
de conception
conception
M. Beaudouin-Lafon, Université Paris-Sud - Cours de W. E. Mackay (INRIA)
Conception et Évaluation des Interfaces Homme-Machine
1
2
Interaction Homme-Machine
•
•
•
•
•
•
•
•
•
•
•
•
•
•
•
•
•
•
•
•
•
Fonctionnalité :
Informatique
Tâches :
Ergonomie
Interaction :
Aujourd'hui
•
•
•
•
•
•
•
•
•
•
•
•
•
•
•
•
•
•
•
•
•
IHM
3
Pourquoi ce cours ?
•
•
•
•
•
•
•
•
•
•
•
•
•
•
•
•
•
•
•
•
•
Les ingénieurs savent
Comment
Comment trouver
trouver la
la solution
solution d'un
d'un problème
problème
Mais
Mais ne
ne se
se posent
posent jamais
jamais la
la question
question ...
...
Est-ce
Est-ce que
que c'est
c'est une
une bonne
bonne question
question ??
La conception participative :
Redéfinition
Redéfinition du
du problème
problème
et
et Résolution
Résolution du
du problème
problème
L'Interaction Homme-Machine est un
domaine pluridisciplinaire
Sciences
Sciences de
de la
la nature
nature &
& "Design"
"Design"
Méthodes d'évaluation qualitatives
Introspection
Introspection
Observation
Observation directe
directe
Interviews
Interviews
Questionnaires
Questionnaires
4
Pourquoi ces T.D.'s ?
•
•
•
•
•
•
•
•
•
•
•
•
•
•
•
•
•
•
•
•
•
Les ingénieurs savent
Comment
Comment faire
faire des
des abstractions
abstractions
Mais
Mais pas
pas comment
comment concevoir
concevoir ::
les
les détails
détails de
de l'interaction
l'interaction homme-machine
homme-machine
La conception participative :
Comprendre
Comprendre l'interaction
l'interaction dans
dans un
un contexte
contexte réel
réel
Intégrer
Intégrer le
le contexte
contexte dans
dans le
le système
système
M. Beaudouin-Lafon, Université Paris-Sud - Cours de W. E. Mackay (INRIA)
Conception et Évaluation des Interfaces Homme-Machine
1
2
Interaction Homme-Machine
•
•
•
•
•
•
•
•
•
•
•
•
•
•
•
•
•
•
•
•
•
Relations de l'IHM avec
les Sciences et le Design
•
•
•
•
•
•
•
•
•
•
•
•
•
•
•
•
•
•
•
•
•
Pluri-disciplinaire
Fait
Fait appel
appel àà de
de nombreuses
nombreuses sciences
sciences humaines
humaines et
et
disciplines
disciplines de
de design
design
Emprunte
Emprunte des
des méthodes
méthodes et
et en
en crée
crée de
de nouvelles
nouvelles
Pas une science de la nature !
Phénomènes
Phénomènes artificiels,
artificiels, pas
pas naturels
naturels
A la fois théorique et appliqué
3
IHM & Sciences humaines
•
•
•
•
•
•
•
•
•
•
•
•
•
•
•
•
•
•
•
•
•
Psychologie
Cognition
Cognition
Apprentissage
Apprentissage
Perception
Perception
Ecologie
Ecologie
Sociologie
Attitudes
Attitudes
Communication
Communication
Anthropologie
Ethnographie
Ethnographie
Domaines appliqués
Ergonomie
Ergonomie
Sciences
Sciences de
de gestion
gestion
Epistémologie
Sciences de la Nature
Psychologie
Sociologie
Anthropologie
IHM
Design
Industriel
Arts graphiques
Typographie
Art & Design
4
Méthodes d'investigation
•
•
•
•
•
•
•
•
•
•
•
•
•
•
•
•
•
•
•
•
•
Psychologie
Expérience
Expérience contrôlée
contrôlée
Quantitative
Quantitative
Sociologie
Quasi-Expériences
Quasi-Expériences
Questionnaires
Questionnaires
Quantitatifs
Quantitatifs &
&
Interviews
Interviews
Qualitatifs
Qualitatifs
Anthropologie
Etudes
Etudes sur
sur le
le terrain
terrain
Qualitatives
Qualitatives
M. Beaudouin-Lafon, Université Paris-Sud - Cours de W. E. Mackay (INRIA)
Conception et Évaluation des Interfaces Homme-Machine
1
2
Approches concurrentes
•
•
•
•
•
•
•
•
•
•
•
•
•
•
•
•
•
•
•
•
•
Psychologie
Expériences
•
•
•
Hypothèse
•
Hypothèse
•
Théorie
Théorie
•
•
•
•
•
•
•
Observation
Observation •
•
•
•
•
•
•
•
•
Psychologie cognitive
"Plans"
"Plans" et
et analyse
analyse de
de tâches
tâches
Très
Très quantitatif
quantitatif
Ethnographie
"Situated
"Situated Action"
Action" -- Action
Action en
en situation
situation
Très
Très qualitatif
qualitatif
3
Anthropologie
Etudes de terrain
•
•
Cadre
Cadre de
de travail
travail
•
Cadre
modifié
•
Cadre de
de travail
travail
modifié
•
Théorie
Théorie
•
•
•
•
•
•
•
Observation
Observation •
•
•
Observation
Observation
Observation
Observation
•
générale
spécifique
générale
spécifique
•
•
•
•
•
Nouvelle
Nouvelle
hypothèse
hypothèse
Expérience
Expérience
4
IHM & Design
•
•
•
•
•
•
•
•
•
•
•
•
•
•
•
•
•
•
•
•
•
Arts graphiques
Film et Vidéo
Typographie
Design industriel
Architecture
etc.
Nouvelles
Nouvelles
expérience
expérience
M. Beaudouin-Lafon, Université Paris-Sud - Cours de W. E. Mackay (INRIA)
Conception et Évaluation des Interfaces Homme-Machine
1
2
Processus de conception :
Ingenieurs
•
•
•
•
•
•
•
•
•
•
•
•
•
•
•
•
•
•
•
•
•
Interaction Homme-Machine
•
•
•
•
•
•
•
•
•
•
•
•
•
•
•
•
•
•
•
•
•
Cycle de vie du produit
Modèle
Modèle en
en cascade
cascade
Modèle
Modèle en
en V
V
Modèle
Modèle de
de la
la spirale
spirale
Conception itérative
Evaluation
Evaluation indépendante
indépendante
Conception
Conception et
et évaluation
évaluation intégrées
intégrées
3
Interaction Homme-Machine
Théorie
Théorie
Interaction
Interaction
avec
avec un
un
artefact
artefact
Monde
Monde réel
réel
•
•
•
•
•
•
•
•
•
•
•
•
•
•
•
•
•
•
•
•
•
Modèle
Modèle
Observation
Observation
Evaluation
Evaluation
Études
Études qualitatives
qualitatives &
& quantitatives
quantitatives
Design : Création indépendante
Architectures
Architectures &
& Guides
Guides de
de style
style
IHM :
Conception et évaluation
intégrées
Conception
Conception itérative
itérative
Conception
Conception participative
participative
Prototypage
Prototypage avec
avec les
les utilisateurs
utilisateurs
4
Triangulation
Nouveau
Nouveau
modèle
modèle
Simulation
Simulation
Science : Evaluation indépendante
Prototype
Prototype
•
•
•
•
•
•
•
•
•
•
•
•
•
•
•
•
•
•
•
•
•
Il est difficile d'être sûr
Utiliser différentes paramétrisations
Faire
Faire varier
varier le
le dispositif
dispositif expérimental
expérimental
Utiliser différentes méthodes
Expérience
Expérience
Etude
Etude de
de cas
cas
Interviews
Interviews
M. Beaudouin-Lafon, Université Paris-Sud - Cours de W. E. Mackay (INRIA)
Conception et Évaluation des Interfaces Homme-Machine
1
2
Méthodes qualitatives
•
•
•
•
•
•
•
•
•
•
•
•
•
•
•
•
•
•
•
•
•
Comprendre les utilisateurs
•
•
•
•
•
•
•
•
•
•
•
•
•
•
•
•
•
•
•
•
•
Produisent des descriptions
Peuvent être subjectives
N'essaient pas forcément de
supprimer le biais de l'observateur
Peuvent ne pas être reproductibles
Peuvent ne pas être généralisables
3
Introspection
•
•
•
•
•
•
•
•
•
•
•
•
•
•
•
•
•
•
•
•
•
Le concepteur essaie le système
Est-ce
Est-ce que
que le
le système
système lui
lui convient
convient ??
Le plus fréquent
Le plus susceptible d'erreurs
Ce que l'on peut faire systématiquement :
Evaluation
Evaluation heuristique
heuristique
"Design
"Design Walkthroughs"
Walkthroughs"
Introspection
Observation directe
Interviews
Questionnaires
4
Observation directe
•
•
•
•
•
•
•
•
•
•
•
•
•
•
•
•
•
•
•
•
•
Observer et enregistrer les utilisateurs se
servant du système
En laboratoire ou sur le terrain
Important pour identifier les gros problèmes
La validité dépend des détails
Utiliser au moins 2 observateurs pour
enregistrer indépendamment le
comportement
Etablir
Etablir le
le degré
degré de
de concordance
concordance (5%)
(5%)
M. Beaudouin-Lafon, Université Paris-Sud - Cours de W. E. Mackay (INRIA)
Conception et Évaluation des Interfaces Homme-Machine
1
2
Observation directe
Observation directe
Etude d'utilisabilité
•
•
• Définir une mission spécifique
•
Exécuter
Exécuter une
une série
série de
de tâches
tâches
•
•
Résoudre
Résoudre un
un problème
problème
•
Dérouler
•
Dérouler un
un scénario
scénario
•
• Fournir des instructions standard
•
• Choisir 2 utilisateurs ou plus
•
parmi
parmi le
le public
public visé
visé
•
•
• Choisir le cadre du test
•
en
en laboratoire
laboratoire ou
ou sur
sur le
le terrain
terrain
•
•
•
•
•
•
•
•
•
•
•
•
•
•
•
•
•
•
•
•
•
•
•
•
•
3
Observation directe
•
•
•
•
•
•
•
•
•
•
•
•
•
•
•
•
•
•
•
•
•
Enregistrement
Papier:
Papier: bon
bon marché,
marché, peu
peu de
de détails,
détails, incomplet
incomplet
Audio:
Audio: parfois
parfois utile,
utile, difficile
difficile àà analyser
analyser
Vidéo:
Vidéo: le
le plus
plus détaillé,
détaillé, intrusif
intrusif ?,
?,
difficile
difficile àà analyser,
analyser, analyse
analyse rétrospective
rétrospective
Actions
Actions sur
sur le
le clavier
clavier et
et la
la souris
souris
Codage
Définir
Définir des
des catégories
catégories
Evénements
Evénements discrets
discrets ou
ou continus
continus
Mesurer
Mesurer le
le degré
degré de
de concordance
concordance
Décider ce que l'on veut mesurer
Temps
Temps d'exécution,
d'exécution, erreurs
erreurs
Demander aux utilisisateurs d'effectuer les
tâches
Observation
Observation simple
simple
Expliquer
Expliquer àà haute
haute voix
voix
Apprentissage
Apprentissage coopératif
coopératif ou
ou co-découverte
co-découverte
Combiner avec des interviews ou des
questionnaires
4
Interviews
•
•
•
•
•
•
•
•
•
•
•
•
•
•
•
•
•
•
•
•
•
Buts :
Obtenir
Obtenir l'opinion
l'opinion de
de l'utilisateur
l'utilisateur sur
sur le
le système
système
Identifier
Identifier les
les besoins
besoins et
et les
les tâches
tâches de
de l'utilisateur
l'utilisateur
Suppositions :
Les
Les opinions
opinions sont
sont subjectives
subjectives
Les
Les utilisateurs
utilisateurs rationalisent
rationalisent souvent
souvent
les
les événements
événements
M. Beaudouin-Lafon, Université Paris-Sud - Cours de W. E. Mackay (INRIA)
Conception et Évaluation des Interfaces Homme-Machine
1
2
Concevoir un interview
•
•
•
•
•
•
•
•
•
•
•
•
•
•
•
•
•
•
•
•
•
Information Lens
•
•
•
•
•
•
•
•
•
•
•
•
•
•
•
•
•
•
•
•
•
Questions dirigées
Mêmes
Mêmes questions,
questions, même
même format
format pour
pour tout
tout le
le monde
monde
Ajouter
Ajouter des
des questions
questions et
et re-interroger
re-interroger les
les sujets
sujets
Technique de l'incident critique
Interroger
Interroger àà propos
propos d'un
d'un événement
événement marquant
marquant récent
récent
(la
(la semaine
semaine dernière)
dernière)
Généraliser
Généraliser àà partir
partir d'un
d'un cas
cas particulier
particulier
Questions ouvertes
Permettre
Permettre aux
aux utilisateurs
utilisateurs d'expliquer
d'expliquer ce
ce qu'ils
qu'ils font
font
àà leur
leur manière
manière
3
Exemple : Information Lens
Questions dirigées
•
• 1. Combien de messages avez-vous reçu
•
•
aujourd'hui ?
•
• 2. Est-ce une journée typique ? sinon
•
expliquez pourquoi.
•
• 3. Vous lisez votre courrier tous les combien ?
•
• 4. Lisez-vous tout votre courrier ?
•
• 5. Quel est le pourcentage de messages que
•
vous voudriez n'avoir jamais vu ?
•
•
• 6. Combien de règles de filtrage avez-vous ?
•
• 7. Est-ce que l'une d'elles a été utilisée quand
•
vous avez lu votre courrier ce matin ?
•
Filtrage du courrier électronique
(Malone,
(Malone, 1986)
1986)
Etude de 2 ans à Xerox PARC
(Mackay,
(Mackay, 1989)
1989)
Les utilisateurs ont changé leur façon de
gérer le courrier
Les utilisateurs ont changé le modèle des
concepteurs du système
4
Exemple : Information Lens
Technique de l'incident critique
•
•
• 1. Vous souvenez-vous avoir, la semaine
•
dernière, cherché un ancien message ?
•
•
Décrivez ce que vous avez fait pour le
•
trouver.
•
•
• 2. Vous souvenez-vous avoir eu besoin,
•
la semaine dernière, d'une information
•
technique ? Décrivez ce que vous avez fait
•
•
pour la trouver.
•
• 3. Vous souvenez-vous si, la semaine
•
dernière, l'une de vos règles de filtrage
•
•
n'a pas fonctionné comme vous vous y
•
attendiez ? Qu'avez-vous fait ?
•
M. Beaudouin-Lafon, Université Paris-Sud - Cours de W. E. Mackay (INRIA)
Conception et Évaluation des Interfaces Homme-Machine
1
2
Exemple : Information Lens
Questionnaires
Questions ouvertes
•
•
• 1. Décrivez comment vous utilisez
•
la messagerie.
•
•
• 2. Descrivez comment vous classez
•
vos messages.
•
• 3. Quand préférez vous utiliser le courrier
•
électronique ? le téléphone ?
•
•
une conversation face-à-face ?
•
• 4. L'utilisation de Information Lens
•
a-t-il changé la façon dont vous
•
•
communiquez avec vos collègues ?
•
•
•
•
•
•
•
•
•
•
•
•
•
•
•
•
•
•
•
•
•
•
•
•
3
Concevoir un questionnaire
•
•
•
•
•
•
•
•
•
•
•
•
•
•
•
•
•
•
•
•
•
Quelle information recherchez-vous ?
Demander
Demander seulement
seulement ce
ce qui
qui est
est pertinent
pertinent
Poser
Poser des
des questions
questions appropriées
appropriées
Qui est le public ?
50
50 -- 1000
1000 personnes
personnes
Comment l'envoyer et le récupérer ?
En
En ligne
ligne ?? Par
Par courrier
courrier ??
Comment analyser les résultats ?
Les
Les questions
questions déterminent
déterminent les
les statistiques
statistiques
But :
Résumé
Résumé utile
utile des
des avis
avis de
de nombreux
nombreux utilisateurs
utilisateurs
Suppositions :
On
On teste
teste quelque
quelque chose
chose de
de réel
réel
Les
Les utilisateur
utilisateur répondent
répondent honnêtement
honnêtement
Les
Les questions
questions concernent
concernent le
le phénomène
phénomène
auquel
auquel on
on s'intéresse
s'intéresse
4
Styles de questions
•
•
•
•
•
•
•
•
•
•
•
•
•
•
•
•
•
•
•
•
•
Informations générales
Depuis
Depuis combien
combien d'années
d'années utilisez-vous
utilisez-vous le
le courrier
courrier
électronique
électronique ??
Questions ouvertes
Décrivez
Décrivez comment
comment vous
vous utiliser
utiliser le
le courrier
courrier électronique
électronique ??
Questions dirigées
Combien
Combien de
de messages
messages avez-vous
avez-vous reçu
reçu aujourd'hui
aujourd'hui ??
Choix multiple
J'utilise
J'utilise la
la fonction
fonction de
de destruction
destruction de
de message
message
oo souvent
souvent oo parfois
parfois oo rarement
rarement oo jamais
jamais
M. Beaudouin-Lafon, Université Paris-Sud - Cours de W. E. Mackay (INRIA)
Conception et Évaluation des Interfaces Homme-Machine
1
2
Styles de questions
•
•
•
•
•
•
•
•
•
•
•
•
•
•
•
•
•
•
•
•
•
Principes de conception
des questions
•
•
•
•
•
•
•
•
•
•
•
•
•
•
•
•
•
•
•
•
•
Scalaire
Je
Je peux
peux facilement
facilement gérer
gérer mon
mon courrier
courrier
Pas
Pas d'accord
d'accord
-2
-2
-1
-1
00
11
D'accord
D'accord
22
Classement
Classer
Classer les
les fonctions
fonctions suivantes
suivantes par
par ordre
ordre d'utilité
d'utilité ::
___
___ Copie
Copie aveugle
aveugle
___
___ Copie
Copie automatique
automatique àà une
une liste
liste de
de distribution
distribution
___
___ Copie
Copie automatique
automatique àà moi-même
moi-même
3
4
Technique de l'Incident Critique
•
•
•
•
•
•
•
•
•
•
•
•
•
•
•
•
•
•
•
•
•
But
Générer
Générer des
des exemples
exemples spécifiques
spécifiques de
de problèmes
problèmes
rencontrés
rencontrés par
par les
les utilisateurs
utilisateurs
Procédure
Interviewer
Interviewer un
un utilisateur
utilisateur dans
dans son
son environnement
environnement
de
de travail
travail
Lui
Lui demander
demander de
de se
se souvenir
souvenir d'un
d'un problème
problème particulier
particulier
Donner
Donner une
une limite
limite de
de temps
temps -en
en général
général la
la semaine
semaine dernière
dernière
Demander
Demander àà l'utilisateur
l'utilisateur de
de décrire
décrire chaque
chaque incident
incident
en
en détail
détail
Demander
Demander àà l'utilisateur
l'utilisateur ce
ce qui
qui est
est habituel
habituel et
et
ce
ce qui
qui ne
ne l'est
l'est pas
pas dans
dans l'incident
l'incident
•
•
•
•
•
•
•
•
•
•
•
•
•
•
•
•
•
•
•
•
•
•
•
Structure parallèle des phrases
Ordre cohérent : positif vers négatif
•
Zéro est soit une réponse moyenne
soit "je ne sais pas"
•
•
Penser à ajouter un degré de confiance
Poser plusieurs fois la même question de
façon différente pour comparer les résultats
Eviter les réponses prévisibles
•