AperoWeb 04/01/2016 - Bénédicte Schmitt Apprenez à faire évaluer votre produit par des utilisateurs Est-ce que votre produit sera adopté par les utilisateurs ? Est-ce que les utilisateurs seront ravis d’utiliser votre produit ?
AperoWeb 04/01/2016 - Bénédicte Schmitt
Apprenez à faire évaluer votre produit par des utilisateurs
Est-ce que votre produit sera adopté par les utilisateurs ? Est-ce que les utilisateurs seront ravis d’utiliser votre produit ?
AperoWeb 04/01/2016 - Bénédicte Schmitt
Est-ce que les utilisateurs apprécieront mon produit ?
Est-ce que les utilisateurs sauront utiliser mon produit ?
Est-ce que les utilisateurs vivront une expérience incroyable avec mon produit ?
2
AperoWeb 04/01/2016 - Bénédicte Schmitt
L’évaluation en UX
3
AperoWeb 04/01/2016 - Bénédicte Schmitt
Rappelons-nous ce qu’est l’UX !
UX = User eXperience soit expérience utilisateur
Définition selon la norme ISO 9241-210 : l’UX correspond “aux réponses et aux perceptions d’une personne qui résultent de l’usage ou de l’anticipation de l’usage d’un produit, d’un service ou d’un système”
4
AperoWeb 04/01/2016 - Bénédicte Schmitt
Quelle est la place de l’évaluation dans le process UX ?
5
AperoWeb 04/01/2016 - Bénédicte Schmitt
Les enjeux d’une évaluation
Les 3U : utile, utilisable et utilisé
Savoir si :● les fonctionnalités répondent
bien aux besoins exprimés ● les informations présentées
correspondent aux attentes et sont compréhensibles
Savoir si :● Efficacité : les utilisateurs
peuvent précisément réaliser leurs tâches
● Efficience : les utilisateurs peuvent rapidement accéder aux informations
● Satisfaction : les utilisateurs sont contents
Découvrir si :● les utilisateurs apprennent
sans difficulté comment utiliser le produit
● les utilisateurs utilisent fréquemment le produit
● les utilisateurs sont contents d’utiliser le produit
6
AperoWeb 04/01/2016 - Bénédicte Schmitt
Pourquoi réaliser une évaluation ?
➔ Valider un concept et/ou une solution➔ Recueillir les impressions des utilisateurs ➔ Déterminer des améliorations à apporter➔ Collecter des mesures ➔ Comparer différents produits ou différentes versions d’un
produit
⇒ Rencontrer les utilisateurs !
7
AperoWeb 04/01/2016 - Bénédicte Schmitt
Les 4 points clé d’une évaluation
1. Les objectifs de l’évaluation et la définition des résultats à recueillir
2. La disponibilité des utilisateurs et le choix des méthodes d’évaluation
3. La préparation de l’évaluation4. L’analyse des résultats de l’évaluation
8
AperoWeb 04/01/2016 - Bénédicte Schmitt
Les objectifs de l’évaluation et les résultats à recueillir
9
● Définir les objectifs de l’évaluation → savoir pourquoi l’évaluation doit être menée et fixer ses attentes○ Comparer une nouvelle version avec la version existante,
○ savoir si les différentes fonctionnalités sont comprises par les utilisateurs,
○ etc...
● Établir la liste de résultats à recueillir en fonction des objectifs de l’évaluation :○ Mesures quantitatives (temps mis pour réaliser la tâche, nombre d’
erreurs,...)
○ Mesures qualitatives (satisfaction de l’utilisateur, émotions ressenties,...)
AperoWeb 04/01/2016 - Bénédicte Schmitt
La disponibilité des utilisateurs et le choix des méthodes d’évaluation
● Si les utilisateurs sont disponibles :○ Questionnaires standardisés (AttrakDiff, UEQ, SUS,...) - mesures
qualitatives
○ Entretiens (libres, semi-directifs et directifs) - mesures qualitatives○ Focus group - mesures qualitatives○ Observations - mesures qualitatives et/ou quantitatives○ Tests utilisateurs - mesures qualitatives et/ou quantitatives
→ Méthodes conseillées :
○ En conception avancée ou sur un prototype○ Sur un produit existant
10
AperoWeb 04/01/2016 - Bénédicte Schmitt
La disponibilité des utilisateurs et le choix des méthodes d’évaluation
● Si les utilisateurs sont indisponibles :○ Evaluation par un expert d’après des heuristiques ou des
recommandations - mesures qualitatives
○ Inspection cognitive réalisée par un expert ou un groupe d’experts - mesures qualitatives
→ Méthodes conseillées :
○ En début de conception avant de rencontrer les utilisateurs ○ Sur un produit existant
11
AperoWeb 04/01/2016 - Bénédicte Schmitt
La préparation de l’évaluation
● Définir le plan de l’évaluation (questions, protocole d’expérimentation, grille d’audit,...)
● Si une méthode avec utilisateurs est sélectionnée :○ trouver les participants, un lieu et une (ou plusieurs) date(s),
○ s’assurer que les participants ont bien compris les objectifs de l’évaluation,
● Si une méthode sans utilisateur est sélectionnée :○ Faire valider les objectifs de l’évaluation par le client
12
AperoWeb 04/01/2016 - Bénédicte Schmitt
L’analyse des résultats de l’évaluation
● Confronter les problèmes rencontrés et les besoins des utilisateurs
● Si possible, réaliser des statistiques sur les mesures○ certaines mesures sont-elles statistiquement significatives ?
● Si des hypothèses ont été formulées : Valider (ou invalider) les hypothèses
● A l’issue de l’analyse : ○ Faire des propositions d’amélioration ○ Formuler de nouvelles problématiques à analyser
13
AperoWeb 04/01/2016 - Bénédicte Schmitt
Le test utilisateur : ce n’est pas magique !
14
AperoWeb 04/01/2016 - Bénédicte Schmitt
Qu’est-ce qu’un test utilisateur ?
Un test utilisateur :
● est l’évaluation d’un produit par des utilisateurs d’après un scénario ou des tâches définis
● qui permet de tester la validité des hypothèses formulées
… Mais pas de détecter des bugs
15
AperoWeb 04/01/2016 - Bénédicte Schmitt
Les différents types de tests utilisateur
● Tests utilisateur à distance ● Tests utilisateur de type guerilla● Tests utilisateur in vitro vs in vivo
○ in vitro : en laboratoire → permet de maîtriser le contexte
○ in vivo : en situation → permet de réaliser les tests en conditions réelles
16
AperoWeb 04/01/2016 - Bénédicte Schmitt
La construction du protocole d’expérimentation
1. Formuler les hypothèses de l’expérimentation2. Déterminer qui seront les participants3. Définir l’apparatus (matériel, configurations
requises,...)4. Déterminer la procédure de l’expérimentation (consigne et
tâches)5. Concevoir l’évaluation (variables indépendantes)6. Définir les mesures quantitatives et qualitatives
(variables dépendantes)
17
AperoWeb 04/01/2016 - Bénédicte Schmitt
Exemple d’une procédure pour un test utilisateur
1. Questionnaire démographique → Valider l’adéquation du participant avec le persona ou profil
2. Questionnaire pré-test
→ Connaître les attentes et l’état d’esprit du participant avant le test
3. Réalisation des tâches du test4. Questionnaire post-test
→ Recueillir les impressions du participant après le test18
AperoWeb 04/01/2016 - Bénédicte Schmitt
Quelques conseils sur la passation des tests utilisateur
● Enregistrez la trace des tâches réalisées par l’utilisateur et filmez-le si possible
● Observez l’utilisateur lorsqu’il réalise la tâche et notez ses réactions, ses paroles,...
● N'enchaînez pas les tests, faites une pause, respirez● Gardez en mémoire que ce n’est pas vous ou le concepteur
que l’utilisateur évalue (tout comme vous n’évaluez pas l’utilisateur mais le produit)
● Variez si possible les conditions ● Adaptez-vous !
19
AperoWeb 04/01/2016 - Bénédicte Schmitt
Quelques conseils plus généraux
● Faites des pré-tests avec 1 ou 2 utilisateurs “bêta”● Si vous n’avez pas beaucoup de temps, le minimum est d’
être clair(e) sur les objectifs et la procédure● Combinez plusieurs méthodes : tests + questionnaires,
tests + entretiens,...● Combinez mesures quantitatives et qualitatives● Essayer d’avoir un minimum de 5 utilisateurs
20
AperoWeb 04/01/2016 - Bénédicte Schmitt
En conclusion
21
AperoWeb 04/01/2016 - Bénédicte Schmitt
Que faut-il retenir ?
Pour réussir une évaluation :
● Déterminez avant tout les objectifs et les résultats attendus
● Sélectionnez la méthode d’évaluation adéquate● Et surtout prenez du plaisir à rencontrer les
utilisateurs !
22