Tests utilisateur en équipe, et après ?

Léa Mendes Da Silva, Guillaume Bruère

Atelier ECV - Méthodologie

Plan

1. Présentation de PrestaShop

2. L’atelier “Lean Feedback”

3. A vous de jouer !

4. Retour d’expérience

Plan

1. Présentation de PrestaShop

2. L’atelier “Lean Feedback”

3. A vous de jouer !

4. Retour d’expérience

PrestaShop : qu’est-ce que c’est ?

1. Présentation

de PrestaShop

2. L’atelier Lean Feedback

3. A vous de jouer !

4. Retour d’expérience

Un logiciel e-commerce qui permet à chacun de créer sa boutique en ligne gratuitement.

Front-OfficeBack-OfficeMarchand Client

Plus de 250 000 boutiques dans le monde entier fonctionnent avec PrestaShop.

Qui sommes-nous ?

1. Présentation

de PrestaShop

2. L’atelier Lean Feedback

3. A vous de jouer !

4. Retour d’expérience

Léa Mendes Da Silva

Product Designer

Guillaume BruèreProductManager

Process produit

1. Présentation

de PrestaShop

2. L’atelier Lean Feedback

3. A vous de jouer !

4. Retour d’expérience

Discovery

PM + Designer

Identify a problem

Solution

PM + Designer + Dev

Build a solution

Development

PM + Designer + Dev

Implement the solution

Les user tests chez PrestaShop

Pourquoi tout le monde y participe ?C’est l’occasion pour chacun de voir directement comment les utilisateurs réagissent à notre travail et de voir là où nos efforts ont payé (ou pas!).

1. Présentation

de PrestaShop

2. L’atelier Lean Feedback

3. A vous de jouer !

4. Retour d’expérience

Objectifs- Tester les hypothèses les +

risquées via des prototypes- Identifier des problèmes- Identifier ce qui marche bien

Notre méthodologie de user tests

Préparation Tests(4 ou 5 testeurs)

Lean Feedback

1 2 3

Le PM et le designer décident de ce qui doit

être testé

Screening et recrutement des testeurs

Ecriture du script

1 team PrestaShop différente pour chaque

testeur :1 guide + 1 scribe

20’ de test suivant le script

10’ de discussion ouverte

Mise au propre des notes

Toutes les teams se retrouvent pour une session de débrief

Tri des feedbacks

Priorisation des tâches pour le prochain sprint

1. Présentation

de PrestaShop

2. L’atelier Lean Feedback

3. A vous de jouer !

4. Retour d’expérience

Plan

1. Présentation de PrestaShop

2. L’atelier “Lean Feedback”

3. A vous de jouer !

4. Retour d’expérience

Les origines de l’atelier Lean Feedback

“Comment exploiter les feedbacks des tests ?”

“Comment centraliser et synthétiser les retours lorsque de nombreuses personnes différentes (jusqu’à 10) ont mené les tests ?”

“Comment prioriser les tâches à mener ensuite ?”

1. Présentation de PrestaShop

2. L’atelier Lean

Feedback

3. A vous de jouer !

4. Retour d’expérience

Déroulé

J-1 ou J-2 : les tests

Plusieurs binômes mènent les tests en respectant un script préparé à l’avance.

1. Présentation de PrestaShop

2. L’atelier Lean

Feedback

3. A vous de jouer !

4. Retour d’expérience

Chaque test est filmé (écran + webcam), en plus de la prise de notes classique.

Déroulé

Atelier : étape 1, tri des feedbacks

1. Présentation de PrestaShop

2. L’atelier Lean

Feedback

3. A vous de jouer !

4. Retour d’expérience

UX ProblemsProblèmes d’ergonomie, d’interface, de wording

BugsProblèmes techniques

Feature RequestsDes fonctionnalités correspondant à des besoins clairement identifiés

“Aha” momentsCe qui donne sa valeur

ajoutée au produit

Déroulé

Atelier : étape 1, tri des feedbacks

1. Présentation de PrestaShop

2. L’atelier Lean

Feedback

3. A vous de jouer !

4. Retour d’expérience

Pas compris

les ongletsPas compris

les onglets

Dropdown marche

pas

Ratings des

modulesTri super

facileTemps de chargeme

nt

Aucun CTA

visible

seachbarSearch-bar

UX Problems Bugs

Feature Requests “Aha” moments

Suggestions

adaptées

+1

+1

Déroulé

Atelier : étape 2, priorisation

1. Présentation de PrestaShop

2. L’atelier Lean

Feedback

3. A vous de jouer !

4. Retour d’expérience

To Do

Les points à résoudre en priorité pour la prochaine

itération

To Check

Les éléments à creuser lors des prochains tests

ou à ne pas oublier

Déroulé

Atelier : étape 2, priorisation

1. Présentation de PrestaShop

2. L’atelier Lean

Feedback

3. A vous de jouer !

4. Retour d’expérience

To Do To Check

seachbarSearch-bar

+1

Pas compris

les ongletsPas compris

les onglets

Dropdown marche

pas

Aucun CTA

visible

Suggestions

adaptées

+1

Plan

1. Présentation de PrestaShop

2. L’atelier “Lean Feedback”

3. A vous de jouer !

4. Retour d’expérience

À vous de jouer !

Test du thème “Classic”

On vous a préparé…

1 script

6 testeurs

6 vidéos (10’ env)

Objectif : valider le thème graphique par défaut de la version 1.7

1. Présentation de PrestaShop

2. L’atelier Lean Feedback

3. A vous de

jouer !

4. Retour d’expérience

http://bit.ly/2ns4Dq6

Déroulé de l’atelier

5’ règles du jeu

20’ visionnage des tests, prise denotes et préparation despost-its

20’ mise en commun des feedbacks

10’ choix des priorités

1. Présentation de PrestaShop

2. L’atelier Lean Feedback

3. A vous de

jouer !

4. Retour d’expérience

Règles du jeu

Règle n°1On ne parle pas de solutions.

Règle n°2On ne parle pas de solutions !

Règle bonusOn ne parle pas du fight club.

1. Présentation de PrestaShop

2. L’atelier Lean Feedback

3. A vous de

jouer !

4. Retour d’expérience

Les équipes

Team Nicolashttp://bit.ly/PSUser1

Team Emmanuelhttp://bit.ly/PSUser2

Team Maximehttp://bit.ly/PSUser3

1. Présentation de PrestaShop

2. L’atelier Lean Feedback

3. A vous de

jouer !

4. Retour d’expérience

Team Clairehttp://bit.ly/PSUser4

Team Morganehttp://bit.ly/PSUser5

Team Fionahttp://bit.ly/PSUser6

20’Visionnage et préparation des notes

1. Présentation de PrestaShop

2. L’atelier Lean Feedback

3. A vous de

jouer !

4. Retour d’expérience

20’Mise en commun

1. Présentation de PrestaShop

2. L’atelier Lean Feedback

3. A vous de

jouer !

4. Retour d’expérience

Déroulé

Atelier : étape 1, tri des feedbacks

UX Problems Bugs

Feature Requests “Aha” moments

1. Présentation de PrestaShop

2. L’atelier Lean Feedback

3. A vous de

jouer !

4. Retour d’expérience

10’Priorisation

1. Présentation de PrestaShop

2. L’atelier Lean Feedback

3. A vous de

jouer !

4. Retour d’expérience

Déroulé

Atelier : étape 2, priorisation

To Do To Check1. Présentation de PrestaShop

2. L’atelier Lean Feedback

3. A vous de

jouer !

4. Retour d’expérience

Plan

1. Présentation de PrestaShop

2. L’atelier “Lean Feedback”

3. A vous de jouer !

4. Retour d’expérience

1. Présentation de PrestaShop

2. L’atelier Lean Feedback

3. A vous de jouer !

4. Retour

d’expérience

Retour d’expérience

Ce qui marche bien :

- Motivation des équipes (dev, QA…)

- Fin des conflits- Des dizaines de key

learnings- Une opportunité de feature

identifiée- Une vision produit plus claire

tests réalisés depuis février 2016+50Les pièges à éviter :

- Tester deux versions différentes en même temps

- Trop attendre pour débriefer- Les testeurs “consultants”- Trop ou trop peu de testeurs- Dévier du script- Tenter de justifier ses choix

1. Présentation de PrestaShop

2. L’atelier Lean Feedback

3. A vous de jouer !

4. Retour

d’expérience

Pour aller plus loin...

The Mom TestRob FitzpatrickLes pièges à éviter /

questions à poser

Running LeanAsh MauryaComment mener un entretien

ou test

Lean UXJeff Gothlef & Josh SeidenLa démarche globale

Design with your earsArthur BodolecPréparer son script

© “aha” moment

InspiredMarty CaganLa méthode des tests le

binôme PM/designer

Questions / réponses

1. Présentation de PrestaShop

2. L’atelier Lean Feedback

3. A vous de jouer !

4. Retour

d’expérience

@Leamendesign@guillaumebruere

lea@prestashop.comguillaume.bruere@prestashop.com

fr.linkedin.com/in/leadesignfr.linkedin.com/in/guillaumebruere

1. Présentation de PrestaShop

2. L’atelier Lean Feedback

3. A vous de jouer !

4. Retour

d’expérience

Contacts