Le protocole expérimental ou plan d'expérience est le document qui assure la traçabilité d'une démarche de recherche. Les études utilisateurs s'appuient sur la méthode expérimental qui vise à répondre à des questions de recherche ou à valider certaines hypothèses en s'appuyant sur des méthodes adaptées aux objectifs. Le protocole expérimental regroupe la description des conditions, le déroulement et le dispositif mis en place pour collecter des données lors d'une expérimentation ou d'un test pour répondre à ces questions.
01
L'acculturation
La première étape lorsque l'on envisage de lancer une étude UX consiste à rassembler les données et connaissances (rapidement accessibles) sur le sujet afin d'amorcer la réflexion.
02
Les questions de recherche
En concertation avec les équipes projet, il s'agit d'abord de définir ce qui entre et ce qui n'entre pas dans le périmètre d'une étude.
03
Le dispositif de collecte
Une fois les questions de recherches connues, nous pouvons déterminer les méthodes à privilégier. Lors de cette étape, il est primordial de prendre en compte les contraintes de temps, le budget, mais aussi d'accès aux données (et parfois aux utilisateurs eux mêmes). Le protocole décrit également les données qui seront collectées et les analyses qui sont envisagées.
04
Les supports de collecte
On sait ce que l'on cherche et comment on va le chercher. Il reste à définir plus finement le déroulé d'une session de collecte. A cette étape, nous produisons les supports de collecte tels qu'un guide d'entretien, une grille d'observation, un scénario de test utilisateur, etc.
Dès que l’on sollicite un utilisateur pour relever des informations sur ses pratiques, on se doit d’être totalement transparent avec lui. D’abord, on s’assure de respecter le principe de consentement éclairé. Cela consiste à bien expliquer les objectifs de la sollicitation et de confirmer que l’utilisateur est volontaire pour participer. Ensuite, on a la responsabilité de protéger les données personnelles que l’on peut collecter. On s’appuie pour cela sur notre charte RGPD, un document de traitement des données spécifique à chaque étude, une procédure d’anonymisation et une gestion de l’archivage des résultats.
Un protocole expérimental est le document qui décrit de façon précise et reproductible comment une étude va être conduite : objectifs, hypothèses, population cible, méthode de recrutement, conditions d'observation, stimuli présentés, métriques collectées et plan d'analyse. Il garantit que plusieurs chercheurs peuvent mener la même étude de façon cohérente et que les résultats sont comparables dans le temps.
Sans protocole formalisé, chaque session de test peut dériver subtilement : des questions légèrement différentes, un ordre de présentation qui change, des stimuli qui varient. Ces variations rendent les résultats incomparables entre sessions et entre participants. Le protocole est aussi utile pour obtenir des validations éthiques (nécessaires dans certains contextes académiques ou médicaux) et pour documenter l'étude pour des reproductions futures.
Un protocole complet comprend : la question de recherche et les hypothèses, la description des participants (critères d'inclusion et d'exclusion), la méthode de recrutement, le design de l'étude (nombre de conditions, ordre de présentation), le matériel et les stimuli utilisés, la procédure session par session, les métriques et leur mode de collecte, et le plan d'analyse prévu. Dans les études critiques, on y ajoute une analyse des biais potentiels et les mesures pour les contrôler.
Non. Le test utilisateur est une méthode. Le protocole expérimental est la documentation qui encadre n'importe quelle méthode d'étude, y compris les tests utilisateurs. Un test utilisateur sans protocole formalisé reste un test utilisateur, mais ses résultats seront moins fiables et moins comparables. La formalisation du protocole est particulièrement importante pour les études comparatives (A/B, avant/après) où la rigueur méthodologique conditionne la validité des conclusions.
En distinguant ce qui doit être rigoureux (les hypothèses, les métriques, les critères de recrutement) de ce qui peut être allégé (la documentation formelle). Un « protocole léger » d'une page avec les questions clés, les tâches et les métriques suffit pour la plupart des tests utilisateurs en sprint. La rigueur n'exige pas de la lourdeur : elle exige de la clarté sur ce qu'on mesure et pourquoi.
Les tests utilisateurs consistent à faire évaluer l'ergonomie de votre produit ou service à des utilisateurs cibles. En fonction des objectifs, différentes approches sont possibles.
En savoir plus sur Test utilisateurTout le monde parle experience utilisateur, design de service, ergonomie...
C'est pas très clair, mais vous aimeriez bien découvrir tout ca ou progresser.
