Obtenir plus de soutiens à vos projets IA et Data avec une approche Test et Mesure structurée et crédible.
Retrouvez dès à présent l'intégralité du replay Retail & E-commerce 2023 en vidéo !
Souvent, face à leur Comex les équipes ont du mal à prouver la valeur et le succès d’un projet. Il s’agit tout d’abord de choisir le bon KPI pour mesurer, et de ne pas le modifier en cours de projet. De plus, la méthode de test doit être pertinente, cohérente, et statistiquement robuste pour tenir dans le temps. Enfin, il faut choisir une audience représentative et homogène pour faire les tests, et garantir une durée suffisante du test.
Fanjuan Shi souligne l’attention particulière à apporter aux biais : il faut les éliminer et les minimiser pour que le résultat ne soit pas lié à un effet aléatoire, et veiller à avoir suffisamment de volume d’échantillon, grâce à une estimation de la quantité nécessaire pour conclure le test. Si pendant cette phase d’estimation, on sait déjà qu’on atteindra pas le volume nécessaire ; dans ce cas, il faut s’adapter et changer la méthode du test.
Le choix de la méthodologie du test va être crucial pour répondre au mieux aux questions métiers, bien que parfois de contraintes et biais ne permettent pas toujours de faire des tests fiables : ainsi, on ne peut pas faire un A/B test dans un moteur de recherche, l’outil ne le permet pas. Il peut être judicieux d’utiliser la même méthodologie de test pour pouvoir faire un benchmark de décision et de résultats.
Enfin, il est essentiel de s’assurer qu’il y a une vraie relation causale entre le test réalisé et le résultat, et attendre suffisamment de temps pour qu’il y ait un résultat.
Grâce à cette méthode, les équipes sont en mesure de montrer à leur Comex différents éléments, qui peuvent être mis en perspective grâce à la data visualisation.
4 points pour vous aider à gagner la confiance du Comex au travers d’une Méthode Test & Mesure : S’assurer que le KPI choisi soit stable et précis, adopter une méthodologie robuste pour le test, suivre le test jusqu'au bout pour avoir un test statistiquement fort et utiliser les outils de data visualisation pour bien montrer que les éléments existent et sont solides
- Fanjuan Shi, Group Head of Data Strategy and Value Office (LVMH) et Membre du HUB Institute
Retrouvez dès à présent l'intégralité du replay Retail & E-commerce 2023 en vidéo !