L'A/B testing, c'est montrer deux versions à deux groupes et mesurer laquelle convertit mieux. Simple en théorie, plein de pièges en pratique. Voici comment t'en servir pour décider juste — pas pour te donner bonne conscience.
Quand l'A/B testing a du sens
Il faut du trafic. En dessous de ~1 000 conversions/mois sur l'élément testé, les résultats sont du bruit. Petit trafic ? Concentre-toi d'abord sur les frictions évidentes et l'audit qualitatif — pas sur des tests qui ne concluront jamais.
Quoi tester (par impact)
- Le titre / la promesse du hero — le plus fort levier.
- Le CTA : texte, couleur, position.
- La structure de la page : ordre des sections, longueur.
- Le formulaire : nombre de champs.
- Le pricing : présentation, ancrage.
On ne teste pas la couleur d'une icône secondaire. On teste ce qui touche la décision.
La règle des une variable à la fois
Si tu changes le titre ET le bouton ET l'image, tu ne sauras jamais ce qui a marché. Une hypothèse, une variable, un résultat lisible. (L'exception, le test multivarié, demande beaucoup plus de trafic.)
La significativité statistique
Un écart de 52 % vs 48 % sur 100 visiteurs ne veut rien dire. Il faut un échantillon suffisant et un seuil de confiance (souvent 95 %). La plupart des outils le calculent — respecte-le, ne coupe pas le test parce que ça t'arrange.
Arrêter un test dès qu'il dit ce qu'on voulait entendre, c'est de la confirmation, pas de la science.
Les 5 erreurs qui faussent tout
- Arrêter trop tôt (dès que la courbe penche du bon côté).
- Tester sans hypothèse claire ("on verra bien").
- Trop de variables en même temps.
- Ignorer la saisonnalité (un test sur une semaine de soldes ment).
- Oublier le mobile : segmenter desktop/mobile révèle souvent des résultats opposés.
Et si tu n'as pas le trafic ?
La majorité des PME n'ont pas le volume pour de l'A/B testing fiable. Bonne nouvelle : à ce stade, l'audit UX qualitatif (tests utilisateurs, analyse heuristique) donne plus d'insights, plus vite, pour moins cher. Le test quantitatif vient après, quand le trafic suit.
Tu veux savoir si tes pages valent le coup d'être testées — ou s'il faut d'abord corriger l'évident ? On regarde ça dans un audit gratuit.