Guides

Un test A/B doit commencer par la décision à prendre

Pour qui : Petite équipe qui compare deux versions.

2026-11-06 ; documentation primaire lue ; aucun logiciel testé.

Notre avis

Nous testerions une question à la fois et garderions le résultat comme un indice contextualisé. Deux variantes et un badge gagnant ne prouvent pas que la meilleure façon de parler à tous les lecteurs est trouvée.

Dans l’ordre

  1. Question précise
  2. Mesure adaptée
  3. Règle de décision avant envoi

Pourquoi

  • La mesure doit correspondre à la question testée.
  • Une différence sur quelques interactions ne devient pas une règle pour tout le public.

Ce qui change le choix

Une grande audience et un protocole statistique adapté permettent une conclusion plus forte, avec ses hypothèses et limites explicites.

Objet et contenu ne demandent pas la même preuve

Mailchimp recommande le clic plutôt que l’ouverture pour départager un test de contenu, puisque l’ouverture précède sa lecture. Cette recommandation ne rend pas tout clic humain et ne suffit pas à une preuve statistique. Si vous testez un objet, le sujet est encore différent : écrivez le comportement que vous voulez améliorer, pas seulement le chiffre disponible.

Une différence interprétable

Conservez le même public éligible, le même contenu utile hors variable testée et une période d’observation décidée avant de lire les chiffres. Ce sont nos choix de méthode, pas des résultats de campagne. Si vous changez à la fois objet, offre et moment, vous saurez difficilement quelle différence explique le signal observé.

Ne pas surpromettre sur une petite base

Une poignée d’interactions peut aider à repérer un défaut de compréhension, sans justifier une règle générale. Ne relancez pas indéfiniment le même public pour obtenir un gagnant. Si aucune différence utile n’est établie, gardez la version la plus claire et consignez ce qui reste inconnu ; ne fabriquez pas une certitude pour remplir le bilan.

Limites

Aucun essai de compte ni contrat utilisateur lu. Éditions, connexions et réglages effectifs restent à vérifier.

Prochaine action

Écrivez en une phrase la décision que changerait le test et ce qui vous ferait conclure à une absence de résultat.

Preuves et sources

Ce qui relève d’un fait lu, d’une déclaration, de notre calcul, de notre méthode ou de notre avis. Notre méthode

  • Déclaration de l’éditeur. Mailchimp recommande clic plutôt qu’ouverture pour départager une variable de contenu.

    Relevé du 6 novembre 2026.

    Portée : Aide tests email ; pas protocole statistique universel.

    Limite : Document lu ; cas réel du lecteur inconnu.