Comment l’utiliser
Saisissez le total des visiteurs et des conversions pour chaque variante. L'outil renvoie les deux taux de conversion, l'écart, et une valeur de significativité indiquant la probabilité que cet écart soit dû au hasard.
← Centre d’outils
Significativité d’un test A/B
Saisissez les données requises, exécutez l’outil en toute sécurité et consultez immédiatement un résultat mesurable.
Utilitaire local
Cet outil n’appelle aucun service externe. Les données sensibles saisies ne sont pas conservées.
Ce que cet outil vérifie
L'écart entre les deux taux est évalué par un test z sur deux proportions. Le calcul n'utilise que les quatre nombres saisis.
Comment lire le résultat
La significativité ne prouve pas que l'écart est réel ; elle indique à quel point l'écart observé serait improbable sous le seul effet du hasard. Le seuil de confiance de 95 % est une convention répandue, pas une exigence mathématique. Un test qui n'atteint pas la significativité signifie en général « pas encore assez de données » plutôt que « aucune différence ».
Exemples
Comparez deux variantes de page d'atterrissage, deux titres, ou deux longueurs de formulaire.
Cas d’usage
Utile aux équipes campagne, aux responsables de pages d'atterrissage et au travail d'optimisation de la conversion.
Erreurs fréquentes
L'erreur la plus dommageable est d'arrêter dès que la significativité apparaît, ce qui augmente fortement les faux positifs. La deuxième est de terminer en milieu de semaine : les comportements de semaine et de week-end diffèrent. La troisième est de modifier plus d'une variable et d'attribuer l'écart à une seule cause.
Les limites de cet outil
L'outil ne connaît rien au-delà des nombres saisis. Il ne peut pas voir si le trafic a réellement été réparti au hasard, si un même utilisateur a été compté deux fois, la saisonnalité, ou une campagne qui tourne en parallèle. Sans cela, le résultat est arithmétiquement juste mais trompeur en pratique.
Confidentialité et traitement des données
Les nombres saisis ne sont pas conservés ; seule une trace d'exécution anonymisée est gardée.
Questions fréquentes
Quand faut-il arrêter le test ?
Décidez de la durée et de la taille d'échantillon avant de commencer, puis tenez-vous-y. Arrêter dès l'apparition de la significativité gonfle le taux de faux positifs.
Une significativité à 95 % prouve-t-elle que l'écart est réel ?
Non. Elle indique que l'écart observé est improbable sous le seul effet du hasard ; ce n'est pas une affirmation de certitude.
Puis-je l'utiliser avec un faible trafic ?
Oui, mais atteindre la significativité est difficile à faible volume et tout résultat obtenu reste fragile.