Plage des écarts réels compatibles avec les données, au niveau de 95 %. Probant affiche toujours l’écart avec sa fourchette : entièrement au-dessus de zéro, la variante gagne ; si elle contient zéro, rien n’est prouvé.
Autre nom : intervalle de confiance
Sur le CA par visiteur, l’écart mesuré est de +6,0 %, avec une fourchette à 95 % de +2,2 % à +10,0 % : toute la fourchette est au-dessus de zéro, la variante rapporte plus.
Sur la marge par visiteur, l’écart mesuré est de +3,0 %, fourchette de -0,7 % à +6,7 % : la fourchette contient zéro, et rien n’est prouvé sur la marge, même si l’écart mesuré est positif.
Chiffres calculés par le moteur de Probant sur la boutique de démonstration, Maison Lune, fictive : ouvrir la démo.
Probabilité d’observer un écart au moins aussi grand si les deux versions se valaient. Sous 5 %, l’écart est dit significatif ; chez Probant, cela revient à une fourchette à 95 % qui exclut zéro.
Écart entre la variante et l’originale, rapporté à l’originale : B / A − 1. Un effet positif signifie que la variante fait mieux, en proportion de la valeur de départ.
Fourchette que l’on peut relire à tout moment, et sur laquelle on peut s’arrêter au premier franchissement sans gonfler le risque (Johari, Pekelis et Walsh, 2017). Elle est plus large qu’une fourchette classique. Probant s’en sert pour les garde-fous des déploiements.
Créez votre espace, ou explorez d’abord la démo avec les données d’une boutique fictive.