Version modifiée de la page, comparée à l’originale, la version actuelle. L’originale est le bras A, la variante le bras B.
L’originale montre le panier tel qu’il est ; la variante y ajoute une barre de progression vers la livraison offerte. Tirés au hasard, 30 650 visiteurs ont vu l’originale et 30 590 la variante.
La variante rapporte +6,0 % de chiffre d’affaires par visiteur (fourchette de +2,2 % à +10,0 %) : elle gagne, et le rapport chiffre aussi ce qu’elle coûte en livraisons offertes.
Chiffres calculés par le moteur de Probant sur la boutique de démonstration, Maison Lune, fictive : ouvrir la démo.
Expérience qui montre la version actuelle d’une page (A) à une partie des visiteurs et une version modifiée (B) aux autres, répartis au hasard, puis compare les deux sur une métrique principale fixée avant le lancement. L’écart se lit avec sa fourchette, aux contrôles prévus.
Les visiteurs ne se répartissent pas entre les versions comme prévu (« sample ratio mismatch »), signe d’un défaut d’affectation. Probant le vérifie dans chaque test par un test du khi-deux : sous une valeur p de 0,001, le verdict est bloqué, quel que soit l’écart.
Écart entre la variante et l’originale, rapporté à l’originale : B / A − 1. Un effet positif signifie que la variante fait mieux, en proportion de la valeur de départ.
Créez votre espace, ou explorez d’abord la démo avec les données d’une boutique fictive.