Métrique qui ne doit pas se dégrader (taux de retour, vitesse d’affichage, erreurs), avec une limite fixée dans le plan. Un garde-fou n’arrête le test que si toute sa fourchette dépasse la limite : une fourchette qui la chevauche ne prouve pas de dégât.
Le plan fixe au taux de retour une limite de +25 % : une hausse prouvée au-delà arrêterait le test, quel que soit le gain de chiffre d’affaires. Mesuré : +2,6 %, avec une fourchette de -9,2 % à +15,9 %.
Toute la fourchette reste sous la limite : le garde-fou tient. L’écart mesuré seul ne suffirait pas à arrêter le test : seule une fourchette entièrement au-delà de la limite prouve un dégât.
Chiffres calculés par le moteur de Probant sur la boutique de démonstration, Maison Lune, fictive : ouvrir la démo.
Fourchette que l’on peut relire à tout moment, et sur laquelle on peut s’arrêter au premier franchissement sans gonfler le risque (Johari, Pekelis et Walsh, 2017). Elle est plus large qu’une fourchette classique. Probant s’en sert pour les garde-fous des déploiements.
Retrait automatique d’une version en cours de déploiement dès qu’un garde-fou est franchi, c’est-à-dire dès que toute sa fourchette toujours valide dépasse la limite. Tout le trafic revient à l’originale.
Part du trafic qui voit la nouvelle version pendant un déploiement progressif. Probant passe au palier suivant quand la durée minimale est écoulée et qu’aucun garde-fou n’est franchi ; pour passer à tout le trafic, chaque garde-fou doit être entièrement du bon côté de sa limite.
Créez votre espace, ou explorez d’abord la démo avec les données d’une boutique fictive.