Fourchette que l’on peut relire à tout moment, et sur laquelle on peut s’arrêter au premier franchissement sans gonfler le risque (Johari, Pekelis et Walsh, 2017). Elle est plus large qu’une fourchette classique. Probant s’en sert pour les garde-fous des déploiements.
Autre nom : mSPRT
Test à parts égales, garde-fou « Taux de retour », limite +25 %. La fourchette classique va de +45,8 % à +109,9 % ; la fourchette toujours valide, de +25,4 % à +130,3 %, plus large.
C’est le prix de la relecture à tout moment : on peut s’arrêter au premier jour où elle dépasse la limite sans gonfler le risque. Ici, toute la fourchette dépasse la limite : le garde-fou est franchi.
Chiffres calculés par le moteur de Probant sur la boutique de démonstration, Maison Lune, fictive : ouvrir la démo.
Métrique qui ne doit pas se dégrader (taux de retour, vitesse d’affichage, erreurs), avec une limite fixée dans le plan. Un garde-fou n’arrête le test que si toute sa fourchette dépasse la limite : une fourchette qui la chevauche ne prouve pas de dégât.
Retrait automatique d’une version en cours de déploiement dès qu’un garde-fou est franchi, c’est-à-dire dès que toute sa fourchette toujours valide dépasse la limite. Tout le trafic revient à l’originale.
Plage des écarts réels compatibles avec les données, au niveau de 95 %. Probant affiche toujours l’écart avec sa fourchette : entièrement au-dessus de zéro, la variante gagne ; si elle contient zéro, rien n’est prouvé.
Créez votre espace, ou explorez d’abord la démo avec les données d’une boutique fictive.