Le gagnant se déploie par paliers, sous garde-fous.
Un test prouve qu’une variante rapporte ; il ne prouve pas qu’elle ne casse rien à grande échelle. Le déploiement l’expose progressivement, vérifie les garde-fous à chaque palier, et revient seul en arrière au premier dégât démontré.
Recommandations « Vous aimerez aussi »
Garde-fou : retours +6,7 pts
Lire la transcription
Le gagnant, à tout le monde, tout de suite ? La part des visiteurs monte par paliers, et retombe à zéro au premier dégât prouvé.
Chaque palier a une durée minimale. 10 %, 25 %, 50 % puis 100 %. « Filtres simplifiés sur mobile » est à 50 % ; 100 % au plus tôt le 25 nov.
Les garde-fous sont relus à chaque contrôle. Les fourchettes restent valides quel que soit le jour où on les lit. Ici, le taux de retour retient le palier suivant : encore 15 jours de données.
Au premier dégât démontré, retour arrière. Recommandations « Vous aimerez aussi » : taux de retour de 7,8 % à 14,5 % au palier de 50 %. Tous les visiteurs retrouvent l’originale le 10 nov. à 05:12.
Ces deux déploiements sont dans la démo, sans inscription.
Monter sans prendre de risque inutile.
Les visuels viennent des déploiements de la boutique de démonstration, rejoués contrôle après contrôle par le moteur : paliers de 10 %, 25 %, 50 %, 100 %.
Chaque palier a une durée minimale.
La nouvelle version est montrée à une part croissante du trafic et comparée, à chaque palier, aux visiteurs restés sur l’originale. On avance quand la durée minimale est écoulée et qu’aucun garde-fou n’est franchi. Pour « Filtres simplifiés sur mobile », le passage à 100 % est possible au plus tôt le 25 nov., quand les fourchettes auront tranché.
- Paliers intermédiaires : ils plafonnent le risque
- Passage à 100 % : chaque fourchette doit être du bon côté de sa limite, car après il n’y a plus d’originale pour comparer
- 10 %franchi31 oct. → 1er nov.2 jours · minimum 2 jours
- 25 %franchi2 nov. → 4 nov.3 jours · minimum 3 jours
- 50 %en cours5 nov. → 9 nov.5 jours · minimum 3 jours
- 100 %à venirau plus tôt le 25 nov.
- Taux de retourencore 15 jours
- Erreurs JavaScriptencore 5 jours
- CA par visiteurencore 3 jours
Les garde-fous sont relus à chaque contrôle.
Les fourchettes des garde-fous sont toujours valides : on peut les consulter à chaque contrôle et s’arrêter au premier franchissement sans gonfler le risque d’erreur, ce qu’un intervalle classique ne permet pas.
- Taux de retour, vitesse mobile, erreurs JavaScript et CA par visiteur dans la démonstration
- État de chaque garde-fou : du bon côté, pas encore tranché, ou franchi
Une dégradation prouvée déclenche le retour arrière.
Dès qu’une fourchette de garde-fou est entièrement au-delà de sa limite, tous les visiteurs retrouvent l’originale, sans attendre personne. Recommandations « Vous aimerez aussi » a franchi les paliers de 10 % et 25 %, puis le taux de retour a dépassé sa limite au palier de 50 % : retour arrière le 10 nov. à 05:12.
10 nov. à 05:12, au palier de 50 %. Tous les visiteurs voient de nouveau l’originale.
La production suit les déploiements.
Rien à changer sur le site : le script et l’aide serveur lisent la part de chaque déploiement dans la configuration. Un visiteur exposé à 25 % l’est encore aux paliers suivants : personne ne revient à l’originale après avoir vu la nouvelle version.
- Livraison offerte dès 60 € : servi à tous depuis le 27 oct.
- Retours gratuits mis en avant : servi à tous depuis le 29 sept.
| Drapeau | Production | État |
|---|---|---|
filtres-mobile-v2 | 50 % | Déploiement en cours |
reco-vous-aimerez | 0 % | Coupé par un garde-fou |
barre-livraison | 0 % | Pas encore lancé |
seuil-livraison-60 | 100 % | Déployé |
retours-gratuits-fiche | 100 % | Déployé |
- Livraison offerte dès 60 €à tous depuis le 27 oct.
- Retours gratuits mis en avantà tous depuis le 29 sept.
Dans le détail.
- Paliers proposés
- Standard : 25 % → 50 % → 100 % ; Prudent : 10 % → 25 % → 50 % → 100 %. Jusqu’à six paliers, le dernier à 100 %.
- Durée minimale
- 3 jours complets par palier intermédiaire dans un espace réel, pour couvrir des jours de semaine différents.
- Retour arrière
- Automatique dès qu’un garde-fou est franchi ; avant chaque montée de palier, la règle est relue.
- Qui voit la variante
- Un tirage propre au déploiement place chaque visiteur dans un seau ; la part ne fait que monter, donc un visiteur exposé le reste.
- Groupe témoin
- Le holdout de l’espace reste à l’écart : il mesure l’impact cumulé des gagnants, déployés compris.
- Drapeaux
- Un drapeau sert une valeur à votre code serveur, par règles ou par pourcentage, et se coupe d’un geste. Il peut aussi suivre un test en cours.
Questions fréquentes.
Pourquoi déployer par paliers un gagnant déjà prouvé ?
Le test a mesuré la métrique principale sur une partie du trafic. Le déploiement vérifie, à plus grande échelle, que rien d’autre ne se dégrade : retours, vitesse, erreurs, CA par visiteur.
Que voit un visiteur pendant un retour arrière ?
L’originale, dès la configuration suivante. Le déploiement disparaît de la configuration publique ; un script plus ancien montre aussi l’originale, jamais une variante non voulue.
Quand le contrôle a-t-il lieu ?
Dans la démonstration, à chaque contrôle quotidien du palier. Dans un espace réel, la règle est relue au fil des événements reçus, au plus une fois toutes les 5 minutes par déploiement, et avant toute montée de palier.
Probant Ou pas encore…
Créez votre espace, ou explorez d’abord la démo avec les données d’une boutique fictive.
- Démo ouverte, sans inscription
- Forfait fixe, jamais de dépassement
- Données hébergées à Paris