Control Group
Groupe d'utilisateurs non exposé à une modification lors d'un test, servant de référence.
Le groupe de contrôle est le segment d'utilisateurs qui ne reçoit pas la modification testée. Il sert de référence pour mesurer l'impact du changement.
Comment le constituer
La répartition doit être aléatoire, simultanée et stable. Même période, même source de trafic, même appareil, et surtout un utilisateur qui reste dans son groupe d’une visite à l’autre. Une répartition reconstituée après coup, par segment ou par jour, ne vaut rien : vous comparez alors deux populations différentes et vous mesurez cette différence, pas votre modification.
Pourquoi il reste indispensable
Sans groupe de référence, vous attribuez à votre modification tout ce qui bouge autour d’elle : saisonnalité, promotion d’un concurrent, pic de notoriété, changement d’algorithme publicitaire. La comparaison avant-après reste le piège le plus courant en optimisation. Le contrôle absorbe ces variations externes, puisqu’il les subit exactement en même temps et dans les mêmes proportions que la variante.
Holdout vs groupe de contrôle
Le groupe de contrôle vit à l’intérieur d’un test ponctuel, sur une page ou un écran. Le holdout est un échantillon exclu durablement d’un canal entier, souvent 5 à 10 % de la base, pour mesurer l’incrémentalité réelle d’un dispositif email ou retargeting. Le premier valide une hypothèse, le second dit si le canal crée vraiment de la valeur.
Exemple concret
Une PME B2B lance un scénario de relance email en gardant 10 % de sa base en holdout. Sur trois mois, le groupe exposé convertit à 8,2 % contre 6,4 % pour le holdout. L’incrémental réel s’établit à 1,8 point, et non aux 8,2 % revendiqués par l’outil.
Termes associés
A/B Test
Test comparant deux versions (A et B) pour déterminer laquelle performe le mieux.
Variant
Version alternative testée contre le contrôle dans un A/B test ou test multivarié.
Statistical Significance
Seuil de confiance (95%) confirmant qu'un résultat de test n'est pas dû au hasard.
Holdout Test
Expérimentation où un segment d'audience est exclu d'une campagne pour mesurer son impact incrémental.
CRO
Conversion Rate Optimization. L'optimisation du taux de conversion de votre site ou landing page.
CTA
Call To Action. Le bouton ou lien qui incite l'utilisateur à passer à l'action (acheter, s'inscrire, demander un devis).
Control Group en pratique : Conversion
Pour aller au-delà de la définition, découvrez notre pilotage CRO produit et checkout.