Votre tableau de bord affiche des conversions en hausse depuis le lancement de ce nouveau parcours, et le chiffre d’affaires progresse. Mais une question détermine si ce chiffre a un sens : vos messages sont-ils à l’origine de cette hausse, ou ces utilisateurs auraient-ils converti de toute façon ?
De nombreux facteurs font grimper les conversions sans que vous y soyez pour quelque chose : un pic saisonnier (Soldes, French Days, Black Friday), une nouvelle fonctionnalité de l’app, une croissance organique. Il n’existe qu’un seul moyen d’en avoir la certitude : exclure une partie de vos utilisateurs de tout message et observer leur comportement spontané. C’est exactement le rôle d’un groupe de contrôle.
Cet article explique comment fonctionne un groupe de contrôle, comment interpréter l’uplift, et comment en configurer un dans Pushwoosh en quelques clics.
Pourquoi un test A/B ne peut pas répondre à cette question
Face à cette question (comment mesurer l’impact de son messaging), la plupart des équipes se tournent vers le test A/B. C’est un outil classique, et un bon outil — il n’est simplement pas conçu pour cette tâche.
Un test A/B répond à une question plus étroite : quel message fonctionne le mieux. Push A contre Push B, urgence contre remise, push contre e-mail. C’est le bon outil pour optimiser ce que vous envoyez, ce qui est un exercice différent de celui consistant à prouver que l’envoi en valait la peine.
Cette référence, c’est justement ce qui vous manque. Sans elle, vous comparez vos meilleurs messages à vos autres meilleurs messages, sans jamais savoir si l’un d’eux fait mieux que le silence.
| Test A/B | Groupe de contrôle | |
|---|---|---|
| Question | Quel message fonctionne le mieux ? | Le messaging fonctionne-t-il vraiment ? |
| Qui reçoit des messages | Tout le monde (toutes les variantes) | Tout le monde sauf le groupe exclu |
| Ce que vous apprenez | La version la plus performante | Votre impact réel et incrémental |
Les gens confondent tout le temps le test A/B et le groupe de contrôle. Le problème, c’est que cette confusion grignote silencieusement les budgets. Un test A/B vous dit quel message a gagné ; un groupe de contrôle vous dit si vous auriez dû envoyer quoi que ce soit.
Les taux d’ouverture, les taux de clics, les taux de délivrabilité et le nombre d’abonnés augmentent, tout le monde est content, et personne ne vérifie si ces utilisateurs auraient converti de toute façon.
Oui, un million d’abonnés et un taux de délivrabilité de 99 % prouvent que votre infrastructure fonctionne. Mais cela signifie-t-il que votre messaging a réellement généré le moindre euro ? Les conversions augmentent toujours : jour de paie, saisonnalité, ou simple croissance organique. Si vous ne pouvez pas soustraire cet effet, vous vous attribuez un résultat que vous n’avez pas gagné.
Par ailleurs, dans un test A/B, vous comparez des options de messaging, mais vous ne mesurez jamais face au silence. Un groupe de contrôle fait exactement cela : vous en excluez une partie, vous adressez des messages à tous les autres, et la différence, c’est ce que vous avez réellement généré en chiffre d’affaires, par rapport à une référence réelle.
En résumé, le test A/B améliore un message, mais le groupe de contrôle prouve que votre équipe a une vraie raison d’exister.
Ce que mesure réellement un groupe de contrôle
Un groupe de contrôle (ou groupe exclu) divise votre audience en 2 :
- Groupe traité. Tous les utilisateurs qui reçoivent vos messages marketing comme d’habitude : notifications push, e-mail, message in-app.
- Groupe de contrôle. Une portion fixe exclue de tout marketing. Ces utilisateurs continuent de recevoir les messages transactionnels — réinitialisations de mot de passe, reçus — donc rien ne casse pour eux. Ils ne reçoivent simplement jamais de campagne.
Puisque la seule différence entre les 2 groupes est votre messaging, tout écart de comportement vous est imputable. Cet écart porte un nom : l’uplift.
Dans Pushwoosh, vous pouvez utiliser la fonctionnalité Groupe de contrôle global. Vous définissez un pourcentage fixe d’utilisateurs à exclure (1 à 15 %), et la plateforme compare automatiquement les 2 groupes sur l’événement de conversion de votre choix, avec des analyses détaillées :
Ce que cela donne en pratique
Imaginons que vous excluiez 5 % de vos utilisateurs et que vous choisissiez un objectif de conversion — l’action qui compte comme un succès dans votre app. Cet objectif n’est pas forcément un achat : une commande finalisée, une mise à niveau d’abonnement, un abonnement souscrit, un niveau complété, ou tout autre événement que vous considérez comme une victoire. Dans la mesure du possible, choisissez celui qui se rapproche le plus du chiffre d’affaires — c’est le chiffre qui pèse vraiment quand vous défendez un budget.
Sur une fenêtre de 30 jours, les 95 % contactés (groupe traité) sont comparés aux 5 % silencieux (groupe de contrôle), et vous observez le taux de conversion de chaque groupe :
| Groupe | Taux de conversion |
|---|---|
| Traité (contacté) | 8,2 % |
| Contrôle (exclu) | 6,1 % |
Uplift : +34 %, marqué comme significatif. (*L’uplift est mesuré par rapport à la référence du groupe de contrôle : (8,2 − 6,1) / 6,1 ≈ 34 %.)
Comment l’interpréter : conversions générées par le messaging : environ 940 achats supplémentaires en 30 jours. Avec un panier moyen de 45 €, cela représente environ 42 000 € de chiffre d’affaires que votre programme peut revendiquer — la différence entre «nous avons envoyé beaucoup de notifications push» et «nous avons généré 42 000 € pour l’entreprise».
Voilà le scénario idéal, et c’est ainsi que vous prouvez à votre CEO et à votre CFO que vos campagnes fonctionnent vraiment ! 💰
Mais ce chiffre ne sera pas toujours aussi favorable. Voici comment interpréter chaque scénario possible.
Interpréter le résultat : 3 scénarios et vos prochaines actions
Une fois l’uplift calculé, ce chiffre vous indique la marche à suivre.
| Résultat | Ce que cela signifie | Votre action |
|---|---|---|
| Positif et significatif (comme dans notre exemple) | Votre messaging crée un réel supplément par rapport à la référence | Passez à l'échelle sur les flux les plus performants, coupez les plus faibles. Présentez ce chiffre en revue budgétaire — «un uplift de 34 % par rapport au groupe de contrôle» est une phrase que personne n'ignore |
| Stable ou non significatif | Le groupe traité et le groupe de contrôle convertissent à peu près pareil ; ces utilisateurs convertissaient déjà | Retravaillez l'offre ou affinez le segment avant de tout arrêter. C'est souvent un envoi de masse générique qu'une version segmentée surpasserait |
| Négatif | Le groupe de contrôle convertit mieux — le groupe traité est en retrait, généralement à cause d'un excès de messages | Réduisez fortement la fréquence et remesurez. Un groupe de contrôle est le seul moyen de détecter un excès de messaging ; sans lui, tout paraît normal sur vos courbes de taux d'ouverture |
Mettre en place un Groupe de contrôle global est indispensable si vous voulez voir clairement comment vos communications marketing sont reçues par votre audience, et ce qui se passe ensuite, par rapport aux utilisateurs qui en sont exclus.
Cette approche a démontré sa valeur auprès de nos clients en Fintech et dans le secteur de la création de contenu : l’adoption d’un Groupe de contrôle global leur a apporté de nombreux enseignements concrets, des actions à mener, et des ajustements directement applicables à leurs opérations d’envoi quotidiennes.
La différence entre les 2 groupes — mesurée à travers des événements propres au secteur, les actions des utilisateurs et, à l’inverse, les signes d’inactivité — fonctionne comme un test décisif pour toute votre stratégie de communication. C’est particulièrement utile quand vous avez l’impression d’être à court d’idées pour votre audience : le groupe de contrôle révèle ce que votre messaging génère réellement, et ce que les utilisateurs auraient fait de toute façon.
Configurez votre groupe de contrôle dans Pushwoosh en quelques clics
-
Choisissez la taille de votre groupe exclu
Définissez la part d'utilisateurs à exclure ; 5 % est la valeur par défaut équilibrée. Les nouvelles inscriptions rejoignent le groupe automatiquement.
-
Marquez vos campagnes comme marketing
L'exclusion s'applique aux messages marketing : vos envois transactionnels — reçus, réinitialisations de mot de passe — continuent d'atteindre tout le monde.
-
Choisissez les événements qui définissent le succès
Ajoutez-les comme objectifs de conversion dans vos parcours pour que le rapport sache quoi mesurer. Il ne s'agit pas forcément d'un achat — choisissez ce qui représente une vraie valeur pour votre app : un achat finalisé pour l'e-commerce, un passage à l'offre payante pour un abonnement, un niveau complété pour le gaming, ou tout autre événement que vous considérez comme une conversion.
-
Consultez le rapport
La page du groupe de contrôle affiche votre uplift et sa significativité — sans aucun calcul manuel de votre côté.
Articles connexes
Tout voir
