[deliver]
Article Deliver · 2026-11-17 · Charlotte Rodrigues

A/B test d'une campagne Klaviyo avant le BFCM : règles et durée

Un A/B test de campagne dans Klaviyo se prépare comme un envoi : audience, variations, métrique, taille du test, durée. À notre avis, avant le BFCM, une seule de ces cases mal remplie peut suffire à produire un résultat inexploitable ou un envoi difficile à corriger. Cet article reprend ce que les pages d'aide permettent de tester, leurs règles de taille, de durée et de lecture, puis propose un cadre de décision pour la fenêtre. Le Black Friday tombe le vendredi 27 novembre 2026 et le Cyber Monday le lundi 30 novembre.

TL;DR. Une campagne email peut tester les objets, le contenu du message ou les horaires d'envoi, avec la métrique gagnante Open rate, Click rate ou Placed order rate. Un test d'horaires s'envoie à 100 % du public : aucun gagnant n'est envoyé ensuite. Un résultat est étiqueté statistiquement significatif quand la probabilité de victoire dépasse 90 % et que chaque variation compte plus de 50 livraisons. À notre avis, ce qui doit éclairer le BFCM se teste et se lit avant la fenêtre.

Un regard extérieur avant de construire ? Nous proposons un audit de préparation Q4 : 30 minutes, gratuit, sans engagement.

Cet article s'inscrit dans notre guide BFCM Klaviyo. Pour la méthode générale du test, voyez notre article sur l'A/B test Klaviyo.

Ce que Klaviyo permet de tester dans une campagne email

La page de référence liste trois familles : les objets, le contenu du message et les horaires d'envoi (Klaviyo, how to A/B test an email campaign). On crée le test depuis Campaigns > Create campaign, en choisissant Single channel puis Email, puis Create A/B test au-dessus du champ d'objet. Klaviyo crée une seconde variation identique à la première.

Dans A/B test setup, on choisit Test content pour le contenu et les objets, ou Test send times pour les horaires. Un test de contenu change un seul élément : si l'on modifie l'objet, on ne change rien d'autre. La page recommande deux variations, et la page des bonnes pratiques demande de ne pas dépasser quatre variations d'une même variable par test.

Une variation d'objet générée par IA existe aussi, sur les comptes gratuits et payants : sous le champ d'objet, on choisit personnalisation ou non, court ou long, question ou affirmation, emoji ou non. La variation A garde l'objet d'origine, la B reçoit l'objet généré.

Le choix de la stratégie (Winning variation ou Personalized variations for each recipient) n'est offert qu'aux comptes d'au moins 400 000 profils au total. En dessous, Klaviyo applique la variation gagnante : un gagnant unique part vers le reste des destinataires après la période de test. La suite suppose cette stratégie.

Choisir la métrique gagnante

La page propose trois métriques, chacune avec un usage recommandé.

Métrique Usage recommandé par la page Limite à connaître
Open rate Objet, texte d'aperçu, nom et adresse de l'expéditeur Les ouvertures comptées incluent celles de l'Apple Mail Privacy Protection (MPP)
Click rate Contenu de l'email, comme la taille ou la couleur d'un bouton Aucune limite signalée
Placed order rate Contenu, par exemple afficher des meilleures ventes ou des nouveautés Réservée aux comptes qui ont une métrique Placed Order, indisponible avec les variations personnalisées

La MPP précharge le pixel de suivi, ce qui peut gonfler les ouvertures. Un test sur l'Open rate compte les ouvertures enregistrées, MPP comprise : le gagnant peut refléter des ouvertures automatiques autant que l'engagement de personnes. Si l'on teste régulièrement et que plus de 45 % environ des ouvertures viennent d'Apple Mail, Klaviyo suggère un rapport personnalisé avec une propriété MPP. La page sur la significativité invite à considérer le Click rate quand la MPP rend l'Open rate difficile à lire. Voyez notre article sur l'Apple Mail Privacy Protection.

À notre avis, pour un test destiné à orienter le BFCM, le Click rate ou le Placed order rate parlent mieux qu'une ouverture dès que le test porte sur autre chose que l'objet.

Taille et durée du test

Pour un test de contenu, Klaviyo recommande une taille de test selon l'audience et une durée selon la métrique gagnante. Un curseur règle la taille ; sous 100 %, on peut aussi ajuster la durée. La page donne un exemple : avec 40 % de taille de test et 6 heures de durée, 20 % des destinataires reçoivent la variation A, 20 % la B, un gagnant est choisi au bout de 6 heures et le reste des destinataires reçoit la variation gagnante.

La page email ne fournit aucune durée chiffrée à retenir. La page SMS en donne une, pour les tests de contenu sous 100 % avec le Placed order rate : au moins 24 heures sont recommandées (Klaviyo, how to A/B test SMS campaigns). Pour l'email, nous partons, à notre avis, de la durée proposée par Klaviyo.

La page des bonnes pratiques demande de laisser assez de temps pour collecter les résultats d'un public plus large, puis de vérifier la significativité (Klaviyo, best practices for A/B testing reference).

Les règles qui pèsent sur un calendrier BFCM

Le test d'horaires n'a pas de gagnant à envoyer. Il part à 100 % des destinataires, avec le même contenu et le même objet dans les deux variations, chacune ayant sa date et son heure dans le fuseau horaire du compte. À notre avis, c'est un coût à peser sur un segment que l'on veut servir au mieux.

Le fuseau du destinataire exige un test à 100 %. Pour qu'un test de contenu parte à l'heure locale de chaque destinataire, la taille du test doit être de 100 % et l'on choisit Recipient's Local Time Zone à la programmation. Il n'y a alors plus de gagnant envoyé après coup.

Le gagnant se choisit à la main à condition qu'il reste des destinataires. Pour terminer un test de contenu en cours, la taille du test doit être inférieure à 100 %. Dans l'onglet A/B test results, le menu d'options de la variation propose Choose as winner : le test s'arrête et l'envoi de cette variation au reste de l'audience commence immédiatement.

La page des bonnes pratiques déconseille de modifier un test en cours. Pour une campagne déjà en cours d'envoi, si le contenu doit changer, il faut annuler l'envoi restant. L'annulation ne rappelle pas les emails déjà livrés. On clone ensuite la campagne annulée, ou on en crée une nouvelle, puis on configure un nouveau test.

Lire le résultat sans le surinterpréter

Les résultats se trouvent dans l'onglet A/B test results du rapport (Klaviyo, how to review your A/B test results for campaigns) : variation gagnante, statut, Win probability, lift et métrique gagnante. Le lift compare l'écart au taux de l'autre variation. Exemple de la page : A à 5 % de clics et B à 4 % donnent un écart d'un point, soit (5 % moins 4 %) divisé par 4 %, soit 25 % de lift.

Quand le groupe de test est plus petit que l'audience, Test period results montre les interactions du groupe pendant la période de test, et Continuous results les interactions ultérieures du même groupe. La variation en tête peut changer entre les deux. La page sur la significativité recommande de lire Test period results pour juger les données collectées avant le choix du gagnant (Klaviyo, understanding statistical significance in Klaviyo campaigns).

Les quatre catégories, pour l'email :

  1. Statistically significant : probabilité de victoire supérieure à 90 % et plus de 50 livraisons réussies par variation. Le résultat n'assure pas le même effet avec une autre audience, un autre message ou un autre horaire.
  2. Promising : mêmes minimums, probabilité supérieure à 75 % et au plus 90 %. Pas d'étiquette de significativité ; la page recommande de répéter le test.
  3. Not statistically significant : probabilité de 75 % ou moins avec plus de 1 800 livraisons par variation, ou probabilité inférieure à 60 % avec moins de 4 points d'écart entre les deux premières variations, à condition que chaque variation compte plus de 50 livraisons. La page recommande de retester deux ou trois fois, puis de passer à un autre sujet.
  4. Inconclusive : une variation à 50 livraisons ou moins, ou un résultat qui ne correspond à aucune autre catégorie. La page suggère d'élargir l'audience des tests suivants.

À notre avis : un cadre de décision avant la fenêtre BFCM

Les lectures qui suivent sont de Deliver, pas de Klaviyo.

La première question porte sur la décision que le test doit éclairer : quelle offre en tête d'email, quel objet pour l'envoi principal, quel horaire pour la relance. La page des bonnes pratiques demande d'ailleurs d'écrire une hypothèse avant de construire le test.

Deuxième arbitrage, la fenêtre elle-même. La page sur la significativité déconseille de retester près d'un week-end de congé, quand l'audience est bien plus susceptible d'attendre vos emails. Nous lisons le week-end du Black Friday et du Cyber Monday comme relevant de ce cas : un résultat obtenu ces jours-là se transposera mal. C'est une lecture de Deliver, que la documentation ne formule pas. Elle conduit à lancer les tests avant la fenêtre et à envoyer pendant la fenêtre les variations déjà tranchées.

Troisième arbitrage, la répétition. Un résultat prometteur appelle un second test, un résultat non significatif en appelle deux ou trois. Cela dicte la date de départ : le premier test doit partir assez tôt pour que sa répétition tienne avant la fenêtre. Si le calendrier ne le permet pas, mieux vaut un seul test bien choisi qu'une série lue à la hâte.

Quatrième arbitrage, l'audience. Les seuils de la page (plus de 50 livraisons par variation, plus de 1 800 pour conclure à l'absence de différence) montrent qu'un petit segment ne départagera rien. Sur un segment réduit, nous préférons appliquer le choix le plus prudent plutôt que lire un résultat « Inconclusive ». Notre article sur les audiences des campagnes BFCM aide à dimensionner ces segments, et notre calendrier d'envoi BFCM à placer les envois de test.

Checklist ordonnée

Ces points sont des conseils de Deliver, appuyés sur les règles ci-dessus.

  1. Écrire la décision à éclairer et l'hypothèse, en une phrase.
  2. Choisir une seule variable et le type de test : Test content ou Test send times.
  3. Choisir la métrique gagnante, en tenant compte de la MPP pour l'Open rate, et vérifier la présence d'une métrique Placed Order avant de choisir le Placed order rate.
  4. Régler la taille du test sous 100 % si un gagnant doit être envoyé ensuite.
  5. Ne pas modifier le test en cours : en cas de correction, annuler l'envoi restant, cloner, relancer.
  6. Lire Test period results, puis la catégorie de significativité, et décider : appliquer, répéter, retester ou abandonner le sujet.
  7. Retrouver les tests passés dans Analytics > Experiments, qui regroupe les tests de campagnes et de flows et affiche par défaut les 90 derniers jours (Klaviyo, understanding the experiments section).

FAQ

Quels éléments d'une campagne email peut-on tester dans Klaviyo ?

Les objets, le contenu du message et les horaires d'envoi, un seul élément à la fois.

Quelle durée choisir pour un test de campagne email ?

La page d'aide email ne donne pas de durée chiffrée : Klaviyo recommande une durée selon la métrique gagnante, modifiable quand la taille du test est inférieure à 100 %. Pour un SMS avec le Placed order rate, la page recommande au moins 24 heures.

Un test d'horaires envoie-t-il un gagnant ensuite ?

Non. Il s'envoie à 100 % des destinataires, donc personne ne reste pour recevoir une variation gagnante.

À partir de quand un résultat est-il statistiquement significatif ?

Quand la probabilité de victoire dépasse 90 % et que chaque variation compte plus de 50 livraisons réussies pour l'email.

Peut-on modifier un test en cours ?

La page des bonnes pratiques le déconseille : pour une campagne déjà en cours d'envoi, on annule l'envoi restant puis on clone la campagne ou on en crée une nouvelle.

Une question sur vos flows ? Vous pouvez échanger directement avec l'équipe Deliver.

Provenance et vérification

Chaque affirmation technique a été comparée le 14 novembre 2026 au texte brut des six pages Klaviyo listées dans sources, ouvertes via le corps d'article du centre d'aide, lues en entier et datées du 22 octobre 2026 (mise à jour affichée par le centre d'aide) : éléments testables en campagne email, variation générée par IA, stratégie de test et seuil de 400 000 profils, métriques gagnantes et note sur l'Apple Mail Privacy Protection, taille et durée du test, test d'horaires à 100 % du public, choix manuel du gagnant, résultats et calcul du lift, catégories et seuils de significativité, bonnes pratiques (une variable, quatre variations au plus, ne pas modifier un test en cours), section Experiments, règles propres aux SMS. La page d'aide email ne donne aucune durée chiffrée de test : l'article n'en avance pas. Le cadre de décision, l'ordre de la checklist et les arbitrages sont des lectures de Deliver, signalés par « à notre avis », sans résultat chiffré ni exemple de compte réel.

Sources contrôlées le
Relu par
Claude (session Claude Code, 14 novembre 2026) contrôle croisé de la documentation éditeur, sources rouvertes en brut
Assistance IA
Oui
Sources
  1. help.klaviyo.com/hc/en-us/articles/115005228148
  2. help.klaviyo.com/hc/en-us/articles/360052794352
  3. help.klaviyo.com/hc/en-us/articles/360052793012
  4. help.klaviyo.com/hc/en-us/articles/360045012632
  5. help.klaviyo.com/hc/en-us/articles/18631098703515
  6. help.klaviyo.com/hc/en-us/articles/4406796460443
CR
Charlotte Rodrigues · CRM Lead, Deliver. Une question sur cet article ? charlotte@agence-deliver.com

Besoin d'appliquer ça à votre stack ?

30 minutes avec Charlotte. On audit votre setup CRM en direct, on chiffre l'opportunité, vous repartez avec un plan d'attaque.

Réserver 30 minutes →