Paramètres avancés de l’expérience

Dynamic Yield vous permet d’affiner le comportement de distribution, l’attribution des conversions et les paramètres de test A/B de toutes les variations de chaque expérience. Tous les paramètres ne sont pas pertinents pour tous les types de campagne, et les options de test A/B n’apparaissent pas du tout, sauf si votre expérience utilise la méthode d’attribution de test A/B et a plus d’une variation.

Pour accéder aux paramètres de l’expérience, cliquez sur l’icône des paramètres lorsque vous créez ou modifiez une expérience.

Les paramètres suivants sont affichés :

Options de test A/B

Les paramètres suivants ne sont visibles que si vous définissez la méthode d’attribution comme étant un test A/B et que vous définissez plus d’une variation. Si vous effectuez un test A/B et que suffisamment de données sont collectées, une variation gagnante est déclarée. La variation gagnante est choisie après avoir démontré qu’il s’agit de la meilleure variation avec une validité statistique élevée, qui devrait le rester à long terme. Ces paramètres influencent le mode de déclaration de la variation gagnante.

Niveau de signification de variation gagnante

Ce paramètre définit le score minimum de probabilité requis comme étant le meilleur pour déclarer une variation gagnante. Vous pouvez définir une valeur comprise entre 75 % et 99 % (la valeur par défaut est de 95 %). Un niveau de signification plus élevé réduit le risque de fausse déclaration, mais nécessite la collecte d’un plus grand nombre de données.

Durée minimale du test

Une variation gagnante n’est pas déclarée tant que cette période n’est pas écoulée depuis le début du test, même si l’une des variations a atteint la validité statistique requise. Cela permet de s’assurer qu’aucune hypothèse n’est faite sur l’ensemble des utilisateurs à partir de données des visiteurs du week-end ou de tout autre trafic lié à l’heure. Nous recommandons d’effectuer un test pendant deux semaines avant de désigner une valeur gagnante.

Notification par e-mail

Par défaut, la personne qui a créé l’expérience sera notifiée par e-mail lors de la déclaration d’une variation gagnante. Vous pouvez toutefois modifier cette option en ajoutant ou en supprimant des adresses E-mail.

Paramètres avancés

Permanence des variations

Variation stickiness (Permanence des variations) détermine si la variation initiale servie au visiteur continuera d’être servie dans les interactions futures avec l’expérience, ou si le système prendra de nouvelles décisions concernant la variation à servir. Il existe trois options :

• Not sticky (Non permanente) : chaque fois que l’utilisateur est éligible à une expérience, le système sélectionne une variation sans tenir compte des sélections précédentes.
• Sticky for the session (Permanente pour la session) : une seule variation est sélectionnée pour l’utilisateur pendant toute la durée de sa session, même s’il y a plusieurs interactions de l’expérience. Par exemple, si un utilisateur revient sur une page contenant une bannière de contenu Dynamic au cours de la même session, la variation de la session est servie.
• Sticky for the user (Fixe pour l’utilisateur) (multi-session) : une seule variation est choisie pour le visiteur. Pendant toute la durée de la campagne, la même variation est servie à chaque utilisateur. 

La configuration de « Stickiness » (Permanence) affecte les paramètres du rapport. Par exemple, si vous souhaitez optimiser les achats et que l’expérience est définie sur « Sticky for the session » (Permanente pour la session), le métrique principal devient Purchases per Session (Achats par session). Si la variation est définie sur « Sticky for the user » (Permanente pour l’utilisateur), le premier métrique devient « Purchases per User » (Achats par utilisateur).

Le taux de clics (CTR) n’est cependant pas affecté, puisqu’il rapporte toujours les clics par impression.

Pratiques conseillées

En fonction de votre méthode d’attribution du trafic, il existe deux règles empiriques à suivre pour sélectionner la permanence de la variation :

• A/B test (Test A/B) : Lors de l’exécution d’un test A/B/n (par exemple, un test de changement de mise en page), sélectionnez « Sticky for the user » (Permanente pour l’utilisateur), puis proposez au visiteur la même variation pendant toute la durée du test. L’utilisation de « Sticky for the session » (Permanente pour la session) peut augmenter la taille de l’échantillon (car il y a probablement plus de sessions que de visiteurs), mais elle peut potentiellement fausser l’attribution, notamment pour une conversion effectuée après plusieurs sessions. Par exemple, un visiteur peut ajouter un produit au panier après avoir reçu la variation A, mais effectuer l’achat quelques jours plus tard après avoir reçu la variation B. Le système attribuera l’achat à la dernière variante servie et ignorera les variations vues précédemment, susceptibles d’influencer (ou pas) le comportement du visiteur. En effet, vous ne pouvez pas exécuter de tests A/B avec l’option « Non permanente ».
• Dynamic Allocation (Allocation dynamique) : Lorsque vous allouez votre trafic de façon dynamique, sélectionnez « Sticky for the session » (Permanente pour la session). Cela permet au moteur Dynamic Yield d’analyser les performances de la variation en cours de session et de servir la variation la plus performante pour les sessions suivantes (à tous les visiteurs). Si vous n’avez pas besoin de maintenir une expérience utilisateur cohérente, ou si vous avez un retour d’informations immédiat (CTR, par exemple) de votre métrique principal, vous pouvez utiliser l’option « Not Sticky » (Non permanente). L’option « Sticky for the user » (Permanente pour l'utilisateur) n’est pas prise en charge par la règle Dynamic Allocation (Allocation dynamique), car elle est contraire à l’objectif d’optimisation. Vous n’avez aucun intérêt à maintenir une variation perdante uniquement parce qu’elle a été servie précédemment.

Fenêtre d’attribution

La fenêtre d’attribution est la période au cours de laquelle les conversions et les revenus des visiteurs sont attribués à une variation donnée dans les rapports d’expérience. Par exemple, si un utilisateur clique sur une variation le lundi, puis effectue un achat le mardi, l’achat est attribué à la variation si la fenêtre est définie sur un jour ou plus. 

Démarrer la fenêtre d’attribution

Dans la plupart des cas, nous recommandons de démarrer la fenêtre d’attribution lorsque l’utilisateur reçoit une variation. Cependant vous souhaitez peut-être affiner ce déclencheur :

• Variation is served (default) (La variation est servie (par défaut)) : La fenêtre d’attribution commence dès que le visiteur reçoit une variation, même si la variation est « en bas de page » et que l’utilisateur ne l’a pas réellement vue.
• Variation is served (La variation est servie et cliquée) : La fenêtre d’attribution commence lorsque le visiteur clique sur la variation (ne s’applique ni à Custom Action, ni à Visual Edit ni aux jeux de variables mobiles). En sélectionnant ce paramètre d’attribution, les résultats de l’expérience s’affichent :
  • Tous les utilisateurs, sessions, clics et impressions, indépendamment du clic d’attribution.
  • Les pages vues, les événements et les métriques de revenus qui ont eu lieu après le clic.
• Variation is served and an event is triggered (La variation est servie et un événement est déclenché) : La fenêtre d’attribution commence lorsqu’un événement personnalisé est déclenché. Vous pouvez indiquer n’importe quel événement pour déclencher le début de la fenêtre d’attribution. Lorsque vous sélectionnez ce paramètre d’attribution, les résultats de l’expérience s’affichent :
  • Tous les utilisateurs, toutes les sessions, tous les clics et toutes les impressions, indépendamment du clic d’attribution.
  • Les pages vues, les événements et les métriques de revenus qui ont eu lieu après l’événement d’attribution (y compris ce même événement d’attribution).

Pratique conseillée

Utilisez les options Variation is served and clicked  (La variation est servie et cliquée) et Variation is served and event is triggered (La variation est servie et l’événement est déclenché) lorsque peu de visiteurs sont censés participer au test. Par exemple, lorsque le test affecte un élément situé au bas de la page et que les utilisateurs n’ont pas l’intention de faire défiler la page vers le bas pour le voir.

Fermer la fenêtre d’attribution

• Session ends (Fin de la session) : Les conversions et les revenus sont crédités sur une variation tant qu’ils ont eu lieu après le début de la fenêtre d’attribution et avant la fin de la session.
• 1 Day (1 jour) : Les conversions et les revenus sont crédités sur une variation tant qu’ils ont eu lieu après le début de la fenêtre d’attribution et avant que la journée soit écoulée.
• 7 Days (7 jours) : Les conversions et les revenus sont crédités sur une variation tant qu’ils ont eu lieu après le début de la fenêtre d’attribution et avant qu’une période de 7 jours soit écoulée.

Pratiques conseillées

• Sélectionnez Session ends (Fin de la session) lorsque vous attendez la plupart des conversions au cours de la même session. Le volume de conversions créditées à des jours différents en sera réduit alors que la variation n’a peut-être même pas été servie. Le choix de l’attribution de session permet d’atteindre plus rapidement la signification statistique.
• Sélectionnez 7 Days (7 jours) si vous prévoyez de nombreuses conversions dans des sessions différentes. Par exemple, si vous vendez des réfrigérateurs, vos visiteurs prendront probablement leur décision d’achat après plusieurs visites, comparaisons de prix et évaluations. L’utilisation de la fenêtre d’attribution de session peut ne pas couvrir les conversions ultérieures. Ainsi,  les données « perdues » prolongent le délai nécessaire pour atteindre la signification statistique.
• La fenêtre d’attribution peut être interrompue lorsque le paiement implique une redirection vers un autre domaine (PayPal, Shop Pay, ou autre), la pratique conseillée est donc d’utiliser une alternative à « Session ends » (Fin de la session) dans ce cas.