Quando si esegue un test A/B, si apre il motore di analisi predittiva Dynamic Yield in background, alla ricerca di opportunità di personalizzazione nascoste.
Il motore di analisi predittiva risolve uno dei maggiori problemi dei test A/B: l'ottimizzazione per gli utenti medi. Nei test A/B, si seleziona una variante vincente in base alle preferenze della maggior parte degli utenti. Ciò significa che se la maggior parte degli utenti preferisce significativamente la variante A, al termine del test, verrà proposta quella opzione a tutti gli utenti. Tuttavia, spesso ci sono sottoinsiemi di utenti con preferenze specifiche che non sono la variante vincente. In questo modo, puoi migliorare i tuoi risultati se offri una variante diversa a quel gruppo di utenti che preferiscono un'opzione meno popolare.
Il targeting predittivo garantisce che anche i test che si concludono senza un vincitore assoluto possano avere la possibilità di generare un aumento proponendo una variante "perdente" a un segmento di pubblico che in realtà la preferisce.
L'immagine seguente mostra un test che ha portato a un aumento complessivo del -51,7%. Il targeting predittivo suggerisce una nuova linea d'azione: se la variante A viene mostrata al pubblico del traffico referral mentre tutti gli altri utenti visualizzano il gruppo di controllo, l'aumento atteso sarà del +11,4%.
Come funziona
- L'analisi predittiva viene eseguita in background su ogni test A/B, analizzando tutti i segmenti di pubblico e facendo emergere chi preferisce una variante "perdente". Solo le linee d'azione con sufficiente significatività vengono valutate e classificate in ordine di priorità in termini di significatività e di miglioramento atteso.
- Quando viene identificata un'opportunità, l'utente riceverà una notifica nel report e tramite e-mail. La tabella mostra i gruppi di targeting, le variazioni che devono essere mostrate a ciascuno di essi e l'aumento che si prevede di generare con ogni linea d'azione.
- È possibile accettare l'opportunità di personalizzazione cliccando su APPLICA, se vuoi approfittare di questa opportunità. A quel punto, si può verificare una delle seguenti situazioni:
- Se il gruppo di controllo è una delle varianti:
si aggiunge una nuova condizione di targeting, che limita la pubblicazione dell'esperienza, in modo che coloro che hanno preferito il gruppo di controllo non visualizzino questa esperienza. - Se il gruppo di controllo non è una delle varianti:
l'esperienza viene duplicata e viene aggiunta una nuova condizione di targeting alla nuova esperienza. Tutte le varianti tranne una verranno messe in pausa in un'unica esperienza e tutte le opzioni tranne una (differente) verranno messe in pausa nell'altra esperienza, quindi, a un gruppo di targeting verrà mostrata una variante e al resto l'altra.
- Se il gruppo di controllo è una delle varianti:
- Clicca sul menu Opzioni aggiuntive (3 puntini) per visualizzare le seguenti alternative:
- Rivedi prima di pubblicare: ti porterà al modulo di setup da cui creare varianti cliccando APPLICA. Ciò ti permetterà di ricontrollare la configurazione e apportare eventuali modifiche prima della pubblicazione.
- Report di dettaglio: ti permetterà di vedere le performance dei segmenti di pubblico rilevanti. Vedrai che c'è un leader diverso quando applichi filtri al report.
- Clicca su Più opzioni sotto la tabella per visualizzare eventuali linee d'azione aggiuntive e quellla comune nel test A/B (che proporrà la variante principale a tutti gli utenti).
Significatività statistica delle opportunità di personalizzazione
Le opportunità di personalizzazione richiedono un'elevata significatività per garantire suggerimenti validi. La linea d'azione suggerita deve essere migliore rispetto al proporre la variante principale a tutti gli utenti di almeno l'1%, con un intervallo di confidenza di almeno il 95%.