Il rapporto Cronologia test A/B fornisce una panoramica del tuo programma di test A/B (esperienze con l'assegnazione di test A/B e almeno 2 varianti o 1 variante e un gruppo di controllo). Il rapporto ti aiuta a rispondere a domande quali:
- Quali sono stati i test A/B più riusciti?
- Quanti test hanno portato a un aumento delle conversioni?
- Quanti test hai eseguito sul tuo sito?
- Il numero attuale di test è uguale a quello dei trimestri precedenti?
Download del rapporto
Puoi scaricare il rapporto Cronologia test A/B facendo clic su Cronologia test A/B nel riquadro della Dashboard Test A/B.
Metriche del rapporto
Il rapporto è un file CSV in cui ogni riga rappresenta una variante di una Versione di test all'interno di un'Esperienza che usa il metodo di assegnazione dei test A/B e ha almeno due varianti attive.
Colonna | Descrizione |
---|---|
Nome campagna | Il nome della campagna a cui appartiene l'esperienza. |
Nome esperienza. | Il nome dell'esperienza. |
ID versione | L'ID interno della versione del test |
Data di inizio | La data in cui è stata avviata la versione del test. |
Data di fine | La data in cui è terminata la versione del test oppure Ancora in corso. |
Giorni di esercizio | La durata della versione del test in giorni. |
Nome variante |
Il nome della variante. |
Impressioni | La somma delle impressioni della variante di questa versione. |
Clic | La somma dei clic della variante di questa versione. |
Metrica primaria | La metrica primaria viene usata per determinare la variante vincente del test A/B. La metrica primaria influisce sui calcoli Probabilità di essere la migliore, Aumento di livello e Dichiarazione della vincente. |
Tipo di normalizzazione | Il tipo di denominatore utilizzato per normalizzare la metrica. Ad esempio, utenti, sessione, impressioni e acquisti. |
Normalizzazione | Il conteggio del denominatore. |
Totali metriche | Il numero o la somma della metrica. |
Totali metrica escluse le anomalie | Il numero o la somma della metrica, escluse le anomalie. |
Dichiarazione | Se la variante è stata dichiarata vincente o meno. |
Dichiarazione escluse le anomalie | Se la variante è stata dichiarata vincente o meno in base ai dati, escluse le anomalie. |
Rapporto | Un link diretto al rapporto sull'esperienza. |
Nota: sono incluse solo le versioni di test attivi dopo il 1° gennaio 2018 . Per i clienti che usano i data center UE di Dynamic Yield, i test devono essere stati attivi dopo il 28 gennaio 2019 per poter essere inclusi.
Analisi esecutiva del programma di test A/B – Modello Excel
Il modello Analisi di riepilogo del programma di test A/B fornisce un livello visivo al file CSV grezzo della cronologia dei test A/B che è possibile scaricare dalla console di Dynamic Yield. Il modello può aiutarti a condividere il successo e l'impatto del tuo programma di test A/B all'interno dell'organizzazione, a ottenere nuove e preziose informazioni e a identificare altre opportunità di ottimizzazione.
Per iniziare, scarica il modello Riepilogo del programma di test A/B:
https://www.dynamicyield.com (2})
Il modello include macro per l'elaborazione di alcuni dati. Quando apri il file per la prima volta, potresti vedere un messaggio che ti chiede di confermare l'affidabilità dell'origine delle macro. Fai clic su Abilita macro.
Dopo l'apertura del modello , potresti vedere un secondo messaggio in alto nella tabella. Fai clic su Abilita contenuto.
Cosa contiene il modello Riepilogo del programma di test A/B?
Il modello contiene 4 fogli: il foglio del riepilogo, che visualizza la dashboard; un foglio che contiene i dati grezzi della cronologia dei test A/B e 2 fogli aggiuntivi in cui vengono eseguiti le manipolazioni dei dati e i calcoli dietro la dashboard.
La dashboard di riepilogo comprende 5 aree che forniscono informazioni preziose:
- KPI che riassumono il successo della cronologia dei test A/B, nonché benchmark per vedere la tua posizione rispetto a centinaia di marche che fanno parte della base clienti di Dynamic Yield:
- Test: il numero di versioni di test A/B test (se hai modificato un test in esecuzione durante il test, verrà visualizzato in 2 righe).
- Test in esecuzione: il numero di test che sono al momento in esecuzione.
- Media di test mensili: rapporto tra i test totali e il numero totale di mesi dal primo lancio di test.
- Tasso di apprendimento: rapporto tra i test con risultati conclusivi e il numero totale di test. Questo valore può dare un'idea di alto livello del fatto che i test A/B siano stati impostati correttamente in termini di personalizzazione e ottimizzazione. Ad esempio, regole di targeting eccessivamente restrittive o un numero troppo elevato di varianti possono rendere più difficile per il sistema arrivare a conclusioni in tempi ragionevoli.
- Tasso di vittoria: rapporto tra i test con risultati conclusivi e una variante vincente del gruppo non di controllo rispetto al numero totale di test. Qui, oltre ai criteri di personalizzazione e ottimizzazione, hai un'indicazione della percentuale di test con un gruppo di controllo e se le tue ipotesi iniziali erano ben definite.
- Incremento medio: una media di tutti incrementi delle metriche primarie del test A/B. Si tratta di un'indicazione generale del successo delle varianti rispetto ai loro gruppi di controllo.
- Un grafico che visualizza il volume e la cadenza dei nuovi test lanciati.
- Una sezione di test degni di nota in termini di impatto sui ricavi (generati e potenziali). Usa questa sezione per tornare indietro e capire cosa ha fatto muovere l'ago della bilancia.
- Un promemoria dei test lanciati di recente e delle voci di azione facoltative da applicare nella console di Dynamic Yield.
- Una ripartizione di alcuni KPI in base alle metriche primarie definite nei tuoi test.
Come caricare i tuoi dati
- Scarica il file CSV Cronologia dei test A/B dalla homepage della console del tuo sito.
- Apri il modello e vai alla scheda Importa i dati qui. Seleziona tutti i dati e fai clic su Elimina. Quando si apre l'avviso, fai clic su Sì.
- Vai alla scheda File nel menu superiore di Excel e fai clic su Importa
- Nella finestra di dialogo Importa, seleziona File CSV e fai clic su Importa.
- Nella finestra di navigazione, individua il file CSV scaricato e fai clic su di esso. Quindi, fai clic su Ottieni dati. Viene visualizzata la Procedura guidata di importazione del testo.
- Nel passaggio 1 della Procedura guidata di importazione, imposta l'origine file suggerita su Unicode (UTF-8) e fai clic su Avanti.
- Nel passaggio 2 della Procedura guidata di importazione, assicurati di selezionare Virgola (e deseleziona Scheda se necessario). Fai clic su Avanti.
- Nel passaggio 3 della Procedura guidata di importazione, fai clic su Fine.
Viene visualizzata la finestra di dialogo Importa dati.
Importante: assicurati che i nuovi dati importati si trovino nella prima cella della tabella =$A$1. Fai clic su OK.
I dati di base sono ora aggiornati. - Per completare il processo di importazione, vai alla scheda Calcoli e individua le 2 tabelle pivot (hanno entrambi l'intestazione azzurra). Fai clic con il tasto destro del mouse su un punto qualsiasi del primo intervallo della tabella pivot, quindi seleziona Aggiorna. Ripeti questo passaggio per la seconda tabella pivot.
Il tuo foglio di riepilogo è ora aggiornato con i dati CSV ed è pronto per l'ispezione.