O Dynamic Yield possui três modos para determinar como alocar suas variações entre seu tráfego: testes A/B, alocação dinâmica, e alocação de afinidade. Este artigo descreve os modos disponíveis, quando utilizá-los e como empregar um grupo de controle para medir o sucesso.
Modos de alocação de tráfego
Teste A/B: Você define a porcentagem de tráfego alocada para cada variação. Quando dados suficientes são coletados, uma variação vencedora é declarada, e você pode servir confiantemente a variação vencedora para todos os usuários.
Alocação dinâmica: O Dynamic Yield decide qual porcentagem de seus usuários receberá cada variação. Ele utiliza uma estratégia de "bandit de vários braços", o que significa que variações que tiveram melhor desempenho no passado recebem mais tráfego. A melhor variação é gradualmente servida para mais e mais de seus visitantes à medida que os dados são coletados. Para mais detalhes, consulte Alocação Dinâmica.
Afinidade do usuário: O Dynamic Yield determina automaticamente qual variação servir para cada usuário com base em suas preferências atuais em tempo real e no perfil de afinidade, e nos atributos de afinidade com os quais cada variação está marcada.
Escolhendo um modo de alocação de tráfego
Use o teste A/B se desejar encontrar uma variação para uso a longo prazo ou testar uma hipótese com o objetivo de obter informações para testes futuros. O resultado de um teste A/B é um vencedor estatisticamente significativo, permitindo decisões confiantes.
Recomenda-se usar este modo ao testar um novo layout de página, a cor de um botão de chamada para ação ou uma estratégia de recomendação para as páginas de seus produtos.
Use alocação dinâmica se quiser otimizar suas conversões o mais rápido possível ou quando a vida útil da variação for curta. Se não tiver tempo para coletar dados e esperar por um vencedor, a Alocação Dinâmica permite direcionar mais tráfego para variações de melhor desempenho em questão de horas.
Este modo é útil para itens como um banner principal atualizado semanalmente ou campanhas de tempo limitado (como uma venda de Black Friday).
Use afinidade do usuário para áreas que são relativamente perenes em termos de espaço no site ou aplicativo e tipo de conteúdo. Como a alocação de afinidade do usuário serve a variação ótima para cada usuário, não há um teste inerente entre variações, mas sim entre o método de alocação e o grupo de controle.
Utilizando um grupo de controle
Um grupo de controle direciona parte do seu tráfego para uma variação escolhida aleatoriamente ou não serve nenhuma variação, dependendo das suas configurações. Você precisará de um grupo de controle se quiser medir o aumento gerado por qualquer experiência do Dynamic Yield.
Por padrão, todas as experiências incluem um grupo de controle com alocação de tráfego de 0%. Para habilitar um grupo de controle, aumente a porcentagem de alocação de tráfego. Normalmente, grupos de controle entre 5-15% são suficientes.
Nos testes A/B, nenhuma variação é servida para o tráfego no grupo de controle.
Nos modos de alocação dinâmica e alocação de afinidade do usuário, você pode especificar como o tráfego do grupo de controle é direcionado:
- Sem experiência: Visitantes no grupo de controle não recebem a experiência do Dynamic Yield. Esta opção não pode ser combinada com uma métrica principal de CTR ou uma janela de atribuição que começa quando uma variação é servida e clicada.
- Variação aleatória: Visitantes no grupo de controle recebem uma variação aleatória, não guiada por um algoritmo de otimização ou personalização.