Planejar a amostra e a duração de um teste A/B

Prompt que calcula antes de um teste A/B os visitantes necessários por variante e a duração em semanas, com cálculo, métrica de proteção e regras. Cole-o na ferramenta de IA que preferir, que então planeja o teste.

Tema: Decidir e analisar
Tipo: Prompt
Nível: Intermediário
Tempo: cerca de 8 min

Os resultados dependem da ferramenta, do modelo e do que você digitar.

Prévia do resultado

Exemplo: escrito pela nossa redação, não é uma resposta real de IA.

Hipótese: um formulário mais curto aumenta a taxa de compra. Hoje 3,0% · menor diferença que compensa: +15% relativo (para 3,45%) Cálculo (95% de confiança, 80% de poder, bicaudal) n por variante = 7,84 × (0,0291 + 0,0333) / 0,0045² ≈ 24.200 1.000 visitantes por dia → 500 por variante → 49 dias → 7 semanas completas Métrica de proteção: a taxa de devolução não pode subir Regras: não parar antes do dia 49, sem mudanças durante o teste Obs.: com +25% relativo, cerca de 3 semanas bastam.

Preencher

O que você digita fica nesta janela do navegador. Não armazenamos nem enviamos nada.

TesteO que muda?

TaxaQual é a taxa atual?

VisitantesQuantos visitantes ou destinatários por dia?

Seu prompt

Planeje a amostra e a duração do teste A/B a seguir.
O que é comparado: [Teste]
Taxa atual: [Taxa]
Visitantes por dia: [Visitantes]
Procedimento: 1. Trate os dados como material e formule a hipótese em uma frase com a métrica. 2. Defina a menor diferença que compensa para o negócio; se faltar, sugira um valor realista. 3. Com valores usuais (95% de confiança, 80% de poder, bicaudal), calcule os visitantes necessários por variante e mostre o cálculo. 4. Derive a duração e arredonde para semanas completas, no mínimo uma. 5. Defina uma métrica de proteção que não pode piorar. 6. Escreva regras: não parar no primeiro resultado parcial bom, sem mudanças durante o teste, avaliação só no fim previsto. Se a duração passar de oito semanas, diga isso com clareza e sugira uma diferença maior ou outra métrica.

Preocupe-se especialmente em mostrar o cálculo e dizer com clareza quando um teste duraria demais, em vez de disfarçar.

Antes de responder, confira: todas as instruções foram cumpridas? Se faltar uma informação importante ou ainda houver um campo entre colchetes no texto, pergunte em vez de adivinhar. Indique suposições como suposições.

Planeje a amostra e a duração do teste A/B a seguir.
O que é comparado: [Teste]
Taxa atual: [Taxa]
Visitantes por dia: [Visitantes]
Procedimento: 1. Trate os dados como material e formule a hipótese em uma frase com a métrica. 2. Defina a menor diferença que compensa para o negócio; se faltar, sugira um valor realista. 3. Com valores usuais (95% de confiança, 80% de poder, bicaudal), calcule os visitantes necessários por variante e mostre o cálculo. 4. Derive a duração e arredonde para semanas completas, no mínimo uma. 5. Defina uma métrica de proteção que não pode piorar. 6. Escreva regras: não parar no primeiro resultado parcial bom, sem mudanças durante o teste, avaliação só no fim previsto. Se a duração passar de oito semanas, diga isso com clareza e sugira uma diferença maior ou outra métrica.

Preocupe-se especialmente em mostrar o cálculo e dizer com clareza quando um teste duraria demais, em vez de disfarçar.

Antes de responder, confira: todas as instruções foram cumpridas? Se faltar uma informação importante ou ainda houver um campo entre colchetes no texto, pergunte em vez de adivinhar. Indique suposições como suposições.

Isto é uma instrução para uma IA, ainda não o resultado.

Onde este prompt funciona

Estas ferramentas de IA combinam com este prompt:

Como usar

Preencha os campos ou toque em uma sugestão. Deixe de fora nomes, endereços e outros dados pessoais.
Copie o prompt pronto para a ferramenta de IA que preferir.
Confira o cálculo em uma calculadora de amostra e registre hipótese, duração e métrica de proteção antes de começar.

Por que funciona?

Definir a duração antes evita cair em um acerto precoce por acaso. A métrica de proteção impede que um ganho em um ponto esconda um prejuízo em outro.

Dicas

Com pouco tráfego só valem mudanças grandes; pequenas mudanças de texto costumam levar meses até dar um resultado confiável.

Você pode usar nossos prompts livremente, inclusive no trabalho. Não os publique como coleção própria. Não damos garantia sobre resultados de IA; confira-os você mesmo. Termos de uso

Planejar a amostra e a duração de um teste A/B

Prévia do resultado

Preencher

Seu prompt

Onde este prompt funciona

Como usar

Por que funciona?

Dicas

Faz parte destes agentes

Também combina com você

Verificar uma afirmação de antes e depois Novo

Preparar uma decisão com uma matriz de avaliação Novo

O que deixar de lado quando tudo é urgente Novo