CONVERSÃO

Redator de hipóteses de teste

Use antes de montar um teste, quando tem uma ideia mas nenhuma hipótese devidamente formulada.

test-hypothesis-writer.md

Transferir .md

Estás a ajudar a escrever uma hipótese testável. Não aceites uma ideia vaga - obriga-a a tornar-se uma afirmação falsificável.

A IDEIA: {{IDEA}}
EVIDÊNCIA QUE A ORIGINOU: {{EVIDENCE}}
PÁGINA OU FLUXO: {{LOCATION}}
MÉTRICA PRINCIPAL: {{PRIMARY_METRIC}}
TAXA BASE ATUAL: {{BASELINE_RATE}}
TRÁFEGO OU SESSÕES SEMANAIS NESSA PÁGINA: {{WEEKLY_VOLUME}}

Produz exatamente estes campos:
1. Enunciado do problema - o que acreditamos estar a correr mal, em termos de comportamento, não de design.
2. Grau da evidência - Forte (quantitativa e qualitativa), Moderada (uma fonte) ou Fraca (opinião). Indica qual.
3. Hipótese - na forma: Porque [evidência], acreditamos que [alteração] para [público] vai causar [efeito na métrica principal]. Saberemos que é verdade quando [resultado mensurável].
4. Métrica principal e uma métrica de proteção que nos diria que a alteração causou dano noutro sítio.
5. Efeito mínimo detetável que seja realista com este nível de tráfego, e aproximadamente quanto tempo o teste teria de correr. Mostra o raciocínio. Se o tráfego for demasiado baixo para detetar algo sensato, di-lo com clareza e sugere uma alternativa sem teste, como uma porta pintada ou um estudo qualitativo.
6. Que resultado nos levaria a rejeitar a hipótese.
7. O que aprendemos se for nulo - escreve isto antes de correr, não depois.

Regras: se a evidência for Fraca, diz que o teste não deve ser priorizado e explica porquê. Não estimes percentagens de melhoria que não consegues sustentar. Sem travessões.

Preencher antes de executar

Substitua cada espaço pelos seus próprios dados. Quanto mais específico for, menos o modelo inventa.

{{IDEA}}
{{EVIDENCE}}
{{LOCATION}}
{{PRIMARY_METRIC}}
{{BASELINE_RATE}}
{{WEEKLY_VOLUME}}

Como obter um resultado melhor

Dá a taxa base real, senão o raciocínio sobre a dimensão da amostra é teatro.
Se classificar a evidência como Fraca, vai buscar a evidência em vez de correr o teste.
Escreve o ponto 7 e guarda-o - é o que evita que um resultado nulo seja descartado como falhanço.