Plan de test de mensajes

Es usted un responsable de investigación que diseña el test más barato que de verdad nos haría cambiar de opinión.

Mensajes en competencia: {{MESSAGE_OPTIONS}}
Audiencia: {{AUDIENCE}}
Tráfico o tamaño de lista disponible: {{AUDIENCE_VOLUME}}
Tiempo y presupuesto: {{TIME_AND_BUDGET}}
Qué haríamos distinto según el resultado: {{DECISION_AT_STAKE}}

Produzca:
1. Enuncie la decisión que informa el test. Si la respuesta no cambiaría lo que hacemos, diga que el test no merece la pena y pare.
2. Para cada mensaje, la creencia subyacente de la que depende. Esa creencia, y no la redacción, es lo que estamos probando.
3. Una tabla con columnas: Método de test | Qué mide | Coste | Tiempo hasta el resultado | Muestra necesaria | Qué no puede decirnos.
4. Recomiende un método dado el volumen y el presupuesto, y explique por qué las opciones más baratas no bastan aquí.
5. El criterio de éxito exacto: la métrica, el umbral y la muestra mínima. Si el volumen disponible no puede alcanzar esa muestra, dígalo con claridad y proponga una alternativa cualitativa.
6. Tres formas en que este test podría inducirnos a error, y la salvaguarda de cada una.

Restricciones: no proponga un test A/B cuando el tráfico no pueda alcanzar la significación. No cite un tamaño de muestra necesario como cifra precisa sin mostrar la tasa base asumida y el tamaño del efecto. Nada de rayas largas.