Anmelden Kostenlos starten
SEO

Design eines SEO-Splittests

Für den Fall, dass jemand eine Template-Änderung auf die ganze Website ausrollen will und Sie vorher Belege wollen.

seo-split-test-design.md
.md herunterladen
Sie entwerfen einen messbaren Test für eine vorgeschlagene SEO-Änderung. Sie setzen die Änderung nicht um.

Die vorgeschlagene Änderung: {{PROPOSED_CHANGE}}
Betroffenes Template und wie viele URLs es verwenden: {{TEMPLATE_SCOPE}}
Baseline je URL, wöchentlich, so weit zurück wie vorhanden (Klicks, Impressionen, Position): {{BASELINE_DATA}}
Was das Team ausrollen kann und was nicht: {{DEPLOY_CONSTRAINTS}}

Geben Sie sechs nummerierte Abschnitte aus.

1. Die Hypothese in einem Satz: was {{PROPOSED_CHANGE}} verändert, welche Metrik sich bewegen soll, in welche Richtung und über welchen Mechanismus.
2. Designtabelle: Element | Wahl | Begründung. Behandeln Sie die Zuordnungseinheit, wie {{TEMPLATE_SCOPE}} aufgeteilt wird, die Größe der Kontrollgruppe, das Matching über den Baseline-Traffic, die primäre Metrik, das Messfenster und den Umgang mit Saisonalität.
3. Ob {{TEMPLATE_SCOPE}} und die in {{BASELINE_DATA}} sichtbare Streuung ausreichen, um ein Ergebnis zu lesen, auf das man hin handeln kann. Falls nicht, was ausreichen würde, und danach ein Vorher-Nachher-Design mit benannten Schwächen.
4. Risiken der Vermischung: interne Links zwischen Test und Kontrolle, websiteweite Releases, Verzögerung bei der Indexierung, andere Arbeiten im Messfenster.
5. Abbruchregeln, einschließlich des Ergebnisses, das gegen einen Rollout spricht.
6. Was am ersten Tag protokolliert werden muss, damit die Auswertung später möglich ist.

Vorgaben:
- Errechnen Sie keine Signifikanz und keine Teststärke aus Zahlen, die nicht in {{BASELINE_DATA}} stehen.
- Schließt {{DEPLOY_CONSTRAINTS}} eine Kontrollgruppe aus, sagen Sie klar, dass der Test keine Kausalität zeigt.

Vor dem Start ausfüllen

Ersetzen Sie jeden Platzhalter durch Ihre eigenen Angaben. Je genauer Sie sind, desto weniger erfindet das Modell.

  • {{PROPOSED_CHANGE}}
  • {{TEMPLATE_SCOPE}}
  • {{BASELINE_DATA}}
  • {{DEPLOY_CONSTRAINTS}}

So wird das Ergebnis besser

  1. Gleichen Sie Test und Kontrolle über den Baseline-Traffic ab, statt zufällig zu teilen, denn wenige URLs tragen die meisten Klicks.
  2. Frieren Sie andere Arbeiten an diesem Template für das Messfenster ein, sonst lässt sich das Ergebnis nie zuordnen.
  3. Vereinbaren Sie die Abbruchregeln mit der Person, die die Änderung will, vor dem Start und nicht nach der ersten schlechten Woche.