Spezialgebiet · A/B-Testing
A/B-Testing: wissen statt vermuten.
Erfahrung und Best Practices stimmen oft, aber nicht immer. Mit einem A/B-Test messen Sie, ob eine Anpassung wirklich besser funktioniert, bevor Sie sie auf der Website des gesamten Systems umsetzen.
Wann
Zeit für A/B-Testing, wenn …
- darüber diskutiert wird, welche Version einer Seite besser funktioniert
- Sie eine große Änderung auf allen Standortseiten umsetzen wollen
- Ihre Website genug Besucher für verlässliche Zahlen hat
- Anpassungen bisher nach Gefühl gemacht werden
Was wir tun
Von der Hypothese zu einer Entscheidung, die Sie begründen können.
- 01
Hypothese
Wir formulieren, was wir ändern, was wir erwarten und warum.
- 02
Aufbau
Wir legen die Zielmessung, die Laufzeit und die nötige Besucherzahl fest.
- 03
Varianten
Wir bauen die Testversion innerhalb der Markenrichtlinien, neben der aktuellen Version als Kontrolle.
- 04
Laufzeit
Der Test läuft lange genug, um tägliche und wöchentliche Schwankungen abzufangen.
- 05
Analyse
Wir prüfen, ob der Unterschied statistisch verlässlich ist und was er für alle Kanäle bedeutet.
- 06
Entscheidung
Funktioniert die Variante, setzen wir sie um. Funktioniert sie nicht, haben wir trotzdem etwas gelernt.
A/B-Testing für alle Kanäle
Eine bessere Conversion darf nicht anderswo kosten.
Eine Anpassung, die die Conversion auf einer Seite erhöht, fühlt sich wie ein Gewinn an. Aber eine Änderung kann sich auch negativ auf andere Kanäle auswirken. Etwa eine kürzere Seite, die besser konvertiert, aber bei Google schlechter gefunden wird.
Deshalb schauen wir bei jedem A/B-Test nicht nur auf die Conversion auf der Seite selbst, sondern auch auf den Effekt auf den Rest. Erst wenn es unterm Strich besser ist, setzen wir die Anpassung um.
Was ein A/B-Test ist
Zwei Versionen, ein Gewinner.
Bei einem A/B-Test vergleichen Sie zwei Varianten einer Seite, E-Mail oder Anzeige. Die Hälfte der Besucher sieht die aktuelle Version (Kontrollgruppe), die andere Hälfte die neue Version (Testgruppe). Danach schauen Sie, welche Version beim vorab festgelegten Ziel besser abschneidet.
Dabei kann es um große Unterschiede gehen, etwa einen anderen Seitenaufbau, oder um etwas Kleines, wie den Text auf einem Button. Bei einem System testen Sie oft eine Vorlage, die für alle Standorte gilt. Ein gutes Ergebnis wirkt dann überall.
Ehrlich gesagt: Nicht jede Website hat genug Traffic für einen verlässlichen Test. Ist das so, sagen wir es und wählen einen anderen Ansatz.
Teil von
Jedes Fachgebiet arbeitet für das gesamte Franchisesystem.
Dieses Fachgebiet ist Teil von Hybrid und On-demand und wird für die Marke und für jeden Standort eingesetzt. Kein Franchisesystem, aber trotzdem eine Frage? Dann können Sie es auch einzeln buchen.
Weitere Fachgebiete
Häufige Fragen
Fragen zu A/B-Testing.
Wie lange sollte ein A/B-Test laufen?
Das hängt von der Besucherzahl und der gewünschten Verlässlichkeit ab. Lassen Sie einen Test auf jeden Fall lange genug laufen, um Unterschiede zwischen Tagen und Wochen abzufangen. Zu frühes Stoppen verzerrt das Bild.
Wie viele Besucher brauche ich?
Das legen Sie vorab anhand des erwarteten Effekts, des gewünschten Konfidenzniveaus und der aktuellen Conversion fest. Dafür gibt es Rechner. Wir rechnen es für Sie aus, bevor der Test startet.
Was testet man am besten?
Elemente mit großem Einfluss auf Ihr Ziel: den Text eines Call-to-Action, den Aufbau einer Seite, die Länge eines Formulars. Wählen Sie, was zu Ihrem Ziel passt.
Wie werten Sie die Ergebnisse aus?
Mit statistischen Methoden, um festzustellen, ob der Unterschied zwischen Kontroll- und Testgruppe verlässlich ist, unter Beachtung der Konfidenzintervalle. Und wir schauen auf den Effekt auf andere Kanäle.
Erst ein gutes Gespräch, dann ein Plan.
In einer Stunde besprechen wir, wo Sie stehen und welche Chancen wir sehen. Passt es nicht, sagen wir das auch.