A/B Test
Vergleiche zwei Varianten einer Lösung, um herauszufinden, welche besser funktioniert bzw. die gesteckten Ziele besser erreicht.
Methode
Definiere aufgrund von einem gegebenen Ziel zwei Varianten, um dieses Ziel zu erreichen. Teste die Leistung von den beiden Varianten an einer echten Nutzergruppe, um Erkenntnisse darüber zu gewinnen, welche Variante besser geeignet ist, um das Ziel zu erreichen.
Vorgehen
- Definiere, welches Ziel du erreichen möchtest.
- Definiere, wie du die Zielerreichung messen willst.
- Erstelle zwei Varianten, die sich im Weg zum Ziel unterscheiden.
- Teile die Zielgruppe auf. In der Regel sollte diese gleichmässig aufgeteilt werden (50% Variante A, 50% Variante B) um möglichst aussagekräftige Resultate zu erhalten. Eine andere Aufteilung ist auch denkbar, aber nur bei grossen Zielgruppen sinnvoll.
- Messe das Verhalten der Benutzer und die Zielerreichung.
- Vergleiche die Ergebnisse der beiden Varianten und leite daraus Erkenntnisse ab.
Ergebnis
Daten zur Performance beider Varianten.
Tipps
Stelle sicher, dass die Zielgruppe repräsentativ ist. Baue die Tests so, dass die Tests aussagekräftig sind. Wenn mehrere Dinge zeitgleich in nur einer Variante verändert werden, kann dies zu uneindeutigen Resultaten führen. Wenn Beispielsweise bei einem Online-Shop in der Variante B die Produktnavigation und der Checkout-Prozess zeitgleich angepasst werden und der erreichte Umsatz als Messgrösse verwendet wird, dann kann bei einem perfekt gestalteten Checkout-Prozess der Umsatz dennoch geringer sein, wenn die Produkte wegen einer schlechten Navigation nicht mehr gefunden werden.
Wähle die Messwerte sinnvoll und aussagekräftig. Verwende Tools, um die A/B-Tests durchzuführen. Diese bieten die Möglichkeiten für die Messung des Benutzerverhaltens "out-of-the-box".
Ressourcen
- A/B-Testing mit Fokus auf Benutzerschnittstellen (aus dem M322)
https://gitlab.com/ch-tbz-it/Stud/m322/-/blob/KES/theorie/testing/ab_testing.md