„Der grüne Button hat sich besser angefühlt." Kennst du diesen Satz? Dann verbrennst du gerade Umsatz. Die Realität: Die meisten Website-Entscheidungen basieren auf Bauchgefühl – nicht auf Daten. A/B-Tests drehen das um. Aber nur, wenn du sie sauber aufsetzt. Sonst produzierst du Zahlen, die genauso falsch sind wie dein Bauchgefühl.
Warum die meisten A/B-Tests wertlos sind
Der häufigste Fehler heißt „Peeking": Du schaust nach drei Tagen rein, Variante B liegt vorn, du erklärst sie zum Sieger. Falsch. Frühe Zwischenstände sind Zufallsrauschen – kein Ergebnis.
- Zu früh gestoppt – der vermeintliche Sieger war statistisches Glück
- Zu wenig Traffic – der Test kann echte Unterschiede gar nicht erkennen
- Zu viele Kleinigkeiten – Button-Farbe statt Headline, Nuance statt Substanz
Ergebnis: Du triffst Entscheidungen auf Basis von Daten, die keine sind. Und wunderst dich, warum die „gewinnende" Variante live nichts bringt.
Was du vor jedem Test brauchst
Ein valider Test hat harte Voraussetzungen – keine davon ist verhandelbar:
- 95 % statistische Signifikanz (p-Wert unter 0,05) als Mindestmaß
- 100–500 Conversions pro Variante – nicht Besucher, Conversions
- Mindestens 2 volle Wochen Laufzeit, um Wochentags-Effekte auszugleichen
- Eine klare Hypothese mit erwartetem Uplift von 15 %+ – Kleinkram lohnt nicht
Wie du das reparierst, steht in Serverside Tracking: Rette deine Conversion-Daten.
Was A/B-Tests dir wirklich bringen
| Vorgehen | Entscheidungsbasis | Conversion-Effekt (6 Monate) |
|---|---|---|
| Bauchgefühl / Redesign | Meinung | Zufall, oft negativ |
| „A/B-Test" mit Peeking | Scheindaten | kein verlässlicher Lift |
| Sauberer A/B-Test | Statistik | +30–60 % Conversions |
Wer methodisch testet, holt über sechs Monate 30–60 % mehr Conversions aus demselben Traffic. Das ist kein Marketing-Versprechen – das ist der Unterschied zwischen Testen und Raten.
Was du zuerst testen solltest
Fang bei dem an, was den größten Hebel hat – nicht bei Farb-Nuancen:
- Headline – der erste Eindruck entscheidet über Bleiben oder Abspringen
- CTA-Text – „Jetzt kaufen" vs. konkreter Nutzen
- Hero-Bild & Reihenfolge der Benefits
- Ein einziges Seitenziel – Landingpages mit nur einem CTA konvertieren bis zu 266 % besser
Häufige Fragen
Wie lange muss ein A/B-Test laufen?
Mindestens zwei volle Wochen, damit Wochentags-Effekte ausgeglichen werden – auch wenn früher schon Signifikanz erreicht scheint. Besser sind 2 bis 4 Wochen über einen kompletten Geschäftszyklus.
Wie viel Traffic brauche ich?
Als Faustregel mindestens 1.000 Besucher und 100 bis 500 Conversions pro Variante. Unter 100 Conversions je Variante ist kein Ergebnis belastbar – der Test ist dann schlicht zu klein.
Was bedeutet 95 % Signifikanz?
Es heißt, dass der gemessene Unterschied mit 95 % Wahrscheinlichkeit real ist und nicht auf Zufall beruht (p-Wert unter 0,05). Erst ab diesem Niveau solltest du einen Sieger erklären.
Was ist der häufigste Fehler?
Das zu frühe Beenden, sobald eine Variante vorn liegt – genannt „Peeking". Frühe Zwischenstände sind Zufallsrauschen und führen zu falsch-positiven Ergebnissen und teuren Fehlentscheidungen.
Was sollte ich zuerst testen?
Die Elemente mit dem größten Hebel: Headline, CTA-Text, Hero-Bild und die Zahl der Seitenziele. Farb-Nuancen oder Mini-Copy-Änderungen bringen selten genug Uplift, um den Testaufwand zu rechtfertigen.
Fazit: Bauchgefühl ist der teuerste Berater
A/B-Tests richtig machen heißt: eine Hypothese, genug Traffic, volle Laufzeit, 95 % Signifikanz. Alles andere ist Kaffeesatzleserei mit extra Schritten.
Willst du wissen, welcher Test bei dir den größten Hebel hätte?
Potenzial prüfen