Growthbook kannte ich noch nicht, danke Lisa – das schau ich mir mal an.

Ich kann noch Flagsmith ergänzen, ist auch Open Source für Feature-Flags und einfache Tests. Für komplexere Setups eher nicht geeignet, aber als Einstieg ganz ok.

Zur ursprünglichen Frage von Marcus: Die Trafficgrenze die du genannt hast stimmt im Prinzip, aber es kommt auch stark auf die Conversion-Rate an. Wenn deine Seite z.B. 5% CVR hat brauchst du weniger Traffic für signifikante Ergebnisse als wenn du bei 0,5% CVR bist. Es gibt gute Calculators online wo man das vorher durchrechnen kann – einfach mal 'Sample Size Calculator A/B Test' googlen. Ich mach das immer bevor ich einen Test starte, sonst testet man manchmal wochenlang ohne jede Chance auf ein sauberes Ergebnis.

Das hab ich früher auch falsch gemacht und damit Zeit verschwendet, gerade bei meinen saisonalen Projekten wo das Zeitfenster eh schon eng ist.

Kurz und knapp: Schau dir Convert.com an. Teurer als nichts, aber professioneller als die meisten Wordpress-Plugins und die haben einen fairen Einstiegspreis für kleinere Projekte.

Zur Trafficfrage – da stimme ich Thomas zu. Ich hab das bei meinen Klimatisierungs-Seiten gemerkt (hatte das schonmal im Klimatisierungs-Thread angesprochen): Im Sommer kaufen die Leute halt Klimageräte anders als im Winter, das Nutzerverhalten ist komplett anders. Ein A/B-Test der im Juli läuft und im August ausgewertet wird kann trotzdem Mist sein weil du Äpfel mit Birnen vergleichst.

Wenn du gerade wenig Traffic hast, würd ich erstmal auf Heatmaps setzen um die offensichtlichsten Fehler zu finden, bevor du A/B-Tests anfängst. Das bringt bei kleinen Sites erstmal mehr.

Ich seh das ein bisschen anders als TrafficRebell – man kann auch mit wenig Traffic anfangen zu testen, solange man realistische Erwartungen hat und die Tests lang genug laufen lässt. Für mich war das sogar lehrreich, weil ich überhaupt erstmal ein Gefühl dafür bekommen hab wie Testen funktioniert.

Für kostenlose Einstiege würd ich Clarity von Microsoft empfehlen – kein klassisches A/B-Tool, aber Heatmaps und Session-Recordings gratis, und da sieht man schon sehr viel wo Nutzer abspringen. Das hat mir persönlich mehr gebracht als mancher A/B-Test.

Beim eigentlichen A/B-Testing nutze ich Growthbook – das ist Open Source, kann selbst gehostet werden und kostet so erstmal nichts. Für WordPress gibt's auch eine Integration. Bisschen technischer Aufwand beim Einrichten, aber wenn man das einmal hat läuft's.

Ich hab übrigens gerade meine Sites für den Sommer etwas runtergefahren – hatte das im Traffic-Thread schon angesprochen, die Urlaubszeit macht sich bei mir immer deutlich bemerkbar. Tests starte ich dann lieber wieder im September wenn der Traffic stabiler ist.

Gute Frage, das Thema hatten wir hier noch nicht so direkt. Ich nutze seit einer Weile Nelio AB Testing als WordPress-Plugin – das ist tatsächlich eine der brauchbarsten Alternativen seit dem Google-Optimize-Ende. Für kleinere Affiliate-Sites reicht die kostenlose Version für einfache Tests meistens aus, bei mehr Funktionen wird's kostenpflichtig, aber die Preise sind noch halbwegs vertretbar.

Zur Trafficfrage: Ja, das stimmt leider. Unter ca. 500-1000 Besucher pro Monat wird's statistisch wirklich dünn. Du brauchst genug Datenpunkte damit das Ergebnis nicht reiner Zufall ist. Ich hab früher mal Tests nach zwei Wochen abgebrochen weil ich dachte, Variante B gewinnt klar – und drei Wochen später war's andersrum. Geduld ist da das A und O.

Falls du übrigens saisonale Nischen betreibst: Ich hab im Seasonal-Nischen-Thread schon geschrieben, dass man Tests im Sommer manchmal verzerrt kriegt weil das Nutzerverhalten sich in der Urlaubszeit stark verändert. Also wenn du jetzt im Juni startest, lieber die Ergebnisse mit Herbst-Daten vergleichen.