Hallo zusammen,
ich beschäftige mich seit einer Weile mit Tests auf meinen Affiliate-Seiten und merke immer wieder, dass ich an den gleichen Stellen stolpere. Das Problem ist eigentlich simpel: Ich will zu viel auf einmal testen.
Aktuell hab ich zwei Seiten, auf denen ich gerade gleichzeitig an der Produktbeschreibung, der Platzierung der Links und der Überschrift herumexperimentiere. Und nach drei Wochen weiß ich ehrlich gesagt nicht mehr, was jetzt eigentlich welche Wirkung hatte. Das fühlt sich mehr wie raten an als wie testen.
Mich interessiert, wie ihr das handhabt – vor allem wenn ihr mehrere Seiten parallel betreibt. Habt ihr eine feste Regel, wie viele Variablen ihr in einem Zeitraum anfasst? Oder dokumentiert ihr das so detailliert, dass ihr auch bei mehreren gleichzeitigen Änderungen noch nachvollziehen könnt, was was bewirkt hat?
Ich frage auch deshalb, weil der Sommer für mich eigentlich eine gute Phase wäre um ruhig und methodisch zu arbeiten – weniger Ablenkung, etwas mehr Zeit. Aber momentan hab ich das Gefühl, ich produziere nur Datenchaos statt echte Erkenntnisse.
Was sind eure Erfahrungen damit? Gibt es irgendeine einfache Faustregel, die euch geholfen hat, strukturierter vorzugehen?
Danke schon mal,
Thomas
Kenne das Problem gut. Ich hab mir das angewöhnt: eine Variable pro Test, Zeitraum fix (bei mir mindestens 2 Wochen), und nichts anderes anfassen auf der Seite in der Zeit. Klingt nach wenig Fortschritt, aber die Erkenntnisse sind tatsächlich verwertbar.
Ich betreibe gerade ein paar Seiten rund um Sommerthemen – Klimaanlagen, Ventilatoren usw. – und da ist die Versuchung besonders groß, schnell viel zu ändern weil Traffic gerade da ist. Hab ich aber bewusst nicht gemacht. Lieber eine saubere Erkenntnis als fünf unklare.
Ein Tipp noch: Ich notiere vor jedem Test kurz die Ausgangssituation und meine konkrete Hypothese. 'Wenn ich X ändere, erwarte ich Y, weil Z.' Das zwingt einen dazu, wirklich nur eine Sache zu ändern. Wenn man die Hypothese nicht sauber formulieren kann, ist der Test meistens schon zu komplex. Hat mir viel geholfen.
Was Thomas beschreibt kenne ich gut, habe selbst lange so gearbeitet und am Ende hatte ich viele Daten aber keine Erkenntnisse.
Ich gehe das inzwischen deutlich systematischer an. Vor jedem Test lege ich in einer einfachen Tabelle fest: welche Seite, welche Variable, was ändere ich konkret, was ist der Ausgangswert, und ab wann werte ich aus. Erst wenn dieser Eintrag vollständig ist, mache ich die Änderung live. Das klingt bürokratisch, ist es aber nicht wirklich – dauert fünf Minuten.
Was ich außerdem gelernt habe: Änderungen auf laufenden Seiten während ich gleichzeitig technisch an der Infrastruktur arbeite zu testen ist eine schlechte Idee. Man weiß dann nie ob eine Veränderung der Zahlen am Content liegt oder an irgendeiner technischen Anpassung im Hintergrund. Das hatte ich eine Zeit lang und die Daten aus diesem Zeitraum sind für mich weitgehend unbrauchbar.
Für den Sommer würde ich empfehlen: eine Seite, ein Test, klare Laufzeit. Lieber weniger testen aber dafür verlässliche Ergebnisse mitnehmen.
Ich seh das ehrlichgesagt ein bisschen anders als TechMike. Die strikte Ein-Variable-Regel ist theoretisch schön, in der Praxis aber manchmal schwer durchzuhalten – gerade wenn man wenig Traffic hat und Wochen braucht bis man überhaupt signifikante Zahlen sieht.
Ich hab in einem anderen Thread schon mal über A/B-Tests mit geringem Traffic geschrieben – da ist das Kernproblem oft nicht die Anzahl der Variablen, sondern dass man zu früh Schlüsse zieht.
Mein Ansatz: Ich teste maximal zwei Dinge, aber trenne sie sauber auf verschiedene Seiten oder Zeitfenster. Nicht ideal, aber besser als gar keine Struktur. Und ich führe ein einfaches Tabellen-Log, in das ich jede Änderung mit Datum eintrage. Retroaktiv kann ich dann oft noch rückschließen was wann passiert ist.
Ehrlich gesagt: eine Variable gleichzeitig, fertig. Mehr macht bei den meisten von uns keinen Sinn weil wir weder das Traffic-Volumen noch die Zeit haben um das sauber auszuwerten. Ich hab neben meinem Hauptjob abends vielleicht ne Stunde für sowas, da will ich nicht noch Energie damit verschwenden Datenchaos zu entwirren.