Stichprobengröße und Testdauer realistisch planen
Nutzen Sie Power-Berechnungen basierend auf Basisraten, erwarteter Effektgröße und gewünschter Signifikanz. Berücksichtigen Sie Saisonalität, Feiertage und Kampagnen, die Tests verfälschen könnten. Planen Sie genügend Zeit für Lerneffekte, denn Gamification braucht oft mehrere Zyklen, bis Mechaniken verstanden sind. Achten Sie auf Cluster-Randomisierung bei Filialen, um Übersprechen zu minimieren. Prüfen Sie regelmäßig Datenqualität ohne auf Ergebnisse zu schauen. Lieber ein Test, der belastbar ist, als drei Experimente, die schnelle, aber irreführende Scheinwahrheiten produzieren.