Ein Test mit zu wenig Budget pro Variante liefert nicht weniger Erkenntnis als ein gut dimensionierter Test. Er liefert eine falsche Erkenntnis, nur mit derselben Selbstsicherheit vorgetragen. Der Unterschied zwischen einem Test, der etwas beweist, und einem, der Zufall für ein Ergebnis hält, ist meistens eine einzige Rechnung, die vor dem Start nie gemacht wurde.
Die Faustregel: das Zwei- bis Dreifache des Ziel-CPA
Statt einer festen Euro-Zahl pro Variante ist die verlässlichere Faustregel ein Vielfaches des eigenen Ziel-CPA: Jede Variante braucht mindestens das Zwei- bis Dreifache des Ziel-CPA an Budget, bevor ein einzelner Kauf oder ein einzelner Zufallstreffer das Ergebnis verzerren kann. Bei einem Ziel-CPA von 40 € liegt das Mindestbudget je Variante damit bei 80 bis 120 €, nicht bei einer fixen Zahl, die für jeden Shop gleich wäre.
Drei Budget-Stufen je nach Testziel
Nicht jeder Test verfolgt dasselbe Ziel, und nicht jeder braucht dieselbe Tiefe. Aus verbreiteten Praxiswerten der Branche lassen sich drei Stufen ableiten, abhängig davon, was der Test beweisen soll:
Verbreitete Praxiswerte pro Variante, keine Meta-Vorgabe: mit jeder Stufe steigt die Aussagekraft, und mit ihr das nötige Budget.
| Stufe | Was sie beweist | Budget je Variante |
|---|---|---|
| Signal-Test | Reicht für einen ersten CTR- oder Hook-Rate-Vergleich | 50 bis 100 € |
| CPA-Vergleich | Genug Volumen, um CPA-Unterschiede zwischen Varianten zu erkennen | 200 bis 500 € |
| Belastbarer A/B-Test | Statistisch tragfähiges Ergebnis für eine Budgetentscheidung | 500 bis 1.000 € |
Ein Rechenweg mit Beispiel
Beispielrechnung: Ziel-CPA 40 €, drei Varianten sollen gegeneinander getestet werden, das Ergebnis soll für eine echte Budgetentscheidung tragfähig sein, nicht nur ein erstes Signal liefern. Nach der Zwei- bis Dreifach-Faustregel braucht jede Variante mindestens 80 bis 120 €, macht bei drei Varianten 240 bis 360 € für die gesamte Testrunde. Reicht das Budget nur für die Signal-Stufe, sollte die Erwartung entsprechend heruntergeschraubt werden: das Ergebnis zeigt dann eine Tendenz bei CTR oder Hook-Rate, keine belastbare CPA-Entscheidung.
Alternative: Spend-Multiplikator statt fixem CPA-Wert
Wo kein verlässlicher Ziel-CPA vorliegt, etwa bei einem neuen Produkt ohne Historie, hilft ein Multiplikator auf den durchschnittlichen Bestellwert als Ersatzrechnung: Jede Variante bekommt Budget in Höhe des ein- bis dreifachen durchschnittlichen Bestellwerts, bevor überhaupt ein erstes Signal bewertet wird. Das verhindert, dass ein einzelner zufälliger Kauf, egal wie groß oder klein, das gesamte Ergebnis kippt.
Warum zu wenig Budget schlimmer ist als kein Test
Ein Test ganz auszulassen ist ehrlich: es gibt kein Ergebnis, also wird auch keine falsche Sicherheit erzeugt. Ein Test mit zu wenig Budget dagegen liefert ein Ergebnis, das aussieht wie ein Beweis, und ist meistens Rauschen. Eine einzelne zufällige Conversion in einem kleinen Datensatz kann eine Variante scheinbar klar gewinnen lassen, obwohl der Unterschied bei mehr Volumen verschwindet. Wer auf dieser Grundlage skaliert, verstärkt einen Zufallstreffer, nicht eine echte Erkenntnis.
Checkliste vor Testbeginn
- Ziel-CPA festgelegt. Ohne diesen Wert lässt sich kein Mindestbudget berechnen.
- Testziel definiert. Signal, CPA-Vergleich oder belastbarer A/B-Test, jede Stufe braucht ein anderes Budget.
- Budget je Variante mit der Zwei- bis Dreifach-Regel berechnet, nicht das Gesamtbudget einfach durch die Variantenzahl geteilt.
- Reales Budget mit dem berechneten Mindestbudget verglichen. Reicht es nicht, lieber weniger Varianten testen als alle mit zu wenig Volumen.
Wo diese Rechnung an ihre Grenzen kommt
Bei sehr niedrigem Ziel-CPA, etwa bei günstigen Impulskäufen, kann die Zwei-bis-Dreifach-Regel ein Mindestbudget ergeben, das kleiner ist als das, was für überhaupt genug Impressionen und Auslieferung nötig wäre. In diesem Fall zählt der höhere der beiden Werte. Saisonale Schwankungen bei CPM und CPA verzerren zudem jede Momentaufnahme, ein Test über eine sehr volatile Woche wie Black Friday sollte entsprechend vorsichtiger interpretiert werden. Wie viele Konzepte und Varianten insgesamt in eine Testrunde gehören, unabhängig vom Budget je Variante, steht in Die Testmatrix: Konzepte gegen Varianten. Wie sich Exploration, Konvergenz und Verteidigung über mehrere Monate hinweg unterschiedlich viel Budget verdienen, steht in Exploration, Konvergenz, Verteidigung.
Reicht ein festes Budget von 100 € pro Variante für jeden Shop?
Nein, das hängt vom Ziel-CPA ab. Bei einem hohen Ziel-CPA von etwa 100 € wäre das deutlich zu wenig, bei einem sehr niedrigen Ziel-CPA kann es bereits ausreichen.
Was, wenn das Gesamtbudget für keine der drei Stufen reicht?
Dann eher weniger Varianten mit ausreichendem Budget je Variante testen als mehr Varianten mit zu wenig. Ein vollständiges kleines Ergebnis schlägt ein halbfertiges großes.
Zählt das Budget für die Produktion mit in das Testbudget?
Nein, die Faustregel bezieht sich ausschließlich auf das Media-Budget, also den Betrag, der tatsächlich in die Auslieferung der Anzeige fließt, nicht auf Produktionskosten.
Wie lange sollte eine Testrunde mit diesem Budget laufen?
Das hängt von der Auslieferungsgeschwindigkeit ab, meistens reichen fünf bis sieben Tage, damit auch die Lernphase der Kampagne abgeschlossen ist, bevor das Ergebnis bewertet wird.
Was mache ich ohne verlässlichen Ziel-CPA?
Den Spend-Multiplikator auf den durchschnittlichen Bestellwert als Ersatzrechnung verwenden, ein- bis dreifacher Bestellwert je Variante, bis genug eigene Daten für einen echten Ziel-CPA vorliegen.