Bei einem A/B-Test vergleichen Sie zwei Newsletter-Varianten, die sich in einem Merkmal unterscheiden. Sie teilen die Empfänger möglichst zufällig auf und legen vor dem Versand fest, welche Kennzahl Ihre Frage beantwortet.
Wie planen Sie einen fairen Vergleich?
Wenn Sie zwei Betreffzeilen testen, lassen Sie Absender, Inhalt und Versandzeitpunkt möglichst gleich. Die Gruppen sollten sich nicht überschneiden. Wählen Sie eine Kennzahl, die zum Ziel passt. Erfasste Öffnungen sind wegen automatischer Bildabrufe nur eingeschränkt aussagekräftig. Wenn es um Besuche auf einer Angebotsseite geht, kann die Klickrate passender sein.
Beispiel ohne eindeutigen Gewinner
Ein Team versendet zeitnah zwei Varianten an zufällig gebildete Gruppen mit je 100 zugestellten E-Mails. Es hat vorab die Klickrate als Kennzahl gewählt. Variante A hat fünf eindeutige Klicker, Variante B sechs. Das sind fünf und sechs Prozent. Ein einzelner zusätzlicher Klick bei diesen Gruppengrößen ist noch kein belastbarer Hinweis auf einen Gewinner.
Wie setzt mailfino eine A/B-Aufteilung um?
In mailfino können Sie eine Liste in zwei Teilmengen aufteilen. Bereiten Sie die Varianten getrennt vor, versenden Sie sie separat und vergleichen Sie danach die vorab gewählte Kennzahl.
