Bei einem A/B-Test für den E-Mail-Betreff schicken Sie zwei Betreffzeilen an zwei zufällig gebildete, gleich große Teilgruppen Ihrer Liste. Alles andere bleibt gleich: Inhalt, Absender und Versandzeit. Danach messen Sie, welche Variante mehr Öffnungen und vor allem mehr Klicks bringt, und schicken die Gewinnerin an den Rest der Liste. Das klingt einfach. In der Praxis scheitern viele Tests trotzdem an drei Dingen: zu kleinen Gruppen, zu früh ausgerufenen Siegern und der falschen Kennzahl. Hier lesen Sie, wie Sie diese Fallen umgehen, Schritt für Schritt und mit einem Rechenbeispiel.
Kurz gesagt
- Testen Sie pro Durchlauf nur eine Änderung am Betreff, sonst wissen Sie hinterher nicht, was gewirkt hat.
- Planen Sie mindestens 500 bis 1.000 Empfänger pro Variante ein und lassen Sie den Test mindestens 4, besser 24 Stunden laufen.
- Entscheiden Sie nicht allein nach der Öffnungsrate: Klicks und Conversions zeigen, ob der Betreff die richtigen Leser angezogen hat.
- Kleine Unterschiede von ein, zwei Prozentpunkten sind bei kleinen Listen meist Zufall. Rechnen Sie kurz nach, bevor Sie eine Regel daraus machen.
- Dokumentieren Sie jeden Test. Erst die Sammlung vieler Ergebnisse zeigt, was bei Ihrer Zielgruppe wirklich zieht.
Inhaltsverzeichnis
- Betreffzeile und A/B-Test: Was hinter den Begriffen steckt
- Was Sie im Betreff testen können
- So führen Sie den Test durch: sieben Schritte
- Wie viele Empfänger Sie brauchen
- Welche Kennzahl über den Sieger entscheidet
- Ein Beispiel aus dem Alltag eines Dienstleisters
- Typische Fehler und wie Sie sie vermeiden
- Unsere Sicht: Ein Betreff-Test ist nur so gut wie das System dahinter
- Betreff-Tests mit Funnel-tunnel umsetzen
- Häufige Fragen zum A/B-Test von Betreffzeilen
- Quellen
Betreffzeile und A/B-Test: Was hinter den Begriffen steckt
Die Betreffzeile ist der Text, den Ihre Abonnenten im Posteingang sehen, bevor sie die Nachricht öffnen. Neben dem Absendernamen ist sie oft das Entscheidende dafür, ob eine E-Mail überhaupt geöffnet wird. Sie sagt, worum es geht, und muss in wenigen Wörtern einen Grund zum Öffnen liefern. Ergänzt wird sie vom Preheader, dem kurzen Vorschautext, den viele Mail-Programme direkt neben oder unter dem Betreff anzeigen.
Ein A/B-Test, auch Split-Test genannt, vergleicht zwei Versionen systematisch. Statt im Team darüber zu diskutieren, ob „Ihre Einladung zum Webinar“ oder „Haben Sie am Donnerstag 30 Minuten Zeit?“ besser ankommt, lassen Sie Ihre Empfänger entscheiden. Ein Teil der Liste bekommt Variante A, ein gleich großer Teil Variante B. Weil die Gruppen zufällig gebildet werden und sich sonst nichts unterscheidet, lässt sich ein Unterschied im Ergebnis auf den Betreff zurückführen.
Der Betreff eignet sich besonders gut als Einstieg ins Testen. Sie müssen kein neues Design bauen und keinen Text umschreiben, die Änderung ist in einer Minute erledigt, und Sie bekommen schon nach Stunden ein Ergebnis.
Was Sie im Betreff testen können
Fast jede Eigenschaft einer Betreffzeile lässt sich gegeneinander testen. Wichtig ist, dass sich die beiden Varianten in genau einem Merkmal unterscheiden. Diese Ansätze liefern in der Praxis die aufschlussreichsten Ergebnisse:
| Merkmal | Variante A | Variante B | Was Sie lernen |
|---|---|---|---|
| Frage oder Aussage | „Wie viel Zeit kostet Sie Ihre Buchhaltung?“ | „So sparen Sie 3 Stunden Buchhaltung pro Woche“ | Ob Neugier oder konkreter Nutzen stärker zieht |
| Länge | „Neu: Online-Terminbuchung“ | „Neu: Kunden buchen Termine jetzt selbst, rund um die Uhr“ | Wie viel Text Ihre Leser im Posteingang aufnehmen |
| Personalisierung | „Ihr Angebot ist da“ | „Frau Weber, Ihr Angebot ist da“ | Ob der Name Aufmerksamkeit bringt oder abgegriffen wirkt |
| Zahl im Betreff | „Tipps für mehr Bewertungen“ | „5 Tipps für mehr Google-Bewertungen“ | Ob Konkretheit die Öffnung fördert |
| Dringlichkeit | „Unser Herbstangebot“ | „Nur bis Freitag: unser Herbstangebot“ | Ob zeitlicher Druck hilft oder nervt |
| Emoji | „Ihre Einladung zum Sommerfest“ | „🎉 Ihre Einladung zum Sommerfest“ | Ob ein Symbol in Ihrer Branche passt |
| Tonalität | „Wir haben unser Angebot erweitert“ | „Das haben Sie sich gewünscht, jetzt ist es da“ | Ob sachlich oder persönlich besser ankommt |
Denken Sie bei der Länge an die Darstellung auf dem Smartphone: Dort wird ein langer Betreff oft abgeschnitten. Prüfen Sie beide Varianten vor dem Versand in einer Testmail auf dem eigenen Handy. Wenn der entscheidende Teil am Ende steht und verschwindet, testen Sie nicht die Formulierung, sondern einen Darstellungsfehler.
So führen Sie den Test durch: sieben Schritte
-
Hypothese aufschreiben. Jeder Test beginnt mit einer klaren Vermutung, etwa: Eine fragende Betreffzeile erzielt eine höhere Öffnungsrate als eine aussagende. Notieren Sie auch, warum Sie das vermuten. So lernen Sie aus dem Ergebnis, auch wenn Ihre Annahme falsch war.
-
Nur eine Variable ändern. Wenn B zugleich kürzer ist, ein Emoji trägt und den Namen enthält, wissen Sie am Ende nicht, welcher Teil gewirkt hat. Absender, Preheader, Inhalt und Versandzeit bleiben identisch.
-
Zielgruppe festlegen. Testen Sie innerhalb eines Segments, das sich ähnlich verhält, zum Beispiel aktive Kunden oder neue Interessenten. Mischen Sie keine Gruppen, die ohnehin sehr unterschiedlich reagieren. Wie Sie solche Gruppen sauber bilden, zeigt unser Leitfaden zur E-Mail-Segmentierung für KMU.
-
Gruppen zufällig aufteilen. Teilen Sie nach dem Zufall, nicht alphabetisch und nicht nach Anmeldedatum, denn ältere Kontakte verhalten sich anders als neue. Bei großen Listen hat sich ein Testanteil bewährt: Je ein Teil bekommt A oder B, der Rest wartet auf die Siegervariante. Bei kleinen Listen teilen Sie die gesamte Liste 50 zu 50.
-
Erfolgskennzahl vorher festlegen. Entscheiden Sie vor dem Versand, woran Sie den Sieger messen: Öffnungsrate, Klickrate oder Conversions. Wer erst nach dem Test die passende Kennzahl sucht, findet immer eine, die seine Lieblingsvariante bestätigt.
-
Laufzeit abwarten. Lassen Sie den Test mindestens 4 Stunden, besser 24 Stunden laufen. Viele Empfänger lesen ihre Mails erst am Abend oder am nächsten Morgen. Ein Zwischenstand nach einer Stunde bildet vor allem die Schnellleser ab.
-
Auswerten, ausrollen, dokumentieren. Prüfen Sie, ob der Unterschied groß genug ist (dazu gleich mehr), schicken Sie die Gewinnerin an die restliche Liste und tragen Sie Hypothese, Varianten, Gruppengrößen und Ergebnis in eine einfache Tabelle ein.
Wie viele Empfänger Sie brauchen
Die Faustregel lautet 500 bis 1.000 Empfänger pro Variante. Warum das eher die Untergrenze ist, zeigt eine kurze Rechnung.
Angenommen, Sie schicken je 500 Mails mit Betreff A und B. A erreicht 25 Prozent Öffnungsrate, also 125 Öffnungen, B erreicht 27 Prozent, also 135 Öffnungen. Das sieht nach einem klaren Sieg für B aus. Rechnet man die übliche Zufallsschwankung bei dieser Gruppengröße aus, liegt sie aber bei knapp 3 Prozentpunkten. Ein Unterschied von 2 Punkten liegt also mitten im Bereich, den Sie auch bei zwei identischen Betreffzeilen sehen könnten.
Erst wenn der Abstand deutlich größer ist, etwa 25 gegen 32 Prozent, oder die Gruppen deutlich größer sind, können Sie ziemlich sicher sein, dass der Betreff den Unterschied gemacht hat. Als grobe Orientierung:
- Unter 1.000 Kontakte gesamt: Teilen Sie die ganze Liste 50 zu 50 und werten Sie dieselbe Testfrage über mehrere Aussendungen aus. Gewinnt die Frageform fünfmal hintereinander, ist das aussagekräftiger als ein einzelner knapper Sieg.
- 1.000 bis 5.000 Kontakte: Ein 50-zu-50-Split pro Aussendung ist sinnvoll. Achten Sie auf große Unterschiede statt auf Nachkommastellen.
- Ab etwa 5.000 Kontakten: Hier lohnt sich das Modell mit Testgruppen: Je 1.000 Empfänger bekommen A oder B, der Rest erhält einige Stunden später die Siegervariante.
Viele E-Mail-Werkzeuge zeigen Ihnen an, ob ein Ergebnis statistisch belastbar ist. Fehlt diese Anzeige, helfen frei verfügbare Signifikanzrechner: Sie geben Versandmenge und Öffnungen beider Varianten ein und sehen, wie wahrscheinlich ein Zufallsergebnis ist.
Welche Kennzahl über den Sieger entscheidet
Beim Betreff liegt die Öffnungsrate als Messgröße nahe, denn der Betreff wirkt vor dem Öffnen. Sie hat aber Schwächen. Datenschutzfunktionen mancher Mail-Programme laden Bilder und damit das Zählpixel automatisch, sodass Öffnungen gezählt werden, die gar keine sind. Auch Bildblocker verfälschen die Zahl, nur in die andere Richtung. Die Öffnungsrate ist deshalb ein Hinweis, kein Urteil.
Verlässlicher ist es, mehrere Kennzahlen zusammen zu betrachten:
| Kennzahl | Was sie zeigt | Wann sie entscheiden sollte |
|---|---|---|
| Öffnungsrate | Wie viele Empfänger die Mail (vermutlich) geöffnet haben | Als erster Hinweis, wenn beide Varianten gleich viele Klicks bringen |
| Klickrate | Anteil der Empfänger, die einen Link anklicken | In den meisten Fällen die bessere Hauptkennzahl |
| Klick-zu-Öffnungs-Rate | Anteil der Öffner, die auch klicken | Zeigt, ob der Betreff hält, was er verspricht |
| Conversion-Rate | Käufe, Buchungen oder Anfragen nach dem Klick | Bei Angebots- und Verkaufsmails die entscheidende Größe |
| Abmeldungen und Spam-Beschwerden | Ob ein Betreff Leser verärgert | Als Warnsignal, selbst wenn die Öffnungsrate steigt |
Ein typisches Muster: Der reißerische Betreff gewinnt bei den Öffnungen, verliert aber bei den Klicks, weil die Leser enttäuscht sind. Ein ehrlicher, konkreter Betreff öffnet vielleicht etwas seltener, bringt aber die Menschen in die Mail, die sich wirklich für das Thema interessieren. Bei einer Verkaufsmail zählt am Ende der Umsatz, nicht die Öffnung.
Achten Sie außerdem auf die Zustellbarkeit. Wenn eine Variante auffällig schlechter abschneidet, kann es daran liegen, dass bestimmte Wörter oder Schreibweisen öfter im Spamordner landen. Was Sie dagegen tun können, erklärt unser Beitrag zur E-Mail-Zustellbarkeit.
Ein Beispiel aus dem Alltag eines Dienstleisters
Eine Physiotherapie-Praxis mit 2.400 Newsletter-Kontakten möchte ihre neue Online-Terminbuchung bekannt machen. Die Hypothese des Teams: Ein Betreff, der den konkreten Nutzen nennt, bringt mehr Klicks auf den Buchungslink als eine reine Neuigkeitsmeldung.
- Variante A: „Neu bei uns: Online-Terminbuchung“
- Variante B: „Termin buchen ohne Warteschleife, auch sonntags“
Die Liste wird zufällig in zwei Gruppen zu je 1.200 Kontakten geteilt, beide Mails gehen am Dienstag um 9 Uhr raus. Als Hauptkennzahl legt das Team die Klickrate auf den Buchungslink fest, die Auswertung erfolgt nach 24 Stunden.
Angenommen, A erreicht eine etwas höhere Öffnungsrate, B aber deutlich mehr Klicks auf den Buchungslink und mehr tatsächliche Buchungen. Dann gewinnt B, auch wenn A in der Öffnungsstatistik vorn liegt. Das Team notiert: „Konkreter Nutzen im Betreff schlägt Neuigkeit, bei Bestandspatienten.“ Beim nächsten Test prüft es, ob das auch für Neukontakte gilt. So wächst aus Einzeltests Schritt für Schritt ein Regelwerk für die eigene Zielgruppe.
Typische Fehler und wie Sie sie vermeiden
Die häufigsten Fehler sind mehrere Variablen gleichzeitig zu testen, zu kleine Gruppen, zu früh abgebrochene Tests und fehlende Dokumentation. Dazu kommen ein paar Stolpersteine aus der Praxis:
- Den Sieger zu früh ausrufen. Kurz nach dem Versand ist ein Ergebnis noch nicht belastbar. Legen Sie die Laufzeit vorher fest und halten Sie sich daran.
- Unterschiedliche Versandzeiten. Geht A um 8 Uhr und B um 14 Uhr raus, testen Sie die Uhrzeit, nicht den Betreff.
- Fremde Ergebnisse übernehmen. Studien und Blogartikel liefern Ideen, aber Trends gelten nicht automatisch für jede Liste. Was bei einem Onlineshop wirkt, kann bei einer Steuerkanzlei verpuffen.
- Einmalige Ausreißer verallgemeinern. Ein Feiertag, eine Hitzewelle oder ein Branchenereignis können ein Ergebnis verzerren. Wiederholen Sie wichtige Tests.
- Den Preheader vergessen. Er erscheint direkt neben dem Betreff. Lassen Sie ihn in beiden Varianten gleich, sonst testen Sie zwei Dinge auf einmal.
- Ergebnisse nicht anwenden. Ein Test, der in keiner künftigen Kampagne auftaucht, hat nur Zeit gekostet.
Wer A/B-Tests auch auf Landingpages fährt, findet in unserer QA-Checkliste für Landingpage-Tests dieselben Prinzipien für die Seite nach dem Klick. Betreff und Landingpage zusammen entscheiden, ob aus einer Öffnung ein Kunde wird.
Unsere Sicht: Ein Betreff-Test ist nur so gut wie das System dahinter
Wir sehen bei vielen kleinen und mittelständischen Unternehmen dasselbe Muster: Der Wille zum Testen ist da, aber die Daten liegen verstreut. Der Newsletter läuft über ein Tool, die Kontakte über ein anderes, die Terminbuchung über ein drittes, und die Umsätze stehen im Shop. Dann lässt sich zwar die Öffnungsrate zweier Betreffzeilen vergleichen, aber kaum noch, welche Variante am Ende Termine und Verkäufe gebracht hat.
Genau deshalb haben wir Funnel-tunnel als All-In-One-Lösung gebaut. E-Mail-Marketing, Kontaktverwaltung, Terminbuchung, Shop, Automatisierungen und Analysewerkzeuge liegen in einer Plattform. So sehen Sie den Weg vom Betreff bis zum Abschluss an einem Ort, statt Exportdateien zusammenzukleben.
Unser Rat: Fangen Sie klein an. Ein Test pro Monat, sauber dokumentiert, bringt mehr als zehn hektische Experimente. Und messen Sie, was für Ihr Geschäft zählt. Ein Betreff, der Neugier weckt, aber keine Buchung bringt, ist kein Gewinner.
Thomas
Betreff-Tests mit Funnel-tunnel umsetzen
Wenn Sie Ihre Newsletter, Kontakte und Verkaufsprozesse nicht mehr über mehrere Insellösungen steuern wollen, ist unsere All-In-One-Software der nächste Schritt. Sie vereint Website, Funnel, E-Mail-Marketing, Terminbuchung, Shop und Kundenmanagement mit Automatisierungen und Auswertungen, und sie ist so gestaltet, dass Sie auch ohne technische Vorkenntnisse schnell starten.
Unser Support-Team begleitet Sie beim Einstieg. Für den Aufbau Ihrer ersten Kampagne hilft Ihnen außerdem unsere Anleitung Newsletter erstellen in klaren Schritten, und weitere Grundlagen finden Sie in unseren Best Practices für E-Mail-Marketing.
Häufige Fragen zum A/B-Test von Betreffzeilen
Was gehört in den Betreff einer E-Mail?
Der Betreff sagt in wenigen Wörtern, worum es geht und warum sich das Öffnen lohnt. Gute Betreffzeilen sind konkret, ehrlich und passen zum Inhalt der Mail. Der wichtigste Teil gehört an den Anfang, weil lange Zeilen auf dem Smartphone abgeschnitten werden.
Kann ich mehr als zwei Betreffzeilen gleichzeitig testen?
Ja, das nennt man A/B/n-Test. Jede zusätzliche Variante teilt Ihre Liste aber in kleinere Gruppen, und die Ergebnisse werden unsicherer. Bei Listen unter einigen tausend Kontakten bleiben Sie besser bei zwei Varianten.
Was ist eine Testmail und brauche ich sie für den A/B-Test?
Eine Testmail ist eine Probeversendung an Ihre eigene Adresse oder an Kollegen, bevor die echte Kampagne rausgeht. Sie ersetzt den A/B-Test nicht, gehört aber dazu: Prüfen Sie damit, ob beide Betreffzeilen auf Desktop und Smartphone vollständig und fehlerfrei angezeigt werden.
Wie oft sollte ich Betreffzeilen testen?
Ideal ist ein fester Rhythmus, etwa bei jeder größeren Aussendung oder einmal im Monat. Wichtiger als die Häufigkeit ist, dass Sie jede Erkenntnis notieren und in den nächsten Kampagnen anwenden. Nach einigen Monaten erkennen Sie klare Muster für Ihre Zielgruppe.
Quellen
A/B-Testing in E-Mails, Lazi Akademie
Testing Newsletter Subject Lines: What We Learned From 6 Months, MeetEdgar