A/B-Testing Beratung

Roadmap

Hier werden die Optimierungsstrategie sowie die einzelnen Testingbereiche und -Themen definiert. Auch die grundlegende Testingvision – Wie möchten wir in Zukunft testen und was muss am Ende das Ziel sein. Dieser Prozess ist wichtig, da es sich wie ein Paradigma durch den gesamten Testingzyklus durchzieht.

Ein unternehmensweites Testing ist eine eigene Kultur. Auch das legen Sie in dieser Vision und Roadmap fest. Die Mitarbeiter:innen müssen abgeholt und befähigt werden, Ihre Ideen und Theorien einzubringen. Ohne diesen Support der Belegschaft gehen wichtige Denkanstöße und Innovationen verloren.

Darüber hinaus werden in der Roadmap Abhängigkeiten aufgedeckt und das grundlegende Setup bestimmt. Nicht immer kann auf der Homepage  eine neue Kampagnen getestet, oder Kataloge miteinander vergleichen werden. Über das Zusammenspiel zwischen den Distributionskanälen und der IT wird der bestmöglichste Zeitraum stets gefunden. Dabei kann die Dauer einzelner Tests über ein schlankes Modelldesign reduziert werden. Oder aber man parallelisiert Onsite-Kampagnen auf den verschiedenen Homepageebenen.

Testpriorisierung

Wie bereits erwähnt bringen Mitarbeiter:innen viele sehr gute Ideen ein, die Ihr Unternehmen weiter nach vorne bringen. Allerdings können nicht alle Hypothesen gleichzeitig getestet werden. Diese müssen vielmehr vorab gesammelt, gebündelt und priorisiert werden.

Hier empfiehlt es sich ein interdisziplinäres Team aus Mitarbeitenden einzusetzen, um über die Priorisierung einen Testzeitplan zu erstellen. Die Tests werden nun unter anderem nach Wichtigkeit, Wirkung und Dauer gewichtet und anschließend nach Priorisierung sortiert.

Aufsetzen von Testhypothesen

In diesem Schritt gelangen Sie von der Theorie zur messerscharfen Hypothese, mit derer Sie ihren Business-Kontext genau bewerten und testen können. Dabei sind diese Hypothesen genaustens aufzustellen. Genau diesen Input bieten wir Ihnen. Wir diskutieren und bewerten Ihre Zielwertdefinition und formulieren die nötigen Hypothesen bzw. die User Stories im Detail aus. Gleichzeitig erstellen wir für Sie eine logische Ideenskizze und führen für Sie für jeden Test Machbarkeitsstudien durch, sodass Sie während der Testlaufzeit keine bösen Überraschungen erleben müssen.

Erstellen von Testspezifikationen

Nach der Aufstellung der Hypothesen und der vorgelagerten Machbarkeitsanalyse wird der Test weiter spezifiziert. Zum einen im analytischen Rahmen, zum anderen aber auch innerhalb seiner technischen Rahmenbedingungen. Wichtig ist, dass alle gesammelten Informationen auch bei der Auswertung wirklich zur Verfügung stehen. Um am Ende zu bewerten, ob diese über die Testlaufzeit gesammelten Informationen valide sind, empfiehlt es sich vorab, Akzeptanzkriterien zu definieren. Diese sagen aus, was geschehen muss, dass ein Test rein technisch erfolgreich war.

Setup, QA und Monitoring

Während der Testlaufzeit sollte ein dauerhaftes Monitoring stattfinden, sodass stets nachgewiesen werden kann, dass alle notwendigen Informationen auch gesammelt werden. Wir empfehlen, ein dauerhaftes Reportingtool über die gesamte Testlaufzeit anzuwenden. Je nach statistischem Design können  erste Aussagen über inhaltliche Tendenzen gemacht werden – obgleich ein Test immer erst am Ende der Laufzeit analysiert werden sollte. Wir helfen Ihnen dabei gerne, ein standardisiertes QA-Reporting aufzusetzen, welches bei technischen Fehlern sofort Alarm schlägt.

Analyse und Reporting

Am Ende der Testlaufzeit wird es nun interessant. Hat meine Maßnahme, meine erdachte Theorie wirklich eine Wirkung? Das zu bewerten, bedarf es einer sehr guten Analytik. Sprechen Sie uns an, gerne unterstützen wir Sie bei diesem Schritt, ob im Coaching-Ansatz oder mit der Vergabe der Auswertung an uns.

Alle gesammelten Daten und Informationen werden ausgewertet, auf Signifikanz geprüft, graphisch aufbereitet und in einen Abschlussreport erfasst. Und vergessen Sie nicht, nach einer sauber erfassten Dokumentation und Ergebnispräsentation erfolgt schon die Planung für den Folgetest!