DRIP - Wissen, welcher A-B-Test gewinnt, bevor er live geht
DRIP - Wissen, welcher A-B-Test gewinnt, bevor er live geht
Fabian Gmeindl
DRIP - Wissen, welcher A-B-Test gewinnt, bevor er live geht
Fabian Gmeindl
Transcript
00:00
Wenn du einen Onlineshop mit mindestens 6-stelligem Monatsumsatz hast und wissen willst, welcher A/B-Test auf deiner Seite gewinnt, bevor du ihn fährst, dann ist das für dich.
00:09
Hey, ich bin Fabi, Gründer von Rypp, und mein Team und ich haben in 8 Jahren über 4000 A/B-Tests gefahren für mehr als 250 Marken.
00:18
Snocks, AG1, Hornbach, Kicks, Gießwein, Blackroll und viele, viele mehr.
00:24
Zusammen haben wir ihnen über 500 Millionen zusätzlichen Umsatz gebracht.
00:29
Die meisten von euch testen entweder schon oder wollen es gerade machen.
00:33
Deshalb spare ich mir die Basics und komme direkt zu dem einen Ding, das außer uns niemand kann: Wissen, ob ein Test gewinnt, bevor er live geht.
00:41
Das Problem mit A/B-Testing heute ist sehr simpel.
00:45
Die meisten Tests sind geraten.
00:47
Man hat sie beim Wettbewerber gesehen oder in einer Checkliste, oder wer im Meeting am lautesten war, hat gewonnen.
00:54
Deshalb gewinnt nur einer von 10 Tests.
00:57
Teilweise 2.
00:59
Und wer testet, fährt vielleicht 3 bis 4 Tests im Monat.
01:03
Das sind am Ende rund 4 kleine Gewinner im Jahr.
01:06
Testing lohnt sich aber erst, wenn sich die Gewinne stapeln, also jeder Uplift auf den letzten drauf.
01:11
Dafür brauchst du viele Tests mit einer hohen Gewinnquote.
01:14
Kein Testing-Tool auf dem Markt aktuell hilft dir bei einem von beiden.
01:19
Es teilt den Traffic ganz einfach auf, aber da hört es dann auch schon auf.
01:22
Es sagt dir aber nicht, welche Ideen sich lohnen und welche nicht, und es merkt sich nichts von deinen letzten Tests.
01:28
Also haben wir genau das gebaut.
01:31
Es heißt Apex, ein A/B-Testing-Tool, und der Unterschied passt den Einsatz.
01:37
Jedes andere Tool startet bei null, Apex startet bei 4,3 Millionen getrackten Experimenten.
01:45
So viele Tests haben wir mitgetrackt aus über 150.000 Shops, super große Marken, mittlere, aber auch kleine, und von vielleicht auch dein Competitor.
01:56
Wenn du eine Idee in Apex eingibst, weiß Apex also schon, wie diese Idee bei Shops wie deinem gelaufen ist.
02:03
Dazu kommt, was unsere Verhaltenspsychologen in deinen Reviews, Support-Tickets, Heatmaps und Session-Recordings finden.
02:10
Am Ende steht an jeder Idee eine Zahl, wie wahrscheinlich dieser Test gewinnt.
02:16
Die besten Ideen werden gebaut, die schwachen sterben auf dem Papier.
02:20
Und 6 bis 10 Experimente laufen bei uns parallel auf dem gleichen Traffic.
02:25
Das nennen wir Prediction-Based Experimentation.
02:29
Ich zeig dir das mal von innen.
02:31
Das hier ist der Backlog von Snorks in APEX.
02:35
Hier siehst du eine Auswahl der Experimente, die wir für Snorks geplant haben, nach Priorität sortiert.
02:44
An jeder Idee steht der Likelihood-to-Win-Score.
02:49
Die hier zum Beispiel, die Garantie klar in den USPs, Schauen wir in eine Idee rein.
02:55
Kurze Kundenzitate zur Haltbarkeit, mobil auf der Kategorieseite.
02:59
Hier steht die Hypothese, die Beschreibung und der Score.
03:02
Wie kommt dieser Score zustande?
03:05
Zuerst die Win Prediction.
03:07
Wie viele ähnliche Tests gibt es denn schon auf dem Markt?
03:11
Zum Beispiel zu Social Proof und wie viele davon haben gewonnen?
03:15
Dann der Business Impact.
03:16
Wie leicht ist der Test zu bauen?
03:17
Wie auffällig er ist?
03:19
Und die Einschätzung von unseren Experten.
03:22
Alles zusammen ergibt den Likelihood-to-Win-Score.
03:25
Das hier ist ein Test, den wir fest eingeplant haben: eine Subheadline auf der Kategorieseite.
03:31
Sehr sichtbar, deshalb hohe Priorität.
03:33
Und hier kommen Research-Notizen und Kommentare rein.
03:37
So sieht ein A/B-Test in Apex aus.
03:40
Und wenn du eine neue Idee hast, dann klickst du auf Add Idea, schreibst einfach, was du willst.
03:47
Sagen wir ein Fortschrittsbalken für kostenlosen Versand im Warenkorb, im Warenkorb auf allen Geräten.
03:54
Typ, Hauptmetrik und Aufwand kannst du angeben, musst du aber nicht.
03:58
Apex hat es in dem Case schon automatisch getaggt.
04:02
Wenn du willst, ergänzt du noch mehr.
04:04
Das mache ich jetzt nicht, aber mit Add to Backlog landet die Idee sofort in deinem Backlog und wir scoren sie für dich.
04:12
Eins meiner Lieblingsfeatures hier in einem Demo-Account mit Gymshark, mit denen arbeiten wir nicht, ist die Heatmap.
04:19
Jeder A/B-Test in Apex hat sie direkt dabei.
04:23
Du siehst also, wie sich Leute in jeder Variante verhalten und ob eine Variante etwas verändert oder nicht.
04:31
Und zum Schluss das Testing-Programm, die eine Seite, auf die du schauen musst, um zu sehen, wie ein Testing läuft— Web, App, letzten 12 Monate etc.— und wie viele Gewinner, wie viele Tests gerade live sind und mehr.
04:44
So sieht es aus, wenn du es weißt, bevor du baust.
04:47
Letztes Quartal haben 55% unserer A/B-Tests gewonnen.
04:50
2024, als wir noch ganz normal getestet haben, waren es 27%.
04:56
Und noch ein Ergebnis: Für Oceans Apart haben wir in 6 Monaten 34 Tests gefahren und 17 davon haben gewonnen.
05:04
Und jeden Monat kommt mehr Umsatz rein.
05:07
Wenn du das auch in deinem Shop willst, wir machen alles und du schaust zu, wie es Geld bringt.
05:12
Wir installieren das Testing-Tool, unser Team macht den Research für deinen Shop, die Designs, die Entwicklung und so weiter.
05:18
Die Ideen haben dabei immer eine Vorhersage.
05:20
Und weil wir vorhersagen können, was gewinnt, können wir dir auch etwas versprechen: Mindestens 10% mehr Umsatz in unter 6 Monaten.
05:27
Sonst arbeiten wir ab Monat 7 ohne zusätzliche Gebühr weiter, bis du die 10% hast.
05:34
Wenn das interessant für dich ist, dann buch dir einen kurzen Call mit dem Team.
05:37
Wir schauen uns deinen Shop gemeinsam an und checken, ob es passt.
DRIP - Wissen, welcher A-B-Test gewinnt, bevor er live geht — Tella