Post on 05-Dec-2014
description
CASE STUDIES
– Peter Koechley, Gründer, Upworthy
“Wenn wir erraten wollen, was für unsere Besucher funktioniert, dann könnten wir genauso gut eine Münze werfen. Wir sind auf A/B Testing angewiesen, um bessere Entscheidungen zu treffen.”!
!!
.”
Wie schaffe ich es, möglichst viele Abonnenten für meine neue Zeitung zu gewinnen?
Case 1 - NRC
ORIGINAL ABO-SEITE
Test!!
Was ist die beste Darstellung der Angebote? !
TESTAUFBAU
• 10 Varianten der Abo-Seite in Optimizely erstellt
• Trafficberechnung und Verteilung
• 10 Tage Laufzeit
• Beste 4 Varianten schaffen es in Runde 2 des Tests
Original
Variante 2
Variante 3
Variante 4
Original
Variante 2 Variante 4
Gewinner 25% mehr Abos
Klarer Gewinner
Klarer Verlierer
Segmentierung Mobile vs. Non-Mobile
1. Ohne Testen verschenkt man großartige Möglichkeiten der Optimierung
2. Planen Sie den Test auf Basis von Hypothesen
3. Segmentieren Sie Ihre Ergebnisse - Mobile User sind komplett anders
Learnings
1. Learnings aus Online auf Offline anwenden
2. Weitere Tests auf Mobile und Tablet
3. Tests in Apps (NRC hat 5 Apps)
Nächste Schritte
Wie schaffe ich es, dass sich Besucher zur Bezahlseite durchklicken?
Case 2 - Aftenbladet
ORIGINAL BANNER
TESTAUFBAU
• Learnings aus früheren Tests als Basis für Hypothesen
• verschiedene Varianten von Titel, Text und CTA erstellen
• Multivariater Test (MVT) in Optimizely aufgesetzt
• Beste Variante ermitteln
Original
155% mehr CTR zur Bezahlseite
200 verschiedene Varianten später…
ORIGINAL BANNER
Wie schaffe ich es, mehr Besucher für die “Digital-Only” Version zu begeistern?
Case 3 - Aftenbladet
ORIGINAL ABO- SEITE
“Nur” 2 Hinweise auf
digitale Inhalte
TESTVORLAUF• Pre-Launch mit der Originalseite für 2 Wochen
• Hypothesen aus Literatur & Umfrage unter Abo-Käufern
• Häufigste Antworten:
1. Ich kaufe Digital Only, weil ich NUR Digital will.
2. Ich will nicht, dass die Papierzeitung meinen Mülleimer verstopft.
VARIANTE 2
Gegen
108% mehr Conversions
Leiden die Anzahl der Social Shares unter der Platzierung von Artikelempfehlungen?
Case 4 - Upworthy
!
!
Wer kennt ? !
TESTAUFBAU• Problem für Nutzer: Zusätzlichen Content finden
• Hypothese 1: Inhaltsempfehlungen führen zu mehr gelesenen Artikeln
• Hypothese 2: Inhaltsempfehlungen führen zu weniger Social Sharing
__________________________________________________________________ !! ! ! Paradox of Choice
TESTAUFBAU II• 2 Tests
• Platzierung der Inhaltsempfehlungen (Recommendation Modules)
• Design der Inhaltsempfehlungen (Anzahl, Größe, Hintergrundfarbe…)
• Content in die Module per Javascript einfügen
1. Recommendation modules = Mehr Engagement
2. Minimilastische Optik & 3 Inhaltsempfehlungen auf der rechten Seite = Gewinner
Ergebnis
3. Alle Varianten erhöhten Social Shares!!!
Paradox of Choice
!
Auch wenn Nutzer den ersten Artikel nicht teilen wollten, so gaben Ihnen die Inhaltsempfehlungen mehr Möglichkeiten, Inhalte zu finden, die sie teilen wollten.
Erklärung
"Upworthy is the single most socially optimized site we've seen," said Edward Kim, CEO of social-action measurement pioneer SimpleReach, whose clients include Time, Entertainment Weekly, and Forbes. Upworthy is just a remarkable media network."
!!
.” Quelle:: PRNewswire/Upworthy