Shopify A/B-Testing: sechs Tests mit Ergebnissen

Von elbDev

Sechs A/B-Tests aus Shopify-Projekten mit gemessenem Ergebnis: was geändert wurde, an welcher Kennzahl der Test hing und was die Zahlen nicht belegen.

Die kurze Antwort

A/B-Testing auf Shopify lohnt sich auch für kleine Änderungen: Ein Bildwechsel, ein Badge oder eine ausgeklappte Suche haben in unseren Projekten messbare Unterschiede gebracht. Entscheidend ist, vor dem Test festzulegen, an welcher Kennzahl ihr das Ergebnis messt.

Anleitungen zu Tools und Statistik gibt es viele. Hier stehen sechs Tests aus zwei Projekten, jeweils mit der Änderung, dem Gerät und der Kennzahl. Danach folgt, was diese Ergebnisse belegen und was nicht.

Welche Tests haben was gebracht?

Die sechs Ergebnisse stammen von Johnny Urban und turbogrün. Sie stehen auch auf unserer Seite zu A/B-Tests auf Shopify Plus.

Brand Test und Ergebnis
Johnny Urban Suche auf der Startseite ausgeklappt, +6,8 % Conversion, im A/B-Test bestätigt.
Johnny Urban Bestseller-Badges auf Produktkarten, über 3 % mehr Klicks auf Produkte (A/B-Test).
Johnny Urban Sticky Add-to-Cart auf Mobile, über 3,5 % mehr Warenkorb-Klicks (A/B-Test).
Johnny Urban Wischbare Produktbilder auf mobilen Kategorieseiten, über 6 % mehr Umsatz pro Besucher (A/B-Test).
turbogrün Ein einziger Bildwechsel, Teamfoto statt Prominentem, brachte über 7 % mehr Umsatz pro Besucher (A/B-Test).
turbogrün Bewertungs-Widget auf dem Desktop, über 5 % mehr Conversion (A/B-Test).

An welcher Kennzahl hing welcher Test?

Die sechs Tests wurden an vier verschiedenen Kennzahlen gemessen. Das ist kein Zufall: Die Kennzahl folgt aus dem, was die Änderung bewirken soll.

Kennzahl Tests
Conversion Ausgeklappte Suche, Bewertungs-Widget
Klicks auf Produkte Bestseller-Badges
Warenkorb-Klicks Sticky Add-to-Cart
Umsatz pro Besucher Wischbare Produktbilder, Bildwechsel

Ein Badge auf einer Produktkarte soll zum Klick auf das Produkt führen, also zählt der Klick. Ein fester Warenkorb-Button soll das Hinzufügen erleichtern, also zählt der Warenkorb-Klick. Je näher die Kennzahl an der Änderung liegt, desto klarer lässt sich das Ergebnis lesen.

Wie legt ihr die Kennzahl vor dem Test fest?

Schreibt vor dem Start einen Satz auf: Wir ändern X, damit mehr Besucher Y tun. Y ist eure Kennzahl. Dazu kommen drei Fragen:

  • Wie weit ist Y vom Kauf entfernt? Ein Klick auf ein Produkt ist ein früher Schritt, Umsatz pro Besucher der letzte.
  • Auf welchem Gerät wirkt die Änderung? Drei der sechs Tests betrafen nur ein Gerät: zwei liefen auf Mobile, einer auf dem Desktop.
  • Was wäre ein Ergebnis, bei dem ihr die Änderung nicht übernehmt? Wer das vorher festlegt, deutet das Ergebnis hinterher nicht um.

Muss ein Test groß sein?

Nein. Keiner der sechs Tests war ein Redesign. Bei turbogrün war es ein einziger Bildwechsel, ein Teamfoto statt eines Prominenten. Bei Johnny Urban waren es Bausteine einer Seite: eine Suche, ein Badge, ein Button, ein Bild zum Wischen.

Kleine Tests haben einen praktischen Vorteil. Wenn nur eine Sache anders ist, wisst ihr, woran das Ergebnis liegt. Wann stattdessen die Basis des Shops neu muss, klärt der Artikel Relaunch oder gezielte Änderungen.

Was belegen diese Ergebnisse nicht?

Drei Dinge, die bei Testergebnissen oft überlesen werden:

  1. Mehr Klicks sind nicht mehr Umsatz. Bei den Badges und beim Warenkorb-Button wurden Klicks gemessen. Ob daraus mehr Bestellungen wurden, sagt dieses Ergebnis nicht.
  2. Ein Ergebnis gilt für den Shop, in dem es gemessen wurde. Ein Teamfoto hat bei turbogrün gewonnen. Das heißt nicht, dass es in jedem Shop gewinnt. Es heißt, dass sich der Test lohnt.
  3. Ein Ergebnis gilt für das getestete Gerät. Das Bewertungs-Widget wurde auf dem Desktop getestet, der Warenkorb-Button auf Mobile. Über das andere Gerät sagt der Test nichts.

Deshalb übernehmen wir kein Ergebnis aus einem anderen Shop ungeprüft. Wir übernehmen die Hypothese und testen sie neu.

Welche Tests eignen sich als Start?

Nehmt die sechs Tests als Liste von Hypothesen für euren Shop:

  • Suche auf der Startseite ausklappen
  • Bestseller-Badges auf Produktkarten
  • Sticky Add-to-Cart auf Mobile
  • Wischbare Produktbilder auf mobilen Kategorieseiten
  • Ein Bild im sichtbaren Bereich tauschen
  • Bewertungs-Widget auf dem Desktop

Sortiert sie danach, wie viele Besucher die Stelle sehen und wie wenig Aufwand die Änderung macht.

Wie geht es weiter?

Ihr habt Hypothesen, aber niemanden, der sie sauber umsetzt und auswertet? Im kostenlosen Potenzial-Check schauen wir uns euren Shop vorab an und bringen drei konkrete Befunde mit. Den Termin bucht ihr auf elbdev.de. Was wir sonst für Shopify-Plus-Brands bauen, zeigt die Übersicht unserer Leistungen.

Angebot anfragen

Fülle das Formular aus

Joshua Olberg

Habt ihr ein eigenes Entwicklerteam? (optional)

Mit dem Absenden des Formulars stimme ich der Verarbeitung meiner Daten gemäß der Datenschutzerklärung zu.