1 Kommentar

Jan Fischer
von

Multivariates Testing als Methode der quantitativen Website-Optimierung

Während des Sommersemesters 2014 habe ich im Seminar E-Commerce das Thema „Multivariates Testing als Methode der quantitativen Website-Optimierung“ bearbeitet. Ziel der Arbeit war es, Multivariates Testing (auch kurz MVT genannt) aus vielen verschiedenen Perspektiven zu betrachten. In diesem Blogbeitrag werde ich nicht sehr tief auf die Funktionsweise eine Multivariaten Tests eingehen, da dies der Erläuterung bestimmter statistischer Methoden bedarf und den Rahmen sprengen würde. Ich werde stattdessen Gründe für Testing aufzeigen, auf typische Fehler eingehen und MVT zu A/B-Tests abgrenzen. Weiterlesen →


1 Kommentar

Andra Plückthun
von

Einsatz und Nutzen von Testing Tools für die Conversion Optimierung

Die Conversion Optimierung ist ein wichtiger Bestandteil eines E-Commerce Unternehmens. Oft sind es nur Kleinigkeiten, welche einen User von einem Kauf abhalten oder zu einem Kauf bewegen. Um herauszufinden, wie die Seite aufgebaut sein muss, damit die Kaufwahrscheinlichkeit des Kunden am Größten ist, empfehlen sich A/B oder Multivariate Tests. Erstere kann man sowohl mit als auch ohne externes Programm aufsetzen, für Multivariate Tests sollte man ein dafür geeignetes Tool nutzen. Sowohl bei der Aussteuerung als auch bei der Auswertung der Tests gilt es einige wichtige Punkte zu beachten. Tut man dies nicht, kann es zu Verzerrungen oder Fehlinterpretationen kommen. Die Konsequenz wäre eine Entscheidung für die schlechtere Variante und somit weniger Umsatz für das Unternehmen.

A/B und multivariates Testen

Der Unterschied zwischen A/B und Multivariater Tests liegt zum Einem in dessen Komplexität und zum Anderen in dessen Möglichkeiten.

Beispiel eines A/B Tests

Abbildung 1: Beispiel eines A/B Tests
Quelle: Eigene Erstellung

Bei einem A/B Test wird meist die Default Variante -der Status Quo- gegen eine neue Variante, mit nur einer Änderung zum Default, getestet (Es sind auch A/B/C, etc. Tests möglich). Die eine Hälfte der User sieht nur die Default Variante die andere Hälfte nur die Test Variante. So kann die Performance der jeweiligen Seiten direkt miteinander verglichen werden.

Bei einem Multivariaten Test werden verschiedene Varianten mit mehreren Änderung gleichzeitig getestet. Es entsteht eine Matrix in der jede Anpassung autark oder in Kombination mit einer oder mehreren anderen Veränderungen ausgewertet werden kann. So ist es möglich jeden Effekt einzeln zu bewerten und nach dem Test optimal zu justieren.

Abbildung 2: Beispiel eines Multivariaten Tests Quelle: Eigene Erstellung

Abbildung 2: Beispiel eines Multivariaten Tests
Quelle: Eigene Erstellung

Ändert man bei einem A/B Test hingehen mehrere Punkte gleichzeitig, so ist eine separate Auswertung nicht möglich. Der Effekt kann nur als Resultat der gesamten Veränderungen interpretiert werden. Weiterlesen →


2 Kommentare

WebSpotting
von

Praxisbeispiel: Testen einer Online-Anwendung am Beispiel des Merkzettels von BAUR.de

Heute wollen wir einmal einen Ausflug in die Praxis machen und uns mit einem Thema beschäftigen, das im Onlinehandel von größerer Bedeutung ist. Es geht um das Testen von Online-Applikationen. Damit sind nicht die Software-Tests gemeint, die ein Programm bzw. den erstellten Quellcode auf technisch einwandfreie Funktionalität prüfen. Es geht vielmehr um Tests aus Nutzersicht, mit dessen Hilfe E-Commerce Verantwortliche in Unternehmen prüfen können, wie ihre Anwendung von Nutzern bewertet wird beziehungsweise was für Wünsche diese an die Anwendung haben.

Das klingt zunächst nach einer recht trivialen Problemstellung, die schnell und einfach zu lösen sein sollte. Schließlich ist man als Produktmanager, Programmierer oder UserInterface-Designer ja auch ein Nutzer und kann seine Anwendung einfach selbst beurteilen. Ein paar Mal durchklicken, dabei alle Funktionen einmal ausprobieren und fertig! Aber so einfach ist es leider nicht. Denn als Experte hat man in der Regel eine ganz andere Sicht auf die Dinge als der gewöhnliche Nutzer, der meist weit weniger Erfahrung und Fachwissen besitzt. Was für den E-Commerce’ler also absolut logisch und selbstverständlich ist, kann andere schon vor Schwierigkeiten bei der Benutzung stellen.

Eine Lösung für dieses Dilemma bietet das Testing. Deshalb möchte ich euch nun anhand eines Praxisbeispiels einmal zeigen, wie eine Online-Applikation sauber und mit aussagekräftigen Ergebnissen getestet werden kann.

Weiterlesen →