Auswirkung der Adressbestätigung über A/B-Tests messen

In diesem Dokument werden Verfahren beschrieben, die bei einem A/B-Test der Place Autocomplete- und Address Validation APIs der Google Maps Platform zu berücksichtigen sind.

Die Verwendung von Place Autocomplete und der Address Validation API bietet unter anderem folgende Vorteile:

  • Verbesserte Kundenerfahrung:Wenn Sie Ihren Kunden in Echtzeit Vorschläge zu Adressen und Orten machen, können Sie den Bezahlvorgang schneller und einfacher abschließen. Dies kann zu einem besseren Kundenerlebnis führen.
  • Verbesserte Datengenauigkeit:Mit Place Autocomplete und Address Validation API können Sie die Genauigkeit Ihrer Kundendaten verbessern. Dies kann im E-Commerce besonders wichtig sein, da für die erfolgreiche Zustellung von Paketen genaue Adressdaten verwendet werden.

Führen Sie einen A/B-Test durch, um herauszufinden, welche Validierungslösung Ihren Anforderungen am besten entspricht, um die Qualität Ihrer Adressen zu verbessern. So können Sie quantitativ entscheiden, welches Produkt für Ihren Anwendungsfall am besten geeignet ist.

Ein A/B-Test ist eine Möglichkeit, zwei Versionen einer Webseite oder App miteinander zu vergleichen. Es ist ein kontrollierter Test, mit dem die Auswirkungen einer Änderung einer Variablen auf ein messbares Ergebnis bestimmt werden.
Wenn Sie einen A/B-Test durchführen möchten, erstellen Sie zwei Versionen einer Seite oder App – eine als Kontrollversion und eine mit der messbaren Änderung. Anschließend präsentieren Sie diese Versionen verschiedenen Nutzern und messen, wie sie mit ihnen interagieren. Die Version mit der besseren Leistung ist der Gewinner.

Systemarchitektur – Übersicht

Sehen wir uns nun den A/B-Test von Address Validation in einem E-Commerce-Anwendungsfall an. Das nachstehende Architekturdiagramm zeigt, wie ein Kunde mit Ihrem Commerce-Erlebnis interagieren würde. So können Sie die effektivere Validierungsstrategie festlegen.

[System Context] A/B Testing Address Validation

Die Systeme, die an A/B-Tests für den Wert der Address Validation API beteiligt sind

Das Architekturdiagramm zeigt, wie ein Kunde auf Ihre E-Commerce-Website gelangt und mit dem A/B-Testsystem interagiert. Dieses System entscheidet über das Softwaresystem des E-Commerce-Shops, welche Testvariable dem Kunden angezeigt werden soll. Der E-Commerce-Shop sendet einen API-Aufruf an das Softwaresystem der Google Maps Platform. Es sammelt auch A/B-Testanalysen, die von einer Analysesoftware verarbeitet und an das A/B-Testsystem zurückgegeben werden.

Der A/B-Testprozess

Der gesamte A/B-Testprozess umfasst vier Phasen.

  • Vorbereitung: Identifizieren Sie die Testanforderungen, den Umfang und den zeitlichen Rahmen.
  • Build: Implementieren Sie die Place Autocomplete und Address Validation API in einer Umgebung, für die der Test ausgeführt werden soll.
  • Ausführen: Während der Test ausgeführt wird, werden Messwerte erfasst, bis aussagekräftige Ergebnisse vorliegen oder die Zeit abgelaufen ist.
  • Analysieren – Vergleichen Sie die Ergebnisse mit der Hypothese und identifizieren Sie die nächsten Schritte.

Wir werden all diese Punkte nacheinander besprechen.

Zubereitungszeit

Anforderungen für A/B-Tests festlegen

Erste Erkennung

Fragen Sie sich: Warum fügen Sie einen Anbieter für die Adressüberprüfung hinzu oder ändern Sie ihn? Beispiele:

  • Zeit sparen:Sie müssen nicht den gesamten Namen eines Ortes eingeben, sondern können einfach mit der Eingabe beginnen und schon werden Vorschläge angezeigt.
  • Weniger Fehler:Auch wenn Sie den Namen eines Ortes falsch schreiben, schlägt die automatische Vervollständigung von Orten in Google Maps den richtigen Ort vor.

Die Validierung bietet viele Vorteile:

  • Verbesserte Lieferraten:Die Überprüfung der Adresse trägt dazu bei, die Zustellgeschwindigkeit zu verbessern, da Post und Pakete an die richtige Adresse gesendet werden. Dies kann Unternehmen Zeit und Geld sparen und die Kundenzufriedenheit verbessern.
  • Verbesserte Datenqualität:Die Adressvalidierung kann zur Verbesserung der Datenqualität beitragen, indem Fehler in Adressen identifiziert und korrigiert werden. Dies kann die Genauigkeit von Marketingkampagnen und anderen datengestützten Initiativen verbessern.

Hypothese bestimmen

Entscheiden Sie, welche Hypothese Sie testen möchten. Hier zwei Beispiele:

1. Conversion-Rate

Wenn Sie eine Lösung hinzufügen, die vorweg ist, verzeichnen Sie in der Regel einen leichten Anstieg der Conversion-Raten. Dies ist ein guter Messwert, den Sie erfassen sollten. Wenn Sie die Lösung eines anderen Anbieters im Voraus ändern, ist eine konstante Conversion-Rate zu erwarten. Sinkt die Conversion-Rate, sollten Sie zuerst die Implementierung überprüfen.

Die Conversion-Rate ist wichtig, aber sie sagt möglicherweise nicht alles aus. Mit einer Lösung zur Adressüberprüfung soll verhindert werden, dass Nutzer am Einstiegspunkt qualitativ minderwertige Adressen einreichen. In einigen Szenarien kann dies zu Problemen bei der Erfassung führen. Dies könnte zu einem Rückgang der Conversion-Raten insgesamt führen, was jedoch nicht unbedingt schlecht ist. Die aufgrund der Adressbestätigung nicht abgeschlossenen Bestellungen können mit mangelhaften Adressdaten in Verbindung gebracht werden, was dem Unternehmen zusätzliche Kosten durch Rückbuchungen der Lieferung zur Folge hätte.

2. Reduzierung schlechter Qualität von Adressen

Hier kommt eine gute Lösung zur Adressüberprüfung ins Spiel. Wenn Sie Address Validation implementieren, sollten Sie davon ausgehen, dass weniger qualitativ hochwertige Adressdaten vorliegen.

Wenn Sie eine neue Lösung mit einer vorhandenen vergleichen, kann es verlockend sein, nur die Abgleichsraten der "guten Adresse" zu vergleichen und den Dienst auszuwählen, der eine höhere Abgleichsrate bietet. Dies kann irreführend sein, da ein Dienst möglicherweise mehr falsch positive Ergebnisse liefert als der andere.

Die wirkungsvollere Metrik ist vielmehr, das erfolgreiche Ergebnis der Verwendung der Adressdaten zu vergleichen. Nehmen wir als Beispiel das E-Commerce-Team. Das gewünschte Ergebnis beim Erfassen einer Adresse wäre die letztendliche erfolgreiche Zustellung eines Pakets.

Erstellen

Jetzt ist es der aufregende Teil! Es ist an der Zeit, eine neue Lösung für Ihre Kunden zu entwickeln. Wir haben bereits eine praktische Anleitung zur Implementierung von Place Autocomplete und der Address Validation API bei einem E-Commerce-Bezahlvorgang vorbereitet. Wir empfehlen Ihnen, sich dies während dieses Schritts anzusehen.

Auch wenn Sie Inhalte nicht speziell für E-Commerce erstellen, sind viele der Informationen trotzdem relevant, insbesondere die Anleitung zur Bestimmung der Adressqualität aus der Ausgabe der Address Validation API.

Architekturdiagramm

Unten sehen Sie ein Beispiel für Container, die zum Erstellen eines A/B-Tests in einer E-Commerce-Umgebung verwendet werden können:

[Ausführungsumgebung] A/B-Test zur Adressüberprüfung

Die wichtigen Anwendungen, Dienste und Datenspeicher in den Schlüsselsystemen, die der Architektur zugrunde liegen. (Zum Vergrößern klicken)

Das Architekturdiagramm zeigt die Container, aus denen das A/B-Test-Softwaresystem und das E-Commerce-App-Softwaresystem bestehen. Hier sehen Sie, wie ein Kunde mit einem Load-Balancer auf Ihre E-Commerce-Website interagiert. Dadurch wird er zur App der E-Commerce-Website weitergeleitet. Der A/B Test Manager kommuniziert mit dem Load-Balancer, um die Variable für A/B-Tests auszuwählen, die dem Kunden angezeigt werden soll. Dieses A/B-Testsystem zeichnet auch die Ergebnisse und die Konfiguration des A/B-Tests in einer Datenbank Ihrer Wahl auf. Die E-Commerce-Webanwendung sendet API-Aufrufe an das Google Maps Platform-Softwaresystem und meldet Analyseereignisse an das Analytics-Softwaresystem, das die Testereignisse in der Datenbank mit den A/B-Testergebnissen aufzeichnet.

Implementierung validieren

Eine schlecht implementierte Lösung führt zu unzuverlässigen Testergebnissen. Bevor Sie den A/B-Test ausführen, ist es wichtig, die Lösung mit einer kleinen Gruppe von Nutzenden zu validieren, um sicherzustellen, dass sie wie erwartet funktioniert. Das kann interne QA-Tester und/oder eine ausgewählte Gruppe externer Tester sein, denen Sie konstruktives Feedback geben.

Ausführen

Langsam ansteigend

Auch wenn die Lösung validiert wurde, ist es eine gute Idee, den Test langsam voranzutreiben, beginnend mit einer kleinen Gruppe von Nutzern. So können Fehler oder andere Probleme frühzeitig erkannt und schnell behoben werden, ohne dass sich dies auf einen großen Teil Ihrer Nutzer auswirkt.

Vollständiger Test

Sobald die Lösung von einer kleinen Gruppe von Nutzenden getestet und alle Probleme gelöst wurden, können wir einen vollständigen A/B-Test starten. Dabei muss es sich nicht unbedingt um eine tatsächliche 50:50-Aufteilung des Traffics handeln. Die Größe sollte aber mit einer zufällig ausgewählten Live-Nutzung vergleichbar sein.

Messwerte erfassen

Während des Tests sollten Sie sicherstellen, dass angemessene Daten erfasst wurden, die Ihre Hypothese stützen. Sie können während dieses Prozesses eine A/B-Testplattform verwenden, um die Datenerhebung und die spätere Analyse zu vereinfachen. Auf der Google Maps Platform werden auch API-Nutzungsmesswerte erfasst, die nützlich sein können. Weitere Informationen zur Verwendung unserer Berichtstools finden Sie auf dieser Seite.

Hier einige empfohlene Messwerte:

Place Autocomplete

Conversion-Rate: Hat sich die Conversion- bzw. Vervollständigungsrate Ihres Formulars verbessert, weil es bisher noch keine Lösung für die automatische Vervollständigung gab?
Interaktion mit dem Tool:Interagieren mehr Nutzer mit „Place Autocomplete“ im Vergleich zur vorherigen Lösung erfolgreich?

Address Validation

Erfolgreiche Zustellung: Gab es aufgrund der Adressqualität weniger fehlgeschlagene Zustellungen?
Adressänderungen:Gab es weniger Gebühren für Adressänderungen, die Ihnen Kurierdienste in Rechnung gestellt haben?
Wohnorte vs. gewerblich: Gibt es eine Verbesserung bei der Erfassung von Daten zu Wohngebäuden und Gewerben? (nur in ausgewählten Märkten)

Analysieren

Der Test ist nun abgeschlossen. Analysieren Sie die Ergebnisse anhand der ursprünglichen Testkriterien und der ursprünglichen Hypothese. Wenn Sie eine A/B-Testplattform verwendet haben, um den Vorgang abzuschließen, stehen Ihnen möglicherweise einige Informationen bereits zur Verfügung.

Kehren Sie zum Abschnitt Reduzierung von Adressen mit schlechter Qualität oben zurück. Sie können auch andere Messwerte verwenden, die möglicherweise nicht von der A/B-Testplattform erfasst wurden. Dies könnte die Rate fehlgeschlagener Übermittlungen zwischen den Testszenarien mit Beispieldaten wie der folgenden sein:

Lösung A Lösung B
Fehlgeschlagene Übermittlungen 1,75% 1,23%

Wenn wir uns das obige grundlegende Beispiel ansehen, ist klar, dass Lösung B für diesen Anwendungsfall die bessere Wahl wäre.

Fazit

Wir hoffen, dass Sie in diesem Leitfaden genügend Informationen für den Einstieg in A/B-Tests erhalten haben. Es wurden zwar Beispiele aus dem E-Commerce-Bereich verwendet, aber die gleichen Grundprinzipien gelten flächendeckend. Ermitteln Sie das erfolgreiche Ergebnis qualitativ hochwertiger Adressdaten in Ihrem Unternehmen und erfassen Sie dies als Haupthypothese.

Im Folgenden finden Sie Links zu weiterführenden Informationen.

Mit freundlichen Grüßen

Nächste Schritte

Laden Sie das Whitepaper Bezahl, Lieferung und Abläufe mit zuverlässigen Adressen verbessern herunter und sehen Sie sich das Webinar Bezahlvorgang, Zustellung und Abläufe mit Address Validation verbessern an.

Weitere Informationen:

Beitragende

Hauptautoren:

Henrik Valve | Google Maps Platform Solutions Engineer