Sie befinden sich hier:
Visualisieren der Experimentleistung
Überprüfen Sie die Experimentleistung, vergleichen Sie die Variationen mit Ihrer Kontrollkohorte und sehen Sie, ob das Experiment einen eindeutigen Gewinner hat. Auf der Registerkarte "Datenvisualisierung" wird angezeigt, welche Variationen gewonnen wurden und welche mehr Daten oder eine überarbeitete Strategie erfordern.
Angezeigte Bezeichnung
Die Registerkarte "Datenvisualisierung" enthält Folgendes:
| Komponente | Beschreibung |
|---|---|
| Beste Variation | Die Kohorte mit dem höchsten Durchschnitt für die ausgewählte Kennzahl. |
| Lift vs. Control | Gibt an, wie viel besser oder schlechter die beste Variation im Vergleich zur Steuerung abschneidet. |
| Wahrscheinlichkeit der Kontrolle | Die Wahrscheinlichkeit (0–100 %), dass die beste Variation die Kontrolle übertrifft. |
| Wahrscheinlichkeit, alle zu schlagen | Die Wahrscheinlichkeit, dass die beste Variation alle anderen Jahrgangsstufen übertrifft. |
| Kennzahlauswahl | Vergleicht Variationen zwischen verschiedenen Kennzahlen. Durch Auswahl einer Kennzahl werden die Zusammenfassungskarten und das Diagramm so aktualisiert, dass sie übereinstimmen. |
| Diagramm 'Leistung nach Variation' | Zeigt den geschätzten Leistungsbereich der einzelnen Kohorten im Vergleich zur Grundlage Ihrer Kontrollkohorte an. Variationen auf der rechten Seite schneiden besser ab, Variationen auf der linken Seite schlechter. |
| Diagramm zur täglichen Registrierung | Ein gestapeltes Bereichsdiagramm, das anzeigt, wie viele Teilnehmer sich jeder Kohorte pro Tag angeschlossen haben, basierend auf den Zuteilungsgewichtungen, die Sie beim Erstellen des Experiments festgelegt haben. Flache, gerade Streifen bestätigen, dass das Experiment den Datenverkehr wie erwartet verteilt. |
Interpretieren von Ergebnissen
Im Diagramm "Performance by Variation" (Leistung nach Variation) wird ein Wahrscheinlichkeitsbereich für jede Kohorte angezeigt, wobei die tatsächliche Leistung der Kohorte höchstwahrscheinlich anhand der bisher erfassten Daten fällt:
| Komponente | Beschreibung |
|---|---|
| Möglicher Bereich (95 %) | Der breite Balken. Das System ist zu 95 % sicher, dass die tatsächliche Leistung in diesem Bereich liegt (ein glaubwürdiges Intervall von 95 %). |
| Wahrscheinlichkeitsbereich (50 %) | Der schmale Balken. Dies ist der Bereich, in dem die wahre Leistung am wahrscheinlichsten ist (ein Intervall mit 50 % höchster Dichte). |
| Mittelpunkt (beste Schätzung) | Der wahrscheinlichste Leistungswert für diese Kohorte. |
| Kontrollgrundlage | Der vertikale graue Block, der den Bereich Ihrer Kontrollgruppe markiert. |
Wenn sich der Bereich einer Variation vollständig rechts von der Steuerelement-Basislinie befindet und keine Überschneidung besteht, wird er vom System als Gewinner gekennzeichnet:
- Ein grünes Badge vom Typ "Gewinner gefunden" bedeutet, dass das System sicher ist, dass eine Variation die Kontrolle übertrifft. Stellen Sie diese Variation für alle Benutzer bereit.
- Ein orangefarbenes Badge vom Typ "Nicht abschließend" bedeutet, dass keine Variation einen signifikanten Einfluss hat. Führen Sie das Experiment länger aus oder überarbeiten Sie Ihre Strategie und testen Sie es erneut.
