您在此处:
可视化实验性能
查看实验性能,将变体与对照队列进行比较,并查看实验是否有明确的赢家。数据可视化选项卡向您显示哪些变体已赢得,哪些需要更多数据或修订策略。
您看到的内容
数据可视化选项卡包括:
| 组件 | 说明 |
|---|---|
| 最佳变体 | 所选度量中平均值最高的队列。 |
| 提升与控制 | 与对照相比,最佳变体表现的更好或更差。 |
| 节奏控制的可能性 | 最佳变体优于控制的可能性 (0–100%)。 |
| 击败所有的可能性 | 最佳变体优于所有其他队列的可能性。 |
| 度量选择器 | 比较不同度量之间的差异。选择度量会更新要匹配的汇总卡和图表。 |
| 按变体划分的性能图表 | 显示每个组相对于控制组基线的估计绩效范围。右侧变体表现更好;左侧变体表现更差。 |
| 每日注册图表 | 根据您在创建实验时设置的分配权重,显示每天有多少参与者加入了每个队列的堆叠区域图。平坦的偶数带证实了实验如预期的那样分配流量。 |
解释结果
按变体划分的绩效图表显示了每个组群的概率范围,其中组群的真实绩效最有可能基于迄今收集的数据下降:
| 组件 | 说明 |
|---|---|
| 可能的范围 (95%) | 宽栏系统有 95% 的信心认为真实性能在此范围内(95% 的可信区间)。 |
| 可能范围 (50%) | 窄栏。这是最有可能实现真正性能的范围(50% 的最高密度间隔,即 HDI)。 |
| 中心点(最佳估计) | 该组群最有可能的性能值。 |
| 控制基准 | 标记控制组范围的垂直灰色块。 |
当变体的范围完全位于控制基线的右侧而没有重叠时,系统会将其标记为胜利者:
- 绿色的 Winner Found 徽章表示系统确信变体的性能优于控制。向所有用户推出此变体。
- 橙色 不确定徽章表示没有变体产生显著影响。延长实验时间,或者修改策略并再次测试。
