View a markdown version of this page

指定实验的目标受众 - AWS AppConfig

本文属于机器翻译版本。若本译文内容与英语原文存在差异,则一律以英文原文为准。

指定实验的目标受众

目标受众定义了在实验运行期间哪些用户有资格被分配接受治疗。选择正确的受众对于收集可靠的数据、降低风险和确保实验结果适用于您的生产环境非常重要。配置实验时,请选择适合您正在评估的变更和要衡量的结果的受众。选择目标受众时请考虑以下重要细节:

代表性

选择能反映您计划影响用户的受众。包括关键用户细分,例如新用户和回头用户,前提是它们与您的实验相关。如果受众不具有代表性,则实验结果可能无法推广到更广泛的用户群。相反,选择不偏向发布标准的受众。

受众规模

确保符合条件的受众足够大,足以产生有意义的结果。受众人数少可能会导致不确定的结果或高度可变的结果。更多的受众可以提供更可靠的治疗比较。使用曝光度设置来控制风险——从低曝光率开始,然后逐渐增加,而不是限制观众群本身。

风险等级

考虑一下实验对用户的潜在影响。从风险较低的细分市场开始,例如内部用户或有限的受众群体。如果需要,排除关键工作负载或敏感用户群体。逐渐增加曝光度有助于减少意外问题的影响。

资格条件

为将用户纳入目标受众制定明确的规则。明确的资格标准有助于防止意外接触。您可以创建受众规则,根据以下属性筛选用户:

  • 位置或地区

  • 账户类型或用户细分

  • 应用程序上下文,例如设备类型、操作系统类型或应用程序版本

与其他实验的互动

注意重叠的实验。避免将同一个用户分配给可能发生冲突的多个实验。在进行并行实验时,可以考虑隔离观众。重叠的实验会使结果难以解释。

与推出计划保持一致

让实验受众与您预期的推广策略保持一致。选择一个能反映你计划接受最终治疗的用户的受众。如果需要,可以开始额外的实验,以在更广泛的受众中验证结果。这有助于确保实验结果在曝光量增加时保持有效。