View a markdown version of this page

指定实验的目标受众 - AWS AppConfig

本文属于机器翻译版本。若本译文内容与英语原文存在差异,则一律以英文原文为准。

指定实验的目标受众

目标受众定义了哪些用户有资格在实验运行期间被分配接受治疗。选择合适的受众对于收集可靠的数据、降低风险和确保实验结果适用于您的生产环境非常重要。配置实验时,请选择适合您正在评估的变更和要衡量结果的受众。选择目标受众时,请考虑以下重要细节:

代表性

选择能够反映您计划影响的用户的受众。如果与您的实验相关,请包括关键用户群体,例如新用户和回访用户。如果受众不具有代表性,则实验结果可能无法推广到更广泛的用户群。相反,选择对你的发布标准没有太大偏见的受众。

观众规模

确保符合条件的受众足够大,足以产生有意义的结果。受众较少可能会导致结果不确定或变化很大。受众越多,治疗之间的比较就越可靠。使用曝光设置来控制风险——从低风险敞口开始,然后逐渐增加,而不是限制受众群本身。

风险等级

考虑实验对用户的潜在影响。从风险较低的细分群体开始,例如内部用户或有限的受众群体。必要时排除关键工作负载或敏感用户组。逐渐增加曝光度有助于减少意外问题的影响。

资格条件

定义明确的规则,将用户包括在目标受众中。明确的资格标准有助于防止意外接触。您可以创建受众群体规则,根据以下属性筛选用户:

  • 位置或区域

  • 账户类型或用户细分

  • 应用程序上下文,例如设备类型、操作系统类型或应用程序版本

与其他实验的互动

注意重叠的实验。避免将同一个用户分配给多个可能发生冲突的实验。在运行并行实验时,可以考虑隔离受众。重叠的实验会使结果难以解释。

与推出计划保持一致

让实验受众与您预期的推出策略保持一致。选择能够反映您计划接触最终治疗的用户的受众。如果需要,可以开始额外的实验,以便在更广泛的受众中验证结果。这有助于确保随着暴露量的增加,实验结果仍然有效。