View a markdown version of this page

接收模型日志和指标 - AWS Clean Rooms

本文属于机器翻译版本。若本译文内容与英语原文存在差异,则一律以英文原文为准。

接收模型日志和指标

要接收来自自定义模型训练或推理的日志和指标,成员必须使用提供必要 CloudWatch 权限的有效角色创建机器学习配置(请参阅为自定义 ML 建模创建服务角色——机器学习配置)。

系统指标

训练和推理的系统指标,例如 CPU 和内存利用率,将通过有效的 ML 配置发布给所有成员。随着任务的进展,可以分别通过/aws/cleanroomsml/TrainedModels/aws/cleanroomsml/TrainedModelInferenceJobs命名空间中的 CloudWatch指标来查看这些指标。

模型日志

模型日志的访问权限由每个已配置模型算法的隐私配置策略提供。模型作者在将已配置的模型算法(通过控制台或 CreateConfiguredModelAlgorithmAssociation API)关联到协作时设置隐私配置策略。设置隐私配置政策控制哪些成员可以接收模型日志。

此外,模型作者可以在隐私配置策略中设置过滤模式来过滤日志事件。模型容器发送到stdoutstderr符合筛选模式(如果已设置)的所有 CloudWatch 日志都将发送到 Amazon Logs。模型日志可在 CloudWatch 日志组中使用/aws/cleanroomsml/TrainedModelInferenceJobs/aws/cleanroomsml/TrainedModels也可以分别使用。

自定义指标

当您配置模型算法(通过控制台或 CreateConfiguredModelAlgorithm API)时,模型作者可以提供特定的指标名称和正则表达式语句以在输出日志中进行搜索。随着任务的进展,可以通过/aws/cleanroomsml/TrainedModels命名空间中的 CloudWatch 指标来查看这些指标。关联已配置的模型算法时,模型作者可以在指标隐私配置中设置可选的噪声级别,以避免输出原始数据,同时仍提供对自定义指标趋势的可见性。如果设置了噪音水平,则指标将在工作结束时发布,而不是实时发布。