Amazon FSx for Lustre 指标和维度
Amazon FSx for Lustre 在 Amazon CloudWatch 的 AWS/FSx
命名空间中发布了适用于所有 FSx for Lustre 文件系统的指标,如下表中描述。
主题
FSx for Lustre 网络 I/O 指标
AWS/FSx
命名空间包括以下 网络 I/O 指标。以上所有指标均采用同一维度,即 FileSystemId
。
指标 | 描述 |
---|---|
DataReadBytes |
由客户端读取到文件系统的字节数。
要计算某个时段内的平均吞吐量(每秒字节数),请将 单位:
有效统计数据: |
DataWriteBytes |
由客户端写入文件系统的字节数。
要计算某个时段内的平均吞吐量(每秒字节数),请将 单位:
有效统计数据: |
DataReadOperations |
读取操作数。
要计算某个时段内的平均读取操作数(每秒操作数),请将 单位:
有效统计数据: |
DataWriteOperations |
写入操作数。
要计算某个时段内的平均写入操作数(每秒操作数),请将 单位:
有效统计数据: |
MetadataOperations |
元数据操作数。
要计算某个时段内的平均元数据操作数(每秒操作数),请将 单位:
有效统计数据: |
ClientConnections |
客户端与文件系统之间的活动连接数。 单位:计数 |
FSx for Lustre 对象存储服务器指标
AWS/FSx
命名空间包括以下对象存储服务器 (OSS) 指标。以上所有指标均使用 FileSystemId
和 FileServer
两个维度。
FileSystemId
- 文件系统的 AWS 资源 ID。FileServer
- Lustre 文件系统中对象存储服务器 (OSS) 的名称。每个 OSS 都预置了一个或多个对象存储目标 (OST)。OSS 使用 OSS 命名约定 <HostIndex>,其中HostIndex
表示一个 4 位的十六进制值(例如OSS0001
)。OSS 的 ID 是附加到 OSS 的第一个 OST 的 ID。例如,第一个附加到OST0000
和OST0001
的 OSS 将使用OSS0000
,第二个附加到OST0002
的 OSSOST0003
将使用OSS0002
。
指标 | 描述 |
---|---|
NetworkThroughputUtilization |
网络吞吐量利用率,用文件系统可用网络吞吐量的百分比表示。该指标等于
单位:百分比 有效统计数据: |
NetworkSentBytes |
文件系统发送的字节数。该指标考虑了所有流量,包括进出链接的数据存储库的数据运动。对于文件系统的每个 OSS,每分钟都会发出一个指标。
要计算指定时段内的任意统计数据的发送吞吐量(每秒字节数),请将统计数据除以该时段的秒数。 单位:字节 有效统计数据: |
NetworkReceivedBytes |
文件系统收到的字节数。该指标考虑了所有流量,包括进出链接的数据存储库的数据运动。对于文件系统的每个 OSS,每分钟都会发出一个指标。
要计算指定时段内的任意统计数据的吞吐量(每秒字节数),请将统计数据除以该时段的秒数。 单位:字节 有效统计数据: |
FileServerDiskThroughputUtilization |
OSS 和相关 OST 之间的磁盘吞吐量,表示为由吞吐能力决定的预调配限制的百分比。该指标等于
单位:百分比 有效统计数据: |
FSx for Lustre 对象存储目标指标
AWS/FSx
命名空间包括以下对象存储目标 (OSS) 指标。以上所有指标均使用 FileSystemId
和 StorageTargetId
两个维度。
注意
DiskReadOperations
和 DiskWriteOperations
指标在临时文件系统不可用,DiskIopsUtilization
指标在临时和永久性 HDD 文件系统上不可用。
指标 | 描述 |
---|---|
DiskReadBytes |
从此 OST 进行任何磁盘读取的字节数(磁盘 IO)。对于文件系统的每个 OST,每分钟都会发出一个指标。
要计算此时段内的任意统计数据的读取磁盘吞吐量(每秒字节数),请将统计数据除以该时段的秒数。 单位:字节 有效统计数据: |
DiskWriteBytes |
从此 OST 进行任何磁盘写入的字节数(磁盘 IO)。对于文件系统的每个 OST,每分钟都会发出一个指标。
要计算此时段内的任意统计数据的读取磁盘吞吐量(每秒字节数),请将统计数据除以该时段的秒数。 单位:字节 有效统计数据: |
DiskReadOperations |
对此 OST 执行读取操作(磁盘 IO)的次数。对于文件系统的每个 OST,每分钟都会发出一个指标。
要计算一段时间内的平均磁盘 IOPS,可使用 单位:计数 有效统计数据: |
DiskWriteOperations |
对此 OST 执行写入操作(磁盘 IO)的次数。对于文件系统的每个 OST,每分钟都会发出一个指标。
要计算一段时间内的平均磁盘 IOPS,可使用 单位:计数 有效统计数据: |
DiskIopsUtilization |
一个 OST 的磁盘 IOPS 利用率,表示为该 OST 磁盘 IOPS 限制的百分比。对于文件系统的每个 OST,每分钟都会发出一个指标。
单位:百分比 有效统计数据: |
FSx for Lustre 元数据指标
AWS/FSx
命名空间包括以下元数据指标。CPUUtilization
指标采用 FileSystemId
和 FileServer
维度,而其他指标采用 FileSystemId
和 StorageTargetId
维度。
FileSystemId
- 文件系统的 AWS 资源 ID。StorageTargetId
- 元数据目标 (MDT) 的名称。MDT 使用 MDT 命名约定 <MDTIndex>(例如,MDT0001
)。FileServer
- Lustre 文件系统中元数据服务器 (MDS) 的名称。每个 MDS 都预置了一个元数据目标 (MDT)。MDS 使用 MDS 命名约定 <HostIndex>,其中HostIndex
表示使用服务器上的 MDT 索引得出的 4 位十六进制值。例如,第一个预置MDT0000
的 MDS 将使用MDS0000
,第二个预置MDT0001
的 MDS 将使用MDS0001
。如果文件系统指定了元数据配置,则此文件系统中包含多个元数据服务器。
指标 | 描述 |
---|---|
CPUUtilization |
文件系统 MDS CPU 资源的利用率百分比。对于文件系统的每个 MDS,每分钟都会发出一个指标。
单位:百分比 有效统计数据: |
FileCreateOperations |
文件创建操作的总次数。 单位:计数 |
FileOpenOperations |
文件打开操作的总次数。 单位:计数 |
FileDeleteOperations |
文件删除操作的总次数。 单位:计数 |
StatOperations |
统计操作的总次数。 单位:计数 |
RenameOperations |
目录重命名的总次数,无论是就地目录重命名还是跨目录重命名。 单位:计数 |
FSx for Lustre 存储容量指标
AWS/FSx
命名空间包括以下存储容量指标。所有这些指标都采用 FileSystemId
和 StorageTargetId
这两个维度,采用 FileSystemId
维度的 LogicalDiskUsage
和 PhysicalDiskUsage
除外。
指标 | 描述 |
---|---|
FreeDataStorageCapacity |
此 OST 中可用存储容量的大小。对于文件系统的每个 OST,每分钟都会发出一个指标。
单位:字节 有效统计数据: |
|
给定文件系统 OST 的存储容量利用率。对于文件系统的每个 OST,每分钟都会发出一个指标。
单位:百分比 有效统计数据: |
|
给定文件系统 OST 的存储容量利用率,包括在客户端上为缓存写入保留的空间。对于文件系统的每个 OST,每分钟都会发出一个指标。
单位:百分比 有效统计数据: |
LogicalDiskUsage |
存储的逻辑数据量(未压缩)。
单位:
有效统计数据: |
PhysicalDiskUsage |
文件系统数据(压缩)物理占用的存储量。
单位:
有效统计数据: |
FSx for Lustre S3 存储库指标
FSx for Lustre 会将以下 AutoImport
(自动导入)和 AutoExport
(自动导出)指标发布到 CloudWatch 中的 FSx
命名空间。这些指标使用维度对您的数据进行更精细的度量。所有 AutoImport
和 AutoExport
指标都有 FileSystemId
和 Publisher
维度。
指标 | 描述 |
---|---|
维度: |
等待导出的最早消息的期限(以秒为单位)。
单位:秒 有效统计数据: |
维度: |
文件系统为响应较大的目录重命名而处理的重命名次数。
单位:计数 有效统计数据: |
维度: |
等待导入的最早消息的期限(以秒为单位)。
单位:秒 有效统计数据: |
FSx for Lustre 维度
Amazon FSx for Lustre 指标使用 AWS/FSx
命名空间并使用以下维度。
FileSystemId
维度表示文件系统的 ID,可筛选您向该文件系统请求的指标。您可以在 Amazon FSx 控制台上,在文件系统详情页面的摘要面板上的文件系统 ID字段找到此 ID。文件系统 ID 采用fs-01234567890123456
形式。您还可以在describe-file-systems
CLI 命令(等效 API 操作为DescribeFileSystems
)的响应中看到此 ID。StorageTargetId
维度表示发布了元数据指标的 OST(对象存储目标)或 MDT(元数据目标)。StorageTargetId
采用OSTxxxx
(例如OST0001
)或MDTxxxx
(例如MDT0001
)形式。FileServer
维度表示以下内容对于 OSS 指标:指对象存储服务器 (OSS) 的名称。OSS 使用
OSSxxxx
命名约定(例如,OSS0002
)。对于 CPU 利用率指标:指元数据服务器 (MDS) 的名称。MDS 使用
MDSxxxx
命名约定(例如,MDS0002
)。
CloudWatch 和 AWS CLI 中为
AutoImport
和AutoImport
指标提供了Publisher
维度,用于表示哪个服务发布了这些指标。
有关维度的更多信息,请参阅 Amazon CloudWatch 用户指南中的维度。