生成分区索引 - AWS Glue

本文属于机器翻译版本。若本译文内容与英语原文存在差异,则一律以英文原文为准。

生成分区索引

数据目录支持创建分区索引,以提供对特定分区的有效查找。有关更多信息,请参阅创建分区索引。默认情况下, AWS Glue 爬虫会为 Amazon S3 和 Delta Lake 目标创建分区索引。

定义爬网程序时,在设置输出和调度页面中的高级选项下,自动创建分区索引选项会默认处于启用状态。

要禁用此选项,可以在控制台中取消选择自动创建分区索引复选框。您也可以使用爬虫禁用此选项API,CreatePartitionIndex 在中Configuration设置。默认值为 true。

分区索引的使用说明

  • 默认情况下,由爬网程序创建的表没有变量 partition_filtering.enabled。有关更多信息,请参阅 AWS Glue partition indexing and filtering

  • 不支持为加密分区创建分区索引。