蓝图示例 - AWS Glue

蓝图示例

有许多示例蓝图项目可用于 AWS Glue 蓝图 Github 存储库。这些示例仅供参考，不能用于生产。

示例项目的标题是：

  • 压缩：此蓝图创建一个任务，根据所需的文件大小将输入文件压缩到更大的数据块中。

  • 转换：此蓝图将各种标准文件格式的输入文件转换为 Apache Parquet 格式，该格式针对分析工作负载进行了优化。

  • 网络爬取 Amazon S3 位置：此蓝图对多个 Amazon S3 位置进行网络爬取，将元数据表添加到数据目录。

  • 自定义到数据目录的连接：此蓝图使用 AWS Glue 自定义连接器访问数据存储，读取记录，并根据记录架构填充 AWS Glue 数据目录中的表定义。

  • 编码：此蓝图将您的非 UTF 文件转换为 UTF 编码的文件。

  • 分区：此蓝图创建一个分区任务，根据特定的分区键将输出文件放入分区。

  • 将 Amazon S3 数据导入到 DynamoDB 表中：此蓝图将数据从 Amazon S3 导入到 DynamoDB 表中。

  • 所管理的标准表：此蓝图将 AWS Glue 数据目录表导入到 Lake Formation 表中。