Programe scripts AWS Glue ETL em PySpark - AWS Glue

As traduções são geradas por tradução automática. Em caso de conflito entre o conteúdo da tradução e da versão original em inglês, a versão em inglês prevalecerá.

Programe scripts AWS Glue ETL em PySpark

Você pode encontrar exemplos e utilitários de código Python no repositório de AWS Glue amostras AWS Glue no site. GitHub

Usar o Python com o AWS Glue

AWS O Glue é compatível com uma extensão do dialeto PySpark Python para tarefas de extração, transformação e carregamento de scripts (ETL). Esta seção descreve como usar o Python em scripts de ETL e com a API do AWS Glue.

AWS Glue PySpark extensões

AWS Gluecriou as seguintes extensões para o dialeto PySpark Python.

AWS Glue PySpark transforma-se

AWS Gluecriou as seguintes classes de transformação para usar em operações de PySpark ETL.