nota
Os endpoints de desenvolvimento só são compatíveis com as versões do AWS Glue anteriores à 2.0. Para um ambiente interativo onde você possa criar e testar scripts de ETL, use Notebooks on AWS Glue Studio.
O AWS Glue pode criar um ambiente, conhecido como endpoint de desenvolvimento, que você pode usar para desenvolver e testar iterativamente seus scripts de extração, transformação e carregamento (ETL). Você pode criar, editar e excluir endpoints de desenvolvimento usando o console ou a API do AWS Glue.
Gerenciar o ambiente de desenvolvimento
Ao criar um endpoint de desenvolvimento, você fornece valores de configuração para provisionar o ambiente de desenvolvimento. Esses valores informam ao AWS Glue como configurar a rede para que você possa acessar o endpoint de forma segura e o endpoint possa acessar seus armazenamentos de dados.
Depois, é possível criar um notebook que se conecte ao endpoint e usá-lo para criar e testar seu script de ETL. Quando estiver satisfeito com os resultados do seu processo de desenvolvimento, você poderá criar um trabalho de ETL que execute seu script. Com esse processo, você pode adicionar funções e depurar seus scripts de forma interativa.
Siga os tutoriais nesta seção para saber como usar seu endpoint de desenvolvimento com notebooks.
Tópicos
- Fluxo de trabalho do endpoint de desenvolvimento
- Como os endpoints de desenvolvimento do AWS Glue funcionam com cadernos do SageMaker
- Adicionar um endpoint de desenvolvimento
- Acessar o endpoint de desenvolvimento
- Tutorial: configurar um caderno Jupyter no JupyterLab para testar e depurar scripts de ETL
- Tutorial: usar um caderno do SageMaker AI com seu endpoint de desenvolvimento
- Tutorial: usar um shell REPL com seu endpoint de desenvolvimento
- Tutorial: configurar um PyCharm Professional com um endpoint de desenvolvimento
- Configuração avançada: compartilhar endpoints de desenvolvimento entre vários usuários