Endpoint di sviluppo

Un endpoint di sviluppo è un ambiente che è possibile utilizzare per sviluppare e testare AWS Glue script. È possibile utilizzare… AWS Glue per creare, modificare ed eliminare gli endpoint di sviluppo. È possibile elencare tutti gli endpoint di sviluppo che vengono creati. Puoi aggiungere, eliminare o ruotare la chiave SSH di un endpoint di sviluppo. Puoi anche creare notebook che utilizzano l'endpoint di sviluppo.

Puoi fornire i valori di configurazione per effettuare il provisioning degli ambienti di sviluppo. Questi valori dicono AWS Glue come configurare la rete in modo da poter accedere all'endpoint di sviluppo in modo sicuro e in modo che l'endpoint possa accedere agli archivi di dati. Quindi, è possibile creare un notebook che si colleghi all'endpoint di sviluppo. È possibile utilizzare il notebook per creare e testare lo script ETL.

Utilizza un ruolo AWS Identity and Access Management (IAM) con autorizzazioni simili al ruolo IAM che usi per l'esecuzione AWS Glue Lavori ETL. Utilizzare un cloud privato virtuale (VPC), una sottorete e un gruppo di sicurezza per creare un endpoint di sviluppo che sia in grado di connettersi alle risorse dati in modo sicuro. È possibile generare una coppia di chiavi SSH per connettersi all'ambiente di sviluppo tramite SSH.

È possibile creare endpoint di sviluppo per i dati Amazon S3 e all'interno di un VPC che è possibile utilizzare per accedere ai set di dati utilizzando JDBC.

È possibile installare un notebook Jupyter sul computer locale e utilizzarlo per eseguire il debug e testare gli script ETL in un endpoint di sviluppo. In alternativa, puoi usare un taccuino Sagemaker per creare script ETL su. JupyterLab AWS Vedi Usare un SageMaker notebook con il tuo endpoint di sviluppo.

AWS Glue contrassegna EC2 le istanze Amazon con un nome preceduto da. aws-glue-dev-endpoint

È possibile configurare un server notebook su un endpoint di sviluppo con cui eseguire PySpark AWS Glue estensioni.