AWS Glue Jobs mit interaktiven Sessions aufbauen

Dateningenieure können Inhalte verfassen AWS Glue Jobs schneller und einfacher als zuvor mithilfe interaktiver Sitzungen in AWS Glue.

Überblick über AWS Glue interaktive Sessions

Mit AWS Glue Mit interaktiven Sitzungen können Sie schnell Datenvorbereitungs- und Analyseanwendungen erstellen, testen und ausführen. Interaktive Sitzungen bieten eine programmatische und visuelle Oberfläche zum Erstellen und Testen von Extraktions-, Transformations- und Load (ETL) -Skripten für die Datenvorbereitung. Interaktive Sitzungen führen Apache Spark-Analyseanwendungen aus und bieten On-Demand-Zugriff auf eine externe Spark-Laufzeitumgebung. AWS Glue verwaltet transparent serverloses Spark für diese interaktiven Sitzungen.

Interaktive Sitzungen sind flexibel, sodass Sie Ihre Anwendungen in der Umgebung Ihrer Wahl erstellen und testen können. Über die und die können Sie interaktive Sitzungen erstellen AWS Command Line Interface und mit ihnen arbeiten. API Sie können Jupyter-kompatible Notebooks verwenden, um Ihre Notebook-Skripte visuell zu erstellen und zu testen. Interaktive Sitzungen bieten einen Open-Source-Jupyter-Kernel, der fast überall integriert werden kann, was Jupyter tut, einschließlich der Integration mit IntelliJ und IDEs VS Code. PyCharm Auf diese Weise können Sie Code in Ihrer lokalen Umgebung erstellen und im Backend der interaktiven Sitzungen nahtlos ausführen.

Mithilfe der interaktiven Sitzungen können Kunden AnwendungenAPI, die Apache Spark-Analysen verwenden, programmgesteuert ausführen, ohne die Spark-Infrastruktur verwalten zu müssen. Sie können eine oder mehrere Spark-Anweisungen in einer einzigen interaktiven Sitzung ausführen.

Interaktive Sitzungen sind daher eine schnellere, günstigere und flexiblere Möglichkeit, Datenvorbereitungs- und Analyseanwendungen zu erstellen und auszuführen. Weitere Informationen zur Verwendung interaktiver Sitzungen finden Sie in der Dokumentation in diesem Abschnitt. Magics wird unterstützt von AWS Glue

Einschränkungen