Hudi がインストールされたクラスターを作成する - Amazon EMR

翻訳は機械翻訳により提供されています。提供された翻訳内容と英語版の間で齟齬、不一致または矛盾がある場合、英語版が優先します。

Hudi がインストールされたクラスターを作成する

Amazon EMR リリースバージョン 5.28.0 以降では、Amazon EMR は Spark、Hive、または Presto のインストール時に、デフォルトで Hudi コンポーネントをインストールします。Amazon EMR で Hudi を使用するには、1 つまたは複数の以下のアプリケーションがインストールされたクラスターを作成します。

  • Hadoop

  • [Hive]

  • Spark

  • Presto

  • Flink

クラスターは、 AWS Management Console、、 AWS CLIまたは Amazon EMR API を使用して作成できます。

  1. 新しい Amazon EMR コンソールに移動し、サイドナビゲーションから [古いコンソールに切り替え] を選択します。古いコンソールに切り替えたときの動作の詳細については、「Using the old console」を参照してください。

  2. [Create cluster (クラスターの作成)]、[Go to advanced options (詳細オプションに移動する)] の順に選択します。

  3. [Software Configuration] (ソフトウェア設定) の [Release] (リリース) で emr-5.28.0 以降を選択し、[Hadoop]、[Hive]、[Spark]、[Presto]、[Tez] と、クラスターに必要なその他のアプリケーションを選択します。

  4. アプリケーションに必要な他のオプションを設定し、[Next (次へ)] を選択します。

  5. 必要に応じて、[ハードウェア] と [General cluster settings (全般クラスター設定)] のオプションを設定します。

  6. [Security Options (セキュリティオプション)] で、マスターノードのコマンドラインへの SSH による接続に使用できる [EC2 キーペア] を選択することをお勧めします。これにより、このガイドで説明されている Spark シェルコマンド、Hive CLI コマンド、Hudi CLI コマンドを実行できます。

  7. 必要に応じて他のセキュリティオプションを選択し、[クラスターの作成] を選択します。