作業の実行時に Amazon EMRクラスターを表示およびモニタリングする

Amazon EMRには、クラスターに関する情報を収集するために使用できるツールがいくつか用意されています。クラスターに関する情報には、 コンソール、、CLIまたはプログラムでアクセスできます。プライマリノードで、標準の Hadoop ウェブインターフェイスおよびログファイルを利用できます。また、 CloudWatch や Ganglia などのモニタリングサービスを使用して、クラスターのパフォーマンスを追跡することもできます。

アプリケーション履歴は、Amazon 5.25EMR.0 以降の Spark History Server UIs用の「永続的」アプリケーションを使用してコンソールからも使用できます。Amazon 6.x EMR では、永続YARNタイムラインサーバーと Tez ユーザーインターフェイスも利用できます。これらのサービスはクラスター外でホストされるため、SSH接続やウェブプロキシを必要とせずに、クラスターの終了後 30 日間アプリケーション履歴にアクセスできます。「アプリケーションの履歴を表示する」を参照してください。