クラスターへの作業の送信 - Amazon EMR

翻訳は機械翻訳により提供されています。提供された翻訳内容と英語版の間で齟齬、不一致または矛盾がある場合、英語版が優先します。

クラスターへの作業の送信

このセクションでは、Amazon EMRクラスターに作業を送信するために使用できる方法について説明します。作業を送信するには、ステップを追加するか、Hadoop ジョブをプライマリノードにインタラクティブに送信します。

クラスターにステップを送信するときは、以下のステップの動作に関するルールを考慮してください。

  • ステップ ID の長さは最大 256 文字です。

  • クラスターには、最大 256 個の PENDINGおよび RUNNING ステップを含めることができます。

  • クラスターで実行しているアクティブなステップが 256 ある場合でも、プライマリノードにジョブをインタラクティブに送信できます。長時間実行されるクラスターの存続期間中は、ステップの数に制限なく送信できますが、 PENDING RUNNINGまたは をいつでも指定できるステップは 256 個のみです。

  • Amazon EMRバージョン 4.8.0 以降では、バージョン 5.0.0 を除き、保留中のステップをキャンセルできます。詳細については、「ステップのキャンセル」を参照してください。

  • Amazon EMRバージョン 5.28.0 以降では、保留中のステップと実行中のステップの両方をキャンセルできます。また、複数のステップを並行して実行して、クラスターの使用率を改善し、コストを削減することもできます。詳細については、「複数のステップを並行して実行する際の考慮事項」を参照してください。

注記

最高のパフォーマンスを得るには、Amazon で使用するカスタムブートストラップアクション、スクリプト、およびその他のファイルをEMR、クラスター AWS リージョン と同じ にある Amazon S3 バケットに保存することをお勧めします。

トピック