Memulai pekerjaan streaming - Amazon EMR

Terjemahan disediakan oleh mesin penerjemah. Jika konten terjemahan yang diberikan bertentangan dengan versi bahasa Inggris aslinya, utamakan versi bahasa Inggris.

Memulai pekerjaan streaming

Lihat petunjuk berikut untuk mempelajari cara memulai pekerjaan streaming.

  1. Ikuti Memulai Amazon EMR Tanpa Server untuk membuat aplikasi. Perhatikan bahwa aplikasi Anda harus menjalankan Amazon EMR release 7.1.0 atau yang lebih tinggi.

  2. Setelah aplikasi Anda siap, atur mode parameter STREAMING untuk mengirimkan pekerjaan streaming, mirip dengan yang berikut ini AWS CLI contoh.

    aws emr-serverless start-job-run \
--application-id <APPPLICATION_ID> \
--execution-role-arn <JOB_EXECUTION_ROLE> \
--mode 'STREAMING' \
--job-driver '{
    "sparkSubmit": {
        "entryPoint": "s3://<streaming script>",
        "entryPointArguments": ["s3://<DOC-EXAMPLE-BUCKET-OUTPUT>/output"],
        "sparkSubmitParameters": "--conf spark.executor.cores=4
            --conf spark.executor.memory=16g 
            --conf spark.driver.cores=4
            --conf spark.driver.memory=16g 
            --conf spark.executor.instances=3"
    }
}'