As traduções são geradas por tradução automática. Em caso de conflito entre o conteúdo da tradução e da versão original em inglês, a versão em inglês prevalecerá.
Inicialização de uma aplicação do Spark com a integração do Amazon Redshift para Apache Spark
Para usar a integração com o EMR Sem Servidor 6.9.0, você deve passar as dependências necessárias do Redshift para Spark com o trabalho do Spark. Use --jars para incluir as bibliotecas relacionadas ao conector do Redshift. Para visualizar outros locais de arquivo com suporte pela opção --jars, consulte a seção Advanced Dependency Management
-
spark-redshift.jar -
spark-avro.jar -
RedshiftJDBC.jar -
minimal-json.jar
As versões 6.10.0 e superiores do Amazon EMR não exigem a dependência minimal-json.jar e, por padrão, instalam automaticamente as outras dependências em cada cluster. Os exemplos a seguir mostram como iniciar uma aplicação do Spark com a integração do Amazon Redshift para Apache Spark.
