nota
É possível usar o AWS Glue Spark para ler e gravar tabelas no Google BigQuery no AWS Glue 4.0 e versões posteriores. Para configurar o Google BigQuery com AWS Glue trabalhos de forma programática, consulte Conexões BigQuery.
AWS Glue Studio fornece uma interface visual para conectar-se ao BigQuery, criar jobs de integração de dados e executá-los no runtime Spark sem servidor AWS Glue Studio.
Ao criar uma conexão com o Google BigQuery no AWS Glue Studio, uma conexão unificada é criada. Para ter mais informações, consulte Considerações.
Em vez de criar um segredo com as credenciais em um formato específico, {"credentials": "base64 encoded JSON"}
, agora, com a conexão unificada com o Google BigQuery, é possível criar um segredo que inclua diretamente o JSON do Google BigQuery: {"type": "service-account", ...}
.
Tópicos
Opções avançadas
É possível fornecer opções avançadas ao criar um node do BigQuery. Essas opções são as mesmas disponíveis ao programar AWS Glue para scripts do Spark.
Consulte a referência da opção de conexão do BigQuery no guia do AWS Glue desenvolvedor.