注記
AWS Glue for Spark を使用して、AWS Glue 4.0 以降のバージョンの Google BigQuery のテーブルからの読み取りとテーブルへの書き込みを行うことができます。AWS Glue ジョブと Google BigQuery をプログラム的に設定する方法については、「BigQuery 接続」を参照してください。
AWS Glue Studio には、BigQuery へ接続し、データ統合ジョブを作成し、AWS Glue Studio サーバーレス Spark ランタイム上でそれらを実行するビジュアルインターフェイスが用意されています。
AWS Glue Studio で Goolge BigQuery への接続を作成すると、統合接続が作成されます。詳細については、「考慮事項」を参照してください。
特定の形式 {"credentials": "base64 encoded JSON"}
の認証情報を使用してシークレットを作成する代わりに、Google BigQuery への統合接続を使用して、Golge BigQuery の JSON を直接含むシークレットを作成できます: {"type": "service-account", ...}
。
詳細オプション
BigQuery ノードを作成するときに、高度なオプションを指定できます。これらのオプションは Spark AWS Glue スクリプトのプログラミング時に使用できるオプションと同じです。
「AWS Glue デベロッパーガイド」の「BigQuery 接続オプションリファレンス」をご覧ください。