Amazon Athena AWS CMDB コネクタは、Amazon Athena と AWS のさまざまなサービスとの通信を可能にし、それらに対し SQL によりクエリできるようにします。
このコネクタは、Glue データカタログにフェデレーティッドカタログとして登録できます。Lake Formation で定義されたデータアクセスコントロールを、カタログ、データベース、テーブル、列、行、タグレベルでサポートします。このコネクタは、Glue 接続を使用して Glue の設定プロパティを一元管理しています。
前提条件
Athena コンソールまたは AWS Serverless Application Repository を使用して AWS アカウント にコネクタをデプロイします。詳細については、「データソース接続を作成する」または「AWS Serverless Application Repository を使用してデータソースコネクタをデプロイする」を参照してください。
パラメータ
このセクションのパラメータを使用して AWS CMDB コネクタを設定します。
Glue 接続オブジェクトを使用して AWS CMDB コネクタを設定することをお勧めします。そのためには、AWS CMDB コネクタ Lambda の glue_connection
環境変数を、使用する Glue 接続の名前に設定します。
Glue 接続プロパティ
次のコマンドを使用して、Glue 接続オブジェクトのスキーマを取得します。このスキーマには、接続を制御するために使用できるすべてのパラメータが含まれています。
aws glue describe-connection-type --connection-type CMDB
Lambda 環境プロパティ
glue_connection – フェデレーションコネクタに関連付けられた Glue 接続の名前を指定します。
データベースとテーブル
Athena AWS CMDB コネクタは、次のデータベースとテーブルが、AWS のリソースインベントリーをクエリできるようにします。各テーブルで使用できる列の詳細は、Athena コンソールまたは API から、DESCRIBE
ステートメントを実行すると確認できます。database
.table
-
ec2 – このデータベースには、以下をはじめとした Amazon EC2 の関連リソースが含まれています。
-
ebs_volumes – Amazon EBS ボリュームの詳細が含まれます。
-
ec2_instances – EC2 インスタンスの詳細が含まれます。
-
ec2_images – EC2 インスタンスイメージの詳細が含まれます。
-
routing_tables – VPC ルートテーブルの詳細が含まれます。
-
security_groups – セキュリティグループの詳細が含まれます。
-
subnets – VPC サブネットの詳細が含まれます。
-
vpcs – VPC の詳細が含まれます。
-
emr – このデータベースは、以下をはじめとした Amazon EMR 関連のリソースを含みます。
-
emr_clusters – EMR クラスターの詳細が含まれます。
-
rds – このデータベースは、以下をはじめとした Amazon RDS 関連のリソースを含みます。
-
rds_instances – RDS インスタンスの詳細が含まれます。
-
s3 – このデータベースは、以下をはじめとした RDS 関連のリソースを含みます。
-
buckets – Amazon S3 バケットの詳細が含まれます。
-
objects – Amazon S3 オブジェクトの詳細を含みますが、オブジェクトの内容は含みません。
必要な許可
このコネクタが必要とする IAM ポリシーの完全な詳細は、athena-aws-cmdb.yamlPolicies
セクションを参照してください。次のリストは、必要なアクセス権限をまとめたものです。
-
Amazon S3 への書き込みアクセス – 大規模なクエリからの結果をスピルするために、コネクタは Amazon S3 内のロケーションへの書き込みアクセス権限を必要とします。
-
Athena GetQueryExecution – コネクタはこの権限を使用して、アップストリームの Athena クエリが終了した際に fast-fail を実行します。
-
S3 List – コネクタは、このアクセス許可を使用して Amazon S3 のバケットとオブジェクトをリストします。
-
EC2 Describe – コネクタは、Amazon EC2 インスタンス、セキュリティグループ、VPC、Amazon EBS ボリュームなどのリソースを詳細表示する際に、このアクセス許可を使用します。
-
EMR Describe / List – コネクタは、EMR クラスターの詳細を表示する際に、このアクセス許可を使用します。
-
RDS Describe – コネクタは、RDS インスタンスの詳細を表示する際に、このアクセス許可を使用します。
パフォーマンス
現在のところ、Athena AWS CMDB コネクタでは、並列スキャンはサポートされません。述語のプッシュダウンは Lambda 関数内で実行されます。可能な場合、部分述語はクエリ対象のサービスにプッシュされます。例えば、特定の Amazon EC2 インスタンスの詳細についてのクエリでは、目的の詳細表示オペレーションを実行するために、特定のインスタンス ID を使用して EC2 API を呼び出します。
ライセンス情報
Amazon Athena AWS CMDB コネクタプロジェクトは、Apache-2.0 ライセンス
追加リソース
このコネクタに関するその他の情報については、GitHub.com で対応するサイト