Les traductions sont fournies par des outils de traduction automatique. En cas de conflit entre le contenu d'une traduction et celui de la version originale en anglais, la version anglaise prévaudra.
Surveillance du chargement des données
La base de données Aurora Postgre SQL Limitless propose plusieurs méthodes pour surveiller les tâches de chargement de données :
Liste des tâches de chargement de données
Vous pouvez vous connecter au point de terminaison du cluster et utiliser la rds_aurora.limitless_data_load_jobs vue pour répertorier les tâches de chargement de données.
postgres_limitless=> SELECT * FROM rds_aurora.limitless_data_load_jobs LIMIT 6; job_id | status | message | source_db_identifier | source_db_name | full_load_complete_time | progress_details | start_time | last_updated_time | streaming_mode | source_engine_type | ignore_primary_key_conflict | is_dryrun ---------------+-----------+---------+-------------------------------+----------------+-------------------------+-------------------------------------------------------------------------------------------------------------------------------------------------+------------------------+------------------------+-------------------+--------------------+-----------------------------+----------- 1725697520693 | COMPLETED | | persistent-kdm-auto-source-01 | postgres | 2024-09-07 08:48:15+00 | {"FULL_LOAD": {"STATUS": "COMPLETED", "DETAILS": "9 of 9 tables loaded", "COMPLETED_AT": "2024/09/07 08:48:15+00", "RECORDS_MIGRATED": 600003}} | 2024-09-07 08:47:13+00 | 2024-09-07 08:48:15+00 | full_load | aurora_postgresql | t | f 1725696114225 | COMPLETED | | persistent-kdm-auto-source-01 | postgres | 2024-09-07 08:24:20+00 | {"FULL_LOAD": {"STATUS": "COMPLETED", "DETAILS": "3 of 3 tables loaded", "COMPLETED_AT": "2024/09/07 08:24:20+00", "RECORDS_MIGRATED": 200001}} | 2024-09-07 08:23:56+00 | 2024-09-07 08:24:20+00 | full_load | aurora_postgresql | t | f 1725696067630 | COMPLETED | | persistent-kdm-auto-source-01 | postgres | 2024-09-07 08:23:45+00 | {"FULL_LOAD": {"STATUS": "COMPLETED", "DETAILS": "6 of 6 tables loaded", "COMPLETED_AT": "2024/09/07 08:23:45+00", "RECORDS_MIGRATED": 400002}} | 2024-09-07 08:23:10+00 | 2024-09-07 08:23:45+00 | full_load | aurora_postgresql | t | f 1725694221753 | CANCELED | | persistent-kdm-auto-source-01 | postgres | | {} | 2024-09-07 07:31:18+00 | 2024-09-07 07:51:49+00 | full_load_and_cdc | aurora_postgresql | t | f 1725691698210 | COMPLETED | | persistent-kdm-auto-source-01 | postgres | 2024-09-07 07:10:51+00 | {"FULL_LOAD": {"STATUS": "COMPLETED", "DETAILS": "1 of 1 tables loaded", "COMPLETED_AT": "2024/09/07 07:10:51+00", "RECORDS_MIGRATED": 100000}} | 2024-09-07 07:10:42+00 | 2024-09-07 07:10:52+00 | full_load | aurora_postgresql | t | f 1725691695049 | COMPLETED | | persistent-kdm-auto-source-01 | postgres | 2024-09-07 07:10:48+00 | {"FULL_LOAD": {"STATUS": "COMPLETED", "DETAILS": "1 of 1 tables loaded", "COMPLETED_AT": "2024/09/07 07:10:48+00", "RECORDS_MIGRATED": 100000}} | 2024-09-07 07:10:41+00 | 2024-09-07 07:10:48+00 | full_load | aurora_postgresql | t | f (6 rows)
Les fiches de Job sont supprimées au bout de 90 jours.
Afficher les détails des tâches de chargement de données à l'aide de l'ID de tâche
Si vous connaissez un identifiant de tâche, vous pouvez vous connecter au point de terminaison du cluster et utiliser la rds_aurora.limitless_data_load_job_details vue pour voir les détails de cette tâche de chargement de données, notamment le nom de la table, le statut de la tâche et le nombre de lignes chargées. Vous pouvez obtenir l'identifiant de la tâche dans les réponses aux fonctions de démarrage du chargement des données ou dans la rds_aurora.limitless_data_load_jobs vue.
postgres_limitless=> SELECT * FROM rds_aurora.limitless_data_load_job_details WHERE job_id='1725696114225'; job_id | destination_table_name | destination_schema_name | start_time | status | full_load_rows | full_load_total_rows | full_load_complete_time | cdc_insert | cdc_update | cdc_delete --------------+------------------------+-------------------------+------------------------+-----------+----------------+----------------------+-------------------------+------------+------------+------------ 1725696114225 | standard_1 | public | 2024-09-07 08:23:57+00 | COMPLETED | 100000 | 100000 | 2024-09-07 08:24:08+00 | 0 | 0 | 0 1725696114225 | standard_2 | public | 2024-09-07 08:24:08+00 | COMPLETED | 100000 | 100000 | 2024-09-07 08:24:17+00 | 0 | 0 | 0 1725696114225 | standard_3 | public | 2024-09-07 08:24:18+00 | COMPLETED | 1 | 1 | 2024-09-07 08:24:20+00 | 0 | 0 | 0 1725696114225 | standard_4 | public | 2024-09-07 08:23:58+00 | PENDING | 0 | 0 | | 0 | 0 | 0 (4 rows)
Les fiches de Job sont supprimées au bout de 90 jours.
Surveillance du groupe de CloudWatch logs Amazon
Une fois que le statut de la tâche de chargement des données est passé àRUNNING, vous pouvez vérifier la progression de l'exécution à l'aide d'Amazon CloudWatch Logs.
Pour surveiller les flux de CloudWatch journaux
Connectez-vous à la CloudWatch console AWS Management Console et ouvrez-la à l'adresse https://console.aws.amazon.com/cloudwatch/
-
Accédez à Logs, puis à Log groups.
-
Choisissez le groupe de journaux/aws/rds/aurora-limitless-database.
-
Recherchez le flux journal de votre tâche de chargement de données par job_id.
Le flux de log a le modèle Data-Load-Job-.
job_id -
Choisissez le flux du journal pour voir les événements du journal.
Chaque flux de journal affiche des événements contenant l'état de la tâche et le nombre de lignes chargées dans les tables de destination de la base de données Aurora Postgre SQL Limitless. Si une tâche de chargement de données échoue, un journal des erreurs est également créé qui indique l'état de l'échec et la raison de l'échec.
Les fiches de Job sont supprimées au bout de 90 jours.
Surveillance des RDS événements
La tâche de chargement de données publie également RDS des événements, par exemple lorsqu'une tâche réussit, échoue ou est annulée. Vous pouvez consulter les événements depuis la base de données de destination.
Pour de plus amples informations, veuillez consulter Événements du groupe de partitions de base de données.
