Uso de la replicación lógica de PostgreSQL con Aurora

Configuración de la replicación lógica para el clúster de base de datos de Aurora PostgreSQL

1. Inicie sesión en la AWS Management Console y abra la consola de Amazon RDS en https://console.aws.amazon.com/rds/.

2. En el panel de navegación, elija el clúster de base de datos de Aurora PostgreSQL.

3. Haga clic en la pestaña Configuration (Configuración). En los detalles de la instancia, busque el enlace Grupo de parámetros con el Grupo de parámetros de clúster de base de datos para Tipo.

4. Elija el enlace para abrir los parámetros personalizados asociados al clúster de base de datos de Aurora PostgreSQL.

5. En el campo de búsqueda Parameters (Parámetros), escriba rds para buscar el parámetro rds.logical_replication. El valor predeterminado de este parámetro es 0, lo que significa que está desactivado de forma predeterminada.

6. Elija Edit parameters (Editar parámetros) para acceder a los valores de las propiedades y, a continuación, elija 1 en el selector para activar la función. En función del uso previsto, es posible que también tenga que cambiar la configuración de los siguientes parámetros. Sin embargo, en muchos casos, los valores predeterminados son suficientes.

   • max_replication_slots: establezca este parámetro en un valor que sea al menos igual al número total planificado de publicaciones y suscripciones de replicación lógica. Si utiliza AWS DMS, este parámetro debe ser igual al menos a las tareas de captura de datos de cambios planificadas del clúster, además de las publicaciones y suscripciones de replicación lógica.

   • max_wal_senders y:max_logical_replication_workers establezca estos parámetros a un valor que sea al menos igual al número de ranuras de replicación lógica que desea queden activas o el número de tareas activas de AWS DMS para la captura de datos de cambios. Dejar inactiva una ranura de replicación lógica evita que vacuum elimine las tuplas obsoletas de las tablas, por lo que se recomienda supervisar las ranuras de replicación y eliminar las ranuras inactivas cuando sea necesario.

   • max_worker_processes: establezca este parámetro en un valor que sea al menos igual al total de los valores max_logical_replication_workers, autovacuum_max_workers y max_parallel_workers. En las clases de instancias de base de datos pequeñas, los procesos de trabajo en segundo plano pueden afectar a las cargas de trabajo de las aplicaciones, por lo que debe supervisarse el rendimiento de la base de datos si establece max_worker_processes en un valor superior al predeterminado. (El valor predeterminado es el resultado de GREATEST(${DBInstanceVCPU*2},8}, lo que significa que, de forma predeterminada, es 8 o dos veces el equivalente en CPU de la clase de instancia de base de datos, lo que sea mayor).

   nota

   Se pueden modificar los valores de los parámetros de un grupo de parámetros de base de datos creado por el cliente, pero no se pueden modificar los valores de los parámetros de un grupo de parámetros de base de datos predeterminado.

7. Elija Guardar cambios.

8. Reinicie la instancia de escritor de su clúster de base de datos de Aurora PostgreSQL para que los cambios surtan efecto. En la consola de Amazon RDS, elija la instancia de base de datos principal del clúster y elija Reboot (Reiniciar) en el menú Actions (Acciones).

9. Cuando la instancia esté disponible, puede comprobar que la replicación lógica esté activada de la siguiente manera.

   1. Use psql para conectarse a la instancia de escritor de su clúster de base de datos de Aurora PostgreSQL.

      psql --host=your-db-cluster-instance-1.aws-region.rds.amazonaws.com --port=5432 --username=postgres --password --dbname=labdb

   2. Compruebe que la replicación lógica esté habilitada mediante el siguiente comando.

      labdb=> SHOW rds.logical_replication;
       rds.logical_replication
      -------------------------
       on
      (1 row)

   3. Verifique que el parámetro wal_level esté establecido en logical.

      labdb=> SHOW wal_level;
        wal_level
      -----------
       logical
      (1 row)

Desactivación de la replicación lógica

1. Elimine todas las ranuras de replicación.

   Para eliminar todas las ranuras de replicación, conéctese al publicador y ejecute el siguiente comando de SQL.

   SELECT pg_drop_replication_slot(slot_name)
     FROM pg_replication_slots
    WHERE slot_name IN (SELECT slot_name FROM pg_replication_slots);

   Las ranuras de replicación no pueden estar activas cuando ejecute este comando.

2. Modifique el grupo de parámetros de clúster de base de datos personalizado asociado al publicador tal como se detalla en Configuración de la replicación lógica para el clúster de base de datos de Aurora PostgreSQL, pero establezca el parámetro rds.logical_replication en 0.

   Para obtener más información acerca de los grupos de parámetros personalizados, consulte Modificación de los parámetros en un grupo de parámetros de clúster de base de datos en Amazon Aurora.

3. Reinicie el clúster de base de datos de Aurora PostgreSQL del publicador para que se aplique el cambio en el parámetro rds.logical_replication.

Para iniciar la replicación lógica entre dos clústeres de base de datos de Aurora PostgreSQL.

En estos pasos se supone que los clústeres de base de datos de Aurora PostgreSQL tienen una instancia de escritor con una base de datos en la que crear las tablas de ejemplo.

1. En el clúster de base de datos de Aurora PostgreSQL de publicadores

   1. Cree una tabla con la siguiente instrucción SQL.

      CREATE TABLE LogicalReplicationTest (a int PRIMARY KEY);

   2. Inserte datos en la base de datos de publicador mediante la siguiente instrucción SQL.

      INSERT INTO LogicalReplicationTest VALUES (generate_series(1,10000));

   3. Compruebe que los datos existen en la tabla mediante la siguiente instrucción SQL.

      SELECT count(*) FROM LogicalReplicationTest;

   4. Cree una publicación para esta tabla mediante la instrucción CREATE PUBLICATION que se indica a continuación.

      CREATE PUBLICATION testpub FOR TABLE LogicalReplicationTest;

2. En el clúster de base de datos Aurora PostgreSQL de suscriptor

   1. Cree la misma tabla LogicalReplicationTest en el suscriptor que creó en el publicador, de la siguiente manera.

      CREATE TABLE LogicalReplicationTest (a int PRIMARY KEY);

   2. Compruebe que esta tabla esté vacía.

      SELECT count(*) FROM LogicalReplicationTest;

   3. Crea una suscripción para recibir los cambios del publicador. Debe utilizar los siguientes detalles sobre el clúster de base de datos Aurora PostgreSQL de publicador.

      • host: la instancia de base de datos de escritor del clúster de base de datos de Aurora pPostgreSQL del publicador.

      • puerto: el puerto en el que la instancia de base de datos de escritor está a la escucha. El valor predeterminado de PostgreSQL es 5432.

      • dbname: el nombre de la base de datos.

      CREATE SUBSCRIPTION testsub CONNECTION 
         'host=publisher-cluster-writer-endpoint port=5432 dbname=db-name user=user password=password' 
         PUBLICATION testpub; 
      

      nota

      Especifique una contraseña distinta de la que se muestra aquí como práctica recomendada de seguridad.

      Una vez creada la suscripción, se crea una ranura de replicación lógica en el publicador.

   4. Para comprobar en este ejemplo que se replican los datos iniciales en el suscriptor, use la siguiente instrucción SQL en la base de datos de suscriptor.

      SELECT count(*) FROM LogicalReplicationTest;

Para utilizar AWS DMS para la reproducción lógica con Aurora PostgreSQL

1. Prepare la base de datos de publicador para trabajar con AWS DMS.

   Para ello, tanto PostgreSQL 10.x como bases de datos posteriores requieren que aplique funciones contenedoras de AWS DMS a la base de datos de publicador. Para obtener detalles acerca de este paso y pasos posteriores, consulte las instrucciones en Uso de PostgreSQL versión 10.x y posterior como origen para AWS DMS en la guía del usuario de AWS Database Migration Service.

2. Inicie sesión en la AWS Management Console y abra la consola de AWS DMS en https://console.aws.amazon.com/dms/v2. En la parte superior derecha, elija la misma región de AWS en la que se encuentran el publicador y el suscriptor.

3. Cree una instancia de replicación de AWS DMS.

   Elija valores que sean los mismos que para la instancia de base de datos de escritor de su publicador. Entre estos se incluyen los siguientes:

   • En VPC, elija la misma VPC que para la instancia de base de datos de escritor.

   • En Replication Subnet Group (Grupo de subredes de replicación), elija un grupo de subredes con los mismos valores que para la instancia de base de datos de escritor. Cree uno nuevo si es necesario.

   • En la Availability zone (Zona de disponibilidad), elija la misma zona que para la instancia de base de datos de escritor.

   • En el VPC Security Group (Grupo de seguridad de VPC), elija el mismo grupo que para la instancia de base de datos de escritor.

4. Cree un punto de enlace de AWS DMS para el origen.

   Especifique el publicador como punto de enlace de origen mediante los siguientes valores:

   • En Endpoint type (Tipo de punto de enlace), elija Source endpoint (Punto de enlace de origen).

   • Elija Select RDS DB Instance (Seleccionar instancia de base de datos de RDS).

   • En RDS Instance (Instancia RDS), elija el identificador de base de datos de la instancia de base de datos de escritor del publicador.

   • En Source engine (Motor de origen), elija postgres.

5. Cree un punto de enlace de AWS DMS para el destino.

   Especifique el suscriptor como punto de enlace de destino mediante los siguientes valores:

   • En Endpoint type (Tipo de punto de enlace), elija Target endpoint (Punto de enlace de destino).

   • Elija Select RDS DB Instance (Seleccionar instancia de base de datos de RDS).

   • En RDS Instance (Instancia RDS), elija el identificador de base de datos de la instancia de base de datos de suscriptor.

   • Elija un valor para Source engine (Motor de origen). Por ejemplo, si el suscriptor es una base de datos PostgreSQL de RDS, elija postgres. Si el suscriptor es una base de datos Aurora PostgreSQL, elija aurora-postgresql.

6. Cree una tarea de migración de bases de datos de AWS DMS.

   Debe usar una tarea de migración de bases de datos para especificar qué tablas de base de datos se van a migrar, asignar los datos mediante un esquema de destino y crear tablas nuevas en la base de datos de destino. Como mínimo, use los siguientes valores para Task configuration (Configuración de tareas):

   • En Replication instance (Instancia de replicación), elija la instancia de replicación que creó en un paso anterior.

   • En Source database endpoint (Punto de enlace de base de datos de origen), elija el origen del publicador que creó en un paso anterior.

   • En Target database endpoint (Punto de enlace de base de datos de destino), elija el destino del suscriptor que creó en un paso anterior.

   El resto de los detalles de la tarea dependen de su proyecto de migración. Para obtener más información acerca de la especificación de todos los detalles de las tareas de DMS, consulte Trabajo con las tareas DMS de AWS en la guía del usuario de AWS Database Migration Service.