Configura un database Amazon RDS MySQL per CDC

Questa pagina descrive come configurare Change Data Capture (CDC) per trasferire i dati in streaming da un database Amazon RDS per MySQL a una destinazione supportata, come BigQuery o Cloud Storage.

Crea un gruppo di parametri

1. Avvia la dashboard di Amazon RDS.

2. Nel riquadro di navigazione a scomparsa, fai clic su Gruppi di parametri.

3. Fai clic su Crea gruppo di parametri. Viene visualizzata la pagina Crea gruppo di parametri.

4. Seleziona la famiglia di database che corrisponde al tuo database, fornisci un nome e una descrizione per il gruppo di parametri.

5. Fai clic su Crea.

6. Seleziona la casella di controllo a sinistra del gruppo di parametri appena creato.

7. Nella sezione Azioni del gruppo di parametri, fai clic su Modifica.

8. Utilizza la tabella seguente per impostare i parametri del gruppo.

   • Per la replica basata su binlog:

     Parametro	Valore
     binlog_format	ROW
     log_bin_use_v1_row_events	1
     sola_lettura	0
     net_read_timeout	3600
     net_write_timeout	3600
     wait_timeout	86400

   • Per la replica basata su GTID:

     Parametro	Valore
     binlog_format	ROW
     log_bin_use_v1_row_events	1
     sola_lettura	0
     net_read_timeout	3600
     net_write_timeout	3600
     wait_timeout	86400
     expire-logs-days	7
     binlog_row_image	FULL
     max_allowed_packet	1G (valore consigliato)
     log-replica-updates	1
     enforce-gtid-consistency	ON
     gtid_mode	ON Puoi impostare questo parametro su ON solo dopo aver impostato enforce-gtid-consistency su ON. In generale, gtid_mode può avere i seguenti valori: OFF OFF_PERMISSIVE ON_PERMISSIVE ON Puoi modificare i valori del parametro gtid_mode un passo alla volta. Ad esempio, se la modalità attuale è impostata su OFF, fai quanto segue: Modifica l'impostazione in OFF_PERMISSIVE. Modifica l'impostazione in ON_PERMISSIVE. Modifica l'impostazione in ON. Per saperne di più, consulta la documentazione di MySQL.

9. Fai clic su Salva modifiche.

Crea una replica di lettura

Anche se si tratta di un passaggio facoltativo, consigliamo vivamente di utilizzare una replica di lettura, poiché riduce notevolmente il carico di replica sul database MySQL.

Se scegli di eseguire la replica direttamente dal server principale, vai alle istruzioni in Configura il database di origine e la replica di lettura.

1. Avvia la dashboard di Amazon RDS.

2. Nel riquadro di navigazione a scomparsa, fai clic su Database.

3. Seleziona l'istanza di database principale a cui vuoi connettere Datastream.

4. Espandi il pulsante Azioni e fai clic su Crea replica di lettura.

5. Configura la replica di lettura in base alle esigenze.

6. Fai clic su Crea replica di lettura.

Configura il database di origine e la replica di lettura

Se hai scelto di eseguire la replica direttamente dal server principale, configura il database di origine seguendo i passaggi riportati di seguito.

Se hai scelto di utilizzare una replica di lettura, configura sia il database di origine che la replica di lettura seguendo i passaggi riportati di seguito.

1. Avvia la dashboard di Amazon RDS.

2. Nel riquadro di navigazione a scomparsa, fai clic su Database.

3. Seleziona l'istanza che vuoi configurare, poi fai clic su Modifica.

4. Vai alla sezione Configurazione aggiuntiva.

5. Seleziona il gruppo di parametri che hai creato.

6. Imposta il Periodo di conservazione dei backup su 7 giorni.

7. Fai clic su Continua.

8. In Pianificazione delle modifiche, seleziona Applica immediatamente.

   Prima di continuare, attendi che le modifiche al gruppo di parametri vengano applicate.

Verifica che il gruppo di parametri sia assegnato all'istanza di database

1. Avvia la dashboard di Amazon RDS.

2. Nel riquadro di navigazione a scomparsa, fai clic su Database e seleziona l'istanza di database.

3. Fai clic sulla scheda Configurazioni.

4. Verifica che sia visualizzato il gruppo di parametri che hai creato e che il relativo stato sia riavvio in attesa.

5. Riavvia l'istanza di database per completare la configurazione. Per riavviare l'istanza:

   1. Nel riquadro di navigazione a scomparsa, fai clic su Istanze.
   2. Seleziona l'istanza di database.
   3. Dal menu Azioni istanza, seleziona Riavvia.
   Dopo aver riavviato l'istanza di database, il relativo stato diventa **in sinc**.

Imposta il periodo di conservazione dei log binari

1. Inserisci il seguente comando MySQL:

   call mysql.rds_set_configuration('binlog retention hours', 168);

   Stai inserendo questo comando perché vuoi garantire una replica corretta configurando il sistema in modo da conservare i log binari per almeno 7 giorni (o 168 ore).

2. Riavvia il server MySQL in modo che le modifiche effettuate vengano applicate.

Crea un utente Datastream

1. Crea un utente Datastream:

   CREATE USER 'datastream'@'%' IDENTIFIED BY 'YOUR_PASSWORD';

2. Concedi i seguenti privilegi:

   GRANT REPLICATION SLAVE, SELECT, REPLICATION CLIENT ON *.* TO 'datastream'@'%';
   GRANT EXECUTE ON PROCEDURE mysql.rds_show_configuration TO 'datastream'@'%';
   FLUSH PRIVILEGES;

Passaggi successivi

• Scopri di più su come Datastream funziona con le origini MySQL.