Datastream te permite transmitir actualizaciones de captura de datos modificados (CDC) desde una
base de datos de Amazon RDS para Oracle a un destino
compatible, como BigQuery o
Cloud Storage. Puedes configurar tu origen para el lector
de registros binarios
(vista previa) o la
API de LogMiner habilitando el modo ARCHIVELOG y el registro
complementario, y otorgando privilegios de usuario. Para obtener más información sobre estos métodos de CDC, consulta Cómo trabajar con archivos de registro de rehacer de la base de datos de Oracle.
Configura tu base de datos de Oracle de Amazon RDS para el lector de registros binarios
Para las fuentes de Amazon RDS, Datastream solo admite objetos de directorio de base de datos como el método de acceso al registro para el lector de registros binarios. Debes crear los directorios de la base de datos que apunten a los archivos de registro de rehacer en línea y a los archivos de registro archivados. Los nombres de estos directorios son estáticos y no se pueden cambiar más adelante. Debes proporcionar estos nombres a Datastream cuando crees tu flujo.
Conéctate a tu instancia de Amazon RDS de origen.
En la terminal o con el panel de Amazon RDS, ejecuta los siguientes comandos:
BEGIN rdsadmin.rdsadmin_master_util.create_archivelog_dir; END; BEGIN rdsadmin.rdsadmin_master_util.create_onlinelog_dir; END; COMMIT; GRANT READ ON DIRECTORY ONLINELOG_DIR TO USER_NAME; GRANT READ ON DIRECTORY ARCHIVELOG_DIR TO USER_NAME;
Verifica que tu base de datos se ejecute en modo
ARCHIVELOG. Para hacerlo, accede a tu base de datos de Oracle y ejecuta el siguiente comando en el mensaje de SQL:SELECT LOG_MODE FROM V$DATABASE;- Si el resultado es
ARCHIVELOG, continúa con el paso c. - Si el resultado es
NOARCHIVELOG, deberás habilitar el modoARCHIVELOGpara tu base de datos. - Los archivos de registro archivados consumen espacio en el disco, por lo que te recomendamos que configures el parámetro DB_RECOVERY_FILE_DEST_SIZE para tu base de datos. Usa este parámetro para especificar (en bytes) el límite máximo del espacio total que usarán los archivos de recuperación de la base de datos de destino. Si configuras este parámetro, puedes administrar la compensación entre proteger la base de datos para que no se quede sin espacio en el disco y que el flujo falle debido a la pérdida de la posición del registro.
- Para definir una política de retención de datos para tu base de datos, ejecuta este comando:
Te recomendamos que conserves las copias de seguridad y los registros de archivo durante un mínimo de 4 días, y se recomiendan 7 días.exec rdsadmin.rdsadmin_util.set_configuration('archivelog retention hours',96);
- Configura la política de rotación de archivos de registro de Oracle. Te recomendamos que establezcas un tamaño máximo de archivo de registro en un valor inferior a 1 GB.
- Si el resultado es
Habilita los datos de registro complementarios. Para hacerlo, primero habilita el registro complementario mínimo a nivel de la base de datos ejecutando el siguiente comando:
exec rdsadmin.rdsadmin_util.alter_supplemental_logging('ADD');
Luego, elige si deseas activar el registro para tablas específicas o para toda la base de datos.
Para registrar cambios solo en tablas específicas, ejecuta el siguiente comando para cada tabla que quieras replicar:
ALTER TABLE SCHEMA.TABLE ADD SUPPLEMENTAL LOG DATA (ALL) COLUMNS;
Reemplaza lo siguiente:
- SCHEMA: Es el nombre del esquema que contiene la tabla.
- TABLE: Es el nombre de la tabla para la que deseas registrar cambios.
Para replicar la mayoría o todas las tablas de tu base de datos, considera activar el registro para toda la base de datos. En el mensaje de SQL, ejecuta el siguiente comando para habilitar los datos de registro complementarios para toda la base de datos:
exec rdsadmin.rdsadmin_util.alter_supplemental_logging('ADD','ALL');
Otorga los siguientes privilegios al usuario de la base de datos:
exec rdsadmin.rdsadmin_util.grant_sys_object('GV_$LOG','USER_NAME','SELECT'); exec rdsadmin.rdsadmin_util.grant_sys_object('GV_$LOGFILE','USER_NAME','SELECT'); exec rdsadmin.rdsadmin_util.grant_sys_object('GV_$ARCHIVED_LOG','USER_NAME','SELECT'); exec rdsadmin.rdsadmin_util.grant_sys_object('GV_$INSTANCE','USER_NAME','SELECT'); exec rdsadmin.rdsadmin_util.grant_sys_object('GV_$STANDBY_LOG','USER_NAME','SELECT'); exec rdsadmin.rdsadmin_util.grant_sys_object('V_$INSTANCE','USER_NAME','SELECT'); exec rdsadmin.rdsadmin_util.grant_sys_object('V_$PDBS','USER_NAME','SELECT'); exec rdsadmin.rdsadmin_util.grant_sys_object('V_$TRANSPORTABLE_PLATFORM','USER_NAME',
'SELECT'); exec rdsadmin.rdsadmin_util.grant_sys_object('V_$DATABASE','USER_NAME','SELECT'); exec rdsadmin.rdsadmin_util.grant_sys_object('V_$PARAMETER','USER_NAME','SELECT'); exec rdsadmin.rdsadmin_util.grant_sys_object('COL$','USER_NAME','SELECT'); exec rdsadmin.rdsadmin_util.grant_sys_object('DBA_OBJECTS','USER_NAME','SELECT'); exec rdsadmin.rdsadmin_util.grant_sys_object('DBA_TABLESPACES','USER_NAME','SELECT'); exec rdsadmin.rdsadmin_util.grant_sys_object('DBA_ENCRYPTED_COLUMNS','USER_NAME','SELECT'); exec rdsadmin.rdsadmin_util.grant_sys_object('DBA_EXTENTS','USER_NAME','SELECT'); GRANT CONNECT TO USER_NAME; GRANT CREATE SESSION TO USER_NAME; GRANT SELECT ANY TABLE TO USER_NAME; Reemplaza USER_NAME por el nombre de la cuenta de usuario que deseas usar para conectarte a tu base de datos.
Configura tu base de datos de Oracle de Amazon RDS para LogMiner
Verifica que tu base de datos se ejecute en modo
ARCHIVELOG. Para hacerlo, accede a tu base de datos de Oracle y ejecuta el siguiente comando en el mensaje de SQL:SELECT LOG_MODE FROM V$DATABASE;- Si el resultado es
ARCHIVELOG, continúa con el paso c. Si el resultado es
NOARCHIVELOG, deberás habilitar el modoARCHIVELOGpara tu base de datos.Punto clave: Para que tu base de datos se ejecute en modo
ARCHIVELOG, debes habilitar las copias de seguridad de la base de datos.Los archivos de registro archivados consumen espacio en el disco, por lo que te recomendamos que configures el DB_RECOVERY_FILE_DEST_SIZE para tu base de datos. Usa este parámetro para especificar (en bytes) el límite máximo del espacio total que usarán los archivos de recuperación de la base de datos de destino. Si configuras este parámetro, puedes administrar la compensación entre proteger la base de datos para que no se quede sin espacio en el disco y que el flujo falle debido a la pérdida de la posición del registro.
Para definir una política de retención de datos para tu base de datos, ejecuta este comando:
exec rdsadmin.rdsadmin_util.set_configuration('archivelog retention hours',96);Te recomendamos que conserves las copias de seguridad y los registros de archivo durante un mínimo de 4 días, y se recomiendan 7 días.
- Si el resultado es
Habilita los datos de registro complementarios. Para hacerlo, primero habilita el registro complementario mínimo a nivel de la base de datos ejecutando el siguiente comando:
exec rdsadmin.rdsadmin_util.alter_supplemental_logging('ADD');Luego, elige si deseas activar el registro para tablas específicas o para toda la base de datos.
Para registrar cambios solo en tablas específicas, ejecuta el siguiente comando para cada tabla que quieras replicar:
ALTER TABLE SCHEMA.TABLE ADD SUPPLEMENTAL LOG DATA (ALL) COLUMNS;
Reemplaza lo siguiente:
- SCHEMA: Es el nombre del esquema que contiene la tabla.
- TABLE: Es el nombre de la tabla para la que deseas registrar cambios.
Para replicar la mayoría o todas las tablas de tu base de datos, considera activar el registro para toda la base de datos.
En el mensaje de SQL, ejecuta el siguiente comando para habilitar los datos de registro complementarios para toda la base de datos:
exec rdsadmin.rdsadmin_util.alter_supplemental_logging('ADD','ALL');Otorga los privilegios adecuados a la cuenta de usuario que se usará para conectarse a tu base de datos. Para hacerlo, ejecuta los siguientes comandos:
GRANT EXECUTE_CATALOG_ROLE TO USER_NAME; GRANT CONNECT TO USER_NAME; GRANT CREATE SESSION TO USER_NAME; exec rdsadmin.rdsadmin_util.grant_sys_object('V_$DATABASE','USER_NAME','SELECT'); exec rdsadmin.rdsadmin_util.grant_sys_object('V_$ARCHIVED_LOG','USER_NAME','SELECT'); exec rdsadmin.rdsadmin_util.grant_sys_object('V_$LOG','USER_NAME','SELECT'); -- for primary databases exec rdsadmin.rdsadmin_util.grant_sys_object('V_$STANDBY_LOG','USER_NAME','SELECT'); -- for standby databases exec rdsadmin.rdsadmin_util.grant_sys_object('V_$LOGFILE','USER_NAME','SELECT'); exec rdsadmin.rdsadmin_util.grant_sys_object('V_$LOGMNR_LOGS','USER_NAME','SELECT'); exec rdsadmin.rdsadmin_util.grant_sys_object('V_$LOGMNR_CONTENTS','USER_NAME','SELECT'); exec rdsadmin.rdsadmin_util.grant_sys_object('V_$PARAMETER','USER_NAME','SELECT'); exec rdsadmin.rdsadmin_util.grant_sys_object('DBMS_LOGMNR','USER_NAME','EXECUTE'); exec rdsadmin.rdsadmin_util.grant_sys_object('DBMS_LOGMNR_D','USER_NAME','EXECUTE'); GRANT SELECT ANY TRANSACTION TO USER_NAME; GRANT SELECT ANY TABLE TO USER_NAME;
Si tu base de datos usa la encriptación de datos transparente (TDE), otorga los siguientes permisos:
exec rdsadmin.rdsadmin_util.grant_sys_object('DBA_TABLESPACES','USER_NAME','SELECT'); exec rdsadmin.rdsadmin_util.grant_sys_object('DBA_ENCRYPTED_COLUMNS','USER_NAME','SELECT');
Si tu organización no permite otorgar el permiso
GRANT SELECT ANY TABLE, usa la solución que se describe en la sección Captura de datos modificados (CDC) de Oracle de la página de preguntas frecuentes de Datastream.Si tu base de datos de origen es Oracle 12c o posterior, otorga el siguiente privilegio adicional:
GRANT LOGMINING TO USER_NAME;
Otorga a la cuenta de usuario acceso
SELECTa la vistaDBA_EXTENTSen tu base de datos. Este privilegio te permite usar elROWIDreabastecimiento basado para tu origen de Oracle:GRANT SELECT ON DBA_EXTENTS TO USER_NAME;
¿Qué sigue?
- Obtén más información sobre cómo funciona Datastream con fuentes de Oracle.