De Males y Maleficios para el DBA

Aquí tienes una explicación más detallada de los principales mecanismos para mover datos en Oracle 19c, incluyendo ejemplos de SQL*Loader, Data Pump (expdp e impdp) y otros clientes:

SQL*Loader:

• Descripción: SQL*Loader es una herramienta de carga de datos que permite cargar datos desde archivos de texto (CSV, fijos, delimitados, etc.) a tablas de bases de datos Oracle.
• Ejemplo:

LOAD DATA  
INFILE 'employees.csv'  
INTO TABLE employees  
FIELDS TERMINATED BY ','  
OPTIONALLY ENCLOSED BY '"'  
(  
  employee_id,  
  first_name,  
  last_name,  
  email,  
  phone_number,  
  hire_date,  
  job_id,  
  salary,  
  commission_pct,  
  manager_id,  
  department_id  
)

Data Pump (expdp e impdp):

• Descripción: Data Pump es un juego de herramientas de exportación e importación de datos y objetos de bases de datos Oracle. Expdp se utiliza para exportar, e impdp para importar.
• Ejemplo de exportación (expdp):

expdp system/password DIRECTORY=data_pump_dir DUMPFILE=employees.dmp TABLES=employees

• Ejemplo de importación (impdp):

impdp system/password DIRECTORY=data_pump_dir DUMPFILE=employees.dmp TABLES=employees

Replicación de datos:

• Descripción: Oracle ofrece varias soluciones de replicación de datos, como la Replicación Oracle y la Replicación de flujo de cambios, que permiten replicar datos entre bases de datos Oracle y de otros proveedores.
• Ejemplo de replicación entre bases de datos Oracle:
  1. Configurar el entorno de replicación maestro-esclavo.
  2. Definir las tablas y objetos a replicar.
  3. Programar la replicación para que se ejecute periódicamente o en tiempo real.

External Table API

Oracle 19c proporciona la funcionalidad de tablas externas (external tables), que permite acceder a datos almacenados en orígenes externos, como archivos de texto, CSV, Hadoop, etc., como si fueran tablas de la base de datos. Esto se logra a través de la API de tablas externas, que se compone de los siguientes elementos principales:

Definición de la tabla externa:

• Sintaxis de creación de una tabla externa:

CREATE EXTERNAL TABLE table_name  
(  
  column1 datatype,  
  column2 datatype,  
  ...  
)  
ORGANIZATION EXTERNAL  
(  
  TYPE external_type  
  DEFAULT DIRECTORY directory_name  
  LOCATION ('location_specifier')  
)

• Donde external_type especifica el tipo de origen de datos (por ejemplo, ORACLE_LOADER, ORACLE_DATAPUMP, PARQUET, AVRO, etc.).
• directory_name es un directorio de la base de datos que apunta al directorio físico donde se encuentran los archivos.
• location_specifier es la ruta o nombre del archivo.

Acceso a los datos mediante la tabla externa:

• Una vez definida la tabla externa, se puede acceder a los datos como si fueran una tabla de la base de datos:

SELECT * FROM table_name;

Carga de datos a tablas de la base de datos:

• Utilizar la tabla externa como origen para cargar datos a tablas de la base de datos:

INSERT INTO target_table
SELECT * FROM table_name;

Transformación de datos:

• Aprovechar la tabla externa para transformar y manipular los datos antes de cargarlos a la base de datos:

SELECT column1, UPPER(column2) AS column2
FROM table_name;

Algunos ejemplos de uso de la API de tablas externas en Oracle 19c:

• Acceder a archivos CSV, Excel, JSON, Parquet, Avro, etc. como si fueran tablas de la base de datos.
• Integrar datos de Hadoop, Spark o fuentes NoSQL con aplicaciones Oracle.
• Cargar datos de forma incremental a tablas de la base de datos a partir de archivos externos.
• Realizar transformaciones y manipulaciones de datos antes de la carga a la base de datos.
• Facilitar la integración y el movimiento de datos entre diferentes sistemas y plataformas.

Oracle GoldenGate

Es una solución avanzada de replicación y movimiento de datos que ofrece las siguientes funcionalidades:

1. Captura de cambios (CDC): GoldenGate puede capturar de manera eficiente y en tiempo real los cambios realizados en las bases de datos de origen (tanto Oracle como de otros proveedores) y replicarlos a los sistemas de destino.
2. Replicación de datos: GoldenGate permite replicar datos entre bases de datos Oracle, así como entre bases de datos Oracle y de otros proveedores, como SQL Server, DB2, MySQL, etc.
3. Integración de datos (ETL): GoldenGate puede utilizarse para extraer, transformar y cargar datos desde múltiples fuentes a diversos destinos, aprovechando sus capacidades de captura de cambios y replicación.
4. Migración de datos: GoldenGate es una herramienta clave para migrar datos entre diferentes plataformas de bases de datos, de forma segura y sin interrupciones en el servicio.

Algunos ejemplos de uso de Oracle GoldenGate incluyen:

• Replicación en tiempo real entre bases de datos Oracle.
• Replicación entre bases de datos Oracle y bases de datos de otros proveedores.
• Carga incremental de datos de Oracle a un almacén de datos.
• Migración de datos entre diferentes versiones o plataformas de bases de datos.
• Implementación de arquitecturas de alta disponibilidad y recuperación ante desastres.

Estas son algunas de las principales herramientas y mecanismos de movimiento de datos en Oracle 19c. Cada uno de ellos tiene sus propias características, ventajas y casos de uso específicos, lo que permite adaptarse a una gran variedad de escenarios de movimiento y migración de datos.