Migración de Oracle a Azure Data factory para una empresa del sector insurance

Creación de un fichero personalizado, que con el proceso de ADF se ha insertado el resultado del proceso en una tabla maestra, que es la que luego se encarga de llevar la información correctamente hacia todas las tablas del sistema, con los datos que le corresponden a cada una.

El reto

Migrar un proceso desde Oracle hacia una nueva plataforma para mantener los estandarés de mejora continua y competitividad. Este reto representa la oportunidad de optimizar la operativa, reducir costes y aumentar la agilidad de respuesta. Al trasladar a un entorno más flexible y escalable se busca, no solo mantener la eficiencia operativa, sino también aprovechar nuevas capacidades que potencien nuestra oferta de valor.

Esto requiere una cuidadosa planificación y ejecución, asegurando que la transición sea fluida y que los riesgos para la continuidad del negocio se minimicen.

La solución

Para abordar el desafío de migrar y optimizar el proceso previamente establecido en Oracle, adoptamos una solución centrada en el uso de Azure Data Factory (ADF). El primer paso consistirá en utilizar ADF para leer el fichero generado por el proceso original. Esta etapa implica la creación de pipelines en ADF que están diseñados específicamente para procesar y transformar los datos contenidos en el fichero, adecuándolos a las necesidades y estructuras del nuevo entorno.

El siguiente paso es almacenar esos datos en las distintas tablas de nuestra base de datos en Azure, asegurándonos de que cada pieza de información se dirija correctamente a su destino final. Esta distribución se realizará mediante la configuración de actividades de copia en ADF, que permitirán insertar los datos en las tablas correspondientes, respetando las relaciones y la integridad de los datos.

Por último, compilamos un fichero final de columnas, que será el resultado de combinar y sintetizar la información ahora distribuida en múltiples tablas. Este fichero final es diseñado para ser directamente utilizable por la plataforma, facilitando así las operaciones posteriores, como análisis, reportes o cualquier otra actividad que requiera el acceso a datos consolidados y estructurados de forma coherente.

A través de esta solución no solo resolvemos el problema de migrar el proceso existente y su información asociada a un entorno más moderno y escalable, sino que también optimiza la gestión de datos dentro de la plataforma, mejorando la eficiencia, la velocidad de acceso a la información y la capacidad de respuesta ante nuevas necesidades de negocio.Con Azure Data Factory en el centro de esta estrategia, garantizamos una migración fluida, segura y adaptativa, que alinea nuestra infraestructura de datos con los objetivos estratégicos de nuestra organización.

Resultados

La implementación de Azure Data Factory ha permitido superar el reto de procesar ficheros complejos, asegurando la integridad de la información al distribuirla eficientemente en distintas tablas. Esto ha permitido manejar datos mejorando significativamente la capacidad de análisis y toma de decisiones de la plataforma. Como resultado, se ha realizado una optimización en el procesamiento de datos, un aumento en la eficiencia operativa y una reducción en los costos, todo ello sin perder ningún dato crítico.

tecnologías utilizadas

ORACLE
SQL Services
Azure Data Factory

Siguiente Proyecto

Universidad de Murcia