Migración del procesamiento de datos optimiza costos y eficiencia en RRHH con Apache Beam y Dataflow

Categoría

Proyecto

Área

Recursos humanos

Sector

Motores y automatización

Tamaño de la empresa

Gran empresa

Duración del proyecto

5 meses

Desafío

El área de Recursos Humanos enfrentaba altos costos operativos y de renovación debido al uso de la plataforma Dataprep para la transformación de datos. Era necesario encontrar una solución que redujera estos gastos sin comprometer la calidad, eficiencia y flexibilidad en el procesamiento de datos.

Solución propuesta

Dojo lideró la migración de las transformaciones de datos de Dataprep a una solución personalizada basada en Apache Beam, ejecutada en Dataflow. Este enfoque permitió mayor control y optimización de procesos, eliminando la necesidad de licencias costosas.

01

Reestructuración de pipelines de datos

Todas las transformaciones fueron reescritas en Apache Beam/Python, manteniendo las reglas y requisitos del negocio.

02

Ejecución escalable en Dataflow

Implementación de una infraestructura robusta y flexible para procesar los datos de Recursos Humanos de manera continua y eficiente.

Resultados alcanzados

01

Reducción de costos

Eliminación de los costos de licencia de Dataprep, generando un ahorro significativo.

02

Automatización y eficiencia

Procesos de transformación de datos optimizados, con mayor calidad y confiabilidad.

03

Escalabilidad

Solución diseñada para responder a demandas futuras y en crecimiento.

04

Autonomía tecnológica

Uso de tecnologías de código abierto, reduciendo la dependencia de soluciones propietarias.