Modelo Empresarial y Datamart de Ventas

Descripción del Caso

En los últimos 2 años Soluciones ha estado apoyando a una gran compañía del rubro financiero en el diseño e implementación de su arquitectura de datos empresarial. La 1ª fase del proyecto correspondió al diseño de un modelo y de la arquitectura técnica de la solución y la 2ª fase la implementación del 1er MVP correspondiente al Datamart de Ventas.

Actualmente Soluciones S.A. cuenta con un equipo de 8 consultores que distribuidos en diferentes funciones siguen avanzando con la solución y liberando diferentes módulos e incrementos que posibilitan la explotación de los datos por parte de las áreas de negocio de esta compañía.

Arquitectura Técnica

Considerando el volumen y la oportunidad requerida sobre los datos es que se definió implementar la solución sobre una distribución de Hadoop (Hortonworks) utilizando un Framework de Big Data para llevar a cabo la integración en las diferentes capas de la arquitectura definida. Los principales componentes utilizados en la solución fueron: Sqoop para la ingesta de datos, el sistema de archivos distribuidos HDFS para el lago de datos, Apache Spark para el procesamiento de la data hace a los modelos de consumo, Apache Hive para el modelo y la metadata y Apache Oozie para la orquestación de los procesos.

Beneficios

El principal beneficio de esta solución fue poder unificar en un repositorio de información en diferentes capas una solución de datos escalable que en el futuro pretende atender a diferentes áreas de negocio de esta institución financiera. Al haber sido realizada en conjunto con el equipo de TI y de Gobierno de esta compañía se aseguraron el cumplimiento de estándares técnicos, de arquitectura y también adhesión a las definición y políticas de Gobernance existentes.