Arquitectura Medallón: análisis integral y aplicaciones

Abstract

La industria de los datos se encuentra en constante crecimiento. Según estadísticas recientes, cada día se generan aproximadamente 402,74 millones de Terabytes de información, y se estima que para el año 2025 la cifra alcance los 181 Zettabytes. Esto representa un aumento de 74 veces en solo 13 años, considerando que en 2010 apenas se producían 2 Zettabytes [1]. En este contexto, resulta fundamental que las empresas cuenten con especialistas capaces de diseñar soluciones de datos modernas y escalables, orientadas a ingestar, procesar/transformar, organizar y visualizar la información para facilitar la toma de decisiones. Para lograrlo, es necesario definir una arquitectura de datos que se adapte al manejo de grandes volúmenes, así como a la diversidad de formatos y estructuras que caracterizan a los datos actuales. En línea con lo anterior, se propone analizar la arquitectura Medallón, que al ser una arquitectura en capas es una de las más utilizadas actualmente por diversas empresas, especialmente en implementaciones sobre plataformas de computación en la nube o en el mundo de los Data Lakehouses o Data Lakes. Esta arquitectura organiza los datos en una secuencia lógica de mejora de calidad, estructurada en las etapas Bronce, Plata y Oro. Gracias a esta organización en capas, los datos sin procesar se transforman progresivamente en información valiosa, al tiempo que se fortalecen aspectos como el linaje de datos, la repetibilidad de procesos y el control de acceso [2] [3]. El objetivo de este trabajo es ofrecer una explicación general sobre qué es y cómo es la implementación de esta arquitectura Medallion, describiendo cada fase: ingesta de datos, almacenamiento, procesamiento y gobernanza, además de presentar algunos ejemplos de aplicación en función de distintos casos de uso.