Evoluzione dei paradigmi di Data Management: dalla rigidità del Data Warehouse alla flessibilità di una Data Platform

This thesis analyzes the evolution of data management systems, focusing on the transition from a traditional Data Warehouse architecture to a modern Data Platform based on Microsoft Fabric. Based on the internship experience at CAREL Industries S.p.A., the thesis describes the design and implementation of a corporate Data Lakehouse, addressing the scalability and rigidity limitations of the previous system. The project includes the development of ETL/ELT pipelines and the adoption of the Medallion Architecture (Bronze, Silver, Gold) to ensure data quality and integration. The adoption of a centralized SaaS ecosystem is expected to improve data management and support more flexible decision-making processes, enabling advanced Self-Service BI and Analytics paradigms.

Il presente lavoro di tesi analizza l'evoluzione dei sistemi di gestione dati, focalizzandosi sulla transizione da un’architettura tradizionale di Data Warehouse a una Data Platform moderna basata su Microsoft Fabric. Attraverso l'esperienza di tirocinio presso l’azienda CAREL Industries S.p.A., viene descritta la progettazione e l'implementazione di un Data Lakehouse aziendale, superando i limiti di scalabilità e rigidità del sistema preesistente. Il progetto si articola nello sviluppo di pipeline ETL/ELT e nell'applicazione della Medallion Architecture (Bronze, Silver, Gold) per garantire la qualità e l'integrazione del dato. L’adozione di un ecosistema SaaS centralizzato è prevista per migliorare la gestione dei dati e supportare processi decisionali più flessibili, abilitando paradigmi avanzati di Self-Service BI e Advanced Analytics.