Data Mesh

Prefazione

Sono stato coinvolto nello sviluppo di software per grandi aziende per diversi decenni e la gestione dei dati è sempre stata una questione architettonica importante. Agli inizi della mia carriera, c'era molto entusiasmo per un unico modello di dati a livello aziendale, spesso memorizzato in un unico database aziendale. Ma ben presto abbiamo imparato che una pletora di applicazioni che accedevano a un archivio dati condiviso era un disastro di accoppiamento ad hoc. Anche senza questo, esistevano problemi più profondi. Idee fondamentali per un'azienda, come quella di "cliente", richiedevano modelli di dati diversi nelle varie unità aziendali. Le acquisizioni aziendali hanno ulteriormente confuso le acque.

In risposta, le aziende più sagge hanno decentralizzato i loro dati, spostando l'archiviazione, i modelli e la gestione dei dati in diverse unità aziendali. In questo modo, le persone che conoscono meglio i dati del loro settore sono responsabili della loro gestione. Collaborano con altri settori attraverso API ben definite. Dal momento che queste API possono contenere comportamenti, abbiamo una maggiore flessibilità nel modo in cui i dati vengono condivisi e, soprattutto, nel modo in cui la gestione dei dati si evolve nel tempo.

Sebbene questa sia sempre più la strada da seguire per le operazioni quotidiane, l'analisi dei dati è rimasta un'attività più centralizzata. I magazzini di dati avevano l'obiettivo di fornire un archivio aziendale di informazioni critiche curate. ...