Che cos'è la cronologia dei dati?
La cronologia è il viaggio dei dati dell'organizzazione. Dalla creazione all'origine, lungo il loro movimento e trasformazione nelle piattaforme e nei repository all'interno e all'esterno del tuo business, per poi raggiungere la destinazione finale nelle applicazioni e nella business intelligence a cui fai affidamento per operazioni e decisioni. Una cronologia dati completa fornisce una vista completa e dettagliata su come un certo set di dati si muove all'interno, attraverso e al di fuori della tua organizzazione. Può aiutarti a pianificare le iniziative di modernizzazione dell'IT, risolvere i problemi di qualità dei dati, gestire la governance dei dati e la conformità alle normative e visualizzare e comprendere rapidamente i dati disponibili e il loro rapporto nella tua organizzazione.
Perché la cronologia dei dati è importante?
Tracciare origine e flusso dei dati non è cosa da poco. La tua organizzazione accumula sistemi di informazioni e, di concerto, punti di inserimento di dati e regole di trasformazioni per quelli in perenne movimento. Inoltre, gli strumenti di integrazione dei dati, di estrazione-trasformazione-carico (ETL), i codici procedurali e persino le API e i report di business intelligence (BI) aggregano e trasformano costantemente i dati. Di conseguenza, risulta difficile compilare manualmente e comprendere questa complessa ragnatela di dati in tutti i sistemi dell'organizzazione per presentarli in un flusso visivo semplice. Una cronologia dei dati automatizzata può fornire all'IT, ai team di governance dei dati e agli utenti aziendali una visibilità e un contesto correnti sui dati dell'organizzazione, permettendo loro di lavorare in modo più efficiente, prendere decisioni migliori e sfruttare e proteggere in modo ottimale i dati a loro disposizione.
Non solo la cronologia dei dati ti permette di comprendere la loro origine, come si trasformano e come si muovono nell'organizzazione, ma può portare insieme attributi e governance tecnici e di business, identificare i dati sensibili e altre classificazioni, fornire visibilità sulla loro qualità e aiutare gli utenti a condurre rapidamente analisi delle cause radice, oltre a molte altre cose. In assenza di funzionalità di analisi degli impatti automatizzate o insieme a esse, la cronologia dei dati può anche essere molto utile per trovare l'ambito e valutare l'impatto delle potenziali iniziative di migrazione di gestione, intelligence e piattaforme dati.
Vantaggi della cronologia dei dati
Impatto aziendale e visibilità sul panorama dei dati
La consapevolezza e la comprensione dei dati disponibili e della loro trasformazione e flusso in più sistemi possono influenzare e supportare le decisioni aziendali che prendi. Ad esempio, comprendere il viaggio e il contesto dei dati può aiutarti a rispondere alle domande sui report di business intelligence, come ad esempio chi possiede i dati, a conoscere linee guida di governance da tenere a mente e a sapere quanto i dati sono pronti all'uso. Con la cronologia dei dati, puoi comprendere meglio i dati allineati alle iniziative critiche del business, dove e come sono stati acquisiti e se siano affidabili in base al loro percorso cronologico, a punteggi di qualità e ad altri fattori. Inoltre, le organizzazioni possono visualizzare più facilmente le aree di rischio dove dati di privacy critici potrebbero stare lasciando l'azienda.
Supporto di base per la governance dei dati
Proprietà, responsabilità e tracciabilità dei dati rappresentano le fondamenta di un programma di governance solido. Insieme all'automazione, la cronologia dei dati può aiutare i proprietari, gli steward e gli utenti IT e aziendali dei dati a comprenderne e convalidarne l'utilizzo. Una cronologia dei dati automatizzata può fornire dati orizzontali, dall'origine iniziale alla destinazione e su tutte le trasformazioni intermedie, oltre a dati verticali che offrono informazioni sulle associazioni tra asset di business e tecnici. La cronologia dei dati completa, in upstream e downstream, può rivelare quando e da chi sono state effettuate modifiche, oltre a riunire governance tecnica e di business in una visuale centrale per tutti gli utenti dei dati. Si tratta di uno strumento di trasparenza essenziale per i team di governance.
Conformità alle normative e controlli
I termini aziendali e le policy dei dati devono essere implementati tramite regole di business documentate nella tua soluzione di intelligence e governance. Potrai quindi usare la cronologia dei dati per tracciare la conformità normativa con tali regole, incorporando controlli e convalide ogni volta che tali dati vengono trasformati. La cronologia dei dati offre anche una prova visiva e veloce a clienti, dipendenti e auditor che dimostra la tua conformità e il tuo impegno verso normative e privacy, nonché l'implementazione di programmi che supportano le tue iniziative in tal senso.
Collaborazione tra team
La cronologia dei dati fornisce una vista comune dei dati all'interno di un'organizzazione e del loro percorso nelle business line e nei vari ambienti legacy e moderni analitici. Questa trasparenza di dati e relativo utilizzo porta a una condivisione aggiuntiva e identifica chiaramente gli handoff critici durante i progetti di integrazione. Con un unico punto di riferimento centrale, i team di tutta l'organizzazione possono collaborare con più efficienza per garantire che i dati interni siano sfruttati e protetti appieno.
Visibilità sulla qualità dei dati e destinazione
L'analisi delle cause radice è il primo passo per gestire una qualità scarsa dei dati Con le informazioni ottenute grazie alla cronologia, gli steward dei dati possono tracciare a ritroso il flusso di informazioni per determinare quali standardizzazioni e trasformazioni dei dati sono state eseguite correttamente. Una cronologia dei dati completa ti permette di correggere un problema di qualità all'origine e consente ai team di monitorare in modo proattivo le pipeline di dati chiave per garantire l'integrità di questi ultimi. La cronologia può anche fornire agli utenti aziendali una vista diretta sulla salute dei dati, per aumentare la fiducia.
Pianificazione IT e gestione dei dati
La cronologia dei dati fornisce le informazioni che gli architetti e i tecnici dei dati sfruttano per comprendere lo stato corrente del panorama dei dati e per gestire e pianificare con accortezza le iniziative di modernizzazione IT, le migrazioni di data warehouse e altri aspetti fondamentali. Fornisce un ambito di progetto visivo su quante applicazioni, regole di trasformazione e business unit saranno interessate. La visibilità sulle classificazioni di dati sensibili e di altro tipo, gli indicatori sulla qualità dei dati e il contesto di governance prontamente disponibile aiutano i team IT a gestire al meglio i dati nell'organizzazione.
Preparazione dei dati
Per gli analisti che preparano i dati, la cronologia fornisce la roadmap necessaria per garantire la scelta di quelli più appropriati per l'analisi. La cronologia dei dati può fornire a tali analisti una vista di sistemi, ambienti, tabelle e colonne disponibili. Funge da punto di riferimento per le denominazioni fisiche e logiche e può includere qualità dei dati, indicatori sui dati sensibili e linee guida di governance per dirigere in modo efficace il lavoro degli analisti e velocizzare i tempi di preparazione dei dati.
La cronologia dei dati fa parte della governance?
Sì. Una governance dei dati efficace richiede il posizionamento di glossari aziendali, dizionari dei dati e policy sulla privacy in un'unica posizione centrale. Tuttavia, con la crescita del volume dei dati nell'organizzazione, questi oggetti finiscono per avere formati diversi e trovarsi in posti diversi, con espressioni differenti. La cronologia dei dati aiuta le organizzazioni a tracciarli, monitorarli e aggiornarli nel tempo. Offre infatti vantaggi per le prassi di governance come la coerenza della terminologia, la correzione della qualità dei dati, il controllo delle pipeline e l'analisi delle cause radice duranti gli eventi imprevisti.
Quali sono i diversi tipi di cronologia dei dati?
La cronologia dei dati include aspetti di business e tecnici.
La cronologia di business si concentra sulla panoramica delle origini dati per aiutare i team di governance e gli utenti aziendali a comprendere il flusso di dati tra origini diverse all'interno di un panorama dell'organizzazione.
La cronologia tecnica si concentra sul flusso dei dati dell'organizzazione a livello di tabella e colonna, sui livelli e le regole di trasformazione sottostanti, su tabelle/file temporanei e altri oggetti di interesse per permettere agli utenti tecnici di comprendere il percorso dei dati.
Entrambe queste viste sono fondamentali per le organizzazioni che vogliono comprendere il valore dei propri dati e valutare con facilità l'impatto dei cambiamenti. La possibilità di approfondire la cronologia, da quella di business a quella tecnica o viceversa, fornisce ulteriore flessibilità che permette agli analisti dei dati di ottenere subito la giusta prospettiva del flusso.Non tutte le cronologie di dati automatiche vengono fornite allo stesso modo. Una cronologia riferita potrebbe acquisire altre cronologie insieme in base ai nomi e alla composizione di elementi o attributi. Una cronologia dei dati più dettagliata si basa sul codice a livello di elemento ed è più affidabile.
La cronologia dei dati si sta evolvendo e sta diventando più intelligente, sfruttando l'IA per acquisire modelli in codici difficili da analizzare.
Cosa sono un catalogo e una cronologia di dati?
Un catalogo è una vista centralizzata degli asset di dati di un'organizzazione, usato per gestire, sfruttare, proteggere, comprendere e condividere questi ultimi. Include metadati (dati che descrivono altri dati) raccolti dalle origini e piattaforme di dati, dalle applicazioni e dai sistemi di business intelligence nella tua organizzazione. Questo catalogo viene poi ulteriormente arricchito con contesto aziendale e linee guida di governance dei dati. La catalogazione automatizzata dei dati sfrutta le funzionalità di rilevamento dei dati e acquisizione dei metadati automatiche con connettori di dati specifici per piattaforme per i metadati dei dati at rest. La cronologia dei dati automatizzata sfrutta i metadati dei dati at rest. Inoltre, acquisisce i metadati dei dati in movimento, sfruttando le funzionalità di reverse engineering dei connettori dati. Analizza il codice che si occupa del movimento dei dati, come il codice procedurale ed ETL, per mappare il flusso dei dati in un'organizzazione. La cronologia risultante aiuta l'IT, i team di governance e gli utenti aziendali a comprendere a livello visivo gli asset di dati disponibili nell'organizzazione. Specifica infatti il loro percorso dall'origine iniziale fino alle applicazioni target finali, con tutte le trasformazioni intermedie.
Che cos'è uno strumento di cronologia dei dati?
Uno strumento di cronologia dei dati usa l'automazione per rilevare e mappare il flusso dei dati da origini iniziali, tramite trasformazione ed elaborazione, fino alle destinazioni finali. Ad esempio, mappando le pipeline di dati che popolano il tuo data warehouse, uno strumento di cronologia dei dati potrebbe sfruttare il reverse engineering delle attività ETL subito precedenti al caricamento dei dati nel warehouse di destinazione. Tramite le iterazioni nelle varie origini dati, lo strumento accumula un elenco e documenta ogni elemento di cronologia rilevato. Alla fine della sequenza, il processo avrà mappato a ritroso le pipeline per popolare tale warehouse. Gli strumenti di cronologia dei dati automatizzata facilitano l'acquisizione e mantengono aggiornata la cronologia. Permettono infatti agli steward dei dati di risparmiare fino al 95% del tempo tradizionalmente richiesto per i metodi cronologici manuali.
Dove posso ottenere assistenza con la cronologia dei dati?
erwin Data Intelligence di Quest® fornisce una cronologia dei dati
automatizzata dall'origine alla destinazione, con tutte le trasformazioni
intermedie. IT, team di governance dei dati e utenti aziendali possono
consultare la cronologia dei dati con contesto tecnico e aziendale,
visibilità sulla qualità e indicatori dei dati sensibili.
Risorse per la cronologia dei dati
The value of automated data lineage
The value of automated data lineage | erwin Data Intelligence Webcast
Understand your Data Landscape with the erwin Data Intelligence Suite
erwin Data Intelligence provides powerful capabilities to help organizations see and govern their entire data landscape. Capab...
Tech Brief: Data Lineage
This paper by David Loshin explores the benefits and common challenges of data lineage, plus using a data catalog approach to p...
Blog sulla cronologia dei dati
What is Data Lineage? Top 5 Benefits of Data Lineage
Data lineage is the journey data takes from creation, through its transformations over time. The erwin Experts highlight the top 5 benefits of data l...
Michael Adjei
Why You Need End-to-End Data Lineage
Not Documenting End-to-End Data Lineage Is Risky Business – Understanding your data’s origins is key to successful data governance. Not everyone unde...
Michael Adjei
Demystifying Data Lineage: Tracking Your Data's DNA
From ensuring GDPR compliance to maximizing data's value, for any healthy data governance initiative, data lineage should be the first step.
Danny Sandwell
Building data maturity: 7 steps to achieve data maturity and maximize data value
Data maturity allows users to easily shop for datasets. However, achieving data maturity can be a challenge. Explore 7 steps to get started.
Susan Laine
Key findings on the 2023 state of data intelligence
Get insights from 220 IT professionals about their key challenges and investments in their data intelligence and data governance initiatives.
Susan Laine