Configurazione di esempio per la governance dei dati

La governance dei dati di Microsoft Purview, con Microsoft Purview Unified Catalog e Microsoft Purview Data Map, offre visibilità completa, attendibilità dei dati e innovazione responsabile per aiutare le organizzazioni a ottenere un maggiore valore aziendale nell'era dell'intelligenza artificiale. Utilizzando un esempio di gestione dei dati sanitari, segui i passaggi di questo articolo per comprendere come configurare Unified Catalog e utilizzare le sue funzionalità per creare una solida pratica di governance dei dati per la tua organizzazione.

Passaggio 1: Configurare i domini di governance in Unified Catalog

I domini di governance sono la chiave per stabilire la responsabilità per i dati e consentono di federare la governance di tali dati in tutta l'azienda. Quando si creano domini di governance, iniziare con il proprietario appropriato per assicurarsi di poter identificare e collaborare in modo efficace con gli esperti per tutti i dati nel patrimonio di dati. I domini di governance possono essere di molti tipi diversi per allinearsi al tipo di limite dei dati per il team che governa tali dati. Ad esempio: domini funzionali (finanza, risorse umane, vendite) o domini di dati (prodotto, cliente, integrità).

Prerequisiti

• È necessario il ruolo di amministratore della governance dei dati per Unified Catalog.

Concedere le autorizzazioni e creare il primo dominio di governance

1. Aprire il portale di Microsoft Purview.

2. Accedere al portale Microsoft Purview usando le credenziali di un account amministratore con il ruolo di gestione dei ruoli , ad esempio un amministratore Purview. Passare a Impostazioni > : ruoli e ambiti da visualizzare e gestire.

3. Selezionare i gruppi di ruoli.

4. Nella pagina Gruppi di ruoli per le soluzioni Microsoft Purview , selezionare il gruppo di ruoli Governance dei dati .

5. Nella pagina Modifica membro del gruppo di ruoli , selezionare Scegli utenti o Scegli gruppi.

6. Selezionare la casella di controllo per tutti gli utenti o i gruppi che si desidera aggiungere al gruppo di ruoli.

7. Seleziona Seleziona.

8. In Unified Catalog, selezionare Gestione catalogo, quindi selezionare Domini di governance.

9. Nella pagina Domini di governance è possibile configurare il resto del catalogo per consentire ad altri di federare la proprietà dei dati, consentire ai team di sviluppare le proprie conoscenze e stabilire il valore aziendale dei dati.

   1. Per iniziare, selezionare Nuovo dominio di governance.
      1. È possibile aggiornare il nome del dominio di governance. Per questa esercitazione, denominala "(Esercitazione) Salute personale" e fornisci una descrizione di "I dati sulla salute personale si riferiscono a qualsiasi informazione relativa alla salute fisica o mentale di un individuo raccolta e utilizzata nel settore sanitario. Questi dati possono includere un'ampia gamma di tipi, ad esempio cartelle cliniche, anamnesi dei trattamenti, immagini diagnostiche e risultati di test di laboratorio. Spesso è protetto da varie leggi e normative per garantire la privacy e la riservatezza".
      2. Selezionare il tipo come "dominio dati".
      3. Lasciare vuoto l'elemento padre (se si tratta del primo dominio di governance nel catalogo, non ha un dominio padre).
      4. Selezionare Crea.
      5. Ora è possibile creare altri due domini autonomamente. Questi domini sono punti chiave della federazione per la collaborazione e la governance nell'organizzazione. Pensa a chi potrebbero essere i proprietari dei tuoi domini quando implementi Unified Catalog.
         1. È possibile seguire questi esempi:
         • Un dominio funzionale aziendale rappresenta le risorse e i termini altamente controllati usati da un'intera azienda. - Le vendite sono un dominio funzionale che la maggior parte delle organizzazioni ha come dominio figlio di Corporate.

10. Selezionare il dominio di governance creato.

11. Selezionare la scheda Ruoli del dominio di governance.

12. Per impostazione predefinita, quando si crea il dominio di governance si viene aggiunti a tutti i ruoli del dominio di governance. In qualità di proprietario di un dominio di governance, si aggiungono gli amministratori dei dati, ovvero gli esperti aziendali del dominio, e i proprietari dei prodotti di dati, che sanno quali asset di dati sono meglio utilizzati per gli altri.

13. Tornare alla scheda Dettagli .

14. Selezionare Gestisci criteri per applicare un criterio a livello di dominio. Questo criterio si applica a tutti i prodotti dati nel dominio. Abilitando l'applicazione automatica di un criterio, gli esperti di dati non devono essere esperti di criteri.

15. Nella scheda Gestisci criteri di accesso selezionare la casella di controllo accanto a Consenti copie dei dati. Selezionando questa opzione del criterio, viene applicata automaticamente un'attestazione che richiede a tutti gli utenti che richiedono l'accesso ai prodotti di dati per attestare di aver compreso i criteri di copia dei dati per i dati.

16. Selezionare Salva modifiche per verificare che il criterio sia impostato dal dominio di governance.

17. Selezionare Pubblica nel dominio di governance, che pubblica tutti gli altri concetti all'interno del dominio.

Creare glossario

L'aggiunta di termini di glossario al dominio di governance aiuta altri utenti a comprendere il modo in cui l'azienda usa e interpreta i dati. I termini del glossario assicurano anche che le informazioni dettagliate usino termini comuni e, in generale, le conoscenze dell'utente in tutto il dominio di governance.

1. Nella pagina relativa al dominio di governance trovare la scheda Termini glossario e selezionare Visualizza tutto.

2. Nella pagina Termini del glossario selezionare Nuovo termine.

3. Immettere i dettagli: 1. Nome: "Epidemia".

   1. Descrizione: Una malattia che colpisce o ha il potenziale per colpire un'ampia porzione della popolazione.
   2. Puoi lasciare il resto vuoto per ora ma ci sono campi da raccogliere: il proprietario del termine responsabile della definizione del termine per la tua azienda, acronimi da condividere comuni noti anche come nomi del termine, infine puoi fornire collegamenti alle risorse che avrebbero ancora più informazioni sul termine.

4. Selezionare Crea.

5. Selezionare Gestisci criteri. Analogamente ai criteri a livello di dominio, è possibile creare criteri a livello di termine che si applicano ovunque il termine sia in uso.

6. Selezionare la casella accanto a È necessaria l'approvazione del manager. Questo criterio impone un'approvazione secondaria da parte del manager dell'utente in Microsoft Entra ID quando viene richiesto l'accesso ai prodotti di dati.

7. Selezionare Pubblica per il termine di epidemia creato. I termini pubblicati sono filtrabili in Unified Catalog e garantiscono che gli altri utenti che usano il termine per descrivere il proprio prodotto di dati possano visualizzare tale descrizione in Unified Catalog durante l'esplorazione del prodotto di dati.

8. Ora creare altri due termini. Questa volta, selezionare il termine "Epidemia" come termine padre per i termini creati. Prova a costruire relazioni tra questi termini secondari nella relativa scheda di entrambi i termini per aiutare a costruire la rete di come questi termini lavorano insieme per spiegare l'interezza di un argomento.

   1. Pandemia: un'epidemia globale di una malattia che colpisce un gran numero di persone in più paesi/regioni o continenti.
   2. Epidemia: un focolaio nazionale o regionale di una malattia altamente contagiosa e che colpisce gran parte della popolazione.

9. Provare a creare un paio di altri termini in qualsiasi altro dominio creato in precedenza. Se non sei sicuro di cosa aggiungere, seleziona Ottieni termini suggeriti per fare in modo che l'IA generativa ne proponga alcuni in base alla descrizione e al nome del dominio che hai già fornito.

Aggiungi un OKR

Aggiungi un OKR (obiettivo e risultato chiave) per il dominio Personal Health per aiutare altri utenti a comprendere il valore aziendale dei tuoi dati. Questo passaggio crea una connessione diretta tra i dati e il valore aziendale che forniscono.

1. Selezionare la casella OKR nella pagina del dominio di governance.

2. Seleziona Nuovo OKR.

3. Immetti prima i dettagli del traguardo:

   1. Obiettivo: ridurre il rischio di pandemia consentendo un'efficace diffusione del vaccino da parte dei pazienti.
   2. Proprietario: immettere il nome
   3. Data obiettivo: "2024-12-31"

4. Selezionare Crea.

5. Aggiungi risultati chiave al tuo obiettivo per renderlo misurabile e per monitorare i progressi verso l'obiettivo. Selezionare Aggiungi risultato chiave.

6. Immettere i dettagli del risultato della chiave:

   1. Risultato chiave: garantire che l'80% dei gruppi di età più avanzata (>65 anni) che hanno maggiori probabilità di essere colpiti dalla pandemia riceva la vaccinazione completa entro la fine dell'anno solare 2024.
   2. Stato di avanzamento: Sulla buona strada
   3. Quantità progressi: 70
   4. Quantità reti: 80
   5. Importo massimo: 100

7. Selezionare Crea.

8. Scegliere Pubblica.

Creare elementi di dati critici

Creare un elemento di dati critico (CDE) in Personal Health per garantire che le colonne di dati più importanti abbiano una definizione e una comprensione coerenti. Il CDE soddisfa sempre le aspettative aziendali su come vengono formati e archiviati i dati.

1. Nella pagina dei domini di governance con il dominio Personal Health selezionato, selezionare la casella Elementi dati critici .
2. Selezionare Nuovo elemento dati critico.
3. Immettere i metadati CDE di base:
   1. Nome: Gruppi di età
   2. Descrizione: raggruppamento comune delle età delle persone utilizzato per garantire che i rapporti analitici necessari seguano un riferimento su cui gli altri possono fare affidamento e rimuovendo le singole età per migliorare l'anonimato dei dati. La fascia d'età è divisa in otto gruppi: <2 anni, 2-4 anni, 5-11 anni, 12-17 anni, 18-24 anni, 25-49 anni, 50-64 anni, 65+ anni.
   3. Proprietario: immettere il nome
   4. Tipo di dati previsto: Testo
   5. Selezionare Crea.

La vera potenza del CDE è che esegue il mapping direttamente alle colonne di dati fisiche in cui sono memorizzati questi dati. Questa connessione garantisce la comprensione comune e consente la valutazione delle regole e dei criteri di qualità dei dati su vasta scala.

1. Dal CDE appena creato, selezionare Aggiungi colonna.

2. Cerca l'asset di dati Covid 19 Vaccine e Case Trends dal contenitore gold del data lake

3. Selezionare la casella, non il nome, dell'asset Vaccini Covid 19 e Case Trends .

   Consiglio

   Se selezioni il nome blu della risorsa, si apre una nuova finestra che mostra i dettagli della risorsa.

4. Selezionare il pulsante di opzione accanto alla colonna AgeGroupVacc.

5. Selezionare Aggiungi.

6. Selezionare la scheda Qualità dei dati nella parte superiore del CDE appena creato per applicare le regole di qualità dei dati al CDE. È simile a come sono stati aggiunti i criteri per i termini del glossario e i domini di governance.

7. Selezionare Nuova regola

8. Seleziona la corrispondenza del tipo di dati

9. Immettere il nome della regola: Conferma la formattazione della fascia di età

10. Selezionare Crea.

11. Selezionare Pubblica nel CDE

Questo CDE ora applica automaticamente una regola di qualità dei dati a ogni prodotto di dati che utilizza l'asset Covid 19 Vaccine e Case Trends, che verrà illustrato nella sezione successiva.

1. Provare a creare un paio di altri CDE negli altri domini. Ecco alcune idee:
   • Vendite: ricavi e nome del venditore
   • Corporate: ID prodotto

Passaggio 2: Configurare e registrare i dati in Data Map

Se non sono disponibili origini dati per l'analisi, seguire questa procedura per distribuire completamente un esempio di Azure Data Lake Storage (ADLS Gen2).

In un patrimonio di dati reali, si trovano molti sistemi diversi in uso per diverse applicazioni di dati. Esistono ambienti di reporting come Fabric e Snowflake in cui i team usano copie dei dati per creare soluzioni analitiche e potenziare report e dashboard. Esistono sistemi di dati operativi che alimentano le applicazioni che i team o i clienti utilizzano per completare i processi aziendali che raccolgono o aggiungono dati in base alle decisioni prese durante il processo.

Per creare un patrimonio di dati più realistico, mostra molte origini di dati nel catalogo, che possono coprire l'ampiezza dei diversi utilizzi dei dati che ogni azienda potrebbe avere. I tipi di dati necessari per alimentare un caso d'uso possono essere molto diversi: gli utenti aziendali hanno bisogno di report e dashboard, gli analisti hanno bisogno di dimensioni e fatti conformi per creare report, i data scientist o i data engineer hanno bisogno di dati di origine grezzi provenienti direttamente dal sistema che raccoglie i dati. Tutto questo e altri ancora consentono a utenti diversi di vedere l'importanza di trovare, comprendere e accedere ai dati nello stesso posto.

Per altri tutorial su come aggiungere dati al tuo patrimonio, segui queste guide:

• Esercitazione Fabric Lakehouse : fornisce le basi di un ambiente di reporting
• Database Azure SQL (esempio): fornisce un esempio ben strutturato di archivio dati operativo

Prerequisiti

• Abbonamento in Azure: creare subito l'account gratuito di Azure
• Microsoft Entra ID per il tenant: Microsoft Entra ID Governance
• Un account Microsoft Purview e privilegi di amministratore (questo è l'impostazione predefinita se è stato creato l'account Microsoft Purview).
• Tutte le risorse; Microsoft Purview, l'origine dati e Microsoft Entra ID devono trovarsi nello stesso tenant cloud.

Configurare l'archivio dati

R. Creare e popolare un account di archiviazione

1. Seguire questa guida per creare un account di archiviazione: Creare un account di archiviazione per Azure Data Lake Storage Gen2
2. Crea contenitori per il tuo nuovo data lake:
   1. Passare alla pagina Panoramica dell'account di archiviazione.
   2. Seleziona la scheda Contenitori nella sezione Archiviazione dati.
      1. Selezionare Contenitore.
      2. Assegna al contenitore il nome "bronzo" e seleziona Crea.
      3. Ripetere questi passaggi per creare un contenitore "oro".
3. Scarica alcuni dati CSV di esempio da data.gov: Tendenze di vaccinazione e casi di Covid-19 per fascia di età, Stati Uniti
4. Caricare il file CSV nel contenitore denominato 'bronze' nell'account di archiviazione creato.
5. Selezionare il contenitore denominato 'bronzo' e selezionare Carica.
6. Cercare il percorso in cui è stato salvato il file CSV e selezionare il file Covid-19_Vaccination_Case _Trends .
7. Scegliere Carica.

B. Creare una Azure Data Factory

Questo passaggio dimostra come i dati si spostano tra gli strati di un data lake a medaglione e garantisce che i dati siano in un formato standardizzato che i consumatori si aspettano di utilizzare. Questo passaggio è un prerequisito per l'esecuzione della qualità dei dati.

1. Seguire questa guida per creare una Azure Data Factory: Creare una Azure Data Factory

2. Copiare i dati dal file CSV nel contenitore "bronzo" al contenitore "oro" come tabella in formato Delta usando questa guida di Azure Data Factory: Trasformare i dati usando un flusso di dati di mapping

3. Aprire l'esperienza Azure Data Factory (ADF) dal portale di Azure selezionando Launch studio nella scheda Panoramica della risorsa ADF creata.

4. Selezionare la scheda Autore in ADF Studio.

5. Selezionare il comando, quindi selezionare Flusso +di dati.

6. Denominare il flusso di dati 'CSVtoDeltaC19VaxTrends'.

7. Selezionare Aggiungi origine nella casella vuota.

8. Imposta le impostazioni dell'origine su:

   1. Nome flusso di output: 'C19csv'
   2. Descrizione: lasciare vuoto
   3. Tipo di origine: Inline
   4. Tipo di set di dati inline: testo delimitato
   5. Servizio collegato: selezionare il data lake in cui è stato archiviato il file csv

9. Imposta le opzioni di origine su:

   1. Modalità file: File
   2. Percorso file: /bronzo/ Covid-19_Vaccination_Case _Trends
   3. Non consentire di trovare alcun file: lasciare deselezionata
   4. Modifica acquisizione dati: lasciare deselezionata
   5. Tipo di compressione: Nessuna
   6. Codifica: predefinita (UTF-8)
   7. Delimitatore di colonna: virgola (,)
   8. Delimitatore di riga: Default(\r, \n o\r\n)
   9. Carattere di virgolette: virgolette doppie (")
   10. Carattere di escape: barra rovesciata ()
   11. Prima riga come intestazione: SELEZIONATA
   12. Lascia il resto come predefinito

10. Selezionare Avanti accanto all'origine creata e selezionare Sink.

11. Creare il sink in cui vengono archiviati il formato e la posizione dei dati per spostare i dati da un file CSV in 'bronze' a una tabella delta in 'gold'.

    1. Impostare i valori del sink (lasciare tutte le impostazioni come predefinite, se non specificato).
    2. Tipo di lavello: in linea.
    3. Tipo di set di dati inline: Delta.
    4. Servizio collegato: lo stesso data lake utilizzato nell'origine, perché si sta archiviando in un contenitore diverso.

12. Impostare i valori di impostazione (lasciare tutte le impostazioni come predefinite, se non diversamente specificato)

    1. Percorso cartella: oro/Vaccini Covid19 e tendenze dei casi.

13. Immettere il valore perché questo nome è il modo in cui si vogliono archiviare i dati e non esiste per la selezione.

14. Selezionare Convalida. Questa azione controlla il flusso di dati e fornisce istruzioni per correggere eventuali errori.

15. Seleziona Pubblica tutto.

16. Selezionate il + comando, quindi selezionate Pipeline (Pipeline).

17. Assegna un nome alla pipeline "CSV to Delta C19 Vax Trends".

18. Selezionare il flusso di dati creato nei passaggi precedenti da CSV a Delta (C19VaxTrends) e trascinarlo nella scheda della pipeline aperta.

19. Selezionare Convalida.

20. Scegliere Pubblica.

21. Selezionare Debug (usare il runtime attività) per eseguire la pipeline.

    Consiglio

    Se vengono visualizzati errori per gli spazi o caratteri inappropriati per il formato delta, aprire il file CSV scaricato e apportare correzioni. Quindi ricarica e sovrascrivi il CSV nella zona bronzo. Quindi eseguire nuovamente la pipeline.

22. Passare al contenitore gold nel data lake e ora dovrebbe essere visualizzata la nuova tabella Delta creata durante la pipeline.

Digitalizzare le risorse

Se non hai digitalizzato gli asset di dati nel Data Map, segui questi passaggi per popolare il Data Map.

La scansione delle origini nel patrimonio di dati raccoglie automaticamente i metadati degli asset di dati (tabelle, file, cartelle, report e altro ancora) in tali origini. Quando si registra un'origine dati e si crea la scansione, si stabilisce la proprietà tecnica sulle origini e sulle risorse visualizzate nel catalogo. È anche possibile controllare chi può accedere ai metadati in Microsoft Purview. Quando si registrano e si archiviano origini e risorse a livello di dominio, le si archivia al livello più alto della gerarchia di accesso. In genere, è consigliabile creare delle raccolte in cui analizzare i metadati delle risorse e stabilire la corretta gerarchia di accesso per tali dati.

• Fornire l'accesso di lettura per Microsoft Purview Managed Identity (MSI) al data lake o ad altri archivi dati.

  Consiglio

  Il MSI è il nome dell'account dell'istanza di Microsoft Purview.

Se si sceglie di usare Fabric o SQL, usare queste guide per fornire l'accesso:

• Microsoft Fabric
• database SQL di Azure

Registra il tuo data lake ed esegui la scansione delle tue risorse

1. In Data Map, nella scheda domini, selezionare le assegnazioni di ruolo per il dominio (è il nome dell'account Microsoft Purview):

   1. Aggiungere se stessi come amministratore dell'origine dati e curatore dei dati nel dominio.
      1. Selezionare l'icona della persona accanto al ruolo Amministratore origine dati. 1. Cerca il tuo nome così com'è in Microsoft Entra ID (potrebbe essere necessario inserire il tuo nome completo scritto esattamente come in Microsoft Entra ID).
      2. Selezionare OK.
      3. Ripetere questi passaggi per il curatore dei dati.

2. Registra il data lake:

   1. Selezionare la scheda Origini dati.
   2. Selezionare Registra.
   3. Selezionare il tipo di archiviazione Azure Data Lake Storage Gen2.

3. Fornisci i dettagli per connetterti:

   1. Abbonamento (facoltativo)
   2. Nome origine dati (questo è il nome dell'origine ADLS Gen2)
   3. Raccolta in cui archiviare i metadati delle risorse (facoltativo)
   4. Selezionare Registra

4. Una volta completata la registrazione dell'origine dati, è possibile configurare l'analisi. La registrazione indica che Microsoft Purview è connesso all'origine dati e l'ha inserita nella raccolta corretta per la proprietà. La scansione legge i metadati dall'origine e popola le risorse nella mappa dei dati.

5. Seleziona l'origine registrata nella scheda Origini dati

6. Selezionare Nuova analisi e specificare i dettagli:

   1. Utilizzare il runtime di integrazione predefinito per questa analisi
   2. Le credenziali devono essere Microsoft Purview MSI (sistema)
   3. Il livello di scansione è Rilevamento automatico
   4. Selezionare una raccolta o usare il dominio (la raccolta deve essere la stessa raccolta o raccolta figlio di dove è stata registrata l'origine dati)
   5. Seleziona Continua

   Consiglio

   A questo punto, la connessione viene testata per verificare che sia possibile eseguire un'analisi. Se non si concede al lettore MSI di Microsoft Purview l'accesso all'origine dati, l'operazione non riesce. Se non si è il proprietario dell'origine dati o non si ha un collaboratore con l'accesso utente, l'analisi non riesce perché prevede che si disponga dell'autorizzazione per creare la connessione.

7. Ora seleziona solo il contenitore "oro" in cui hai posizionato la tabella delta nella sezione dei dati di costruzione dell'esercitazione. Questa selezione impedisce la scansione di qualsiasi altro asset di dati presente nell'archivio dati.

   1. Se si dovrebbe avere un solo segno di spunta blu accanto all'oro, è possibile lasciare controlli accanto a tutto in quanto eseguirà la scansione dell'intera fonte e creerà comunque le risorse che useremo e altro ancora.
   2. Seleziona Continua

8. Nella schermata di selezione di un set di regole di scansione è necessario utilizzare il set di regole di scansione predefinito.

9. Seleziona Continua

10. In Imposta un trigger di analisi imposterai la frequenza dell'analisi in modo che, continuando ad aggiungere asset di dati al contenitore d'oro del lago, continui a popolare la mappa dei dati. Selezionare una volta.

11. Selezionare Continua.

12. Selezionare Salva ed esegui. Questa azione crea un'analisi che legge i metadati dal contenitore gold del data lake e popola la tabella che verrà usata in Unified Catalog nelle sezioni successive. Se selezioni solo Salva, l'analisi non viene eseguita e le risorse non vengono visualizzate. Una volta eseguita l'analisi, viene visualizzata l'analisi creata con lo stato Ultima esecuzione in coda. Al termine della lettura della scansione, le risorse sono pronte per la sezione successiva. Questo processo potrebbe richiedere alcuni minuti o ore, a seconda del numero di risorse presenti nell'origine.

Passaggio 3: pubblicare i prodotti di dati

La creazione di prodotti di dati è essenziale per garantire che l'organizzazione possa individuare i dati corretti. I prodotti di dati consentono di evitare la sovrascrittura di dati che hanno un valore basso o nullo nel patrimonio di dati perché non hanno alcun uso o valore limitato. Quando i tuoi esperti di dati pubblicano prodotti di dati, attivi i tuoi dati più preziosi e costruisci il giusto livello di governance basato su quel valore. La cura di risorse di cui i team tecnici non conoscono lo scopo aziendale o il tentativo di governare tutto nel complesso e crescente patrimonio di dati, causa tempo aggiuntivo e perdita di produttività inseguendo i dettagli di dati che potrebbero non essere mai utilizzati o potrebbero essere semplicemente rimossi dal patrimonio. Concentratevi invece sui dati che hanno valore e che le persone devono scoprire e costruire ancora più valore. Man mano che i team utilizzano più dati e acquisiscono una migliore comprensione di ciò che è necessario, è possibile creare prodotti di dati più utili per soddisfare tali richieste. La governance può adattarsi per garantire che rimangano sempre delle dimensioni corrette in base al valore e alla riservatezza dei dati.

Prerequisiti

• Essere un proprietario del prodotto dati per il dominio di governance in uso.
• Avere asset di dati nella mappa dei dati. Se non lo fai, vedi la sezione 2 di questa esercitazione per aggiungerne alcuni.
• Pubblicare un dominio di governance per pubblicare un prodotto di dati. Se non ve ne sono, vedi la sezione 1 di questa esercitazione per crearne uno.

Creare e pubblicare un prodotto di dati

1. Aprire il portale di Microsoft Purview.

2. Selezionare Unified Catalog.

3. Selezionare Gestione catalogo e quindi Domini di governance.

4. Nella pagina Domini di governance selezionare il dominio Salute personale.

5. Selezionare Vai ai prodotti dati in Concetti aziendali.

6. Qui è dove gli esperti di dati chiamati proprietari dei prodotti di dati identificheranno gli asset di dati destinati a essere utilizzati da altri nella tua organizzazione e forniranno le informazioni necessarie per renderli utilizzabili.

7. Selezionare Nuovo prodotto dati.

8. Fornire dettagli sul prodotto dei dati: 1. Nome: "Vaccinazione Covid-19 e tendenza dei casi per età" 1. Descrizione: "Questi dati provengono dal CDC come parte del Dipartimento della salute & dei servizi umani degli Stati Uniti. I dati contengono l'andamento delle vaccinazioni e dei casi per fascia d'età, a livello nazionale statunitense. I dati sono stratificati per almeno una dose e completamente vaccinati. I dati rappresentano anche tutti i partner per i vaccini, comprese le cliniche partner giurisdizionali, le farmacie al dettaglio, le strutture di assistenza a lungo termine, i centri di dialisi, l'Agenzia federale per la gestione delle emergenze e i siti partner dell'Health Resources and Services Administration e le strutture dell'entità federale".

   1. Tipo: set di dati
   2. Seleziona Avanti.
   3. Casi d'uso: This data is provided for public use and is intended to help understand the trends of vaccination up take and new cases by different age groups. The ages are banded into two groups ranging from <2 years to 65+ years. Similarly the trends are provided in daily numbers that provide seven day average of new cases by age group.
   4. Contrassegna come approvato come selezionato.
   5. Seleziona Salva.

9. Ora hai i metadati di base del prodotto di dati compilati. Aggiungi quindi alcune proprietà e mappa la risorsa da Mappa dati.

10. Selezionare Aggiungi asset di dati.

11. Vengono visualizzate le risorse digitalizzate in Data Map, incluse tutte le cartelle e i layer dell'origine dati.

12. Cercare la risorsa Covid19 Vaccine and Case Trends aggiunta al contenitore gold del data lake e selezionare questo set di risorse.

13. Selezionare Aggiungi. È possibile selezionare tutte le risorse necessarie per un prodotto di dati, ma in questo caso ne è necessaria una sola.

    Consiglio

    Seleziona Ottieni suggerimenti per fare in modo che l'aiuto dell'intelligenza artificiale generativa scelga dalle risorse nella tua mappa dei dati e seleziona le tendenze dei vaccini e dei casi di Covid19 da un elenco ridotto di risultati.

14. Ora è possibile visualizzare la risorsa aggiunta al prodotto di dati.

15. Selezionare Aggiungi termine accanto al titolo dei termini del glossario.

16. Selezionare il termine per l'epidemia creato in precedenza e selezionare Aggiungi.

17. Ora dovresti vedere l'elemento di dati critico per fascia di età dalla risorsa mappata al prodotto di dati.

18. Seleziona Aggiungi OKR accanto al titolo dell'OKR.

19. Selezionare Ridurre il rischio pandemico consentendo un'efficace diffusione del vaccino da parte dei pazienti. È l'obiettivo che hai creato nella prima sezione.

Gestione dei criteri di richiesta di accesso ai prodotti dati

Nella parte superiore della pagina, l'ultimo passaggio prima di pubblicare il prodotto di dati consiste nel selezionare Gestisci criteri. Qui è possibile configurare i criteri di accesso e il flusso di lavoro di richiesta di accesso effettuando selezioni e fornendo i nomi per l'approvazione. È anche possibile usare la scheda Criteri ereditati per visualizzare i criteri di dominio della governance applicati per l'attestazione delle copie dei dati applicata in precedenza. Lo stesso vale per l'approvazione del Manager richiesta dal termine glossario dell'epidemia.

1. Selezionare la scheda Gestisci criteri .

2. In Limite di tempo di accesso, specificare i dettagli relativi a quanto tempo la richiesta di accesso è valida prima di dover essere rinnovata. Impostare questo valore per concedere l'accesso per un massimo di un anno.

3. Nella casella immettere 1.

4. Selezionare gli anni nell'elenco a discesa.

5. Nei requisiti di approvazione specificare il proprio nome nella casella Responsabili approvazione. (È necessario il nome registrato in Microsoft Entra ID.)

   Nota

   Non è necessario controllare l'approvazione del manager perché tale criterio viene ereditato dal termine glossario delle epidemie.

6. Seleziona Anteprima modulo di richiesta per vedere cosa visualizzano gli utenti del catalogo quando richiedono l'accesso. La copia dei dati, l'attestazione e l'approvazione del manager sono necessarie in quanto sono state impostate dal dominio di governance e dal termine glossario.

7. Selezionare Salva modifiche.

Dopo aver mappato gli asset di dati e configurato i criteri di accesso, è possibile pubblicare il prodotto di dati nel catalogo.

1. Selezionare Pubblica sul prodotto dati.

2. Provare a creare un report sui profitti in altri domini creati in precedenza

   1. Rapporto sui profitti, tipo: dashboard/report.
   2. Product Master, Tipo: dati Maser e dati di riferimento.

Passaggio 4: eseguire la qualità dei dati

Ora che è disponibile un prodotto di dati nel catalogo, l'esecuzione di regole di qualità dei dati indica a tutti gli utenti che i dati sono in buone condizioni e pronti per l'utilizzo. Man mano che impari di più sui dati, aggiungi nuove regole di qualità dei dati per assicurarti che siano adatti a tutti i casi d'uso. Assicurarsi che i prodotti di dati siano della massima qualità aiuta a creare fiducia nei tuoi dati e mostra agli altri che li stai monitorando e migliorando. Con l'aumentare del valore dei dati, è necessario monitorare e controllare più da vicino la qualità di tali dati. I problemi di qualità dei dati gestiti male possono causare effetti negativi significativi.

Prerequisiti

• Le regole di qualità dei dati possono essere eseguite solo su tabelle in formato delta in ADLS Gen2 e Microsoft Fabric.
• L'identità gestita da Microsoft Purview deve essere abilitata per leggere l'origine dati, in quanto è l'unica credenziale supportata per la qualità dei dati oggi.
• È necessario avere il ruolo di amministratore della qualità dei dati nel dominio di governance in cui si esegue la qualità dei dati.
• È necessario essere il proprietario o disporre dell'accesso come amministratore dell'accesso utenti all'origine dati a cui si sta connettendo l'analisi di qualità dei dati per garantire l'autorizzazione di sicurezza appropriata per la scansione dei dati.
• Per eseguire i profili sui dati, è necessario disporre del ruolo di amministratore dei profili dati.

Creare ed eseguire regole di Data Quality

1. Aprire il portale di Microsoft Purview.

2. Selezionare Unified Catalog.

3. Selezionare la scheda Qualità dei dati in Gestione dati.

4. Selezionare il dominio Personal Health creato nella sezione 1.

5. Selezionare Gestisci, quindi Connessioni. Quando si crea questa connessione, è possibile eseguire analisi della qualità dei dati sull'origine dati in tale dominio di governance. Questo passaggio impedisce ai team di accedere alla conoscenza dei dati senza un'autorizzazione adeguata.

6. Selezionare Nuovo nella schermata connessioni per creare una nuova connessione: 1. Immettere il nome visualizzato "Personal Health ADLSg2 DQ".

   1. Selezionare il tipo di origine di Azure Data Lake Storage Gen2.
      1. Immettere i dettagli dell'origine dati creata nella sezione 2.

         Nota

         Le credenziali devono essere Microsoft Purview MSI (sistema) per una connessione di qualità dei dati.

      2. Seleziona Verifica connessione.
      3. Dopo aver eseguito il test della connessione, selezionare Invia.

Una volta stabilita la connessione, sei pronto per eseguire i profili e iniziare a creare regole di qualità dei dati. Questo passaggio garantisce che gli esperti che conoscono le regole aziendali e le regole appropriate siano in esecuzione sui prodotti di dati più importanti.

1. Indietro alla pagina Qualità dei dati.
2. Selezionare il dominio di governance di Personal Health.
3. Selezionare il prodotto di dati sulla vaccinazione e sui casi di Covid-19 in base all'età integrato nella sezione 3.
4. Seleziona la risorsa aggiunta al prodotto di dati. Deve essere in formato delta dalla sezione 2 , altrimenti la qualità dei dati non verrà eseguita.
5. Applicare regole di qualità dei dati alle colonne dei dati per verificare se soddisfa le aspettative di qualità:
   1. Seleziona la scheda Regole nella risorsa selezionata.
   2. Selezionare Nuova regola.
   3. Selezionare la regola dei campi vuoti.
   4. Immettere i dettagli:
      • Selezionare la colonna AgeGroupVacc dall'elenco a discesa delle colonne
      • Nome regola: Verificare l'esistenza della fascia di età per la vaccinazione
   5. Selezionare Crea.
   6. Selezionare Nuova regola.
   7. Selezionare la corrispondenza del tipo di dati.
   8. Immettere i dettagli.
   9. Selezionare la colonna DataAmministrata.
   10. Selezionare Crea.
6. Selezionare Esegui analisi di qualità dei dati.

Dati del profilo

Creare un profilo per i dati per visualizzare le statistiche di alto livello di ogni colonna e individuare eventuali anomalie che potrebbero richiedere una nuova regola.

1. In Unified Catalog, selezionare Gestione dell'integrità, quindi selezionare Qualità dei dati.
2. Selezionare Dati profilo.
3. Selezionare la casella superiore accanto a Nome colonna per profilare tutte le colonne. Il sistema consiglia le colonne di cui creare un profilo ed è possibile selezionare le colonne che vale la pena profilare per evitare profili su dati altamente sensibili o dati noti essere scarsamente popolati.
4. Selezionare Esegui profilo.

Al termine dell'analisi, è possibile esaminare il punteggio di qualità dei dati e il profilo del nuovo prodotto di dati. Tutti gli utenti del catalogo possono vedere il punteggio di qualità dei dati, quindi tutti conoscono lo stato dei dati.

Crea una pianificazione per le tue analisi della qualità dei dati per assicurarti di monitorare continuamente i problemi di qualità dei dati. Imposta avvisi per assicurarti di risolvere i problemi di qualità dei dati prima che i consumatori ne risentano.

1. In Gestione integrità selezionare Qualità dei dati.
2. Selezionare il dominio Integrità personale in cui sono state configurate le regole di qualità dei dati.
3. Dall'elenco a discesa Gestisci , selezionare Analisi pianificate.
4. Nella pagina Analisi pianificate selezionare Nuovo.
5. Aggiungi dettagli generali
   1. Nome: Valutazione mensile di Personal Health DQ
   2. Descrizione: Scansione mensile delle regole DQ per il miglioramento continuo.
6. Seleziona Continua
7. Seleziona l'ambito della scansione
8. Selezionare la casella accanto al prodotto dati Vaccinazione e tendenza dei casi di Covid-19 per età
9. Seleziona Continua
10. Pianificare l'analisi per assicurarsi che venga eseguita l'ultimo giorno di ogni mese
    1. Seleziona Ricorrente
    2. Ricorrenza: ogni mese
    3. Giorni del mese: Ultimi
    4. Pianifica tempo di scansione (UTC): 12:00:00
    5. Avvia ricorrenza in (UTC): lascia come predefinito
11. Seleziona Continua
12. Controlla i dettagli dell'analisi per verificare se sono presenti modifiche che desideri apportare prima di salvare.
13. Seleziona Salva. Poiché un'analisi manuale è stata avviata in precedenza, non è necessario attivarne un'altra ora. Se è necessaria una nuova analisi, selezionare Salva ed esegui.

Configurare gli avvisi

Dopo aver pianificato le analisi per la qualità dei dati, è possibile configurare avvisi per informare gli amministratori di problemi o quando problemi di qualità dei dati o errori di analisi richiedono attenzione. Configurare un avviso di qualità dei dati per le analisi non riuscite e quando il punteggio diminuisce di oltre il 5%.

1. Torna al dominio Salute personale nella pagina Qualità dei dati .
2. Dall'elenco a discesa Gestisci , selezionare Avvisi.
3. Selezionare Nuovo.
4. Immettere i dettagli dell'avviso
   1. Nome visualizzato: Scansione mensile DQ Personal Health
   2. Descrizione: per garantire che le soglie DQ minime soddisfino le aspettative dei consumatori.
   3. Obiettivo: il punteggio diminuisce di più di
   4. Soglia: 5
   5. Disattivare le notifiche: lasciare deselezionate
   6. Attiva la notifica per le analisi di qualità non riuscite: lascia selezionata
   7. Destinatario: immettere il proprio nome
5. Selezionare Continua.

Al termine di questa sezione, si dispone di un Unified Catalog funzionante con qualità dei dati operativi per gestire i dati offerti ai consumer di dati dell'organizzazione. Tutto è configurato per fornire i dati più preziosi al consumatore e creare fiducia nei dati che utilizzano. Man mano che il valore dei dati cresce ed emergono nuove strategie di dati, la sezione successiva mostra come è possibile gestire l'intero catalogo o approfondire la gestione di dati specifici con i dati master.

Passaggio 5: gestione dei dati anagrafici

La gestione dei dati master (MDM) è la pratica di conformità delle entità di dati più importanti che devono essere accurate, univoche e applicate in modo coerente in tutte le aree dell'azienda perché errori e problemi in questi dati possono avere un impatto sull'intera azienda. Tramite uno dei nostri partner MDM, è possibile integrare le soluzioni MDM prescelte con Microsoft Purview per consentire l'unificazione, la standardizzazione e la pulizia dei dati che consentono la creazione di record di riferimento e la pubblicazione di dati master come prodotti di dati.

Segui le esercitazioni qui per la soluzione che preferisci: Gestione dei dati master in Microsoft Purview

Passaggio 6: Gestire l'integrità dei dati

Nell'area di gestione sanitaria di Unified Catalog, l'ufficio dati centrale e altri responsabili dei dati possono valutare lo stato dei dati rispetto agli standard aziendali e gestire efficacemente i progressi verso la propria strategia. Per assicurarsi che tutti in azienda sappiano cosa possono fare per aumentare il valore dei propri dati, è essenziale che gli standard siano compresi e scalabili per l'intera organizzazione senza dover rendere tutti esperti di governance dei dati. Partendo da un set standard di controlli standard del settore disponibili immediatamente, ogni ufficio dati può personalizzare i controlli per soddisfare le proprie aspettative e garantire che siano allineati con i propri obiettivi di dati. Fondamentale per l'efficacia di questi controlli non è solo la misurazione di questi standard, ma anche garantire che i responsabili dei dati possano agire autonomamente ed essere ritenuti responsabili di apportare i miglioramenti che influiscono sul valore dei dati. In Data Estate Health è possibile impostare e gestire tutte queste funzionalità critiche.

Prerequisiti

• Prodotti di dati, glossari e altri concetti aziendali pubblicati in Unified Catalog. È possibile seguire le sezioni precedenti per creare questi concetti:
  • Sezione 1 - Configurare un dominio di governance
  • Sezione 3 - Pubblicare i prodotti di dati
• Almeno 24 ore dopo la cura dei prodotti di dati.
• È necessario disporre del ruolo Proprietario integrità dati in Unified Catalog.

Valutare la governance dei dati con Data Estate Health

1. Aprire il portale di Microsoft Purview.

2. Selezionare Unified Catalog.

3. In Integrità proprietà dati nel riquadro di spostamento sinistro selezionare Controlli di integrità.

4. Selezionare la carota > accanto al gruppo di controllo Creazione valore.

5. Passare il puntatore del mouse sul titolo di un controllo, selezionare l'icona della matita per modificare il controllo. Modificando il controllo, si cambia la soglia del controllo per impostare le aspettative su quale dovrebbe essere il punteggio e impostare il punteggio dei colori per illustrare le fasi di avanzamento.

6. I dettagli consentono di fornire una descrizione del controllo e delle sue implicazioni per l'organizzazione e di impostare un proprietario per un controllo specifico.

7. Selezionare la scheda Regole del controllo per modificare la soglia. Questa impostazione ha un obiettivo elevato e, se non è salutare, è fondamentale seguirla.

   1. Eredita dal gruppo: attiva o disattiva per disattivare (dovrebbe diventare grigio).
   2. Punteggio target: 90
   3. Selezionare Nuova regola.
   4. Impostare la casella accanto al punteggio su MaggiorePressoOrUguale
   5. Imposta la percentuale su 90
   6. Stato = Integrità (verde)
   7. Stato casella Else = Critico (viola)
   8. Seleziona Salva.

8. In Integrità del patrimonio dati, selezionare Qualità dei metadati.

Qui è possibile modificare o aggiungere regole che creano i punteggi del controllo. Qui si vuole modificare la gravità delle azioni per la creazione di valore per assicurarsi che tutti gli utenti conoscano l'importanza di questa azione.

1. Selezionare Configura gravità
2. Selezionare il gruppo di controllo Creazione valore
3. Selezionare il titolo del controllo di allineamento degli OKR aziendali
4. Modificare l'intensità da Media ad Alta e selezionare Salva
5. Selezionare la scheda Azioni sanitarie
6. Filtro assegnato a: al tuo nome
7. Selezionare un'azione in cui è possibile vedere cosa deve fare il proprietario dell'azione per garantire che le aspettative di governance siano soddisfatte oppure può assegnare un nuovo proprietario per ottenere il miglior esperto per fornire il proprio contributo. Esiste anche uno stato che consente agli altri di sapere quali lavori sono in corso e dove altre azioni potrebbero richiedere la definizione delle priorità.

Passaggio 7: democratizzazione dei dati

La democratizzazione dei dati consente agli utenti di trovare e accedere ai dati di cui hanno bisogno in modo conforme. Garantisce che le persone possano trovare i dati di cui hanno bisogno per creare valore aziendale. Unified Catalog offre un'esperienza pulita e semplice per l'individuazione dei dati. Consente agli amministratori di aggiornare e gestire i dati resi disponibili nel catalogo su vasta scala. In questa sezione viene illustrato come gli utenti possono trovare e richiedere l'accesso ai dati e assicurarsi che i responsabili approvazione appropriati possano tenere traccia e fornire input su tali richieste di accesso.

Prerequisiti

• Passaggi completati da 1 a 4 come minimo:
  • Sezione 1 - Configurare un dominio di governance
  • Sezione 2 - Configurare il patrimonio di dati
  • Sezione 3 - Pubblicare i prodotti di dati
• Ruolo di lettore di cataloghi in un dominio di governance

Scopri i prodotti di dati

1. In Unified Catalog, seleziona Individuazione, quindi seleziona Prodotti dati.
2. Nella pagina Prodotti dati , usa la barra di ricerca per cercare i tassi di vaccinazione per età.
3. Qui vedi i prodotti di dati che hai pubblicato nella sezione 2. Questa visualizzazione mostra come gli utenti vedono solo i dati a loro destinati ed evita agli utenti di dover esplorare un patrimonio di dati altamente tecnico.
4. Selezionare il prodotto di dati Vaccinazione e caso Covid-19 in base all'età
   1. Qui i consumatori possono vedere i metadati forniti e qualsiasi altra proprietà configurata durante la configurazione. Il punteggio di qualità dei dati è anche qui, quindi i consumatori conoscono la qualità prima ancora di accedere ai dati.
   2. Selezionare l'asset e l'utente potrà visualizzare tutte le colonne disponibili nell'asset di dati.
   3. Selezionare il termine glossario Epidemie e il consumatore può visualizzare la descrizione e altre informazioni sul termine per ottenere una comprensione più approfondita dei dati.
5. Una volta che il consumatore è sicuro di voler utilizzare tali dati, deve ottenere l'accesso approvato ai dati.
   1. Seleziona Richiedi accesso
   2. Compila i dettagli del modulo per inviare una richiesta.
   3. Utente: lascia il tuo nome
   4. Approvazione del manager: richiesta automaticamente e indirizzata al gestore di Microsoft Entra ID.
   5. Scopo: selezionare uno scopo
   6. Motivazione aziendale: monitoraggio OKR
   7. Selezionare la casella accanto all'attestazione per dire che si comprendono le aspettative per l'utilizzo di questi dati.
   8. Seleziona Invia.

La richiesta di accesso viene ora inviata al gestore elencato in Microsoft Entra ID. Da qui, il manager può accedere alle richieste aprendo il messaggio di posta elettronica e selezionando un collegamento o accedendo a Microsoft Purview. L'approvazione e la gestione dell'accesso possono essere eseguite direttamente in Microsoft Purview.

1. In Unified Catalog, selezionare Gestione catalogo, quindi selezionare Richieste.
2. Selezionare il dominio Integrità personale .
3. Selezionare la richiesta inviata.
4. Ora i responsabili approvazione possono approvare o rifiutare selezionando Rispondi alla richiesta.