Monitorare il popolamento delle mappe dati in Microsoft Purview

  • Articolo

In Microsoft Purview è possibile analizzare vari tipi di origini dati e visualizzare lo stato dell'analisi nel tempo; è anche possibile connettere altri servizi a Microsoft Purview e visualizzare le tendenze degli asset/relazioni inseriti. Questo articolo illustra come monitorare e ottenere una visualizzazione a volo d'occhio della popolazione della mappa dati.

Monitorare le esecuzioni dell'analisi

  1. Aprire il portale di governance di Microsoft Purview:

  2. Aprire l'account Microsoft Purview e selezionare Mappa dati ->Monitoraggio. Per accedere a questa pagina, è necessario avere il ruolo di amministratore dell'origine dati in qualsiasi raccolta. Verranno inoltre visualizzate le esecuzioni di analisi che appartengono alle raccolte in cui si dispone dei privilegi di amministratore dell'origine dati.

  3. Gli indicatori KPI di alto livello mostrano le esecuzioni totali dell'analisi entro un periodo. Il periodo di tempo è predefinito negli ultimi 30 giorni, è anche possibile scegliere di selezionare gli ultimi sette giorni. In base al filtro ora selezionato, è possibile visualizzare la distribuzione delle esecuzioni di analisi riuscite, non riuscite, annullate e in corso per settimana o per giorno nel grafico.

    Visualizzare le esecuzioni di analisi nel tempo

  4. Nella parte inferiore del grafico è disponibile un collegamento Visualizza più per esplorare ulteriormente. Il collegamento apre la pagina Stato analisi . Qui è possibile visualizzare un nome di analisi e il numero di volte in cui ha avuto esito positivo, non riuscito o è stato annullato nel periodo di tempo. È anche possibile filtrare l'elenco in base ai tipi di origine.

    Visualizzare lo stato dell'analisi nei dettagli

  5. È possibile esplorare ulteriormente un'analisi specifica selezionando il nome dell'analisi. Si connette alla pagina della cronologia di analisi, in cui è possibile trovare l'elenco degli ID di esecuzione con altri dettagli di esecuzione.

    Visualizzare la cronologia dell'analisi per una determinata analisi

  6. È possibile fare clic sull'ID di esecuzione per altre informazioni sui dettagli dell'esecuzione dell'analisi.

Limitazioni note:

Attualmente, questa esperienza di monitoraggio non include le informazioni seguenti. È possibile controllare i dettagli dell'esecuzione dell'analisi corrispondente.

  • Lo stato e la durata includono solo la fase di analisi (individuazione dall'origine) ma non la fase di inserimento. È possibile che venga visualizzata una discrepanza rispetto al pannello dei dettagli dell'esecuzione dell'analisi.
  • Le esecuzioni dell'analisi di estrazione della derivazione per Azure SQL database non sono coperte.
  • Per le analisi dell'area di lavoro Azure Synapse Analytics, della sottoscrizione o del gruppo di risorse di Azure e dell'account AWS, acquisisce solo lo stato/conteggio dell'esecuzione dell'analisi padre, ma non le esecuzioni dell'analisi figlio per risorsa.

Analisi dei dettagli dell'esecuzione

È possibile passare all'analisi della cronologia di esecuzione per una determinata analisi da posizioni diverse:

  • Passare alla sezione Mappa dati ->Monitoraggio, come descritto nella sezione Monitor scan runs (Monitoraggio delle esecuzioni di analisi).
  • Passare a Mappa dati ->Origini:> selezionare l'origine dati desiderata.> Vedere Analisi, Analisi recenti o Analisi recenti non riuscite.
  • Passare a Mappa dati ->Raccolte -> selezionare la raccolta desiderata ->Scans -> selezionare il nome dell'analisi che si vuole visualizzare di più.

La conservazione della cronologia di esecuzione dell'analisi è di 90 giorni.

È possibile fare clic sull'ID di esecuzione per altre informazioni sui dettagli dell'esecuzione dell'analisi:

Screenshot dei dettagli dell'esecuzione dell'analisi di visualizzazione.

  • ID esecuzione: GUID usato per identificare l'esecuzione dell'analisi specificata.

  • Tipo di esecuzione: analisi completa o incrementale.

  • La sezione Analisi riepiloga le metriche per la fase di individuazione che Purview si connette all'origine, estrae i metadati/derivazione e classifica i dati.

    • Stato analisi:

      Stato Descrizione
      Completata La fase di analisi ha esito positivo.
      Esito negativo La fase di analisi ha esito negativo. È possibile controllare i dettagli dell'errore facendo clic sul collegamento "Altre informazioni" accanto.
      Annullato L'esecuzione dell'analisi viene annullata dall'utente.
      In corso L'analisi è in esecuzione.
      In coda L'esecuzione dell'analisi è in attesa della risorsa di runtime di integrazione disponibile.
      Se si usa il runtime di integrazione self-hosted, si noti che ogni nodo può eseguire contemporaneamente diverse analisi simultanee a seconda della specifica del computer (CPU e memoria). Altre analisi sono in stato in coda.
      Strozzato L'esecuzione dell'analisi viene limitata. Significa che questo account Microsoft Purview al momento ha più esecuzioni di analisi in corso rispetto al numero massimo consentito simultaneo. Altre informazioni sul limite sono disponibili qui. Questa particolare esecuzione dell'analisi è in attesa e verrà eseguita al termine delle altre analisi in corso.

      L'esecuzione dell'analisi non viene addebitata durante lo stato "Throttled" o "Queued".

    • Tipo di analisi: analisi manuale o pianificata.

    • Asset individuati: numero di asset enumerati dall'origine. Per le analisi complete e incrementali, include tutti gli asset nell'ambito configurato, indipendentemente dal fatto che siano asset esistenti o asset appena creati/aggiornati dall'ultima esecuzione dell'analisi. Mentre per l'analisi incrementale, i metadati dettagliati vengono estratti solo per gli asset appena creati o aggiornati.

    • Asset classificati: numero di asset campionati per classificare i dati, indipendentemente dal fatto che gli asset abbiano o meno una classificazione corrispondente. Si tratta di un subset degli asset individuati in base al meccanismo di campionamento. Per l'analisi incrementale, è possibile selezionare solo gli asset appena creati o aggiornati per la classificazione.

    • Durata: durata della fase di analisi e ora di inizio/fine.

  • La sezione Inserimento dati riepiloga le metriche per la fase di inserimento in cui Purview popola la mappa dati con i metadati e la relazione identificati.

    • Stato inserimento:

      Stato Descrizione
      Completata Tutti gli asset e le relazioni vengono inseriti correttamente nella mappa dati.
      Completato con eccezioni (precedente "Parzialmente completato") La parte degli asset e delle relazioni viene inserita correttamente nella mappa dati, mentre alcune hanno esito negativo.
      Esito negativo La fase di inserimento ha esito negativo.
      Annullato L'esecuzione dell'analisi viene annullata dall'utente, quindi l'inserimento viene annullato.
      In corso L'inserimento è in esecuzione in corso.
      In coda L'inserimento è in attesa della risorsa del servizio disponibile o in attesa dell'analisi per individuare i metadati.

    • Asset inseriti: numero di asset inseriti nella mappa dati. Per l'analisi incrementale, include solo gli asset appena creati o aggiornati, nel qual caso possono essere inferiori al conteggio degli "asset individuati". Quando si esegue l'analisi dell'origine basata su file, si tratta del numero di asset non elaborati prima dell'aggregazione del set di risorse.

    • Relazioni inserite: numero di relazioni inserite nella mappa dati. Include derivazione e altre relazioni come le relazioni chiave esterne.

    • Durata: durata dell'inserimento e ora di inizio/fine.

Visualizzare il log delle eccezioni (anteprima)

Quando alcuni asset o relazioni non vengono inseriti nella mappa dati durante l'analisi, ad esempio lo stato di inserimento viene completato con eccezioni, è possibile visualizzare un pulsante "Scarica log" nel pannello dei dettagli dell'esecuzione dell'analisi . Fornisce file di log delle eccezioni che acquisiscono i dettagli degli errori.

Nella tabella seguente viene illustrato lo schema di un file di log.

Colonna Descrizione
Timestamp Timestamp UTC quando si verifica l'operazione di inserimento.
Errorcode Codice di errore dell'eccezione.
OperationItem Identificatore dell'asset/relazione non riuscita, in genere usando il nome completo.
Messaggio Altre informazioni su quale asset/relazione non è riuscito a inserire a causa di quale motivo. Se si verifica un errore di inserimento per il set di risorse, può essere applicabile a più asset corrispondenti allo stesso modello di denominazione e il messaggio include il conteggio interessato.

Attualmente, il log delle eccezioni non include gli errori che si sono verificati durante la fase di analisi (individuazione dei metadati). Verrà aggiunto in un secondo momento.

È possibile connettere altri servizi a Microsoft Purview per stabilire un "collegamento", che renderà i metadati e la derivazione degli asset del servizio disponibili per Microsoft Purview. Attualmente, il collegamento è supportato per Azure Data Factory e Azure Synapse Analytics.

Per monitorare gli asset e la relazione inseriti sui collegamenti:

  1. Passare all'account Microsoft Purview:> aprire il portale di governance di Microsoft Purview ->Mappa dei dati ->Monitoraggio ->Collegamenti. È necessario avere il ruolo di amministratore dell'origine dati in qualsiasi raccolta per accedere alla scheda Monitoraggio. Verranno inoltre visualizzati i risultati che appartengono alle raccolte in cui si dispone dei privilegi di amministratore dell'origine dati. L'autorizzazione per la raccolta radice è necessaria per monitorare i collegamenti Azure Data Factory e Azure Synapse Analytics.

  2. È possibile visualizzare gli indicatori KPI di alto livello, tra cui il numero totale di origini, il numero di asset inseriti e la relazione (derivazione), seguiti da grafici di tendenza nel tempo. È possibile applicare filtri aggiuntivi ai seguenti per limitare i risultati:

    • Tipo di origine
    • Nome di origine
    • Intervallo di date: il valore predefinito è 30 giorni. È anche possibile scegliere gli ultimi sette giorni o un intervallo di date personalizzato. La conservazione è di 45 giorni.

    Le metriche vengono segnalate fino all'ora della data visualizzata nell'angolo in alto a destra. E l'aggregazione si verificherà ogni ora.

    Screenshot dei risultati del collegamento di visualizzazione.

  3. Nella parte inferiore del grafico è disponibile un collegamento Visualizza più per esplorare ulteriormente. Nella pagina Stato collegamento è possibile visualizzare un elenco di nomi di origine insieme al tipo di origine, agli asset inseriti, alla relazione inserita e all'ora dell'ultima data di esecuzione. I filtri nella pagina precedente verranno trasferiti ed è possibile filtrare ulteriormente l'elenco in base al tipo di origine, al nome di origine e all'intervallo di date.

    Screenshot dei risultati dei collegamenti di visualizzazione in base all'origine.

  4. È possibile eseguire il drill-down in ogni origine per visualizzare i dettagli di livello successivo facendo clic sul nome dell'origine. Ad esempio, per Azure Data Factory, viene illustrato come ogni attività della pipeline segnala gli asset e la relazione con Microsoft Purview, con il nome nel formato <pipeline_name>/<activity_name>.

    Screenshot dei risultati del collegamento di visualizzazione in base agli artefatti secondari dell'origine.

Limitazioni note

  • Per Azure Data Factory e Azure Synapse Analytics, attualmente questo monitoraggio dei collegamenti acquisisce gli asset e la relazione generati dall'attività di copia, ma non dal flusso di dati e dalle attività SSIS.
  • Il filtro di aggregazione e data è espresso in ora UTC.

Le analisi non vengono più eseguite

Se l'analisi di Microsoft Purview è stata usata per l'esecuzione corretta, ma ora ha esito negativo, verificare quanto segue:

  1. Controllare prima il messaggio di errore per visualizzare i dettagli dell'errore.
  2. Le credenziali per la risorsa sono state modificate o ruotate? In tal caso, sarà necessario eseguire l'aggiornamento per fare in modo che l'analisi usi le credenziali corrette.
  3. Un Criteri di Azure impedisce gli aggiornamenti agli account di archiviazione? In questo caso, seguire la guida ai tag di eccezione di Microsoft Purview per creare un'eccezione per gli account Microsoft Purview.
  4. Si usa un runtime di integrazione self-hosted? Verificare che sia aggiornato con il software più recente e che sia connesso alla rete.

Passaggi successivi