Monitorare il consumo di capacità spark

Lo scopo di questo articolo è offrire indicazioni per gli amministratori che vogliono monitorare le attività nelle capacità gestite. Usando i report sul consumo di capacità spark disponibili nell'app Microsoft Fabric Capacity Metrics, gli amministratori possono ottenere informazioni dettagliate sul consumo di capacità spark fatturabile per gli elementi, tra cui Lakehouse, Notebook e definizioni di processi Spark. Alcune attività di consumo della capacità Spark non vengono segnalate nell'app.

Consumo di capacità Spark segnalato

Le operazioni seguenti di lakehouse, notebook e definizioni di processi Spark vengono considerate come attività fatturabili.

Nome operazione Articolo Commenti
Operazioni di Lakehouse Lakehouse Tabella di anteprima degli utenti in Lakehouse Explorer.
Caricamento tabella Lakehouse Lakehouse Gli utenti caricano la tabella delta in Lakehouse Explorer.
Esecuzione del notebook Synapse Notebook Synapse Notebook viene eseguito manualmente dagli utenti.
Esecuzione di Notebook HC Synapse Notebook Synapse Notebook viene eseguito nella sessione Spark ad alta concorrenza.
Esecuzione pianificata del notebook Synapse Notebook Le esecuzioni di Synapse Notebook attivate dagli eventi pianificati del notebook.
Esecuzione della pipeline del notebook Synapse Notebook Le esecuzioni di Synapse Notebook attivate dalla pipeline.
Esecuzione di VISUAL Studio Code per notebook Synapse Notebook Synapse Notebook viene eseguito in VS Code.
Esecuzione del processo Spark Definizione processo Spark Esecuzioni di processi batch Spark avviate dall'invio dell'utente.
Esecuzione pianificata del processo Spark Definizione processo Spark Le esecuzioni di processi batch synapse attivate dagli eventi pianificati del notebook.
Esecuzione della pipeline del processo Spark Definizione processo Spark Esecuzioni di processi batch synapse attivate dalla pipeline.
Esecuzione di Visual Studio Code del processo Spark Definizione processo Spark Definizione del processo Spark synapse inviata da VS Code.

Consumo di capacità Spark non segnalato

Esistono alcune attività di consumo di capacità Spark che non vengono segnalate nell'app per le metriche. Queste attività includono processi Spark di sistema per la gestione delle librerie e alcuni processi Spark di sistema per il pool Spark Live o le sessioni live.

  • Gestione delle librerie: il consumo di capacità associato alla gestione delle librerie a livello di area di lavoro non viene segnalato nell'app per le metriche.

  • Processi Spark di sistema: il consumo di capacità Spark non associato a un notebook, una definizione di processo Spark o una lakehouse non è incluso nella creazione di report sulla capacità.

Report dei consumi della capacità

Tutte le operazioni correlate a Spark vengono classificate come operazioni in background. Il consumo di capacità da Spark viene visualizzato in un notebook, in una definizione di processo Spark o in una lakehouse e viene aggregato in base al nome e all'elemento dell'operazione.

Screenshot showing items report.

Report operazioni in background

Le operazioni in background vengono visualizzate per un punto di tempo specifico. Nella tabella del report ogni riga fa riferimento a un'operazione utente. Esaminare la colonna Utente per identificare chi ha eseguito un'operazione specifica. Se sono necessarie altre informazioni su un'operazione specifica, è possibile usare il relativo ID operazione per cercarlo nell'hub di monitoraggio di Microsoft Fabric.

Screenshot showing background operations report.