Monitorowanie stanu i wydajności strumienia zdarzeń

Funkcja strumieni zdarzeń usługi Microsoft Fabric umożliwia łatwe monitorowanie danych zdarzeń przesyłania strumieniowego, stanu pozyskiwania i wydajności pozyskiwania. W tym artykule wyjaśniono, jak monitorować stan strumienia zdarzeń, sprawdzać dzienniki, błędy i szczegółowe informacje o danych za pomocą metryk.

W strumieniu zdarzeń istnieją dwa typy środowisk monitorowania: szczegółowe informacje o danych i dzienniki środowiska uruchomieniowego. Zobaczysz jeden lub oba widoki w zależności od wybranego źródła lub miejsca docelowego.

Wymagania wstępne

Przed rozpoczęciem musisz mieć następujące elementy:

• Dostęp do obszaru roboczego z uprawnieniami podglądu lub wyższymi uprawnieniami, w których znajduje się element eventstream.
• Źródło centrum zdarzeń platformy Azure lub miejsce docelowe usługi Lakehouse dodane do strumienia zdarzeń.

Analiza danych

Karta Szczegółowe informacje o danych jest wyświetlana w dolnym okienku edytora głównego. Karta zawiera metryki, których można użyć do monitorowania stanu i wydajności strumienia zdarzeń, źródeł i miejsc docelowych. Różne źródła i miejsca docelowe mają różne metryki. Po wybraniu węzła na kanwie edytora głównego metryki dla tego konkretnego węzła będą wyświetlane na karcie Szczegółowe informacje o danych.

Szczegółowe informacje o danych w węźle strumienia zdarzeń

Następujące metryki są wyświetlane dla węzła strumienia zdarzeń na karcie Szczegółowe informacje o danych:

Metric	Jednostka	opis
IncomingMessages	Count	Liczba zdarzeń lub komunikatów wysyłanych do strumienia zdarzeń w określonym przedziale czasu.
Wychodzące wiadomości	Count	Liczba zdarzeń lub komunikatów wychodzących z strumienia zdarzeń w określonym przedziale czasu.
Bajty przychodzące	Bajty	Bajty przychodzące dla strumienia zdarzeń w określonym przedziale czasu.
Bajty wychodzące	Bajty	Bajty wychodzące dla strumienia zdarzeń w określonym przedziale czasu.

Aby wyświetlić szczegółowe informacje o danych dla strumienia zdarzeń:

1. Wybierz węzeł eventstream na kanwie edytora głównego.

2. W dolnym okienku wybierz kartę Szczegółowe informacje o danych.

3. Jeśli strumień zdarzeń zawiera dane, na karcie Data insights wyświetli się wykres metryk.

4. Po prawej stronie karty zaznacz pola wyboru obok metryk, które chcesz wyświetlić.

Szczegółowe informacje o danych w centrum zdarzeń platformy Azure, centrum IoT platformy Azure, Lakehouse, Eventhouse, pochodnych strumieniach oraz węzłach aktywujących Fabric.

Następujące metryki są dostępne na karcie Data Insights dla centrum zdarzeń platformy Azure, usługi Azure IoT Hub, Lakehouse, Eventhouse ('Event processing before ingestion' mode), pochodnego strumienia i węzłów aktywatora Fabric:

Metric	Jednostka	opis
Zdarzenia wejściowe	Count	Liczba danych zdarzeń, które silnik strumienia zdarzeń pobiera ze strumienia zdarzeń (w usłudze Lakehouse, Eventhouse, strumieniu pochodnym lub docelowej lokalizacji aktywatora Fabric) lub ze źródła zdarzeń (ze źródła centrum zdarzeń platformy Azure lub centrum Azure IoT Hub).
Bajty zdarzeń wejściowych	Bajty	Ilość danych zdarzeń, które silnik strumienia zdarzeń pobiera z strumienia zdarzeń (w lokalizacji typu lakehouse, eventhouse, pochodnym strumieniu lub docelowej lokalizacji aktywatora Fabric) lub ze źródła zdarzeń (w centrum zdarzeń platformy Azure lub źródle z tymże centrum).
Zdarzenia wyjściowe	Count	Liczba danych zdarzeń, które silnik strumienia zdarzeń wysyła do Lakehouse lub Eventhouse (w magazynie typu lakehouse, eventhouse, pochodnym strumieniu lub miejscu docelowym aktywatora Fabric) lub ze źródła zdarzeń (w Azure Event Hub lub źródle Azure IoT Hub).
Zdarzenia wejściowe z zaległych danych wejściowych	Count	Liczba zdarzeń wejściowych, które są zaległe w aucie eventstream.
Błędy środowiska uruchomieniowego	Count	Łączna liczba błędów związanych z przetwarzaniem zdarzeń.
Błędy konwersji danych	Count	Liczba zdarzeń wyjściowych, których nie można przekonwertować na oczekiwany schemat wyjściowy.
błędy deserializacji	Count	Liczba zdarzeń wejściowych, których nie można zdeserializować wewnątrz aparatu strumienia zdarzeń.
Opóźnienie znaku wodnego	Second	Maksymalne opóźnienie limitu we wszystkich partycjach wszystkich danych wyjściowych dla tego źródła lub miejsca docelowego. Jest obliczany jako czas zegara ściennego minus największy punkt kontrolny.

Aby wyświetlić szczegółowe informacje o danych dla centrum zdarzeń platformy Azure, usługi Azure IoT Hub, Lakehouse, Eventhouse („Przetwarzanie zdarzeń przed rozpoczęciem pozyskiwania”), pochodnego strumienia i aktywowaniu Fabric:

1. Wybierz węzeł Azure Event Hub, Azure IoT Hub, Lakehouse, Eventhouse, strumień wynikowy lub węzeł aktywatora sieci Fabric w głównym obszarze edytora

2. W dolnym okienku wybierz kartę Szczegółowe informacje o danych.

3. Jeśli dane znajdują się w centrum zdarzeń Azure, Azure IoT Hub, lakehouse, Eventhouse, pochodnym strumieniu lub Fabric activator, wykres metryk zostanie wyświetlony na karcie Szczegółowe informacje o danych.

4. Po prawej stronie karty zaznacz pola wyboru obok metryk, które chcesz wyświetlić.

Szczegółowe informacje o danych w węzłach źródłowych łącznika przesyłania strumieniowego

Węzły źródłowe łącznika przesyłania strumieniowego obejmują następujące źródła:

• Przechwytywanie zmian danych w usłudze Azure SQL Database (CDC)
• Azure Service Bus (usługa przesyłania wiadomości w chmurze)
• CdC bazy danych PostgreSQL
• Usługa CDC bazy danych MySQL
• Azure Cosmos DB CDC
• Program SQL Server w bazie danych maszyny wirtualnej (CDC)
• Azure SQL Managed Instance CDC
• Google Cloud Pub/Sub
• Strumienie danych Amazon Kinesis
• Confluent Cloud Kafka
• Apache Kafka
• Amazon MSK Kafka

Następujące metryki są dostępne na karcie Szczegółowe informacje o danych dla węzłów źródłowych łącznika przesyłania strumieniowego:

Metric	Jednostka	opis
Źródłowe zdarzenia wychodzące	Count	Liczba rekordów wyjściowych z przekształceń (jeśli istnieje) i zapisanych w strumieniu zdarzeń dla zadania należącego do nazwanego łącznika źródłowego w ramach procesu roboczego (od czasu ostatniego ponownego uruchomienia zadania).
Źródłowe zdarzenia przychodzące	Count	Przed zastosowaniem przekształceń jest to liczba rekordów utworzonych lub sondowanych przez zadanie należące do nazwanego łącznika źródłowego w ramach procesu roboczego (od czasu ostatniego ponownego uruchomienia zadania).
Zarejestrowane błędy łącznika	Count	Liczba błędów zarejestrowanych dla tych zadań łącznika.
Błędy przetwarzania łącznika	Count	Liczba błędów przetwarzania rekordów w tych zadaniach łącznika.
Błędy przetwarzania łącznika	Count	Liczba niepowodzeń przetwarzania rekordów w tych zadaniach łącznika, w tym niepowodzenia ponawiania prób.
Pominięte zdarzenia łącznika	Count	Liczba rekordów pominiętych z powodu błędów w tych zadaniach łącznika.

Aby wyświetlić szczegółowe informacje o danych dla źródła łącznika przesyłania strumieniowego:

1. Wybierz pozycję Użyj źródła zewnętrznego, a następnie wybierz źródło łącznika przesyłania strumieniowego.
2. Konfigurowanie i publikowanie źródła łącznika przesyłania strumieniowego.
3. W dolnym okienku w widoku na żywo wybierz kartę Szczegółowe informacje o danych.
4. Jeśli dane znajdują się w źródle łącznika przesyłania strumieniowego, wykres metryk zostanie wyświetlony na karcie Szczegółowe informacje o danych.
5. Po prawej stronie karty zaznacz pola wyboru obok metryk, które chcesz wyświetlić.

Dzienniki środowiska uruchomieniowego

Karta Dzienniki środowiska uruchomieniowego umożliwia sprawdzenie szczegółowych dzienników występujących w aucie eventstream. Dzienniki środowiska uruchomieniowego mają trzy poziomy ważności: ostrzeżenie, błąd i informacje.

Aby wyświetlić dzienniki wykonywania dla centrum zdarzeń platformy Azure, centrum IoT platformy Azure, źródła łącznika przesyłania strumieniowego, Lakehouse, Eventhouse ('Tryb przetwarzania zdarzeń przed ingestją') lub aktywatora Fabryki:

1. Wybierz węzeł na kanwie edytora głównego.

2. W dolnym okienku wybierz kartę Dzienniki środowiska uruchomieniowego.

3. Jeśli w centrum zdarzeń platformy Azure, centrum Azure IoT Hub, źródle łącznika przesyłania strumieniowego, Lakehouse, Eventhouse lub aktywizatorze Fabric znajdują się dane, dzienniki są wyświetlane na karcie dzienniki środowiska uruchomieniowego.

4. Przeszukaj dzienniki za pomocą opcji Filtruj według słowa kluczowego lub przefiltruj listę, zmieniając ważność lub typ.

5. Aby wyświetlić najnowsze dzienniki, wybierz pozycję Odśwież.

Powiązana zawartość

• Wyświetlanie podglądu danych w strumieniu zdarzeń