Pomysły dotyczące rozwiązań
Ten artykuł jest pomysłem na rozwiązanie. Jeśli chcesz, abyśmy rozszerzyli zawartość o więcej informacji, takich jak potencjalne przypadki użycia, alternatywne usługi, zagadnienia dotyczące implementacji lub wskazówki dotyczące cen, daj nam znać, przekazując opinię w usłudze GitHub.
Ten pomysł rozwiązania przedstawia pozyskiwanie dużych ilości dzienników usługi Content Delivery Network (CDN) o małych opóźnieniach i dużej przepływności. Te dane umożliwiają tworzenie pulpitów nawigacyjnych analizy niemal w czasie rzeczywistym.
Architektura
Pobierz plik programu Visio z tą architekturą.
Przepływ danych
- Dostawcy usługi Content Delivery Network, tacy jak Verizon i Szybko pozyskiwają ogromne ilości dzienników CDN do usługi Azure Data Explorer w celu analizowania opóźnień, kondycji i wydajności zasobów usługi CDN.
- Większość scenariuszy usługi CDN pozyskuje dane za pośrednictwem usługi Azure Storage (Blob lub ADLS Gen2), która używa Azure Event Grid i wyzwala potok pozyskiwania do usługi Azure Data Explorer. Alternatywnie można zbiorczo pozyskać dane przy użyciu narzędzia LightIngest. Możesz również stale eksportować dane do usługi Azure Storage w skompresowanym formacie parquet podzielonym na partycje i bezproblemowo wykonywać zapytania dotyczące tych danych zgodnie z opisem w temacie Ciągłe eksportowanie danych — omówienie.
- Usługa Azure Data Explorer umożliwia łatwe używanie natywnych operatorów i funkcji do przetwarzania, agregowania i analizowania szeregów czasowych i danych dzienników, a także dostarczania szczegółowych informacji z prędkością błyskawic. Pulpity nawigacyjne analizy niemal w czasie rzeczywistym można tworzyć przy użyciu pulpitów nawigacyjnych usługi Azure Data Explorer, usługi Power BI lub narzędzia Grafana.
- Tworzenie i planowanie alertów i powiadomień przy użyciu łącznika usługi Azure Data Explorer dla usługi Azure Logic Apps.
Składniki
- Łącznik usługi Azure Data Explorer Usługi Azure Storage: ciągłe pozyskiwanie z usługi Azure Storage (Blob Storage i ADLSv2) z subskrypcją Azure Event Grid w celu przesyłania strumieniowego tych powiadomień do usługi Azure Data Explorer.
- Azure Data Explorer: szybka, w pełni zarządzana i wysoce skalowalna usługa analizy danych w czasie rzeczywistym na potrzeby analizy dużych ilości danych przesyłanych strumieniowo z aplikacji, witryn internetowych, urządzeń IoT i nie tylko.
- Pulpity nawigacyjne usługi Azure Data Explorer: natywnie eksportuj zapytania Kusto, które zostały eksplorowane w internetowym interfejsie użytkownika, aby zoptymalizować pulpity nawigacyjne.
- Łącznik azure Data Explorer usługi Azure Logic Apps: automatycznie uruchamiaj zapytania i polecenia usługi Kusto w ramach zaplanowanego lub wyzwalanego zadania.
Szczegóły scenariusza
Za pomocą tego rozwiązania można pozyskiwać duże ilości dzienników usługi CDN na potrzeby tworzenia pulpitów nawigacyjnych analizy niemal w czasie rzeczywistym.
Potencjalne przypadki użycia
- Analiza dziennika
- Analiza szeregów czasowych
- IoT
- Analiza eksploracyjna ogólnego przeznaczenia
Współautorzy
Ten artykuł jest obsługiwany przez firmę Microsoft. Został pierwotnie napisany przez następujących współautorów.
Główny autor:
- Ornat Spodek | Starszy menedżer zawartości
Następne kroki
Aby uzyskać więcej informacji, zobacz dokumentację usługi Azure Data Explorer.