Omówienie integracji

Wiele łączników danych, narzędzi i integracji bezproblemowo współpracuje z platformą do pozyskiwania, orkiestracji, danych wyjściowych i zapytań dotyczących danych. Ten artykuł zawiera ogólne omówienie dostępnych łączników, narzędzi i integracji. Dla każdego łącznika można znaleźć szczegółowe informacje i linki do pełnej dokumentacji.

Aby uzyskać przegląd stron w określonym typie integracji, wybierz jeden z następujących przycisków.

Integracje danych

Integracje zapytań

Integracje wizualizacji

Tabele porównania

W poniższych tabelach podsumowano możliwości każdego elementu. Wybierz kartę odpowiadającą łącznikom lub narzędziom i integracji. Każda nazwa elementu łączy się ze szczegółowym opisem.

Poniższa tabela zawiera podsumowanie dostępnych łączników i ich możliwości:

Nazwisko Importowanie Eksport Orkiestruj Zapytanie
Apache Kafka ✔️
Apache Flink ✔️
Apache Log4J 2 ✔️
Apache Spark ✔️ ✔️ ✔️
Azure Cosmos DB ✔️
Azure Data Factory ✔️ ✔️
Azure Event Grid ✔️
Azure Event Hubs ✔️
Azure Functions ✔️ ✔️
Azure IoT Hubs ✔️
Azure Monitor ✔️
Azure Stream Analytics ✔️
Cribl Stream ✔️
Fluent Bit ✔️
JDBC ✔️
Logic Apps ✔️ ✔️ ✔️
Usługa Logstash ✔️
Matlab ✔️
NLog ✔️
ODBC ✔️
Otwieranie telemetrii ✔️
Power Apps ✔️ ✔️
Power Automate - narzędzie do automatyzacji procesów ✔️ ✔️ ✔️
Serilog ✔️
Splunk ✔️
Splunk Universal Forwarder ✔️
Telegraf ✔️

Szczegółowe opisy

Poniższe sekcje zawierają szczegółowe opisy łączników, narzędzi i integracji. Wybierz kartę odpowiadającą łącznikom lub narzędziom i integracji.

Apache Kafka

Apache Kafka to rozproszona platforma przesyłania strumieniowego do tworzenia potoków danych przesyłanych strumieniowo w czasie rzeczywistym, które niezawodnie przenoszą dane między systemami lub aplikacjami. Kafka Connect to narzędzie do skalowalnego i niezawodnego przesyłania strumieniowego danych między platformą Apache Kafka i innymi systemami danych. Kafka Sink działa jako konektor z platformy Kafka i nie wymaga pisania kodu. Ten łącznik jest złotym certyfikatem firmy Confluent, co oznacza, że przechodzi kompleksowy przegląd i testowanie pod kątem jakości, kompletności funkcji, zgodności ze standardami i wydajnością.

Apache Flink to platforma i aparat przetwarzania rozproszonego na potrzeby obliczeń stanowych za pośrednictwem niezwiązanych i ograniczonych strumieni danych. Łącznik udostępnia ujście danych do przesyłania danych między klastrami Azure Data Explorer i Flink. Korzystając z usług Azure Data Explorer i Apache Flink, można tworzyć szybkie i skalowalne aplikacje przeznaczone dla scenariuszy opartych na danych. Na przykład uczenie maszynowe (ML), wyodrębnianie i przekształcanie obciążenia (ETL) i usługa Log Analytics.

Apache Log4J 2

Log4J to popularna platforma rejestrowania dla aplikacji Java obsługiwanych przez platformę Apache Foundation. Deweloperzy Log4j mogą kontrolować, które instrukcje dziennika są wypisywane z dowolnym poziomem szczegółowości na podstawie nazwy rejestratora, poziomu rejestratora i wzorca wiadomości. Korzystając z ujścia apache Log4J 2, można przesyłać strumieniowo dane dziennika do bazy danych, gdzie można analizować i wizualizować dzienniki w czasie rzeczywistym.

Apache Spark

Apache Spark to ujednolicony aparat analityczny do przetwarzania danych na dużą skalę. Łącznik Spark to projekt typu open source, który można uruchomić w dowolnym klastrze Spark. Implementuje źródło danych i ujście danych do przenoszenia danych do lub z klastrów Spark. Korzystając z łącznika platformy Apache Spark, można tworzyć szybkie i skalowalne aplikacje przeznaczone dla scenariuszy opartych na danych. Na przykład uczenie maszynowe (ML), wyodrębnianie i przekształcanie obciążenia (ETL) i usługa Log Analytics. Korzystając z łącznika, baza danych staje się ważnym magazynem danych dla standardowych operacji źródła i ujścia w Spark, takich jak odczyt, zapis i writeStream.

Platforma Apache Spark dla usługi Azure Synapse Analytics

Apache Spark to platforma przetwarzania równoległego, która obsługuje przetwarzanie w pamięci w celu zwiększenia wydajności aplikacji analitycznych big data. Platforma Apache Spark w usłudze Azure Synapse Analytics jest jedną z implementacji platformy Apache Spark firmy Microsoft w chmurze. Dostęp do bazy danych można uzyskać z poziomu programu Synapse Studio przy użyciu platformy Apache Spark dla usługi Azure Synapse Analytics.

Azure Cosmos DB

Usługa Azure Cosmos DB to potok pozyskiwania, który nasłuchuje zestawienia zmian usługi Cosmos DB i pozyskuje dane do bazy danych.

Azure Data Factory

Azure Data Factory (ADF) to oparta na chmurze usługa integracji danych, której można użyć do integracji różnych magazynów danych i wykonywania działań na danych.

Azure Event Grid

Przetwarzanie danych w usłudze Event Grid to potok, który nasłuchuje usługi Azure Storage i aktualizuje bazę danych, aby pobierać informacje po wystąpieniu subskrybowanych zdarzeń. Ciągłe przetwarzanie można skonfigurować z użyciem Azure Storage (magazynu Azure Blob i ADLSv2), subskrypcji usługi Azure Event Grid dla powiadomień o utworzeniu lub zmianie nazwy obiektów blob oraz streamingu powiadomień za pośrednictwem usługi Azure Event Hubs.

Azure Event Hubs

Azure Event Hubs to platforma do strumieniowego przetwarzania dużych zbiorów danych oraz usługa pozyskiwania danych zdarzeń. Możesz skonfigurować ciągłe pozyskiwanie danych z centrów zdarzeń Event Hubs zarządzanych przez klienta.

Azure Functions

Usługa Azure Functions umożliwia uruchamianie bezserwerowego kodu w chmurze zgodnie z harmonogramem lub w odpowiedzi na zdarzenie. Za pomocą powiązań wejściowych i wyjściowych dla usługi Azure Functions możesz zintegrować bazę danych z przepływami pracy w celu pozyskiwania danych i uruchamiania zapytań względem bazy danych.

Azure IoT Hubs

Azure IoT Hub to zarządzana usługa hostowana w chmurze, która działa jako centralne centrum komunikatów na potrzeby dwukierunkowej komunikacji między aplikacją IoT a zarządzanymi urządzeniami. Możesz skonfigurować ciągłe pozyskiwanie danych z usług IoT Hub zarządzanych przez klienta, używając ich wbudowanego punktu końcowego komunikatów z urządzeń do chmury zgodnego z usługą Event Hubs.

Azure Monitor

Agent usługi Azure Monitor może wysyłać następujące dane maszyny wirtualnej do usługi Azure Data Explorer przy użyciu reguły zbierania danych:

  • Liczniki wydajności
  • Dzienniki IIS
  • Dzienniki zdarzeń systemu Windows
  • Dzienniki systemu Linux
  • Niestandardowe dzienniki tekstowe
  • Niestandardowe dzienniki JSON

Aby uzyskać więcej informacji, zobacz Zbieranie danych z maszyn wirtualnych do usługi Azure Data Explorer.

Azure Stream Analytics

Usługa Azure Stream Analytics to analiza w czasie rzeczywistym i złożony aparat przetwarzania zdarzeń zaprojektowany do przetwarzania dużych ilości szybkich danych przesyłanych strumieniowo z wielu źródeł jednocześnie.

Strumień cribl

Cribl stream to aparat przetwarzania, który bezpiecznie zbiera, przetwarza i przesyła strumieniowo dane zdarzeń maszyny z dowolnego źródła. Umożliwia analizowanie i przetwarzanie tych danych dla dowolnego miejsca docelowego na potrzeby analizy.

Fluent Bit

Fluent Bit to agent open source, który zbiera dzienniki, metryki i ślady z różnych źródeł. Umożliwia filtrowanie, modyfikowanie i agregowanie danych zdarzeń przed wysłaniem ich do magazynu.

JDBC

Java Database Connectivity (JDBC) to interfejs API języka Java służący do nawiązywania połączeń z bazami danych i wykonywania zapytań. Rozwiązania JDBC można użyć w celu nawiązania połączenia z usługą Azure Data Explorer.

Aplikacje logiki

Za pomocą łącznika usługi Microsoft Logic Apps można automatycznie uruchamiać zapytania i polecenia w ramach zaplanowanego lub wyzwalanego zadania.

Logstash

Wtyczka Logstash umożliwia przetwarzanie zdarzeń z usługi Logstash do bazy danych usługi Azure Data Explorer na potrzeby późniejszej analizy.

Matlab

MATLAB to platforma programistyczna i numeryczna służąca do analizowania danych, opracowywania algorytmów i tworzenia modeli. Token autoryzacji można uzyskać w narzędziu MATLAB na potrzeby wykonywania zapytań dotyczących danych w usłudze Azure Data Explorer.

NLog

NLog to elastyczna i bezpłatna platforma rejestrowania dla różnych platform .NET, w tym .NET Standard. NLog umożliwia zapisywanie do kilku celów, takich jak baza danych, plik lub konsola. Za pomocą NLog można zmienić konfigurację rejestrowania na bieżąco. Ujście NLog to element docelowy NLog, który umożliwia wysyłanie komunikatów dziennika do bazy danych. Wtyczka zapewnia efektywny sposób przesyłania logów do klastra.

ODBC

Open Database Connectivity (ODBC) to powszechnie akceptowany interfejs programowania aplikacji (API) na potrzeby dostępu do bazy danych. Usługa Azure Data Explorer jest zgodna z podzbiorem protokołu komunikacyjnego programu SQL Server (MS-TDS). Ta zgodność umożliwia korzystanie ze sterownika ODBC dla programu SQL Server z usługą Azure Data Explorer.

Otwieranie telemetrii

Łącznik OpenTelemetry obsługuje pozyskiwanie danych z wielu odbiorników do bazy danych. Pełni funkcję pomostu do przesyłania danych generowanych przez OpenTelemetry do bazy danych poprzez dostosowanie formatu eksportowanych danych do Twoich potrzeb.

Power Apps

Power Apps to pakiet aplikacji, usług, łączników i platformy danych, który zapewnia szybkie środowisko programistyczne aplikacji do tworzenia niestandardowych aplikacji łączących się z danymi biznesowymi. Łącznik usługi Power Apps jest przydatny, jeśli masz dużą i rosnącą kolekcję danych przesyłanych strumieniowo w usłudze Azure Data Explorer i chcesz utworzyć małą, wysoce funkcjonalną aplikację do korzystania z tych danych.

Power Automate

Power Automate to usługa orkiestracji używana do automatyzowania procesów biznesowych. Łącznik Power Automate (wcześniej Microsoft Flow) umożliwia organizowanie i planowanie przepływów, wysyłanie powiadomień i alertów w ramach zaplanowanego lub wyzwalanego zadania.

Serilog

Serilog to popularna platforma rejestrowania dla aplikacji .NET. Korzystając z Serilog, deweloperzy mogą kontrolować, które instrukcje dziennika są wyprowadzane z dowolną szczegółowością, na podstawie nazwy rejestratora, poziomu logowania i wzorca komunikatów. Sink Serilog, znany również jako appender, przesyła dane logów do bazy danych, umożliwiając analizowanie i wizualizowanie logów w czasie rzeczywistym.

Splunk

Splunk Enterprise to platforma oprogramowania, która umożliwia pozyskiwanie danych z wielu źródeł jednocześnie. Dodatek Azure Data Explorer wysyła dane ze Splunk do tabeli w klastrze.

Splunk Universal Forwarder

Telegraf

Telegraf to lekki agent typu open source z minimalnym zużyciem pamięci na potrzeby zbierania, przetwarzania i zapisywania danych telemetrycznych, w tym dzienników, metryk i danych IoT. Program Telegraf obsługuje setki wtyczek wejściowych i wyjściowych. Jest ona powszechnie używana i dobrze obsługiwana przez społeczność open source. Wtyczka wyjściowa służy jako łącznik z programu Telegraf i obsługuje pozyskiwanie danych z wielu typów wtyczek wejściowych do bazy danych.

Powiązana zawartość

  • Last updated on