Co je Azure Data Explorer?

Azure Data Explorer je plně spravovaná vysoce výkonná analytická platforma pro velké objemy dat, která umožňuje snadno analyzovat velké objemy dat téměř v reálném čase. Sada nástrojů Azure Data Exploreru poskytuje ucelené řešení pro příjem dat, dotazování, vizualizaci a správu.

Díky analýze strukturovaných, částečně strukturovaných a nestrukturovaných dat napříč časovými řadami a pomocí strojového učení Azure Data Explorer usnadňuje extrakci klíčových přehledů, zjišťování vzorů a trendů a vytváření modelů prognóz. Azure Data Explorer používá tradiční relační model, který uspořádá data do tabulek se schématy silného typu. Tabulky jsou uložené v databázích a cluster může spravovat více databází. Azure Data Explorer je škálovatelná, zabezpečená, robustní a připravená pro podniky. Je užitečné pro analýzy protokolů, analýzy časových řad, IoT a průzkumné analýzy pro obecné účely.

Další služby založené na svém dotazovacím jazyce Kusto Query Language (KQL) rozšiřují možnosti Azure Data Explorer. Mezi tyto služby patří Azure Monitor Logs, Application Insights a Microsoft Defender for Endpoint.

Kdy byste měli použít Azure Data Explorer?

Při rozhodování, jestli je Azure Data Explorer pro váš případ použití správný, vám pomůžou následující otázky:

  • Interaktivní analýza: Je interaktivní analýza součástí řešení? Například agregace, korelace nebo detekce anomálií.
  • Rozmanitost, rychlost, objem: Je vaše schéma různorodé? Potřebujete ingestovat obrovské objemy dat téměř v reálném čase?
  • Organizace dat: Chcete analyzovat nezpracovaná data? Například data, která nejsou plně kurátorovaným hvězdicovým schématem.
  • Souběžnost dotazů: Bude azure Data Explorer používat více uživatelů nebo procesů?
  • Build versus buy: Plánujete přizpůsobení datové platformy?

Azure Data Explorer je ideální pro umožnění interaktivních analytických funkcí s vysokou rychlostí a různorodými nezpracovanými daty. Pomocí následujícího rozhodovacího stromu se můžete rozhodnout, jestli je Azure Data Explorer pro vás nejvhodnější:

Diagram rozhodovacího stromu, který vás provede, kdy použít Azure Data Explorer na základě vašich analytických potřeb.

Čím je Azure Data Explorer jedinečný?

Rychlost, rozmanitost a objem dat

Pomocí Azure Data Explorer můžete během několika minut přijímat terabajty dat pomocí příjmu dat z fronty nebo streamovaného příjmu dat. Můžete dotazovat petabajty dat s výsledky vrácenými v milisekundách na sekundy. Azure Data Explorer poskytuje vysokou rychlost (miliony událostí za sekundu), nízkou latenci (sekundy) a lineární příjem nezpracovaných dat. Ingestování dat v různých formátech a strukturách, tok z různých kanálů a zdrojů

Uživatelsky přívětivý dotazovací jazyk

Dotazování Azure Data Explorer pomocí jazyka KQL (Kusto Query Language), opensourcového jazyka, který vytvořil tým Azure Data Explorer. Jazyk je jednoduchý k pochopení a učení a k vysoké produktivitě. Můžete použít jednoduché operátory a pokročilou analýzu. Azure Data Explorer také podporuje T-SQL.

Pokročilé analýzy

Použijte Azure Data Explorer pro analýzu časových řad s velkou sadou funkcí, včetně sčítání a odčítání časových řad, filtrování, regrese, zjišťování sezónnosti, geoprostorové analýzy, detekce anomálií, skenování a prognóz. Funkce časových řad jsou optimalizované tak, aby zpracovávaly tisíce časových řad v sekundách. Detekce vzorů je snadná pomocí modulů plug-in clusteru, které můžou diagnostikovat anomálie a provádět analýzu původní příčiny. Možnosti Azure Data Explorer můžete rozšířit také vložením kódu Python do dotazů KQL.

Snadno použitelný průvodce

Díky prostředí pro získání dat je proces příjmu dat snadný, rychlý a intuitivní. Webové uživatelské rozhraní Azure Data Explorer poskytuje intuitivní a řízené prostředí, které vám pomůže rychle začít ingestovat data, vytvářet databázové tabulky a mapovat struktury. Umožňuje jednorázově nebo nepřetržitě ingestovat z různých zdrojů a v různých formátech dat. Mapování tabulek a schéma se automaticky navrhují a snadno upravují.

Všestranná vizualizace dat

Vizualizace dat vám pomůže získat důležité přehledy. Azure Data Explorer nabízí předdefinované vizualizace a řídicí panely s podporou různých grafů a vizualizací. Má nativní integraci s Power BI, nativními konektory pro Grafana, Kibana a Databricks a podporou ODBC pro Tableau, Sisense, Qlik a další.

Automatické ingestování, zpracování a export

Azure Data Explorer podporuje uložené funkce na straně serveru, průběžné ingestování a průběžný export do Azure Data Lake Storage. Podporuje také transformace mapování času příjmu dat na straně serveru, zásady aktualizace a předem naplánované agregace s materializovanými zobrazeními.

Tok dat v Azure Data Exploreru

Následující diagram znázorňuje různé aspekty práce s Azure Data Explorerem.

Diagram znázorňující pracovní postup Azure Data Explorer od vytvoření databáze přes ingestování, dotazování a vizualizaci dat

Při interakci s Azure Data Explorer se obvykle řídíte tímto pracovním postupem:

Poznámka:

K prostředkům Azure Data Exploreru můžete přistupovat buď ve webovém uživatelském rozhraní Azure Data Exploreru, nebo pomocí sad SDK.

  1. Vytvoření databáze: Vytvořte cluster a pak vytvořte jednu nebo více databází v daném clusteru. Každý cluster Azure Data Explorer může obsahovat až 10 000 databází a každá databáze může obsahovat až 10 000 tabulek. Data v každé tabulce jsou uložena v datových střepinách, také nazývaných extenty. Všechna data se automaticky indexují a rozdělují na základě času příjmu dat. Tato architektura úložiště znamená, že při dotazování můžete ukládat velké množství různých dat a získat rychlý přístup. Rychlý start: Vytvoření clusteru a databáze Azure Data Exploreru

  2. Načtení dat: Načíst data do databázových tabulek, abyste nad nimi mohli spouštět dotazy. Azure Data Explorer podporuje několik metod příjmu dat, z nichž každá má vlastní cílové scénáře. Mezi tyto metody patří nástroje pro příjem dat, konektory a moduly plug-in pro různé služby, spravované kanály, programový příjem dat pomocí sad SDK a přímý přístup k příjmu dat. Začněte pracovat s prostředím pro získání dat.

  3. Dotazování databáze: Azure Data Explorer používá dotazovací jazyk Kusto, což je výrazný, intuitivní a vysoce produktivní dotazovací jazyk. Nabízí hladký přechod z jednoduchých oneřádkovačů na složité skripty pro zpracování dat a podporuje dotazování strukturovaných, částečně strukturovaných a nestrukturovaných dat (vyhledávání textu). Jazyk má širokou škálu operátorů a funkcí dotazů, včetně agregace, filtrování, funkcí časových řad, geoprostorových funkcí, spojení a sjednocení. KQL podporuje dotazy napříč clustery a mezi databázemi a je bohaté na parsování formátů, jako jsou JSON a XML. Jazyk také nativně podporuje pokročilou analýzu.

    Pomocí webové aplikace můžete spouštět, kontrolovat a sdílet dotazy a výsledky. Dotazy můžete odesílat také prostřednictvím kódu programu (pomocí sady SDK) nebo do koncového bodu rozhraní REST API. Pokud znáte SQL, začněte pomocí přehledu SQL to Kusto a Rychlého startu: Dotazování na data ve webovém uživatelském rozhraní Azure Data Exploreru.

  4. Vizualizace výsledků: V nativních řídicích panelech Azure Data Explorer použijte různé vizuální zobrazení dat. Výsledky můžete zobrazit také pomocí konektorů pro některé z předních vizualizačních služeb, jako jsou Power BI a Grafana. Azure Data Explorer má také podporu konektoru ODBC a JDBC pro nástroje, jako jsou Tableau a Sisense.

Poskytnout zpětnou vazbu

Pokud chcete sdílet zpětnou vazbu o Azure Data Explorer a dotazovacím jazyce Kusto, použijte následující zdroje informací:

Související obsah

  • Last updated on