Megosztás a következőn keresztül:

Mi az az Azure Data Explorer?

Az Azure Data Explorer egy teljes mértékben felügyelt, nagy teljesítményű big data-elemzési platform, amely megkönnyíti a nagy mennyiségű adat közel valós idejű elemzését. Az Azure Data Explorer eszközkészlete az adatbetöltés, a lekérdezés, a vizualizáció és a felügyelet végpontok közötti megoldását biztosítja.

A strukturált, részben strukturált és strukturálatlan adatok idősoronkénti elemzésével és a Machine Learning használatával az Azure Data Explorer egyszerűvé teszi a kulcsfontosságú megállapítások kinyerését, a minták és trendek észlelését, valamint az előrejelzési modellek létrehozását. Az Azure Data Explorer egy hagyományos relációs modellt használ, amely az adatokat erősen beírt sémákkal rendelkező táblákba rendezi. A táblák az adatbázisokban vannak tárolva, és egy fürt több adatbázist is képes kezelni. Az Azure Data Explorer méretezhető, biztonságos, robusztus és nagyvállalati használatra kész, és hasznos a naplóelemzéshez, az idősorozat-elemzéshez, az IoT-hez és az általános célú feltáró elemzésekhez.

Az Azure Data Explorer funkcióit a lekérdezési nyelvre épülő egyéb szolgáltatások is bővítik: Kusto Query Language (KQL). Ezek a szolgáltatások közé tartoznak az Azure Monitor-naplók, az Application Insights, a Time Series Insights és a Microsoft Defender for Endpoint.

Mikor érdemes használni az Azure Data Explorert?

Az alábbi kérdések segítségével eldöntheti, hogy az Azure Data Explorer megfelelő-e a használati esethez:

  • Interaktív elemzés: Az interaktív elemzés része a megoldásnak? Például aggregáció, korreláció vagy anomáliadetektálás.
  • Változatosság, Sebesség, Mennyiség: A séma változatos? Nagy mennyiségű adatot kell közel valós időben beszednie?
  • Adatszervezés: Szeretné elemezni a nyers adatokat? Például nem teljesen rendezett csillagséma.
  • Lekérdezések egyidejűsége: Több felhasználó vagy folyamat használja az Azure Data Explorert?
  • Összeállítás és vásárlás: Tervezi az adatplatform testreszabását?

Az Azure Data Explorer ideális az interaktív elemzési képességek nagy sebességű, változatos nyers adatokon keresztüli engedélyezéséhez. Az alábbi döntési fával eldöntheti, hogy az Azure Data Explorer megfelel-e Önnek:

Ez a kép egy Azure Data Explorer döntési fa sémarendszerképe.

Mi teszi egyedivé az Azure Data Explorert?

Adatsebesség, -változatosság és -mennyiség

Az Azure Data Explorerrel percek alatt betölthet több terabájtnyi adatot az üzenetsoros betöltéssel vagy a streamelési betöltéssel. Petabájtnyi adatot kérdezhet le, és az eredményeket ezredmásodperc és másodperc között adja vissza. Az Azure Data Explorer nagy sebességet (másodpercenként több millió eseményt), alacsony késést (másodpercet) és a nyers adatok lineáris skálázását biztosítja. Az adatok betöltése különböző formátumokban és struktúrákban, különböző folyamatokból és forrásokból folyik.

Felhasználóbarát lekérdezési nyelv

Az Azure Data Explorer lekérdezése a Kusto Query Language (KQL) használatával, amely egy nyílt forráskódú nyelv, amelyet kezdetben a csapat talált fel. A nyelv egyszerűen érthető és könnyen megtanulható, és rendkívül produktív. Egyszerű operátorokat és speciális elemzéseket is használhat. Az Azure Data Explorer a T-SQL-t is támogatja.

Speciális elemzések

Az Azure Data Explorer számos funkcióval használható az idősorozat-elemzéshez, többek között az idősorok hozzáadásához és kivonásához, szűréshez, regresszióhoz, szezonalitás-észleléshez, térinformatikai elemzéshez, anomáliadetektáláshoz, vizsgálathoz és előrejelzéshez. Az idősorfüggvények több ezer idősor másodpercben történő feldolgozására vannak optimalizálva. A mintaészlelés egyszerűvé válik a fürtbe épülő modulokkal, amelyek képesek diagnosztizálni az anomáliákat és elvégezni a gyökérokok elemzését. Az Azure Data Explorer képességeit a Python-kód KQL-lekérdezésekbe való beágyazásával is bővítheti.

Egyszerűen használható varázsló

Az adatbetöltési folyamat egyszerű, gyors és intuitív folyamattá válik. Az Azure Data Explorer webes felhasználói felülete intuitív és irányított felületet biztosít, amellyel gyorsan megkezdheti az adatok betöltését, adatbázistáblák és leképezési struktúrák létrehozását. Lehetővé teszi a különböző forrásokból és különböző adatformátumokban történő egyszeri vagy folyamatos betöltést. A táblázatleképezések és a séma automatikusan javasolt és könnyen módosítható.

Sokoldalú adatvizualizáció

Az adatvizualizáció segít a fontos megállapítások megszerzésében. Az Azure Data Explorer beépített vizualizációkat és irányítópultokat kínál a dobozból, és támogatja a különböző diagramokat és vizualizációkat. Natív integrációval rendelkezik a Power BI-val, natív összekötőkkel a Grafana, a Kibana és a Databricks számára, odBC-támogatással a Tableauhoz, a Sisense-hez, a Qlikhoz és sok máshoz.

Automatikus betöltés, feldolgozás és exportálás

Az Azure Data Explorer támogatja a kiszolgálóoldali tárolt függvényeket, a folyamatos betöltést és az Azure Data Lake Store-ba való folyamatos exportálást. Emellett támogatja a betöltési időleképezési átalakításokat a kiszolgálóoldalon, frissíti a szabályzatokat és az előre összeállított ütemezett összesítéseket materializált nézetekkel.

Azure Data Explorer-folyamat

Az alábbi ábra az Azure Data Explorer használatának különböző aspektusait mutatja be.

Azure Data Explorer-folyamat.

Általánosságban elmondható, hogy amikor az Azure Data Explorerrel kommunikál, a következő munkafolyamaton fog keresztülmenni:

Megjegyzés:

Az Azure Data Explorer-erőforrásokat az Azure Data Explorer webes felhasználói felületén vagy SDK-k használatával érheti el.

  1. Adatbázis létrehozása: Hozzon létre egy fürtöt , majd hozzon létre egy vagy több adatbázist a fürtben. Minden Azure Data Explorer-fürt legfeljebb 10 000 adatbázist és akár 10 000 táblát is tartalmazhat. Az egyes táblákban lévő adatok adatszilánkokban, más néven "terjedelmekben" tárolódnak. A rendszer automatikusan indexeli és particionált minden adatot a betöltési idő alapján. Ez azt jelenti, hogy nagy mennyiségű változatos adatot tárolhat, és a tárolás módja miatt gyors hozzáférést kap a lekérdezéshez. Rövid útmutató: Azure Data Explorer-fürt és -adatbázis létrehozása

  2. Adatok betöltése: Adatok betöltése adatbázistáblákba, hogy lekérdezéseket futtasson rajta. Az Azure Data Explorer számos betöltési módszert támogat, amelyek mindegyike saját célforgatókönyvekkel rendelkezik. Ezek a módszerek közé tartoznak a betöltési eszközök, a különböző szolgáltatások összekötői és beépülő moduljai, a felügyelt folyamatok, az SDK-k használatával végzett programozott betöltés, valamint a közvetlen hozzáférés a betöltéshez. Ismerkedés az adatbeolvasási felülettel.

  3. Lekérdezési adatbázis: Az Azure Data Explorer a Kusto lekérdezési nyelvet használja, amely kifejező, intuitív és rendkívül hatékony lekérdezési nyelv. Zökkenőmentes átmenetet biztosít az egyszerű egysorosról az összetett adatfeldolgozási szkriptekre, és támogatja a strukturált, félig strukturált és strukturálatlan (szöveges keresés) adatok lekérdezését. A lekérdezési nyelvi operátorok és függvények (aggregáció, szűrés, idősorfüggvények, térinformatikai függvények, illesztések, egyesítések stb.) széles választéka érhető el a nyelven. A KQL támogatja a fürtök közötti és adatbázisközi lekérdezéseket, és elemzési (json, XML és egyéb) szempontból is gazdag. A nyelv natív módon támogatja a speciális elemzéseket is.

    A webalkalmazás használatával lekérdezéseket és eredményeket futtathat, tekinthet át és oszthat meg. A lekérdezéseket programozott módon (SDK használatával) vagy REST API-végpontra is küldheti. Ha ismeri az SQL-t, kezdje az SQL Kusto cheet sheet és a Gyors kezdés: Adatok lekérdezése az Azure Data Explorer webes felhasználói felületén dokumentummal.

  4. Eredmények megjelenítése: Az adatok különböző vizuális megjelenítésének használata a natív Azure Data Explorer-irányítópultokon. Az eredményeket összekötőkkel is megjelenítheti néhány vezető vizualizációs szolgáltatáshoz, például a Power BI-hoz és a Grafana-hoz. Az Azure Data Explorer ODBC - és JDBC-összekötő-támogatással is rendelkezik olyan eszközökhöz, mint a Tableau és a Sisense.

Visszajelzés küldése

Örömmel hallhatjuk az Azure Data Explorerrel és a Kusto lekérdezési nyelvvel kapcsolatos visszajelzését a következő címen:

Kapcsolódó tartalom