Co je nového a plánováno pro inteligentní funkce v reálném čase v Microsoft Fabric
Důležité
Plány vydaných verzí popisují funkce, které mohly nebo ještě nebyly vydány. Časové osy doručení a předpokládané funkce se můžou změnit nebo nemusí dodávat. Další informace najdete v zásadách Microsoftu.
Inteligentní funkce v reálném čase umožňuje odborníkům na data, analytikům a podnikovým uživatelům ingestovat, zpracovávat, analyzovat, transformovat, vizualizovat a pracovat s velkými časovými a velmi podrobnými daty, aby organizace mohly rychleji a informovaněji rozhodovat o podnikání. Jedná se o ucelené prostředí, které umožňuje bezproblémové zpracování dat v reálném čase, aniž by bylo nutné je nejprve přistát. Inteligentní funkce v reálném čase vycházejí ze stávajících možností analýzy v reálném čase a aktivaci dat a nabízejí nové funkce, které uživatelům všech úrovní dovedností usnadňují co nejvíce ze svých dat v reálném čase. To zahrnuje ingestování streamovaných dat s vysokou členitostí, dynamicky transformovat streamovaná data, dotazovat se na data v reálném čase a aktivovat akce, jako je upozorňování provozního manažera, když se zařízení při selhání datových kanálů přehřívá nebo znovu spustí úlohy.
I když se říká "v reálném čase", vaše data nemusí proudit vysokou rychlostí a objemy, aby získala skutečnou obchodní hodnotu. Inteligentní funkce v reálném čase nabízí řešení řízená událostmi, nikoli řešení řízená podle plánu, a zajišťuje tak nejlepší rozhodnutí v čase.
Za touto výkonnou úlohou je centrum v reálném čase, které je jediným místem, kde můžete zjišťovat, spravovat a používat data pro párování událostí z Prostředků infrastruktury, jiných zdrojů dat Microsoftu a externích zdrojů dat. Stejně jako datové centrum OneLake usnadňuje zjišťování, správu a používání neaktivních uložených dat centrum v reálném čase vám může pomoct dělat totéž pro data v pohybu. Všechny události, které procházejí centrem v reálném čase, je možné snadno transformovat a směrovat do všech úložišť dat infrastruktury a vytvářet nové datové proudy, které je možné zjistit a využívat.
Další informace najdete v dokumentaci k inteligentním informacím v reálném čase a navštivte blog s oznámením.
Dostupné položky ve inteligentním čase v reálném čase jsou:
Centrum v reálném čase, jediné místo pro zjišťování, správu a používání dat pro párování událostí z Prostředků infrastruktury, jiných zdrojů dat Microsoftu a externích zdrojů dat
Eventstreamy pro zachytávání, transformaci a směrování událostí v reálném čase do různých cílů bez kódu
Eventhouse a databáze KQL jsou ideálním analytickým modulem pro zpracování dat v pohybu. Jsou přizpůsobené událostem založeným na čase, streamovaných událostech se strukturovanými, částečně strukturovanými a nestrukturovanými daty. Tato data se automaticky indexují a rozdělují na základě času příjmu dat a poskytují neuvěřitelně rychlé a složité analytické možnosti dotazování na vysoce členitá data. Data uložená v domech událostí je možné zpřístupnit ve OneLake pro spotřebu jinými prostředími Fabric.
Sada dotazů KQL pro spouštění dotazů, zobrazení a přizpůsobení výsledků dotazu na data Sada dotazů KQL umožňuje ukládat dotazy pro budoucí použití, export a sdílení dotazů s ostatními. Obsahuje možnost vygenerovat sestavu Power BI.
Řídicí panely v reálném čase, které obsahují kolekci dlaždic. Každá dlaždice má podkladový dotaz a vizuální reprezentaci ideální pro zkoumání, monitorování a forenzní analýzy dat.
Aktivátor dat, který se integruje s centrem v reálném čase, streamy událostí, řídicími panely v reálném čase a sadami dotazů KQL, což usnadňuje aktivaci libovolného vzoru nebo změny dat v reálném čase.
Investiční oblasti
Detekce anomálií s více proměnnými
Odhadovaná časová osa vydání: 3. čtvrtletí 2024
Technologie Azure Detektor anomálií multi variate bude nativně dostupná v prostředcích Fabric. Vytrénujte detektor pomocí sparku a poznámkových bloků nebo eventhouses a použijte ho k detekci anomálií v reálném čase při příchodu nových dat.
Azure Synapse Link ze služby Cosmos DB do eventhouse prostředků infrastruktury
Odhadovaná časová osa vydání: 3. čtvrtletí 2024
Zákazníci můžou streamovat všechny aktualizace ze služby Cosmos DB do databáze KQL, což umožňuje rozsáhlé a výkonné analýzy.
Monitorování platformy Eventhouse
Odhadovaná časová osa vydání: 3. čtvrtletí 2024
Typ verze: Public Preview
Přístup k protokolům a metrikám eventhouse za účelem vyladění výkonu, řešení potíží a identifikace anomálií Eventhouse bude hlásit protokoly dotazů, metriky příjmu dat a události selhání příjmu dat. Události a protokoly metrik Eventhouse budou uloženy v databázi KQL jen pro čtení. Uživatelé budou moct analyzovat události pomocí sad dotazů KQL a řídicích panelů v reálném čase.
Podpora CI/CD pro položky eventstreamu
Odhadovaná časová osa vydání: 3. čtvrtletí 2024
Typ verze: Public Preview
Zákazníci můžou snadno spouštět a nasazovat své eventstreamy napříč vývojovými, testovacími a produkčními pracovními prostory s využitím integrované integrace a nasazení Gitu na platformě Fabric.
Nastavení upozornění na sady dotazů KQL
Odhadovaná časová osa vydání: 3. čtvrtletí 2024
Typ verze: Public Preview
Aktivátor dat bude moct monitorovat výsledky dotazů spravovaných v sadě dotazů KQL, spustit dotaz podle běžného plánu a reagovat na výsledky.
Další možnosti triggeru
Odhadovaná časová osa vydání: 3. čtvrtletí 2024
Typ verze: Public Preview
Aby bylo možné řešit další žádosti o monitorování různých obchodních podmínek, bude aktivace dat podporovat triggery, které kontrolují hodnoty data a času, základní matematické funkce atd.
Triggery s nízkou latencí
Odhadovaná časová osa vydání: 3. čtvrtletí 2024
V zpětné vazbě zákazníků uslyšíme, že triggery musí reagovat rychleji, když je zadaná podmínka splněná. Aktivace dat bude podporovat triggery s nižší latencí ve scénářích s jednoduchými podmínkami a nižšími objemy dat. Tato funkce bude v tomto časovém rámci privátní verze Preview.
Nové streamovací konektory pro veřejné clustery Kafka a další instance CDC databáze SQL Serveru
Odhadovaná časová osa vydání: 3. čtvrtletí 2024
Typ verze: Public Preview
Další konektory budou k dispozici prostřednictvím prostředí Získat události, včetně veřejných clusterů Kafka a CDC služby SQL Server DB.
Integrace eventstreamu se spravovaným privátním koncovým bodem
Odhadovaná časová osa vydání: 3. čtvrtletí 2024
Typ verze: Public Preview
Tato integrace se spravovanými privátními koncovými body umožňuje zabezpečený a privátní přístup ke zdrojům dat za bránou firewall nebo blokovaným z veřejného přístupu k internetu, což umožňuje streamovat data do eventstreamu prostředků infrastruktury přes odchozí připojení.
Cíl eventhouse podporuje eventstreamy
Odhadovaná časová osa vydání: 3. čtvrtletí 2024
Typ verze: Public Preview
Eventstreams přidá podporu pro Eventhouse jako cíl.
Diagram entit databáze KQL
Odhadovaná časová osa vydání: 4. čtvrtletí 2024
Typ verze: Public Preview
vizuální reprezentace entit databáze KQL a jejich relací (jako jsou tabulky, funkce, materializovaná zobrazení a další).
Podpora parametrů při aktivaci akcí infrastruktury a webhooků
Odhadovaná časová osa vydání: 1. čtvrtletí 2025
Typ verze: Public Preview
Triggery, které podniknou akci spuštěním úloh Fabric nebo voláním webhooků, budou moci předat hodnotu vlastností v reflexním modelu jako parametry do úlohy nebo webhooku.
Podpora webhooků
Odhadovaná časová osa vydání: 1. čtvrtletí 2025
Typ verze: Public Preview
Webhooky představují velkou základnu integrací aplikací, které je možné použít v různých scénářích. Aktivace dat bude podporovat akce, které při aktivaci aktivují webhooky.
Odeslané funkce
Nastavení upozornění na řídicích panelech v reálném čase
Odesláno (2. čtvrtletí 2024)
Typ verze: Public Preview
Kromě monitorování dat Power BI a Eventstreamu bude aktivace dat podporovat pravidelné dotazování na dotazy KQL uložené na řídicích panelech v reálném čase. Tyto dotazy je možné použít k vrácení výjimek nebo sledování výsledků v průběhu času k detekci změn dat nebo prahových podmínek.
Centrum v reálném čase pro všechna data v pohybu
Odesláno (2. čtvrtletí 2024)
Typ verze: Public Preview
Centrum v reálném čase je jediné aktivum pro všechny přenosy dat v celé organizaci.
Získání zkušeností s událostmi v centru v reálném čase (změna vysvětlující hodnotu nebo odebrání pro 18/24)
Odesláno (2. čtvrtletí 2024)
Typ verze: Public Preview
Ať už data pocházejí z nových nebo existujících zdrojů, datových proudů nebo dostupných událostí, prostředí Získat události umožňuje uživatelům připojit se k široké škále zdrojů přímo z centra v reálném čase, eventstreamů, eventhouse a aktivátoru dat.
Nové streamovací konektory, včetně Confluent Kafka, AWS Kinesis, PostgresSQL CDC a dalších
Odesláno (2. čtvrtletí 2024)
Typ verze: Public Preview
Kromě zdrojů Microsoftu teď můžou uživatelé streamovat data z jiných platforem, jako je Google Cloud, Amazon Kinesis, Data Change Data Capture streamy atd. pomocí našich nových konektorů pro zasílání zpráv. Naše konektory pro zasílání zpráv využívají připojení Kafka s konektory Camel Kafka, které nabízejí připojitelnou, deklarativní architekturu integrace dat a flexibilitu pro různorodá zdrojová připojení na oblíbených datových platformách, a také Debezium, které by mohly připojit databáze pro načítání datových proudů Change Data Capture (CDC).
Nové zdroje diskrétních událostí ze systémových událostí Infrastruktury a událostí úložiště Azure
Odesláno (2. čtvrtletí 2024)
Typ verze: Public Preview
Diskrétní události (a.k.a. události oznámení) jsou významné (důležité) fakty, ke kterým došlo, a které aktivují změny stavu nebo akce v aplikacích pro příjem dat (odběratelé). Mezi příklady patří události, jako je OrderPlaced v systému objednávek, změny úložiště objektů blob ve zdrojích Azure nebo změny položek v systému Fabric.
Zdroj z centra v reálném čase v rozšířeném streamu událostí
Odesláno (2. čtvrtletí 2024)
Typ verze: Public Preview
Domovská stránka Eventstream usnadňuje přenos dat. Kliknutím na Tlačítko Přidat externí zdroj najdete tyto zdroje v průvodci získáním událostí, který vám pomůže nastavit zdroj v několika krocích. Po přidání zdroje do streamu událostí ho můžete publikovat a streamovat data do streamu událostí. Použití eventstreamu s diskrétními zdroji k převodu událostí na datové proudy pro další analýzu. Streamy můžete odesílat do různých cílů dat infrastruktury, jako je Lakehouse a databáze KQL.
Režimy úprav a živého vysílání eventstreamu
Odesláno (2. čtvrtletí 2024)
Typ verze: Public Preview
Eventstream nabízí dva různé režimy, úpravy a živé režimy, které poskytují flexibilitu a kontrolu nad procesem vývoje vašeho eventstreamu. Pokud vytvoříte nový eventstream s povolenými rozšířenými možnostmi, můžete ho upravit v režimu úprav. Tady můžete navrhnout operace zpracování datových proudů pro datové proudy pomocí editoru bez kódu. Po dokončení úprav můžete publikovat eventstream a vizualizovat, jak začne streamovat a zpracovávat data v živém režimu.
Výchozí a odvozené datové proudy
Odesláno (2. čtvrtletí 2024)
Typ verze: Public Preview
V centru v reálném čase je uvedeno více datových proudů, včetně výchozích a odvozených datových proudů. Výchozí datový proud se automaticky vygeneruje při přidání zdroje streamování do eventstreamu. Výchozí datový proud zachycuje nezpracovaná data událostí přímo ze zdroje připraveného k transformaci nebo analýze. Datový proud: Specializovaný datový proud, který mohou uživatelé vytvořit jako cíl v rámci eventstreamu. Odvozený datový proud lze vytvořit po řadě operací, jako je filtrování a agregace, a pak je připravený k další spotřebě nebo analýze jinými uživateli v organizaci prostřednictvím centra v reálném čase.
Získání dat z centra v reálném čase v rámci aktivátoru dat
Odesláno (2. čtvrtletí 2024)
Typ verze: Public Preview
Přeneste nové události do reflexní položky pomocí integrovaného prohlížeče centra v reálném čase.
Vytváření triggerů z centra v reálném čase
Odesláno (2. čtvrtletí 2024)
Typ verze: Public Preview
V centru v reálném čase uvidíte možnosti pro vytvoření nových triggerů a upozornění na obchodní i systémové události.
Provádění akcí prostřednictvím položek infrastruktury
Odesláno (2. čtvrtletí 2024)
Typ verze: Public Preview
Reflexní položky budou podporovat spouštění úloh položek infrastruktury jako akce. Budete moct spouštět datové kanály a poznámkové bloky.
Eventhouse
Odesláno (2. čtvrtletí 2024)
Typ verze: Obecná dostupnost
Eventhouse, špičkový databázový pracovní prostor pro správu a ukládání dat založených na událostech, je nyní oficiálně dostupný pro obecné použití. Díky Eventhouse můžou uživatelé provádět vysoce výkonné analýzy velkých objemů dat a dotazování dat v reálném čase, zpracování miliard událostí během několika sekund. Platforma umožňuje uživatelům uspořádat data do oddílů (databází) v rámci jedné logické položky, což usnadňuje efektivní správu dat. Kromě toho Eventhouse umožňuje sdílení výpočetních prostředků a prostředků mezipaměti napříč databázemi a maximalizaci využití prostředků.
Dostupnost Eventhouse OneLake
Odesláno (2. čtvrtletí 2024)
Typ verze: Obecná dostupnost
Povolení dostupnosti dat Eventhouse v OneLake znamená, že zákazníci můžou využívat to nejlepší z obou světů: můžou se dotazovat na data s vysokým výkonem a nízkou latencí ve svém Eventhouse a dotazovat se na stejná data ve formátu Delta Lake prostřednictvím jakéhokoli jiného modulu Fabric, jako je režim Power BI Direct Lake, Warehouse, Lakehouse, notebooky a další.
Vytvoření zástupce databáze na jinou databázi KQL
Odesláno (2. čtvrtletí 2024)
Typ verze: Public Preview
Zástupce databáze v Eventhouse je vložený odkaz na zdrojovou databázi. Zástupce databáze je připojený v režimu jen pro čtení a umožňuje zobrazit a spustit dotazy na data přijatá do zdrojové databáze KQL bez jejich příjmu. To pomáhá se scénáři sdílení dat, ve kterých můžete sdílet data v rámci týmů nebo dokonce s externími zákazníky.
Podpora Detektor anomálií AI
Odesláno (2. čtvrtletí 2024)
Typ verze: Public Preview
V Microsoft Fabric se podporují algoritmy Detektor anomálií AI, které umožňují vyhodnocování V reálném čase pomocí jazyka KQL s vloženým Pythonem v reálném čase.
Podpora privátního koncového bodu na úrovni tenanta Eventhouse
Odesláno (2. čtvrtletí 2024)
Typ verze: Public Preview
Zákazníci můžou zvýšit zabezpečení sítě omezením přístupu k Eventhouse na úrovni tenanta z jedné nebo více virtuálních sítí prostřednictvím privátních propojení. Tím zabráníte neoprávněnému přístupu z veřejných sítí a povolíte pouze operace roviny dat z konkrétních virtuálních sítí.
Nové prostředí pro zkoumání dat z řídicích panelů v reálném čase
Odesláno (2. čtvrtletí 2024)
Typ verze: Public Preview
Přímo z řídicího panelu v reálném čase můžou uživatelé upřesnit průzkum pomocí uživatelsky přívětivého rozhraní podobného formuláři. Toto intuitivní a dynamické prostředí je přizpůsobené pro průzkumníky přehledů, kteří hledají přehledy na základě dat v reálném čase. Přidejte filtry, vytvářejte agregace a přepínejte typy vizualizací, aniž byste museli psát dotazy, abyste mohli snadno odhalit přehledy.
Použití centra v reálném čase k získání dat v databázi KQL v Eventhouse
Odesláno (2. čtvrtletí 2024)
Typ verze: Public Preview
S centrem v reálném čase vloženým do prostředí databáze KQL může každý uživatel v tenantovi zobrazit a přidat datové proudy, ke kterým má přístup, a přímo ho ingestovat do tabulky databáze KQL v Eventhouse.
Řídicí panel v reálném čase
Odesláno (2. čtvrtletí 2024)
Typ verze: Public Preview
Řídicí panel je kolekce dlaždic, která je volitelně uspořádaná na stránkách, kde má každá dlaždice podkladový dotaz a vizuální reprezentaci. Nativně exportujte dotazy dotazovací jazyk Kusto (KQL) na řídicí panel jako vizuály a později podle potřeby upravte jejich podkladové dotazy a formátování vizuálů. Kromě snadného zkoumání dat poskytuje toto plně integrované prostředí řídicího panelu lepší výkon dotazů a vizualizací díky lehkému flexibilnímu modelování dat s vysokou členitostí s nízkou latencí.
Vytváření akcí a upozornění pomocí funkce Aktivace dat
Odesláno (2. čtvrtletí 2024)
Tato funkce poskytuje prostředí s nízkým kódem nebo bez kódu pro řízení akcí a upozornění z databázových dat KQL prezentovaných na řídicím panelu v reálném čase. Aktivace dat poskytuje jedno místo pro definování vzorů s možností použití v datech. Tyto vzory můžou být v rozsahu od jednoduchých prahových hodnot (například překročení hodnoty) až po složitější vzory v průběhu času (taková hodnota se mění směrem dolů). Když aktivátor dat zjistí vzor s možností akce, aktivuje akci. Tato akce může být e-mailem nebo upozorněním aplikace Teams příslušné osobě ve vaší organizaci. Může také aktivovat automatický proces prostřednictvím toku Power Automate nebo akce v některé z obchodních aplikací vaší organizace.
Pozastavení, zastavení nebo restartování toků eventstreamu
Odesláno (2. čtvrtletí 2024)
Tato funkce nabízí zákazníkům možnost pozastavit, zastavit nebo restartovat toky událostí v reálném čase, aby mohli iterovat transformační logiku nebo logiku toku událostí během fáze vývoje.
Spolupilot pro inteligentní funkce v reálném čase
Odesláno (2. čtvrtletí 2024)
Typ verze: Public Preview
Spolupilot umožňuje psát dotazy v přirozeném jazyce a nechat je přeložit do dotazovací jazyk Kusto (KQL). Pomocí spolupilotu můžete požádat o dotazy, zkoumat data v databázi KQL a vytvářet entity Kusto, jako jsou tabulky, funkce a materializovaná zobrazení.
Směrování událostí na základě obsahu do cílů v eventstreamech
Odesláno (2. čtvrtletí 2024)
Typ verze: Public Preview
Přenesení procesoru událostí bez kódu na hlavní plátno eventstreamu umožňuje zákazníkům směrovat data událostí do svých cílů na základě obsahu události pomocí logiky zpracování událostí definovaného s procesorem událostí.
Rozšířené možnosti triggeru
Odesláno (2. čtvrtletí 2024)
Aby bylo možné znázornit obchodní podmínky monitorování, bude aktivace dat podporovat více aktivačních podmínek, jako jsou procentuální změny v čase, funkce data a času, základní matematické funkce, detekce nepřítomnosti signálu a další.
Přizpůsobitelné uchovávání dat událostí v eventstreamech
Odesláno (Q1 2024)
Zákazníci mají možnost nastavit dobu uchovávání dat událostí a zajistit, aby se data událostí uchována ve svých eventstreamech podle konkrétních obchodních požadavků.
Vertikální navýšení kapacity až 100 MB/s pro zpracování streamu událostí
Odesláno (Q1 2024)
Eventstream může podporovat propustnost příjmu událostí až 100 MB/s při ingestování dat do databází A lakehouses KQL.
Integrace poznámkového bloku
Odesláno (Q1 2024)
Zákazníci můžou nativně dotazovat databáze KQL z poznámkových bloků Microsoft Fabric. Pomocí poznámkových bloků můžete spouštět dotazy na databáze KQL, ukládat výsledné datové rámce, ingestovat data do databází KQL a provádět další funkce.
Vylepšení procesoru událostí v eventstreamu
Odesláno (Q1 2024)
To zahrnuje tři vylepšení. Nejprve přizpůsobte uzly operací a snadno vyfiltrujte hodnoty null z vašich dat. Za druhé, spravujte a přejmenujte pole sloupců snadno v operaci Agregace. Za třetí změňte hodnoty na různé datové typy pomocí operace Spravovat pole .
Nový cíl streamu událostí do funkce Aktivace dat
Odesláno (Q1 2024)
Možnost cíle Aktivace dat pomáhá zákazníkům směrovat události do funkce Aktivace dat, kde můžou vytvářet triggery na základě dat událostí z událostí nativně.
Automatické škálování streamů událostí
Odesláno (Q1 2024)
Tato funkce poskytuje flexibilitu automatického škálování kapacity v reakci na objem přenosů dat událostí, což umožňuje bezproblémové zlepšení propustnosti streamu událostí bez přerušení obchodních operací.
Podpora Delta pro reprezentaci OneLake databáze KQL
Odesláno (Q1 2024)
Typ verze: Public Preview
Data databáze KQL jsou již k dispozici ve OneLake ve formátu parquet. Přidání podpory Delta umožňuje ostatním možnostem prostředků infrastruktury používat stav OneLake jako tabulku, nikoli jako seznam souborů.
Monitorování správy
Odesláno (Q1 2024)
Monitorování správy můžete použít k prohledávání protokolů auditu a ke sledování využití a přijetí, spotřeby kapacity a dostupnosti.
Karta Rozšířené podrobnosti o vlastní aplikaci nabízí komplexní informace o koncovém bodu.
Odesláno (Q1 2024)
Karta Podrobnosti zdroje a cíle vlastní aplikace nabízí komplexní informace o koncovém bodu eventstreamu. Dostupné informace zahrnují připojovací řetězec ve formátech Kafka, EventHub a AMQP a také vzorový kód Java pro příjem a spotřebu událostí pomocí těchto tří protokolů.
Vylepšený návrhář zpracování datových proudů bez kódu
Odesláno (Q1 2024)
Uživatelé mají vylepšené prostředí pro úpravy eventstreamu s intuitivnějšími gesty v návrháři bez kódu.
Získání dat z eventstreamu ve více položkách infrastruktury
Odesláno (Q1 2024)
Zákazníci můžou získat data událostí z událostí v několika položkách infrastruktury, včetně Lakehouse, databáze KQL a Reflexu.
Zástupce optimalizace tabulky v cílech eventstream lakehouse
Odesláno (Q1 2024)
Zástupce optimalizace tabulky pomáhá uživatelům otevřením poznámkového bloku s úlohou Sparku, která komprimuje malé streamovací soubory v tabulce lakehouse.
Předběžné zpracování dat událostí do cíle databáze KQL
Odesláno (Q1 2024)
Přidání cíle databáze KQL s transformací dat umožňuje zákazníkům transformovat, rozšiřovat a snižovat objem dat před jejich směrováním do databází KQL.
Dva režimy příjmu dat pro cíle lakehouse událostí
Odesláno (Q1 2024)
Cíle eventstream lakehouse podporují dva režimy příjmu dat: nízkou latenci a vysokou propustnost.
Vytvoření cloudového připojení vložené do eventstreamů
Odesláno (Q1 2024)
Zákazníci můžou vytvořit cloudové připojení přímo v rámci svých eventstreamů, aniž by museli přejít na jinou webovou stránku.
Vylepšené možnosti získání dat
Odesláno (Q1 2024)
Uživatelé mají zjednodušené a vylepšené možnosti získat data, aby se jejich data dostala do databáze KQL.