Nyheter och planer för realtidsinformation i Microsoft Fabric
Viktigt!
I lanseringsplanerna beskrivs funktioner som kanske eller kanske inte har släppts ännu. Leveranstidslinjen och den planerade funktionen kan ändras eller kanske inte skickas. Mer information finns i Microsoft-principen.
Realtidsinformation gör det möjligt för dataproffs, analytiker och företagsanvändare att mata in, bearbeta, analysera, transformera, visualisera och agera på stora, tidskänsliga och mycket detaljerade data för att hjälpa organisationer att fatta snabbare och mer välgrundade affärsbeslut. Det är en upplevelse från slutpunkt till slutpunkt som möjliggör sömlös hantering av realtidsdata utan att behöva landa dem först. Realtidsinformation bygger på befintliga funktioner för realtidsanalys och dataaktivering och erbjuder nya funktioner som gör det ännu enklare för användare på alla kunskapsnivåer att få ut mesta möjliga av sina realtidsdata. Detta omfattar inmatning av strömmande data med hög kornighet, dynamisk transformering av strömmande data, frågedata i realtid för omedelbara insikter och utlösande åtgärder som att varna en produktionschef när utrustningen överhettas eller köra jobb igen när datapipelines misslyckas.
Även om det kallas "realtid" behöver dina data inte flöda med höga priser och volymer för att få verkligt affärsvärde. Realtidsinformation ger dig händelsedrivna lösningar i stället för schemadrivna lösningar, vilket säkerställer att du kan fatta de bästa besluten i tid.
Bakom den här kraftfulla arbetsbelastningen finns realtidshubben, en enda plats där du kan identifiera, hantera och använda händelseångningsdata från Fabric, andra Microsoft-datakällor och externa datakällor. Precis som OneLake-datahubben gör det enkelt att identifiera, hantera och använda vilande data kan realtidshubben hjälpa dig att göra samma sak för data i rörelse. Alla händelser som flödar genom realtidshubben kan enkelt omvandlas och dirigeras till alla Infrastrukturdatalager och kan skapa nya strömmar som kan identifieras och användas.
Mer information finns i dokumentationen om realtidsinformation och gå till meddelandebloggen.
De objekt som är tillgängliga i Realtidsinformation är:
Realtidshubben, en enda plats där du kan identifiera, hantera och använda händelseångningsdata från Infrastrukturresurser, andra Microsoft-datakällor och externa datakällor
Händelseströmmar för att samla in, transformera och dirigera realtidshändelser till olika mål utan kod.
Eventhouse- och KQL-databasen är den perfekta analysmotorn för att bearbeta data i rörelse. De är skräddarsydda för tidsbaserade, strömmande händelser med strukturerade, halvstrukturerade och ostrukturerade data. Dessa data indexeras och partitioneras automatiskt baserat på inmatningstiden, vilket ger dig otroligt snabba och komplexa analysfrågor på data med hög kornighet. Data som lagras i händelsehus kan göras tillgängliga i OneLake för förbrukning av andra infrastrukturresurser.
KQL-frågeuppsättning för att köra frågor, visa och anpassa frågeresultat på data. Med KQL-frågeuppsättningen kan du spara frågor för framtida användning, exportera och dela frågor med andra. Den innehåller alternativet att generera en Power BI-rapport.
Realtidsinstrumentpaneler, som innehåller en samling paneler. Varje panel har en underliggande fråga och en visuell representation som är perfekt för datautforskning, övervakning och kriminalteknik.
Dataaktivator som integreras med realtidshubben, eventstreams, realtidsinstrumentpaneler och KQL-frågeuppsättningar, vilket gör det smidigt att utlösa eventuella mönster eller ändra i realtidsdata.
Investeringsområden
Azure Synapse Link från Cosmos DB till Fabric Eventhouse
Uppskattad tidslinje för lansering: Q3 2024
Kunder kan strömma alla uppdateringar från Cosmos DB till en KQL-databas, vilket möjliggör storskalig och kraftfull analys.
Nya anslutningsappar för direktuppspelning för offentliga Kafka-kluster och Mongo DB CDC
Uppskattad tidslinje för lansering: Q3 2024
Versionstyp: Offentlig förhandsversion
Ytterligare anslutningsappar kommer att vara tillgängliga via Get Events-upplevelsen, inklusive offentliga Kafka-kluster och Mongo DB CDC.
Ytterligare fabric-systemhändelser
Uppskattad tidslinje för lansering: Q3 2024
Versionstyp: Offentlig förhandsversion
Utöver fabric-arbetsytehändelser kommer andra fabric-systemhändelser, till exempel plattformsdiagnostikhändelser, att vara tillgängliga för prenumeration via realtidshubben.
Integrering av händelsekatalog
Uppskattad tidslinje för lansering: Q3 2024
Versionstyp: Offentlig förhandsversion
Realtidshubben utökar funktionerna för att hantera händelsetyper, vilket ger en katalog för schemahantering och identifiering.
Stöd för privat slutpunkt på eventstream-klientnivå
Uppskattad tidslinje för lansering: Q3 2024
Versionstyp: Offentlig förhandsversion
Eventstream stöder privata slutpunkter på klientnivå, vilket säkerställer att data flödar in och ut ur Eventstream via säkra nätverk.
Ytterligare mål för Eventstreams
Uppskattad tidslinje för lansering: Q3 2024
Versionstyp: Offentlig förhandsversion
Eventstreams stöder ytterligare mål, inklusive Eventhouse- och Data Integration-objekt.
Dataströmning från Azure Event Grid till eventstreams
Uppskattad tidslinje för lansering: Q3 2024
Kunder kan prenumerera på Azure-resurshändelser (till exempel Blob Storage-händelser), partnerhändelser (som SAP), anpassade händelser eller MQTT-ämnen och sedan få dem publicerade i händelseströmmar.
CI/CD-stöd för Eventstream-objekt
Uppskattad tidslinje för lansering: Q3 2024
Versionstyp: Offentlig förhandsversion
Kunder kan enkelt version och distribuera sina eventstreams över arbetsytor för utveckling, testning och produktion med hjälp av den integrerade Git-integreringen och distributionsupplevelsen i Fabric-plattformen.
Berika händelsedata genom att koppla referensdata i händelseströmmar
Uppskattad tidslinje för lansering: Q3 2024
Under händelsedatainmatning till mål kan en händelseström utöka händelsedata genom att koppla dem till SQL-referensdata, vilket gör det möjligt för kunder att extrahera mer värdefulla insikter från sina händelsedata.
Ange aviseringar för KQL-frågeuppsättningar
Uppskattad tidslinje för lansering: Q3 2024
Versionstyp: Offentlig förhandsversion
Dataaktiveraren kommer att kunna övervaka resultatet av frågor som hanteras i en KQL-frågeuppsättning, köra frågan enligt ett regelbundet schema och agera enligt resultaten.
Fler utlösaralternativ
Uppskattad tidslinje för lansering: Q3 2024
Versionstyp: Offentlig förhandsversion
För att hantera ytterligare begäranden om övervakning av olika affärsvillkor stöder Data Activator utlösare som kontrollerar datum-/tidsvärden, grundläggande matematiska funktioner osv.
Utlösare med låg svarstid
Uppskattad tidslinje för lansering: Q3 2024
Vi hör i kundfeedback att utlösare måste reagera snabbare när det angivna villkoret uppfylls. Dataaktiveraren stöder utlösare med lägre svarstid i scenarier med enkla villkor och lägre datavolymer. Den här funktionen kommer att vara privat förhandsversion inom den här tidsramen.
Diagram över KQL-databasentiteter
Uppskattad tidslinje för lansering: Q4 2024
Versionstyp: Offentlig förhandsversion
en visuell representation av KQL DB-entiteterna och deras relationer (till exempel tabeller, funktioner, materialiserade vyer med mera).
Stöd för parametrar för att utlösa infrastrukturresurser och webhooks
Uppskattad tidslinje för lansering: Q4 2024
Versionstyp: Offentlig förhandsversion
Utlösare som vidtar åtgärder genom att starta Infrastrukturjobb eller anropa webhooks kan skicka värdet för egenskaper i reflexmodellen som parametrar till jobbet eller webhooken.
Webhook-stöd
Uppskattad tidslinje för lansering: Q4 2024
Versionstyp: Offentlig förhandsversion
Webhooks representerar en stor bas av programintegreringar som kan användas i olika scenarier. Dataaktiveraren stöder åtgärder som anropar webhooks när utlösare utlöses.
Levererade funktioner
Innehållsbaserad händelsedirigering till mål i eventstreams
Levererad (Q2 2024)
Versionstyp: Offentlig förhandsversion
Genom att skicka händelseprocessorn utan kod till huvudarbetsytan för eventstream kan kunderna dirigera händelsedata till sina mål baserat på händelseinnehåll, med hjälp av händelsebearbetningslogik som definierats med händelseprocessorn.
Hämta data från realtidshubben i dataaktivatorn
Levererad (Q2 2024)
Versionstyp: Offentlig förhandsversion
Ta med nya händelser i reflexobjekt med hjälp av den inbäddade realtidshubbens webbläsare.
Skapa utlösare från realtidshubben
Levererad (Q2 2024)
Versionstyp: Offentlig förhandsversion
I realtidshubben visas alternativ för att skapa nya utlösare och aviseringar för både affärs- och systemhändelser.
Vidta åtgärder via infrastrukturobjekt
Levererad (Q2 2024)
Versionstyp: Offentlig förhandsversion
Reflexobjekt har stöd för att starta fabric-objektjobb som en åtgärd. Du kommer att kunna starta datapipelines och notebook-filer.
Händelsehus
Levererad (Q2 2024)
Versionstyp: Allmän tillgänglighet
Eventhouse, en avancerad databasarbetsyta som noggrant utformats för att hantera och lagra händelsebaserade data, är nu officiellt tillgänglig för allmän användning. Med Eventhouse kan användare utföra högpresterande analys av stordata och realtidsdatafrågor och bearbeta miljarder händelser inom några sekunder. Plattformen gör det möjligt för användare att organisera data i fack (databaser) i ett logiskt objekt, vilket underlättar effektiv datahantering. Dessutom möjliggör Eventhouse delning av beräknings- och cacheresurser mellan databaser, vilket maximerar resursutnyttjandet.
Tillgänglighet för Eventhouse OneLake
Levererad (Q2 2024)
Versionstyp: Allmän tillgänglighet
Att aktivera datatillgänglighet för Eventhouse i OneLake innebär att kunderna kan njuta av det bästa av båda världarna: de kan köra frågor mot data med hög prestanda och låg svarstid i sin Eventhouse och köra frågor mot samma data i Delta Lake-format via andra Fabric-motorer som Power BI Direct Lake-läge, Warehouse, Lakehouse, Notebooks med mera.
Skapa en databasgenväg till en annan KQL-databas
Levererad (Q2 2024)
Versionstyp: Offentlig förhandsversion
En databasgenväg i Eventhouse är en inbäddad referens till en källdatabas. Databasgenvägen är ansluten i skrivskyddat läge, vilket gör det möjligt att visa och köra frågor på de data som matades in i KQL-källdatabasen utan att mata in den. Detta hjälper till med scenarier för datadelning där du kan dela data på plats, antingen inom team eller till och med med externa kunder.
Stöd för AI-avvikelseidentifiering
Levererad (Q2 2024)
Versionstyp: Offentlig förhandsversion
AI-algoritmer för avvikelseidentifiering stöds i Microsoft Fabric, vilket möjliggör realtidsbedömning av KQL med infogad Python i Realtidsinformation.
Stöd för privat slutpunkt för Eventhouse-klientorganisationsnivå
Levererad (Q2 2024)
Versionstyp: Offentlig förhandsversion
Kunder kan öka sin nätverkssäkerhet genom att begränsa åtkomsten till Eventhouse på klientorganisationsnivå, från ett eller flera virtuella nätverk (VNet) via privata länkar. Detta förhindrar obehörig åtkomst från offentliga nätverk och tillåter endast dataplansåtgärder från specifika virtuella nätverk.
Ny upplevelse för datautforskning från realtidsinstrumentpaneler
Levererad (Q2 2024)
Versionstyp: Offentlig förhandsversion
Direkt från en instrumentpanel i realtid kan användarna förfina sin utforskning med hjälp av ett användarvänligt, formliknande gränssnitt. Den här intuitiva och dynamiska upplevelsen är skräddarsydd för insiktsutforskare som vill ha insikter baserat på realtidsdata. Lägg till filter, skapa aggregeringar och växla visualiseringstyper utan att skriva frågor för att enkelt upptäcka insikter.
Använda realtidshubben för att hämta data i KQL-databasen i Eventhouse
Levererad (Q2 2024)
Versionstyp: Offentlig förhandsversion
Med realtidshubben inbäddad i KQL Database-upplevelsen kan varje användare i klientorganisationen visa och lägga till strömmar som de har åtkomst till och direkt mata in dem i en KQL Database-tabell i Eventhouse.
Instrumentpanel i realtid
Levererad (Q2 2024)
Versionstyp: Offentlig förhandsversion
En instrumentpanel är en samling paneler, som kan ordnas på sidor, där varje panel har en underliggande fråga och en visuell representation. Exportera frågor för Kusto Query Language (KQL) till en instrumentpanel som visuella objekt och ändra sedan deras underliggande frågor och visuell formatering efter behov. Förutom enkel datautforskning ger den här fullständigt integrerade instrumentpanelen bättre prestanda för frågor och visualisering med lätt, flexibel modellering på data med hög kornighet med låg svarstid.
Skapa åtgärder och aviseringar med dataaktivator
Levererad (Q2 2024)
Den här funktionen ger en upplevelse med låg kod/ingen kod för att köra åtgärder och aviseringar från dina KQL-databasdata som visas på en instrumentpanel i realtid. Med dataaktiveraren får du en enda plats för att definiera åtgärdsbara mönster i dina data. Dessa mönster kan variera från enkla tröskelvärden (till exempel ett värde som överskrids) till mer komplexa mönster över tid (till exempel ett värde som trendar nedåt). När dataaktiveraren identifierar ett åtgärdsbart mönster utlöses en åtgärd. Den åtgärden kan vara ett e-postmeddelande eller en Teams-avisering till relevant person i din organisation. Det kan också utlösa en automatisk process, via ett Power Automate-flöde eller en åtgärd i en av din organisations verksamhetsspecifika appar.
Pausa, stoppa eller starta om eventstream-flöden
Levererad (Q2 2024)
Den här funktionen ger kunderna möjlighet att pausa, stoppa eller starta om händelseflöden i realtid, så att de kan iterera omvandlings- eller händelseflödeslogik under utvecklingsfasen.
Andrepilot för realtidsinformation
Levererad (Q2 2024)
Versionstyp: Offentlig förhandsversion
Med co-pilot kan du skriva frågor på naturligt språk och få dem översatta till Kusto Query Language (KQL). Du kan använda co-pilot för att fråga dina instruktioner, utforska dina data i en KQL-databas och skapa Kusto-entiteter som tabeller, funktioner och materialiserade vyer.
Ange avisering på instrumentpaneler i realtid
Levererad (Q2 2024)
Versionstyp: Offentlig förhandsversion
Förutom att övervaka Power BI- och Eventstream-data stöder DataAktiverare regelbundna frågor mot KQL-frågor som sparats i realtidsinstrumentpaneler. Dessa frågor kan användas för att returnera undantag eller spåra resultat över tid för att identifiera dataändringar eller tröskelvärden.
Realtidshubben för alla data i rörelse
Levererad (Q2 2024)
Versionstyp: Offentlig förhandsversion
Realtidshubben är den enda egendomen för alla data i rörelse i hela organisationen.
Hämta händelseupplevelse i Realtidshubben (ändra för att förklara värde eller ta bort för 18/24)
Levererad (Q2 2024)
Versionstyp: Offentlig förhandsversion
Oavsett om data kommer från nya eller befintliga källor, strömmar eller tillgängliga händelser kan användarna ansluta till en mängd olika källor direkt från realtidshubben, eventstreams, eventhouse och dataaktivatorn.
Nya anslutningsappar för direktuppspelning, inklusive Confluent Kafka, AWS Kinesis, PostgresSQL CDC med mera
Levererad (Q2 2024)
Versionstyp: Offentlig förhandsversion
Utöver Microsoft-källor kan användarna nu strömma data från andra plattformar som Google Cloud, Amazon Kinesis, Datainsamlingsströmmar för databasändringar osv. med hjälp av våra nya anslutningsappar för meddelanden. Våra anslutningsappar för meddelanden drivs av Kafka connect med Camel Kafka-anslutningsappar som erbjuder ett anslutningsbart, deklarativt dataintegreringsramverk och flexibilitet för olika källanslutningar på populära dataplattformar, samt Debezium som kan ansluta databaser för att hämta CDC-strömmar (Change Data Capture).
Nya källor till diskreta händelser från Fabric-systemhändelser och Azure Storage-händelser
Levererad (Q2 2024)
Versionstyp: Offentlig förhandsversion
Diskreta händelser (t.ex. meddelandehändelser) är viktiga (viktiga) fakta som har inträffat och som utlöser tillståndsändringar eller åtgärder i nedströms konsumentprogram (prenumeranter). Exempel är händelser som OrderPlaced i ordningssystem, bloblagringsändringar i Azure-källor eller objektändringar i Fabric-systemet.
Källa från realtidshubben i Förbättrad händelseström
Levererad (Q2 2024)
Versionstyp: Offentlig förhandsversion
Eventstream-startsidan gör det ännu enklare att hämta data. Genom att klicka på "Lägg till extern källa" hittar du dessa källor i guiden Hämta händelser som hjälper dig att konfigurera källan i några få steg. När du har lagt till källan i din händelseström kan du publicera den för att strömma data till din händelseström. Använda Eventstream med diskreta källor för att omvandla händelser till strömmar för mer analys. Du kan skicka strömmarna till olika infrastrukturdatamål, till exempel Lakehouse och KQL Database.
Lägen för redigering av händelseström och live
Levererad (Q2 2024)
Versionstyp: Offentlig förhandsversion
Eventstream erbjuder två distinkta lägen, Redigera och Live, för att ge flexibilitet och kontroll över utvecklingsprocessen för din händelseström. Om du skapar en ny Eventstream med utökade funktioner aktiverade kan du ändra den i redigeringsläge. Här kan du utforma dataströmbearbetningsåtgärder för dina dataströmmar med hjälp av ett redigeringsprogram utan kod. När du har slutfört redigeringen kan du publicera din Eventstream och visualisera hur den börjar strömma och bearbeta data i liveläge.
Standard- och härledda strömmar
Levererad (Q2 2024)
Versionstyp: Offentlig förhandsversion
Flera strömmar visas i realtidshubben, inklusive standard- och härledda strömmar. Standardström genereras automatiskt när en strömmande källa läggs till i Eventstream. Standardströmmen samlar in rådata direkt från källan, redo för transformering eller analys. erived stream: En specialiserad ström som användare kan skapa som mål i Eventstream. Härledd dataström kan skapas efter en serie åtgärder, till exempel filtrering och aggregering, och sedan är den redo för ytterligare förbrukning eller analys av andra användare i organisationen via realtidshubben.
Förbättrade utlösaralternativ
Levererad (Q2 2024)
För att representera affärsvillkoren för övervakning stöder Data Activator fler utlösarvillkor, till exempel procentuella ändringar över tid, datum/tid-funktioner, grundläggande matematiska funktioner, identifiering av signalfrånvaro med mera.
Skala upp till 100 MB/s för händelseströmsbearbetning
Levererad (Q1 2024)
En händelseström kan stödja dataflöde för händelseinmatning upp till 100 MB/s vid inmatning av data till KQL-databaser och lakehouses.
Notebook-integrering
Levererad (Q1 2024)
Kunder kan köra interna frågor mot KQL-databaser från Microsoft Fabric-notebook-filer. Använd notebook-filer för att köra frågor på KQL-databaser, spara resulterande dataramar, mata in data i KQL-databaser med mera.
Anpassningsbar kvarhållning av händelsedata i händelseströmmar
Levererad (Q1 2024)
Kunderna har flexibiliteten att ange kvarhållningstiden för händelsedata, vilket säkerställer att händelsedata bevaras i sina händelseströmmar enligt deras specifika affärskrav.
Förbättringar av händelseprocessorn i Eventstream
Levererad (Q1 2024)
Detta omfattar tre förbättringar. Först anpassar du åtgärdsnoder och filtrerar enkelt bort null-värden från dina data. För det andra hanterar och byter du enkelt namn på kolumnfälten i åtgärden Sammanställ. För det tredje ändrar du dina värden till olika datatyper med hjälp av åtgärden Hantera fält .
Nytt eventstream-mål till dataaktiverare
Levererad (Q1 2024)
Målalternativet Dataaktivering hjälper kunder att dirigera händelser till Dataaktivator, där de kan skapa utlösare baserat på händelsedata från eventstreams internt.
Autoskalning av händelseströmmar
Levererad (Q1 2024)
Den här funktionen ger flexibiliteten att automatiskt skala kapacitet som svar på händelsedatatrafikvolymen, vilket möjliggör sömlös förbättring av händelseströmsdataflödet utan att störa din verksamhet.
Deltastöd till KQL-databasens OneLake-representation
Levererad (Q1 2024)
Versionstyp: Offentlig förhandsversion
KQL-databasdata är redan tillgängliga i OneLake i parquet-format. Genom att lägga till Delta-stöd kan andra infrastrukturresurser använda OneLake-närvaro som en tabell i stället för som en lista över filer.
Administrativ övervakning
Levererad (Q1 2024)
Du kan använda administrativ övervakning för att söka i granskningsloggar och för att spåra användning och implementering, kapacitetsförbrukning och tillgänglighet.
Genväg för tabelloptimering i eventstream lakehouse-mål
Levererad (Q1 2024)
Genvägen för tabelloptimering hjälper användarna genom att öppna en notebook-fil med ett Spark-jobb som komprimerar små strömmande filer i lakehouse-tabellen.
Fliken Förbättrad anpassad appinformation innehåller omfattande slutpunktsinformation
Levererad (Q1 2024)
Fliken Information för källan och målet för anpassad app innehåller omfattande information om händelseströmsslutpunkten. Tillgänglig information omfattar niska veze i Kafka-, Eventhub- och AMQP-format, samt Java-exempelkod för händelseinmatning och förbrukning med hjälp av dessa tre protokoll.
Förbättrad bearbetningsdesigner för dataström utan kod
Levererad (Q1 2024)
Användarna har en förbättrad redigeringsupplevelse för händelseströmmen, med mer intuitiva gester i designern utan kod.
"Hämta data från Eventstream" i flera infrastrukturobjekt
Levererad (Q1 2024)
Kunder kan hämta händelsedata från eventstreams i flera infrastrukturobjekt, inklusive Lakehouse, KQL Database och Reflex.
Förbearbetning av händelseströmsdata till KQL-databasmål
Levererad (Q1 2024)
Genom att lägga till KQL-databasmålet med datatransformering kan kunderna transformera, utöka och minska datavolymen innan de dirigeras till KQL-databaser.
Skapa molnanslutning inbäddad i eventstreams
Levererad (Q1 2024)
Kunder kan skapa en molnanslutning direkt i sina händelseströmmar, utan att gå till en annan webbsida.
Två inmatningslägen för eventstream lakehouse-destinationer
Levererad (Q1 2024)
Eventstream lakehouse-mål stöder två inmatningslägen: låg svarstid och högt dataflöde.
Förbättrad upplevelse för hämta data
Levererad (Q1 2024)
Användarna får en förenklad och förbättrad Upplevelse av att hämta data för att hämta sina data till en KQL-databas.