Microsoft Fabric 中即時智慧的新功能和計劃
重要
發行方案描述可能或可能尚未發行的功能。 傳遞時程表和投影功能可能會變更或可能不會出貨。 如需詳細資訊,請參閱Microsoft原則。
即時智慧可讓數據專業人員、分析師和商務使用者擷取、處理、分析、轉換、可視化及處理大型、時間敏感且高度細微的數據,以協助組織做出更快速且更明智的商務決策。 這是端對端體驗,可讓您順暢地處理實時數據,而不需要先將其登陸。 即時智慧建置在現有的即時分析和數據啟動器功能之上,並提供新功能,讓所有技能層級的使用者更容易從其實時數據中獲得最大。 這包括擷取具有高粒度的串流數據、動態轉換串流數據、即時查詢數據以取得立即見解,以及觸發動作,例如在設備過熱或數據管線失敗時重新執行作業時警示生產管理員。
即使它稱為「即時」,您的數據也不必以高速率和磁碟區流動,以取得真正的商業價值。 實時智慧提供事件驅動,而不是排程驅動解決方案,以確保您可以及時做出最佳決策。
此功能強大的工作負載背後是實時中樞、單一位置,可從 Fabric、其他Microsoft數據源和外部數據源探索、管理及使用事件串流數據。 就像 OneLake 數據中樞可讓您輕鬆地探索、管理及使用待用數據一樣,即時中樞可協助您針對移動中的數據執行相同的動作。 流經即時中樞的所有事件都可以輕鬆地轉換並路由傳送至任何網狀架構數據存放區,並可建立可探索和取用的新數據流。
即時智慧中可用的專案如下:
實時中樞,單一位置可從 Fabric、其他Microsoft數據源和外部數據源探索、管理和使用事件串流數據
用於擷取、轉換和路由即時事件的事件串流 到具有無程式代碼體驗的各種目的地。
Eventhouse 和 KQL 資料庫 是處理行動數據的理想分析引擎。 它們專為以時間為基礎的串流事件量身打造,其中包含結構化、半結構化和非結構化資料。 此資料會根據擷取時間自動編製索引並分割,讓您在高粒度資料上提供難以置信且複雜的分析查詢功能。 儲存在事件存放區中的數據可以在 OneLake 中提供,以供其他網狀架構體驗取用。
KQL 查詢集 可執行查詢、檢視及自定義數據查詢結果。 KQL 查詢集可讓您儲存查詢,以供日後使用、匯出及與其他人共享查詢。 其中包含產生Power BI報表的選項。
即時儀錶板,其中包含圖格集合。 每個圖格都有基礎查詢和可視化表示,非常適合用於數據探索、監視和鑑識。
與即時中樞、事件串流、即時儀錶板和 KQL 查詢集整合的數據啟動器 ,可讓您順暢地在任何模式上觸發或即時數據變更。
投資領域
從 Cosmos DB 到 Fabric Eventhouse 的 Azure Synapse Link
預估發行時程表:Q3 2024
客戶可以將 Cosmos DB 的所有更新串流至 KQL 資料庫,以啟用大規模的強大分析。
多變量異常偵測
預估發行時程表:Q3 2024
Azure 異常偵測程式 多重變異技術將在 Fabric 中原生提供。 使用 Spark 和筆記本或使用 Eventhouses 來定型偵測器,並在新數據送達時即時偵測異常。
Eventhouse 平台監視
預估發行時程表:Q3 2024
版本類型:公開預覽
存取 Eventhouse 記錄和計量,以微調效能、疑難解答問題並識別異常狀況。 Eventhouse 會報告查詢記錄、擷取計量和擷取失敗事件。 Eventhouse 事件和計量記錄會儲存在唯讀 KQL 資料庫中。 用戶將能夠使用 KQL 查詢集和即時儀錶板來分析事件。
Eventstream 專案的 CI/CD 支援
預估發行時程表:Q3 2024
版本類型:公開預覽
客戶可以使用 Fabric 平臺中的整合式 Git 整合和部署體驗,輕鬆地在開發、測試和生產工作區之間建立事件串流的版本和部署。
其他觸發程序選項
預估發行時程表:Q3 2024
版本類型:公開預覽
為了解決監視不同商務條件的進一步要求,數據啟動器將支援檢查日期/時間值、基本數學函式等觸發程式。
低延遲觸發程式
預估發行時程表:Q3 2024
我們在客戶意見反應中聽到,當符合指定條件時,觸發程式需要更快回應。 在具有簡單條件和較低數據量的情況下,數據啟動器將支援低延遲觸發程式。這項功能將會在此時間範圍內成為私人預覽版。
在 KQL 查詢集上設定警示
預估發行時程表:Q3 2024
版本類型:公開預覽
數據啟動器將能夠監視 KQL 查詢集中管理的查詢結果、定期執行查詢,以及對結果採取行動。
Kafka 公用叢集和更多 SQL Server DB CDC 實例的新串流連接器
預估發行時程表:Q3 2024
版本類型:公開預覽
其他連接器可透過取得事件體驗取得,包括公用 Kafka 叢集和 SQL Server DB CDC。
Eventstream 與受控私人端點整合
預估發行時程表:Q3 2024
版本類型:公開預覽
此與受控私人端點的整合可讓您安全且私人地存取防火牆後方的數據源,或封鎖公用因特網存取,讓數據透過輸出連線串流至 Fabric Eventstream。
Eventhouse 目的地支援 Eventstreams
預估發行時程表:Q3 2024
版本類型:公開預覽
Eventstreams 會新增 Eventhouse 作為目的地的支援。
KQL 資料庫實體圖表
預估發行時程表:Q4 2024
版本類型:公開預覽
KQL DB 實體及其關聯性的視覺表示法(例如數據表、函式、具體化檢視等等)。
Webhook 支援
預估發行時程表:2025 年第 1 季
版本類型:公開預覽
Webhook 代表可在不同案例中使用的大型應用程式整合基底。 數據啟動器將支援觸發程式引發時呼叫 Webhook 的動作。
支援觸發網狀架構動作和 Webhook 的參數
預估發行時程表:2025 年第 1 季
版本類型:公開預覽
啟動 Fabric 作業或呼叫 Webhook 以採取動作的觸發程式,將反射模型中的屬性值當做參數傳遞至作業或 Webhook。
出貨功能(秒)
在即時儀錶板上設定警示
出貨 (2024 年第 2 季)
版本類型:公開預覽
除了監視Power BI和Eventstream數據之外,數據啟動器還支援針對儲存在即時儀錶板中的 KQL 查詢進行定期查詢。 這些查詢可用來傳回例外狀況,或追蹤一段時間的結果,以偵測數據變更或閾值條件。
移動中所有數據的即時中樞
出貨 (2024 年第 2 季)
版本類型:公開預覽
即時中樞是整個組織內所有數據移動的單一資產。
在即時中樞取得事件體驗(變更以說明 18/24 的值或移除)
出貨 (2024 年第 2 季)
版本類型:公開預覽
無論數據來自新的或現有的來源、串流或可用的事件,「取得事件」體驗可讓使用者直接從即時中樞、Eventstreams、Eventhouse 和數據啟動器連線到各種來源。
新的串流連接器,包括 Confluent Kafka、AWS Kinesis、PostgresSQL CDC 等等
出貨 (2024 年第 2 季)
版本類型:公開預覽
除了Microsoft來源之外,用戶現在可以串流來自Google Cloud、Amazon Kinesis、資料庫異動數據擷取數據流等其他平台的數據。 使用新的傳訊連接器。 我們的傳訊連接器是由 Kafka 與 Camel Kafka 連接器所提供,可提供插入式、宣告式數據整合架構,以及熱門數據平臺上各種來源連線的彈性,以及可連接資料庫以擷取異動數據擷取 (CDC) 數據流的 Debezium。
網狀架構系統事件和 Azure 記憶體事件的新離散事件來源
出貨 (2024 年第 2 季)
版本類型:公開預覽
離散事件(也就是通知事件)是已發生的重要(重要)事實,而且觸發下游取用者應用程式中的狀態變更或動作。 範例包括 OrderPlaced 排序系統、Azure 來源中的 Blob 記憶體變更,或 Fabric 系統中的專案變更等事件。
增強事件串流中的即時中樞來源
出貨 (2024 年第 2 季)
版本類型:公開預覽
Eventstream 首頁可讓您更輕鬆地帶入數據。 按兩下 [新增外部來源] 即可在 [取得事件精靈] 中找到這些來源,協助您在幾個步驟中設定來源。 將來源新增至事件串流之後,您可以將它發佈至事件串流中的數據。 使用 Eventstream 搭配離散來源,將事件轉換成串流,以進行更多分析。 您可以將數據流傳送至不同的網狀架構數據目的地,例如 Lakehouse 和 KQL Database。
Eventstream 編輯和即時模式
出貨 (2024 年第 2 季)
版本類型:公開預覽
Eventstream 提供兩種不同的模式:編輯和即時,以提供對事件串流開發程序的彈性和控制。 如果您建立已啟用增強功能的新 Eventstream,您可以在編輯模式中修改它。 在這裡,您可以使用無程式碼編輯器為數據流設計數據流的串流處理作業。 完成編輯之後,您可以發佈您的 Eventstream,並將其以即時模式開始串流和處理數據的方式可視化。
預設和衍生數據流
出貨 (2024 年第 2 季)
版本類型:公開預覽
實時中樞內會列出多個數據流,包括預設和衍生數據流。 當串流來源新增至 Eventstream 時,會自動產生預設數據流。 默認數據流會直接從來源擷取原始事件數據,準備好進行轉換或分析。 erived 數據流:用戶可以在 Eventstream 中建立為目的地的特殊數據流。 衍生數據流可以在一系列作業之後建立,例如篩選和匯總,然後透過即時中樞讓組織中的其他使用者可以進一步取用或分析。
即時智慧的共同試驗
出貨 (2024 年第 2 季)
版本類型:公開預覽
共同試驗可讓您以自然語言撰寫查詢,並將它們翻譯成 Kusto 查詢語言 (KQL)。 您可以使用共同試驗來詢問您的作法查詢、探索 KQL 資料庫中的數據,以及建立 Kusto 實體,例如數據表、函式和具體化檢視。
即時儀表板
出貨 (2024 年第 2 季)
版本類型:公開預覽
儀錶板是磚的集合,可選擇性地組織在頁面中,其中每個磚都有基礎查詢和可視化表示。 以原生方式將 Kusto 查詢語言 (KQL) 查詢匯出至儀錶板做為視覺效果,稍後視需要修改其基礎查詢和視覺效果格式。 除了輕鬆探索數據之外,此完全整合的儀錶板體驗還提供改善的查詢和視覺效果效能,並針對高粒度低延遲數據進行彈性的模型化。
以內容為基礎的事件路由至事件數據流中的目的地
出貨 (2024 年第 2 季)
版本類型:公開預覽
將無程式代碼事件處理器帶入 eventstream 主要畫布,可讓客戶使用事件處理器定義的事件處理邏輯,根據事件內容,將事件數據路由傳送至目的地。
使用數據啟動器建立動作和警示
出貨 (2024 年第 2 季)
這項功能提供低程式代碼/無程式碼體驗,從即時儀錶板中顯示的 KQL 資料庫數據驅動動作和警示。 數據啟動器可讓您在數據中定義可採取動作模式的單一位置。 這些模式的範圍可以從簡單的臨界值(例如超過值)到一段時間更複雜的模式(例如值趨勢下降)。 當數據啟動器偵測到可採取動作的模式時,它會觸發動作。 該動作可以是您組織中相關人員的電子郵件或Teams警示。 它也可以透過Power Automate流程或組織其中一個企業營運應用程式中的動作來觸發自動程式。
暫停、停止或重新啟動事件數據流
出貨 (2024 年第 2 季)
這項功能讓客戶能夠暫停、停止或重新啟動即時事件流程,以便在開發階段內反覆運算轉換或事件流程邏輯。
Eventhouse
出貨 (2024 年第 2 季)
發行類型:正式運作
Eventhouse 是精心製作的尖端資料庫工作區,可管理和儲存以事件為基礎的數據,現在正式可供一般使用。 透過 Eventhouse,用戶可以對巨量數據和即時數據進行高效能分析,並在幾秒內處理數十億個事件。 平臺可讓使用者將數據組織成一個邏輯專案內的區間(資料庫),以促進有效率的數據管理。 此外,Eventhouse 可讓您跨資料庫共用計算和快取資源,將資源使用率最大化。
Eventhouse OneLake 可用性
出貨 (2024 年第 2 季)
發行類型:正式運作
在 OneLake 中啟用 Eventhouse 的數據可用性表示客戶可以享有兩個世界的最佳功能:他們可以在 Eventhouse 中使用高效能和低延遲查詢數據,並透過 Power BI Direct Lake 模式、Warehouse、Lakehouse、Notebooks 等任何其他網狀架構引擎查詢相同的數據。
建立另一個 KQL 資料庫的資料庫快捷方式
出貨 (2024 年第 2 季)
版本類型:公開預覽
Eventhouse 中的資料庫快捷方式是源資料庫的內嵌參考。 資料庫快捷方式會以唯讀模式附加,讓您能夠檢視並執行內嵌至來源 KQL 資料庫的數據查詢,而不需內嵌查詢。 這有助於數據共用案例,您可以在小組內或甚至是與外部客戶共享數據。
支援 AI 異常偵測程式
出貨 (2024 年第 2 季)
版本類型:公開預覽
Microsoft Fabric 支援 AI 異常偵測程式 演算法,以即時智慧方式使用內嵌 Python 進行 KQL 即時評分。
Eventhouse 租用戶層級私人端點支援
出貨 (2024 年第 2 季)
版本類型:公開預覽
客戶可以藉由限制在租用戶層級存取 Eventhouse,透過私人連結從一或多個虛擬網路 (VNet) 存取,藉此提高其網路安全性。 這可防止未經授權的公用網路存取,並且只允許來自特定 VNet 的數據平面作業。
從即時儀錶板探索數據的新體驗
出貨 (2024 年第 2 季)
版本類型:公開預覽
直接從即時儀錶板,用戶可以使用使用者易記的類似窗體介面來精簡探索。 此直覺式和動態體驗專為深入解析總管量身打造,可依據實時數據來渴望深入解析。 新增篩選、建立匯總,以及切換視覺效果類型,而不需撰寫查詢即可輕鬆發現見解。
使用即時中樞在 Eventhouse 中取得 KQL 資料庫中的數據
出貨 (2024 年第 2 季)
版本類型:公開預覽
透過內嵌在 KQL Database 體驗中的即時中樞,租使用者中的每個使用者都可以檢視和新增可存取的數據流,並直接內嵌至 Eventhouse 中的 KQL Database 數據表。
從數據啟動器內的實時中樞取得數據
出貨 (2024 年第 2 季)
版本類型:公開預覽
使用內嵌即時中樞瀏覽器,將新的事件帶入反射專案。
從即時中樞建立觸發程式
出貨 (2024 年第 2 季)
版本類型:公開預覽
在即時中樞中,您會看到在商務和系統事件上建立新觸發程式和警示的選項。
透過網狀架構專案採取動作
出貨 (2024 年第 2 季)
版本類型:公開預覽
反光專案將支持啟動 Fabric 專案作業做為動作。 您將能夠啟動資料管線和筆記本。
增強的觸發程序選項
出貨 (2024 年第 2 季)
為了代表監視的商業條件,數據啟動器將支援更多觸發條件,例如一段時間內的百分比變更、日期/時間函式、基本數學函式、訊號缺勤偵測等等。
筆記本整合
出貨 (2024 年第 1 季)
客戶可以從網狀架構筆記本Microsoft原生查詢 KQL 資料庫。 使用筆記本在 KQL 資料庫上執行查詢、儲存產生的數據框架、將數據內嵌至 KQL 資料庫等等。
相應增加至 100 MB/秒,以進行事件串流處理
出貨 (2024 年第 1 季)
Eventstream 可支援事件擷取輸送量高達 100 MB/秒,同時將數據內嵌至 KQL 資料庫和 Lakehouses。
Eventstreams 中可自定義的事件數據保留
出貨 (2024 年第 1 季)
客戶可以彈性地設定事件數據保留時間,確保事件數據會根據其特定商務需求保留在事件數據流中。
Eventstream 中事件處理器的增強功能
出貨 (2024 年第 1 季)
這包括三項增強功能。 首先,將作業節點個人化,並輕鬆地從您的數據中篩選出 『null』 值。 其次,在匯總作業中輕鬆管理和重新命名數據行欄位。 第三,使用 [管理字段] 作業,將您的值變更為不同的數據類型。
eventstream lakehouse 目的地中的數據表優化快捷方式
出貨 (2024 年第 1 季)
數據表優化快捷方式可透過使用 Spark 作業開啟筆記本,以壓縮 Lakehouse 數據表中的小型串流檔案,來協助使用者。
增強的 [自定義應用程式詳細資料] 索引標籤提供完整的端點資訊
出貨 (2024 年第 1 季)
自訂應用程式來源和目的地的 [詳細數據] 索引標籤提供事件數據流端點的完整資訊。 可用的資訊包括 Kafka、Eventhub 和 AMQP 格式中的 連接字串,以及使用這三種通訊協定進行事件擷取和取用的範例 Java 程式代碼。
改善無程式代碼串流處理設計工具
出貨 (2024 年第 1 季)
使用者在無程式代碼設計工具中具有更直覺的手勢,具有改良的事件串流編輯體驗。
多個 Fabric 專案中的「從 Eventstream 取得數據」
出貨 (2024 年第 1 季)
客戶可以從多個 Fabric 專案中的事件數據流取得事件數據,包括 Lakehouse、KQL Database 和 Reflex。
KQL 資料庫 OneLake 表示法的差異支援
出貨 (2024 年第 1 季)
版本類型:公開預覽
KQL 資料庫數據已以 Parquet 格式的 OneLake 提供。 新增 Delta 支援可讓其他網狀架構功能使用 OneLake 目前狀態做為數據表,而不是作為檔案清單。
系統管理監視
出貨 (2024 年第 1 季)
您可以使用系統管理監視來搜尋稽核記錄,以及追蹤使用量和採用、容量耗用量和可用性。
Data Activator 的新 eventstream 目的地
出貨 (2024 年第 1 季)
[數據啟動器目的地] 選項可協助客戶將事件路由傳送至數據啟動器,他們可以根據原生事件數據流的事件數據來建置觸發程式。
自動調整事件數據流
出貨 (2024 年第 1 季)
這項功能提供彈性來自動調整容量以回應事件數據流量,讓您順暢地改善事件數據流輸送量,而不會中斷您的商務營運。
Eventstream 數據前置處理至 KQL 資料庫目的地
出貨 (2024 年第 1 季)
新增具有數據轉換的 KQL 資料庫目的地可讓客戶在路由至 KQL 資料庫之前,先轉換、擴充及減少數據量。
改善取得數據體驗
出貨 (2024 年第 1 季)
用戶體驗簡化且改善的取得數據體驗,以將其數據放入 KQL 資料庫。
內嵌在 eventstreams 中的雲端連線建立
出貨 (2024 年第 1 季)
客戶可以直接在其事件串流內建立雲端連線,而不需要流覽至另一個網頁。
事件串流 Lakehouse 目的地的兩種擷取模式
出貨 (2024 年第 1 季)
Eventstream Lakehouse 目的地支援兩種擷取模式:低延遲和高輸送量。