Nyheter och planer för OneLake i Microsoft Fabric
Viktigt!
I lanseringsplanerna beskrivs funktioner som kanske eller kanske inte har släppts ännu. Leveranstidslinjen och den planerade funktionen kan ändras eller kanske inte skickas. Mer information finns i Microsoft-principen.
OneLake är en enda, enhetlig, logisk datasjö för hela organisationen. Precis som OneDrive levereras OneLake automatiskt med varje Microsoft Fabric-klientorganisation och är utformad för att vara den enda platsen för alla dina analysdata.
Alla data i OneLake fungerar med "out-of-the-box"-styrning som data härkomst, dataskydd, certifiering, katalogintegrering osv. och kontrolleras slutligen av en klientadministratör. I en klientorganisation gör arbetsytor att olika delar av organisationen kan arbeta oberoende av varandra samtidigt som de bidrar till samma datasjö.
OneLake är öppen på alla nivåer. OneLake stöder samma ADLS Gen2-API:er och SDK:er för att vara kompatibla med befintliga ADLS Gen2-program och kan stödja alla typer av filer, strukturerade eller ostrukturerade.
OneLake syftar till att ge dig så mycket värde som möjligt av en enda kopia av data. Med OneLake-genvägar kan du förena dina data mellan domäner, moln och konton genom att skapa en referens till data som lagras på andra filplatser, till exempel andra OneLake-platser eller ADLS eller S3 utan dataflytt eller duplicering. Du kan också använda samma data i flera analysmotorer eftersom Fabric-motorer lagrar alla tabelldata i öppna parquet-format. Det finns inte längre något behov av att kopiera data bara för att använda dem med en annan motor.
Mer information finns i dokumentationen.
Investeringsområden
Funktion | Uppskattad tidslinje för lansering |
---|---|
Stöd för Databricks Unity Catalog för OneLake | Q3 2024 |
Allmän tillgänglighet för OneLake-dataåtkomstroller | Q4 2024 |
OneLake-säkerhetsmodell | Q1 2025 |
OneLake-genvägar till lokala data | Levererad (Q2 2024) |
Genvägar till Googles molnlagring | Levererad (Q1 2024) |
API för genvägar | Levererad (Q1 2024) |
Smart cachelagring för Amazon S3-genvägar | Levererad (Q4 2023) |
Stöd för Databricks Unity Catalog för OneLake
Uppskattad tidslinje för lansering: Q3 2024
Versionstyp: Offentlig förhandsversion
Integrering av Azure Databricks Unity-katalog med Microsoft Fabric
Du kommer att kunna komma åt Azure Databricks Unity Catalog-tabeller direkt i Microsoft Fabric, vilket gör det ännu enklare att förena Azure Databricks med Microsoft Fabric. Från Fabric-portalen kan du skapa och konfigurera ett nytt Azure Databricks Unity-katalogobjekt i Fabric med bara några få klick. Du kan lägga till en fullständig katalog, ett schema eller till och med enskilda tabeller för att länka och hanteringen av det här Azure Databricks-objektet i OneLake – en genväg som är ansluten till Unity Catalog – tas automatiskt hand om åt dig. Dessa data fungerar som andra data i OneLake – du kan skriva SQL-frågor eller använda dem med andra arbetsbelastningar i Infrastruktur, inklusive Power BI via Direct Lake-läge. När data ändras eller tabeller läggs till, tas bort eller byter namn i Azure Databricks förblir data i Fabric alltid synkroniserade. Den här nya integreringen gör det enkelt att förena Azure Databricks-data i Fabric och sömlöst använda dem i varje Infrastrukturarbetsbelastning.
Federera OneLake som en fjärrkatalog i Azure Databricks
Microsoft Fabric-användare kommer att kunna komma åt Fabric-dataobjekt som lakehouses som en katalog i Azure Databricks. Även om data finns kvar i OneLake kan du komma åt och visa dataursprung och andra metadata i Azure Databricks och utnyttja den fulla kraften i Unity Catalog.
Allmän tillgänglighet för OneLake-dataåtkomstroller
Uppskattad tidslinje för lansering: Q4 2024
Versionstyp: Allmän tillgänglighet
OneLake-dataåtkomstroller bygger på de befintliga funktionerna i OneLakes säkerhetsmodell för att öka den kornighet med vilken säkerhet kan tillämpas i ett fabric-dataobjekt. Den här funktionen lägger till en ärvbar RBAC-modell (rollbaserad åtkomstkontroll) som förenklar användar- och behörighetshantering för data i OneLake. Du kan definiera säkerhetsroller som ger läsbehörighet till specifika mappar i OneLake och tilldela dem till användare eller grupper. Åtkomstbehörigheterna avgör vilka mappar användarna ser när de kommer åt sjövyn för data, antingen via Lakehouse UX, notebook-filer eller OneLake-API:er.
OneLake-säkerhetsmodell
Uppskattad tidslinje för lansering: Q1 2025
Versionstyp: Offentlig förhandsversion
Det är svårt att hantera datasäkerhet i flera analysmotorer och kopior av data. OneLake och Fabric förenklar detta genom att aktivera användning av en enda datakopia över flera analysmotorer utan dataförflyttning eller duplicering. Med konceptet "one copy" längre förbättrar OneLake också säkerheten med en finare modell, vilket möjliggör åtkomst till tabeller och mappar utöver säkerhet på rad- och kolumnnivå. Dessa säkerhetsdefinitioner lever med data och färdas över genvägar till var data används. Säkerhet som definieras i OneLake tillämpas universellt oavsett vilken analysmotor som används för att komma åt data.
Levererade funktioner
OneLake-genvägar till lokala data
Levererad (Q2 2024)
Versionstyp: Offentlig förhandsversion
Microsoft OneLake-genvägar utökas till att omfatta lokala och nätverksbegränsade datakällor. Med den här funktionen kan du förena dina lokala data och molndata i OneLake.
När du skapar genvägar till AWS S3, Google Cloud Storage eller S3-kompatibla bucketar kan du välja en lokal datagateway (OPDG) för att upprätta anslutningen.
Genvägar till Googles molnlagring
Levererad (Q1 2024)
Versionstyp: Offentlig förhandsversion
OneLake utökar genvägsstödet till Google Cloud Storage, vilket möjliggör virtualisering av data utan att flytta eller duplicera dem. Detta möjliggör integrering av Google Cloud Storage-data med Microsoft-tjänster som ADLS gen2, OneLake, Dataverse och Amazon S3. Data visas och fungerar som om de fanns i OneLake och ger dig en enkel datasjö som kan sträcka sig över moln.
API för genvägar
Levererad (Q1 2024)
Versionstyp: Offentlig förhandsversion
Ett offentligt REST-API för att automatisera skapande och hantering av genvägsscenarier.
Smart cachelagring för Amazon S3-genvägar
Levererad (Q4 2023)
Versionstyp: Offentlig förhandsversion
Smart cachelagring för Amazon S3-genvägar minskar utgående kostnader och förbättrar prestanda genom att föra data närmare beräkningsmotorn. Smart cachelagring tar ut data från S3 en gång, cachelagra dem lokalt i OneLake under en viss period. På så sätt eliminerar det behovet av upprepad datahämtning från S3. Cachelagrade data kan återanvändas över flera användare, analysmotorer och scenarier som optimerar värdet för en enda utgående.