Not
Bu sayfaya erişim yetkilendirme gerektiriyor. Oturum açmayı veya dizinleri değiştirmeyi deneyebilirsiniz.
Bu sayfaya erişim yetkilendirme gerektiriyor. Dizinleri değiştirmeyi deneyebilirsiniz.
Dokuda Yansıtma, çeşitli sistemlerdeki verileri tek bir analiz platformunda bir araya getiren düşük maliyetli ve düşük gecikme süreli bir çözümdür. Çeşitli Azure veritabanlarından ve dış veri kaynaklarından mevcut veri varlığınızı doğrudan Fabric'in OneLake'ine çoğaltabilirsiniz.
OneLake'de sorgulanabilir biçimde en up-totarih verileriyle artık Spark ile analiz çalıştırma, not defterlerini yürütme, veri mühendisliği, Power BI Raporları aracılığıyla görselleştirme ve daha fazlası gibi tüm farklı Doku hizmetlerini kullanabilirsiniz.
Fabric'te Yansıtma, kullanıcıların analiz ihtiyaçlarınızı basitleştirmek için tasarlanmış yüksek oranda tümleşik, uçtan uca ve kullanımı kolay bir ürünün keyfini çıkarmalarını sağlar. Microsoft ile açık kaynak Delta Lake tablo biçimini okuyabilen teknoloji çözümleri arasında açıklık ve işbirliği için oluşturulan Yansıtma, OneLake'te verilerinizin tüm analiz gereksinimleriniz için kullanılabilen bir çoğaltmasını oluşturmanıza olanak tanıyan düşük maliyetli ve düşük gecikme süresine sahip bir anahtar teslim çözümüdür.
Delta tabloları daha sonra Doku'da her yerde kullanılabilir ve kullanıcıların Doku yolculuğunu hızlandırmasına olanak tanır.
Dokuda Yansıtma neden kullanılır?
Günümüzde birçok kuruluş silolarda görev açısından kritik operasyonel veya analitik verilere sahiptir.
Bugün bu verilere erişmek ve bu verilerle çalışmak için karmaşık ETL (Dönüştürme Yükünü Ayıkla) işlem hatları, iş süreçleri ve karar silolarının oluşturulması gerekir:
- Önemli, sürekli değişen verilere kısıtlı ve sınırlı erişim
- İnsanlar, süreç ve teknoloji arasındaki sürtüşmeler
- Kritik öneme sahip veriler için veri hatları ve süreçler oluşturmak amacıyla uzun bekleme süreleri.
- İçgörüleri rahatça analiz etmek ve paylaşmak için ihtiyacınız olan araçları kullanma özgürlüğü yoktur
- Veri paylaşmak ve üzerinde işbirliği yapmak için uygun bir temelin olmaması
- Tüm analitik senaryolar için yaygın ve açık veri biçimleri yoktur: BI, AI, Tümleştirme, Mühendislik ve hatta Uygulamalar
Dokuda Yansıtma, içgörüler ve kararlar için değer elde etme süresini hızlandırmak ve teknoloji çözümleri arasındaki veri silolarını bölmek için kolay bir deneyim sağlar:
- BI ve AI için yerleşik analiz ile verileri ve meta verileri SaaS veri gölüne neredeyse gerçek zamanlı çoğaltma
Microsoft Fabric platformu, basitliği ve tümleştirmeyi yepyeni bir düzeye taşıyan Hizmet Olarak Yazılım (SaaS) temeli üzerine kurulmuştur. Microsoft Fabric hakkında daha fazla bilgi edinmek için bkz. Microsoft Fabric nedir?
Yansıtma, Doku çalışma alanınızda şu öğeleri oluşturur:
- Yansıtma, verilerin ve meta verilerin OneLake'e çoğaltılması ve Parquet'e dönüştürülmesi için analize hazır bir biçimde yönetilir. Bu, veri mühendisliği, veri bilimi ve daha fazlası gibi aşağı akış senaryolarına olanak tanır.
- SQL analiz uç noktası
SQL sorgu düzenleyicisine ek olarak, SQL Server Management Studio (SSMS), Visual Studio Code ile mssql uzantısı ve hatta GitHub Copilotdahil olmak üzere geniş bir araç ekosistemi vardır.
Paylaşım , hassas bilgilere erişimi denetleyebileceğinizden emin olmak için erişim denetimi ve yönetim kolaylığı sağlar. Paylaşım, kuruluşunuz genelinde güvenli ve demokratik bir karar alma olanağı da sağlar.
Yansıtma türleri
Doku, yansıtma aracılığıyla Verileri OneLake'e getirme konusunda üç farklı yaklaşım sunar.
- Veritabanı yansıtma – Microsoft Fabric'teki veritabanı yansıtma, tüm veritabanlarının ve tabloların çoğaltılmasına olanak sağlayarak çeşitli sistemlerdeki verileri tek bir analiz platformunda bir araya getirmenizi sağlar.
- Meta veri yansıtma – Dokudaki meta veri yansıtma, verileri fiziksel olarak taşımak yerine meta verileri (katalog adları, şemalar ve tablolar gibi) eşitler. Bu yaklaşım kısayollardan yararlanarak verilerin kaynağında kalmasını sağlarken Doku'da kolayca erişilebilir olmasını sağlar.
- Açık yansıtma – Dokuda açık yansıtma, açık Delta Lake tablo biçimine göre yansıtmayı genişletmek için tasarlanmıştır. Bu özellik, tüm geliştiricilerin açık yansıtma yaklaşımına ve genel API'lere bağlı olarak, uygulama değişiklik verilerini doğrudan Microsoft Fabric'teki yansıtılmış bir veritabanı öğesine yazmasına olanak tanır.
Şu anda aşağıdaki dış veritabanları kullanılabilir:
Veritabanı yansıtmasının neredeyse gerçek zamanlı çoğaltması nasıl çalışır?
Yansıtma, işletimsel veri kaynağınıza güvenli bir bağlantı oluşturularak etkinleştirilir. Veritabanının tamamının mı yoksa tek tek tabloların mı çoğaltılacağını seçersiniz ve Yansıtma otomatik olarak verilerinizi eşitlenmiş durumda tutar. Kurulumdan sonra veriler analiz tüketimi için sürekli olarak OneLake'e çoğaltılır.
Yansıtmanın temel tenetleri şunlardır:
Dokuda Yansıtma'yı etkinleştirmek, karmaşık ETL işlem hatları oluşturmaya, diğer işlem kaynaklarını ayırmaya ve veri taşımayı yönetmeye gerek kalmadan basit ve sezgiseldir.
Fabric'te yansıtma tam olarak yönetilen bir hizmettir, bu nedenle yansıtılmış bağlantının çoğaltılması için barındırma, bakım veya yönetme konusunda endişelenmeniz gerekmez.
Meta veri yansıtma nasıl çalışır?
Yansıtma yalnızca veri çoğaltmayı etkinleştirmekle kalmaz, aynı zamanda tam veri çoğaltması yerine kısayollar veya meta veri yansıtma yoluyla da elde edilebilir ve verilerin fiziksel olarak taşınmadan veya çoğaltılmadan kullanılabilir olmasını sağlar. Bu bağlamda yansıtma, gerçek verilerin kendisi yerine yalnızca katalog adları, şemalar ve tablolar gibi meta verilerin çoğaltılması anlamına gelir. Bu yaklaşım, Doku'ya farklı kaynaklardan gelen verileri yinelemeden erişilebilir hale getirerek veri yönetimini basitleştirir ve depolama gereksinimlerini en aza indirir.
Örneğin, Unity Kataloğu'nda kayıtlı verilere erişirken Doku, Azure Databricks'ten yalnızca katalog yapısını yansıtır ve temel alınan verilere kısayollar aracılığıyla erişilmesine olanak tanır. Bu yöntem, kaynak verilerdeki değişikliklerin veri taşımaya gerek kalmadan Doku'ya anında yansıtılmasını, gerçek zamanlı eşitlemenin korunmasını ve up-totarih bilgilerine erişimde verimliliğin artırılmasını sağlar.
Açık yansıtma nasıl çalışır?
Veri kaynağınıza güvenli bir bağlantı oluşturarak veri çoğaltmayı yansıtmaya ek olarak, mevcut bir veri sağlayıcısını seçebilir veya verileri yansıtılmış veritabanına getirmek için kendi uygulamanızı yazabilirsiniz. Genel API aracılığıyla veya Doku portalı aracılığıyla açık yansıtılmış bir veritabanı oluşturduktan sonra, OneLake'te açık yansıtma belirtimi başına değişiklik verilerini alabildiğiniz bir giriş bölgesi URL'si elde edebilirsiniz.
Veriler düzgün biçimde giriş bölgesine ulaştığında çoğaltma çalışmaya başlar ve değişiklikleri değişiklik tablolarına yansıtılacak şekilde güncelleştirmeler, ekleme ve silme ile birleştirme karmaşıklığını yönetir. Bu yöntem giriş bölgesine yazılan tüm verilerin hemen olmasını ve verilerin Doku up-to-date olarak tutulmasını sağlar.
Paylaşım
Paylaşım erişim denetimi ve yönetim kolaylığı sağlarken Satır düzeyi güvenlik (RLS) ve Nesne düzeyi güvenlik (OLS) gibi güvenlik denetimleri ve daha fazlası hassas bilgilere erişimi denetleyebileceğinizden emin olur. Paylaşım, kuruluşunuz genelinde güvenli ve demokratik bir karar alma olanağı da sağlar.
Paylaşım sayesinde kullanıcılar, diğer kullanıcılara veya bir grup kullanıcıya çalışma alanına ve diğer öğelerine erişim vermeden yansıtılmış veritabanına erişim izni verir. Birisi yansıtılmış bir veritabanını paylaştığında, SQL analiz uç noktasına erişim de verir.
Daha fazla bilgi için bkz. Yansıtılmış veritabanınızı paylaşma ve izinleri yönetme.
Veritabanları arası sorgular
Yansıtılmış veritabanınızdaki veriler OneLake'de depolandığında, tek bir T-SQL sorgusunda yansıtılmış veritabanlarından, ambarlardan ve Lakehouses'un SQL analiz uç noktalarındaki verileri birleştirerek veritabanları arası sorgular yazabilirsiniz. Daha fazla bilgi için bkz. Veritabanları arası sorgu yazma.
Örneğin, üç bölümlü adlandırma kullanarak yansıtılmış veritabanlarından ve ambarlardan tabloya başvurabilirsiniz. Aşağıdaki örnekte, ambarda ContosoSalesTablebaşvurmak ContosoWarehouse için üç parçalı adı kullanın. Diğer veritabanlarından veya ambarlardan, standart SQL üç bölümlü adlandırma kuralının ilk bölümü yansıtılmış veritabanının adıdır.
SELECT *
FROM ContosoWarehouse.dbo.ContosoSalesTable AS Contoso
INNER JOIN Affiliation
ON Affiliation.AffiliationId = Contoso.RecordTypeID;
Yansıtma maliyeti
Veritabanı yansıtma ve açık yansıtma için Doku işlem ve OneLake depolama alanı kapasite tabanlı sınıra kadar serbesttir.
- Çoğaltmalar için depolama, kapasite boyutuna göre bir sınıra kadar serbesttir. Yansıtma, satın aldığınız her kapasite birimi (CU) için ücretsiz bir terabayt yansıtma depolama alanı sunar. Örneğin, bir F64 kapasitesi satın alırsanız, yalnızca yansıtma için kullanılan 64 terabaytlık ücretsiz depolama alanı elde edersiniz. OneLake depolama alanı, ücretsiz Yansıtma depolama sınırı aşılırsa veya kapasite duraklatıldığında faturalandırılır. Daha fazla bilgi için bkz. Microsoft Fabric Fiyatlandırması.
- Verilerinizi Fabric OneLake'e çoğaltmak için kullanılan Background Fabric işlemi ücretsizdir ve kapasite kullanmaz. Yansıtılmış veri tüketimi için doğrudan OneLake'e istekler normal OneLake işlem tüketimi olarak kapasite tüketir. SQL, Power BI veya Spark kullanarak verileri sorgulama işlemi normal fiyatlarla ücretlendirilir.
- Çalışan doku kapasitesi yalnızca Yansıtma'nın ilk kurulumu için gereklidir.
Yansıtılmış veritabanı verilerinizle Veri Mühendisliği
Microsoft Fabric, verilerinizin kolayca erişilebilir, iyi düzenlenmiş ve yüksek kaliteli olmasını sağlamak için çeşitli veri mühendisliği özellikleri sağlar. Doku Veri Mühendisliği'nden şunları yapabilirsiniz:
- Lakehouse kullanarak verilerinizi Spark olarak oluşturma ve yönetme
- Lakehouse'unuza veri kopyalamak için işlem hatları tasarlama
- Spark kümesine toplu iş/akış işi göndermek için Spark iş tanımlarını kullanma
- Veri alımı, hazırlama ve dönüştürme için kod yazmak için not defterlerini kullanma
Yansıtılmış veritabanı verilerinizle Veri Bilimi
Microsoft Fabric, veri zenginleştirme ve iş içgörüleri amacıyla kullanıcıların uçtan uca veri bilimi iş akışlarını tamamlamasını sağlamak için Doku Veri Bilimi sunar. Veri bilimi sürecinin tamamında veri keşfetme, hazırlama ve temizlemeden denemelere, modellemeye, model puanlama ve tahmine dayalı içgörülerin BI raporlarına sunulmasına kadar çok çeşitli etkinlikleri tamamlayabilirsiniz.
Microsoft Fabric kullanıcıları Veri Bilimi iş yüklerine erişebilir. Buradan, çeşitli ilgili kaynakları bulabilir ve bunlara erişebilirler. Örneğin makine öğrenmesi Denemeleri, Modeller ve Not Defterleri oluşturabilirler. Ayrıca Veri Bilimi Giriş sayfasında mevcut Not Defterlerini içeri aktarabilir.
Yansıtılmış veritabanı verilerinizle Direct Lake
Direct Lake modu, veri taşımaya veya yinelemeye gerek kalmadan yansıtılmış veriler üzerinde yüksek performanslı sorgulamayı etkinleştirmek için Microsoft Fabric'teki yansıtılmış veritabanlarıyla kullanılabilir. Yansıtılmış veritabanı oluşturulduğunda, verileri OneLake içinde Delta Lake biçiminde depolanır. Bu yerel biçim, Power BI ve diğer analiz araçlarının Direct Lake modu üzerinden bağlanmasına olanak tanır ve temel dosyalara doğrudan erişerek neredeyse gerçek zamanlı içgörüler sunar. Bu tümleştirme, yansıtmanın basitliğini Direct Lake'in hızı ve ölçeklenebilirliğiyle birleştirerek operasyonel veriler üzerinde hızlı, up-toup-totarih raporlamaya olanak tanır.
Yansıtılmış veriler için bekletme
Dokuda Yansıtma, var olan veri varlığınızı Sürekli Olarak Delta Lake tablo biçiminde OneLake'e çoğaltır. Yansıtılan verilerin verimli bir şekilde depolanmasını ve analiz için her zaman hazır olmasını sağlamak için yansıtma işlemi otomatik olarak vakum çalıştırarak delta günlüğü tarafından başvurulan eski dosyaları kaldırır.
Bekletme ayarını gereksinimlerinize göre özelleştirebilirsiniz. Örneğin yansıtma depolama tüketimini azaltmak için daha kısa bir saklama süresi seçebilir veya Delta'nın analiz için zaman yolculuğu özelliklerini kullanmak üzere saklama süresini uzatabilirsiniz.
Haziran 2025 ortasından sonra Doku portalından oluşturulan yansıtılmış veritabanları için varsayılan saklama bir gündür. Eski yansıtılmış veritabanları için varsayılan değer yedi gündür. Bekletme ayarını denetlemek veya güncelleştirmek için Doku portalında yansıtılmış veritabanınıza gidin ->Ayarlar ->Bakım sekmesine gidin ve bekletme eşiğini belirtin. Özelliğini belirterek retentionInDays aracılığıyla da yapılandırabilirsiniz.
Fabric'de SQL veritabanı
Ayrıca, Fabric portalının içindeki Microsoft Fabric'te doğrudan SQL veritabanı oluşturabilir ve yönetebilirsiniz. Azure SQL Veritabanı'na bağlı olarak, Doku'daki SQL veritabanı analiz amacıyla otomatik olarak yansıtılır ve Fabric'te işlemsel veritabanınızı kolayca oluşturmanıza olanak tanır. SQL veritabanı, OLTP iş yükleri için Doku'nun giriş sayfasıdır ve Fabric'in kaynak denetimi tümleştirmesiyle tümleşebilir.