Azure Data Factory ile Fabric Data Factory arasındaki farklar

Microsoft Fabric içindeki Data Factory (Fabric Data Factory), Azure Data Factory'nin yeni neslidir. OneLake'i birleşik depolama katmanı olarak kullanarak Fabric Data Factory, altyapı karmaşıklığını ve veri hareketini azaltır. İşlem hatları , OneLake kısayolları ve kiracılar arası paylaşım aracılığıyla doğrudan canlı verilerle çalışabilir.

Bu makalede her iki hizmetin temel özellikleri, etkinlikleri, bağlayıcıları ve altyapı bileşenleri karşılaştırılarak incelenmektedir. Geçişi planlamak için bkz. geçiş planlama kılavuzu.

Özellikleri yan yana karşılaştırma

Temel özelliklerin Azure Data Factory ile Fabric Data Factory arasında nasıl yığılmış olduğu aşağıda açıklanmaktadır. Tabloda nelerin değiştiği, nelerin yeni olduğu ve nelerin aynı kaldığı vurgulanır.

Azure Data Factory Fabric içinde Data Factory Farklı olan şeyler
Boru hattı Boru hattı Daha iyi tümleştirme: Fabric'teki işlem hatları, Lakehouse, Veri Ambarı ve diğer Fabric hizmetleriyle sorunsuz bir şekilde çalışır. Bağlantı hatları daha fazla SaaS tabanlı etkinlik içerir ve JSON tanımlarında farklılıklar gösterir. Daha fazla ayrıntı için işlem hattı özellik karşılaştırmamıza bakın.
Veri akışını haritalama Dataflow Gen 2 Kullanımı daha kolay: Veri Akışı 2. Nesil, dönüştürmeler oluşturmak için size daha basit bir deneyim sunar. 2. Nesil'e her zaman daha fazla eşleme veri akışı özelliği ekliyoruz.
Aktiviteler Aktiviteler Daha fazla etkinlik geliyor: Sık kullandığınız tüm ADF etkinliklerini Fabric'e getirmek için çalışıyoruz. Ayrıca, ADF'de bulunmayan Office 365 Outlook etkinliği gibi yenilerini de alırsınız. Ayrıntılar için etkinlik karşılaştırmamıza bakın.
Veri kümesi Yalnızca bağlantılar Daha basit bir yaklaşım: Artık karmaşık veri kümesi yapılandırmaları yok. Fabric'teki Data Factory'de, veri kaynaklarınıza bağlanmak ve çalışmaya başlamak için bağlantıları kullanırsınız. Fabric, etkinlikler içinde satır içi olarak veri özelliklerini tanımlayarak veri kümelerini ortadan kaldırır.
Bağlı Hizmet Bağlantılar Daha sezgisel: Bağlantılar bağlı hizmetler gibi çalışır ancak kurulumu ve yönetimi daha kolaydır.
Tetikleyiciler Zamanlama ve dosya olayı tetikleyicileri Yerleşik zamanlama: İşlem hatlarınızı otomatik olarak çalıştırmak için Fabric'in zamanlayıcısını ve Reflex olaylarını kullanın. Dosya olayı tetikleyicileri, ek kurulum olmadan Fabric'de yerel olarak çalışır. Fabric, ADF'nin tek başına tetikleyicilerinden farklı olarak tetikleyicileri Activator çerçevesiyle entegre eder.
Yayımlama Kaydet ve Çalıştır Yayımlama adımı yok: Doku'da yayımlama adımını tamamen atlayın. Çalışmanızı depolamak için Kaydet'i veya işlem hattınızı hemen kaydedip yürütmek için Çalıştır'ı seçmeniz gerekir.
Otomatik çözümleme ve Azure Tümleştirme çalışma zamanı Gerekli değil Basitleştirilmiş mimari: Tümleştirme çalışma zamanlarını yönetmeye gerek yoktur. Fabric, hesaplama görevlerini sizin için yerine getirir.
Kendi kendine barındırılan tümleştirme çalışma zamanları Şirket içi Veri Ağ Geçidi Aynı şirket içi erişim: Tanıdık Şirket İçi Veri Ağ Geçidi'ni kullanarak şirket içi verilerinize bağlanın. Şirket içi veri erişim kılavuzumuzdan daha fazla bilgi edinin.
Azure-SSIS tümleştirme çalışma zamanları Belirlenecek Fabric'de Gelecekteki Yetenekler: Fabric'de SSIS tümleştirmesi tasarımı üzerinde çalışmaya devam ediyoruz.
Yönetilen sanal ağlar ve özel uç noktalar Belirlenecek. Doku'da gelecekteki yetenek: Doku'da yönetilen sanal ağlar ve özel uç noktalar için tümleştirme üzerinde çalışmaya devam ediyoruz.
İfade dili İfade dili Aynı ifadeler: Mevcut ifadeniz doğrudan bilgi aktarımını sağlar. Söz dizimi neredeyse aynıdır.
Kimlik doğrulama türleri Kimlik doğrulama türleri Diğer seçenekler: Tüm popüler ADF kimlik doğrulama yöntemleriniz Doku'da çalışır ve yeni kimlik doğrulama türleri ekledik.
CI/CD CI/CD ADF'nin ötesindeki gelişmiş özellikler arasında kolay seçim yapma, bireysel öğenin terfi ettirilmesi, Git deposunun etkinleştirilmesi ve entegre SaaS CI/CD seçenekleri bulunur.
ARM şablonu dışarı/içeri aktarma Farklı kaydet Hızlı çoğaltma: Fabric'de, geliştirme veya test amacıyla işlem hatlarını hızlıca çoğaltmak için "Farklı Kaydet"i kullanın.
İzleme İzleme merkezi + Çalışma geçmişi Gelişmiş izleme: İzleme merkezi, çalışma alanları arası içgörüler ve daha iyi detaya gitme özellikleriyle modern bir deneyim sunar.
Hata ayıklama Etkileşimli mod Basitleştirilmiş hata ayıklama: Doku, ADF'nin hata ayıklama modunu ortadan kaldırır. Her zaman etkileşimli moddasınız.
Veri Değişim Yakalama (CDC) Kopya işleri Artımlı veri taşıma: Fabric, CDC parçaları yerine kopya görevleri aracılığıyla artımlı veri taşımayı yönetir.
Azure Synapse Link Yansıtma Veri çoğaltma: Fabric, Azure Synapse Link'in yerini veri replikasyonu için yansıtma özellikleriyle değiştirir.
İşlem hattı etkinliğini yürütme İşlem hattı etkinliğini çağırma Platformlar arası çağırma: Doku, platformlar arası çağırma ile ADF'nin İşlem hattı yürütme etkinliğini geliştirir.

Boru hattı özellik karşılaştırması

Kategori ADF İşlem Hatları Doku İşlem Hatları
Hizmet türü Veri Tümleştirme PaaS Hizmeti Veri Tümleştirme SaaS Hizmeti
Yazılım Geliştirme Ortamı Azure portalı (ADF Studio) Yapı / PBI çalışma alanı (Göl Evleri, Depolar vb. ile birleştirilmiş kullanıcı deneyimi)
İşlem Hattı Düzenleme Etkinlikler, tetikleyiciler, parametreler içeren tam özellikli işlem hatları Aynı düzenleme modeli, Fabric UX için yeniden tasarlandı.
Veri Taşıma Kopyalama etkinliği, eşleme veri akışları, şirket içi IR desteği, Yönetilen sanal ağ Kopyalama etkinliği, Veri Akışları Gen2, OneLake ve Fabric öğelerine yerleşik bağlanabilirlik, kopyalama yapmadan canlı veri erişimi sağlayan OneLake kısayolları, Şirket İçi Veri Geçidi, sanal ağ geçidi
Hesaplama / IR Kendi kendine barındırılan, SSIS ve Azure IR (hareket + dönüşüm için) Bulut bağlantıları, Şirket içi ve sanal ağ geçidi
Veri Akışları Azure Blob, Data Lake Storage, SQL, 100'den fazla bağlayıcı Aynı bağlayıcılar + yerel OneLake tümleştirmesi, daha sıkı Fabric çalışma alanı entegrasyonu
İzleme ADF Studio'da işlem hatları ve veri akışları; çalıştırmalar, tetikleyiciler ve uyarılar ile birlikte İşlem Hatları, Veri Akışları, Not Defterleri, Veritabanları vb. genelinde birleşik görünümlerle İzleme Merkezi ve Çalışma Alanı İzleme.
Tetikleyiciler Programlar, dönüşümlü pencere, olay tabanlı tetikleyiciler Zamanlamalar, olay tetikleyicileri ve tumbling window tetikleyicileri aralık zamanlamaları şeklinde. OneLake kısayolları ve kiracılar arasında paylaşımı yoluyla canlı veri kullanan işlem hatları, tüm Fabric tetikleyici türleriyle sorunsuz çalışır.
CI/CD ARM şablonları + Azure DevOps veya GitHub deposu tümleştirmesi Fabric’de yerleşik dağıtım işlem hatları; çalışma alanı düzeyinde terfi (Geliştirme → Test → Üretim) ve dış depo entegrasyonu
Security Yönetilen kimlikler, Key Vault tümleştirmesi, özel uç noktalar Aynı güvenlik modeli artı Fabric çalışma alanı Rol Tabanlı Erişim Kontrolü (RBAC); OneLake güvenlik entegrasyonu
Veri paylaşımı ve idare Mevcut Değil OneLake kısayolları aracılığıyla kiracılar arası veri paylaşımı, verilerin kopyalanmasına gerek kalmadan kurumsal sınırlar arasında yönetilen ve anlık veri erişimi sağlar.
Pricing Azure kullanımına dayalı Kullandıkça Öde (aktivite çalıştırması, veri taşıma ve işlem) Kapasite tabanlı (Fabric F SKU) yapıda dış veya işlem hattı etkinlikleri için ücret alınmaz, yalnızca etkinlik çalıştırmaları ve işlem hattı veri transferi ücrete tabidir.

Etkinlik karşılaştırması

Microsoft Fabric'teki Data Factory ile Azure Data Factory ile yüksek düzeyde süreklilik sağlamaya devam ediyoruz. ADF'de erişilebilen aktivitelerin yaklaşık %90'ı, Fabric'deki Data Factory başlığı altında zaten kullanılabilir. ADF ve Data Factory in Fabric'teki etkinliklerin ve kullanılabilirliklerinin dökümü aşağıdadır:

Etkinlik ADF Fabric içinde Data Factory
ADX/KQL Y Y
Değişken Ekle Y Y
Özel (Azure Fabric'teki Batch) Y Y
Azure Databricks Not defteri etkinliğiJar etkinliğiPython etkinliğiİş etkinliği Azure Databricks etkinliği
Azure Machine Learning Y Y
Azure Machine Learning Toplu Yürütme Deprecated Mevcut Değil
Azure Machine Learning Güncelleştirme Kaynağı Deprecated Mevcut Değil
Kopyala Verileri kopyalama Kopyalama etkinliği
Dataflow Gen 2 Mevcut Değil Y
Delete Y Y
İşlem Hattını Çalıştırma/Çağırma İşlem hattını yürütme İşlem hattını çağırma
Kumaş Not Defterleri Mevcut Değil Y
Hata Y Y
Filter Y Y
Her Biri İçin Y Y
Functions Azure Function İşlev etkinliği
Meta Verileri Al Y Y
HDInsight Hive etkinliğiPig etkinliğiMapReduce etkinliğiSpark etkinliğiStreaming etkinliği HDInsight etkinliği
If koşulu Y Y
Arama Listesi Y Y
Veri Akışı Haritalama Y Veri Akışı 2. Nesil
Office 365 Outlook Mevcut Değil Y
Power Query (yalnızca ADF - Veri Akışını Düzenleme) Deprecated Mevcut Değil
Senaryo Y Y
Anlamsal model yenileme Mevcut Değil Y
Değişken Ayarla Y Y
Sproc Y Y
Microsoft SQL Server Entegrasyon Hizmetleri (SSIS) Y Mevcut Değil
Saklı prosedür Y Y
Şalter Y Y
Synapse Notebook ve SJD etkinlikleri Y Mevcut Değil
Takımlar Mevcut Değil Y
Kadar Y Y
Validation Y Meta verileri alma ve If Koşulu
Wait Y Y
İnternet Y Y
Webhook Y Y
Veri Akışını Yönetme Y Veri Akışı 2. Nesil

Fabric Data Factory'deki yeni etkinlikler

Fabric içindeki Data Factory, etkinlik sürekliliğini koruyarak daha zengin orkestrasyon ihtiyaçlarınızı karşılamak için bazı yeni etkinlikler de sunar. Bu yeni etkinlikler şunlardır:

  1. Outlook: Outlook hizmetleriyle tümleştirmeyi kolaylaştırmak için Fabric Data Factory'de kullanılabilir.
  2. Teams: Microsoft Teams etkinliklerinin düzenlenebilmesi için Fabric Data Factory'de kullanılabilir.
  3. Anlamsal model yenileme: Power BI anlam modeli yenileme özelliklerini geliştirmek için Doku Data Factory'de kullanılabilir.
  4. Dataflow Gen2: Gelişmiş veri akışı yetenekleriyle veri orkestrasyonunu güçlendirmek için Fabric Data Factory'de kullanılabilir.

Tüm mevcut Fabric Data Factory aktivitelerinin listesi için bkz. Etkinliklere Genel Bakış.

Bağlayıcı karşılaştırması

Azure Data Factory ve Fabric Data Factory'deki tüm bağlayıcıların ve kullanılabilirliklerinin karşılaştırması için Bağlayıcı karşılaştırma makalesine bakın.

Kendi Kendine Barındırılan Entegrasyon Çalışma Zamanı (SHIR) ile Yerel Veri Ağ Geçidi (OPDG) Karşılaştırması

Uyarı

SHIR ve ODPG tarafından desteklenen hizmetler farklıdır:

  • Yerel Integration Runtime (SHIR): Azure Data Factory, Azure Synapse Analytics, Azure Machine Learning Studio ve Azure Purview'u destekler.
  • Şirket içi Veri Ağ Geçidi (OPDG): Power BI, Power Apps, Power Automate, Azure Analysis Services, Logic Apps, Fabric Dataflow Gen2, Fabric Pipeline, Fabric Copy Job ve Fabric Mirroring'i destekler.
Kategori Yerel Olarak Barındırılan Tümleştirme Çalışma Zamanı (SHIR) Şirket içi Veri Ağ Geçidi (OPDG)
Desteklenen Hizmetler - Azure Data Factory
- Azure Machine Learning Stüdyosu
- Azure Synapse Analytics
- Purview Azure
- Power BI
- Power Apps
Power Automate - Microsoft'un iş süreçlerini otomatikleştiren çözümü
- Azure Analysis Services
- Logic Apps
- Çerçeve Veri Akış Yönetimi 2. Nesil
- Doku İşlem Hattı
- Doku Kopyalama İşi
- Doku Yansıtma
Yükleme ve Kayıt - Anahtar ile kaydedildi
- Hizmet modunda çalışır
- Microsoft Entra Id hesabına kayıtlı
- Kullanıcı modunu destekler
Platform -Windows
- Kapsayıcı imajı desteklenir
- Yalnızca Windows
- Kapsayıcı desteği yok
Proxy Desteği - Hem sistem hem de özel proxy desteği - Özel ara sunucuyu destekleme
Bölge Bağlama - Data Factory bölgesi olarak ayarlandı
- Varsayılan bölge değiştiremiyorum
- Bölge değiştirilebilir
Özel Röle - Desteklenmiyor -Destekli; müşteriler kendi geçişlerini getirebilir
Hizmetler Arasında Paylaşım - En fazla 120 Veri Fabrikası ile paylaşıldı
- ADF, Synapse, Purview veya Synapse çalışma alanlarında paylaşılamaz
- Kiracı içinde desteklenen tüm hizmetler için kullanılabilir
Yüksek Kullanılabilirlik (HA) - En fazla 8 düğüm (4 varsayılan) - En fazla 10 düğüm
Recovery - Yeniden yükleme gerektirir - Kurtarma anahtarı desteklenir
Yük Dengeleme - Kullanılabilir çalışan sayısına göre görev düzeyinde yük dengeleme (CPU + bellek) - Sorgu düzeyinde yük dengeleme
- Sıralı veya Rastgele dağıtım seçenekleri
Kimlik Bilgisi Deposu - SHIR düğümlerinde yerel olarak depolanır
- Azure Key Vault desteklenir
- Ağ geçidi bulut hizmetinde merkezi olarak depolanır
- Key Vault tümleştirmesi yok
Otomatik güncelleştirme -Destekleniyor - Desteklenmiyor
Bağlayıcı Genişletilebilirliği - Desteklenmiyor -Destekleniyor
Etkileşimli Yazma -Destekleniyor -Destekleniyor
Denetim Akışı için Özel Bağlantı -Destekleniyor - Desteklenmiyor
Versiyonlama - Ayda iki sürüm; biri otomatik güncelleme olarak yayımlandı
- Son 12 aylık sürümleri destekler
- Ayda bir yazılım sürümü
- Son 6 sürümü destekler
CPU ve Bellek Azaltma - Desteklenmiyor -Destekleniyor
Aktarım Hızı Sınırları - Sabit sınır yok; ağ bant genişliğine bağımlı Hizmete özgü sınırlar:
Power Apps / Power Automate / Logic Apps:
- Yaz: 2 MB yük sınırı
- Okuma: 2 MB istek sınırı, 8 MB sıkıştırılmış yanıt sınırı
- GET isteği URL sınırı: 2.048 karakter
Power BI Direct Query: 16 MB sıkıştırılmamış yanıt sınırı

ADF Yönetilen Sanal Ağ ve Fabric Sanal Ağ Veri Ağ Geçidi Karşılaştırması

Azure Data Factory (ADF) Yönetilen Sanal Ağı ve Microsoft Fabric Sanal Ağ (sanal ağ) Veri Ağ Geçidi, veri kaynaklarına genel İnternet'e sunmadan güvenli bir şekilde bağlanmanıza yardımcı olur. Her iki seçenek de bulut iş yükleri için özel bağlantıyı desteklese de, bunların nasıl ayarlandıklarından, bunları kimin yönettiğine ve hangi hizmetleri desteklediğine göre farklılık gösterir.

  • ADF Yönetilen VNET
    Microsoft, ağ ortamına sahip olur ve onu yönetir. Basit bir kurulum elde edersiniz, ancak ağ ayarlarını veya güvenlik duvarı kurallarını denetleyemezsiniz.

  • Fabric VNET Veri Ağ Geçidi
    Ağ geçidini kendi Azure sanal ağınıza dağıtırsınız. Bu, ağ, güvenlik duvarı ve ölçeklendirme üzerinde tam denetim sağlar. Ağ geçidinin kaynaklarınıza nasıl bağlaneceğine ve tüm ağ ayarlarını nasıl yöneteceğine siz karar verirsiniz.

Aşağıdaki tabloyu kullanarak ana farklılıkları karşılaştırın ve iş yükünüz ile idare gereksinimlerinize uygun seçeneği belirleyin.

Kategori ADF Yönetilen Sanal Ağ Yapı Sanal Ağ Veri Ağ Geçidi
Desteklenen Hizmetler Azure Data Factory ve Synapse işlem hatları. Microsoft Fabric Veri Akışı 2. Nesil, Fabric veri hatları, Fabric Kopyalama Görevi, Fabric Yansıtma İşlemi, Power BI semantik modeller ve Power BI sayfalandırılmış raporlar
VNET Sahipliği Microsoft tarafından yönetilen sanal ağ (müşteri ağı denetlemez). Müşteri tarafından yönetilen sanal ağ (müşteri tam denetime sahiptir).
Özel Uç Noktaları Desteklenen hizmetler (Azure Depolama, SQL DB vb.) için ADF tarafından otomatik olarak oluşturulmuş ve yönetilmektedir. Müşteriler, Doku iş yüklerini sanal ağlarındaki kaynaklara bağlamak için sanal ağ geçidini yapılandırıyor.
Ağ Denetimi Sınırlı - müşteriler yalnızca özel uç noktalara sanal ağ tümleştirme çalışma zamanı izin verebilir. Tam denetim - müşteri kendi sanal ağında güvenlik duvarını, NSG kurallarını, yönlendirmeyi yapılandırıyor.
Yükleme / Dağıtım Yükleme gerekmez; gizli bir sanal ağ içinde Microsoft tarafından tam olarak yönetilir. Müşterinin sanal ağına sanal ağ Data Gateway dağıtımı gerektirir.
Yüksek Kullanılabilirlik Microsoft tarafından yönetilen, ADF'nin sanal ağında otomatik olarak ölçeklendirilen. TTL'yi etkinleştirirken yedek moda geçin. Ölçeklendirmeyi ve HA'yi (düğüm tabanlı kümeler) destekler, ancak müşteri tarafından yönetilen sanal ağ içinde çalışır. En fazla 7 düğümü destekleyin.

Fabric Data Factory özellikleri

Fabric Data Factory, işlem hatlarını, veri akışlarını ve diğer Data Factory öğelerini oluşturmanıza ve yönetmenize yardımcı olmak için doğal dil kullanan Data Factory için Copilot içerir.

Native Lakehouse ve Veri Ambarı entegrasyonu

Fabric Data Factory'nin en büyük avantajlarından biri, veri platformlarınızla nasıl bağlantı kurduğudur. Lakehouse ve Veri Ambarı, işlem hatlarınızda hem kaynak hem de hedef olarak çalışarak tümleşik veri projeleri oluşturmayı kolaylaştırır. İşlem hatları, OneLake kısayollarıyla desteklenen lakehouse tablolarında da çalışabilir, bu sayede dış kaynaklardan ( kiracılar arası paylaşımlar dahil) verileri çalışma alanınıza kopyalamadan dönüştürmenize ve orkestrasyon yapmanıza olanak sağlar.

Lakehouse ve veri ambarı kaynak sekmesini gösteren bir ekran görüntüsü.

Lakehouse ve veri ambarı sekmesini gösteren ekran görüntüsü.

Office 365 ile e-posta bildirimleri

Office 365 Outlook etkinliği işlem hattı çalıştırmaları, etkinlik durumu ve sonuçlar hakkında özelleştirilmiş e-posta bildirimleri gönderir.

Office 365 Outlook etkinliğini gösteren ekran görüntüsü.

Kolaylaştırılmış veri bağlantısı deneyimi

Fabric Veri al deneyimi, kopyalama işlem hatları ve yeni bağlantılar için kılavuzlu bir kurulum sağlar.

Modern ve kolay bir Veri Al deneyimini gösteren ekran görüntüsü.

Yeni bağlantı oluşturmayı gösteren ekran görüntüsü.

CI/CD deneyimi

Fabric, CI/CD’yi ARM şablonlarından ayırır; böylece içeri alma, dışarı alma, doğrulama ve iş birliği için çalışma alanındaki öğeleri tek tek seçebilirsiniz. dış Git deposu tümleştirmesine ek olarak, Fabric dış depo gerektirmeyen yerleşik dağıtım işlem hatları sunar.

İzleme merkezi ve etkinlik içgörüleri

Fabric Data Factory izleme merkezi, tüm iş yüklerinde çalışma alanları arasında görünürlük sağlar ve ayrı ayrı etkinlik çalıştırmalarının ayrıntılarına inme olanağı sunar.

İzleme hub'ını ve Data Factory öğelerini gösteren ekran görüntüsü.

Kopyalama etkinlikleri için, her aşamanın ne kadar sürdüğünü gösteren bir süre dökümünü görüntülemek için çalıştırma ayrıntıları düğmesini (gözlük simgesi) seçin.

İşlem hattı kopyalama izleme sonuçlarını gösteren ekran görüntüsü, kopyalama etkinliğinin döküm ayrıntılarını sağlar.

Veri kopyalama ayrıntılarını gösteren ekran görüntüsü.

Hızlı işlem hattı yinelemesi

Mevcut işlem hatlarından herhangi birini kopyalamak için Farklı Kaydet özelliğini kullanın. Geliştirme kopyaları oluşturmak, varyasyonları test etmek veya benzer iş akışları ayarlamak için bu kopyayı kullanın.

Fabric işlem hattında

Uyarı

Fabric'de Data Factory için geliştirilen yeni özellikler Azure Data Factory veya Azure Synapse işlem hatlarına geri aktarılamaz. İki platform ayrı yol haritaları tutar. Ürün ekipleri, topluluk geri bildirimlerine göre geri aktarma isteklerini değerlendirir.

Daha fazla bilgi için aşağıdaki kaynaklara bakın: