Aracılığıyla paylaş


Apache Airflow Görevi nedir?

Not

Apache Airflow işi Apache Airflow tarafından desteklenir.

Apache Airflow görevi, Azure Data Factory'nin İş Akışı Yönetim Yöneticisi'nin yeni neslidir. Apache Airflow düzenleme işleri oluşturmanın ve yönetmenin basit ve verimli bir yoludur ve Directed Acyclic Graphs'i (DAG) büyük ölçekte kolayca çalıştırmanızı sağlar. Fabric'in Data Factory'sinin, veritabanları, veri ambarları, Lakehouse, gerçek zamanlı veriler ve daha fazlasını içeren zengin bir veri kaynağı kümesinden veri almak, hazırlamak ve dönüştürmek için modern bir veri entegrasyonu deneyimi sunan bölümüdür.

Apache Airflow görevi ne zaman kullanılır?

Apache Airflow işleri, kullanıcıların temel altyapı konusunda endişelenmeden iş akışı düzenlemesi için Python tabanlı DAG'ler (Yönlendirilmiş Acyclic Graphs) oluşturmasına ve yönetmesine olanak tanıyan bir yönetilen hizmet sunar. Apache Airflow deneyimine sahipseniz veya kod odaklı yaklaşımı tercih ediyorsanız, bu seçenek idealdir. Buna karşılık, veri düzenleme için kod içermeyen bir çözüm tercih ediyorsanız, veri işlem hatları Python tabanlı iş akışlarını yönetmeyi veya yazmayı gerektirmeyen kullanıcı dostu bir alternatif sunar.

Önemli Özellikler    

Microsoft Fabric tarafından barındırılan Apache Airflow görevi, aşağıdakiler de dahil olmak üzere çeşitli güçlü özellikler sunar:

Önemli Özellikler     Apache Airflow Görevi Fabric'de Azure Data Factory'de İş Akışı Düzenleme Yöneticisi
Git senkronizasyonu Evet Evet
AKV'yi (Azure Key Vault) arka uç olarak etkinleştirme Evet Evet
Gereksinim olarak özel paketi yükleme Evet Evet
Tanılama günlükleri ve ölçümler Hayır Evet
Blob Depolama Hayır Evet
Apache Airflow kümesi IP adresi Evet Evet
Üretim iş yükü yürütme ani artışlarını yönetmek için otomatik ölçeklendirme Evet Kısmi
Kesintiyi/kapalı kalma süresini azaltmak için Yüksek Kullanılabilirlik Evet Hayır
Boşta olan işleçleri askıya almak ve çalışanların üzerindeki yükü azaltmak için Ertelenebilir İşleçler Evet Hayır
TTL'yi Duraklatma ve Devam Ettirme (Önbellek Süresi) Evet Hayır
SaaS Hâline Getirilmiş Deneyim - Başlamak için 10 saniye - DAG'ları Oluşturma - Fabric Ücretsiz Deneme Sürümü Evet Hayır

Bölgesel kullanılabilirlik

  • Doğu Avustralya
  • Güneydoğu Avustralya
  • Güney Brezilya
  • Orta Kanada
  • Doğu Kanada
  • Orta Hindistan
  • ABD'nin Orta Bölgeleri
  • Doğu Asya
  • Doğu ABD
  • Doğu ABD 2
  • Orta Fransa
  • Orta Batı Almanya
  • Endonezya Orta (Çok yakında)
  • Orta İsrail
  • Kuzey İtalya
  • Doğu Japonya
  • Japonya Batısı
  • Kore Orta
  • Malezya Batı (Çok yakında)
  • Orta Meksika
  • Yeni Zelanda Kuzey (Çok yakında)
  • Kuzey Avrupa
  • Norveç Doğu
  • Orta Polonya
  • Orta Katar (Çok yakında)
  • Orta İspanya (Çok yakında)
  • Güney Afrika - Kuzey
  • Orta Güney ABD
  • Güney Hindistan
  • Güneydoğu Asya
  • Orta İsveç
  • İsviçre Kuzeyi
  • Batı İsviçre
  • Tayvan Kuzey (Çok yakında)
  • Kuzeybatı Tayvan (Çok yakında)
  • Birleşik Arap Emirlikleri Kuzey
  • Güney Birleşik Krallık
  • Batı Birleşik Krallık
  • Batı Avrupa
  • Batı ABD
  • Batı ABD 2
  • Batı ABD 3

Desteklenen Apache Airflow sürümleri

  • 2.10.5

Python sürümünü destekleme

  • 3.12

Not

Mevcut bir Apache Airflow işi içinde Apache Airflow sürümünün değiştirilmesi şu anda desteklenmemektedir. Bunun yerine önerilen çözüm, istenen sürüme sahip yeni bir Apache Airflow işi oluşturmaktır