注意
Apache Airflow 作業是由 Apache Airflow 驅動的。
Apache Airflow 任務是新一代 Azure Data Factory 的工作流程協調管理器。 這是建立和管理 Apache Airflow 協調流程作業的簡單且有效率的方式,可讓您輕鬆大規模執行有向無循環圖表(DAG)。 它是 Fabric Data Factory 的一部分,可讓您使用現代化數據整合體驗,從豐富的數據源內嵌、準備和轉換數據,例如資料庫、數據倉儲、Lakehouse、實時數據等等。
何時使用 Apache Airflow 任務?
Apache Airflow 任務提供托管服務,可讓使用者建立和管理以 Python 為基礎的 DAG(導向非循環圖)以進行工作流程編排,無需擔憂底層基礎設施。 如果您有 Apache Airflow 的經驗,或偏好以程式代碼為中心的方法,此選項是理想的選項。 相反地,如果您偏好數據協調流程的無程式代碼解決方案,數據管線會提供使用者易記的替代方案,而不需要管理或撰寫以 Python 為基礎的工作流程。
主要功能
Microsoft Fabric 所提供的 Apache Airflow 作業擁有一系列強大的功能,包括:
主要功能 | Fabric 中的 Apache Airflow 作業 | Azure Data Factory 中的工作流程協作管理員 |
---|---|---|
Git 同步 | 是的 | 是的 |
啟用 AKV (Azure 金鑰保存庫) 作為後端 | 是的 | 是的 |
依據需求安裝私人套件 | 是的 | 是的 |
診斷記錄及計量 | 不 | 是的 |
Blob 儲存體 | 不 | 是的 |
Apache Airflow 叢集 IP 位址 | 是的 | 是的 |
用於管理生產工作負載執行高峰的自動調整功能 | 是的 | 部分的 |
高可用性以降低中斷/停機風險 | 是的 | 不 |
可延遲的操作員,用於暫停閒置的操作員並釋放工作角色 | 是的 | 不 |
暫停與恢復 TTL (存留時間) | 是的 | 不 |
SaaSified 體驗 – 10 秒便可開始使用 – 撰寫 DAG – Fabric 免費試用 | 是的 | 不 |
區域可用性
- 澳大利亞東部
- 澳大利亞東南部
- 巴西南部
- 加拿大中部
- 加拿大東部
- 印度中部
- 美國中部
- 東亞
- 美國東部
- 美國東部 2
- 法國中部
- 德國中西部
- 印尼中部(即將推出)
- 以色列中部
- 義大利北部
- 日本東部
- 日本西部
- 韓國中部
- 馬來西亞西部(即將推出)
- 墨西哥中部
- 紐西蘭北部(即將推出)
- 北歐
- 挪威東部
- 波蘭中部
- 卡達中部(即將推出)
- 西班牙中部(即將推出)
- 南非北部
- 美國中南部
- 印度南部
- 東南亞
- 瑞典中部
- 瑞士北部
- 瑞士西部
- 臺灣北部(即將推出)
- 臺灣西北地區(即將推出)
- 阿拉伯聯合大公國北部
- 英國南部
- 英國西部
- 西歐
- 美國西部
- 美國西部 2
- 美國西部 3
支援的 Apache Airflow 版本
- 2.10.5
支援 Python 版本
- 3.12
注意
目前不支援變更現有 Apache Airflow 作業內的 Apache Airflow 版本。 相反地,建議的解決方案是使用所需的版本建立新的 Apache Airflow 作業
相關內容
- 快速入門:建立 Apache Airflow 作業。