實施 Lakeflow Jobs,搭配使用 Azure Databricks
中級
資料工程師
Azure Databricks
此模組會引導您完成在 Azure Databricks 中實作 Lakeflow 作業的流程。 您將學習如何建立作業、設定觸發程序與排程、設定警示,以及管理自動重新啟動,以確保資料管線能可靠執行。
學習目標
在本模組結束時,您將能夠:
- 建立並設定 Lakeflow 工作,包含任務與運算資源
- 配置作業觸發器,包括資料表更新與檔案到達
- 使用間隔和 cron 表達式排程工作
- 配置工作警示與監控通知
- 設定自動重啟與重試政策以提升可靠性
必要條件
以下先決條件應完成:
- 具備 Azure Databricks 工作區的基本理解
- 熟悉資料工程概念