湖流設計器

Lakeflow Designer 是一個視覺化、無程式碼、AI 原生體驗,用於資料準備與分析。 它直接建置於 Azure Databricks 中,讓使用者能透過拖放畫布和自然語言來準備和探索資料。 你所建立的工作流程稱為視覺資料準備,背後有生產準備的程式碼,並完全由 Unity Catalog 管理,因此你的工作能順利從原型過渡到生產,無需逆向工程或重建。

任務 Description
什麼是 Lakeflow Designer? 學習 Lakeflow Designer 的概念。
在 Lakeflow Designer 中建立視覺化資料準備 學習如何在 Lakeflow Designer 中建立視覺化資料準備。
將視覺化資料準備檔移至生產環境 了解如何使用 Git、作業和宣告式自動化套件,將視覺化資料準備流程部署到正式環境。
將資料匯入 Lakeflow Designer 了解如何將資料匯入視覺化資料準備流程。
Lakeflow Designer 內建運算子 了解視覺化資料準備中可用的內建運算子。
Lakeflow Designer 中的使用者自訂運算元 學習如何在 Lakeflow Designer 中建立屬於自己的使用者定義運算子。

使用者定義運算子

你可以自行建立使用者定義的運算子,供 Lakeflow Designer 使用。

任務 Description
Lakeflow Designer 中的使用者自訂運算元 建立使用者定義運算子的概述。
使用者定義運算元 YAML 參考 使用者自訂運算子的 YAML 結構描述完整參考。
教學:複利計算器操作 在 Unity Catalog 使用者定義函數(UDF)中使用 Python,建立可計算複利的使用者自訂運算子。
教學:K-平均分群 在 Unity Catalog 使用者定義資料表函式(UDTF)中使用 Python,建立一個使用 K 平均分群的使用者自訂運算子。
教學:發送 Slack 訊息 建立一個使用者自訂的運算子,能在 Unity 目錄(UDF)中使用 SQL 發送 Slack 訊息。
教學:所有 UI 小工具示範 在 Unity 目錄(UDF)中使用 Python,建立一個使用者自訂的運算子,使用所有可用的 UI 元件。
教學:Gmail 電子郵件寄件人操作 建立可傳送 Gmail 郵件的使用者自訂運算子,並在獨立的 python-run-function 中使用 Python。