本節說明 Lakeflow Spark 宣告式管線的監視和可觀察性功能。
| 主題 | Description |
|---|---|
| 使用UI進行監視 | 觀察管線更新的進度和狀態，並警示成功或失敗。 檢視串流來源的計量，例如Apache Kafka和自動載入器。 |
| 事件記錄 | 使用管線事件記錄檔擷取管線更新的詳細資訊，例如資料譜系、資料品質計量和資源使用量。 此外，請參閱 事件記錄檔的架構。 |
| 查詢歷程記錄 | 藉由查看查詢歷程記錄來檢查和診斷查詢效能。 |
| 自訂監控 | 使用事件鉤子定義自定義動作，以在特定事件發生時採取行動。 |
此外，還有針對特定案例的疑難排解主題。
| 主題 | Description |
|---|---|
| 從串流檢查點故障中恢復管道 | 復原具有無效或損毀串流檢查點的管線。 |
| 修正管線中的高初始化時間 | 透過跨管線分割和負載平衡流程，修正管線的高初始化時間。 |