Implementowanie zadań lakeflow za pomocą usługi Azure Databricks
Średni
Inżynier danych
Azure Databricks
Ten moduł przeprowadzi Cię przez proces implementowania zadań lakeflow w usłudze Azure Databricks. Dowiesz się, jak tworzyć zadania, konfigurować wyzwalacze i harmonogramy, konfigurować alerty i zarządzać automatycznymi ponownymi uruchomieniami w celu zapewnienia niezawodnego wykonywania potoku danych.
Cele szkolenia
Po ukończeniu tego modułu będziesz wiedzieć, jak wykonać następujące czynności:
- Tworzenie i konfigurowanie zadań Lakeflow z zasobami obliczeniowymi
- Konfiguracja wyzwalaczy zadań, w tym aktualizacji tabel i przybycia plików
- Planowanie zadań przy użyciu interwałów i wyrażeń cron
- Konfigurowanie alertów zadań i powiadomień na potrzeby monitorowania
- Konfigurowanie automatycznych ponownych uruchomień i polityk ponawiania w celu zapewnienia niezawodności
Wymagania wstępne
Należy wykonać następujące wymagania wstępne:
- Podstawowa wiedza na temat obszarów roboczych usługi Azure Databricks
- Znajomość pojęć związanych z inżynierią danych