Поделиться через


Руководства по декларативным конвейерам Lakeflow Spark

Руководства, приведенные в этом разделе, помогут вам узнать о SDP. Доступны следующие руководства:

Начало работы с декларативными конвейерами Spark Lakeflow

Тема Description
Руководство. Создание конвейера ETL с помощью декларативных конвейеров Lakeflow Spark В этом руководстве показано, как создать и развернуть простой конвейер ETL (извлечение, преобразование и загрузка) для автозагрузчика оркестрации данных.

Tutorials

Тема Description
Руководство. Создание конвейера ETL с помощью отслеживания измененных данных В этом руководстве описаны шаги по созданию и развертыванию конвейера ETL с фиксацией измененных данных (CDC) с помощью SDP для оркестрации данных и Auto Loader.
Создание конвейера, управляемого источником В этом руководстве показано, как создать управляемый источником конвейер с помощью пакетов ресурсов Databricks и папок Git.
Преобразование конвейера в проект пакета активов Databricks В этом руководстве показано, как преобразовать существующий конвейер в проект наборов ресурсов Databricks, чтобы упростить обслуживание и автоматическое развертывание в целевых средах.