Выполнение добавочной обработки с помощью структурированной потоковой передачи Spark
Средний уровень
Инженер по анализу и обработке данных
разработчик.
Специалист по обработке и анализу данных
Аналитик данных
Azure Databricks
Вы изучите различные функции и средства, которые помогут вам понять и работать с добавочной обработкой с помощью структурированной потоковой передачи Spark.
Цели обучения
В конце этого модуля вы можете:
- Общие сведения о структурированной потоковой передаче Spark.
- Некоторые методы оптимизации структурированной потоковой передачи.
- Как обрабатывать события позднего прибытия или выхода из заказа.
- Настройка источников в режиме реального времени для добавочной обработки.
Предварительные требования
- Способность работать с порталом Azure.
- Общие сведения о рабочей области Azure Databricks.
- Опыт работы с языками Spark и записными книжками.