Общие сведения о Фабрике данных Azure

  • Статья

Фабрика данных Azure — это служба интеграции облачных данных, которая ведет оркестрацию и автоматизирует перемещение и преобразование данных. Вы можете создать решения по интеграции данных с помощью службы фабрики данных, которая получает, преобразует и обрабатывает данные из различных хранилищ, а также публикует обработанные данные в хранилищах данных.

В настоящее время существует две версии службы: версии 1 (V1) и версии 2 (V2).

версия 1

Служба Фабрики данных версии 1 (V1) позволяет создавать конвейеры данных, которые перемещают и преобразуют данные, а затем выполняют конвейеры по указанному расписанию (ежечасно, ежедневно, еженедельно и т. д.). Служба также предоставляет широкие возможности визуализации для отображения журнала преобразований данных и зависимостей между конвейерами данных, а также для мониторинга всех конвейеров данных в едином представлении с целью оперативного выявления проблем и настройки оповещений.

Список операций, поддерживаемых Фабрикой данных версии 1, см. в справочнике по REST API версии 1. Дополнительные сведения о службе см. в статье Общие сведения о фабрике данных версии 1.

версия 2

Фабрика данных версии 2 (V2) основана на Фабрике данных версии 1 и поддерживает более широкий набор сценариев интеграции данных в облаке. К дополнительным возможностям Фабрики данных относятся:

  • Поток управления: ветвление, циклирование и условная обработка
  • Развертывание и запуск пакетов SQL Server служб Integration Services (SSIS) в Azure.
  • Поддержка сред виртуальной сети.
  • Горизонтальное масштабирование с помощью вычислительной мощности по запросу.
  • Поддержка кластера Spark по запросу.
  • Гибкое планирование для поддержки добавочной загрузки данных.
  • Триггеры для выполнения конвейеров данных.

Список операций, поддерживаемых Фабрикой данных версии 2, см. в справочнике по REST API версии 2. Дополнительные сведения о службе см. в статье Общие сведения о фабрике данных версии 2.