Обзор соединителя Azure Data Factory и Azure Synapse Analytics

ПРИМЕНИМО К: Azure Data Factory Azure Synapse Analytics

Совет

Data Factory в Microsoft Fabric — это следующее поколение Azure Data Factory с более простой архитектурой, встроенным ИИ и новыми функциями. Если вы не знакомы с интеграцией данных, начните с Fabric Data Factory. Существующие рабочие нагрузки ADF могут обновляться до Fabric для доступа к новым возможностям в области обработки и анализа данных, аналитики в режиме реального времени и отчетов.

конвейеры Azure Data Factory и Azure Synapse Analytics поддерживают следующие хранилища данных и форматы с помощью действий Копия, Data Flow, Look up, Получение метаданных и Удаление. Выберите каждое хранилище данных, чтобы узнать поддерживаемые возможности и соответствующие конфигурации в деталях.

Поддерживаемые хранилища данных

Примечание.

Соединители, помеченные как предварительная версия, доступны для тестирования, но не рекомендуются для использования в производственной среде. Некоторые функции могут не поддерживаться или их возможности могут быть ограничены.

Категория Хранилище данных Копирование данных (источник/приемник) Mapping Data Flow (источник/приемник) Операция поиска Операция получения метаданных/Операция проверки Удалить действие Управляемая частная конечная точка
Azure Azure Blob Storage ✓/✓ ✓/✓ ✓ Исключить учетную запись хранения версии 1
  Индекс Когнитивного поиска Azure −/✓
  Azure Cosmos DB для NoSQL ✓/✓ ✓/✓
  Azure Cosmos DB для PostgreSQL ✓/✓ ✓/✓
  Azure Cosmos DB для MongoDB ✓/✓
  Обозреватель данных Azure ✓/✓ ✓/✓
  Azure Data Lake Storage Gen1 ✓/✓ ✓/✓
  Azure Data Lake Storage Gen2 ✓/✓ ✓/✓
  База данных Azure для MariaDB ✓/−
  База данных Azure для MySQL ✓/✓ ✓/✓
  База данных Azure для PostgreSQL ✓/✓ ✓/✓
  Azure Databricks Delta Lake ✓/✓ ✓/✓ Используйте разностный формат
  Файлы Azure ✓/✓ ✓ Исключить учетную запись хранения версии 1
  База данных SQL Azure ✓/✓ ✓/✓
  Azure SQL Managed Instance ✓/✓ ✓/✓
  Azure Synapse Analytics ✓/✓ ✓/✓
  Хранилище таблиц Azure ✓/✓ ✓ Исключить учетную запись хранения версии 1
База данных Amazon RDS для Oracle ✓/−
  Amazon RDS для SQL Server ✓/−
  Amazon Redshift ✓/−
  DB2 ✓/−
  Сверло ✓/−
  Google BigQuery ✓/−
  Greenplum ✓/−
  HBase ✓/−
  Hive ✓/− ✓/−
  Apache Impala ✓/−
  Informix ✓/✓
  MariaDB ✓/−
  Microsoft Access ✓/✓
  MySQL ✓/−
  Netezza ✓/−
  Oracle ✓/✓
  Phoenix ✓/−
  PostgreSQL ✓/−
  Presto ✓/−
  Открытый центр SAP Business Warehouse ✓/−
  SAP Business Warehouse через MDX ✓/−
  SAP HANA ✓/✓
  Таблица SAP ✓/−
  Snowflake ✓/✓ ✓/✓
  Spark ✓/−
  SQL Server ✓/✓ ✓/✓ Использование управляемой виртуальной сети
  Sybase ✓/−
  Teradata ✓/−
  Vertica ✓/−
NoSQL Cassandra ✓/−
  Couchbase (предварительная версия) ✓/−
  MongoDB ✓/✓
  Атлас MongoDB ✓/✓
Файл Amazon S3 ✓/− ✓/✓
  Совместимое хранилище Amazon S3 ✓/−
  Файловая система ✓/✓
  FTP ✓/−
  Google Cloud Storage ✓/−
  HDFS ✓/−
  Хранилище Oracle Cloud ✓/−
  SFTP ✓/✓ ✓/✓
Базовый протокол Базовый HTTP-запрос ✓/−
  Базовый протокол OData ✓/−
  Базовый протокол ODBC ✓/✓
  Базовый протокол REST ✓/✓ ✓/✓
Microsoft Fabric Microsoft Fabric Lakehouse ✓/✓ ✓/✓
  Microsoft Fabric Склад ✓/✓ ✓/✓
Службы и приложения Веб-служба Amazon Marketplace (не рекомендуется)
  Appfigures (предварительная версия) ✓/-
  Asana (предварительная версия) ✓/−
  Concur (предварительная версия) ✓/−
  data.world (предварительная версия) ✓/−
  Dataverse ✓/✓ ✓/✓
  Динамика 365 ✓/✓ ✓/✓
  Dynamics AX ✓/−
  Dynamics CRM ✓/✓ ✓/✓
  GitHub Справочник по сущностям Common Data Model
  Google AdWords ✓/−
  Google Sheets (предварительная версия) ✓/−
  HubSpot ✓/−
  Jira ✓/−
  Magento (предварительная версия) ✓/−
  Marketo (предварительная версия) ✓/−
  Microsoft 365 ✓/− ✓/−
  Oracle Eloqua (предварительная версия) ✓/−
  Oracle Responsys (предварительная версия) ✓/−
  Oracle Service Cloud (предварительная версия) ✓/−
  PayPal (предварительная версия) ✓/−
  Quickbase (предварительная версия) ✓/−
  QuickBooks (предварительная версия) ✓/−
  Salesforce ✓/✓
  Облако службы Salesforce ✓/✓
  Salesforce Marketing Cloud ✓/−
  SAP Cloud for Customer (C4C) ✓/✓
  SAP ECC ✓/−
  ServiceNow ✓/−
SharePoint Online список ✓/−
  Shopify (предварительная версия) ✓/−
  Smartsheet (предварительная версия) ✓/−
  Square (предварительная версия) ✓/−
  TeamDesk (предварительная версия) ✓/−
  Twilio (предварительная версия) ✓/−
  Веб-таблица (таблица HTML) ✓/−
  Xero ✓/−
  Zendesk (предварительная версия) ✓/−
  Zoho (предварительная версия) ✓/−

Интеграция с дополнительными хранилищами данных

Azure Data Factory и конвейеры Synapse могут достигать более широкого набора хранилищ данных, чем указанный выше список. Если вам нужно переместить данные в хранилище данных, которое не содержится в списке встроенных соединителей службы, ниже приведены некоторые расширяемые параметры:

  • Для базы данных и хранилища данных обычно можно найти соответствующий драйвер ODBC, вместе с которым можно использовать универсальный соединитель ODBC.
  • Для приложений SaaS:
  • Для других проверьте, можете ли вы загружать данные или предоставлять доступ к ним в любые поддерживаемые хранилища данных, например, в Azure Blob/файл/FTP/SFTP/и т. д., а затем с того момента позвольте службе обработать их. Можно вызвать пользовательский механизм загрузки данных с помощью функции Azure, пользовательской активности Custom activity, Databricks/HDInsight, веб-активности Web activity и т. д.

Поддерживаемые типы файлов

Поддерживаются следующие форматы файлов. Дополнительные сведения о параметрах с учетом форматирования см. в соответствующих статьях.

Поддержка TLS 1.3

Протокол TLS — это широко используемый протокол безопасности, предназначенный для защиты подключений и обмена данными между серверами и клиентами. В Azure App Service можно использовать сертификаты TLS и SSL для защиты входящих запросов в веб-приложениях. TLS 1.3 — это последняя и самая безопасная версия. Дополнительные сведения см. в этой статье. Следующие соединители поддерживают TLS 1.3 для Copy activity: