Поделиться через

Задача "Файловая система" для Azure Data Lake Store

  • Статья

Область применения: среда выполнения интеграции SSIS SQL Server в Фабрика данных Azure

Задача "Файловая система" для Azure Data Lake Store позволяет пользователям выполнять различные операции файловой системы в Azure Data Lake Store (ADLS).

Компонент задачи "Файловая система" для Azure Data Lake Store входит в состав пакета дополнительных компонентов SQL Server Integration Services (SSIS) для Azure.

Настройка задачи "Файловая система" для Azure Data Lake Store

Чтобы добавить в пакет задачу "Файловая система" для Azure Data Lake Store, перетащите ее с панели элементов служб SSIS на панель холста конструктора. Затем дважды щелкните задачу или щелкните ее правой кнопкой мыши и выберите команду Изменить, чтобы открыть диалоговое окно редактора задачи "Файловая система" для Azure Data Lake Store.

Операция файловой системы, которая будет выполнена, задается свойством Операция. Выберите одну из следующих операций:

  • CopyToADLS. Загрузка файлов в ADLS.
  • CopyFromADLS. Скачивание файлов из ADLS.

Настройка свойств операции

Для любой операции необходимо указать диспетчер подключений Azure Data Lake.

Ниже приведены свойства, относящиеся к каждой операции:

CopyToADLS

  • LocalDirectory. Задает каталог локального источника, в котором содержатся загружаемые файлы.
  • FileNamePattern. Определяет фильтр имен для исходных файлов. Загружаются только те файлы, имя которых соответствует указанному шаблону. Поддерживаются подстановочные знаки * и ?.
  • SearchRecursively. Указывает, следует ли выполнять рекурсивный поиск файлов для загрузки в каталоге источника.
  • AzureDataLakeDirectory. Указывает каталог назначения ADLS, в который будут загружены файлы.
  • FileExpiry. Задает дату и время истечения срока действия для файлов, загруженных в ADLS. Если файлы не имеют срока действия, оставьте это свойство пустым.

CopyFromADLS

  • AzureDataLakeDirectory. Указывает каталог источника ADLS, в котором содержатся файлы для скачивания.
  • SearchRecursively. Указывает, следует ли выполнять рекурсивный поиск файлов для скачивания в каталоге источника.
  • LocalDirectory. Указывает каталог назначения, в который будут сохранены скачанные файлы.