Поделиться через


Прием данных в хранилище с помощью конвейеров

Область применения:✅ хранилище в Microsoft Fabric

Из этой статьи вы узнаете, как использовать действие задания копирования в конвейерах фабрики данных.

  • Конвейеры предлагают альтернативу использованию команды COPY через графический пользовательский интерфейс.
  • Конвейер — это логическая группировка действий, которые вместе выполняют задачу приема данных.
  • Конвейеры позволяют управлять всеми действиями извлечения, преобразования и загрузки (ETL) в одном месте, а не управлять каждым отдельно.

Примечание.

Некоторые функции фабрики данных Azure недоступны в Microsoft Fabric. Однако понятия взаимозаменяемы. Дополнительные сведения о фабрике данных Azure и конвейерах см. в конвейерах и действиях в Фабрике данных Azure и Azure Synapse Analytics. Чтобы быстро начать, см. Краткое руководство: создание первого конвейера для копирования данных.

Создание задания копирования

Чтобы создать задание копирования, выполните следующие действия.

  1. На домашнем экране рабочей области нажмите кнопку +Создать элемент . В разделе "Получение данных" выберите "Копировать задание".

  2. В диалоговом окне создания задания копирования введите имя для нового проекта и нажмите Создать. Откроется новое окно задания копирования .

  3. Выберите источник данных из каталога OneLake.

  4. На странице выбора данных просмотрите выбранный набор данных. После просмотра данных нажмите кнопку "Далее".

  5. На странице "Выбор назначения данных " выберите требуемое хранилище в каталоге OneLake.

  6. Страница "Выбор режима задания копирования " позволяет настроить способ копирования данных: полную копию или добавочные копии, которые выполняют только последующие копии при изменении исходных данных.

    Теперь нажмите кнопку "Полная копия". Для других источников и сценариев можно добавочно загружать данные по мере обновления источника данных.

  7. Таблицы назначения можно настроить с именем требуемой схемы назначения и имени таблицы. Укажите имена схем и таблиц, соответствующие требуемому соглашению об именовании. После внесения изменений нажмите кнопку "Далее".

    Снимок экрана страницы карты назначения окна задания копирования. Назначение — dbo.NYC_taxi.

  8. При необходимости, чтобы изменить сопоставления столбцов, выберите "Изменить сопоставление столбцов". Можно привязать имена исходных столбцов к новым именам или типам данных, либо пропустить соответствующие исходные столбцы.

    Снимок экрана: параметры загрузки данных в существующую таблицу или создание новой.

    После завершения проверки сопоставлений столбцов нажмите кнопку "Далее".

  9. Страница проверки и сохранения — это сводка нового задания копирования.

    Просмотрите сводку и параметры, а затем нажмите кнопку "Сохранить и запустить".

  10. Вы направляетесь в рабочую область конвейера, где для вас уже сконфигурирована новая задача копирования с её источником и назначением. Если вы выбрали запуск передачи данных сразу на предыдущей странице, задание копирования начнется сразу после его готовности к выполнению.

  11. Состояние конвейера можно отслеживать на панели результатов .

  12. Через несколько секунд конвейер успешно завершится. При переходе к хранилищу можно выбрать таблицу для предварительного просмотра данных и убедиться, что операция копирования завершена.

Следующий шаг

Параметры приема данных

Другие способы приема данных в хранилище: