Начало работы с Фабрика данных Azure

ПРИМЕНИМО К: Фабрика данных Azure Azure Synapse Analytics

Совет

Data Factory в Microsoft Fabric — это следующее поколение Фабрика данных Azure с более простой архитектурой, встроенным ИИ и новыми функциями. Если вы не знакомы с интеграцией данных, начните с Fabric Data Factory. Существующие рабочие нагрузки ADF могут обновляться до Fabric для доступа к новым возможностям в области обработки и анализа данных, аналитики в режиме реального времени и отчетов.

Добро пожаловать в Фабрика данных Azure! Эта статья поможет вам создать первую фабрику данных и конвейер в течение пяти минут.

Шаблон Azure Resource Manager (шаблон ARM) в этой статье создает и настраивает все необходимое. Затем можно перейти к демонстрационной фабрике данных и активировать конвейер, который перемещает некоторые примеры данных из одной папки Хранилище BLOB-объектов Azure в другую.

Предварительные условия

Если у вас нет подписки Azure, создайте учетную запись free перед началом работы.

Краткий видеообзор

В следующем видео показано пошаговое руководство по примеру в этой статье:

Шаг 1. Использование демонстрации для создания ресурсов

В этом демо-сценарии вы используете активность копирования в фабрике данных, чтобы скопировать имя blob moviesDB2.csv из папки ввода в Хранилище BLOB-объектов Azure в выходную папку. В реальной ситуации эта операция копирования может быть между любыми из множества поддерживаемых источников данных и погрузчиков, доступных в Фабрика данных Azure. Он также может включать преобразования в данные.

  1. Нажмите следующую кнопку.

    Попробуйте свою первую демо-версию фабрики данных

    При нажатии кнопки создаются следующие Azure ресурсы:

    • Учетная запись Фабрика данных Azure
    • Фабрика данных, содержащая конвейер с одним действием копирования
    • Учетная запись Хранилище BLOB-объектов Azure с moviesDB2.csv, загруженная в входную папку в качестве источника
    • Связанная служба для подключения фабрики данных к хранилищу BLOB.

  2. Вы направляетесь на страницу конфигурации для развертывания шаблона. На этой странице:

    1. Для группы ресурсов выберите "Создать" , чтобы создать группу ресурсов. Вы можете оставить все остальные значения по умолчанию.

    2. Выберите "Просмотр и создание", а затем выберите "Создать", чтобы развернуть ресурсы.

    Снимок экрана: страница развертывания шаблона для создания ресурсов.

Примечание.

При развертывании шаблона нужно назначить роль управляемой идентичности. Для этого шага требуется роль владельца, администратора пользовательского доступа или оператора управляемой идентификации.

Все ресурсы в этой демонстрации создаются в новой группе ресурсов, поэтому их можно легко очистить позже.

Шаг 2. Проверка развернутых ресурсов

  1. В сообщении, показывающем успешное завершение развертывания, выберите Перейти к группе ресурсов.

    Screenshot страницы портала Azure, которая показывает успешное развертывание демонстрационного шаблона.

  2. Группа ресурсов включает в себя новую фабрику данных, учетную запись Хранилище BLOB-объектов и управляемое удостоверение, созданное развертыванием. Выберите фабрику данных в группе ресурсов, чтобы просмотреть её.

    Скриншот содержимого группы ресурсов, созданной для демонстрации, с выделенной фабрикой данных.

  3. Нажмите кнопку "Запустить студию ".

    Скриншот портала Azure, на котором показаны сведения о недавно созданной фабрике данных, с выделенной кнопкой открытия Фабрика данных Azure Studio.

  4. В Фабрика данных Azure Studio:

    1. Выберите вкладку Авторвкладка .
    2. Выберите конвейер, созданный шаблоном.
    3. Проверьте исходные данные, нажав кнопку "Открыть".

    Снимок экрана Фабрика данных Azure Studio, отображающий конвейер, созданный шаблоном.

  5. В исходном наборе данных выберите "Обзор ", чтобы просмотреть входной файл, созданный для демонстрации.

    Снимок экрана: исходный набор данных с выделенной кнопкой

    Обратите внимание на moviesDB2.csv файл, который уже загружен в папку ввода.

    Снимок экрана: содержимое входной папки, показывающее входной файл, используемый в демонстрации.

Шаг 3. Активация демонстрационного конвейера для запуска

  1. Выберите "Добавить триггер", а затем нажмите кнопку "Триггер".

    Снимок экрана: кнопка запуска демонстрационного конвейера.

  2. В области справа в разделе "Запуск конвейера" нажмите кнопку "ОК".

Мониторинг конвейера

  1. Выберите вкладку МониторингВкладка отслеживания. Эта вкладка содержит обзор запусков конвейера, включая время начала и состояние.

    Снимок экрана вкладки для мониторинга запусков конвейеров в фабрике данных.

  2. В этом кратком руководстве конвейер имеет только один тип действия: копирование данных. Выберите имя конвейера, чтобы просмотреть сведения о результатах выполнения действия копирования.

    Снимок экрана: результаты выполнения задачи копирования во вкладке мониторинга фабрики данных.

  3. Щелкните значок сведений , чтобы отобразить подробный процесс копирования. В результатах размеры чтения и записи данных одинаковы, а активность прочитала и записала один файл. Эта информация доказывает, что Фабрика данных Azure успешно скопировал все данные в адрес назначения.

    Снимок экрана с подробными результатами выполнения операции копирования.

Очистка ресурсов

Вы можете очистить все ресурсы, созданные в этой статье, двумя способами:

  • Вы можете удалить всю группу ресурсов Azure, которая включает все ресурсы, созданные в ней.

  • Если вы хотите сохранить некоторые ресурсы без изменений, перейдите в группу ресурсов и удалите только определенные ресурсы, которые требуется удалить.

    Например, если вы используете этот шаблон для создания фабрики данных для использования в другом руководстве, вы можете удалить другие ресурсы, но сохранить только фабрику данных.

Связанный контент

В этой статье вы создали фабрику данных, содержащую конвейер с операцией копирования. Дополнительные сведения о Фабрика данных Azure см. в следующей статье и модуле обучения:

  • Last updated on