Руководство по Lakehouse. Прием данных в lakehouse

  • Статья

В этом руководстве вы будете принимать дополнительные таблицы измерений и фактов из Wide World Importers (WWI) в lakehouse.

Важно!

Microsoft Fabric находится в предварительной версии.

Предварительные требования

Прием данных

В этом разделе вы используете действие Копирование данных конвейера Фабрики данных для приема примеров данных из учетной записи хранения Azure в раздел Файлы созданного ранее lakehouse.

  1. Выберите созданную рабочую область во всплывающем окне Рабочая область слева. На странице рабочей области на кнопке +Создать выберите Конвейер данных.

    Снимок экрана: создание нового конвейера данных.

  2. В диалоговом окне Новый конвейер укажите имя IngestDataFromSourceToLakehouse и нажмите кнопку Создать. Создается и открывается новый конвейер фабрики данных.

  3. В созданном конвейере фабрики данных выберите Добавить действие конвейера , чтобы добавить действие в конвейер, и выберите Копировать данные. Это добавит действие копирования данных на холст конвейера.

    Снимок экрана: выбор пункта Добавить действие конвейера и Копировать данные.

  4. Выберите только что добавленное действие копирования данных на холсте. В нижней части отображаются свойства действия. На вкладке Общие укажите имя действия копирования данных Копирование данных в Lakehouse.

    Снимок экрана: место добавления имени действия копирования на вкладке Общие.

  5. На вкладке Источник выбранного действия копирования данных выберите Внешнийтип хранилища данных , а затем нажмите + Создать , чтобы создать подключение к источнику данных.

    Снимок экрана, на котором показано, где выбрать внешний и + Создать на вкладке Источник.

  6. В этом руководстве все примеры данных доступны в общедоступном контейнере хранилища BLOB-объектов Azure. Вы подключаетесь к этому контейнеру для копирования данных из него. В мастере создания подключения выберите Хранилище BLOB-объектов Azure, а затем нажмите кнопку Продолжить.

    Снимок экрана: мастер создания подключения, на котором показано, где выбрать Хранилище BLOB-объектов Azure.

  7. На следующем экране мастера создания подключения введите следующие сведения и нажмите кнопку Создать , чтобы создать подключение к источнику данных.

    Свойство Значение
    Имя учетной записи или универсальный код ресурса (URI) https://azuresynapsestorage.blob.core.windows.net/sampledata
    Подключение Создание подключения
    Имя соединения wwisampledata
    Тип проверки подлинности Анонимные

    Снимок экрана: экран параметров подключения, на котором показано, где ввести сведения и нажать кнопку Создать.

  8. После создания нового подключения вернитесь на вкладку Источник действия копирования данных, и созданное подключение будет выбрано по умолчанию. Перед переходом к целевым параметрам укажите следующие свойства.

    Свойство Значение
    Тип хранилища данных External
    Подключение wwisampledata
    Тип пути к файлу Путь к файлу
    Путь к файлу Имя контейнера (первое текстовое поле): sampledata
    Имя каталога (второе текстовое поле): WideWorldImportersDW/parquet
    Рекурсивно Флажок установлен
    Формат файла Двоичные данные

    Снимок экрана: вкладка источника, на которой показано, где ввести конкретные сведения.

  9. На вкладке Назначение выбранного действия копирования данных укажите следующие свойства:

    Свойство Значение
    Тип хранилища данных Рабочая область
    Тип хранилища данных рабочей области Гибридное решение "хранилище и озеро данных"
    Гибридное решение "хранилище и озеро данных" wwilakehouse
    Корневая папка Файлы
    Путь к файлу Имя каталога (первое текстовое поле): wwi-raw-data
    Формат файла Двоичные данные

    Снимок экрана: вкладка

  10. Вы завершили настройку действия копирования данных. Нажмите кнопку Сохранить в разделе Главная , чтобы сохранить внесенные изменения, и нажмите кнопку Выполнить , чтобы выполнить конвейер и его действие. Вы также можете запланировать обновление данных через определенные интервалы конвейеров в соответствии с бизнес-требованиями. В этом руководстве мы запустим конвейер только один раз, нажав кнопку Выполнить .

    Это запускает копирование данных из базового источника данных в указанный lakehouse и может занять до минуты. Вы можете отслеживать выполнение конвейера и его действия на вкладке Вывод , которая отображается при щелчке в любом месте холста. При необходимости можно щелкнуть значок очков, чтобы просмотреть сведения о передаче данных.

    Снимок экрана, показывающий, где выбрать команду Сохранить и выполнить, а также где найти сведения о выполнении и значок очков на вкладке Вывод.

  11. После копирования данных перейдите в представление элементов рабочей области и выберите wwilakehouse , чтобы запустить обозреватель Lakehouse для выбранного lakehouse.

    Снимок экрана, показывающий, где выбрать lakehouse для запуска обозревателя Lakehouse.

  12. Убедитесь, что в представлении обозревателя Lakehouse создана новая папка wwi-raw-data и скопированы данные для всех таблиц.

    Снимок экрана: исходные данные копируются в обозреватель Lakehouse.

Дальнейшие действия

Перейдите к следующей статье, чтобы узнать о

Подготовка и преобразование данных