Прием данных в конструктор Lakeflow

Important

Эта функция доступна в общедоступной предварительной версии.

На этой странице описываются доступные параметры импорта данных в Visual Data Prep в конструкторе Lakeflow. Конструктор может работать с любыми данными, доступными через Azure Databricks.

Все процессы приема данных в Designer начинаются с оператора Source. При открытии области конфигурации оператора Source у вас есть следующие параметры.

Обзор существующих таблиц

Нажмите «Просмотр существующих», чтобы открыть выбор ресурсов, где можно:

  • Просмотр таблиц и томов в каталоге Unity.
  • Просмотр файлов в файловой системе рабочей области.

Используйте эту опцию, если данные уже находятся в Azure Databricks.

Перетащите и отпустите локальный файл

Перетащите CSV-файл или Excel с локального компьютера непосредственно на холст. Разработчик загружает файл в файловую систему рабочей области, автоматически создавая оператор Source.

Note

Для перетаскивания файлов Excel требуется включить поддержку формата файлов Excel. См. статью "Чтение файлов Excel".

Создание таблицы из файла

Выберите Создать таблицу из файла в области конфигурации источника, чтобы загрузить локальный CSV-файл или файл Excel и создать из него таблицу каталога Unity. Используйте этот параметр, если требуется, чтобы данные сохранялись в виде управляемой таблицы, а не хранились в виде файла рабочей области. Кроме того, для больших объемов данных это обеспечивает лучшую производительность.

Импорт из Google Drive

Чтобы импортировать файл из Google Drive, выполните приведенные действия.

  1. В области конфигурации источника выберите "Импорт" из Google Drive.
  2. Выберите подключение каталога Unity с доступом к Google Drive.
  3. Укажите URL-адрес файла.

Для этого требуется подключение каталога Unity, настроенное для доступа к Google Drive. Сведения о настройке подключений см. в разделе "Прием файлов из Google Drive ".

Импорт с SharePoint

Импорт файла из SharePoint:

  1. В области конфигурации источника выберите Import из SharePoint.
  2. Выберите подключение каталога Unity, которое имеет доступ к сайту SharePoint.
  3. Укажите прямую ссылку на файл.

Предупреждение

Чтобы получить правильный URL-адрес, щелкните правой кнопкой мыши файл в SharePoint, выберите Preview и скопируйте URL-адрес из адресной строки браузера. Не используйте ссылку для общего доступа.

Для этого требуется подключение Unity Catalog, настроенное для доступа к SharePoint. Сведения о настройке подключений см. в статье Ingest files from SharePoint.

Использование Lakeflow Connect для дополнительных источников

Если источник данных недоступен непосредственно в конструкторе, установите флажок Lakeflow Connect для управляемого соединителя. Lakeflow Connect поддерживает прием данных из приложений SaaS (Salesforce, Workday, HubSpot и других), баз данных, облачного хранилища и потоковых источников. После приема данных с помощью Lakeflow Connect в таблицу каталога Unity его можно использовать в качестве источника в конструкторе.

Дальнейшие действия

  • Last updated on