Поделиться через


Преобразование объединения в потоке данных для сопоставления

ОБЛАСТЬ ПРИМЕНЕНИЯ: Фабрика данных Azure Azure Synapse Analytics

Совет

Попробуйте использовать фабрику данных в Microsoft Fabric, решение для аналитики с одним интерфейсом для предприятий. Microsoft Fabric охватывает все, от перемещения данных до обработки и анализа данных в режиме реального времени, бизнес-аналитики и отчетности. Узнайте, как бесплатно запустить новую пробную версию !

Потоки данных доступны в конвейерах как Фабрики данных Azure, так и Azure Synapse. Эта статья относится к потокам данных для сопоставления. Если вы не знакомы с преобразованиями, см. вводную статью Преобразование данных с помощью потока данных для сопоставления.

Операция объединения группирует несколько потоков данных в один, при этом результаты команды SQL Union для таких потоков используются в качестве новых выходных данных для преобразования с объединением. Вся схема из каждого входного потока будет объединена в вашем потоке данных без необходимости использования ключа соединения.

Можно объединить n-ное количество потоков в таблице настроек, выбрав значок "+" рядом с каждой настроенной строкой, включая как исходные данные, так и потоки из существующих преобразований в вашем потоке данных.

Ниже приведено короткое видео, в котором пошагово показано преобразование объединения в потоке данных для сопоставления.

Union transformation (Преобразование

В этом случае можно объединить разрозненные метаданные из нескольких источников (в данном примере три разных исходных файла) в один поток.

Общие сведения о преобразовании объединения

Чтобы добиться этого, добавьте дополнительные строки в параметры объединения, включив все источники, которые требуется добавлять. Нет необходимости выполнять общий поиск или использовать ключе соединения.

Параметры преобразования объединения

Если задать параметр "Выбрать преобразование" после вашего объединения, можно переименовать перекрывающиеся поля или поля, которые не были названы среди источников без заголовков. Щелкните "Проверить", чтобы увидеть в этом примере объединенные метаданные в виде 132 столбцов из трех разных источников.

Завершение преобразования объединения

Имя и расположение

При выборе значения "объединение по имени" каждое значение столбца будет отправляться в соответствующий столбец из каждого источника с новой схемой объединенных метаданных.

При выборе значения "объединить по расположению" каждое значение столбца будет отправляться в исходное расположение из каждого соответствующего источника, что приведет к получению нового объединенного потока данных, в котором данные из каждого источника добавляются в один поток.

Выходные данные объединения

Изучите аналогичные преобразования, включая Соединение и Существование.