События
Присоединяйтесь к нам в FabCon Vegas
31 мар., 23 - 2 апр., 23
Конечное событие Microsoft Fabric, Power BI, SQL и ai community. 31 марта по 2 апреля 2025 г.
Зарегистрироваться сегодняЭтот браузер больше не поддерживается.
Выполните обновление до Microsoft Edge, чтобы воспользоваться новейшими функциями, обновлениями для системы безопасности и технической поддержкой.
В этой статье описывается настройка формата ORC в конвейере данных фабрики данных в Microsoft Fabric.
Формат ORC поддерживается для следующих действий и соединителей в качестве источника и назначения.
Категория | Соединитель или действие |
---|---|
Поддерживаемый соединитель | Amazon S3 |
Совместимая с Amazon S3 | |
Хранилище BLOB-объектов Azure | |
Azure Data Lake Storage 1-го поколения | |
Azure Data Lake Storage 2-го поколения | |
Файлы Azure | |
Файловая система | |
FTP | |
Google Cloud Storage | |
HTTP | |
Lakehouse Files | |
Хранилище Oracle Cloud | |
SFTP | |
Поддерживаемая активность | действие Copy (источник или назначение) |
Действие поиска | |
Действие получения метаданных в Фабрике данных Azure | |
Удаление действия с данными |
Чтобы настроить формат ORC, выберите подключение в исходном или целевом расположении действия копирования конвейера данных, а затем выберите ORC в раскрывающемся списке формата файла. Выберите параметры для дальнейшей настройки этого формата.
После выбора параметров в разделе "Формат файла" в диалоговом окне "Всплывающие параметры формата файла" отображаются следующие свойства.
После выбора параметров в диалоговом окне всплывающих параметров формата файла отображаются следующие свойства.
В разделе "Дополнительные параметры" на вкладке "Назначение " отображаются следующие свойства формата ORC.
<fileNamePrefix>_00000.<fileExtension>
. Если имя файла не указано, префикс имени файла создается автоматически. Это свойство не применяется, если источник является хранилищем на основе файлов или включенным параметром секции хранилища данных.Следующие свойства поддерживаются в разделе источника действия копирования при использовании формата ORC.
Имя | Описание | Значение | Обязательное поле | Свойство скрипта JSON |
---|---|---|---|---|
Формат файлов | Формат файла, который требуется использовать. | ORC | Да | type (under datasetSettings ):Орк |
Тип сжатия | Кодек сжатия, используемый для чтения файлов ORC. | Не допускается zlib живой |
No | orcCompressionCodec: ничего zlib snappy |
Следующие свойства поддерживаются в разделе назначения действия копирования при использовании формата ORC.
Имя | Описание | Значение | Обязательное поле | Свойство скрипта JSON |
---|---|---|---|---|
Формат файлов | Формат файла, который требуется использовать. | ORC | Да | type (under datasetSettings ):Орк |
Тип сжатия | Кодек сжатия, используемый для записи файлов ORC. | Не допускается zlib живой |
No | orcCompressionCodec: ничего zlib snappy |
Максимальное количество строк на файл | При записи данных в папку можно выбрать запись в несколько файлов и указать максимальные строки для каждого файла. Укажите максимальные строки, которые требуется записать для каждого файла. | <максимальное количество строк на файл> | No | maxRowsPerFile |
Префикс имени файла | Применимо, если настроены максимальные строки для каждого файла . Оно задает префикс, добавляемый к имени файла при записи данных с разбиением на несколько файлов. Имя присваивается по следующему шаблону: <fileNamePrefix>_00000.<fileExtension> . Если имя файла не указано, префикс имени файла создается автоматически. Это свойство не применяется, если источник является хранилищем на основе файлов или включенным параметром секции хранилища данных. |
<префикс имени файла> | No | fileNamePrefix |
События
Присоединяйтесь к нам в FabCon Vegas
31 мар., 23 - 2 апр., 23
Конечное событие Microsoft Fabric, Power BI, SQL и ai community. 31 марта по 2 апреля 2025 г.
Зарегистрироваться сегодняОбучение
Модуль
Использование конвейеров фабрики данных в Microsoft Fabric - Training
Использование конвейеров фабрики данных в Microsoft Fabric
Сертификация
Сертифицировано корпорацией Майкрософт: Связывание Инженер данных Fabric - Certifications
Специалист по обработке данных структуры должен иметь опыт работы с шаблонами загрузки данных, архитектурами данных и процессами оркестрации.