Справочник по данным мониторинга Фабрика данных Azure
В этой статье содержатся все справочные сведения о мониторинге для этой службы.
Дополнительные сведения о данных, которые можно собирать для Фабрика данных Azure и способах его использования, см. в разделе "Мониторинг фабрики данных".
Метрики
В этом разделе перечислены все автоматически собранные метрики платформы для этой службы. Эти метрики также являются частью глобального списка всех метрик платформы, поддерживаемых в Azure Monitor.
Сведения о хранении метрик см. в обзоре метрик Azure Monitor.
Поддерживаемые метрики для Microsoft.DataFactory/datafactory/datafactories
В следующей таблице перечислены метрики, доступные для типа ресурса Microsoft.DataFactory/datafactories.
- Все столбцы могут не присутствовать в каждой таблице.
- Некоторые столбцы могут находиться за пределами области просмотра страницы. Выберите "Развернуть таблицу ", чтобы просмотреть все доступные столбцы.
Заголовки таблиц
- Категория — группа метрик или классификация.
- Метрика — отображаемое имя метрик, как оно отображается в портал Azure.
- Имя в REST API — имя метрики, указанное в REST API.
- Единица измерения.
- Агрегирование — тип агрегирования по умолчанию. Допустимые значения: среднее (среднее), минимальное (минимальное), максимальное (максимальное), общее (сумма), число.
- Измерения - , доступные для метрики.
- Интервалы интервалов - времени, по которым выборка метрики выполняется. Например, указывает,
PT1Mчто метрика выборка выполняется каждую минуту, каждые 30 минут,PT30MPT1Hкаждый час и т. д. - Экспорт DS— можно ли экспортировать метрики в журналы Azure Monitor с помощью параметров диагностики. Сведения об экспорте метрик см. в статье "Создание параметров диагностики" в Azure Monitor.
| Метрика | Имя в REST API | Единица измерения | Агрегат | Измерения | Интервалы времени | Экспорт DS |
|---|---|---|---|---|---|---|
| циклы выполнения со сбоем; Неудачные выполнения |
FailedRuns |
Count | Total (Sum) | pipelineName, activityName |
PT1H | Да |
| успешные циклы выполнения. успешные циклы выполнения. |
SuccessfulRuns |
Count | Total (Sum) | pipelineName, activityName |
PT1H | Да |
Поддерживаемые метрики для Microsoft.DataFactory/фабрик
В следующей таблице перечислены метрики, доступные для типа ресурса Microsoft.DataFactory/фабрик.
- Все столбцы могут не присутствовать в каждой таблице.
- Некоторые столбцы могут находиться за пределами области просмотра страницы. Выберите "Развернуть таблицу ", чтобы просмотреть все доступные столбцы.
Заголовки таблиц
- Категория — группа метрик или классификация.
- Метрика — отображаемое имя метрик, как оно отображается в портал Azure.
- Имя в REST API — имя метрики, указанное в REST API.
- Единица измерения.
- Агрегирование — тип агрегирования по умолчанию. Допустимые значения: среднее (среднее), минимальное (минимальное), максимальное (максимальное), общее (сумма), число.
- Измерения - , доступные для метрики.
- Интервалы интервалов - времени, по которым выборка метрики выполняется. Например, указывает,
PT1Mчто метрика выборка выполняется каждую минуту, каждые 30 минут,PT30MPT1Hкаждый час и т. д. - Экспорт DS— можно ли экспортировать метрики в журналы Azure Monitor с помощью параметров диагностики. Сведения об экспорте метрик см. в статье "Создание параметров диагностики" в Azure Monitor.
| Метрика | Имя в REST API | Единица измерения | Агрегат | Измерения | Интервалы времени | Экспорт DS |
|---|---|---|---|---|---|---|
| Отмененное действие выполняет метрики Метрики отмены запусков действий |
ActivityCancelledRuns |
Count | Total (Sum) | ActivityType, , PipelineNameFailureTypeName |
PT1M | Да |
| Неудачное действие выполняет метрики Метрики сбоя при запуске действий |
ActivityFailedRuns |
Count | Total (Sum) | ActivityType, , PipelineNameFailureTypeName |
PT1M | Да |
| Успешные действия выполняют метрики Метрики успешных выполнений действий |
ActivitySucceededRuns |
Count | Total (Sum) | ActivityType, , PipelineNameFailureTypeName |
PT1M | Да |
| Ошибка времени ожидания времени ожидания задачи Airflow Integration Runtime Celery Ошибка времени ожидания времени ожидания задачи Airflow Integration Runtime Celery |
AirflowIntegrationRuntimeCeleryTaskTimeoutError |
Count | Total (Sum) | IntegrationRuntimeName |
PT1M | No |
| Среда выполнения интеграции Airflow собирает dags базы данных Среда выполнения интеграции Airflow собирает dags базы данных |
AirflowIntegrationRuntimeCollectDBDags |
Миллисекунды | По средней | IntegrationRuntimeName |
PT1M | No |
| Процент ЦП среды выполнения интеграции Airflow Процент ЦП среды выполнения интеграции Airflow |
AirflowIntegrationRuntimeCpuPercentage |
Процент | По средней | IntegrationRuntimeName, ContainerName |
PT1M | Да |
| Использование ЦП среды выполнения интеграции Airflow Использование ЦП среды выполнения интеграции Airflow |
AirflowIntegrationRuntimeCpuUsage |
Millicores | По средней | IntegrationRuntimeName, ContainerName |
PT1M | Да |
| Размер пакета dag для среды выполнения интеграции Airflow Размер пакета dag для среды выполнения интеграции Airflow |
AirflowIntegrationRuntimeDagBagSize |
Count | Total (Sum) | IntegrationRuntimeName |
PT1M | No |
| Исключения обратного вызова среды выполнения Airflow Исключения обратного вызова среды выполнения Airflow |
AirflowIntegrationRuntimeDagCallbackExceptions |
Count | Total (Sum) | IntegrationRuntimeName |
PT1M | No |
| Ошибка обновления файла DAG среды выполнения Airflow Ошибка обновления файла DAG среды выполнения Airflow |
AirflowIntegrationRuntimeDAGFileRefreshError |
Count | Total (Sum) | IntegrationRuntimeName |
PT1M | No |
| Ошибки импорта в среде выполнения интеграции Airflow Ошибки импорта в среде выполнения интеграции Airflow |
AirflowIntegrationRuntimeDAGProcessingImportErrors |
Count | Total (Sum) | IntegrationRuntimeName |
PT1M | No |
| Продолжительность обработки DAG среды выполнения интеграции Airflow Продолжительность обработки DAG среды выполнения интеграции Airflow |
AirflowIntegrationRuntimeDAGProcessingLastDuration |
Миллисекунды | По средней | IntegrationRuntimeName, DagFile |
PT1M | No |
| Среда выполнения интеграции Airflow DAG, обрабатывающая последний запуск секунды назад Среда выполнения интеграции Airflow DAG, обрабатывающая последний запуск секунды назад |
AirflowIntegrationRuntimeDAGProcessingLastRunSecondsAgo |
сек. | По средней | IntegrationRuntimeName, DagFile |
PT1M | No |
| Застои среды выполнения интеграции Airflow DAG ProcessingManager Застои среды выполнения интеграции Airflow DAG ProcessingManager |
AirflowIntegrationRuntimeDAGProcessingManagerStalls |
Count | Total (Sum) | IntegrationRuntimeName |
PT1M | No |
| Процессы обработки DAG среды выполнения интеграции Airflow Процессы обработки DAG среды выполнения интеграции Airflow |
AirflowIntegrationRuntimeDAGProcessingProcesses |
Count | Total (Sum) | IntegrationRuntimeName |
PT1M | No |
| Время ожидания обработчика обработки обработчика обработки airflow Integration Runtime Время ожидания обработчика обработки обработчика обработки airflow Integration Runtime |
AirflowIntegrationRuntimeDAGProcessingProcessorTimeouts |
сек. | По средней | IntegrationRuntimeName |
PT1M | No |
| Время синтаксического анализа среды выполнения интеграции Airflow Время синтаксического анализа среды выполнения интеграции Airflow |
AirflowIntegrationRuntimeDAGProcessingTotalParseTime |
сек. | По средней | IntegrationRuntimeName |
PT1M | No |
| Проверка зависимостей среды выполнения интеграции Airflow Проверка зависимостей среды выполнения интеграции Airflow |
AirflowIntegrationRuntimeDAGRunDependencyCheck |
Миллисекунды | По средней | IntegrationRuntimeName, DagId |
PT1M | No |
| Сбой выполнения daG среды выполнения Airflow Integration Runtime Сбой выполнения daG среды выполнения Airflow Integration Runtime |
AirflowIntegrationRuntimeDAGRunDurationFailed |
Миллисекунды | По средней | IntegrationRuntimeName, DagId |
PT1M | No |
| Успешное выполнение daG среды выполнения Airflow Integration Runtime Успешное выполнение daG среды выполнения Airflow Integration Runtime |
AirflowIntegrationRuntimeDAGRunDurationSuccess |
Миллисекунды | По средней | IntegrationRuntimeName, DagId |
PT1M | No |
| DaG среды выполнения интеграции Airflow запускает первую задержку планирования задач DaG среды выполнения интеграции Airflow запускает первую задержку планирования задач |
AirflowIntegrationRuntimeDAGRunFirstTaskSchedulingDelay |
Миллисекунды | По средней | IntegrationRuntimeName, DagId |
PT1M | No |
| Задержка расписания выполнения daG среды выполнения Airflow Integration Runtime Задержка расписания выполнения daG среды выполнения Airflow Integration Runtime |
AirflowIntegrationRuntimeDAGRunScheduleDelay |
Миллисекунды | По средней | IntegrationRuntimeName, DagId |
PT1M | No |
| Открытые слоты среды выполнения интеграции Airflow Открытые слоты среды выполнения интеграции Airflow |
AirflowIntegrationRuntimeExecutorOpenSlots |
Count | Total (Sum) | IntegrationRuntimeName |
PT1M | No |
| Задачи выполнения среды выполнения интеграции Airflow Задачи выполнения среды выполнения интеграции Airflow |
AirflowIntegrationRuntimeExecutorQueuedTasks |
Count | Total (Sum) | IntegrationRuntimeName |
PT1M | No |
| Выполнение задач выполнения среды выполнения интеграции Airflow Выполнение задач выполнения среды выполнения интеграции Airflow |
AirflowIntegrationRuntimeExecutorRunningTasks |
Count | Total (Sum) | IntegrationRuntimeName |
PT1M | No |
| Завершение задания среды выполнения интеграции Airflow Завершение задания среды выполнения интеграции Airflow |
AirflowIntegrationRuntimeJobEnd |
Count | Total (Sum) | IntegrationRuntimeName, Job |
PT1M | No |
| Сбой пульса среды выполнения интеграции Airflow Сбой пульса среды выполнения интеграции Airflow |
AirflowIntegrationRuntimeJobHeartbeatFailure |
Count | Total (Sum) | IntegrationRuntimeName, Job |
PT1M | No |
| Запуск задания среды выполнения интеграции Airflow Запуск задания среды выполнения интеграции Airflow |
AirflowIntegrationRuntimeJobStart |
Count | Total (Sum) | IntegrationRuntimeName, Job |
PT1M | No |
| Процент памяти среды выполнения интеграции Airflow Процент памяти среды выполнения интеграции Airflow |
AirflowIntegrationRuntimeMemoryPercentage |
Процент | По средней | IntegrationRuntimeName, ContainerName |
PT1M | Да |
| Использование памяти среды выполнения интеграции Airflow Использование памяти среды выполнения интеграции Airflow |
AirflowIntegrationRuntimeMemoryUsage |
Байт | По средней | IntegrationRuntimeName, ContainerName |
PT1M | Да |
| Число узлов среды выполнения интеграции Airflow Число узлов среды выполнения интеграции Airflow |
AirflowIntegrationRuntimeNodeCount |
Count | По средней | IntegrationRuntimeName, ComputeNodeSize |
PT1M | Да |
| Сбои оператора среды выполнения интеграции Airflow Сбои оператора среды выполнения интеграции Airflow |
AirflowIntegrationRuntimeOperatorFailures |
Count | Total (Sum) | IntegrationRuntimeName, Operator |
PT1M | No |
| Успешные успехи оператора среды выполнения интеграции Airflow Успешные успехи оператора среды выполнения интеграции Airflow |
AirflowIntegrationRuntimeOperatorSuccesses |
Count | Total (Sum) | IntegrationRuntimeName, Operator |
PT1M | No |
| Открытые слоты пула среды выполнения интеграции Airflow Открытые слоты пула среды выполнения интеграции Airflow |
AirflowIntegrationRuntimePoolOpenSlots |
Count | Total (Sum) | IntegrationRuntimeName, Pool |
PT1M | No |
| Слоты пула среды выполнения интеграции Airflow Слоты пула среды выполнения интеграции Airflow |
AirflowIntegrationRuntimePoolQueuedSlots |
Count | Total (Sum) | IntegrationRuntimeName, Pool |
PT1M | No |
| Пул среды выполнения интеграции Airflow с запущенным слотами Пул среды выполнения интеграции Airflow с запущенным слотами |
AirflowIntegrationRuntimePoolRunningSlots |
Count | Total (Sum) | IntegrationRuntimeName, Pool |
PT1M | No |
| Задачи нехватки пула среды выполнения интеграции Airflow Задачи нехватки пула среды выполнения интеграции Airflow |
AirflowIntegrationRuntimePoolStarvingTasks |
Count | Total (Sum) | IntegrationRuntimeName, Pool |
PT1M | No |
| Критически важный раздел планировщика среды выполнения интеграции Airflow Критически важный раздел планировщика среды выполнения интеграции Airflow |
AirflowIntegrationRuntimeSchedulerCriticalSectionBusy |
Count | Total (Sum) | IntegrationRuntimeName |
PT1M | No |
| Длительность критического раздела планировщика среды выполнения интеграции Airflow Длительность критического раздела планировщика среды выполнения интеграции Airflow |
AirflowIntegrationRuntimeSchedulerCriticalSectionDuration |
Миллисекунды | По средней | IntegrationRuntimeName |
PT1M | No |
| Сбой попыток отправки электронной почты в среде выполнения интеграции Airflow Сбой попыток отправки электронной почты в среде выполнения интеграции Airflow |
AirflowIntegrationRuntimeSchedulerFailedSLAEmailAttempts |
Count | Total (Sum) | IntegrationRuntimeName |
PT1M | No |
| Планировщик пульса планировщика среды выполнения интеграции Airflow Планировщик пульса планировщика среды выполнения интеграции Airflow |
AirflowIntegrationRuntimeSchedulerHeartbeat |
Count | Total (Sum) | IntegrationRuntimeName |
PT1M | No |
| Принятые задачи планировщика среды выполнения интеграции Airflow Принятые задачи планировщика среды выполнения интеграции Airflow |
AirflowIntegrationRuntimeSchedulerOrphanedTasksAdopted |
Count | Total (Sum) | IntegrationRuntimeName |
PT1M | No |
| Снятые задачи планировщика среды выполнения интеграции Airflow Снятые задачи планировщика среды выполнения интеграции Airflow |
AirflowIntegrationRuntimeSchedulerOrphanedTasksCleared |
Count | Total (Sum) | IntegrationRuntimeName |
PT1M | No |
| Исполняемые задачи планировщика среды выполнения интеграции Airflow Исполняемые задачи планировщика среды выполнения интеграции Airflow |
AirflowIntegrationRuntimeSchedulerTasksExecutable |
Count | Total (Sum) | IntegrationRuntimeName |
PT1M | No |
| Задачи планировщика среды выполнения интеграции Airflow, убитые внешним образом Задачи планировщика среды выполнения интеграции Airflow, убитые внешним образом |
AirflowIntegrationRuntimeSchedulerTasksKilledExternally |
Count | Total (Sum) | IntegrationRuntimeName |
PT1M | No |
| Выполнение задач планировщика среды выполнения интеграции Airflow Выполнение задач планировщика среды выполнения интеграции Airflow |
AirflowIntegrationRuntimeSchedulerTasksRunning |
Count | Total (Sum) | IntegrationRuntimeName |
PT1M | No |
| Задачи планировщика среды выполнения интеграции Airflow Задачи планировщика среды выполнения интеграции Airflow |
AirflowIntegrationRuntimeSchedulerTasksStarving |
Count | Total (Sum) | IntegrationRuntimeName |
PT1M | No |
| Запущенные экземпляры задач среды выполнения интеграции Airflow Запущенные экземпляры задач среды выполнения интеграции Airflow |
AirflowIntegrationRuntimeStartedTaskInstances |
Count | Total (Sum) | IntegrationRuntimeName, , DagIdTaskId |
PT1M | No |
| Экземпляр задачи среды выполнения airflow Integration Runtime, созданный с помощью оператора Экземпляр задачи среды выполнения airflow Integration Runtime, созданный с помощью оператора |
AirflowIntegrationRuntimeTaskInstanceCreatedUsingOperator |
Count | Total (Sum) | IntegrationRuntimeName, Operator |
PT1M | No |
| Длительность экземпляра задачи среды выполнения интеграции Airflow Длительность экземпляра задачи среды выполнения интеграции Airflow |
AirflowIntegrationRuntimeTaskInstanceDuration |
Миллисекунды | По средней | IntegrationRuntimeName, , DagIdTaskID |
PT1M | No |
| Сбои экземпляра задачи среды выполнения airflow Сбои экземпляра задачи среды выполнения airflow |
AirflowIntegrationRuntimeTaskInstanceFailures |
Count | Total (Sum) | IntegrationRuntimeName |
PT1M | No |
| Завершен экземпляр задачи среды выполнения интеграции Airflow Завершен экземпляр задачи среды выполнения интеграции Airflow |
AirflowIntegrationRuntimeTaskInstanceFinished |
Count | Total (Sum) | IntegrationRuntimeName, , DagIdTaskIdState |
PT1M | No |
| Экземпляр задачи среды выполнения интеграции Airflow ранее выполнен успешно Экземпляр задачи среды выполнения интеграции Airflow ранее выполнен успешно |
AirflowIntegrationRuntimeTaskInstancePreviouslySucceeded |
Count | Total (Sum) | IntegrationRuntimeName |
PT1M | No |
| Успешное выполнение задачи среды выполнения Airflow Успешное выполнение задачи среды выполнения Airflow |
AirflowIntegrationRuntimeTaskInstanceSuccesses |
Count | Total (Sum) | IntegrationRuntimeName |
PT1M | No |
| Задача среды выполнения интеграции Airflow удалена из DAG Задача среды выполнения интеграции Airflow удалена из DAG |
AirflowIntegrationRuntimeTaskRemovedFromDAG |
Count | Total (Sum) | IntegrationRuntimeName, DagId |
PT1M | No |
| Задача среды выполнения интеграции Airflow восстановлена в DAG Задача среды выполнения интеграции Airflow восстановлена в DAG |
AirflowIntegrationRuntimeTaskRestoredToDAG |
Count | Total (Sum) | IntegrationRuntimeName, DagId |
PT1M | No |
| Триггеры среды выполнения интеграции Airflow блокировали основной поток Триггеры среды выполнения интеграции Airflow блокировали основной поток |
AirflowIntegrationRuntimeTriggersBlockedMainThread |
Count | Total (Sum) | IntegrationRuntimeName |
PT1M | No |
| Сбой триггеров среды выполнения интеграции Airflow Сбой триггеров среды выполнения интеграции Airflow |
AirflowIntegrationRuntimeTriggersFailed |
Count | Total (Sum) | IntegrationRuntimeName |
PT1M | No |
| Запуск триггеров среды выполнения интеграции Airflow Запуск триггеров среды выполнения интеграции Airflow |
AirflowIntegrationRuntimeTriggersRunning |
Count | Total (Sum) | IntegrationRuntimeName |
PT1M | No |
| Триггеры среды выполнения интеграции Airflow успешно выполнены Триггеры среды выполнения интеграции Airflow успешно выполнены |
AirflowIntegrationRuntimeTriggersSucceeded |
Count | Total (Sum) | IntegrationRuntimeName |
PT1M | No |
| Задачи зомби среды выполнения интеграции Airflow Задачи зомби среды выполнения интеграции Airflow |
AirflowIntegrationRuntimeZombiesKilled |
Count | Total (Sum) | IntegrationRuntimeName |
PT1M | No |
| Общий размер фабрики (единица ГБ) Общий размер фабрики (ГБ) |
FactorySizeInGbUnits |
Count | Максимум | <none> | PT1M | Да |
| Доступная память среды выполнения интеграции Доступная память среды выполнения интеграции |
IntegrationRuntimeAvailableMemory |
Байт | По средней | IntegrationRuntimeName, NodeName |
PT1M | Да |
| Число доступных узлов среды выполнения интеграции Число доступных узлов среды выполнения интеграции |
IntegrationRuntimeAvailableNodeNumber |
Count | По средней | IntegrationRuntimeName |
PT1M | Да |
| Длительность очереди среды выполнения интеграции Длительность очереди среды выполнения интеграции |
IntegrationRuntimeAverageTaskPickupDelay |
сек. | По средней | IntegrationRuntimeName |
PT1M | Да |
| Использование ЦП среды выполнения интеграции Использование ЦП среды выполнения интеграции |
IntegrationRuntimeCpuPercentage |
Процент | По средней | IntegrationRuntimeName, NodeName |
PT1M | Да |
| Длина очереди среды выполнения интеграции Длина очереди среды выполнения интеграции |
IntegrationRuntimeQueueLength |
Count | По средней | IntegrationRuntimeName |
PT1M | Да |
| Максимальный допустимый размер фабрики (единица ГБ) Максимальный допустимый размер фабрики (ГБ) |
MaxAllowedFactorySizeInGbUnits |
Count | Максимум | <none> | PT1M | Да |
| Максимально допустимое число сущностей Максимально допустимое число сущностей |
MaxAllowedResourceCount |
Count | Максимум | <none> | PT1M | Да |
| Копирование доступной емкости среды выполнения интеграции MVNet Копирование доступной емкости среды выполнения интеграции MVNet |
MVNetIRCopyAvailableCapacityPCT |
Процент | Максимум | IntegrationRuntimeName |
PT1M | Да |
| Копирование использования емкости среды выполнения интеграции MVNet Копирование использования емкости среды выполнения интеграции MVNet |
MVNetIRCopyCapacityUtilization |
Процент | Максимум | IntegrationRuntimeName |
PT1M | Да |
| Копирование длины очереди ожидания среды выполнения интеграции MVNet Копирование длины очереди ожидания среды выполнения интеграции MVNet |
MVNetIRCopyWaitingQueueLength |
Count | По средней | IntegrationRuntimeName |
PT1M | Да |
| Процент внешней доступной емкости среды выполнения интеграции MVNet Процент внешней доступной емкости среды выполнения интеграции MVNet |
MVNetIRExternalAvailableCapacityPCT |
Процент | Максимум | IntegrationRuntimeName |
PT1M | Да |
| Использование внешней емкости среды выполнения интеграции MVNet Использование внешней емкости среды выполнения интеграции MVNet |
MVNetIRExternalCapacityUtilization |
Процент | Максимум | IntegrationRuntimeName |
PT1M | Да |
| Длина внешней очереди ожидания среды выполнения интеграции MVNet Длина внешней очереди ожидания среды выполнения интеграции MVNet |
MVNetIRExternalWaitingQueueLength |
Count | По средней | IntegrationRuntimeName |
PT1M | Да |
| Процент доступной емкости конвейера среды выполнения интеграции MVNet Процент доступной емкости конвейера среды выполнения интеграции MVNet |
MVNetIRPipelineAvailableCapacityPCT |
Процент | Максимум | IntegrationRuntimeName |
PT1M | Да |
| Использование емкости конвейера среды выполнения интеграции MVNet Использование емкости конвейера среды выполнения интеграции MVNet |
MVNetIRPipelineCapacityUtilization |
Процент | Максимум | IntegrationRuntimeName |
PT1M | Да |
| Длина очереди ожидания конвейера среды выполнения интеграции MVNet Длина очереди ожидания конвейера среды выполнения интеграции MVNet |
MVNetIRPipelineWaitingQueueLength |
Count | По средней | IntegrationRuntimeName |
PT1M | Да |
| Отмененный конвейер выполняет метрики Метрики отмены запусков конвейеров |
PipelineCancelledRuns |
Count | Total (Sum) | FailureType, , CancelledByName |
PT1M | Да |
| Истекшее время выполнения конвейера времени выполняет метрики Метрики затраченного времени для выполнений конвейеров |
PipelineElapsedTimeRuns |
Count | Total (Sum) | RunId, Name |
PT1M | Да |
| Сбой конвейера выполняет метрики Метрики сбоя при запуске конвейеров |
PipelineFailedRuns |
Count | Total (Sum) | FailureType, Name |
PT1M | Да |
| Успешный конвейер выполняет метрики Метрики успешных выполнений конвейеров |
PipelineSucceededRuns |
Count | Total (Sum) | FailureType, Name |
PT1M | Да |
| Общее число сущностей Общее число сущностей |
ResourceCount |
Count | Максимум | <none> | PT1M | Да |
| Отмененные метрики среды выполнения интеграции SSIS Метрики отмененного запуска среды выполнения служб SSIS |
SSISIntegrationRuntimeStartCancel |
Count | Total (Sum) | IntegrationRuntimeName |
PT1M | Да |
| Не удалось запустить метрики среды выполнения интеграции SSIS Метрики сбоя при запуске среды выполнения интеграции SSIS |
SSISIntegrationRuntimeStartFailed |
Count | Total (Sum) | IntegrationRuntimeName |
PT1M | Да |
| Успешные метрики среды выполнения интеграции SSIS Метрики успешного запуска SSIS Integration Runtime |
SSISIntegrationRuntimeStartSucceeded |
Count | Total (Sum) | IntegrationRuntimeName |
PT1M | Да |
| Застрявшие метрики среды выполнения интеграции SSIS Задержанные метрики остановки SSIS Integration Runtime |
SSISIntegrationRuntimeStopStuck |
Count | Total (Sum) | IntegrationRuntimeName |
PT1M | Да |
| Успешные метрики среды выполнения интеграции SSIS Метрики успешного запуска SSIS Integration Runtime |
SSISIntegrationRuntimeStopSucceeded |
Count | Total (Sum) | IntegrationRuntimeName |
PT1M | Да |
| Отмененные метрики выполнения пакета служб SSIS Метрики отмены выполнения пакета служб SSIS |
SSISPackageExecutionCancel |
Count | Total (Sum) | IntegrationRuntimeName |
PT1M | Да |
| Неудачные метрики выполнения пакета SSIS Метрики сбоя при выполнении пакетов SSIS |
SSISPackageExecutionFailed |
Count | Total (Sum) | IntegrationRuntimeName |
PT1M | Да |
| Метрики выполнения пакета SSIS успешно выполнено Метрики успешного выполнения пакетов SSIS |
SSISPackageExecutionSucceeded |
Count | Total (Sum) | IntegrationRuntimeName |
PT1M | Да |
| Отмененный триггер запускает метрики Метрики отмены запусков триггеров |
TriggerCancelledRuns |
Count | Total (Sum) | Name, FailureType |
PT1M | Да |
| Сбой триггера запускает метрики Метрики сбоя при запуске триггеров |
TriggerFailedRuns |
Count | Total (Sum) | Name, FailureType |
PT1M | Да |
| Успешный триггер запускает метрики Метрики успешных выполнений триггеров |
TriggerSucceededRuns |
Count | Total (Sum) | Name, FailureType |
PT1M | Да |
Примечание.
За исключением PipelineElapsedTimeRuns, выдаются только события из завершенных, активированных действий и запусков конвейера. Выполняющиеся и отладочные запуски не создаются. Однако события из всех выполнений пакетов служб SSIS создаются, включая те, которые завершены и выполняются независимо от методов вызова. Например, можно вызывать выполнение пакетов в SQL Server Data Tools с поддержкой Azure с помощью T-SQL в SQL Server Management Studio, агента SQL Server или других назначенных средств, а также в качестве активированных триггером или отладочных запусков действий по выполнению пакетов служб SSIS в конвейерах Фабрики данных.
Измерения метрик
Дополнительные сведения о измерениях метрик см. в разделе "Многомерные метрики".
Эта служба имеет следующие измерения, связанные с ее метриками.
Microsoft.DataFactory/datafactories
- pipelineName
- activityName
Microsoft.DataFactory/factories;
- ActivityType
- PipelineName
- FailureType
- Имя.
- IntegrationRuntimeName
- ContainerName
- DagFile
- DagId
- ComputeNodeSize
- Работа
- Оператор
- Пул
- TaskId
- Штат
- NodeName
- ОтмененоBy
- RunId
Журналы ресурсов
В этом разделе перечислены типы журналов ресурсов, которые можно собирать для этой службы. Раздел извлекает из списка всех типов категорий журналов ресурсов, поддерживаемых в Azure Monitor.
Поддерживаемые журналы ресурсов для Microsoft.DataFactory/фабрик
| Категория | Отображаемое имя категории | Таблица журналов | Поддерживает базовый план журнала | Поддерживает преобразование времени приема | Примеры запросов | Затраты на экспорт |
|---|---|---|---|---|---|---|
ActivityRuns |
Журнал выполнения действий конвейера | ADFActivityRun | No | Да | Запросы | No |
AirflowDagProcessingLogs |
Журналы обработки DAG AirFlow | AirflowDagProcessingLogs Журналы обработки dag ADF Airflow |
No | Да | Да | |
AirflowSchedulerLogs |
Журналы планировщика AirFlow | ADFAirflowSchedulerLogs Журналы планировщика воздушных потоков ADF |
No | Да | Да | |
AirflowTaskLogs |
Журналы выполнения задач AirFlow | ADFAirflowTaskLogs Журналы задач ADF Airflow |
No | Да | Да | |
AirflowWebLogs |
Веб-журналы AirFlow | ADFAirflowWebLogs Веб-журналы ADF Airflow |
No | Да | Да | |
AirflowWorkerLogs |
Журналы рабочих ролей AirFlow | ADFAirflowWorkerLogs Журналы рабочих ролей ADF Airflow |
No | Да | Да | |
PipelineRuns |
Журнал запусков конвейера | ADFPipelineRun | No | Да | Запросы | No |
SandboxActivityRuns |
Журнал выполнения действий Sandbox | ADFSandboxActivityRun | No | Да | Да | |
SandboxPipelineRuns |
Журнал запусков конвейера Sandbox | ADFSandboxPipelineRun | No | Да | Да | |
SSISIntegrationRuntimeLogs |
Журналы среды выполнения интеграции SSIS | ADFSSISIntegrationRuntimeLogs Журналы среды выполнения интеграции ADF SSIS |
No | Да | Нет | |
SSISPackageEventMessageContext |
Контекст сообщений о событиях пакета служб SSIS | ADFSSISPackageEventMessageContext Контекст сообщения о событии выполнения пакета SDF SSIS |
No | Да | Нет | |
SSISPackageEventMessages |
Сообщения о событиях пакета служб SSIS | ADFSSISPackageEventMessagesages Сообщения о событии выполнения пакета ADF SSIS |
No | Да | Нет | |
SSISPackageExecutableStatistics |
Статистика исполняемых файлов пакета служб SSIS | ADFSSISPackageExecutableStatistics Статистика выполнения исполняемого файла пакета ADF SSIS |
No | Да | Нет | |
SSISPackageExecutionComponentPhases |
Этапы компонентов выполнения пакетов служб SSIS | ADFSSISPackageExecutionComponentPhases Этапы выполнения пакета ADF SSIS |
No | Да | Нет | |
SSISPackageExecutionDataStatistics |
Статистика данных выполнения пакетов служб SSIS | ADFSSISPackageExecutionDataStatistics Статистика выполнения пакета ADF SSIS |
No | Да | Нет | |
TriggerRuns |
Журнал запусков триггера | ADFTriggerRun | No | Да | Запросы | No |
Таблицы журналов Azure Monitor
В этом разделе перечислены таблицы журналов Azure Monitor, относящиеся к этой службе, которые доступны для запроса Log Analytics с помощью запросов Kusto. Таблицы содержат данные журнала ресурсов и, возможно, больше в зависимости от собираемых и перенаправленных к ним данных.
Фабрики данных
Microsoft.DataFactory/factories;
- AzureActivity
- AzureMetrics
- AzureDiagnostics
- ADFActivityRun
- ADFPipelineRun
- ADFTriggerRun
- ADFSandboxActivityRun
- ADFSandboxPipelineRun
- ADFSSISIntegrationRuntimeLogs
- ADFSSISPackageEventMessageContext
- ADFSSISPackageEventMessagesages
- ADFSSISPackageExecutableStatistics
- ADFSSISPackageExecutionComponentPhases
- ADFSSISPackageExecutionDataStatistics
Мониторинг и схемы Log Analytics для журналов и событий
В этом разделе перечислены атрибуты, используемые схемами Azure Monitor и Log Analytics для мониторинга журналов и событий.
Log Analytics наследует схему от Azure Monitor со следующими исключениями:
Первая буква в имени каждого столбца задается прописной буквой. Например, корреляция имен столбцов в Monitor — CorrelationId в Log Analytics.
Нет столбца level.
Столбец динамических свойств сохраняется в виде следующего динамического типа BLOB-объекта JSON.
Столбец Azure Monitor Столбец Log Analytics Тип $.properties.UserProperties UserProperties Динамический $.properties.Annotations Заметки Динамический $.properties.Input Входные данные Динамический $.properties.Output Выходные данные Динамический $.properties.Error.errorCode ErrorCode INT $.properties.Error.message ErrorMessage строка $.properties.Error Ошибка Динамический $.properties.Predecessors Предшественники Динамический $.properties.Parameters Параметры Динамический $.properties.SystemParameters SystemParameters Динамический $.properties.Tags Теги Динамический
Атрибуты журналов выполнения действий
{
"Level": "",
"correlationId":"",
"time":"",
"activityRunId":"",
"pipelineRunId":"",
"resourceId":"",
"category":"ActivityRuns",
"level":"Informational",
"operationName":"",
"pipelineName":"",
"activityName":"",
"start":"",
"end":"",
"properties":
{
"Input": "{
"source": {
"type": "BlobSource"
},
"sink": {
"type": "BlobSink"
}
}",
"Output": "{"dataRead":121,"dataWritten":121,"copyDuration":5,
"throughput":0.0236328132,"errors":[]}",
"Error": "{
"errorCode": "null",
"message": "null",
"failureType": "null",
"target": "CopyBlobtoBlob"
}
}
}
| Свойство | Type | Описание | Пример |
|---|---|---|---|
| Уровень | Строка | Уровень журналов диагностики. Для журналов выполнения действий задайте для этого свойства значение 4. | 4 |
| correlationId | Строка | Уникальный идентификатор для отслеживания конкретного запроса. | aaaa0000-bb11-2222-33cc-444444dddddd |
| time | Строка | Время возникновения события в формате UTCYYYY-MM-DDTHH:MM:SS.00000Z. |
2017-06-28T21:00:27.3534352Z |
| activityRunId | Строка | Идентификатор выполнения действия. | 3a171e1f-b36e-4b80-8a54-5625394f4354 |
| pipelineRunId | Строка | Идентификатор выполнения конвейера. | 9f6069d6-e522-4608-9f99-21807bfc3c70 |
| resourceId | Строка | Идентификатор, связанный с ресурсом фабрики данных. | /SUBSCRIPTIONS/<subID>/RESOURCEGROUPS/<resourceGroupName>/PROVIDERS/MICROSOFT.DATAFACTORY/FACTORIES/<dataFactoryName> |
| category | Строка | Категория журналов диагностики. В качестве значения свойства задайте ActivityRuns. |
ActivityRuns |
| level | Строка | Уровень журналов диагностики. В качестве значения свойства задайте Informational. |
Informational |
| operationName | Строка | Имя действия и его статус. Если действие является начальным пульсом, значение свойства равно MyActivity -. Если действие является конечным пульсом, значение свойства равно MyActivity - Succeeded. |
MyActivity - Succeeded |
| pipelineName | Строка | Имя конвейера. | MyPipeline |
| activityName | Строка | Имя действия. | MyActivity |
| Начало | Строка | Время начала выполнения действия в формате UTC. | 2017-06-26T20:55:29.5007959Z |
| end | Строка | Время окончания выполнения действия в формате UTC. Если в журнале диагностики указано, что действие началось, но еще не завершено, свойство имеет значение 1601-01-01T00:00:00Z. |
2017-06-26T20:55:29.5007959Z |
Атрибуты журналов выполнения конвейеров
{
"Level": "",
"correlationId":"",
"time":"",
"runId":"",
"resourceId":"",
"category":"PipelineRuns",
"level":"Informational",
"operationName":"",
"pipelineName":"",
"start":"",
"end":"",
"status":"",
"location": "",
"properties":
{
"Parameters": {
"<parameter1Name>": "<parameter1Value>"
},
"SystemParameters": {
"ExecutionStart": "",
"TriggerId": "",
"SubscriptionId": ""
},
"Predecessors": [
{
"Name": "",
"Id": "",
"InvokedByType": ""
}
]
}
}
| Свойство | Type | Описание | Пример |
|---|---|---|---|
| Уровень | Строка | Уровень журналов диагностики. Для журналов выполнения действий задайте для этого свойства значение 4. | 4 |
| correlationId | Строка | Уникальный идентификатор для отслеживания конкретного запроса. | aaaa0000-bb11-2222-33cc-444444dddddd |
| time | Строка | Время возникновения события в формате UTCYYYY-MM-DDTHH:MM:SS.00000Z. |
2017-06-28T21:00:27.3534352Z |
| runId | Строка | Идентификатор выполнения конвейера. | 9f6069d6-e522-4608-9f99-21807bfc3c70 |
| resourceId | Строка | Идентификатор, связанный с ресурсом фабрики данных. | /SUBSCRIPTIONS/<subID>/RESOURCEGROUPS/<resourceGroupName>/PROVIDERS/MICROSOFT.DATAFACTORY/FACTORIES/<dataFactoryName> |
| category | Строка | Категория журналов диагностики. В качестве значения свойства задайте PipelineRuns. |
PipelineRuns |
| level | Строка | Уровень журналов диагностики. В качестве значения свойства задайте Informational. |
Informational |
| operationName | Строка | Имя конвейера и его состояние. По завершении выполнения конвейера свойство имеет значение Pipeline - Succeeded. |
MyPipeline - Succeeded. |
| pipelineName | Строка | Имя конвейера. | MyPipeline |
| Начало | Строка | Время начала выполнения действия в формате UTC. | 2017-06-26T20:55:29.5007959Z. |
| end | Строка | Время окончания выполнения действия в формате UTC. Если в журнале диагностики указано, что действие началось, но еще не завершено, свойство имеет значение 1601-01-01T00:00:00Z. |
2017-06-26T20:55:29.5007959Z |
| состояние | Строка | Конечное состояние выполнения конвейера. Возможны значения свойства Succeeded и Failed. |
Succeeded |
| расположение | Строка | Регион Azure для выполнения конвейера. | eastasia |
| predecessors | Строка | Вызывающий объект конвейера с идентификатором. | Manual |
Атрибуты журналов запуска триггеров
{
"Level": "",
"correlationId":"",
"time":"",
"triggerId":"",
"resourceId":"",
"category":"TriggerRuns",
"level":"Informational",
"operationName":"",
"triggerName":"",
"triggerType":"",
"triggerEvent":"",
"start":"",
"status":"",
"properties":
{
"Parameters": {
"TriggerTime": "",
"ScheduleTime": ""
},
"SystemParameters": {}
}
}
| Свойство | Type | Описание | Пример |
|---|---|---|---|
| Уровень | Строка | Уровень журналов диагностики. Для журналов выполнения действий задайте для этого свойства значение 4. | 4 |
| correlationId | Строка | Уникальный идентификатор для отслеживания конкретного запроса. | aaaa0000-bb11-2222-33cc-444444dddddd |
| time | Строка | Время возникновения события в формате UTCYYYY-MM-DDTHH:MM:SS.00000Z. |
2017-06-28T21:00:27.3534352Z |
| triggerId | Строка | Идентификатор запуска триггера. | 08587023010602533858661257311 |
| resourceId | Строка | Идентификатор, связанный с ресурсом фабрики данных. | /SUBSCRIPTIONS/<subID>/RESOURCEGROUPS/<resourceGroupName>/PROVIDERS/MICROSOFT.DATAFACTORY/FACTORIES/<dataFactoryName> |
| category | Строка | Категория журналов диагностики. В качестве значения свойства задайте PipelineRuns. |
PipelineRuns |
| level | Строка | Уровень журналов диагностики. В качестве значения свойства задайте Informational. |
Informational |
| operationName | Строка | Имя и окончательное состояние триггера, которое указывает, успешно ли запущен триггер. Если пульс был успешным, свойство принимает значение MyTrigger - Succeeded. |
MyTrigger - Succeeded |
| triggerName | Строка | Имя триггера. | MyTrigger |
| triggerType | Строка | Тип триггера. Возможны значения свойства Manual Trigger и Schedule Trigger. |
ScheduleTrigger |
| triggerEvent | Строка | Событие триггера. | ScheduleTime - 2017-07-06T01:50:25Z |
| Начало | Строка | Время начала срабатывания триггера в формате UTC. | 2017-06-26T20:55:29.5007959Z |
| состояние | Строка | Конечное состояние, показывающее, успешно ли был вызван триггер. Возможны значения свойства Succeeded и Failed. |
Succeeded |
Журналы среды выполнения интеграции SSIS
Ниже приведены атрибуты журнала для операций запуска, остановки и обслуживания (IR) среды выполнения интеграции SQL Server Integration Services (SSIS).
{
"time": "",
"operationName": "",
"category": "",
"correlationId": "",
"dataFactoryName": "",
"integrationRuntimeName": "",
"level": "",
"resultType": "",
"properties": {
"message": ""
},
"resourceId": ""
}
| Свойство | Type | Описание | Пример |
|---|---|---|---|
| time | Строка | Время события в формате UTC: YYYY-MM-DDTHH:MM:SS.00000Z |
2017-06-28T21:00:27.3534352Z |
| operationName | Строка | Имя операции IR SSIS | Start/Stop/Maintenance/Heartbeat |
| category | Строка | Категория журналов диагностики | SSISIntegrationRuntimeLogs |
| correlationId | Строка | Уникальный идентификатор для отслеживания конкретного запроса | f13b159b-515f-4885-9dfa-a664e949f785Deprovision0059035558 |
| dataFactoryName | Строка | Имя вашей фабрики данных. | MyADFv2 |
| integrationRuntimeName | Строка | Имя IR служб SSIS | MySSISIR |
| level | Строка | Уровень журналов диагностики | Informational |
| resultType | Строка | Результат работы IR SSIS | Started/InProgress/Succeeded/Failed/Healthy/Unhealthy |
| message | Строка | Результат работы IR SSIS | The stopping of your SSIS integration runtime has succeeded. |
| resourceId | Строка | Уникальный идентификатор вашего ресурса фабрики данных. | /SUBSCRIPTIONS/<subscriptionID>/RESOURCEGROUPS/<resourceGroupName>/PROVIDERS/MICROSOFT.DATAFACTORY/FACTORIES/<dataFactoryName> |
Атрибуты журнала контекста сообщения о событиях SSIS
Ниже приведены атрибуты журнала условий, связанные с сообщениями о событиях, создаваемыми при выполнении пакетов IR SSIS. Они сообщают подобную информацию в виде таблицы или представления контекста сообщений о событиях в каталоге служб SSIS (SSISDB), отображающих значения времени выполнения многих свойств пакета служб SSIS. Они создаются при выборе уровня ведения журнала Basic/Verbose и удобны для отладки или проверки соответствия.
{
"time": "",
"operationName": "",
"category": "",
"correlationId": "",
"dataFactoryName": "",
"integrationRuntimeName": "",
"level": "",
"properties": {
"operationId": "",
"contextDepth": "",
"packagePath": "",
"contextType": "",
"contextSourceName": "",
"contextSourceId": "",
"propertyName": "",
"propertyValue": ""
},
"resourceId": ""
}
| Свойство | Type | Описание | Пример |
|---|---|---|---|
| time | Строка | Время события в формате UTC: YYYY-MM-DDTHH:MM:SS.00000Z |
2017-06-28T21:00:27.3534352Z |
| operationName | Строка | Установите значение YourSSISIRName-SSISPackageEventMessageContext |
mysqlmissisir-SSISPackageEventMessageContext |
| category | Строка | Категория журналов диагностики | SSISPackageEventMessageContext |
| correlationId | Строка | Уникальный идентификатор для отслеживания конкретного запроса | bbbb1111-cc22-3333-44dd-555555eeeeee |
| dataFactoryName | Строка | Имя вашей фабрики данных. | MyADFv2 |
| integrationRuntimeName | Строка | Имя IR служб SSIS | MySSISIR |
| level | Строка | Уровень журналов диагностики | Informational |
| operationId | Строка | Уникальный идентификатор для отслеживания конкретного запроса в SSISDB | 1 (1 означает операции, связанные с пакетами, которые не хранятся в SSISDB или вызываются через T-SQL.) |
| contextDepth | Строка | Глубина контекста сообщения о событии | 0 (0 означает контекст перед началом выполнения пакета, 1 означает контекст при возникновении ошибки и увеличивается по мере того, как контекст удаляется от ошибки.) |
| packagePath | Строка | Путь к объекту пакета в качестве источника контекста сообщения о событии | \Package |
| contextType | Строка | Тип объекта пакета в качестве источника контекста сообщения о событии | 60 (См. дополнительные типы контекста.) |
| contextSourceName | Строка | Имя объекта пакета в качестве источника контекста сообщения о событии | MyPackage |
| contextSourceName | Строка | Уникальный идентификатор объекта пакета в качестве источника контекста сообщения о событии | {E2CF27FB-EA48-41E9-AF6F-3FE938B4ADE1} |
| propertyName | Строка | Имя свойства пакета в качестве источника контекста сообщения о событии | DelayValidation |
| PropertyValue | Строка | Значение свойства пакета в качестве источника контекста сообщения о событии | False |
| resourceId | Строка | Уникальный идентификатор вашего ресурса фабрики данных. | /SUBSCRIPTIONS/<subscriptionID>/RESOURCEGROUPS/<resourceGroupName>/PROVIDERS/MICROSOFT.DATAFACTORY/FACTORIES/<dataFactoryName> |
Атрибуты журнала сообщений о событиях служб SSIS
Ниже приведены атрибуты журнала сообщений о событиях, создаваемых при выполнении пакетов IR служб SSIS. Они предоставляют аналогичные сведения в таблице или сообщениях о событиях SSISDB, в которых показан подробный текст или метаданные сообщений о событиях. Они создаются на любом уровне ведения журнала, за исключением None.
{
"time": "",
"operationName": "",
"category": "",
"correlationId": "",
"dataFactoryName": "",
"integrationRuntimeName": "",
"level": "",
"properties": {
"operationId": "",
"messageTime": "",
"messageType": "",
"messageSourceType": "",
"message": "",
"packageName": "",
"eventName": "",
"messageSourceName": "",
"messageSourceId": "",
"subcomponentName": "",
"packagePath": "",
"executionPath": "",
"threadId": ""
}
}
| Свойство | Type | Описание | Пример |
|---|---|---|---|
| time | Строка | Время события в формате UTC: YYYY-MM-DDTHH:MM:SS.00000Z |
2017-06-28T21:00:27.3534352Z |
| operationName | Строка | Установите значение YourSSISIRName-SSISPackageEventMessages |
mysqlmissisir-SSISPackageEventMessages |
| category | Строка | Категория журналов диагностики | SSISPackageEventMessages |
| correlationId | Строка | Уникальный идентификатор для отслеживания конкретного запроса | bbbb1111-cc22-3333-44dd-555555eeeeee |
| dataFactoryName | Строка | Имя вашей фабрики данных. | MyADFv2 |
| integrationRuntimeName | Строка | Имя IR служб SSIS | MySSISIR |
| level | Строка | Уровень журналов диагностики | Informational |
| operationId | Строка | Уникальный идентификатор для отслеживания конкретного запроса в SSISDB | 1 (1 означает операции, связанные с пакетами, которые не хранятся в SSISDB или вызываются через T-SQL.) |
| messageTime | Строка | Время создания сообщения о событии в формате UTC | 2017-06-28T21:00:27.3534352Z |
| MessageType | Строка | Тип сообщения о событии | 70 (См. дополнительные типы сообщений.) |
| MessageSourceType | Строка | Тип источника сообщения о событии | 20 (См. дополнительные типы источников сообщений.) |
| message | Строка | Текст сообщения о событии | MyPackage:Validation has started. |
| PackageName | Строка | Имя выполненного файла пакета | MyPackage.dtsx |
| eventName | Строка | Имя связанного события времени выполнения | OnPreValidate |
| messageSourceName | Строка | Имя компонента пакета в качестве источника сообщения о событии | Data Flow Task |
| messageSourceName | Строка | Уникальный идентификатор компонента пакета в качестве источника сообщения о событии | {1a45a5a4-3df9-4f02-b818-ebf583829ad2} |
| subcomponentName | Строка | Имя компонента потока данных в качестве источника сообщения о событии | SSIS.Pipeline |
| packagePath | Строка | Путь к объекту пакета в качестве источника сообщения о событии | \Package\Data Flow Task |
| executionPath | Строка | Полный путь от родительского пакета к выполненному компоненту | \Transformation\Data Flow Task (По этому пути также записываются итерации компонента.) |
| threadId | Строка | Уникальный идентификатор потока, выполняемого при занесении в журнал сообщения о событии | {1a45a5a4-3df9-4f02-b818-ebf583829ad2} |
Атрибуты журнала статистики исполняемых объектов служб SSIS
Ниже приведены атрибуты журнала статистики исполняемых объектов, создаваемые выполнениями пакетов служб SSIS для IR служб SSIS, где исполняемые объекты — это контейнеры или задачи в потоке управления пакетами. Они сообщают подобную информацию в виде таблицы или представления статистики исполняемых объектов SSISDB, которая показывает строку для каждого выполняемого исполняемого файла, включая его итерации. Они создаются на любом уровне ведения журнала, кроме None, и полезны для выявления узких мест или сбоев на уровне задач.
{
"time": "",
"operationName": "",
"category": "",
"correlationId": "",
"dataFactoryName": "",
"integrationRuntimeName": "",
"level": "",
"properties": {
"executionId": "",
"executionPath": "",
"startTime": "",
"endTime": "",
"executionDuration": "",
"executionResult": "",
"executionValue": ""
},
"resourceId": ""
}
| Свойство | Type | Описание | Пример |
|---|---|---|---|
| time | Строка | Время события в формате UTC: YYYY-MM-DDTHH:MM:SS.00000Z |
2017-06-28T21:00:27.3534352Z |
| operationName | Строка | Установите значение YourSSISIRName-SSISPackageExecutableStatistics |
mysqlmissisir-SSISPackageExecutableStatistics |
| category | Строка | Категория журналов диагностики | SSISPackageExecutableStatistics |
| correlationId | Строка | Уникальный идентификатор для отслеживания конкретного запроса | bbbb1111-cc22-3333-44dd-555555eeeeee |
| dataFactoryName | Строка | Имя вашей фабрики данных. | MyADFv2 |
| integrationRuntimeName | Строка | Имя IR служб SSIS | MySSISIR |
| level | Строка | Уровень журналов диагностики | Informational |
| executionId | Строка | Уникальный идентификатор для отслеживания выполнения в SSISDB | 1 (1 означает выполнения, связанные с пакетами, которые не хранятся в SSISDB или вызываются через T-SQL.) |
| executionPath | Строка | Полный путь от родительского пакета к выполненному компоненту | \Transformation\Data Flow Task (По этому пути также записываются итерации компонента.) |
| startTime | Строка | Время, когда исполняемый объект входит в этап перед выполнением в формате UTC | 2017-06-28T21:00:27.3534352Z |
| endTime | Строка | Время, когда исполняемый объект входит в этап после выполнения в формате UTC | 2017-06-28T21:00:27.3534352Z |
| executionDuration | Строка | Время выполнения исполняемого файла в миллисекундах | 1,125 |
| executionResult | Строка | Результат выполнения исполняемого файла | 0 (0 означает успех, 1 — сбой, 2 — завершение, а 3 — отмену.) |
| ExecutionValue | Строка | Определяемое пользователем значение, возвращаемое выполняемым исполняемым файлом | 1 |
| resourceId | Строка | Уникальный идентификатор вашего ресурса фабрики данных. | /SUBSCRIPTIONS/<subscriptionID>/RESOURCEGROUPS/<resourceGroupName>/PROVIDERS/MICROSOFT.DATAFACTORY/FACTORIES/<dataFactoryName> |
Атрибуты журнала фаз исполняемого компонента служб SSIS
Ниже приведены атрибуты журнала статистики времени выполнения для компонентов потока данных, созданных при выполнении пакетов SSIS в IR служб SSIS. Они представляют подобную информацию в виде таблицы или представления этапов выполнения SSISDB, которые показывают время, затраченное компонентами потока данных на все этапы выполнения. Они создаются при выборе уровня ведения журнала Performance/Verbose и удобны для сбора статистики выполнения потока данных.
{
"time": "",
"operationName": "",
"category": "",
"correlationId": "",
"dataFactoryName": "",
"integrationRuntimeName": "",
"level": "",
"properties": {
"executionId": "",
"packageName": "",
"taskName": "",
"subcomponentName": "",
"phase": "",
"startTime": "",
"endTime": "",
"executionPath": ""
},
"resourceId": ""
}
| Свойство | Type | Описание | Пример |
|---|---|---|---|
| time | Строка | Время события в формате UTC: YYYY-MM-DDTHH:MM:SS.00000Z |
2017-06-28T21:00:27.3534352Z |
| operationName | Строка | Установите значение YourSSISIRName-SSISPackageExecutionComponentPhases |
mysqlmissisir-SSISPackageExecutionComponentPhases |
| category | Строка | Категория журналов диагностики | SSISPackageExecutionComponentPhases |
| correlationId | Строка | Уникальный идентификатор для отслеживания конкретного запроса | bbbb1111-cc22-3333-44dd-555555eeeeee |
| dataFactoryName | Строка | Имя вашей фабрики данных. | MyADFv2 |
| integrationRuntimeName | Строка | Имя IR служб SSIS | MySSISIR |
| level | Строка | Уровень журналов диагностики | Informational |
| executionId | Строка | Уникальный идентификатор для отслеживания выполнения в SSISDB | 1 (1 означает выполнения, связанные с пакетами, которые не хранятся в SSISDB или вызываются через T-SQL.) |
| PackageName | Строка | Имя выполненного файла пакета | MyPackage.dtsx |
| taskName | Строка | Имя задачи потока данных | Data Flow Task |
| subcomponentName | Строка | Имя компонента потока данных | Derived Column |
| phase | Строка | Имя этапа выполнения | AcquireConnections |
| startTime | Строка | Время начала этапа выполнения в формате UTC | 2017-06-28T21:00:27.3534352Z |
| endTime | Строка | Время окончания этапа выполнения в формате UTC | 2017-06-28T21:00:27.3534352Z |
| executionPath | Строка | Путь выполнения задачи потока данных | \Transformation\Data Flow Task |
| resourceId | Строка | Уникальный идентификатор вашего ресурса фабрики данных. | /SUBSCRIPTIONS/<subscriptionID>/RESOURCEGROUPS/<resourceGroupName>/PROVIDERS/MICROSOFT.DATAFACTORY/FACTORIES/<dataFactoryName> |
Атрибуты журнала статистики данных выполнения SSIS
Ниже приведены атрибуты журнала перемещений данных через каждый участок конвейеров потоков данных от вышестоящих до нижестоящих компонентов, которые создаются при выполнении пакетов SSIS в IR служб SSIS. Они сообщают подобную информацию в виде таблицы или представления статистики данных выполнения SSISDB, показывающих количество строк данных, перемещаемых с помощью задач потока данных. Они создаются при выборе уровня ведения журнала Verbose и удобны для вычисления пропускной способности потока данных.
{
"time": "",
"operationName": "",
"category": "",
"correlationId": "",
"dataFactoryName": "",
"integrationRuntimeName": "",
"level": "",
"properties": {
"executionId": "",
"packageName": "",
"taskName": "",
"dataflowPathIdString": "",
"dataflowPathName": "",
"sourceComponentName": "",
"destinationComponentName": "",
"rowsSent": "",
"createdTime": "",
"executionPath": ""
},
"resourceId": ""
}
| Свойство | Type | Описание | Пример |
|---|---|---|---|
| time | Строка | Время события в формате UTC: YYYY-MM-DDTHH:MM:SS.00000Z |
2017-06-28T21:00:27.3534352Z |
| operationName | Строка | Установите значение YourSSISIRName-SSISPackageExecutionDataStatistics |
mysqlmissisir-SSISPackageExecutionDataStatistics |
| category | Строка | Категория журналов диагностики | SSISPackageExecutionDataStatistics |
| correlationId | Строка | Уникальный идентификатор для отслеживания конкретного запроса | bbbb1111-cc22-3333-44dd-555555eeeeee |
| dataFactoryName | Строка | Имя вашей фабрики данных. | MyADFv2 |
| integrationRuntimeName | Строка | Имя IR служб SSIS | MySSISIR |
| level | Строка | Уровень журналов диагностики | Informational |
| executionId | Строка | Уникальный идентификатор для отслеживания выполнения в SSISDB | 1 (1 означает выполнения, связанные с пакетами, которые не хранятся в SSISDB или вызываются через T-SQL.) |
| PackageName | Строка | Имя выполненного файла пакета | MyPackage.dtsx |
| taskName | Строка | Имя задачи потока данных | Data Flow Task |
| dataflowPathIdString | Строка | Уникальный идентификатор для отслеживания пути потока данных | Paths[SQLDB Table3.ADO NET Source Output] |
| dataflowPathName | Строка | Имя пути потока данных | ADO NET Source Output |
| sourceComponentName | Строка | Имя компонента потока данных, который отправляет данные | SQLDB Table3 |
| destinationComponentName | Строка | Имя компонента потока данных, который получает данные | Derived Column |
| RowsSent | Строка | Число строк, отправленных из компонента-источника | 500 |
| createdTime | Строка | Время получения значений строк в формате UTC | 2017-06-28T21:00:27.3534352Z |
| executionPath | Строка | Путь выполнения задачи потока данных | \Transformation\Data Flow Task |
| resourceId | Строка | Уникальный идентификатор вашего ресурса фабрики данных. | /SUBSCRIPTIONS/<subscriptionID>/RESOURCEGROUPS/<resourceGroupName>/PROVIDERS/MICROSOFT.DATAFACTORY/FACTORIES/<dataFactoryName> |
Журнал действий
В связанной таблице перечислены операции, которые можно записать в журнале действий для этой службы. Эти операции представляют собой подмножество всех возможных операций поставщика ресурсов в журнале действий.
Дополнительные сведения о схеме записей журнала действий см . в схеме журнала действий.