Referência de dados de monitoramento do Azure Data Factory
Este artigo contém todas as informações de referência de monitoramento para este serviço.
Consulte Monitorar o Data Factory para obter detalhes sobre os dados que você pode coletar para o Azure Data Factory e como usá-los.
Métricas
Esta seção lista todas as métricas da plataforma coletadas automaticamente para este serviço. Essas métricas também fazem parte da lista global de todas as métricas da plataforma com suporte no Azure Monitor.
Para obter informações sobre retenção de métricas, consulte Visão geral das métricas do Azure Monitor.
Métricas com suporte para Microsoft.DataFactory/datafactories
A tabela a seguir lista as métricas disponíveis para o tipo de recurso Microsoft.DataFactory/datafactories.
- Nem todas as colunas podem estar presentes em todas as tabelas.
- Algumas colunas podem estar além da área de visualização da página. Selecione Expandir tabela para exibir todas as colunas disponíveis.
Títulos de tabela
- Categoria: o grupo ou classificação de métricas.
- Métrica: o nome de exibição da métrica como aparece no portal do Azure.
- Nome na API REST: o nome da métrica, conforme mencionado na API REST.
- Unidade: unidade de medida
- Agregação: o tipo de agregação padrão. Valores válidos: Médio (Méd.), Mínimo (Mín.), Máximo (Máx.), Total (Soma), Contagem.
- Dimensões: as Dimensões disponíveis para a métrica.
- Intervalos de agregação: os Intervalos em que a métrica é amostrada. Por exemplo,
PT1M
indica que a métrica é amostrada a cada minuto,PT30M
a cada 30 minutos,PT1H
a cada hora e assim por diante. - Exportação de DS: se a métrica é exportável para os Logs do Azure Monitor via configurações de diagnóstico. Para obter mais informações sobre exportação de métricas, consulte as Criar configurações de diagnóstico no Azure Monitor.
Métrica | Nome na API REST | Unidade | Agregação | Dimensões | Granularidade de tempo | Exportação de DS |
---|---|---|---|---|---|---|
Execuções com falha Execuções com falha |
FailedRuns |
Count | Total (Soma) | pipelineName , activityName |
PT1H | Sim |
Execuções com êxito Execuções com êxito |
SuccessfulRuns |
Count | Total (Soma) | pipelineName , activityName |
PT1H | Sim |
Métricas com suporte para Microsoft.DataFactory/factories
A tabela a seguir lista as métricas disponíveis para o tipo de recurso Microsoft.DataFactory/factories.
- Nem todas as colunas podem estar presentes em todas as tabelas.
- Algumas colunas podem estar além da área de visualização da página. Selecione Expandir tabela para exibir todas as colunas disponíveis.
Títulos de tabela
- Categoria: o grupo ou classificação de métricas.
- Métrica: o nome de exibição da métrica como aparece no portal do Azure.
- Nome na API REST: o nome da métrica, conforme mencionado na API REST.
- Unidade: unidade de medida
- Agregação: o tipo de agregação padrão. Valores válidos: Médio (Méd.), Mínimo (Mín.), Máximo (Máx.), Total (Soma), Contagem.
- Dimensões: as Dimensões disponíveis para a métrica.
- Intervalos de agregação: os Intervalos em que a métrica é amostrada. Por exemplo,
PT1M
indica que a métrica é amostrada a cada minuto,PT30M
a cada 30 minutos,PT1H
a cada hora e assim por diante. - Exportação de DS: se a métrica é exportável para os Logs do Azure Monitor via configurações de diagnóstico. Para obter mais informações sobre exportação de métricas, consulte as Criar configurações de diagnóstico no Azure Monitor.
Métrica | Nome na API REST | Unidade | Agregação | Dimensões | Granularidade de tempo | Exportação de DS |
---|---|---|---|---|---|---|
Métricas de execuções de atividades canceladas Métricas de execuções de atividades canceladas |
ActivityCancelledRuns |
Count | Total (Soma) | ActivityType , PipelineName , FailureType , Name |
PT1M | Sim |
Métricas de execuções de atividade com falha Métricas de execução de atividades com falha |
ActivityFailedRuns |
Count | Total (Soma) | ActivityType , PipelineName , FailureType , Name |
PT1M | Sim |
Métricas de execuções de atividade bem-sucedidas Métricas de execução de atividades bem-sucedidas |
ActivitySucceededRuns |
Count | Total (Soma) | ActivityType , PipelineName , FailureType , Name |
PT1M | Sim |
Erro de tempo limite da tarefa do Celery do runtime de integração do Airflow Erro de tempo limite da tarefa do Celery do runtime de integração do Airflow |
AirflowIntegrationRuntimeCeleryTaskTimeoutError |
Count | Total (Soma) | IntegrationRuntimeName |
PT1M | Não |
DAGs de BD de coleta do runtime de integração do Airflow DAGs de BD de coleta do runtime de integração do Airflow |
AirflowIntegrationRuntimeCollectDBDags |
Milissegundos | Média | IntegrationRuntimeName |
PT1M | Não |
Porcentagem de CPU do runtime de integração do Airflow Percentual de CPU do runtime de integração do Airflow |
AirflowIntegrationRuntimeCpuPercentage |
Porcentagem | Média | IntegrationRuntimeName , ContainerName |
PT1M | Sim |
Uso da CPU do Airflow Integration Runtime Uso da CPU do Airflow Integration Runtime |
AirflowIntegrationRuntimeCpuUsage |
Milinúcleos | Média | IntegrationRuntimeName , ContainerName |
PT1M | Yes |
Tamanho do recipiente de DAG do runtime de integração do Airflow Tamanho do repositório de DAG do runtime de integração do Airflow |
AirflowIntegrationRuntimeDagBagSize |
Count | Total (Soma) | IntegrationRuntimeName |
PT1M | Não |
Exceções de retorno de chamada de DAG do runtime de integração do Airflow Exceções de retorno de chamada de DAG do runtime de integração do Airflow |
AirflowIntegrationRuntimeDagCallbackExceptions |
Count | Total (Soma) | IntegrationRuntimeName |
PT1M | Não |
Erro de atualização do arquivo DAG do runtime de integração do Airflow Erro de atualização do arquivo DAG do runtime de integração do Airflow |
AirflowIntegrationRuntimeDAGFileRefreshError |
Count | Total (Soma) | IntegrationRuntimeName |
PT1M | Não |
Erros de importação de processamento de DAG do runtime de integração do Airflow Erros de importação de processamento de DAG do runtime de integração do Airflow |
AirflowIntegrationRuntimeDAGProcessingImportErrors |
Count | Total (Soma) | IntegrationRuntimeName |
PT1M | Não |
Duração do último processamento de DAG do runtime de integração do Airflow Duração do último processamento de DAG do runtime de integração do Airflow |
AirflowIntegrationRuntimeDAGProcessingLastDuration |
Milissegundos | Média | IntegrationRuntimeName , DagFile |
PT1M | Não |
Segundos decorridos desde a última execução do processamento de DAG do runtime de integração do Airflow Segundos decorridos desde a última execução do processamento de DAG do runtime de integração do Airflow |
AirflowIntegrationRuntimeDAGProcessingLastRunSecondsAgo |
Segundos | Média | IntegrationRuntimeName , DagFile |
PT1M | Não |
Paradas do ProcessingManager de DAG do runtime de integração do Airflow Paradas do ProcessingManager de DAG do runtime de integração do Airflow |
AirflowIntegrationRuntimeDAGProcessingManagerStalls |
Count | Total (Soma) | IntegrationRuntimeName |
PT1M | Não |
Processos de processamento de DAG do runtime de integração do Airflow Processos de processamento de DAG do runtime de integração do Airflow |
AirflowIntegrationRuntimeDAGProcessingProcesses |
Count | Total (Soma) | IntegrationRuntimeName |
PT1M | Não |
Tempos limite do processador de processamento de DAG do runtime de integração do Airflow Tempos limites do processador de processamento de DAG do runtime de integração do Airflow |
AirflowIntegrationRuntimeDAGProcessingProcessorTimeouts |
Segundos | Média | IntegrationRuntimeName |
PT1M | Não |
Tempo total de análise de processamento de DAG do runtime de integração do Airflow Tempo total de análise de processamento de DAG do runtime de integração do Airflow |
AirflowIntegrationRuntimeDAGProcessingTotalParseTime |
Segundos | Média | IntegrationRuntimeName |
PT1M | Não |
Verificação de dependência de execução de DAG do runtime de integração do Airflow Verificação de dependência de execução de DAG do runtime de integração do Airflow |
AirflowIntegrationRuntimeDAGRunDependencyCheck |
Milissegundos | Média | IntegrationRuntimeName , DagId |
PT1M | Não |
Falha na duração da execução de DAG do runtime de integração do Airflow Falha na duração da execução de DAG do runtime de integração do Airflow |
AirflowIntegrationRuntimeDAGRunDurationFailed |
Milissegundos | Média | IntegrationRuntimeName , DagId |
PT1M | Não |
Êxito na duração da execução de DAG do runtime de integração do Airflow Êxito na duração da execução de DAG do runtime de integração do Airflow |
AirflowIntegrationRuntimeDAGRunDurationSuccess |
Milissegundos | Média | IntegrationRuntimeName , DagId |
PT1M | Não |
Atraso de agendamento de execução da primeira tarefa de DAG do runtime de integração do Airflow Atraso no agendamento de execução da primeira tarefa de DAG do runtime de integração do Airflow |
AirflowIntegrationRuntimeDAGRunFirstTaskSchedulingDelay |
Milissegundos | Média | IntegrationRuntimeName , DagId |
PT1M | Não |
Atraso de agendamento de execução de DAG do runtime de integração do Airflow Atraso de agendamento de execução de DAG do runtime de integração do Airflow |
AirflowIntegrationRuntimeDAGRunScheduleDelay |
Milissegundos | Média | IntegrationRuntimeName , DagId |
PT1M | Não |
Slots abertos do executor do runtime de integração do Airflow Slots abertos do executor do runtime de integração do Airflow |
AirflowIntegrationRuntimeExecutorOpenSlots |
Count | Total (Soma) | IntegrationRuntimeName |
PT1M | Não |
Tarefas enfileiradas do executor do runtime de integração do Airflow Tarefas enfileiradas do executor do runtime de integração do Airflow |
AirflowIntegrationRuntimeExecutorQueuedTasks |
Count | Total (Soma) | IntegrationRuntimeName |
PT1M | Não |
Tarefas de execução do executor do runtime de integração do Airflow Tarefas de execução do executor do runtime de integração do Airflow |
AirflowIntegrationRuntimeExecutorRunningTasks |
Count | Total (Soma) | IntegrationRuntimeName |
PT1M | Não |
Fim do trabalho do runtime de integração do Airflow Fim do trabalho do runtime de integração do Airflow |
AirflowIntegrationRuntimeJobEnd |
Count | Total (Soma) | IntegrationRuntimeName , Job |
PT1M | Não |
Falha de pulsação do runtime de integração do Airflow Falha de pulsação do runtime de integração do Airflow |
AirflowIntegrationRuntimeJobHeartbeatFailure |
Count | Total (Soma) | IntegrationRuntimeName , Job |
PT1M | Não |
Início do trabalho do runtime de integração do Airflow Início do trabalho do runtime de integração do Airflow |
AirflowIntegrationRuntimeJobStart |
Count | Total (Soma) | IntegrationRuntimeName , Job |
PT1M | Não |
Porcentagem de memória do runtime de integração do Airflow Percentual de memória do runtime de integração do Airflow |
AirflowIntegrationRuntimeMemoryPercentage |
Porcentagem | Média | IntegrationRuntimeName , ContainerName |
PT1M | Sim |
Uso de memória do runtime de integração do Airflow Uso de memória do runtime de integração do Airflow |
AirflowIntegrationRuntimeMemoryUsage |
Bytes | Média | IntegrationRuntimeName , ContainerName |
PT1M | Yes |
Contagem de nós do runtime de integração do Airflow Contagem de nós do runtime de integração do Airflow |
AirflowIntegrationRuntimeNodeCount |
Contagem | Média | IntegrationRuntimeName , ComputeNodeSize |
PT1M | Yes |
Falhas do operador do runtime de integração do Airflow Falhas do operador do runtime de integração do Airflow |
AirflowIntegrationRuntimeOperatorFailures |
Count | Total (Soma) | IntegrationRuntimeName , Operator |
PT1M | Não |
Êxitos do operador do runtime de integração do Airflow Sucessos do operador do runtime de integração do Airflow |
AirflowIntegrationRuntimeOperatorSuccesses |
Count | Total (Soma) | IntegrationRuntimeName , Operator |
PT1M | Não |
Slots abertos do pool do runtime de integração do Airflow Slots abertos do pool do runtime de integração do Airflow |
AirflowIntegrationRuntimePoolOpenSlots |
Count | Total (Soma) | IntegrationRuntimeName , Pool |
PT1M | Não |
Slots enfileirados do pool do runtime de integração do Airflow Slots enfileirados do pool do runtime de integração do Airflow |
AirflowIntegrationRuntimePoolQueuedSlots |
Count | Total (Soma) | IntegrationRuntimeName , Pool |
PT1M | Não |
Slots em execução do pool do runtime de integração do Airflow Slots em execução do pool do runtime de integração do Airflow |
AirflowIntegrationRuntimePoolRunningSlots |
Count | Total (Soma) | IntegrationRuntimeName , Pool |
PT1M | Não |
Tarefas de privação do pool do runtime de integração do Airflow Tarefas de privação do pool do runtime de integração do Airflow |
AirflowIntegrationRuntimePoolStarvingTasks |
Count | Total (Soma) | IntegrationRuntimeName , Pool |
PT1M | Não |
Seção crítica ocupada do agendador do runtime de integração do Airflow Seção crítica ocupada do agendador do runtime de integração do Airflow |
AirflowIntegrationRuntimeSchedulerCriticalSectionBusy |
Count | Total (Soma) | IntegrationRuntimeName |
PT1M | Não |
Duração da seção crítica do agendador do runtime de integração do Airflow Duração da seção crítica do agendador do runtime de integração do Airflow |
AirflowIntegrationRuntimeSchedulerCriticalSectionDuration |
Milissegundos | Média | IntegrationRuntimeName |
PT1M | Não |
Tentativas de email de SLA com falha no agendador do runtime de integração do Airflow Tentativas de email de SLA com falha no agendador do runtime de integração do Airflow |
AirflowIntegrationRuntimeSchedulerFailedSLAEmailAttempts |
Count | Total (Soma) | IntegrationRuntimeName |
PT1M | Não |
Pulsações do agendador do runtime de integração do Airflow Pulsações do agendador do runtime de integração do Airflow |
AirflowIntegrationRuntimeSchedulerHeartbeat |
Count | Total (Soma) | IntegrationRuntimeName |
PT1M | Não |
Tarefas órfãs do agendador adotadas do runtime de integração do Airflow Tarefas órfãs do agendador adotadas do runtime de integração do Airflow |
AirflowIntegrationRuntimeSchedulerOrphanedTasksAdopted |
Count | Total (Soma) | IntegrationRuntimeName |
PT1M | Não |
Tarefas órfãs desmarcadas pelo agendador do runtime de integração do Airflow Tarefas órfãs limpas do agendador do runtime de integração do Airflow |
AirflowIntegrationRuntimeSchedulerOrphanedTasksCleared |
Count | Total (Soma) | IntegrationRuntimeName |
PT1M | Não |
Executável de tarefas do agendador do runtime de integração do Airflow Executável de tarefas do agendador do runtime de integração do Airflow |
AirflowIntegrationRuntimeSchedulerTasksExecutable |
Count | Total (Soma) | IntegrationRuntimeName |
PT1M | Não |
Tarefas do agendador encerradas externamente do runtime de integração do Airflow Tarefas do agendador encerradas externamente do runtime de integração do Airflow |
AirflowIntegrationRuntimeSchedulerTasksKilledExternally |
Count | Total (Soma) | IntegrationRuntimeName |
PT1M | Não |
Tarefas em execução do agendador do runtime de integração do Airflow Tarefas em execução do agendador do runtime de integração do Airflow |
AirflowIntegrationRuntimeSchedulerTasksRunning |
Count | Total (Soma) | IntegrationRuntimeName |
PT1M | Não |
Tarefas de privação do agendador do runtime de integração do Airflow Tarefas de privação do agendador do runtime de integração do Airflow |
AirflowIntegrationRuntimeSchedulerTasksStarving |
Count | Total (Soma) | IntegrationRuntimeName |
PT1M | Não |
Instâncias de tarefa iniciadas do runtime de integração do Airflow Instâncias de tarefa iniciadas do runtime de integração do Airflow |
AirflowIntegrationRuntimeStartedTaskInstances |
Count | Total (Soma) | IntegrationRuntimeName , DagId , TaskId |
PT1M | Não |
Instância de tarefa do runtime de integração do Airflow criada usando o operador Instância de tarefa do runtime de integração do Airflow criada usando o operador |
AirflowIntegrationRuntimeTaskInstanceCreatedUsingOperator |
Count | Total (Soma) | IntegrationRuntimeName , Operator |
PT1M | Não |
Duração da instância da tarefa do runtime de integração do Airflow Duração da instância da tarefa do runtime de integração do Airflow |
AirflowIntegrationRuntimeTaskInstanceDuration |
Milissegundos | Média | IntegrationRuntimeName , DagId , TaskID |
PT1M | Não |
Falhas na instância da tarefa do runtime de integração do Airflow Falhas na instância da tarefa do runtime de integração do Airflow |
AirflowIntegrationRuntimeTaskInstanceFailures |
Count | Total (Soma) | IntegrationRuntimeName |
PT1M | Não |
Instância da tarefa do runtime de integração do Airflow concluída Instância da tarefa do runtime de integração do Airflow concluída |
AirflowIntegrationRuntimeTaskInstanceFinished |
Count | Total (Soma) | IntegrationRuntimeName , DagId , TaskId , State |
PT1M | Não |
Instância da tarefa do runtime de integração do Airflow bem-sucedida anteriormente Instância da tarefa do runtime de integração do Airflow bem-sucedida anteriormente |
AirflowIntegrationRuntimeTaskInstancePreviouslySucceeded |
Count | Total (Soma) | IntegrationRuntimeName |
PT1M | Não |
Sucessos da instância da tarefa do runtime de integração do Airflow Sucessos da instância da tarefa do runtime de integração do Airflow |
AirflowIntegrationRuntimeTaskInstanceSuccesses |
Count | Total (Soma) | IntegrationRuntimeName |
PT1M | Não |
Tarefa do runtime de integração do Airflow removida do DAG Tarefa do runtime de integração do Airflow removida do DAG |
AirflowIntegrationRuntimeTaskRemovedFromDAG |
Count | Total (Soma) | IntegrationRuntimeName , DagId |
PT1M | Não |
Tarefa do runtime de integração do Airflow restaurada para o DAG Tarefa do runtime de integração do Airflow restaurada para o DAG |
AirflowIntegrationRuntimeTaskRestoredToDAG |
Count | Total (Soma) | IntegrationRuntimeName , DagId |
PT1M | Não |
Thread principal bloqueado de gatilhos do runtime de integração do Airflow Thread principal do runtime de integração do Airflow bloqueados por gatilhos |
AirflowIntegrationRuntimeTriggersBlockedMainThread |
Count | Total (Soma) | IntegrationRuntimeName |
PT1M | Não |
Falha nos gatilhos do runtime de integração do Airflow Falha nos gatilhos do runtime de integração do Airflow |
AirflowIntegrationRuntimeTriggersFailed |
Count | Total (Soma) | IntegrationRuntimeName |
PT1M | Não |
Gatilhos em execução do runtime de integração do Airflow Gatilhos em execução do runtime de integração do Airflow |
AirflowIntegrationRuntimeTriggersRunning |
Count | Total (Soma) | IntegrationRuntimeName |
PT1M | Não |
Gatilhos do runtime de integração do Airflow bem-sucedidos Gatilhos do runtime de integração do Airflow bem-sucedidos |
AirflowIntegrationRuntimeTriggersSucceeded |
Count | Total (Soma) | IntegrationRuntimeName |
PT1M | Não |
Tarefas zumbi encerradas do runtime de integração do Airflow Tarefas zumbi encerradas do runtime de integração do Airflow |
AirflowIntegrationRuntimeZombiesKilled |
Count | Total (Soma) | IntegrationRuntimeName |
PT1M | Não |
Tamanho total da fábrica (unidade GB) Tamanho total do alocador (unidade GB) |
FactorySizeInGbUnits |
Contagem | Máximo | <none> | PT1M | Sim |
Memória disponível do runtime de integração Memória disponível de runtime de integração |
IntegrationRuntimeAvailableMemory |
Bytes | Média | IntegrationRuntimeName , NodeName |
PT1M | Sim |
Contagem de nós disponíveis do tempo de execução de integração Contagem de nós disponíveis de runtime de integração |
IntegrationRuntimeAvailableNodeNumber |
Contagem | Média | IntegrationRuntimeName |
PT1M | Sim |
Duração da fila de tempo de execução de integração Duração da fila do runtime de integração |
IntegrationRuntimeAverageTaskPickupDelay |
Segundos | Média | IntegrationRuntimeName |
PT1M | Sim |
Utilização da CPU do runtime de integração Utilização de CPU de runtime de integração |
IntegrationRuntimeCpuPercentage |
Porcentagem | Média | IntegrationRuntimeName , NodeName |
PT1M | Sim |
Comprimento da fila do runtime de integração Tamanho da fila do runtime de integração |
IntegrationRuntimeQueueLength |
Contagem | Média | IntegrationRuntimeName |
PT1M | Sim |
Tamanho máximo permitido de fábrica (unidade GB) Tamanho máximo de alocador permitido (unidade GB) |
MaxAllowedFactorySizeInGbUnits |
Contagem | Máximo | <none> | PT1M | Sim |
Contagem máxima de entidades permitidas Contagem máxima de entidades permitidas |
MaxAllowedResourceCount |
Contagem | Máximo | <none> | PT1M | Sim |
Copiar porcentagem de capacidade disponível do runtime de integração MVNet Copiar o percentual de capacidade disponível do runtime de integração MVNet |
MVNetIRCopyAvailableCapacityPCT |
Porcentagem | Máximo | IntegrationRuntimeName |
PT1M | Sim |
Utilização da capacidade de cópia do runtime de integração do MVNet Copiar a utilização da capacidade do runtime de integração MVNet |
MVNetIRCopyCapacityUtilization |
Porcentagem | Máximo | IntegrationRuntimeName |
PT1M | Sim |
Copiar o comprimento da fila de espera do runtime de integração MVNet Copiar o comprimento da fila de espera do runtime de integração MVNet |
MVNetIRCopyWaitingQueueLength |
Contagem | Média | IntegrationRuntimeName |
PT1M | Sim |
Porcentagem de capacidade externa disponível do runtime de integração MVNet Percentual de capacidade disponível externa do runtime de integração MVNet |
MVNetIRExternalAvailableCapacityPCT |
Porcentagem | Máximo | IntegrationRuntimeName |
PT1M | Sim |
Utilização da capacidade externa do runtime de integração MVNet Utilização de capacidade externa do runtime de integração MVNet |
MVNetIRExternalCapacityUtilization |
Porcentagem | Máximo | IntegrationRuntimeName |
PT1M | Sim |
Comprimento da fila de espera externa do runtime de integração MVNet Comprimento da fila de espera externa do runtime de integração MVNet |
MVNetIRExternalWaitingQueueLength |
Contagem | Média | IntegrationRuntimeName |
PT1M | Sim |
Porcentagem de capacidade disponível do pipeline do runtime de integração MVNet Percentual de capacidade disponível do pipeline do runtime de integração MVNet |
MVNetIRPipelineAvailableCapacityPCT |
Porcentagem | Máximo | IntegrationRuntimeName |
PT1M | Sim |
Utilização da capacidade de pipeline do runtime de integração MVNet Utilização da capacidade de pipeline do runtime de integração MVNet |
MVNetIRPipelineCapacityUtilization |
Porcentagem | Máximo | IntegrationRuntimeName |
PT1M | Sim |
Comprimento da fila de espera do pipeline do runtime de integração do MVNet Comprimento da fila de espera do pipeline do runtime de integração MVNet |
MVNetIRPipelineWaitingQueueLength |
Contagem | Média | IntegrationRuntimeName |
PT1M | Sim |
Métricas de execuções de pipeline canceladas Métricas de execução do pipeline canceladas |
PipelineCancelledRuns |
Count | Total (Soma) | FailureType , CancelledBy , Name |
PT1M | Sim |
Métricas de execuções de pipeline de tempo decorrido Métricas de execução de pipeline de tempo decorrido |
PipelineElapsedTimeRuns |
Count | Total (Soma) | RunId , Name |
PT1M | Sim |
Métricas de execuções de pipeline com falha Métricas de execução do pipeline com falha |
PipelineFailedRuns |
Count | Total (Soma) | FailureType , Name |
PT1M | Sim |
Métricas de execuções de pipeline bem-sucedidas Métricas de execução do pipeline bem-sucedido |
PipelineSucceededRuns |
Count | Total (Soma) | FailureType , Name |
PT1M | Sim |
Contagem total de entidades Contagem total de entidades |
ResourceCount |
Contagem | Máximo | <none> | PT1M | Sim |
Métricas de início de runtime de integração do SSIS canceladas Métricas de inícios de runtime de integração SSIS cancelados |
SSISIntegrationRuntimeStartCancel |
Count | Total (Soma) | IntegrationRuntimeName |
PT1M | Sim |
Métricas de início de runtime de integração do SSIS com falha Métricas de inícios de runtime de integração SSIS com falha |
SSISIntegrationRuntimeStartFailed |
Count | Total (Soma) | IntegrationRuntimeName |
PT1M | Sim |
Métricas de início de runtime de integração do SSIS bem-sucedidas Métricas de inícios de runtime de integração SSIS com sucesso |
SSISIntegrationRuntimeStartSucceeded |
Count | Total (Soma) | IntegrationRuntimeName |
PT1M | Sim |
Métricas de parada de runtime de integração do SSIS travadas Métricas de paradas de runtime de integração SSIS paralisadas |
SSISIntegrationRuntimeStopStuck |
Count | Total (Soma) | IntegrationRuntimeName |
PT1M | Sim |
Métricas de parada de runtime de integração do SSIS bem-sucedidas Métricas de paradas de runtime de integração SSIS com sucesso |
SSISIntegrationRuntimeStopSucceeded |
Count | Total (Soma) | IntegrationRuntimeName |
PT1M | Sim |
Métricas de execução de pacote SSIS canceladas Métricas de execuções de pacote SSIS canceladas |
SSISPackageExecutionCancel |
Count | Total (Soma) | IntegrationRuntimeName |
PT1M | Sim |
Métricas de execução de pacote SSIS com falha Métricas de execuções de pacote SSIS canceladas |
SSISPackageExecutionFailed |
Count | Total (Soma) | IntegrationRuntimeName |
PT1M | Sim |
Métricas de execução de pacote SSIS bem-sucedidas Métricas de execuções de pacote SSIS com sucesso |
SSISPackageExecutionSucceeded |
Count | Total (Soma) | IntegrationRuntimeName |
PT1M | Sim |
Métricas de execuções de gatilho canceladas Métricas de execuções do gatilho canceladas |
TriggerCancelledRuns |
Count | Total (Soma) | Name , FailureType |
PT1M | Sim |
Métricas de execuções de gatilho com falha Métricas de execuções do gatilho com falha |
TriggerFailedRuns |
Count | Total (Soma) | Name , FailureType |
PT1M | Sim |
Métricas de execuções de gatilho bem-sucedidas Métricas de execuções do gatilho bem-sucedidas |
TriggerSucceededRuns |
Count | Total (Soma) | Name , FailureType |
PT1M | Sim |
Observação
Com exceção do PipelineElapsedTimeRuns, são permitidos somete eventos dos tipos concluído, atividade disparada e execuções de pipeline. As execuções em andamento e de depuração não são emitidas. No entanto, os eventos de todas as execuções de pacotes SSIS são emitidos, incluindo aqueles que são concluídos e em andamento, independentemente de seus métodos de invocação. Por exemplo, você pode invocar execuções de pacote no SSDT (SQL Server Data Tools) habilitado para Azure, por meio do T-SQL no SQL Server Management Studio, no SQL Server Agent ou em outras ferramentas designadas, e ainda como execuções disparadas ou de depuração das atividades de Execução de Pacotes SSIS nos pipelines do Data Factory.
Dimensões de métrica
Para obter mais informações sobre o que são dimensões de métrica, confira Métricas multidimensionais.
Este serviço tem as dimensões a seguir associadas a essas métricas.
Microsoft.DataFactory/datafactories
- pipelineName
- activityName
Microsoft.DataFactory/factories
- ActivityType
- PipelineName
- Tipo de falha
- Nome
- IntegrationRuntimeName
- ContainerName
- DagFile
- DagId
- ComputeNodeSize
- Trabalho
- Operador
- pool
- TaskId
- Estado
- NodeName
- Cancelado por
- RunId
Logs de recursos
Esta seção lista os tipos de logs de recursos que você pode coletar para o este serviço. A seção extrai da lista de todos os tipos de categoria de logs de recursos com suporte no Azure Monitor.
Logs de recursos com suporte para Microsoft.DataFactory/factories
Categoria | Nome de exibição da categoria | Tabela de log | Com suporte a plano de log básico | Com suporte a transformações de tempo-ingestão | Consultas de exemplo | Custos para exportar |
---|---|---|---|---|---|---|
ActivityRuns |
Registro de execuções de atividade de pipeline | ADFActivityRun | Não | Sim | Consultas | Não |
AirflowDagProcessingLogs |
Logs de processamento de DAG do Airflow | AirflowDagProcessingLogs Logs de processamento de dag do ADF Airflow |
Não | Sim | Sim | |
AirflowSchedulerLogs |
Logs do agendador do Airflow | ADFAirflowSchedulerLogs Registros do agendador do ADF Airflow |
Não | Sim | Sim | |
AirflowTaskLogs |
Logs de execução de tarefas do Airflow | ADFAirflowTaskLogs Logs de tarefas do ADF Airflow |
Não | Sim | Sim | |
AirflowWebLogs |
Logs da Web do Airflow | ADFAirflowWebLogs Logs da Web do ADF Airflow |
Não | Sim | Sim | |
AirflowWorkerLogs |
Logs de trabalho do Airflow | ADFAirflowWorkerLogs Registros do trabalho do ADF Airflow |
Não | Sim | Sim | |
PipelineRuns |
Registro de execuções de pipeline | ADFPipelineRun | Não | Sim | Consultas | Não |
SandboxActivityRuns |
Log de execuções de atividade de área restrita | ADFSandboxActivityRun | Não | Sim | Sim | |
SandboxPipelineRuns |
Log de execuções de pipeline de área restrita | ADFSandboxPipelineRun | Não | Sim | Sim | |
SSISIntegrationRuntimeLogs |
Logs de runtime de integração SSIS | ADFSSISIntegrationRuntimeLogs Logs de runtime de integração do SSIS do ADF |
Não | Sim | Não | |
SSISPackageEventMessageContext |
Contexto de mensagem de evento do pacote SSIS | ADFSSISPackageEventMessageContext Contexto da mensagem do evento de execução do pacote SSIS do ADF |
Não | Sim | Não | |
SSISPackageEventMessages |
Mensagens de evento do pacote SSIS | ADFSSISPackageEventMessages Mensagens de evento de execução de pacote SSIS do ADF |
Não | Sim | Não | |
SSISPackageExecutableStatistics |
Estatísticas executáveis do pacote SSIS | ADFSSISPackageExecutableStatistics Estatísticas executáveis de execução de pacotes SSIS do ADF |
Não | Sim | Não | |
SSISPackageExecutionComponentPhases |
Fases do componente de execução do pacote SSIS | ADFSSISPackageExecutionComponentPhases Fases do componente de execução do pacote SSIS do ADF |
Não | Sim | Não | |
SSISPackageExecutionDataStatistics |
Estatísticas de dados de execução do pacote SSIS | ADFSSISPackageExecutionDataStatistics Estatísticas de dados de execução de pacotes SSIS do ADF |
Não | Sim | Não | |
TriggerRuns |
Registro de execuções de gatilho | ADFTriggerRun | Não | Sim | Consultas | Não |
Tabelas de Logs do Azure Monitor
Esta seção lista todas as tabelas dos Logs do Azure Monitor relevantes para este serviço e disponíveis para consulta pela análise de logs usando o Kusto. As tabelas contêm dados de log de recursos e possivelmente mais, dependendo do que é coletado e roteado para elas.
Fábricas de Dados
Microsoft.DataFactory/factories
- AzureActivity
- AzureMetrics
- AzureDiagnostics
- ADFActivityRun
- ADFPipelineRun
- ADFTriggerRun
- ADFSandboxActivityRun
- ADFSandboxPipelineRun
- ADFSSISIntegrationRuntimeLogs
- ADFSSISPackageEventMessageContext
- ADFSSISPackageEventMessages
- ADFSSISPackageExecutableStatistics
- ADFSSISPackageExecutionComponentPhases
- ADFSSISPackageExecutionDataStatistics
Monitorar e esquemas do Log Analytics para logs e eventos
Esta seção lista os atributos que os esquemas do Azure Monitor e do Log Analytics usam para monitorar logs e eventos.
O Log Analytics herda o esquema do Azure Monitor com as seguintes exceções:
A primeira letra do nome de cada coluna é maiúscula. Por exemplo, o nome da coluna correlationId no Monitor é CorrelationId no Log Analytics.
Não há coluna Nível .
A coluna de propriedades dinâmicas é preservada como o seguinte tipo de blob JSON dinâmico.
Coluna do Azure Monitor Coluna do Log Analytics Tipo $.properties.UserProperties UserProperties Dinâmico $.properties.Annotations Anotações Dinâmico $.properties.Input Entrada Dinâmico $.properties.Output Saída Dinâmico $.properties.Error.errorCode ErrorCode INT $.properties.Error.message ErrorMessage string $.properties.Error Erro Dinâmico $.properties.Predecessors Antecessores Dinâmico $.properties.Parameters Parâmetros Dinâmico $.properties.SystemParameters SystemParameters Dinâmico $.properties.Tags Marcações Dinâmico
Atributos de logs de execução de atividade
{
"Level": "",
"correlationId":"",
"time":"",
"activityRunId":"",
"pipelineRunId":"",
"resourceId":"",
"category":"ActivityRuns",
"level":"Informational",
"operationName":"",
"pipelineName":"",
"activityName":"",
"start":"",
"end":"",
"properties":
{
"Input": "{
"source": {
"type": "BlobSource"
},
"sink": {
"type": "BlobSink"
}
}",
"Output": "{"dataRead":121,"dataWritten":121,"copyDuration":5,
"throughput":0.0236328132,"errors":[]}",
"Error": "{
"errorCode": "null",
"message": "null",
"failureType": "null",
"target": "CopyBlobtoBlob"
}
}
}
Propriedade | Type | Descrição | Exemplo |
---|---|---|---|
Level | String | O nível dos logs de diagnóstico. Para logs de execução de atividade, defina o valor da propriedade como 4. | 4 |
correlationId | String | A ID exclusiva para acompanhar uma solicitação específica. | aaaa0000-bb11-2222-33cc-444444dddddd |
time | String | A hora do evento no formato UTC do intervalo de tempo YYYY-MM-DDTHH:MM:SS.00000Z . |
2017-06-28T21:00:27.3534352Z |
activityRunId | String | A ID da execução de atividade. | 3a171e1f-b36e-4b80-8a54-5625394f4354 |
pipelineRunId | String | A ID da execução de pipeline. | 9f6069d6-e522-4608-9f99-21807bfc3c70 |
resourceId | String | A ID associada ao recurso do data factory. | /SUBSCRIPTIONS/<subID>/RESOURCEGROUPS/<resourceGroupName>/PROVIDERS/MICROSOFT.DATAFACTORY/FACTORIES/<dataFactoryName> |
category | String | A categoria dos logs de diagnóstico. Defina o valor da propriedade ActivityRuns . |
ActivityRuns |
level | String | O nível dos logs de diagnóstico. Defina o valor da propriedade Informational . |
Informational |
operationName | String | O nome da atividade com o status. Se a atividade for a pulsação de início, o valor da propriedade será MyActivity - . Se a atividade for a pulsação de término, o valor da propriedade será MyActivity - Succeeded . |
MyActivity - Succeeded |
pipelineName | String | O nome do pipeline. | MyPipeline |
activityName | String | O nome da atividade. | MyActivity |
start | String | A hora de início das execuções de atividade no formato UTC de intervalo de tempo. | 2017-06-26T20:55:29.5007959Z |
end | String | A hora de término das execuções de atividade no formato UTC de intervalo de tempo. Se o log de diagnóstico mostrar que uma atividade foi iniciada, mas ainda não terminou, o valor da propriedade será 1601-01-01T00:00:00Z . |
2017-06-26T20:55:29.5007959Z |
Atributos de logs de execução de pipeline
{
"Level": "",
"correlationId":"",
"time":"",
"runId":"",
"resourceId":"",
"category":"PipelineRuns",
"level":"Informational",
"operationName":"",
"pipelineName":"",
"start":"",
"end":"",
"status":"",
"location": "",
"properties":
{
"Parameters": {
"<parameter1Name>": "<parameter1Value>"
},
"SystemParameters": {
"ExecutionStart": "",
"TriggerId": "",
"SubscriptionId": ""
},
"Predecessors": [
{
"Name": "",
"Id": "",
"InvokedByType": ""
}
]
}
}
Propriedade | Type | Descrição | Exemplo |
---|---|---|---|
Level | String | O nível dos logs de diagnóstico. Para logs de execução de atividade, defina o valor da propriedade como 4. | 4 |
correlationId | String | A ID exclusiva para acompanhar uma solicitação específica. | aaaa0000-bb11-2222-33cc-444444dddddd |
time | String | A hora do evento no formato UTC do intervalo de tempo YYYY-MM-DDTHH:MM:SS.00000Z . |
2017-06-28T21:00:27.3534352Z |
runId | String | A ID da execução de pipeline. | 9f6069d6-e522-4608-9f99-21807bfc3c70 |
resourceId | String | A ID associada ao recurso do data factory. | /SUBSCRIPTIONS/<subID>/RESOURCEGROUPS/<resourceGroupName>/PROVIDERS/MICROSOFT.DATAFACTORY/FACTORIES/<dataFactoryName> |
category | String | A categoria dos logs de diagnóstico. Defina o valor da propriedade PipelineRuns . |
PipelineRuns |
level | String | O nível dos logs de diagnóstico. Defina o valor da propriedade Informational . |
Informational |
operationName | String | O nome do pipeline juntamente com o status. Depois que a execução de pipeline for concluída, o valor da propriedade será Pipeline - Succeeded . |
MyPipeline - Succeeded . |
pipelineName | String | O nome do pipeline. | MyPipeline |
start | String | A hora de início das execuções de atividade no formato UTC de intervalo de tempo. | 2017-06-26T20:55:29.5007959Z . |
end | String | A hora de término das execuções de atividade no formato UTC de intervalo de tempo. Se o log de diagnóstico mostrar que uma atividade foi iniciada, mas ainda não terminou, o valor da propriedade será 1601-01-01T00:00:00Z . |
2017-06-26T20:55:29.5007959Z |
status | String | O status final da execução de pipeline. Os possíveis valores da propriedade são Succeeded e Failed . |
Succeeded |
local | String | A região do Azure da execução do pipeline. | eastasia |
predecessors | String | O objeto de chamada do pipeline junto com a ID. | Manual |
Atributos de logs de execução de gatilho
{
"Level": "",
"correlationId":"",
"time":"",
"triggerId":"",
"resourceId":"",
"category":"TriggerRuns",
"level":"Informational",
"operationName":"",
"triggerName":"",
"triggerType":"",
"triggerEvent":"",
"start":"",
"status":"",
"properties":
{
"Parameters": {
"TriggerTime": "",
"ScheduleTime": ""
},
"SystemParameters": {}
}
}
Propriedade | Type | Descrição | Exemplo |
---|---|---|---|
Level | String | O nível dos logs de diagnóstico. Para logs de execução de atividade, defina o valor da propriedade como 4. | 4 |
correlationId | String | A ID exclusiva para acompanhar uma solicitação específica. | aaaa0000-bb11-2222-33cc-444444dddddd |
time | String | A hora do evento no formato UTC do intervalo de tempo YYYY-MM-DDTHH:MM:SS.00000Z . |
2017-06-28T21:00:27.3534352Z |
triggerId | String | A ID da execução de gatilho. | 08587023010602533858661257311 |
resourceId | String | A ID associada ao recurso do data factory. | /SUBSCRIPTIONS/<subID>/RESOURCEGROUPS/<resourceGroupName>/PROVIDERS/MICROSOFT.DATAFACTORY/FACTORIES/<dataFactoryName> |
category | String | A categoria dos logs de diagnóstico. Defina o valor da propriedade PipelineRuns . |
PipelineRuns |
level | String | O nível dos logs de diagnóstico. Defina o valor da propriedade Informational . |
Informational |
operationName | String | O nome do gatilho com o status final, que indica se o gatilho foi acionado com sucesso. Se a pulsação foi realizada com sucesso, o valor da propriedade é MyTrigger - Succeeded . |
MyTrigger - Succeeded |
triggerName | String | O nome do gatilho. | MyTrigger |
triggerType | String | O tipo do gatilho. Os possíveis valores da propriedade são Manual Trigger e Schedule Trigger . |
ScheduleTrigger |
triggerEvent | String | O evento do gatilho. | ScheduleTime - 2017-07-06T01:50:25Z |
start | String | A hora de início do acionamento de gatilho no formato UTC de intervalo de tempo. | 2017-06-26T20:55:29.5007959Z |
status | String | O status final que mostra se o gatilho foi acionado com sucesso. Os possíveis valores da propriedade são Succeeded e Failed . |
Succeeded |
Atributos de logs de runtime de integração SSIS
Aqui estão os atributos de log das operações de início, parada e manutenção do runtime de integração (IR) do SQL Server Integration Services (SSIS).
{
"time": "",
"operationName": "",
"category": "",
"correlationId": "",
"dataFactoryName": "",
"integrationRuntimeName": "",
"level": "",
"resultType": "",
"properties": {
"message": ""
},
"resourceId": ""
}
Propriedade | Type | Descrição | Exemplo |
---|---|---|---|
time | String | A hora do evento no formato UTC: YYYY-MM-DDTHH:MM:SS.00000Z |
2017-06-28T21:00:27.3534352Z |
operationName | String | O nome da operação do SSIS IR | Start/Stop/Maintenance/Heartbeat |
category | String | A categoria dos logs de diagnóstico | SSISIntegrationRuntimeLogs |
correlationId | String | A ID exclusiva para acompanhar uma operação específica | f13b159b-515f-4885-9dfa-a664e949f785Deprovision0059035558 |
dataFactoryName | String | O nome do data factory | MyADFv2 |
integrationRuntimeName | String | O nome do SSIS IR | MySSISIR |
level | String | O nível dos logs de diagnóstico | Informational |
resultType | String | O resultado da operação do SSIS IR | Started/InProgress/Succeeded/Failed/Healthy/Unhealthy |
message | String | A mensagem de saída da operação do SSIS IR | The stopping of your SSIS integration runtime has succeeded. |
resourceId | String | A ID exclusiva do recurso do data factory | /SUBSCRIPTIONS/<subscriptionID>/RESOURCEGROUPS/<resourceGroupName>/PROVIDERS/MICROSOFT.DATAFACTORY/FACTORIES/<dataFactoryName> |
Atributos de log do contexto de mensagem de evento do SSIS
Estes são os atributos de log das condições relacionadas às mensagens de evento geradas pelas execuções de pacotes do SSIS no SSIS IR. Eles transmitem informações semelhantes à tabela ou exibição de contexto da mensagem de evento do catálogo do SSIS (SSISDB) que mostra os valores de runtime de muitas propriedades de pacotes do SSIS. Eles são gerados quando você seleciona o nível de registros em log Basic/Verbose
e são úteis para a depuração/verificação de conformidade.
{
"time": "",
"operationName": "",
"category": "",
"correlationId": "",
"dataFactoryName": "",
"integrationRuntimeName": "",
"level": "",
"properties": {
"operationId": "",
"contextDepth": "",
"packagePath": "",
"contextType": "",
"contextSourceName": "",
"contextSourceId": "",
"propertyName": "",
"propertyValue": ""
},
"resourceId": ""
}
Propriedade | Type | Descrição | Exemplo |
---|---|---|---|
time | String | A hora do evento no formato UTC: YYYY-MM-DDTHH:MM:SS.00000Z |
2017-06-28T21:00:27.3534352Z |
operationName | String | Definida como YourSSISIRName-SSISPackageEventMessageContext |
mysqlmissisir-SSISPackageEventMessageContext |
category | String | A categoria dos logs de diagnóstico | SSISPackageEventMessageContext |
correlationId | String | A ID exclusiva para acompanhar uma operação específica | bbbb1111-cc22-3333-44dd-555555eeeeee |
dataFactoryName | String | O nome do data factory | MyADFv2 |
integrationRuntimeName | String | O nome do SSIS IR | MySSISIR |
level | String | O nível dos logs de diagnóstico | Informational |
operationId | String | A ID exclusiva para acompanhar uma operação específica no SSISDB | 1 (1 significa operações relacionadas aos pacotes não armazenados no SSISDB/invocados por meio do T-SQL). |
contextDepth | String | O nível de detalhes do contexto de mensagem de evento | 0 (0 significa o contexto antes do início da execução de pacotes, 1 significa o contexto quando ocorre um erro, esse número aumenta à medida que o contexto está mais distante do erro). |
packagePath | String | O caminho do objeto de pacote como a origem de contexto da mensagem de evento | \Package |
contextType | String | O tipo do objeto de pacote como a origem de contexto da mensagem de evento | 60 (Veja mais tipos de contexto). |
contextSourceName | String | O nome do objeto de pacote como a origem de contexto da mensagem de evento | MyPackage |
contextSourceId | String | A ID exclusiva do objeto de pacote como a origem de contexto da mensagem de evento | {E2CF27FB-EA48-41E9-AF6F-3FE938B4ADE1} |
propertyName | String | O nome da propriedade do pacote como a origem de contexto da mensagem de evento | DelayValidation |
propertyValue | String | O valor da propriedade do pacote como a origem de contexto da mensagem de evento | False |
resourceId | String | A ID exclusiva do recurso do data factory | /SUBSCRIPTIONS/<subscriptionID>/RESOURCEGROUPS/<resourceGroupName>/PROVIDERS/MICROSOFT.DATAFACTORY/FACTORIES/<dataFactoryName> |
Atributos de log das mensagens de evento do SSIS
Estes são os atributos de log das mensagens de evento geradas pelas execuções de pacotes do SSIS no SSIS IR. Eles transmitem informações semelhantes à tabela ou exibição das mensagens de evento do SSISDB que mostra o texto ou os metadados detalhados das mensagens de evento. Eles são gerados em qualquer nível de log, exceto None
.
{
"time": "",
"operationName": "",
"category": "",
"correlationId": "",
"dataFactoryName": "",
"integrationRuntimeName": "",
"level": "",
"properties": {
"operationId": "",
"messageTime": "",
"messageType": "",
"messageSourceType": "",
"message": "",
"packageName": "",
"eventName": "",
"messageSourceName": "",
"messageSourceId": "",
"subcomponentName": "",
"packagePath": "",
"executionPath": "",
"threadId": ""
}
}
Propriedade | Type | Descrição | Exemplo |
---|---|---|---|
time | String | A hora do evento no formato UTC: YYYY-MM-DDTHH:MM:SS.00000Z |
2017-06-28T21:00:27.3534352Z |
operationName | String | Definida como YourSSISIRName-SSISPackageEventMessages |
mysqlmissisir-SSISPackageEventMessages |
category | String | A categoria dos logs de diagnóstico | SSISPackageEventMessages |
correlationId | String | A ID exclusiva para acompanhar uma operação específica | bbbb1111-cc22-3333-44dd-555555eeeeee |
dataFactoryName | String | O nome do data factory | MyADFv2 |
integrationRuntimeName | String | O nome do SSIS IR | MySSISIR |
level | String | O nível dos logs de diagnóstico | Informational |
operationId | String | A ID exclusiva para acompanhar uma operação específica no SSISDB | 1 (1 significa operações relacionadas aos pacotes não armazenados no SSISDB/invocados por meio do T-SQL). |
messageTime | String | A hora em que a mensagem de evento é criada no formato UTC | 2017-06-28T21:00:27.3534352Z |
messageType | String | O tipo da mensagem de evento | 70 (Veja mais tipos de mensagem). |
messageSourceType | String | O tipo da origem de mensagem de evento | 20 (Veja mais tipos de origem de mensagem). |
message | String | O texto da mensagem de evento | MyPackage:Validation has started. |
packageName | String | O nome do arquivo de pacote executado | MyPackage.dtsx |
eventName | String | O nome do evento de runtime relacionado | OnPreValidate |
messageSourceName | String | O nome do componente do pacote como a origem de mensagem de evento | Data Flow Task |
messageSourceId | String | A ID exclusiva do componente do pacote como a origem de mensagem de evento | {1a45a5a4-3df9-4f02-b818-ebf583829ad2} |
subcomponentName | String | O nome do componente de fluxo de dados como a origem de mensagem de evento | SSIS.Pipeline |
packagePath | String | O caminho do objeto de pacote como a origem de mensagem de evento | \Package\Data Flow Task |
executionPath | String | O caminho completo do pacote pai para o componente executado | \Transformation\Data Flow Task (Esse caminho também captura as iterações do componente). |
threadId | String | A ID exclusiva do thread executado quando a mensagem de evento é registrada | {1a45a5a4-3df9-4f02-b818-ebf583829ad2} |
Atributos de log das estatísticas de executáveis do SSIS
Estes são os atributos de log das estatísticas de executáveis geradas pelas execuções de pacotes do SSIS no SSIS IR, em que os executáveis são contêineres ou tarefas no fluxo de controle de pacotes. Eles transmitem informações semelhantes a uma tabela ou exibição das estatísticas de executáveis do SSISDB que mostra uma linha para cada execução de executável, incluindo as iterações. Eles são gerados em qualquer nível de log, exceto None
e são úteis para identificar gargalos ou falhas no nível de tarefa.
{
"time": "",
"operationName": "",
"category": "",
"correlationId": "",
"dataFactoryName": "",
"integrationRuntimeName": "",
"level": "",
"properties": {
"executionId": "",
"executionPath": "",
"startTime": "",
"endTime": "",
"executionDuration": "",
"executionResult": "",
"executionValue": ""
},
"resourceId": ""
}
Propriedade | Type | Descrição | Exemplo |
---|---|---|---|
time | String | A hora do evento no formato UTC: YYYY-MM-DDTHH:MM:SS.00000Z |
2017-06-28T21:00:27.3534352Z |
operationName | String | Definida como YourSSISIRName-SSISPackageExecutableStatistics |
mysqlmissisir-SSISPackageExecutableStatistics |
category | String | A categoria dos logs de diagnóstico | SSISPackageExecutableStatistics |
correlationId | String | A ID exclusiva para acompanhar uma operação específica | bbbb1111-cc22-3333-44dd-555555eeeeee |
dataFactoryName | String | O nome do data factory | MyADFv2 |
integrationRuntimeName | String | O nome do SSIS IR | MySSISIR |
level | String | O nível dos logs de diagnóstico | Informational |
executionId | String | A ID exclusiva para acompanhar uma execução específica no SSISDB | 1 (1 significa execuções relacionadas aos pacotes não armazenados no SSISDB/invocados por meio do T-SQL). |
executionPath | String | O caminho completo do pacote pai para o componente executado | \Transformation\Data Flow Task (Esse caminho também captura as iterações do componente). |
startTime | String | A hora em que o executável entra na fase de pré-execução no formato UTC | 2017-06-28T21:00:27.3534352Z |
endTime | String | A hora em que o executável entra na fase de pós-execução no formato UTC | 2017-06-28T21:00:27.3534352Z |
executionDuration | String | O tempo de execução do executável em milissegundos | 1,125 |
executionResult | String | O resultado da execução do executável | 0 (0 significa sucesso, 1 significa falha, 2 significa conclusão e 3 significa cancelamento). |
executionValue | String | O valor definido pelo usuário retornado pela execução do executável | 1 |
resourceId | String | A ID exclusiva do recurso do data factory | /SUBSCRIPTIONS/<subscriptionID>/RESOURCEGROUPS/<resourceGroupName>/PROVIDERS/MICROSOFT.DATAFACTORY/FACTORIES/<dataFactoryName> |
Atributos de log das fases do componente de execução do SSIS
Estes são os atributos de log das estatísticas de runtime para os componentes de fluxo de dados gerados pelas execuções de pacotes do SSIS no SSIS IR. Eles transmitem informações semelhantes a uma tabela ou exibição das fases do componente de execução do SSISDB que mostra o tempo gasto pelos componentes de fluxo de dados em todas as fases de execução. Eles são gerados quando você seleciona o Performance/Verbose
nível de log e são úteis para capturar as estatísticas de execução do fluxo de dados.
{
"time": "",
"operationName": "",
"category": "",
"correlationId": "",
"dataFactoryName": "",
"integrationRuntimeName": "",
"level": "",
"properties": {
"executionId": "",
"packageName": "",
"taskName": "",
"subcomponentName": "",
"phase": "",
"startTime": "",
"endTime": "",
"executionPath": ""
},
"resourceId": ""
}
Propriedade | Type | Descrição | Exemplo |
---|---|---|---|
time | String | A hora do evento no formato UTC: YYYY-MM-DDTHH:MM:SS.00000Z |
2017-06-28T21:00:27.3534352Z |
operationName | String | Definida como YourSSISIRName-SSISPackageExecutionComponentPhases |
mysqlmissisir-SSISPackageExecutionComponentPhases |
category | String | A categoria dos logs de diagnóstico | SSISPackageExecutionComponentPhases |
correlationId | String | A ID exclusiva para acompanhar uma operação específica | bbbb1111-cc22-3333-44dd-555555eeeeee |
dataFactoryName | String | O nome do data factory | MyADFv2 |
integrationRuntimeName | String | O nome do SSIS IR | MySSISIR |
level | String | O nível dos logs de diagnóstico | Informational |
executionId | String | A ID exclusiva para acompanhar uma execução específica no SSISDB | 1 (1 significa execuções relacionadas aos pacotes não armazenados no SSISDB/invocados por meio do T-SQL). |
packageName | String | O nome do arquivo de pacote executado | MyPackage.dtsx |
taskName | String | O nome da tarefa de fluxo de dados executada | Data Flow Task |
subcomponentName | String | O nome do componente de fluxo de dados | Derived Column |
fase | String | O nome da fase de execução | AcquireConnections |
startTime | String | A hora em que a fase de execução começa no formato UTC | 2017-06-28T21:00:27.3534352Z |
endTime | String | A hora em que a fase de execução termina no formato UTC | 2017-06-28T21:00:27.3534352Z |
executionPath | String | O caminho da execução da tarefa de fluxo de dados | \Transformation\Data Flow Task |
resourceId | String | A ID exclusiva do recurso do data factory | /SUBSCRIPTIONS/<subscriptionID>/RESOURCEGROUPS/<resourceGroupName>/PROVIDERS/MICROSOFT.DATAFACTORY/FACTORIES/<dataFactoryName> |
Atributos de log das estatísticas de dados de execução do SSIS
Estes são os atributos de log da movimentação de dados em cada segmento dos pipelines de fluxo de dados, componentes de upstream para downstream, os quais são gerados pelas execuções de pacotes do SSIS no SSIS IR. Eles transmitem informações semelhantes a uma tabela ou exibição das estatísticas de dados de execução do SSISDB que mostra as contagens de linhas dos dados movimentados por meio das tarefas de fluxo de dados. Eles são gerados quando você seleciona o Verbose
nível de log e são úteis para calcular a taxa de transferência do fluxo de dados.
{
"time": "",
"operationName": "",
"category": "",
"correlationId": "",
"dataFactoryName": "",
"integrationRuntimeName": "",
"level": "",
"properties": {
"executionId": "",
"packageName": "",
"taskName": "",
"dataflowPathIdString": "",
"dataflowPathName": "",
"sourceComponentName": "",
"destinationComponentName": "",
"rowsSent": "",
"createdTime": "",
"executionPath": ""
},
"resourceId": ""
}
Propriedade | Type | Descrição | Exemplo |
---|---|---|---|
time | String | A hora do evento no formato UTC: YYYY-MM-DDTHH:MM:SS.00000Z |
2017-06-28T21:00:27.3534352Z |
operationName | String | Definida como YourSSISIRName-SSISPackageExecutionDataStatistics |
mysqlmissisir-SSISPackageExecutionDataStatistics |
category | String | A categoria dos logs de diagnóstico | SSISPackageExecutionDataStatistics |
correlationId | String | A ID exclusiva para acompanhar uma operação específica | bbbb1111-cc22-3333-44dd-555555eeeeee |
dataFactoryName | String | O nome do data factory | MyADFv2 |
integrationRuntimeName | String | O nome do SSIS IR | MySSISIR |
level | String | O nível dos logs de diagnóstico | Informational |
executionId | String | A ID exclusiva para acompanhar uma execução específica no SSISDB | 1 (1 significa execuções relacionadas aos pacotes não armazenados no SSISDB/invocados por meio do T-SQL). |
packageName | String | O nome do arquivo de pacote executado | MyPackage.dtsx |
taskName | String | O nome da tarefa de fluxo de dados executada | Data Flow Task |
dataflowPathIdString | String | A ID exclusiva para acompanhar o caminho de fluxo de dados | Paths[SQLDB Table3.ADO NET Source Output] |
dataflowPathName | String | O nome do caminho de fluxo de dados | ADO NET Source Output |
sourceComponentName | String | O nome do componente de fluxo de dados que envia os dados | SQLDB Table3 |
destinationComponentName | String | O nome do componente de fluxo de dados que recebe os dados | Derived Column |
rowsSent | String | O número de linhas enviadas pelo componentes de origem | 500 |
createdTime | String | A hora em que os valores de linha são obtidos no formato UTC | 2017-06-28T21:00:27.3534352Z |
executionPath | String | O caminho da execução da tarefa de fluxo de dados | \Transformation\Data Flow Task |
resourceId | String | A ID exclusiva do recurso do data factory | /SUBSCRIPTIONS/<subscriptionID>/RESOURCEGROUPS/<resourceGroupName>/PROVIDERS/MICROSOFT.DATAFACTORY/FACTORIES/<dataFactoryName> |
Log de atividades
A tabela vinculada lista as operações que podem ser registradas no log de atividades desse serviço. Essas operações são um subconjunto de todas as operações do provedor de recursos possíveis no log de atividades.
Para obter mais informações sobre o esquema de entradas do log de atividades, confira Esquema do log de atividades.