Compartilhar via


Monitorar a definição de trabalho do Apache Spark

Ao usar o monitoramento em linha do item de definição de trabalho do Spark, você pode acompanhar o seguinte:

  • Monitore o progresso e o status de uma definição de trabalho do Spark em execução.
  • Exiba o status e a duração das execuções anteriores da definição de trabalho do Spark.

Você pode obter essas informações no menu de contexto Execuções Recentes no workspace ou navegando pelas atividades de definição de trabalho do Spark no hub de monitoramento.

Monitoramento em linha da definição de trabalho do Spark

O recurso de monitoramento em linha da definição de trabalho do Spark permite que você exiba o status de envio e execução da definição de trabalho do Spark em tempo real. Você também pode ver as execuções e configurações anteriores da definição de trabalho do Spark e navegar até a página de detalhes do aplicativo Spark para ver mais detalhes.

Screenshot showing the spark job definition inline monitoring.

Exibição do item de definição de trabalho do Spark no workspace

Você pode acessar as execuções de trabalho associadas a itens específicos de definição de trabalho do Spark usando o menu de contexto Execução recente na página inicial do workspace.

Screenshot showing the spark job definition item view in workspace.

A definição do trabalho do Spark é executada no Hub de monitoramento

Para exibir todos os aplicativos do Spark relacionados a uma definição de trabalho do Spark, acesse o Hub de monitoramento. Classifique ou filtre a coluna Tipo de Item para exibir todas as atividades de execução associadas às definições de trabalho do Spark.

Screenshot showing the spark job definition runs in Monitoring hub.

A próxima etapa após a exibição dos detalhes de um aplicativo Apache Spark é exibir o progresso do trabalho do Spark abaixo da célula do Notebook. Você pode consultar