Monitore a definição do seu trabalho no Apache Spark

Usando o monitoramento inline do item de definição de trabalho do Spark, você pode acompanhar o seguinte:

  • Monitore o progresso e o status da definição de um trabalho no Spark em execução.
  • Veja o status e a duração das definições anteriores de cargos no Spark.

Você pode obter essas informações no menu contextual Execuções Recentes no espaço de trabalho ou navegando pelas atividades de definição de trabalho do Spark no painel Monitor.

Definição de trabalho Spark monitoramento em linha

O recurso de monitoramento inline de definição de trabalho do Spark permite visualizar o envio de definição de trabalho do Spark e o status da execução em tempo real. Você também pode visualizar as execuções e configurações anteriores da definição de trabalho do Spark e acessar a página de detalhes da aplicação Spark para ver mais detalhes.

Captura de tela mostrando a definição do trabalho do Spark em monitoramento inline.

Visão de definição de trabalho Spark no workspace

Você pode acessar as execuções de trabalho associadas a itens específicos de definição de trabalhos do Spark usando o menu contextual de execuções recentes na página inicial do workspace.

Captura de tela mostrando a visão de itens de definição de trabalho do Spark no workspace.

A definição de trabalho Spark roda no painel Monitor

Para visualizar todas as aplicações Spark relacionadas à definição de uma vaga Spark, vá ao painel Monitor. Ordene ou filtre a coluna Tipo de Item para visualizar todas as atividades de execução associadas às definições de tarefas do Spark.

Uma captura de tela mostrando a definição do trabalho do spark é exibida no painel do Monitor.

O próximo passo após visualizar os detalhes de uma aplicação Apache Spark é visualizar o progresso do trabalho Spark abaixo da célula do notebook. Você pode consultar