Überwachen Sie Ihre Apache Spark-Jobdefinition

Mit dem Inline-Monitoring des Spark-Job-Definitionselements können Sie Folgendes verfolgen:

  • Überwachen Sie den Fortschritt und Status einer laufenden Spark-Job-Definition.
  • Sehen Sie sich den Status und die Dauer vorheriger Spark-Job-Definitionsläufe an.

Diese Informationen erhalten Sie im Kontextmenü "Letzte Läufe" im Arbeitsbereich oder indem Sie die Spark-Job-Definitionsaktivitäten im Monitor-Fenster durchsuchen.

Spark-Job-Definition Inline-Überwachung

Die Spark-Jobdefinition-Inline-Monitoring-Funktion ermöglicht es Ihnen, die Einreichung und den Laufzeitstatus der Spark-Jobdefinition in Echtzeit einzusehen. Sie können außerdem die bisherigen Läufe und Konfigurationen der Spark-Job-Definition ansehen und zur Detailseite der Spark-Anwendung navigieren, um weitere Details zu sehen.

Screenshot zeigt die Inline-Definition der Spark-Job-Definition.

Spark Job Definition Item View im Arbeitsbereich

Sie können auf die mit bestimmten Spark-Job-Definitionselementen verbundenen Job-Läufe über das Kontextmenü " Letzte Läufe" auf der Arbeitsbereichs-Startseite zugreifen.

Screenshot zeigt die Spark-Job-Definitionsansicht im Arbeitsbereich.

Die Spark-Job-Definition läuft im Monitor-Fenster

Um alle Spark-Anwendungen zu sehen, die mit einer Spark-Job-Definition zusammenhängen, gehen Sie zum Monitor-Fenster. Sortieren oder filtern Sie die Spalte Item Type, um alle mit den Spark-Job-Definitionen verbundenen Laufaktivitäten anzuzeigen.

Ein Screenshot, der die Spark-Job-Definition zeigt, läuft im Monitor-Bereich.

Der nächste Schritt nach der Betrachtung der Details einer Apache Spark-Anwendung ist, den Fortschritt des Spark-Auftrags unter der Notebook-Zelle zu betrachten. Sie können sich beziehen auf