Utveckla och felsöka pipelines med en anteckningsbok (legacy)

Viktigt!

Den här funktionen finns som allmänt tillgänglig förhandsversion.

Du kan utveckla och felsöka ETL-pipelines från en Azure Databricks-anteckningsbok som är ansluten till en pipeline med den äldre redigeringsupplevelsen för anteckningsböcker i Lakeflow pipelines.

Viktigt!

Den här sidan beskriver den äldre notebook-redigeringsupplevelsen. Den här funktionen kan inte längre aktiveras och är endast tillgänglig på arbetsytor som tidigare valde bort Lakeflow Pipelines-redigeraren. Redigeringsupplevelsen för notebook-filer är inaktuell och tas bort.

Standardupplevelsen är Lakeflow Pipelines Editor. Använd Lakeflow Pipelines-redigeraren för att redigera notebook-filer eller Python- eller SQL-kodfiler för en pipeline. Mer information finns i Utveckla och felsöka ETL-pipelines med Lakeflow Pipelines Editor.

Översikt över anteckningsböcker i pipelines

När du arbetar med en Python- eller SQL-notebook-fil som är konfigurerad som källkod för en befintlig pipeline kan du ansluta notebook-filen direkt till pipelinen. När notebookfilen är ansluten till pipelinen är följande funktioner tillgängliga:

  • Starta och verifiera pipelinen från anteckningsboken.
  • Visa pipelinens dataflödesdiagram och händelselogg för den senaste uppdateringen i notebook-filen.
  • Visa pipeline-diagnostik i anteckningsboksredigeraren.
  • Visa status av pipelinens kluster i anteckningsboken.
  • Få åtkomst till pipelinegränssnittet från anteckningsboken.

Förutsättningar

  • Du måste ha en befintlig pipeline med en Python- eller SQL-notebook-fil konfigurerad som källkod.
  • Du måste antingen vara ägare till pipelinen eller ha CAN_MANAGE behörighet.

Begränsningar

  • De funktioner som beskrivs i den här artikeln är endast tillgängliga i Azure Databricks notebook-filer. Arbetsytefiler stöds inte.
  • Webbterminalen är inte tillgänglig när den är ansluten till en pipeline. Därför visas den inte som en flik i den nedre panelen.

Ansluta en notebook till en pipeline

I anteckningsboken klickar du på den nedrullningsbara menyn som används för att välja beräkning. Listrutan visar alla dina pipelines där den här anteckningsboken är källkoden. Om du vill ansluta anteckningsboken till en pipeline väljer du den i listan.

Visa pipelinens klusterstatus

För att enkelt förstå tillståndet för pipelinens kluster visas dess status i listrutan beräkning med en grön färg som anger att klustret körs.

Verifiera pipeline-kod

Du kan verifiera pipelinen för att söka efter syntaxfel i källkoden utan att bearbeta några data.

Gör något av följande för att verifiera en pipeline:

  • I det övre högra hörnet i anteckningsboken klickar du på Verifiera.
  • Tryck på Shift+Enter i valfri notebook-cell.
  • I listrutan för en cell klickar du på Verifiera pipeline.

Anmärkning

Om du försöker verifiera din pipeline när en befintlig uppdatering redan körs visas en dialogruta där du får en fråga om du vill avsluta den befintliga uppdateringen. Om du klickar på Jastoppas den befintliga uppdateringen och en verifierar uppdateringen startas automatiskt.

Starta uppdateringen av en pipeline

Om du vill starta en uppdatering av pipelinen klickar du på knappen Starta i det övre högra hörnet i anteckningsboken. Se Kör en pipelineuppdatering.

Visa status för en uppdatering

Den översta panelen i anteckningsboken visar huruvida en pipelineuppdatering är:

  • Starting
  • Validera
  • Stoppa

Visa fel och diagnostik

När du har startat en pipelineuppdatering eller validering visas eventuella fel med en röd understrykning. Hovra över ett fel för mer information.

Visa pipeline-händelser

När anteckningsboken är kopplad till en pipeline finns en flik för händelseloggen för pipelinen längst ned i anteckningsboken.

Händelselogg

Visa dataflödesdiagrammet för pipelinen

Om du vill visa en pipelines dataflödesdiagram använder du fliken pipelinediagram längst ned i notebook-filen. Om du väljer en nod i diagrammet visas schemat i den högra panelen.

Dataflödesgraf

Så här får du åtkomst till gränssnittet för pipeline från anteckningsboken

Du kan enkelt hoppa till pipeline-UI:n via menyn uppe till höger i anteckningsboken.

Öppna i pipeline-UI:t från notebooken

Komma åt drivrutinsloggar och Spark-användargränssnittet från notebooken

Drivrutinsloggarna och Spark-användargränssnittet som är associerade med pipelinen som utvecklas kan enkelt nås från anteckningsbokens Visa-meny .

Access-drivrutinsloggar och Spark-användargränssnitt

  • Last updated on