Pijplijnuitvoeringen bewaken in Fabric Data Factory

In dit artikel leest u hoe u uw pijplijnuitvoeringen bewaakt. Of u nu wilt controleren hoe dingen gaan of iets specifieks moeten oplossen, u kunt de voortgang bijhouden, problemen vroeg opsporen en werkstromen soepel laten verlopen. Met bewaking kunt u problemen vroegtijdig ondervangen en uw werkstromen op schema houden.

Pijplijnuitvoeringen bewaken

  1. Beweeg de muisaanwijzer over uw pijplijn in de werkruimte om de pijplijnruns te controleren. De knop Meer opties (...) wordt rechts van de naam van uw pijplijn weergegeven.

    Schermopname van waar u meer pijplijnopties kunt vinden.

  2. Selecteer Meer opties (...) om de lijst met opties weer te geven. Vervolgens selecteert u uitvoeringsgeschiedenis weergeven. Met deze actie wordt een fly-out aan de rechterkant van het scherm geopend met alle recente uitvoeringen en uitvoeringsstatussen.

    Schermopname die laat zien waar

    Schermopname van een lijst met recente uitvoeringen.

  3. Selecteer Ga naar monitor in de vorige schermopname om meer details weer te geven en resultaten te filteren. Gebruik het filter om specifieke pijplijnuitvoeringen te vinden op basis van verschillende criteria.

    Schermopname van filteropties.

  4. Selecteer een van uw pijplijnuitvoeringen om gedetailleerde informatie weer te geven. U kunt bekijken hoe uw pijplijn eruitziet en meer eigenschappen weergeven, zoals Run ID of fouten als de pijplijnuitvoering is mislukt.

    Schermopname van recente uitvoeringsdetails.

  5. Als er meer dan 2000 activiteitsuitvoeringen in uw pijplijnen zijn, selecteert u Meer laden om meer resultaten te zien op dezelfde bewakingspagina.

    Schermopname van activiteituitvoeringen met een tekstvak om meer te laden gemarkeerd.

    Schermopname van alle details van de activiteitsuitvoering geladen.

  6. Gebruik Filter om te filteren op activiteitsstatus of kolomopties om te wijzigen welke kolommen worden weergegeven in de bewakingsweergave.

    Schermopname van filteropties voor het uitvoeren van activiteiten.

    Schermopname van kolomopties.

    U kunt ook zoeken naar een activiteitsnaam, activiteitstype of activiteitsuitvoerings-id met het vak Filteren op trefwoord .

    Schermopname van het vak Trefwoordfilter.

    Schermopname van resultaten voor het filteren van trefwoorden.

  7. Als u uw bewakingsgegevens wilt exporteren, selecteert u Exporteren naar CSV.

    Schermopname van de optie Exporteren naar CSV.

  8. Als u meer informatie wilt over de invoeren uitvoer van de pijplijnuitvoering, selecteert u de invoer- of uitvoerkoppelingen rechts van de relevante rij onder Uitvoeringen van activiteit.

  9. Selecteer Pijplijn bijwerken om vanuit dit scherm wijzigingen aan te brengen in uw pijplijn. Met deze actie keert u terug naar het pipeline-canvas.

  10. Selecteer Opnieuw uitvoeren om uw pijplijn opnieuw uit te voeren. Kies ervoor om de hele pijplijn opnieuw uit te voeren of alleen opnieuw uit te voeren vanuit de mislukte activiteit.

    Schermopname van mislukte activiteit opnieuw uitvoeren.

  11. Als u prestatiedetails wilt weergeven, selecteert u een activiteit in de lijst met uitvoeringen van activiteit. Het deelvenster met prestatiedetails wordt geopend.

    Schermopname van details van gekopieerde gegevens.

    Meer informatie vindt u onder Uitsplitsing duur en Geavanceerd.

    ** Schermopname van aanvullende details voor de kopieerdata-uitvoering.

Gantt-weergave

De Gantt-weergave biedt een duidelijke, visuele manier om pijplijnuitvoeringen in de loop van de tijd bij te houden. Elke uitvoering wordt weergegeven als een balk, gegroepeerd op pijplijnnaam en de lengte van de balk laat zien hoe lang de uitvoering duurde. Gebruik deze weergave om patronen te herkennen, duur te vergelijken en vertragingen, overlappingen of afwijkingen in één oogopslag te identificeren.

Schermopname die laat zien waar u kunt schakelen tussen weergaven.

De lengte van de balk vertegenwoordigt de duur van de pijplijnuitvoering. U kunt de balk selecteren om meer details weer te geven.

Schermopname van de Gantt-weergave met verschillende staaflengten.

Schermopname van details van pijplijnuitvoering vanuit de Gantt-weergave.

Werkruimtebewaking voor pijplijnen

Werkruimtebewaking biedt zichtbaarheid op logboekniveau voor alle items in een werkruimte, inclusief pijplijnen.

  1. Als u werkruimtebewaking wilt inschakelen, gaat u naar werkruimte-instellingen in uw Fabric werkruimte en selecteert u Bewaking.

  2. Voeg een monitoring-eventhouse toe en schakel Logwerkruimteactiviteit in. Fabric maakt een KQL-database (Kusto Query Language) in het eventhouse in uw werkruimte voor het opslaan van logboeken.

    Schermopname van het in-/uitschakelen van werkruimtebewaking.

  3. Ga naar de KQL-database die Fabric heeft gemaakt. U vindt deze via de koppeling Bewakingsdatabase in de bewakingsinstellingen of rechtstreeks in uw werkruimte.

    Schermopname van items die zijn gegenereerd op basis van werkruimtebewaking.

  4. In de KQL-database legt de tabel ItemJobEventLogs gebeurtenissen op pijplijnniveau vast die in uw werkruimte voorkomen (ook wel L1-bewaking genoemd). Logboeken omvatten pijplijnnaam, uitvoeringsstatus, tijdstempels en systeemdiagnose.

    Schermopname van de bewakingstabel van de pijplijnwerkruimte.

Gebruik KQL-query's in het bewakings-eventhouse om het volgende te analyseren:

  • Succes- en falentrends
  • Metrische gegevens voor prestaties
  • Foutdetails voor probleemoplossing

Capaciteitsgebruik bewaken

Fabric capaciteitsbeheerders kunnen de app Microsoft Fabric Capacity Metrics gebruiken om capaciteitsbronnen weer te geven. Deze app laat zien hoeveel CPU-gebruik, verwerkingstijd en geheugenpijplijnen, gegevensstromen en andere items verbruiken in werkruimten met capaciteit. Gebruik deze om overbelastingsoorzaken, piekmomenten en de meest resource-intensieve items te identificeren.

Verwante inhoud

  • Last updated on