Pijplijnen voor toewijzingsgegevensstromen in Azure Data Factory upgraden naar Fabric (Preview)

Belangrijk

De upgrade-ervaring voor Mapping Data Flows van Azure Data Factory naar Fabric is momenteel als openbare preview beschikbaar en kan nog worden gewijzigd.

Werk Azure Data Factory-pipelines met Mapping Data Flows bij naar Microsoft Fabric Data Factory door de stappen in dit artikel te volgen. In dit artikel wordt het migratiepad beschreven voor pijplijnen die gebruikmaken van Mapping Data Flows, die worden geconverteerd naar mapping data flow-transformaties (MDF) in Dataflow Gen2. Zie Uw Azure Data Factory-pijplijnen upgraden naar Fabric voor het migreren van pijplijnen die geen Mapping Data Flows bevatten.

Vereiste voorwaarden

Voordat u de upgrade start, controleert u of u het volgende hebt:

Ondersteunde upgradescenario's

Het upgradeprogramma ondersteunt de volgende scenario's:

  • Azure Data Factory-pijplijnen die Mapping Data Flows bevatten.
  • Azure Synapse Analytics-pipelines die Mapping Data Flows bevatten.
  • Lift-and-shift-migratie van bestaande Mapping Gegevensstroom-workloads naar Fabric.

De migratie starten

U kunt beginnen met de migratie van Azure Data Factory-pipelines die Mapping Data Flows bevatten via een van de volgende ingangspunten.

Ingangspunt Het beste voor Beginstap
Uit Azure Data Factory Een evaluatie van pijplijngereedheid uitvoeren vóór de migratie Option A: Beginnen vanaf Azure Data Factory
Vanuit een Fabric werkruimte Rechtstreeks koppelen en migreren van een Azure Data Factory exemplaar vanuit Fabric Option B: Beginnen vanaf Fabric

Beide opties worden voortgezet bij Migrate-pijplijnen.

Optie A: Beginnen vanaf Azure Data Factory

Gebruik deze optie als u het volgende wilt doen:

  • Migratiegereedheid controleren
  • Migratie-evaluatie uitvoeren
  • Ondersteunde pijplijnen evalueren vóór de migratie

Migratie starten vanaf Azure Data Factory

  1. Open het Azure Data Factory-portal.

  2. Selecteer Migreren naar Fabric (Preview).

  3. Selecteer Aan de slag.

    Schermopname van de Azure Data Factory-portal met de optie Migreren naar Fabric (preview) en de knop Aan de slag.

Migratie-evaluatie controleren

  1. Bekijk op de pagina Fabric Migratie-evaluatie (preview) de lijst met ondersteunde pijplijnen die beschikbaar zijn voor migratie.

  2. Kies Volgende.

    Schermopname van de pagina Fabric Migratieevaluatie met pijplijnen die gereed zijn voor migratie.

Azure Data Factory koppelen aan Fabric

  1. Selecteer de Fabric werkruimte waaraan u het Azure Data Factory-exemplaar wilt koppelen.

  2. Selecteer Mount.

  3. Nadat de koppelingsbewerking is voltooid, selecteert u Doorgaan in Fabric.

    Schermopname van het Fabric werkruimteselectiescherm dat wordt gebruikt om een Azure Data Factory exemplaar te koppelen.

    Schermopname van het scherm Doorgaan in Fabric voor het openen van de aangekoppelde Azure Data Factory-instantie in Microsoft Fabric.

Optie B: Beginnen vanaf Fabric

Gebruik deze optie als u al weet welk Azure Data Factory exemplaar u wilt migreren en rechtstreeks vanuit Fabric wilt beginnen.

Azure Data Factory koppelen vanuit Fabric

  1. Open uw Fabric-werkruimte.

  2. Selecteer Nieuw item.

  3. Selecteer Azure Data Factory.

    Schermopname van de Microsoft Fabric werkruimte Nieuwe itemervaring met Azure Data Factory selectie.

  4. Selecteer het Azure Data Factory exemplaar dat u wilt koppelen.

  5. Kies OK.

    Schermafbeelding van het dialoogvenster voor het selecteren van een Azure Data Factory-exemplaar.

Pijplijnen migreren

Nadat u Azure Data Factory in Fabric hebt gekoppeld, gaat u verder met de migratiewerkstroom.

Pijplijnen selecteren die u wilt migreren

  1. Open het gekoppelde Azure Data Factory-item in Fabric.

  2. Selecteer Migreren naar Fabric (preview).

    Schermopname van het gekoppelde Azure Data Factory-item in Fabric met de optie Migreren naar Fabric (preview).

  3. Selecteer de pijplijn die de gegevensstroom voor toewijzing bevat.

  4. Selecteer Verbindingen controleren.

    Schermopname van het scherm pijplijnselectie met pijplijnen die gereed zijn voor migratie.

Koppel diensten aan Fabric-verbindingen

  1. Op de pagina Verbindingen toewijzen:

    • Bekijk Azure Data Factory gekoppelde services.
    • Koppel ze aan Fabric-verbindingen.
  2. Klik op Bevestigen.

    Schermopname van de pagina Verbindingen toewijzen voor het toewijzen van gekoppelde services van Azure Data Factory aan Fabric-verbindingen.

Migratieresultaten bekijken

Nadat de migratie is voltooid, doet het hulpprogramma het volgende:

  • Migreert pijplijnen en Mapping Data Flows tegelijk.
  • Zet toewijzingsgegevensstromen om naar MDF-transformaties in Dataflow Gen2.
  • Hiermee worden gemigreerde artefacten in een nieuwe map in de Fabric werkruimte geplaatst.

Selecteer Weergeven in werkruimte.

Schermopname van de pagina met migratieresultaten met gemigreerde resources en hun statussen.

Transformaties van gemigreerde toewijzingsgegevensstromen valideren

Nadat de migratie is uitgevoerd, opent u de migratiemap en valideert u de bijgewerkte MDF-transformaties voordat u ze uitvoert.

Het gemigreerde dataflow Gen2-item openen

  1. Open het gemigreerde Gegevensstroom Gen2-item.

  2. Controleer de gemigreerde MDF-transformatielogica.

  3. Valideer de transformatiegrafiek met behulp van de MDF-transformatiewerkbalk.

    Schermopname van de ontwerpomgeving voor de transformatie van de toewijzingsgegevensstroom, waarin de gemigreerde transformatiegrafiek wordt weergegeven.

De transformatie van de gemigreerde toewijzingsgegevensstroom opslaan

  1. Open het menu Opslaan en uitvoeren .

  2. Selecteer Opslaan.

    Schermopname van het menu Opslaan en uitvoeren in de ontwerpervaring voor transformatie van toewijzingsgegevensstromen.

Note

Alleen de actie Opslaan wordt momenteel ondersteund voor MDF-transformaties tijdens openbare preview.

Gemigreerde pijplijnen uitvoeren

Voer na validatie de gemigreerde Fabric-pijplijn uit.

De pijplijnuitvoering configureren

  1. Open de gemigreerde Fabric-pijplijn.

  2. Selecteer de gegevensstroomactiviteit.

  3. Controleer de geselecteerde MDF-transformquery.

  4. Configureer indien nodig spark-runtime-instellingen.

    Schermopname van de pijplijneditor met de configuratie van de Dataflow-activiteit voor een transformator voor een mapping-gegevensstroom.

De gemigreerde pijplijn uitvoeren

  1. Valideer de pijplijn.

  2. Voer de pijplijn handmatig uit of configureer schema's en triggers.

    Schermopname van de opties voor pijplijnuitvoering en planning voor de gemigreerde pijplijn.

Bewaak uitvoeringen van transformaties van gemigreerde toewijzingsgegevensstromen

U kunt gemigreerde pijplijn- en MDF-transformatieuitvoeringen bewaken via:

  • Uitvoerdeelvenster van pijplijn
  • Monitoringhub
  • Activiteitsuitvoeringen
  • Details van uitvoering van gegevensstroomactiviteit

Schermopname van het uitvoervenster van de pijplijn met de uitvoeringsstatus van de gegevensstroomactiviteit.

Uitvoeringsdetails bekijken:

  1. Open de details van de pijplijnuitvoering.

  2. Selecteer de gegevensstroomactiviteit in Activiteitsuitvoeringen.

  3. Controleer de uitvoeringsstatus en runtimegegevens.

    Schermafbeelding van de Monitoring Hub waarop de uitvoeringen van pijplijnactiviteiten en hun statussen worden weergegeven.

    Schermopname van de uitvoeringsdetails van de gegevensstroomactiviteit met de verwerking van metrische gegevens.

Limitations

De volgende beperkingen zijn momenteel van toepassing tijdens de openbare preview:

Oppervlak Limitation
Flowlets Wordt niet ondersteund.
Gegevensstroom bibliotheek Wordt niet ondersteund.
Door de gebruiker gedefinieerde functies (UDF's) Wordt niet ondersteund.
Uitvoering van gegevensstroom MDF-transformaties kunnen alleen worden uitgevoerd via de activiteit Pijplijngegevensstroom. Het vernieuwen van de gegevensstroom wordt niet ondersteund.
Beheerd virtueel netwerk Ondersteuning voor beheerde Virtual Network is niet beschikbaar.
Uitvoering van Spark-runtime MDF-transformaties maken momenteel gebruik van de Spark-runtime-infrastructuur, zoals die van Azure Data Factory en Azure Synapse Analytics Mapping Data Flows.