Azure Data Factoryn ja Fabric Data Factoryn erot

Fabric Data Factory on seuraavan sukupolven Azure Data Factory. Käyttämällä OneLakea yhtenäisenä tallennuskerroksena Fabric Data Factory vähentää infrastruktuurin monimutkaisuutta ja datan siirtoa. Putket voivat työskennellä suoraan livedatan kanssa OneLake-pikanäppäinten ja vuokralaisten välisen jakamisen kautta.

Tässä artikkelissa vertaillaan molempien palveluiden ydinominaisuuksia, toimintoja, liittimiä ja infrastruktuurikomponentteja. Päivityksen suunnittelua varten katso päivityssuunnittelun oppaasta.

Ominaisuuksien vertaileminen rinnakkain

Keskeiset ominaisuudet pinotaan Azure Data Factoryn ja Fabric Data Factoryn välille. Taulukko korostaa, mitä on muuttunut, mikä on uutta ja mikä pysyy samana.

Azure Data Factory Fabric Data Factory Eri asiat
Jakso Jakso Parempi integraatio: Fabric-putkistot toimivat saumattomasti järvitalojen, varastojen ja muiden Fabric-tuotteiden kanssa heti laatikosta otettuna. Kangasputket sisältävät enemmän SaaS-pohjaisia toimintoja ja eroavat JSON-määritelmistä. Katso lisätietoja myyntiputken ominaisuuksien vertailusta .
Tietovuon yhdistäminen Dataflow Gen2 Mapping tietovuo (MDF) -muunnoksilla Käytä MDF-muunnoksia säilyttääksesi tutun Mapping tietovuo -luontikokemuksen ja Spark-pohjaisen suoritusmallin.
Aktiviteetit Aktiviteetit Lisää aktiviteetteja tulossa: Työskentelemme tuodaksemme kaikki suosikkisi ADF-aktiviteetit Fabric:iin. Lisäksi saat uusia, kuten Office 365 Outlook -toimintoja, jotka eivät ole käytettävissä ADF:ssä. Katso lisätietoja aktiviteettivertailustamme .
Tietojoukko Vain yhteydet Yksinkertaisempi lähestymistapa: Ei enää monimutkaisia tietojoukkojen konfiguraatioita. Fabric Data Factoryssa käytät yhteyksiä yhdistääksesi tietolähteisiin ja aloittaaksesi työn. Fabric poistaa tietojoukot ja määrittää tietojen ominaisuudet toimintoihin.
Linkitetty palvelu Yhteydet Intuitiivisempaa: Yhteydet toimivat kuin linkitetyt palvelut, mutta niitä on helpompi perustaa ja hallita.
Käynnistimet Aikataulu- ja tiedostotapahtuma-käynnistimet Sisäänrakennettu ajoitus: Käytä Fabric:n ajastinta ja Reflex-tapahtumia putkistosi automaattiseen suorittamiseen. Tiedostotapahtuma-käynnistimet toimivat suoraan Fabricissa ilman lisäasetuksia. Fabric integroi triggerit Activator-kehykseensä, toisin kuin ADF:n itsenäiset triggerit.
Julkaise Tallenna ja suorita Ei julkaisuvaihetta: Fabric-versiossa jätä julkaisuvaihe kokonaan väliin. Tallenna työsi valitsemalla Tallenna tai tallenna ja suorita putki heti valitsemalla Suorita.
Autoresolve ja Azure-integraation suorituspalvelu Ei tarvita Yksinkertaistettu arkkitehtuuri: Ei tarvitse hallita integraatioajonaikaa. Fabric käsittelee käsittelyn puolestasi.
Itse isännöity integraation suorituspalvelut Paikallinen tietoyhdyskäytävä Sama paikallinen käyttöoikeus: Yhdistä paikallisiin tietoihisi tutun paikallisen dataportin avulla. Lisätietoja on paikallisessa tietojen käyttöoppaassa.
Azure-SSIS-integraation suorituspalvelut Määritettävä Tulevaisuuden kyvykkyys Fabric:ssa: Työskentelemme edelleen SSIS-integraation suunnittelun parissa Fabric:iin.
Hallitut näennäisverkot ja yksityiset päätepisteet Määritettävä. Tulevaisuuden ominaisuudet Fabric:ssa: Työskentelemme edelleen hallittujen virtuaaliverkkojen ja yksityisten päätepisteiden integraation parissa Fabric:ssa.
Lausekkeen kieli Lausekkeen kieli Samat lausekkeet: Nykyinen lauseketietosi siirtyy suoraan. Syntaksi on lähes samanlainen.
Todennustyypit Todennuslajit Lisää vaihtoehtoja: Kaikki suositut ADF-todennusmenetelmäsi toimivat Fabric:ssa, ja olemme lisänneet uusia todennustyyppejä.
CI/CD CI/CD ADF:n lisäksi parannettuja ominaisuuksia ovat helppo poimiminen, yksittäisten tuotteiden ylennys, Git-säpön käyttöönotto ja sisäänrakennetut SaaS CI/CD-vaihtoehdot.
ARM-mallin vienti/tuonti Tallenna nimellä Nopea kopioiminen: Fabric-ympäristössä käytä "Tallenna nimellä" -toimintoja nopeasti kopioidaksesi putkistoja kehitystä tai testausta varten.
Seuranta Valvontakeskus + suoritushistoria Edistynyt valvonta: Valvontakeskus tarjoaa modernin kokemuksen työtilan välisillä näkemyksillä ja paremmilla porautumismahdollisuuksilla.
Virheenkorjaus Interaktiivinen tila Yksinkertaistettu virheenkorjaus: Fabric poistaa ADF:n virheenkorjaustilan. Olet aina vuorovaikutteisessa tilassa.
Muutostietojen tallennus (CDC) Kopioi työt Inkrementaalinen datan siirto: Fabric hallinnoi inkrementaalista datan siirtoa kopiointitöiden kautta CDC-artefaktien sijaan.
Azure Synapse -linkki Mirroring Datan replikaatio: Fabric korvaa Azure Synapse Link peilausominaisuuksilla datan replikaatiota varten.
Suorita putkitoiminto Jakson aktiviteetin käynnistäminen Monialustainen kutsuminen: Fabric parantaa ADF:n Execute-putkitoimintoa monialustaisella kutsulla.

Putkilinjan ominaisuuksien vertailu

Luokka ADF-putket Fabric Pipelines
Palvelun tyyppi Tietojen integroinnin PaaS-palvelu Tietojen integrointi SaaS-palvelu
Sisällönluontiympäristö Azure-portaali (ADF Studio) Fabric / Power BI workspace (yhtenäinen käyttökokemus, jossa on järvimajoja, varastoja jne.)
Putken orkestrointi Monipuoliset putket, joissa on aktiviteetteja, laukaisimia, parametreja Sama orkestrointimalli, joka on kuviteltu uudelleen Fabric UX:lle
Tietojen siirto Kopiointitoiminto, tietovoiden yhdistäminen, paikallinen IR-tuki, hallittu näennäisverkko Copy activity, dataflows Gen2, sisäänrakennettu yhteys OneLake- ja Fabric-esineisiin, OneLake-pikakuvakkeet live-datan käyttöön ilman kopiointia, paikallinen dataportti, virtuaaliverkkokäytävä
Laskenta / IR Itse isännöity, SSIS ja Azure IR (siirtoa + muunnosta varten) Pilviyhteydet, paikallinen ja näennäisverkkoyhdyskäytävä
Tietovirrat Mapping Data Flows tarjoaa low-code-pohjaisia Spark-pohjaisia muunnoksia, joissa on tuetut lähde- ja sink-liittimet Dataflow Gen2 tarjoaa MDF-muunnokset Spark-pohjaisella suorituksella.
Seuranta Putkistot ja Data Flows ADF Studiossa, joissa on ajoja, laukaisimia ja hälytyksiä Monitoring Hubin ja työtilan valvonta yhtenäisillä näkymillä putkistojen, tietovirtojen, muistikirjojen, tietokantojen jne. välillä.
Käynnistimet Aikataulut, rullaava ikkuna, tapahtumapohjaiset käynnistimet Aikataulut, tapahtumalaukaisijat, pyörimisikkunan laukaisut intervalliaikatauluina. Putket, jotka käyttävät reaaliaikaista dataa OneLake-pikanäppäinten ja vuokralaisten välisen jakamisen kautta, toimivat saumattomasti kaikkien Fabric-laukaisutyyppien kanssa.
CI/CD ARM-mallit + Azure DevOps- tai GitHub-säilöintegraatio Fabricin sisäiset käyttöönottoputket; työtilatason ylennys (Dev → Test → Production) ja ulkoisen säilön integrointi
Security Hallitut käyttäjätiedot, Key Vault -integrointi, yksityiset päätepisteet Sama suojausmalli sekä Fabric-työtilan RBAC; OneLaken tietoturvan integrointi
Tietojen jakaminen ja hallinta – Käyttäjien välinen tietojen jakaminen OneLake-pikanäppäimien kautta mahdollistaa hallitun, reaaliaikaisen datan käytön organisaation rajojen yli ilman päällekkäisyyksiä
Pricing Azuren käyttöön perustuva käytön mukaan laskutettava (aktiviteetin suoritusta, tietojen siirtoa ja laskentaa kohden) Kapasiteettipohjainen (Fabric F SKU) ilman maksuja ulkoisista tai putkitoiminnoista, vain aktiviteettisuorituksista ja putken tietojen siirrosta

Note

Sisäänrakennettu päivityskokemus tukee kelvollisia Azure Data Factory- ja Azure Synapse Analytics -putkistoja, jotka sisältävät Mapping Data Flows. Tuetut Mapping Data Flows päivitetään MDF-muunnoksiksi Dataflow Gen2:ssa. Tarkista tuetut liittimet, muunnokset, todennusmenetelmät ja nykyiset rajoitukset ennen päivitystä. Vaatimuksia ja ohjeita varten katso Upgrade Azure Data Factory Mapping tietovuo pipelines to Fabric.

Toimintojen vertailu

Data Factoryn kanssa jatkamme korkean jatkuvuuden ylläpitämistä Data Factoryn kanssa. Noin 90% ADF:n saatavilla olevista toiminnoista on jo saatavilla Data Factoryn alla. Tässä on erittely toiminnoista ja niiden saatavuudesta sekä ADF:ssä että Data Factoryssa:

Toiminta ADF Tietotehdas
ADX/KQL Y Y
Liitä muuttuja Y Y
Mukautettu (Azure-erä in Fabric) Y Y
Azure Databricks Muistikirja-aktiviteetti • Jar-aktiviteetti • Python-aktiviteetti • Työtehtävä Azure Databricks -toiminta
Azure Machine Learning Y Y
Azuren koneoppimisen eräsuoritus Poistettu käytöstä –
Azuren automaattianalyysipalveluiden päivitysresurssi Poistettu käytöstä –
Kopioi Kopioi tiedot Copy activity
Tietovuo Gen2 – Y
Poista Y Y
Suorita/käynnistä putki Suorita putki Käynnistä putki
Kangas muistikirjat – Y
Hylätty Y Y
Suodatin Y Y
Jokaiselle Y Y
Funktiot Azure-funktio Funktion toiminta
Hanki metatiedot Y Y
HDInsight Pesätoiminta • Sikatoiminta • Karttavähennystoiminta • Kipinätoiminta • Suoratoistotoiminta HDInsight-toiminta
Jos kunto Y Y
Haku Y Y
Tietovirran kartoitus Y MDF-muunnokset Dataflow Gen2:ssa. Power Query Dataflow Gen2:ssa on myös saatavilla vaihtoehtoisena uudelleensuunnitteluvaihtoehtona.
Office 365 Outlook – Y
Power Query (vain ADF – Tietovuon järjestäminen) Poistettu käytöstä –
Käsikirjoitus Y Y
Semanttisen mallin päivitys – Y
Aseta muuttuja Y Y
Sproc Y Y
SSIS Y –
Tallennettu menettely Y Y
Switch Y Y
Synapse Notebook- ja SJD-aktiviteetit Y –
Joukkueet – Y
Kunnes Y Y
Vahvistus Y Hanki metatiedot & Jos ehto
Wait Y Y
verkko Y Y
Webhook Y Y
Tietovirran järjestäminen Y Dataflow Gen2

Uusia aktiviteetteja Fabric Data Factoryssa

Toiminnan jatkuvuuden ylläpitämisen lisäksi Fabric Data Factory esittelee uusia toimintoja vastaamaan rikkaampiin orkestrointitarpeisiisi. Näitä uusia toimintoja ovat:

  1. Outlook: Saatavilla Fabric Data Factoryssa helpottamaan integraatiota Outlook-palveluihin.
  2. Teams: Saatavilla Fabric Data Factoryssa mahdollistamaan Microsoft Teams -toimintojen orkestroinnin.
  3. Semanttinen mallin päivitys: Saatavilla Fabric Data Factoryssa parantamaan Power BI:n semanttisen mallin päivityskykyä.
  4. Dataflow Gen2: Saatavilla Fabric Data Factoryssa Power Query-pohjaisille ja Spark-pohjaisille MDF-muunnoksille. MDF-muunnokset ovat yleisesti saatavilla ja suoritetaan putkiston Dataflow-toiminnon kautta.

Luettelo kaikista käytettävissä olevista Fabric Data Factory -toiminnoista on Toimintojen yleiskatsauksessa.

Yhdistimien vertailu

Jos haluat verrata kaikkia yhdistimiä ja niiden saatavuutta Azure Data Factoryssa ja Fabric Data Factoryssa, katso Yhdistimien vertailu -artikkeli.

Itseisännöity integraatioajontime (SHIR) vs. paikallinen datayhdyskäytävä (OPDG)

Note

SHIR:n ja OPDG:n tukemat palvelut ovat erilaiset:

  • Self-hosted integroinnin suorituspalvelu: Tukee Data Factorya, Azure Synapse Analytics, Azure Machine Learning studio ja Azure Purview.
  • On-premises data gateway: Tukee Power BI:tä, Power Apps, Power Automate, Azure Analysis Services, Logic Apps, Fabric dataflow Gen2, Fabric pipeline, Fabric copy job ja Fabric-peilaus.
Luokka Itseisännöity integroinnin suorituspalvelu (SHIR) Paikallinen datayhdyskäytävä (OPDG)
Tuetut palvelut - Azure Data Factory
- Azuren koneoppimisstudio
- Azure Synapse Analytics
- Azure Purview
- Power BI
- Power Apps
- Power Automate
- Azure-analyysipalvelut
- Logiikka-sovellukset
- Kankaan tietovirta Gen2
- Kankaan putkisto
- Kankaan kopiointityö
- Kankaan peilaus
Asennus ja rekisteröinti - Rekisteröity avaimella
- Toimii huoltotilassa
- Rekisteröitynyt Microsoft Entra ID -tilillä
- Tukee käyttäjätilaa
Alusta -Windows
- Tuettu säilökuva
- Vain Windows
- Ei konttitukea
Välityspalvelintuki - Tukee sekä järjestelmää että mukautettua välityspalvelinta - Tukee mukautettua välityspalvelinta
Aluesidonta - Korjattu Data Factory -alueelle
- Oletusaluetta ei voi muuttaa
- Aluetta voidaan muuttaa
Mukautettu rele - Ei tueta -Tukivat; Asiakkaat voivat tuoda oman releensä
Jakaminen palveluiden välillä - Jaettu jopa 120 datatehtaan kanssa
- Ei voi jakaa ADF-, Synapse-, Purview- tai Synapse-työtilojen välillä
- Saatavilla kaikille vuokraajan tuetuille palveluille
Korkea saatavuus (HA) - Jopa 8 solmua (4 oletus) - Jopa 10 solmua
Toipuminen - Vaatii uudelleenasennuksen - Palautusavain tuettu
Kuormantasaus - Tehtävätason kuormituksen tasaus käytettävissä olevien työntekijöiden määrän perusteella (suoritin + muisti) - Kyselytason kuormituksen tasaus
- Round robin tai satunnainen jakauma
Tunnistetietojen tallennus - Tallennetaan paikallisesti SHIR-solmuihin
- Azure Key Vault tuettu
- Tallennetaan keskitetysti Gateway-pilvipalveluun
- Ei Key Vault -integraatiota
Automaattinen päivitys -Tukivat - Ei tueta
Liittimen laajennettavuus - Ei tueta -Tukivat
Interaktiivinen sisällöntuotanto -Tukivat -Tukivat
Yksityinen linkki Control Flow'ta varten -Tukivat - Ei tueta
Versiointi - Kaksi julkaisua kuukaudessa; yksi työnnetään automaattisena päivityksenä
- Tukee viimeisten 12 kuukauden julkaisuja
- Yksi julkaisu kuukaudessa
- Tukee viimeistä 6 julkaisua
Suorittimen ja muistin rajoitus - Ei tueta -Tukivat
Läpimenorajoitukset - Ei tiukkaa rajaa; riippuen verkon kaistanleveydestä Palvelukohtaiset rajat:
Power Apps / Power Automate / Logiikkasovellukset:
- Kirjoitus: 2 Mt:n hyötykuormarajoitus
- Luku: 2 Mt:n pyyntörajoitus, 8 Mt:n pakattu vastausraja
- GET-pyynnön URL-osoitteen rajoitus: 2 048 merkkiä
Power BI DirectQuery: 16 MB pakkaamaton vasterajoitus

ADF Managed näennäisverkko vs. Fabric virtual network data gateway

Azure Data Factory (ADF) Managed näennäisverkko ja Fabric virtual network (VNet) dataportti auttavat molemmat yhdistämään tietolähteisiin turvallisesti ilman, että ne altistuvat julkiselle internetille. Vaikka molemmat vaihtoehdot tukevat yksityistä yhteyttä pilvityökuormille, ne eroavat toisistaan sen suhteen, miten ne on määritetty, kuka niitä hallitsee ja mitä palveluita ne tukevat.

  • ADF:n hallinnoitu VNET
    Microsoft omistaa ja hallinnoi verkkoympäristöä. Saat yksinkertaisen asennuksen, mutta et voi hallita verkkoasetuksia tai palomuurisääntöjä.

  • Fabric VNET data gateway Otat portin käyttöön omassa Azure-virtuaaliverkossasi. Tämä antaa sinulle täyden hallinnan verkkoon, palomuuriin ja skaalaukseen. Päätät, miten yhdyskäytävä muodostaa yhteyden resursseihisi, ja hallitset kaikkia verkkoasetuksia.

Alla olevan taulukon avulla voit verrata tärkeimpiä eroja ja valita kuormitus- ja hallintotarpeisiisi sopivan vaihtoehdon.

Luokka ADF:n hallinnoitu VNet Fabric VNet dataportti
Tuetut palvelut Azure Data Factory & Synapse -putket. Fabric dataflow Gen2, Fabric data pipelines, Fabric copy job, Fabric mirroring, Power BI semanttiset mallit ja Power BI sivutetut raportit
VNET-omistus Microsoftin hallinnoima virtuaaliverkko (asiakas ei hallitse verkkoa). Asiakkaan hallitsema virtuaaliverkko (asiakkaalla on täydet käyttöoikeudet).
Yksityiset päätepisteet ADF luo ja hallitsee sitä automaattisesti tuetuille palveluille (Azure-tallennustila, SQL DB jne.). Asiakkaat konfiguroivat virtuaalisen verkon yhdyskäytävän yhdistämään Fabric-työkuormat virtuaaliverkon sisäisiin resursseihin.
Verkonhallinta Rajoitettu – asiakkaat voivat sallia virtuaaliverkon integraation ajontimen vain yksityisille päätelaitteille. Täysi hallinta – asiakas konfiguroi palomuurin, NSG-säännöt, reitityksen omassa virtuaaliverkossaan.
Asennus / käyttöönotto Asennusta ei tarvita; täysin Microsoftin hallitsema piilotetun virtuaaliverkon sisällä. Vaatii virtuaalisen verkon dataportin käyttöönottoa asiakkaan virtuaaliverkkoon.
Korkea saatavuus Microsoft hallinnoi, automaattisesti skaalautuva ADF:n virtuaaliverkossa. Vaihda varaustilaan, kun otat TTL:n käyttöön. Tukee skaalausta ja HA:ta (solmupohjaisia klustereita), mutta toimii asiakkaan hallitsemassa näennäisverkossa. Tue jopa seitsemää solmua.

Fabric Data Factoryn ominaisuudet

Fabric Data Factory sisältää Copilot for Data Factoryn, joka käyttää luonnollista kieltä auttaakseen luomaan ja hallitsemaan putkia, datavirtoja ja muita Data Factoryn tuotteita.

Alkuperäinen järvitalo ja varaston integraatio

Yksi Fabric Data Factoryn suurimmista eduista on se, miten se muodostaa yhteyden tietoympäristöihisi. Fabric:n järvirakennukset ja varastot toimivat sekä lähteinä että kohteina putkissasi, mikä tekee integroitujen dataprojektien rakentamisesta helppoa. Putket voivat myös toimia lakehouse-tauluilla, joita tukevat OneLake-pikakuvakkeet, jolloin voit muuntaa ja orkestroida dataa ulkoisista lähteistä (mukaan lukien vuokralaisten väliset jaot) ilman, että sinun tarvitsee ensin kopioida sitä työtilaan.

Kuvakaappaus, jossa näkyy lakehouse- ja varaston lähdevälilehti.

Kuvakaappaus, jossa näkyy lakehouse- ja varastokohde-välilehti.

Sähköposti-ilmoitukset Office 365:llä

Office 365 Outlook-aktiviteetti lähettää räätälöityjä sähköposti-ilmoituksia putkistoajoista, aktiviteettitilasta ja tuloksista.

Kuvakaappaus, jossa näkyy Office 365 Outlookin toiminta.

Virtaviivaistettu tietoyhteyden käyttökokemus

Fabric's Get data experience tarjoaa ohjatun pohjan kopiointiputkille ja uusille yhteyksille.

Kuvakaappaus, joka näyttää modernin ja helpon Get Data -kokemuksen.

Kuvakaappaus, joka näyttää, miten uusi yhteys luodaan.

CI/CD-kokemus

Fabric irrottaa CI/CD:n ARM-malleista, joten voit valita yksittäisiä työtilan kohteita kirjautumiseen, uloskirjautumiseen, validointiin ja yhteistyöhön. Ulkoisen Git-repon integraation lisäksi Fabric tarjoaa sisäänrakennetut käyttöönottoputket, jotka eivät vaadi ulkoista repoa.

Seurantakeskus ja toimintatiedot

Fabric Data Factoryn valvontakeskus tarjoaa työtilan välisen näkyvyyden kaikkiin työkuormiin, tarjoten yksityiskohtia yksittäisiin toimintoihin.

Kuvakaappaus, jossa näkyy valvontakeskus ja Data Factoryn tuotteet.

Kopiointitoimintoja varten valitse juoksutiedot -painike (silmälasikuvake) nähdäksesi kestojaon, joka näyttää, kuinka kauan kukin vaihe kesti.

Kuvakaappaus, joka näyttää putkiston kopion seurannan tulokset, tarjoaa erittelyn kopiointitoiminnasta.

Kuvakaappaus, jossa on kopiotietojen tiedot.

Pikaputken monistaminen

Käytä Tallenna kuin -ominaisuutta kopioidaksesi minkä tahansa olemassa olevan putken. Käytä sitä kehityskopioiden luomiseen, variaatioiden testaamiseen tai vastaavien työnkulkujen luomiseen.

Kuvakaappaus, jossa näkyy tallenna nimellä Fabric-putkisto.

Note

Fabric Data Factorylle kehitetyt uudet ominaisuudet eivät ole takaportattu Azure Data Factory- tai Azure Synapse-putkistoon. Nämä kaksi laituria ylläpitävät erillisiä tiekarttoja. Tuotetiimit arvioivat backport-pyyntöjä yhteisön palautteen perusteella.

Katso lisätietoja seuraavista resursseista: