Azure Data Factory と Fabric Data Factory の違い

Fabric Data Factory は Azure Data Factory の次世代です。 OneLake を統合ストレージ層として使用することで、Fabric Data Factory はインフラストラクチャの複雑さとデータ移動を軽減します。 パイプラインは、 OneLake ショートカット と テナント間共有を使用してライブ データを直接操作できます。

この記事では、両方のサービスのコア機能、アクティビティ、コネクタ、インフラストラクチャ コンポーネントを比較します。 アップグレードの計画を立てるには、 アップグレード計画ガイドをご覧ください。

特徴を並べて比較する

Azure Data Factory と Fabric Data Factory の間でコア機能がどのようにスタックされるかを次に示します。 この表では、変更された内容、新機能、および同じままのものが強調表示されています。

Azureデータファクトリー Fabric Data Factory 相違点
パイプライン パイプライン 統合性の向上: Fabric のパイプラインは、レイクハウス、データ ウェアハウス、その他の Fabric アイテムと、追加設定なしで最初からシームレスに連携できます。 ファブリック パイプラインには、より多くの SaaS ベースのアクティビティが含まれており、JSON 定義が異なります。 詳細については、 パイプライン機能の比較 を参照してください。
マッピングデータフロー Mapping Data Flow(MDF)変換機能を備えたDataflow Gen2 MDF変換を活用して、馴染みのあるMapping Data Flowのオーサリング体験とSparkベースの実行モデルを維持しましょう。
アクティビティ アクティビティ 今後さらに多くのアクティビティが追加予定です: おなじみの ADF アクティビティをすべて Fabric で利用できるよう取り組んでいます。 さらに、ADF では利用できない Office 365 Outlook アクティビティなどの新しいアクティビティを取得できます。 詳細については、 アクティビティの比較 を参照してください。
データセット 接続のみ よりシンプルなアプローチ: 複雑なデータセット構成は不要です。 Fabric Data Factoryでは、接続を使ってデータソースにリンクし、作業を始めます。 Fabric はデータセットを排除し、アクティビティ内でデータ プロパティをインラインで定義します。
リンクされたサービス 接続 より直感的: 接続はリンクされたサービスと同様に機能しますが、設定や管理が簡単です。
トリガー イベント トリガーのスケジュールとファイリング 組み込みのスケジューリング:Fabric のスケジューラーと Reflex イベントを使用して、パイプラインを自動的に実行できます。 ファイル イベント トリガーは、追加のセットアップなしで Fabric でネイティブに動作します。 FabricはADFの単独トリガーとは異なり、トリガーをアクティベーターフレームワークに統合しています。
公開 保存して実行する 公開ステップなし: Fabric では、パブリッシュステップを完全にスキップします。 [保存] を選択して作業を保存するか、[実行] を選択してパイプラインをすぐに保存して実行します。
自動解決とAzure Integration Runtime 不要 簡素化されたアーキテクチャ: 統合ランタイムを管理する必要はありません。 Fabric がコンピューティングを自動的に処理します。
セルフホステッド統合ランタイム オンプレミス データ ゲートウェイ 同じオンプレミスアクセス:おなじみのオンプレミスデータゲートウェイを使ってオンプレミスデータに接続します。 詳細については、 オンプレミスのデータ アクセス ガイドを参照してください。
Azure-SSIS 統合ランタイム 未定 Fabric における将来の機能:Fabric における SSIS 統合の設計はまだ進められています。
マネージド仮想ネットワークとプライベート エンドポイント 未定である。 Fabric における将来の機能:管理された仮想ネットワークとプライベート エンドポイントの Fabric 向け統合については、現在も取り組んでいます。
式表現言語 式表現言語 同じ表現:既存の表現の知識が直接引き継がれます。 構文はほぼ同じです。
認証のタイプ 認証の種類 その他のオプション: よく使われている ADF の認証方法はすべて Fabric でも利用でき、さらに新しい認証の種類も追加されています。
CI/CD CI/CD ADF 以外の強化された機能には、簡単なチェリーピック、個別アイテムのプロモーション、Git リポジトリの有効化、および組み込みの SaaS CI/CD オプションが含まれます。
ARM テンプレートのエクスポート/インポート 名前を付けて保存 クイック複製: Fabric では「名前を付けて保存」を使って、開発やテスト用にパイプラインを素早く複製できます。
監視 監視ハブ + 実行履歴 高度な監視:監視ハブは、クロスワークスペースの洞察と優れたドリルダウン機能を備えたモダンな体験を提供します。
デバッグ 対話型モード 簡素化されたデバッグ:FabricはADFのデバッグモードを排除します。 常にインタラクティブモードにいる。
変更データ キャプチャー (Change Data Capture, CDC) コピー ジョブ 増分データ移動:FabricはCDCアーティファクトではなくコピージョブを通じて増分データ移動を管理します。
Azure Synapse Link ミラーリング データレプリケーション:Fabric は、データレプリケーションのためのミラーリング機能で Azure Synapse Link を置き換えます。
パイプラインの実行アクティビティ Invoke パイプライン アクティビティ クロスプラットフォーム呼び出し: Fabricは、ADFのパイプライン実行アクティビティをクロスプラットフォーム呼び出しで強化します。

パイプライン機能の比較

カテゴリ ADFパイプライン Fabricパイプライン
サービスの種類 データ統合 PaaS サービス データ統合 SaaS サービス
作成環境 Azure ポータル (ADF Studio) Fabric / Power BI ワークスペース(レイクハウスやウェアハウスなどを含む統一ユーザーエクスペリエンス)
パイプライン オーケストレーション アクティビティ、トリガー、パラメーターを含むフル機能のパイプライン Fabric UX 用に再想像された同じオーケストレーション モデル
データ移動 コピー アクティビティ、マッピング データ フロー、オンプレミス IR のサポート、マネージド仮想ネットワーク コピー アクティビティ、Dataflow Gen2、OneLake および Fabric アイテムへの組み込みの接続機能、コピーなしでライブ データにアクセスするためのOneLake ショートカット、オンプレミス データ ゲートウェイ、仮想ネットワーク ゲートウェイ
コンピューティング/IR セルフホステッド、SSIS、Azure IR (移動 + 変換用) クラウド接続、オンプレミス、仮想ネットワーク ゲートウェイ
データフロー マッピングデータフローは、サポートされたソースおよびシンクコネクタを備えたローコードのSparkベースの変換を提供します Dataflow Gen2はSparkベースの実行を伴う MDF変換 を提供します。
監視 ADF Studioにおけるパイプラインとデータフロー(実行、トリガー、アラート付き) モニタリングハブとワークスペース パイプライン、データフロー、ノートブック、データベースなどを横断した統一ビューのモニタリング。
トリガー スケジュール、タンブリング ウィンドウ、イベント ベースのトリガー スケジュール、イベント トリガー、タンブリング ウィンドウ トリガーを間隔スケジュールとして設定します。 OneLake ショートカットとクロステナント共有を通じてライブ データを使用するパイプラインは、すべての Fabric トリガーの種類とシームレスに連携します。
CI/CD ARM テンプレート + Azure DevOps または GitHub リポジトリの統合 Fabric の組み込みのデプロイ パイプライン。ワークスペース レベルの昇格 (Dev → Test → Production) と外部リポジトリの統合
セキュリティ マネージド ID, Key Vault 統合, プライベート エンドポイント 同じセキュリティ モデルと Fabric ワークスペース RBAC。OneLake セキュリティ統合
データ共有とガバナンス N/A OneLakeショートカットを通じたテナント間データ共有により、組織の境界を越えた管理されたリアルタイムのデータアクセスが重複なしに可能になります
Pricing Azure 使用率ベースの従量課金制 (アクティビティごとの実行、データ移動、コンピューティング) 外部アクティビティまたはパイプライン アクティビティに対して課金されない容量ベース (Fabric F SKU)、アクティビティの実行とパイプライン のデータ移動のみ

注

組み込みのアップグレード体験は、Mapping Data Flowを含む適格なAzure Data FactoryおよびAzure Synapse Analyticsパイプラインをサポートします。 サポートされているマッピングデータフローは、Dataflow Gen2でMDF変換にアップグレードされています。 アップグレード前に対応しているコネクタ、変換方法、認証方法、現在の制限事項を確認してください。 要件および手順については、「Azure Data Factory Mapping Data Flow pipelines を Fabric にアップグレードする」をご覧ください。

アクティビティの比較

Data Factoryでは、引き続き高い継続性を維持しています。 ADFで利用可能な活動のうち約90% はすでにData Factoryで利用可能です。 以下は、ADFとData Factoryの両方での活動と利用可能性の内訳です:

アクティビティ ADF データファクトリー
ADX/KQL Y Y
変数の追加 Y Y
カスタム (Fabric の Azure Batch) Y Y
Azure Databricks ノートブックアクティビティ • Jarアクティビティ • Pythonアクティビティ • ジョブアクティビティ Azure Databricks アクティビティ
Azure Machine Learning Y Y
Azure Machine Learning のバッチ実行 Deprecated N/A
Azure Machine Learning の更新リソース Deprecated N/A
コピーする データをコピー コピー アクティビティ
データフロー Gen2 N/A Y
削除​​ Y Y
パイプラインの実行/呼び出し パイプラインの実行 パイプラインを呼び出す
ファブリックノート N/A Y
失敗 Y Y
Filter Y Y
各要素に対して Y Y
Functions Azure 関数 関数アクティビティ
[Get Metadata (メタデータの取得)] Y Y
HDInsight Hive アクティビティ • Pig アクティビティ • MapReduce アクティビティ • Spark アクティビティ • Streaming アクティビティ HDInsight アクティビティ
If 条件 Y Y
参照 Y Y
マッピング データ フロー Y Dataflow Gen2 の MDF 変換。 Dataflow Gen2のPower Queryも、代替のリデザインオプションとして利用可能です。
Office 365 Outlook N/A Y
Power Query (ADF のみ - ラングリング データフロー) Deprecated N/A
スクリプト Y Y
セマンティック モデルの更新 N/A Y
変数の設定 Y Y
Sproc Y Y
SSIS Y N/A
ストアド プロシージャ Y Y
スイッチ Y Y
Synapse Notebook と SJD アクティビティ Y N/A
チーム N/A Y
Until Y Y
Validation Y メタデータ取得 & If 条件
Wait Y Y
Web Y Y
Webhook Y Y
データフローの調整 Y Dataflow Gen2

Fabric Data Factory の新しいアクティビティ

活動の継続性を維持することに加え、Fabric Data Factoryはより豊かなオーケストレーションニーズに応える新しいアクティビティを導入します。 これらの新しいアクティビティは次のとおりです。

  1. Outlook: Outlook サービスとの統合を促進するために Fabric Data Factory で利用可能です。
  2. Teams: Fabric Data Factory で利用可能で、Microsoft Teams アクティビティのオーケストレーションを可能にします。
  3. セマンティック モデルのリフレッシュ: Fabric Data Factory で利用可能で、Power BI セマンティック モデルのリフレッシュ機能を強化します。
  4. Dataflow Gen2:Power Queryベースの変換およびSparkベースのMDF変換に、Fabric Data Factoryで利用可能です。 MDF変換は一般提供されており、パイプライン Dataflow アクティビティを通じて実行されます。

使用可能なすべての Fabric Data Factory アクティビティの一覧については、アクティビティの 概要を参照してください。

コネクタの比較

すべてのコネクタの比較と、Azure Data Factory と Fabric Data Factory での可用性については、 コネクタの比較に関する記事を参照してください。

セルフホスト型統合ランタイム(SHIR)とオンプレミスデータゲートウェイ(OPDG)

注

SHIRとOPDGが提供するサービスは異なります。

  • セルフホスト型Integration Runtime:Data Factory、Azure Synapse Analytics、Azure Machine Learning スタジオ、Azure Purviewをサポートします。
  • オンプレミスデータゲートウェイ:Power BI、Power Apps、Power Automate、Azure Analysis Services、Logic Apps、Fabric dataflow Gen2、Fabric パイプライン、Fabricコピージョブ、Fabricミラーリングをサポートします。
カテゴリ セルフホスト型 Integration Runtime(SHIR) オンプレミスデータゲートウェイ(OPDG)
サポート対象サービス - Azure Data Factory
- Azure Machine Learning Studio
- Azure Synapse Analytics
- Purview Azure
- Power BI
- Power Apps
- Power Automate
- Azure Analysis Services
- ロジックアプリ
- Fabric Dataflow Gen2
- ファブリック パイプライン
- ファブリックコピージョブ
- ファブリック ミラーリング
インストールおよび登録 - キーによって登録されます
- サービス モードで実行されます
- Microsoft Entra ID アカウントに登録されている
- ユーザー モードをサポートします
Platform -ウィンドウズ
- コンテナーイメージ がサポートされている
- Windows のみ
- コンテナーのサポートなし
プロキシ対応 - システム プロキシとカスタム プロキシの両方をサポートする - カスタム プロキシをサポートする
リージョンバインディング - Data Factory リージョンに設定
- 既定のリージョンを変更できません
- リージョンを変更できます
カスタムリレー - サポートされていません -サポート;顧客は独自のリレーを持ち込むことができます
サービス間での共有 - 最大 120 個のデータ ファクトリと共有
- ADF、Synapse、Purview、または Synapse ワークスペース間で共有することはできません
- テナント内でサポートされているすべてのサービスで使用可能
高可用性(HA) - 最大 8 ノード (既定値は 4) - 最大 10 ノード
回復 - 再インストールが必要 - サポートされている回復キー
負荷分散 - 使用可能なワーカー数 (CPU + メモリ) に基づくタスク レベルの負荷分散 - クエリ レベルの負荷分散
- ラウンドロビンまたはランダム分散のオプション
認証情報ストア - SHIR ノードにローカルに格納される
- Azure Key Vault がサポートされています
- ゲートウェイ クラウド サービスに一元的に格納される
- Key Vault の統合なし
自動更新 - サポートされています - サポートされていません
コネクタの拡張性 - サポートされていません - サポートされています
インタラクティブオーサリング - サポートされています - サポートされています
コントロールフロー用の Private Link - サポートされています - サポートされていません
バージョン管理 - 1 か月あたり 2 つのリリース。1 つは autoupdate としてプッシュされます
- 過去 12 か月間のリリースをサポート
- 1 か月に 1 つのリリース
- 過去 6 つのリリースをサポート
CPUおよびメモリスロットリング - サポートされていません - サポートされています
スループット制限 - ハード制限なし。ネットワーク帯域幅に依存 サービス固有の制限:
Power Apps/Power Automate/Logic Apps:
- 書き込み: 2 MB のペイロード制限
- 読み取り: 2 MB の要求制限、8 MB の圧縮された応答の制限
- GET 要求 URL の制限: 2,048 文字
Power BI DirectQuery:16MBの非圧縮応答制限

ADFマネージドVirtual NetworkとFabric virtual networkデータゲートウェイの違い

Azure Data Factory(ADF)マネージドVirtual NetworkとFabric virtual network(VNet)データゲートウェイは、データソースを公共のインターネットにさらさずに安全に接続するのに役立ちます。 どちらのオプションもクラウド ワークロードのプライベート接続をサポートしますが、設定方法、管理担当者、サポートするサービスが異なります。

  • ADFマネージドVNET
    Microsoft は、ネットワーク環境を所有し、管理します。 セットアップは簡単ですが、ネットワーク設定やファイアウォール規則を制御することはできません。

  • Fabric VNET データゲートウェイ ゲートウェイは、自社の Azure 仮想ネットワーク内に展開します。 これにより、ネットワーク、ファイアウォール、スケーリングを完全に制御できます。 ゲートウェイがリソースに接続する方法を決定し、すべてのネットワーク設定を管理します。

次の表を使用して主な違いを比較し、ワークロードとガバナンスのニーズに合ったオプションを選択します。

カテゴリ ADFマネージドVNet Fabric VNetデータゲートウェイ
対応サービス Azure Data Factory と Synapse パイプライン。 Fabric データフロー Gen2、Fabric データパイプライン、Fabric コピージョブ、Fabric ミラーリング、Power BI セマンティックモデル、Power BI ページ付きレポート
VNET所有権 Microsoft管理の仮想ネットワーク(顧客がネットワークを制御していません)。 カスタマー マネージド仮想ネットワーク (顧客は完全に制御できます)。
プライベートエンドポイント サポートされているサービス (Azure Storage、SQL DB など) に対して ADF によって自動作成および管理されます。 顧客は仮想ネットワークゲートウェイを設定し、Fabricワークロードを仮想ネットワーク内のリソースに接続します。
ネットワーク制御 制限あり - お客様は、仮想ネットワーク統合ランタイムのみをプライベート エンドポイントの許可リストに追加できます。 フル コントロール - お客様は、独自の仮想ネットワークでファイアウォール、NSG ルール、ルーティングを構成します。
インストール/デプロイ インストールは必要ありません。非表示の仮想ネットワーク内で Microsoft によって完全に管理されています。 仮想ネットワークデータゲートウェイを顧客の仮想ネットワークに展開する必要があります。
高可用性 Microsoftが管理し、ADFの仮想ネットワーク内で自動スケールしています。 TTL を有効にするときに予約モードに切り替えます。 スケーリングと HA (ノードベースのクラスター) をサポートしますが、カスタマー マネージド仮想ネットワーク内で実行されます。 最大7つのノードをサポートします。

Fabric Data Factory の機能

Fabric Data Factory には、自然言語を使用してパイプライン、データフロー、およびその他の Data Factory 項目を作成および管理するのに役立つ Data Factory のCopilotが含まれています。

ネイティブの湖畔ハウスと倉庫の統合

Fabric Data Factory の最大の利点の 1 つは、データ プラットフォームとの接続方法です。 Fabric内のレイクハウスやウェアハウスは、パイプラインのソースとしてもデスティネーションとしても機能し、統合されたデータプロジェクトを簡単に構築できます。 パイプラインは OneLake ショートカットを利用したレイクハウステーブルでの操作も可能であり、最初にワークスペースにコピーせずに外部ソース (テナント間共有を含む) からデータを変換および編成できます。

lakehouse と warehouse source タブのスクリーンショット。

レイクハウスと倉庫のデスティネーションタブのスクリーンショット。

Office 365を使用した電子メール通知

Office 365 Outlook アクティビティは、パイプラインの実行、アクティビティの状態、結果に関するカスタマイズされた電子メール通知を送信します。

Office 365 Outlook のアクティビティを示したスクリーンショット

合理化されたデータ接続エクスペリエンス

Fabricのデータの取得エクスペリエンスでは、コピー パイプラインと新しい接続のガイド付きセットアップが提供されます。

モダンで簡単なGet Data体験を示すスクリーンショット。

新しい接続を作成する方法を示すスクリーンショット。

CI/CD エクスペリエンス

Fabricは ARM テンプレートから CI/CD を分離するため、チェックイン、チェックアウト、検証、コラボレーションのために個々のワークスペース項目を選択できます。 外部 Git リポジトリ統合に加えて、Fabricには、外部リポジトリを必要としない組み込みのデプロイ パイプラインが用意されています。

監視ハブとアクティビティ インサイト

Fabric Data Factory 監視ハブを使用すると、ワークスペース間ですべてのワークロードを可視化し、個々のアクティビティの実行にドリルダウンできます。

監視ハブとデータファクトリーのアイテムのスクリーンショット。

コピー アクティビティの場合は、実行の詳細ボタン (眼鏡アイコン) を選択して、各ステージの所要時間を示す期間の内訳を表示します。

パイプラインのコピー監視結果を示すスクリーンショットは、コピー アクティビティの内訳詳細を示しています。

コピーデータの詳細を示すスクリーンショット。

パイプラインを迅速に複製

既存のパイプラインを複製するには 、[名前を付けて保存] 機能を使用します。 これを使用して、開発コピーの作成、バリエーションのテスト、または同様のワークフローの設定を行います。

Fabricパイプラインで名前を付けて保存する様子のスクリーンショット。

注

Fabric Data Factory向けに開発された新機能は、Azure Data FactoryやAzure Synapseのパイプラインにはバックポートされません。 2 つのプラットフォームでは、別々のロードマップが維持されます。 製品チームは、コミュニティのフィードバックに基づいてバックポート要求を評価します。

詳細については、次のリソースを参照してください。