Azure Databricks on Microsoft Azure Government

Important

Azure Databricks on Azure Government 目前處於 Beta 階段。 要加入,請註冊新的 Azure Government 訂閱,以使用 Azure Databricks New GovCloud 環境預覽功能。 請參閱 「開始使用 Beta 版」。

本文說明 Microsoft Azure Government 上的 Azure Databricks,包括合規控制、如何加入新 Azure Government 環境的 Beta 版本、支援的區域與網址、資料駐留狀態,以及支援的系統資料表。

Azure Government 概覽

Azure Government 是專為 美國 政府機構及其合作夥伴設計的專用 Microsoft Azure 雲端。 它與全球 Azure 雲端物理隔離,由經過篩選的美國人員操作,以符合美國聯邦、州、地方及部落政府的合規要求。 詳細資訊請參閱 Microsoft Azure Government。

Azure Databricks 在 Azure Government 上提供部署在 Azure Government 中的 Azure Databricks 平台,並具備合規與安全控管功能。 它可在 Azure Government usgovva 和 usgovaz 區域使用。

每個工作空間預設都啟用合規安全設定檔與強化安全監控,前端與後端連線需使用 Azure Private Link,且客戶內容僅在美國政府雲端區域儲存與處理。

Beta 工作區在 Azure Government 中於一個新環境內執行,該環境與現有的 Azure Databricks 工作區分開。 現有的工作區不會被遷移。 不允許處理受控非機密資訊(CUI)或其他受規範的資料。

Requirements

  • 一個從未包含 Azure Databricks 工作區的 Azure Government 訂閱。 請不要註冊包含 Azure Databricks 工作區、先前包含後來被刪除的 Azure Databricks 工作區,或在 Azure Government 中與現有Azure Databricks環境相關聯的訂閱。
  • 在訂閱上註冊預覽功能的權限。

Important

您需完全負責驗證敏感資訊從未輸入到客戶定義的輸入欄位,例如工作區名稱、運算資源名稱、標籤、工作名稱、工作執行名稱、網路名稱、憑證名稱、儲存帳號名稱,以及 Git 儲存庫 ID 或網址。 這些欄位可能會在合規性界限之外儲存、處理或存取。

Compliance

在 Microsoft Azure Government 上的 Azure Databricks 目前還在測試階段。 Azure Databricks 正致力於取得合規制度的認證。 在授權完成前,請勿處理受控非機密資訊(CUI)或任何其他受本標準規範的資料。

Note

Azure Private Link 是後端與前端連線所必需的。 詳細資訊請參閱 Private Link 概念。

開始使用 Beta 版

在你註冊之前

使用一個從未被用來建立 Azure Databricks 工作區的專用 Azure Government 訂閱。 請勿註冊符合下列情況的訂閱:

  • 包含一個現有的 Azure Databricks 工作區。
  • 先前包含一個 Azure Databricks 工作區,後來已被刪除。
  • 已與現有的 Azure Databricks 環境在 Azure Government 中關聯。

Beta 版採用訂閱層級的功能註冊來決定哪個環境接收工作區操作。 註冊新環境功能後,您在該訂閱中建立的新 Azure Databricks 工作區會被導向新環境。 要註冊此功能,您需要授權才能在訂閱中註冊預覽功能。 詳細資訊請參閱「在 Azure 訂閱中設定預覽功能」。

Important

您必須先註冊 Azure Databricks New GovCloud 環境功能,才能在訂閱中建立任何 Azure Databricks 工作區。 在功能註冊前建立的工作區並非建立於新環境中。

註冊預覽功能

  1. 登入 Azure Government 入口網站。
  2. 開放 訂閱。
  3. 選擇您想用於 Beta 的 Azure Government 訂閱。
  4. 在 設定中,選擇 預覽功能。
  5. 搜尋 Azure Databricks New GovCloud 環境功能。
  6. 選取該功能,然後選擇註冊。
  7. 等到註冊狀態顯示 已註冊時再說。
  8. 使用標準的 Azure Government 工作區建立體驗,建立新的 Azure Databricks 工作區。 請參見 使用 Azure 入口網站 部署工作區。

Note

訂閱只能與 Azure Government 中的單一 Azure Databricks 環境相關聯:既有環境或新環境。 當訂閱被用來建立 Azure Databricks 工作區,或已註冊現有環境功能時,訂閱就會與現有環境關聯。 Azure Resource Manager 使用此關聯來決定將工作區作業路由到哪裡,因此需要一個單一且明確的目的地。 如果您在已與現有環境關聯的訂閱上註冊 Azure Databricks 新版 GovCloud 環境功能,則為保護現有資源,工作區建立及其他工作區操作將被封鎖。

解決註冊衝突

如果在 Azure Government 中與現有 Azure Databricks 環境相關的訂閱建立或其他工作區操作失敗,該訂閱也可能同時註冊為 Azure Databricks 新版 GovCloud 環境功能。 一個訂閱不能同時與這兩個環境建立關聯。 Azure Resource Manager 要求工作區作業只能有一個目的地,因此會封鎖這些作業,以保護現有資源。

不要重試建立工作區。 改為移除衝突的註冊。

Warning

除非 Microsoft 支援服務 指示您這麼做,否則不要從具有作用中的 Beta 工作區的訂閱中取消註冊此功能。

  1. 在 Azure Government 入口網站中,移至 訂用帳戶> 您的訂用帳戶>設定>預覽功能,並檢查 Azure Databricks New GovCloud environment 是否已註冊。 請參閱 預覽功能清單。

  2. 將 Azure CLI 設定為 Azure Government 並登入:

    az cloud set --name AzureUSGovernment
    az login
    
  3. 取消註冊該功能。 將 <subscription-id> 取代為您的訂用帳戶識別碼:

    az feature unregister --namespace Microsoft.Databricks --name UseEverGreenControlPlane --subscription <subscription-id>
    

    若要改用入口網站,請參閱 取消註冊預覽功能。

  4. 確認該功能已不再註冊:

    az feature show --namespace Microsoft.Databricks --name UseEverGreenControlPlane --subscription <subscription-id>
    
  5. 請重試工作區操作。

如果您無法判斷訂閱是否先前曾與 Azure Databricks 有關,或衝突仍然存在,請依照「取得支援」中所述的方式聯絡支援。

要加入 Beta 版,請註冊一個從未包含 Azure Databricks 工作區的新 Azure Government 訂閱。

Beta 版本限制

測試期間:

  • 存取權在訂閱層級啟用。
  • 訂閱不得有目前或先前的 Azure Databricks 工作區使用紀錄。
  • 註冊訂閱中的新工作區會使用新環境。
  • 現有的工作區不會被遷移。
  • 不支援生產及受控非機密資訊(CUI)工作負載。
  • 功能可用性與正式發行的 Azure Databricks 服務不同。 例如,僅提供部分系統資料表。 請參閱 支援的系統資料表。
  • 每位客戶在投入生產使用前,須自行符合其內部授權及運作授權(ATO)要求。

現有工作區

現有的工作區仍與其建立時的環境相關聯。 Beta 註冊不會遷移現有的工作區、筆記本、資料、設定或其他工作區資源。 註冊新環境功能並非遷移方法:請勿在包含現有或先前刪除的 Azure Databricks 工作區的訂閱上啟用此功能。

取得支援

請使用標準的 Azure Government 支援流程。 在支援請求中,請說明受影響的訂閱或工作空間正在參與 Microsoft Azure Government 環境上新版 Azure Databricks 的測試版。 請包含訂閱 ID、工作區名稱、ID 與 URL、區域、功能註冊狀態、錯誤訊息以及您嘗試執行的操作。

合規安全設定檔

合規安全性設定檔預設在 Azure Government 上的所有 Azure Databricks 工作區啟用。 合規安全設定檔具備額外的監控功能、強制執行的節點間加密實例類型、強化的運算映像,以及其他有助於符合合規要求的功能。 自動叢集更新 與 強化安全性監控 也會自動啟用。

合規安全性設定檔強制使用支援 Azure 虛擬網路 加密的 VM 實例類型,該加密提供叢集節點間硬體實作的網路加密。 有關需求,請參閱 合規性安全性設定檔要求。

Azure Databricks on Azure Government 區域與 URL

Azure Databricks 在 Azure Government 上可於 usgovaz 及 usgovva 地區使用。 請參閱 Azure Databricks 區域。

Azure Databricks on Azure Government URL 與商業版 Azure Databricks URL 不同。 在 Azure Government 上使用 Azure Databricks 的下列 URL:

  • 帳戶主控台 URL 及 REST API 的基本 URL: https://accounts.usgov.databricks.azure.us/
  • 工作區層級 REST API 的 Workspace URL 與基本 URL: https://adb-<workspace-id>.<random-number>.usgov.databricks.azure.us/

建立工作區後,您可以在 Azure Government 入口網站的工作區總覽頁面確認其 URL。

使用帳戶主控台的 URL 建立您的第一個帳戶管理員。有關步驟,請參閱建立您的第一個帳戶管理員。要完成這些步驟,您必須是具有提升權限的 Microsoft Entra ID 全域管理員。 詳細資訊請參閱 提升全域管理員的存取權限。

資料存放位置

Azure Government 工作區中的 Azure Databricks 一律強制執行資料落地。 客戶內容僅儲存並處理於美國政府雲端區域。 跨地理區域處理設定不適用於 Azure Government 工作區,且無法用於處理美國政府雲端區域以外的資料。

支援的系統資料表

在全新的 Azure Databricks on Azure Government 環境(Beta)中,以下系統表格可用於監控、治理與成本管理:

  • system.access schema: assistant_events, audit, inbound_network, outbound_network, workspaces_latest
  • system.billing schema: list_prices, usage
  • system.compute schema:clusters,node_timeline,node_types,warehouse_events,warehouses
  • system.lakeflow 結構描述:job_run_timeline、job_task_run_timeline、job_tasks、jobs、pipeline_update_timeline、pipelines
  • system.mlflow schema: experiments_latest, run_metrics_history, runs_latest
  • system.query schema: history
  • system.storage schema: predictive_optimization_operations_history, table_auto_upgrade_operations_history

請參閱 系統表格參考資料。