重要事項
僅淘汰 Microsoft Purview 資料控管功能
Microsoft Purview 統一目錄和傳統 Microsoft Purview 資料控管功能 (先前的 Azure Purview) 即將淘汰。 整個 Microsoft Purview 並未淘汰。 Microsoft Purview 資料安全性與合規性功能不受此公告影響,且 Microsoft 會繼續投資於此功能。
Microsoft 正在 Microsoft Fabric 中合併 其資料控管 功能。 無法再建立新的 Microsoft Purview 資料控管帳戶,而且現有的資料控管功能將維持在維護模式,直到 2027 年 11 月 12 日為止。
如需淘汰時間表、轉換指引,以及建議的後續步驟,請參閱 Microsoft Purview 資料控管淘汰公告。
本文概述如何註冊 Google BigQuery 專案,以及如何在 Microsoft Purview 中驗證 Google BigQuery 並與之互動。 如需有關 Microsoft Purview 的詳細資訊,請參閱簡介 文章。
支援的功能
掃描功能
| 中繼資料擷取 | 完整掃描 | 累加式掃描 | 範圍掃描 |
|---|---|---|---|
| 是 | 是 | 否 | 是 |
掃描 Google BigQuery 來源時,Microsoft Purview 支援:
擷取技術中繼資料,包括:
- 專案
- 資料集
- 包含資料行的資料表
- 檢視包括資料行
擷取資料表和檢視之間資產關係的靜態沿襲。
設定掃描時,您可以選擇掃描整個 Google BigQuery 專案,或將掃描範圍限定為與指定名稱 () 或名稱模式 () 相符的資料集子集。
其他功能
如需 分類、 敏感度標籤、 原則、 資料沿襲和 即時檢視,請參閱 支援的功能清單。
已知限制
- 目前,Microsoft Purview 僅支援掃描美國多區域位置中的 Google BigQuery 資料集。 如果指定的資料集位於其他位置,例如 us-east1 或 EU,您將觀察到掃描完成,但 Microsoft Purview 中未顯示任何資產。
- 從資料來源刪除物件時,目前後續掃描不會自動移除 Microsoft Purview 中的對應資產。
必要條件
具有有效訂閱的 Azure 帳戶。 免費建立帳戶。
有效的 Microsoft Purview 帳戶。
您需要資料來源系統管理員和資料讀取者權限,才能在 Microsoft Purview 管理入口網站註冊來源並加以管理。 如需權限的詳細資訊,請參閱 Microsoft Purview 中的存取控制。
為您的案例設定適當的整合執行階段:
-
若要使用自我裝載整合執行階段:
- 請遵循文章來建立和設定自我裝載整合執行階段。
- 確定已在安裝自我裝載整合執行階段的電腦上安裝 JDK 11 。 在您新安裝 JDK 之後,請重新啟動電腦,使其生效。
- 請確定執行自我裝載整合執行階段的電腦上已安裝 Visual C++ 可轉散發 (版 Visual Studio 2012 Update 4 或更新版本) 。 如果您尚未安裝此更新, 請立即下載。
- 在執行自我裝載整合執行階段的電腦上下載並解壓縮 BigQuery JDBC 驅動程式 。 記下您將用來設定掃描的資料夾路徑。
-
若要使用 Kubernetes 支援的自我裝載整合執行階段:
- 請遵循文章來建立和設定 Kubernetes 支援的整合執行階段。
- 在執行自我裝載整合執行階段的電腦上下載並解壓縮 BigQuery JDBC 驅動程式 。 記下您將用來設定掃描的資料夾路徑。
注意事項
驅動程式應該可由自我裝載整合執行階段存取。 根據預設,自我裝載整合執行階段會使用本機服務帳戶 「NT SERVICE\DIAHostService」。 請確定它具有驅動程式資料夾的 [讀取並執行] 和 [列出資料夾內容] 權限。
-
若要使用自我裝載整合執行階段:
掃描的必要權限
您用於掃描的 Google BigQuery 服務帳戶必須在要掃描的專案 () 中同時具有 BigQuery 中繼資料檢視器和 BigQuery 作業使用者 IAM 角色 。 之所以需要這些權限Microsoft是因為 Purview 會藉由讀取 Google BigQuery 資料庫系統資料表來擷取中繼資料 (例如 INFORMATION_SCHEMA) 。 當基礎 Google BigQuery JDBC 驅動程式需要從這些系統資料表讀取時,它會建立 BigQuery 作業。
Microsoft Purview 使用 Oauth 2.0 通訊協定存取 Google BigQuery 服務。 依照 建立及執行掃描 一節中的指示設定認證。
登錄
本節說明如何使用 Microsoft Purview 管理入口網站在 Microsoft Purview 中註冊 Google BigQuery 專案。
註冊步驟
開啟 Microsoft Purview 管理入口網站,方法為:
- 直接瀏覽至 https://web.purview.azure.com 並選取您的 Microsoft Purview 帳戶。
- 開啟 Azure 入口網站,搜尋並選取 Microsoft Purview 帳戶。 選取 [Microsoft Purview 管理入口網站 ] 按鈕。
選取左側導覽中的 [資料對應 ]。
選取 [註冊]。
在 [註冊來源] 上,選取 [Google BigQuery ]。 選取 [繼續]。
在 [ (Google BigQuery 註冊來源]) 畫面上,執行下列動作:
輸入資料來源將在目錄中列出的 名稱 。
輸入 ProjectID。 這應該是完整格式的專案識別碼。 例如,mydomain.com:myProject
從清單中選取集合。
選取 [登錄]。
掃描
請依照下列步驟掃描 Google BigQuery 專案,以自動識別資產。 如需一般掃描的詳細資訊,請參閱我們的 掃描和擷取簡介。
建立並執行掃描
在 Management Center 中,選取整合執行階段。 確定已設定自我裝載整合執行階段。 如果未設定,請使用 先決條件中提到的步驟。
瀏覽至 來源。
選取已註冊的 BigQuery 專案。
選取 [+ 新增掃描]。
請提供下列詳細資料:
名稱:掃描的名稱
透過整合執行階段連線:選取已設定的自我裝載整合執行階段
認證:設定 BigQuery 認證時,請務必:
- 選取 [基本驗證] 做為驗證方法
- 在 [使用者名稱] 欄位中提供服務帳戶的電子郵件識別碼。 例如,
xyz\@developer.gserviceaccount.com - 請遵循下列步驟來產生私密金鑰,複製整個 JSON 金鑰檔案,然後將它儲存為金鑰保存庫密碼的值。
若要從 Google 雲端平台建立新的私密金鑰:
- 在導覽功能表中,選取 IAM & 管理員 -> 服務帳戶 -> 選取專案 ->
- 選取要建立金鑰的服務帳戶的電子郵件地址。
- 選取 [索引鍵] 索引標籤。
- 選取 [新增金鑰 ] 下拉式功能表,然後選取 [建立新金鑰]。
- 選擇 JSON 格式。
注意事項
掃描程序正在執行時,私密金鑰的內容會儲存在 VM 上的臨時檔案中。 成功完成掃描後,將刪除此暫存檔案。 如果掃描失敗,系統將繼續重試,直到成功為止。 請確認執行 SHIR 的 VM 已適當限制存取權。
若要深入了解認證,請參閱 此處的連結。
驅動程式位置:指定執行自我主機整合執行階段之電腦中 JDBC 驅動程式位置的路徑。 例如:
D:\Drivers\GoogleBigQuery。- 對於本機電腦上的自我裝載整合執行階段:
D:\Drivers\GoogleBigQuery。 這是有效 JAR 資料夾位置的路徑。 該值必須是有效的絕對檔案路徑,且不含空格。 請確定驅動程式可由自我裝載整合執行階段存取;;從必要 條件章節深入了解。 - 對於 Kubernetes 支援的自我裝載整合執行階段:
./drivers/GoogleBigQuery。 這是有效 JAR 資料夾位置的路徑。 該值必須是有效的相對檔案路徑。 請參閱文件以 使用外部驅動程式設定掃描 ,以便事先上傳驅動程式。
- 對於本機電腦上的自我裝載整合執行階段:
資料集:指定要匯入的 BigQuery 資料集清單。 例如,
dataset1;dataset2。 當清單為空時,會匯入所有可用的資料集。 可接受的資料集名稱模式可以是靜態名稱或包含萬用字元 %。範例:
A%;%B;%C%;D- 以 A 或
- 結尾為 B 或
- 包含 C 或
- 等於 D
不能接受使用 NOT 和特殊字元。
可用的記憶體上限:VM 上可供掃描處理程序使用的記憶體 (上限) 以 GB 為單位。 這取決於要掃描的 Google BigQuery 專案大小。
選取 [測試連線]。
選取 [繼續]。
選擇您的 掃描觸發程序。 您可以設定排程或執行掃描一次。
檢閱您的掃描,然後選取 [儲存並執行]。
檢視您的掃描與掃描執行
若要檢視現有掃描:
- 移至 Microsoft Purview 入口網站。 在左側窗格中,選取資料 對應。
- 選取資料來源。 您可以在 [最近的掃描] 底下檢視該資料來源上的現有掃描清單,也可以在 [ 掃描 ] 索引標籤上檢視所有掃描。
- 選取您要檢視結果的掃描。 窗格會顯示所有先前的掃描執行,以及每個掃描執行的狀態和計量。
- 選取執行 ID 以檢查 掃描執行詳細資料。
管理您的掃描
若要編輯、取消或刪除掃描:
移至 Microsoft Purview 入口網站。 在左窗格中,選取 [資料對應]。
選取資料來源。 您可以在 [最近的掃描] 底下檢視該資料來源上的現有掃描清單,也可以在 [ 掃描 ] 索引標籤上檢視所有掃描。
選取您要管理的掃描。 然後您可以:
- 選取 [ 編輯掃描] 來編輯掃描。
- 選取 [ 取消掃描執行] 以取消進行中的掃描。
- 選取 [刪除掃描] 以刪除掃描。
注意事項
- 刪除掃描不會刪除從先前掃描建立的目錄資產。
譜系
掃描 Google BigQuery 來源之後,您可以 瀏覽 Unified Catalog 或 搜尋 Unified Catalog 以檢視資產詳細資料。
移至資產 -> 沿襲索引標籤,您可以在適用時查看資產關係。 請參閱支援的 Google BigQuery 沿襲案例上的 支援功能 章節。 如需一般沿襲的詳細資訊,請參閱 資料沿襲 和 沿襲使用者指南。
後續步驟
現在您已註冊來源,請遵循下列指南來深入了解 Microsoft Purview 和您的資料。