SQL 倉儲類型

Databricks SQL 支援無伺服器、專業和傳統類型。 以下章節將比較每種類型的特性與效能。

此外, Lakehouse Real-Time (Beta)是一種專門用於亞秒級、高並發讀取查詢的無伺服器倉庫類型。 請參考 Lakehouse 即時 SQL 倉儲。

依類型排序的效能功能

每個 SQL 倉儲類型都有不同的效能功能。 下表顯示每個 SQL 倉儲類型支援的效能功能。

倉儲類型 Photon 引擎 預測性 IO 智慧型工作負載管理
無伺服器 ✓ ✓ ✓
Pro ✓ ✓
經典 ✓

下列清單描述每個效能功能:

  • Photon:Databricks 內建的向量化查詢引擎。 這可讓您現有的 SQL 和 DataFrame API 呼叫更快,並減少每個工作負載的總成本。

  • 預測性 IO:一套用於加速 SQL 查詢中選擇性掃描操作的功能套件。 預測性IO可以提供各種不同的加速。

  • 智慧工作負載管理(IWM):一組功能,提升 Databricks SQL Serverless 快速且具成本效益地處理大量查詢的能力。 IWM 透過 AI 驅動的預測和動態管理技術,以快速確認工作負載具有正確的資源數量。 主要差異在於 Databricks SQL 中的 AI 功能,以動態回應工作負載需求,而不是使用靜態閾值。

    注意

    如需每個倉儲類型和詳細功能比較的定價,請參閱 Databricks SQL。 若要瞭解最新的 Databricks SQL 功能,請參閱Databricks SQL 版本資訊。

SQL 倉儲類型之間的效能差異

每個 SQL 倉儲類型都有不同的效能特性。

無伺服器 SQL 倉儲

使用 Azure Databricks 無伺服器架構,無伺服器 SQL 倉儲支援 Databricks SQL 的所有效能功能。 透過無伺服器 SQL 倉儲及其效能功能,您可以取得:

  • 快速啟動時間(通常介於 2 到 6 秒之間)。
  • 快速上調,以在需要時取得更多計算,以維持低延遲。
  • 查詢准入比虛擬機更接近硬體的限制。
  • 快速縮減,以在需求不足時將成本降到最低,並提供一致的效能與優化的成本和資源。

選擇無伺服器 SQL 倉庫,這樣可以獲得最佳的啟動效能、最有效率的 IO、更智慧地處理隨時間大幅變化的查詢需求,以及當發生查詢排隊時能快速地自動擴展。 請參閱 智慧工作負載管理和自動調整。

無伺服器 SQL 倉儲在下列類型的工作負載中表現良好:

  • ETL
  • 商業智慧
  • 探索性分析

重要

SQL 倉儲不支援 認證傳遞。 Databricks 建議使用 Unity 目錄進行數據控管。 請參閱 什麼是 Unity 目錄?。

Pro SQL 數據倉庫

Pro SQL 資料倉庫支援 Photon 和預測 IO,但不支援智慧工作負載管理。 與無伺服器 SQL 倉庫不同,其運算層存在於您的 Azure 訂閱中,而非您的 Azure Databricks 帳戶。 若沒有智慧型工作負載管理,專業 SQL 倉儲對隨時間大幅變動的查詢需求反應較慢,無法像無伺服器 SQL 倉儲那樣快速自動擴充,且啟動需數分鐘(通常約 4 分鐘)。 請參閱佇列和自動調整邏輯。

在下列情況下使用 Pro SQL 倉儲:

  • 無伺服器 SQL 倉儲無法在區域中使用。
  • 您有自定義的網路,而且想要連線到雲端或內部部署網路中的資料庫,以進行聯邦式或混合式架構。 例如,如果您想要將其他服務放入網路,例如事件總線或資料庫,或想要將網路連線到內部部署網路,請使用 pro SQL 倉儲。

傳統 SQL 倉儲

傳統 SQL 倉儲支援 Photon,但不支援預測性 IO 或智能工作負載管理。 與無伺服器 SQL 倉庫不同,其運算層存在於您的 Azure 訂閱中,而非您的 Azure Databricks 帳戶。 若沒有這些功能,經典 SQL 倉庫僅能提供入門級效能,低於無伺服器或專業 SQL 倉庫。 它啟動需要幾分鐘(通常約 4 分鐘),且在擴展時的反應速度不如無伺服器 SQL 倉庫。 請參閱佇列和自動調整邏輯。

使用傳統 SQL 倉儲來執行互動式查詢,以使用入門層級效能和 Databricks SQL 功能進行數據探索。

注意

如需設定 SQL 倉儲的大小,以及如何因應查詢佇列進行調整的資訊,請參閱佇列處理和自動調整邏輯。

Lakehouse Real-Time SQL 倉庫

重要

Lakehouse Real-Time (Lakehouse//RT)目前仍 處於測試階段。

Lakehouse Real-Time(Lakehouse//RT)是一種無伺服器倉庫類型,專為低延遲、高並發工作負載設計。 它能針對 Unity Catalog 資料表提供亞秒級的 SQL 讀取查詢,適合為應用程式提供分析資料、執行營運分析,並驅動數百至數千名同時在線使用者的 BI 儀表板。

Lakehouse//RT 支援讀取(SELECT)查詢與 CREATE TABLE AS SELECT (CTAS)。 詳情、要求與限制,請參見 Lakehouse Real-Time。

識別 SQL 倉庫的類型

若要查看現有 SQL 倉儲的類型,請查看其類型標籤。 標籤顯示 無伺服器、 專業、 經典或 即時,並顯示在 SQL 倉庫 頁面及倉庫詳細頁面上。 Real-Time 表示該倉庫為 Lakehouse//RT 倉庫。

倉庫類型的預設值是什麼?

針對 區域中支援無伺服器 SQL 倉儲且滿足 需求的 工作區,:

  • 使用UI時,預設的SQL倉儲類型是無伺服器。

  • 使用 SQL 倉儲 API 搭配預設參數,預設 SQL 倉儲類型為傳統。 若要使用無伺服器,請將 enable_serverless_compute 參數設定為 true,並將 warehouse_type 設定為 pro。 如果此工作區使用 SQL 倉儲 API 在 2022 年 11 月 1 日至 2023 年 5 月 19 日期間建立倉儲,並符合無伺服器 SQL 倉儲的需求,則預設值會維持設定為 true。 若要避免模棱兩可,特別是對於具有許多工作區的組織,Databricks 建議一律設定此字段。

  • 如果工作區使用 舊版外部 Hive 中繼存放區,則不支援無伺服器 SQL 倉儲。 默認的 SQL 倉儲類型與停用無伺服器計算時相同,在 UI 中為專業版,在 API 中使用傳統版。 此外,請連絡您的 Azure Databricks 帳戶小組,以深入瞭解 Unity 目錄或其他選項。

對於不支持無伺服器 SQL 倉儲的工作區:

  • 使用UI時,預設SQL倉儲類型為 pro。
  • 使用 SQL 倉儲 API 搭配預設參數,預設 SQL 倉儲類型為傳統。