分區化是一種技術,用於資料庫系統和分散式運算,以水準分割跨多部伺服器或節點的資料。 它涉及將大型資料庫或資料集拆分成較小且易於管理的部分,稱為分片。 分區會包含資料的子集,而且分區可一起構成完整的資料集。
適用於 PostgreSQL 的 Azure 資料庫 彈性伺服器上的彈性叢集提供兩種資料分片方式:基於列與基於架構。 每種選項都有其 取捨,因此你可以選擇最適合你申請需求的方案。
資料列型的分區化
單一資料庫共用結構描述模型中的分區資料表,也稱為資料列式分區化,租用戶會共存為相同資料表中的資料列。 你定義一個分配欄位來決定租戶,這會將表格水平拆分。
基於列的分片是硬體效率最高的方法。 叢集中的各個節點會將租戶密集配置並分散部署。 然而,此方法需要確保結構中所有資料表都有分布欄位,且應用程式中的所有查詢都依該欄位進行過濾。 基於資料列的分片在物聯網工作負載中表現良好,並能最大化硬體使用效率。
Benefits:
- 最佳效能。
- 每個節點的最佳租用戶密度。
缺點:
- 需要結構描述修改。
- 需要應用程式查詢修改。
- 要求所有租戶共用相同的架構。
結構描述型的分區化
基於結構的分片使用共享資料庫與獨立的結構模型。 每個結構在資料庫中扮演邏輯分片的角色。 多租用戶應用程式可以為每個租用戶使用個別的結構描述,便於依租用戶維度進行分區。 你不需要更改查詢,而應用程式只需小幅修改,即可在切換租戶時設定適當的 search_path。 結構描述型分區化是微服務的理想解決方案,對於部署無法進行加入資料列型分區化所需變更的應用程式的 ISV (獨立軟體廠商) 而言也是理想的解決方案。
Benefits:
- 租用戶可以有異質結構描述。
- 不需要任何結構描述修改。
- 不需要任何應用程式查詢修改。
- 結構描述型分區化與資料列型分區化相比,SQL 的相容性更好。
缺點:
- 相較於資料列型分區化,每個節點的租用戶較少。
分區化取捨
| 結構描述型的分區化 | 資料列型的分區化 | |
|---|---|---|
| 多租用戶模型 | 每個租用戶個別的結構描述 | 具有租用戶識別碼資料行的共用資料表 |
| Citus 版本 | 12.0 或以上 | 所有版本 |
| 相較於 vanilla PostgreSQL 的額外步驟 | 沒有,僅設定變更 | 在每個資料表上使用 create_distributed_table ,依租戶 ID 分配與共置資料表 |
| 租用戶的數目 | 1-10k | 1-1 M+ |
| 資料模型需求 | 分散式結構描述之間沒有外部索引鍵 | 需要在每個資料表中包含租使用者識別碼資料行 (散發資料行,也稱為分區化索引鍵),以及主索引鍵、外部索引鍵 |
| 單一節點查詢的 SQL 需求 | 每個查詢使用單一分散式結構描述 | 聯結和 WHERE 子句應包含 tenant_id 資料行 |
| 平行跨租用戶查詢 | 否 | Yes |
| 每個租用戶的資料表定義 | Yes | 否 |
| 存取控制 | 結構描述權限 | 結構描述權限 |
| 在租用戶之間共用資料 | 是,使用參考資料表 (在不同的結構描述中) | 是,使用參考資料表 |
| 租用戶進行分區隔離 | 依定義,每個租用戶都有自己的分區群組 | 可以透過 isolate_tenant_to_new_shard 為特定的租戶 ID 指定其專屬的分區群組 |