Azure 容器儲存為 Kubernetes 應用程式提供雲端原生的持續性磁碟區協調與資料加速。
一般問題
Azure 容器儲存版本 2.x.x 和版本 1.x.x 有什麼差別? Azure 容器儲存(版本 2.x.x)具備更輕量化、按需安裝及優化資源利用率。 不過,2.x.x 版本目前支援本地 NVMe 和 Azure 彈性 SAN 作為後備儲存,而 1.x.x 版本則支援 Azure 磁碟、臨時磁碟(本地 NVMe 與臨時 SSD)以及 Azure 彈性 SAN。
Azure 容器儲存版本 2.0.x 與 2.1.x+ 之間有什麼變化? 如果你使用 Azure Container Storage 2.0.x 版本並關閉自動升級,請使用此表了解 AKS 叢集上安裝了哪些內容。
Azure 容器儲存版本 支援的儲存類型 安裝師現身 驅動程式安裝觸發器 2.0.x 本機 NVMe 否 安裝期間 --enable-azure-container-storage2.1.x 及以後版本 本地 NVMe 與彈性 SAN Yes 透過啟用時選擇儲存類型,或建立儲存類別(僅限安裝流程) 2.1.x 版本及更新版本有哪些安裝模型? Azure 容器儲存支援兩種安裝流程。
僅限選擇安裝程式(儲存裝置稍後選擇)
當你想安裝 Azure 容器儲存,但儲存後端則打算稍後決定時,可以使用這個選項。az aks update -n <cluster-name> -g <resource-group> --enable-azure-container-storage態度:
- 只安裝安裝程式。
- 最初不會安裝專門針對儲存的驅動程式或節點代理程式。
- 之後建立儲存類別會觸發正確的 CSI 驅動程式安裝。
安裝器 + 儲存類型
當您知道需要哪些後端時,可以使用此選項。az aks update -n <cluster-name> -g <resource-group> --enable-azure-container-storage <storage-types>範例:
az aks update -n <cluster-name> -g <resource-group> --enable-azure-container-storage ephemeralDisk elasticSan態度:
- 安裝安裝程式加上所選的 CSI 驅動程式。
- 如果沒有儲存類別物件,則建立預設的儲存類別物件。
- 預設儲存類別名稱分別為
local-csi(ephemeralDisk本地 NVMe)和azuresan-csi(elasticSanAzure 彈性 SAN)。 - 支援多種儲存類型。
持續性磁碟區儲存體類型值為
ephemeralDisk(本機 NVMe)和elasticSan(Azure 彈性 SAN)。 若要啟用雲端儲存體分散式加速器 (預覽版),請單獨傳遞distributedAccelerator。 DACS 使用獨立的擴充功能和控制器;它不會安裝 CSI 驅動程式或建立 StorageClass。 請參見 :如何啟用雲端儲存的分散式加速器?安裝模型如何與 Terraform 合作? 擴充套件配置支援與 Azure CLI 相同的流程:
-
只安裝程式(儲存空間稍候選擇): 將
enable-azure-container-storage設置為true。 之後建立一個儲存類別來觸發驅動程式安裝。 -
安裝器 + 儲存類型: 設定
enable-azure-container-storage為儲存型態值,例如ephemeralDisk、elasticSan,或是像 這樣的列表ephemeralDisk elasticSan。 這會安裝安裝程式、選定的 CSI 驅動程式,並建立預設的儲存類別。 預設儲存類別名稱分別為local-csi(ephemeralDisk本地 NVMe)和azuresan-csi(elasticSanAzure 彈性 SAN)。
支援版本 2.1.0 及以上的儲存類型:
ephemeralDisk(本地 NVMe)及elasticSan(Azure 彈性 SAN)。-
只安裝程式(儲存空間稍候選擇): 將
安裝器專用模式中安裝了哪些元件? 安裝器專用模式會在
kube-system命名空間中建立安裝器和遙測部署,但不會安裝任何 CSI 驅動程式或節點代理程式,直到您啟用儲存類型或建立儲存類別。元件 資源類型 名稱 Description 安裝程式 部署 acstor-cluster-manager 核心控制器監控儲存類別物件並協調 CSI 驅動程式生命週期 遙測 部署 Acstor-Geneva 內部監控與遙測容器 CSI 驅動程式何時安裝? 如果你在安裝時啟用某個儲存類型,驅動程式會立即安裝,若缺少則會建立預設的儲存類別物件。 如果你選擇僅安裝程式,驅動程式會在你建立儲存類別(或已經存在儲存類別)時安裝。
啟用 CSI 驅動程式時會安裝什麼? 當你啟用儲存類型或建立儲存類別時,Azure 容器儲存會安裝專門針對儲存的 CSI 驅動程式及相關元件。
元件 資源類型 名稱 Description CSI 驅動程式 HelmRelease acstor-local-csi-driver 或 acstor-azuresan-csi-driver 儲存專用的 CSI 驅動程式 節點代理 DaemonSet acstor-node-agent 運行於儲存節點上以收集指標 OpenTelemetry(OTel)收集器 DaemonSet Acstor-Otel-Collector 從節點收集日誌與指標 Elastic SAN 和本地 NVMe CSI 驅動程式會產生哪些 Kubernetes 資源?
彈性 SAN CSI 驅動程式:
Resource 名稱 目標 DaemonSet azuresan-csi-driver 在每個節點上運行 CSI Pod 本地 NVMe CSI 驅動程式:
Resource 名稱 目標 DaemonSet csi-local-node 在每個節點上執行 CSI 驅動程式 Pod 部署 CSI本地管理器 Webhook 與 PV 清理控制器 csi-local-manager部署偏好系統節點集區。Azure 容器儲存元件是如何排程的? CSI 驅動程式依據儲存類別親和力執行。 節點代理程式會在有驅動程式存在的地方執行,安裝程式偏好系統節點池。
Azure 容器儲存體和 Azure CSI (容器儲存體介面) 驅動程式之間有何差異?
Azure 容器儲存支援其他 Azure CSI 驅動程式不支援的儲存選項,例如暫時磁碟(本機 NVMe)。 所有這些驅動程式都旨在與 AKS 順暢地運作,而且是開放原始碼。-
Azure 容器儲存體僅適用於 Azure 區域的子集:
- (非洲) 南非北部
- (亞太地區) 澳大利亞東部
- (亞太地區) 東亞
- (亞太地區) 日本東部
- (亞太地區) 南韓中部
- (亞太地區) 東南亞
- (亞太地區) 印度中部
- (歐洲) 法國中部
- (歐洲) 德國中西部
- (歐洲) 歐洲北部
- (歐洲) 西歐
- (歐洲) 英國南部
- (歐洲) 瑞典中部
- (歐洲) 瑞士北部
- (中東) 阿拉伯聯合大公國北部
- (北美洲) 美國東部
- (北美洲) 美國東部 2
- (北美洲) 美國西部
- (北美洲) 美國西部 2
- (北美洲) 美國西部 3
- (北美洲) 美國中部
- (北美洲) 美國中北部
- (北美洲) 美國中南部
- (北美洲) 美國中西部
- (北美洲) 加拿大中部
- (北美洲) 加拿大東部
- (南美洲) 巴西南部
如果我已在 AKS 叢集上安裝 Azure 容器儲存體預覽版,要如何更新為最新的 GA 版本?
如果您已開啟自動升級,Azure 容器儲存體會自動更新至最新版本。 如果您未開啟自動升級,建議您執行下列命令,更新至最新的正式發行 (GA) 版本。 請記得以您自己的值取代<cluster-name>和<resource-group>。az k8s-extension update --cluster-type managedClusters --cluster-name <cluster-name> --resource-group <resource-group> --name azurecontainerstorage --version 1.1.0 --auto-upgrade false --release-train stable升級至新版本的 Azure 容器儲存體時,是否會對效能產生任何影響?
如果您讓自動升級保持開啟狀態 (建議),則在升級程序期間可能會遇到暫時的 I/O 延遲。 如果您關閉自動升級並手動安裝新版本,則沒有任何影響;但是,您無法獲得自動升級和即時存取新功能的好處。我可以為使用 Azure
az aks create容器儲存體 (1.x.x 版) 安裝命令時所建立的儲存體集區指定哪些參數?
關於必要和選擇性儲存體集區參數以及它們的預設值,請參閱本文。Azure 容器儲存體支援哪些其他 Azure 服務?
目前,Azure 容器儲存體僅支援 Azure Kubernetes Service (AKS) 。Azure 容器儲存體是否支援多重讀寫 (RWX) 工作負載?
Azure 容器儲存不支援多讀寫(RWX)工作負載。 然而,Azure 第一方檔案和 Blob CSI 驅動程式是絕佳替代方案,而且完全受到支援。如何移除 Azure 容器儲存體?
若要移除 Azure 容器儲存體 (2.x.x 版),請參閱 移除 Azure 容器儲存體。 若要移除 Azure 容器儲存體 (1.x.x 版),請參閱 本文。Azure 容器儲存體是否支援 AKS 上的 Windows 容器?
否,Azure 容器儲存體僅支援在 Ubuntu 和 Azure Linux 節點上執行的 AKS 容器。對於暫時性磁碟儲存體集區,Azure 容器儲存體是否會使用暫時性 OS 磁碟的容量?
否,對於暫時性磁碟儲存體集區,Azure 容器儲存體只會探索和使用暫時性資料磁碟的容量。Azure 容器儲存體是否支援 ARM 節點集區?
本地的 NVMe 與 Elastic SAN 持久卷驅動程式目前支援 AMD64/x86-64 節點池。 雲端儲存分散式加速器預覽版支援 x64 與 Arm64。 檢查您部署功能的支援矩陣。Azure 防火牆中必須將哪些端點加入允許清單才能讓 Azure 容器儲存體運作?
若要確保 Azure 容器儲存體正確運作,您必須在 Azure 防火牆中將特定端點加入允許清單。 Azure 容器儲存體元件需要這些端點,才能與必要的 Azure 服務通訊。 無法允許列出這些端點可能會導致安裝或執行階段問題。
加入允許清單的端點:
linuxgeneva-microsoft.azurecr.io、eus2azreplstore137.blob.core.windows.net、eus2azreplstore70.blob.core.windows.net、eus2azreplstore155.blob.core.windows.net、eus2azreplstore162.blob.core.windows.net、*.hcp.eastus2.azmk8s.io、management.azure.com、login.microsoftonline.com、packages.microsoft.com、acs-mirror.azureedge.net、eastus2.dp.kubernetesconfiguration.azure.com、mcr.microsoft.com。如需詳細資訊,請參閱 Azure Kubernetes Service (AKS) 叢集的輸出網路和 FQDN 規則 ,以及 已啟用 Azure Arc 的 Kubernetes 網路需求。
是否有 Azure 容器儲存體的服務等級協定 (SLA) ?
Azure 容器儲存體是基礎儲存體選項的協調流程解決方案,包括暫時磁碟、Azure 彈性 SAN 和 Azure 磁碟。 Azure 容器儲存並未提供服務水準協議(SLA)。 不過,每個儲存選項都會提供 SLA。 請參閱 Online Services 的 Microsoft 服務等級協定。
雲端儲存體分散式加速器問題
什麼是雲端儲存的分散式加速器?雲端儲存分散式加速器(DACS)會將 Azure Blob 資料快取到本地 NVMe,以加速模型載入以進行推論,並進行重複資料集讀取以進行訓練。 這是讀取穿透式快取,而非永續性磁碟區儲存體。 請參閱雲端儲存體分散式加速器概觀。
我該如何啟用雲端儲存體分散式加速器?透過 Azure CLI 啟用
distributedAccelerator功能。 受控擴充功能會將控制器和 NVMe 必要條件 DaemonSet 安裝在kube-system中;您需要另外建立快取資源。 前置設定可以在已標示的快取節點上格式化磁碟,因此請使用專用的 NVMe 磁碟。 關於前置條件與步驟,請參閱 開始使用 AKS 上雲端儲存的分散式加速器。支援哪些資料來源來源?Azure Blob 儲存體 是支援的來源。 此預覽版不支援 Direct Hugging Face、Amazon S3 和 Google Cloud Storage Origins。
快取的資料有持久性嗎? 否。 快取資料是短暫的,當快取節點被替換時可能會被驅逐或遺失。 請將具權威性的模型檔案和資料集保留在 Azure Blob 儲存體中。
工作負載如何向 Azure Blob 儲存體 進行認證?快速啟動使用了 AKS Kubelet 管理身份,並對 Blob 容器有唯讀權限。 關於角色指派與客戶端設定,請參見 「授權模型資料讀取權限」。
我該如何確認讀取是使用 DACS,而不是直接存取 Azure Blob 儲存體?檢查用戶端快取命中率計量以及快取伺服器要求計數器的成功提升情況。 僅有成功或更快的讀取並不能證明已使用快取,因為客戶端可以退回 Blob 儲存體。 關於驗證步驟,請參見「驗證 DACS 請求路徑」。
我可以在推論 Pod 開始前先預取模型嗎? 可以。 預先擷取可以在規劃的部署或向外延展前,填入選定的模型路徑。請參閱管理雲端儲存體分散式加速器。
雲端儲存的分散式加速器會去重複並行冷讀取嗎? 不會。 此預覽版不提供協調的冷快取預先填充。 多個並行的用戶端可各自從 Azure Blob 儲存體擷取相同的遺漏資料。 對於大型同步擴展事件,請使用預先擷取。
雲端儲存的分散式加速器需要更改應用程式嗎? 這取決於整合方式。 應用程式可以使用 Python 用戶端 API 或支援的介面卡。 請參閱「使用分散式加速器搭配 Python 用戶端進行雲端儲存」以獲取整合與設定指引。
雲端儲存的分散式加速器會額外收費嗎? 沒有 DACS 軟體費用。 Azure 虛擬機、Azure Blob 儲存體、網路、監控及部署中使用的其他資源,則需收取標準費用。
我可以原地升級雲端儲存的分散式加速器嗎? 請遵循版本特定的升級指引,不要假設快取資料會在升級過程中被保留。 請參閱 管理雲端儲存的分散式加速器。
當我移除雲端儲存的分散式加速器時會發生什麼事?快取的副本是短暫的;Azure Blob 儲存體 中的原始模型檔案和資料集不會被刪除。 在控制器執行時刪除快取資源,然後停用 DACS。 停用後移除擴充功能、控制器及受管理的 NVMe 前置 DaemonSet,但保留快取 CRD。 不要單獨移除受管理的必要元件。 關於清理順序與指令,請參見「移除雲端儲存的分散式加速器」。