Azure Kubernetes Service (AKS) Pod sandboxing 概覽

隨著 AKS 叢集擴展並承載多個團隊或租戶的工作負載,共享基礎設施可能使隔離更複雜。 你可能需要更強的隔離,以防止資源密集或突發性工作負載干擾可預測的工作負載。 你可能還需要隔離敏感工作負載以符合安全要求。

為了滿足這些需求,你可以透過邏輯或物理隔離策略來隔離工作負載。 為了邏輯隔離,使用 Kubernetes 命名空間 來分隔資源與部署。 命名空間共享底層叢集基礎設施,因此不會像獨立叢集那樣提供相同的物理隔離邊界。 雖然分開的叢集提供了實體邊界,但當叢集未充分利用容量時,這種策略可能會增加成本。

AKS 上的 Pod 沙盒技術可讓您在個別的輕量級 Pod 虛擬機器(VM)中執行工作負載。 每個 pod VM 提供一個運算隔離邊界:工作負載以自己的客串核心運行,與其他 Pod VM 中的主機核心及工作負載隔離。

Pod 沙盒是建立在開源的 Kata Containers 專案之上。

這很重要

Pod VM 邊界僅提供運算隔離。 它無法隔離 AKS 控制平面、儲存或資料路徑,或是擁有叢集管理員權限使用者執行的動作。 僅靠 Pod 沙盒並不能實現完整的嚴格多租戶隔離。 對於多租戶部署,請參考 AKS 多租戶解決方案的指引 ,並套用所需的身份、網路、儲存與治理控制。

架構和元件

Pod 沙箱化會使用 Kata Containers 執行階段,為每個經沙箱化的 Pod 建立一個輕量級的 Pod VM。 下圖展示了主機端元件如何建立和管理隔離的 Pod 虛擬機,以及客端元件如何執行工作負載。

  • 在 Pod 資訊清單中,設定runtimeClassName: kata-vm-isolation以選取「Kata 容器」執行階段。
  • Containerd 會呼叫 Kata shim(containerd-shim-kata-v2),而不是標準執行階段 shim。
  • Kata shim 啟動 Cloud Hypervisor 虛擬機監控器(VMM),建立一個帶有獨立訪客核心與 Kata 代理的 pod 虛擬機。
  • Kata 代理程式負責建立並管理 pod 虛擬機內的容器與工作負載程序。
  • 當 pod 虛擬機被刪除時,Kata shim 會關閉 Pod 虛擬機並將其資源釋放回容器主機。

優點與使用案例

Pod 沙箱化會將每個沙箱化的 Pod 隔離在輕量級 Pod VM 中,並擁有自己的客體核心。 此計算邊界將工作負載與主機核心及其他 Pod 虛擬機的工作負載分隔開來。 結合 Pod 沙盒與網路政策和 Azure 原則 等控制措施,以解決 Pod VM 邊界無法涵蓋的網路與治理風險。 關於多租戶部署控制項選擇的指引,請參閱 AKS 多租戶解決方案指引。

常見使用案例

Pod 沙盒能幫助你:

  • 在同一 AKS 叢集上承載來自不同租戶的工作負載,並為每個沙盒 Pod 提供獨立的運算隔離邊界。
  • 將不受信任的工作負載與主機核心及其他 Pod 虛擬機的工作負載隔離,同時繼續使用共享叢集容量。
  • 保護敏感或高價值的工作負載,使其免受在其他 Pod VM 中執行的工作負載影響。
  • 透過對每個 Pod 虛擬機施加 CPU 與記憶體請求及限制,減少資源密集或突發性工作負載對其他沙盒 Pod 的影響。
  • 將工作負載失敗的計算影響範圍限制在其 Pod VM。

工作負載隔離

架構圖截圖,顯示 AKS Pod 沙箱中工作負載隔離的效果。

Pod 沙箱讓你能在共享叢集節點上共置工作負載,同時為每個沙箱 Pod 維持獨立的運算隔離邊界。

你可以宣告工作負載的資源請求和限制。 當你省略這些值時,AKS 會套用預設值。 Pod VM 將資源密集型工作負載限制在 CPU 及分配給該虛擬機的記憶體上。 如果某工作負載導致其 pod VM 失敗,運算隔離邊界會保護其他 Pod VM 的工作負載免於該故障。

靈活性

你可以在同一個叢集中執行沙盒 Pod 和標準 Pod。 這種彈性讓你只對需要隔離的工作負載套用 Pod 虛擬機隔離。

開放原始碼元件

Pod 沙盒使用開源元件,包括 Cloud Hypervisor VMM 與 Kata Containers 執行環境。 開放開發提供隔離部分的透明度,並促進社群審查。 架構也將每個 pod VM 中的訪客核心與 Azure Linux 主機核心分開。

遷移現有工作負載

基本部署時,將 Kata 執行時類別加入現有的 pod 規格,以便在 pod 虛擬機中執行工作負載。 這項資訊清單變更並不保證其行為與使用標準 runc 執行階段的 pod 完全相同。 遷移前,請驗證工作負載的運作行為及 Kubernetes 功能相容性,並考慮 Pod 虛擬機的資源大小與開銷。 欲了解更多資訊,請參閱 Pod 沙盒設計的考量。

後續步驟