什麼是容器網路指標?

Azure Kubernetes Service (AKS) Advanced Container Networking Services 中的容器網路指標,能幫助你識別封包掉落、追蹤網路活動並調查 DNS 行為。 先從節點層級的指標開始找出網路健康問題,然後用 Pod 層級的指標來辨識相關的工作負載。

度量收集可在受支援的 Cilium 與非 Cilium 資料平面上使用。 Pod 層級的指標需要 Linux;參考表顯示哪些節點層級的指標在 Windows 上也可用。

計量收集概觀

使用此表格檢查跨資料平面的度量收集支援:

能力 Cilium 叢集 非 Cilium 簇群
節點層級的度量收集 ✅ ✅
Pod 層級計量收集 ✅ (Linux) ✅ (Linux)

初始收集時,請依 照設定容器網路指標。 若要取得個別流量詳細記錄,而非計數器,請使用 容器網路日誌。

Important

自 2025 年 11 月 30 日起,Azure Kubernetes Service(AKS)不再支援或提供 Azure Linux 2.0 的安全更新。 Azure Linux 2.0 節點映像已凍結在202512.06.0發行版本。 從 2026 年 10 月 31 日起,節點映像會被移除,且你無法擴展你的節點池。 透過 升級節點池 至支援的 Kubernetes 版本或遷移至 osSku AzureLinux3,遷移到支援的 Azure Linux 版本。 更多資訊請參閱 退休 GitHub 議題 及 Azure 更新退休公告。 想隨時掌握公告與更新,請參考 AKS 發布公告。

主要優點

  • 節點和 Pod 層級細微性。 追蹤節點層級的流量量、掉率及連線狀態,以維護基礎設施健康狀況。 使用來源和目的地標籤向下切入至個別 Pod,以精確找出造成問題的工作負載。

  • 更快的故障排除。 當服務開始丟包或 DNS 查詢失敗時,Pod 層級的指標能幫助你將問題隔離到特定的 pod、命名空間或協定。

  • 內建視覺化功能。 將計量儲存在 Azure 監視器受控 Prometheus 服務中,並使用 Grafana 的儀表板直接在 Azure 入口網站中開啟網路儀表板。 儀表板體驗免費,且不需 Azure 受控 Grafana 實例;ACNS 以及計量資料擷取與儲存費用仍然適用。 你也可以使用獨立的 Grafana 部署。

運作原理

容器網路可觀察性架構的圖表。

每個節點的代理堆疊依資料平面而定,如圖所示。

Linux Cilium 節點 使用分層 eBPF 堆疊:eBPF 核心鉤子捕捉原始流量資料,並由 Cilium 處理,Hubble 則以 Prometheus 格式的度量形式公開。

Linux 非 Cilium 節點會使用 eBPF 核心掛鉤,將資料饋送至 Microsoft Retina,並在其上方使用 Hubble 層進行流量檢查。 Microsoft Retina 負責指標收集,並以 Prometheus 格式匯出節點層級及 pod 層級的指標。

無論選擇哪一種路徑,您都會以 Prometheus 格式擷取計量,並將其內嵌至 Azure 監視器受控 Prometheus 服務或您自己的 Prometheus 後端。 若使用受控路徑,請在 Azure 入口網站中開啟您的 AKS 叢集,然後選取監視>使用 Grafana 的儀表板,以檢視網路儀表板。 Azure 受控 Grafana 和你自己的 Grafana 部署是可選的替代方案。 請參閱 在 AKS 中搭配 Grafana 使用儀表板。

要開始, 先設定容器網路指標。

何時使用容器網路指標

容器網路指標是為需要聚焦且可操作網路資料而非原始遙測的團隊設計的。 常見情況包括:

  • 偵錯特定工作負載。 利用 Pod 層級的指標來隔離特定服務的封包丟包、TCP 重置或 DNS 失敗。
  • 監控多租戶叢集。 利用 pod 層級指標依命名空間追蹤網路健康狀況,並了解各團隊的流量模式。
  • 容量規劃。 追蹤每個節點的轉發與丟棄位元組數,以識別飽和連結或工作負載不平衡。
  • DNS 健康監控。 揭露 DNS 查詢失敗和解析速度緩慢,以便在問題擴散成應用程式錯誤前及時發現。

在你查看指標表之前

請記住以下幾點:

  • 節點層級的指標可在支援的 Cilium 與非 Cilium 資料平面間取得。
  • Linux 上提供 Pod 層級的指標。
  • 在 Cilium 叢集中,DNS 指標需要 Cilium FQDN 網路政策。

指標參考

節點層級計量

節點層級指標提供每個節點的總體流量統計數據——轉發與丟棄封包、位元組數及連線狀態。 這些指標以 Prometheus 格式儲存,並可在 Grafana 中視覺化。

每個節點會彙總下列計量。 所有計量都包含這些標籤:

  • cluster
  • instance (節點名稱)

Cilium

對於 Cilium 資料平面叢集,節點層級的指標僅在 Linux 上可用。 Cilium 揭露了容器網路指標所使用的以下指標:

指標名稱 Description 額外的標籤 Linux Windows
cilium_forward_count_total 轉接封包計數總計 direction ✅ ❌
cilium_forward_bytes_total 轉接位元組計數總計 direction ✅ ❌
cilium_drop_count_total 捨棄的封包計數總計 direction、reason ✅ ❌
cilium_drop_bytes_total 捨棄的位元組計數總計 direction、reason ✅ ❌

非 Cilium

對於非 Cilium 資料平面情境,Linux 與 Windows 皆提供容器網路指標。

指標名稱 Description 額外的標籤 Linux Windows
networkobservability_conntrack_bytes_rx Conntrack RX 位元組數 ✅ ❌
networkobservability_conntrack_bytes_tx Conntrack TX 位元組計數 ✅ ❌
networkobservability_conntrack_packets_rx Conntrack RX 封包計數 ✅ ❌
networkobservability_conntrack_packets_tx Conntrack TX 封包計數 ✅ ❌
networkobservability_conntrack_total_connections conntrack 連線總數 ✅ ❌
networkobservability_dns_request_count DNS 請求計數 ✅ ❌
networkobservability_dns_response_count DNS 回應計數 ✅ ❌
networkobservability_drop_bytes 捨棄的位元組計數總計 reason、direction ✅ ❌
networkobservability_drop_count 捨棄的封包計數總計 reason、direction ✅ ✅
networkobservability_forward_bytes 轉接位元組計數總計 direction ✅ ✅
networkobservability_forward_count 轉接封包計數總計 direction ✅ ✅
networkobservability_infiniband_counter_stats InfiniBand 計數器統計 statistic_name、device、port ✅ ❌
networkobservability_infiniband_status_params InfiniBand 狀態參數 statistic_name、interface_name ✅ ❌
networkobservability_interface_stats 介面統計 (rx/tx 封包、丟棄等) interface_name、statistic_name ✅ ❌
networkobservability_ip_connection_stats IP 連線統計資料 statistic_name ✅ ❌
networkobservability_node_apiserver_handshake_latency 至 API 伺服器的 TCP 交握延遲 ✅ ❌
networkobservability_node_apiserver_latency 節點到 API 伺服器的延遲 ✅ ❌
networkobservability_node_apiserver_no_response API 伺服器計數沒有回應 ✅ ❌
networkobservability_node_connectivity_latency_seconds 節點間連通延遲 source_node_name、target_node_name ✅ ✅
networkobservability_node_connectivity_status 節點對節點連接狀態(ICMP/HTTP) source_node_name、target_node_name ✅ ✅
networkobservability_tcp_connection_remote 依遠端 IP 區分的 TCP 作用中通訊端計數 address ✅ ❌
networkobservability_tcp_connection_stats TCP 連線統計資料(例如,DelayedACKs、TCPKeepAlive、TCPSackFailures) statistic_name ✅ ✅
networkobservability_tcp_flag_gauges 按旗標分類的 TCP 封包計數 direction、flag ❌ ✅
networkobservability_tcp_retransmission_count TCP 重傳次數 ✅ ❌
networkobservability_tcp_state 依狀態區分的 TCP 作用中通訊端計數 state ✅ ❌
networkobservability_udp_connection_stats UDP 連線統計資料 statistic_name ✅ ❌
networkobservability_windows_hns_stats Windows HNS 統計數據(發送與接收封包) direction ❌ ✅

Pod 層級計量 (Hubble 計量)

Pod 層級指標包含來源與目的 Pod 資訊,因此你可以在個別工作負載層級精確找出網路問題。 這些指標涵蓋流量量、遺失封包、TCP 重設以及第 4 層/第 7 層的流量。

DNS 指標(查詢次數、回應碼與錯誤)預設在非 Cilium 資料平面上收集。 在 Cilium 資料平面上,DNS 指標需要 Cilium FQDN 網路政策。 你也可以用 Hubble CLI 即時檢測 DNS。

下表描述每個 Pod 匯總的計量(會保留節點資訊)。

所有計量都包含標籤:

  • cluster

  • instance (節點名稱)

  • source 或 destination

    • 若為輸出流量,source 標籤會指出來源 Pod 命名空間和名稱。

    • 對於 進入的流量,標籤 destination 會標示目的地 pod 的命名空間與名稱。

指標名稱 Description 額外的標籤 Linux Windows
hubble_dns_queries_total 依查詢的 DNS 要求總計 source 或 destination、query、qtypes (查詢類型) ✅ ❌
hubble_dns_responses_total 依查詢/回應的 DNS 回應總計 source 或 destination、query、qtypes (查詢類型)、rcode (傳回碼)、ips_returned (IP 數目) ✅ ❌
hubble_drop_total 捨棄的封包計數總計 source 或 destination、protocol、reason ✅ ❌
hubble_tcp_flags_total 各旗標的 TCP 封包總計數 source 或 destination、flag ✅ ❌
hubble_flows_processed_total 處理的網路流量總計 (第 4 層/第 7 層流量) source 或 destination、protocol、verdict、type、subtype ✅ ❌

選擇要在 Cilium 叢集上收集哪些指標

在 Cilium 叢集上,使用來源層級篩選,在觀察資料到達監視後端之前,選取要納入個別 Hubble 計量的觀察資料。 這種過濾方式和過濾 Grafana 儀表板不同,後者只會改變你看到的內容。 將集合範圍縮小到某個應用程式,然後在調查需要時選擇性啟用外部 IP 或目的埠的指標。

過濾能減少不必要的收集,並協助控制資料擷取成本。 額外的計量可能會增加時間序列數量和成本,因此在擴大收集範圍之前,請先確認其價值和資料量。 先前建立的系列與歷史樣本仍可保留可見;節省取決於你的流量和設定。

啟用容器網路可觀察性後,代理會暴露服務的預設網路指標。 在 Cilium 叢集中,使用 ContainerNetworkMetric 自訂資源來選擇個別指標類型的流量。

在叢集上提供指標,並不代表它會自動在 Prometheus 的 Azure 監視器 管理服務中被提供。 預設情況下,叢集代理會暴露 hubble_flows_processed_total,但管理中的 Prometheus 會將其排除在收集之外,因為它能產生大量時間序列。 Managed Prometheus 也會預設排除hubble_flows_to_world_totalhubble_port_distribution_total,即使你在叢集上啟用了它們。 若要收集並查詢這些指標,請將其名稱加入 ama-metrics-settings-configmap ConfigMap 中的 Hubble 允許清單。 如需步驟,請參閱 允許受管理 Prometheus 中的度量族。

每個叢集有一個共享 ContainerNetworkMetric 資源,稱為 container-network-metric。 與其他管理員協調更新,並保留其他團隊使用的指標設定。

從包含篩選器開始,以選擇應用程式或目的地的流量。 排除篩選條件是選擇性的:您可以使用它來略過所選流量的子集,也可以使用僅排除篩選條件,在保留廣泛收集範圍的同時排除特定例外。 排除條件的優先順序高於相符的包含條件。

篩選不限於選擇性的 world 和目的地連接埠計量。 現有指標請使用以下配置名稱:

計量類型 spec.filters[].metric 範例篩選任務
DNS dns 選取來自應用程式用戶端或傳送至應用程式用戶端的 DNS 觀察資料。
TCP tcp 選擇具有特定標籤的 Pod TCP 觀測值。
HTTP httpV2 選取涉及應用程式的 HTTP 觀察資料。
Flow flow 依工作負載或安全身份選擇流程觀測。
Drop drop 選取應用程式的捨棄觀察資料;您也可以選擇從廣泛收集的資料中排除負載測試的觀察資料。

當該指標存在於服務的基底設定時,這些過濾器即適用。 過濾器設定與觀察產生是分開的:DNS 指標觀測需要套用 DNS 檢查政策及 DNS 流量。 HTTP 指標觀察需要叢集層級的 L7 啟用、對工作負載套用 HTTP 檢查策略,以及透過該策略進行的 HTTP 流量。 篩選狀態不會驗證這些必要條件。 篩選功能不會啟用對 HTTPS 流量的檢查或解密。 對於 HTTP,請使用區分大小寫的名稱 httpV2,而非 http。

例如,請參見 DNS、TCP、HTTP和drop filtering。

例如,使用包含篩選條件,選取從 production 命名空間傳送至 Cilium 分類為 world 的端點之 TCP 流量的流程計量。 這會變更流程計量的收集方式,但不會變更其他計量類型的收集方式。 過濾器支援命名空間、Pod 名稱、標籤、IP 位址、Cilium 安全身份、協定及判定結果。

篩選可控制哪些觀察資料會納入計量。 它不會新增或移除度量標籤。 與日誌的額外聚合欄位不同,度量維度仍由服務管理。

過濾會影響來源端的新指標觀測值。 在 Grafana 中選擇工作負載會改變顯示的結果,而非收集設定。 先前收集的資料會保留在你的指標後端。

其他指標

若要收集以下任一指標,請在叢集的 ContainerNetworkMetric 資源中新增項目,並加入包含篩選器,以選取你想監控的流量。 如果指標尚未啟用,該條目會為所選流量啟用該指標。 如果已經啟用,此項目可篩選哪些流量會計入其中,且不會改變現有的標籤或選項。

Metric 使用 計數內容
hubble_flows_to_world_total 識別 Cilium 分類為 world 端點的針對所選的 TCP 流量目的 IP 位址。 設定為 flows-to-world。 非回覆的 TCP SYN 觀察資料。 在服務的僅 SYN 組態下,UDP 流量不會被計算。
hubble_port_distribution_total 依協定與目的埠檢查選定的流量。 設定為 port-distribution。 識別為非回覆流量且已轉送或重新導向的觀察資料。 遭捨棄的流量和回覆狀態不明的流量不會被計算。

對於透過此資源新啟用的指標,服務會為 flows-to-world 配置來源 Pod 與目的地 IP 標籤。 對於 port-distribution,它會設定來源與目的 Pod 標籤及流量方向。 flows-to-world 包含通訊協定和判定標籤;port-distribution 則包含通訊協定和目的地連接埠標籤。 使用服務提供的這些選項時,world 計量不會計算 UDP 流量或非原則造成的捨棄。

這些指標計算的是觀察到的網路事件,而非唯一連線或應用程式請求。 例如,如果用戶端傳送 TCP SYN 封包,然後在嘗試連線時重新傳送該封包,hubble_flows_to_world_total 可能會將兩次觀察都納入計數,即使它們屬於同一次連線嘗試。 像是 Pod 名稱等標籤,只有在觀察到的流量能取得這些資訊時才會被填入。

如需完整的自訂資源及從測試工作負載收集的兩個指標截圖,請參見 範例配置與擷取結果。

管理資料相關性與雜訊

利用篩選功能將指標聚焦於與監控或調查相關的工作負載與流量。 排除無關流量能減少資料雜訊,幫助你專注於重要的網路訊號。

目的 IP 位址、Pod 名稱和埠口可以產生許多時間序列。 這項詳細資料可能很有用,但收集不相關流量的詳細資料會產生雜訊,並可能增加內嵌成本。 從特定的工作負載或命名空間開始,檢視這些指標是否能回答你的問題,並在擴充收集前檢查結果的資料量。

自訂資源會對每個啟用的額外指標報告警告。 警告指出可能的成本增加;它不會估算你的帳單金額,也不會指出已超過限額。 該服務管理指標標籤,你無法透過這個資源更改它們。

移除一個條目只有在該條目啟用了該指標時,該指標才會被禁用。 如果服務提供該計量,即使沒有該項目的篩選條件,該計量仍會保持啟用。 刪除共享資源會移除所有過濾器並恢復為服務提供的收集設定,這會擴大這些指標中包含的流量範圍,並增加資料雜訊與資料擷取量。

關於 YAML 範例、驗證查詢及清理步驟,請參見「設定容器網路計量篩選」。

Limitations

平台與資料平面:

  • Pod 層級計量僅適用於 Linux。
  • 從 Kubernetes 1.29 版開始,支援 Cilium 資料平面。
  • 來源層級的指標過濾僅在 Cilium 叢集上提供。
  • 當服務尚未提供 flows-to-world 和 port-distribution 時,篩選項目可以啟用這些計量。 服務會管理這些計量的標籤;此資源不會公開自訂計量維度。
  • 計量標籤在 Cilium 和非 Cilium 叢集之間有細微的差異。

DNS 指標:

  • 在 Cilium 叢集上,DNS 指標需要 Cilium FQDN 網路政策,或者你可以使用 Hubble CLI 進行即時 DNS 故障排除。

已知問題:

  • 如果哈伯節點代理程式當機,哈伯中繼可能會當機,這可能會中斷哈伯的CLI會話。

FIPS 支援 (僅限非 Cilium 資料平面):

  • 由於核心限制,Ubuntu 20.04 節點無法使用 FIPS。 改用 Azure Linux 或 Ubuntu 22.04 節點池吧。 此限制不適用於席利姆資料位面。
作業系統 FIPS 支援
Azure Linux 3.0 Yes
Azure Linux 2.0 Yes
Ubuntu 20.04 No
Ubuntu 22.04 版本 Yes

規模:

Pricing

Important

進階容器網路服務是一項付費供應項目。

如需定價的詳細資訊,請參閱 進階容器網路服務 - 定價。