Zbieranie metryk dla obciążeń usługi Istio service mesh dla Azure Kubernetes Service w usłudze Azure Managed Prometheus

W tym przewodniku wyjaśniono, jak skonfigurować i używać rozwiązania Azure Managed Prometheus w celu zbierania metryk z obciążeń dodatku usługi Istio service mesh w klastrze Azure Kubernetes.

Wymagania wstępne

Włącz zarządzaną usługę Azure Monitor dla Prometheusa

usługa zarządzana Azure Monitor dla rozwiązania Prometheus zbiera dane z klastra Azure Kubernetes. Aby włączyć usługę zarządzaną Azure Monitor dla rozwiązania Prometheus, należy utworzyć obszar roboczy Azure Monitor do przechowywania metryk:

export AZURE_MONITOR_WORKSPACE=<azure-monitor-workspace-name>

export AZURE_MONITOR_WORKSPACE_ID=$(az monitor account create \
    --name $AZURE_MONITOR_WORKSPACE \
    --resource-group $RESOURCE_GROUP \
    --location $LOCATION \
    --query id -o tsv)

Włączanie dodatku Prometheus

Aby zebrać metryki rozwiązania Prometheus z klastra Kubernetes, włącz dodatek Prometheus:

az aks update --enable-azure-monitor-metrics --name $CLUSTER --resource-group $RESOURCE_GROUP --azure-monitor-workspace-resource-id $AZURE_MONITOR_WORKSPACE_ID

Dostosowywanie zbierania metryk Prometheus w usłudze zarządzanej Azure Monitor

Utwórz konfigurację scrape w pliku o nazwie prometheus-config, na wzór przykładu poniżej. Ta konfiguracja włącza zbieranie metryk na podstawie adnotacji podów, co umożliwia Prometheusowi automatyczne wykrywanie i zbieranie metryk z podów z określonymi adnotacjami.

Ważne

Poniższa konfiguracja scrapingu to tylko przykład. Zdecydowanie zalecamy dostosowanie go do Twoich potrzeb. Jeśli nie zostanie skorygowana, może to prowadzić do nieoczekiwanych kosztów z częstego zbierania metryk i zwiększonego magazynu danych.

global: 
  scrape_interval: 30s
scrape_configs: 
- job_name: workload
  scheme: http
  kubernetes_sd_configs:
    - role: endpoints
  relabel_configs:
    - source_labels: [__meta_kubernetes_pod_annotation_prometheus_io_scrape]
      action: keep
      regex: true
    - source_labels: [__meta_kubernetes_pod_annotation_prometheus_io_path]
      action: replace
      target_label: __metrics_path__
      regex: (.+)
    - source_labels: [__address__, __meta_kubernetes_pod_annotation_prometheus_io_port]
      action: replace
      regex: ([^:]+)(?::\d+)?;(\d+)
      replacement: $1:$2
      target_label: __address__ 

Aby włączyć zbieranie metryk na podstawie adnotacji zasobników, utwórz mapę konfiguracji ama-metrics-prometheus-config, która odwołuje się do pliku prometheus-config w przestrzeni nazw kube-system.

kubectl create configmap ama-metrics-prometheus-config --from-file=prometheus-config -n kube-system

Weryfikowanie kolekcji metryk

  1. Skonfiguruj uprawnienia dostępu: przejdź do swojego obszaru roboczego usługi Azure Monitor w portalu Azure i utwórz dla siebie przypisanie roli, aby nadać rolę „Czytelnik danych monitorowania” dla zasobu obszaru roboczego.

  2. Generuj przykładowy ruch: wyślij kilka żądań do utworzonej wcześniej strony produktu, na przykład:

    curl -s "http://${GATEWAY_URL_EXTERNAL}/productpage" | grep -o "<title>.*</title>"
    
  3. Wyświetlanie metryk i wykonywanie zapytań w portalu Azure: przejdź do eksploratora Prometheus w obszarze roboczym usługi Azure Monitor i wykonuj zapytania dotyczące metryk. W poniższym przykładzie przedstawiono wyniki zapytania istio_requests_total.

    Diagram przedstawiający przykładowe wykonywanie zapytania w eksploratorze prometheus.

Usuwanie zasobów

Jeśli chcesz wyczyścić siatkę usług Istio i wejścia (pozostawiając klaster bez zmian), uruchom następujące polecenie:

az aks mesh disable --resource-group ${RESOURCE_GROUP} --name ${CLUSTER}

Jeśli chcesz wyczyścić wszystkie zasoby utworzone na podstawie dokumentów z instrukcjami istio, uruchom następujące polecenie:

az group delete --name ${RESOURCE_GROUP} --yes --no-wait