Tagowanie żądań

Przypisuj niestandardowe tagi klucz-wartość do poszczególnych żądań za pomocą nagłówka Databricks-Ai-Gateway-Request-Tags HTTP. Unity Gateway loguje tagi żądań do kolumny request_tags zarówno w tabeli systemu śledzenia użycia, jak i tabelach inferencji, co pozwala śledzić koszty, przypisywać użycie oraz filtrować analitykę według projektu, zespołu, środowiska lub innego wymiaru.

W żądaniach, w których są uruchamiane zasady usług, zasady niestandardowe mogą również oceniać te tagi jako event:context.request_tags. Na przykład polityka może wymagać, aby tag był obecny przed dopuszczeniem żądania. Zobacz tagi Request w zasadach usług.

Wartość nagłówka musi być obiektem JSON mapującym klucze będące ciągami znaków na wartości będące ciągami znaków. Przykład:

{ "project": "chatbot", "team": "ml-platform", "environment": "production" }

Oznacz żądanie usługi modelu tagiem

Użyj parametru extra_headers (Python) lub przekaż nagłówek bezpośrednio (REST API), aby dołączyć tagi do żądania usługi modelowej:

Python (OpenAI SDK)

from openai import OpenAI
import json
import os

DATABRICKS_TOKEN = os.environ.get('DATABRICKS_TOKEN')

client = OpenAI(
  api_key=DATABRICKS_TOKEN,
  base_url="https://<workspace-url>/ai-gateway/mlflow/v1"
)

request_tags = {"project": "chatbot", "team": "ml-platform"}

chat_completion = client.chat.completions.create(
  messages=[
    {"role": "user", "content": "What is Databricks?"},
  ],
  model="<model-service>",
  max_tokens=256,
  extra_headers={
    "Databricks-Ai-Gateway-Request-Tags": json.dumps(request_tags)
  }
)

Python (SDK Anthropic)

import anthropic
import json
import os

DATABRICKS_TOKEN = os.environ.get('DATABRICKS_TOKEN')

request_tags = {"project": "chatbot", "team": "ml-platform"}

client = anthropic.Anthropic(
  api_key="unused",
  base_url="https://<workspace-url>/ai-gateway/anthropic",
  default_headers={
    "Authorization": f"Bearer {DATABRICKS_TOKEN}",
    "Databricks-Ai-Gateway-Request-Tags": json.dumps(request_tags),
  },
)

message = client.messages.create(
  model="<model-service>",
  max_tokens=256,
  messages=[
    {"role": "user", "content": "What is Databricks?"},
  ],
)

interfejs API REST

curl \
  -u token:$DATABRICKS_TOKEN \
  -X POST \
  -H "Content-Type: application/json" \
  -H 'Databricks-Ai-Gateway-Request-Tags: {"project": "chatbot", "team": "ml-platform"}' \
  -d '{
    "model": "<model-service>",
    "max_tokens": 256,
    "messages": [
      {"role": "user", "content": "What is Databricks?"}
    ]
  }' \
  https://<workspace-url>/ai-gateway/mlflow/v1/chat/completions

Zastąp element <workspace-url> adresem URL obszaru roboczego usługi Azure Databricks, a element <model-service> w pełni kwalifikowaną nazwą usługi modelowej.

Oznacz zgłoszenie usługi dostawcy modelu

Gdy wysyłasz zapytanie bezpośrednio do usługi dostawcy modelu, wyślij nagłówek tagów obok nagłówka Databricks-Model-Provider-Service:

Python

from openai import OpenAI
import json

client = OpenAI(
    api_key="<databricks-token>",
    base_url="https://<workspace-url>/ai-gateway/openai/v1",
    default_headers={"Databricks-Model-Provider-Service": "main.default.openai_prod"},
)

request_tags = {"project": "chatbot", "team": "ml-platform"}

response = client.chat.completions.create(
    model="gpt-5.5",
    messages=[{"role": "user", "content": "What is Databricks?"}],
    extra_headers={"Databricks-Ai-Gateway-Request-Tags": json.dumps(request_tags)},
)

REST

curl https://<workspace-url>/ai-gateway/openai/v1/chat/completions \
  -H "Authorization: Bearer $DATABRICKS_TOKEN" \
  -H "Databricks-Model-Provider-Service: main.default.openai_prod" \
  -H "Content-Type: application/json" \
  -H 'Databricks-Ai-Gateway-Request-Tags: {"project": "chatbot", "team": "ml-platform"}' \
  -d '{
    "model": "gpt-5.5",
    "messages": [{"role": "user", "content": "What is Databricks?"}]
  }'