Översikt över övervakning av agenters prestanda (GitHub Copilot)

Fliken Monitor ger skaparna en kontextfull bild av en agents produktionshälsa. Använd den för att förstå användning, resultat, användarfeedback, tillförlitlighet och Copilot-kreditförbrukning så att du kan identifiera trender och avgöra var du kan förbättra agenten.

Note

Funktionerna i denna artikel används av agenter eller arbetsflöden som drivs av GitHub Copilot-verktyget.

Användningsbaserad fakturering gäller för att använda, bygga, testa och utvärdera agenter. Dessa åtgärder kan förbruka Copilot-krediter. Läs mer i Hantera kostnader för agenter som drivs av GitHub Copilot-harnessen.

Note

Du kan öppna fliken Övervaka innan du publicerar din agent. Produktionsanvändning, feedback och kreditdata visas efter att du publicerat agenten och folk börjar använda den.

Vad kan du övervaka?

Monitor ger en översikt över en enskild agent. Den innehåller:

  • Översikt: Totala sessioner, användare, autonoma körningar, genomsnittlig varaktighet, framgångsfrekvens och misslyckandefrekvens.
  • Reaktioner: Tummen upp och tummen ner på agenternas svar.
  • Totala uppskattade krediter som användes: De krediter agenten konsumerade under den valda perioden.
  • Sessioner: Individuella interaktioner, var de ägde rum och vilka krediter de konsumerade.

Använd datumfiltret för att fokusera på en specifik rapporteringsperiod. Procentindikatorer jämför varje mått med föregående period.

Övervakning och agentverksamhet

Monitor är utformat för skapare som behöver en snabb överblick över en enskild agent medan de bygger och förbättrar den. För övervakning, styrning av flottans täckning, detaljerad undersökning och operativ optimering över agenter och miljöer, använd agentens erfarenhet av verksamhet.

Översiktsmått

Översiktsdelen visar:

  • Totala sessioner: Antalet samtalssessioner under den valda perioden.
  • Totalt antal användare: Antalet användare som interagerade med agenten under den valda perioden.
  • Genomsnittlig varaktighet: Den genomsnittliga längden av sessioner och löprundor.
  • Framgångsgrad: Hur framgångsrikt agenten slutförde sessioner och körningar.

Totalt uppskattade antal använta krediter

Kreditkortet visar det totala antalet Copilot-krediter agenten förbrukade under den valda perioden och förändringen från föregående period. Till skillnad från de nästan realtidsuppskattningar du ser i Preview and Evaluate, speglar värdet i Monitor alla behandlade händelser fram till dess och är det slutgiltiga sanningskälla-numret som används för fakturering.

När en uppdelning finns tillgänglig visas en uppskattad fördelning av förbrukning efter erfarenhet, inklusive produktionsanvändning, förhandsgranskningstestning, utvärderingar och andra stödda ytor. Använd den för att förstå vilka aktiviteter eller utfall som förbrukade krediterna.

Läs mer i Förstå uppskattad kreditanvändning och Översikt över användningsbaserad fakturering.

Reaktioner

Avsnittet Reaktioner visar användarfeedback på agentens svar. Diagrammet räknar hur ofta användare väljer tummen upp (positiv) eller tummen ner (negativt) på varje svar de får från din agent.

Agentfunktioner

Avsnittet om förmågor hjälper dig att förstå hur användare interagerar med din agent och var svarens tillförlitlighet kan förbättras. Den innehåller:

  • Verktygsanvändning: Vilka verktyg agenten anropade under sessionen.

Sessionsspårning

Sessionslistan visar individuella samtalssessioner med din agent. Varje session inkluderar:

  • Status: Om sessionen är avslutad, misslyckad eller pågår.
  • Varaktighet: Hur länge sessionen varade.
  • Användarmeddelanden: Antalet meddelanden som utbyts.
  • Verktyg som användes: Vilka verktyg agenten anropade under sessionen.

Filtrera sessioner efter status, såsom misslyckades, slutförd eller pågår, för att snabbt hitta sessioner som behöver uppmärksamhet.

Välj en session för att se dess fullständiga transkription, inklusive användarens meddelanden, agentens svar och detaljer om verktygsinkallelser och användning av kunskapskällor.

Felövervakning

Fliken Monitor hjälper dig att identifiera och diagnostisera problem:

  • Filtrera sessioner efter status Misslyckad eller Avvisad för att hitta problematiska interaktioner.
  • Gå igenom sessionsutskrifter för att förstå vad som gick fel.
  • Kontrollera verktygets anslutningsstatus och autentiseringsfel.
  • Leta efter mönster i misslyckade sessioner som kan tyda på ett konfigurationsfel.

För steg-för-steg-vägledning om hur du använder fliken Övervaka , se Övervaka en agent.

Ladda ner sessionstranskriptioner

Du kan ladda ner sessionstranskriptioner några minuter efter att sessionen har löpt ut. Du kan ladda ner valfri tidsperiod inom de senaste 29 dagarna. Du kan ladda ned dem i Dataverse med hjälp av Power Apps-portalen och som sessionschattavskrifter med hjälp av Copilot Studio-appen. Det kan ta upp till en timme efter att analyssessionen avslutats innan den relaterade datan visas på fliken Monitor.

Granskningsmöten

Sessionslistan visar senaste interaktioner med din agent.

Note

Sessionslistan visar endast sessioner från de senaste 28 dagarna.

Beroende på interaktionen kan listan visa:

  • Namn: Användaren som är kopplad till interaktionen.
  • Datum: När interaktionen ägde rum.
  • Kanal: Kanalen eller ytan i Copilot Studio där interaktionen ägde rum.
  • Antal meddelanden: Antalet meddelanden i interaktionen.
  • Varaktighet: Längden på interaktionen.
  • Krediter som användes: Copilot-krediterna som konsumeras av interaktionen.

Öppna sidan för sessionsdetaljer för att granska aggregerade sessionsmått, filtrera listan, söka efter sessioner och ladda ner sessionsdata.

För andra exportalternativ för transkript, läs mer i Download agent session transcripts.

För steg-för-steg-vägledning, lär dig mer i Övervaka och analysera agentens prestation.