Forbedre agenter ved å bruke evalueringsdrevet prioritering og utbedring

Å bygge en effektiv agent handler om mer enn å utforme instruksjoner og koble sammen data og verktøy. Etter utrulling må teamene kontinuerlig evaluere, diagnostisere og forbedre agentens atferd for å sikre at den oppfyller forretningsmessige, kvalitetsmessige og sikkerhetsmessige krav.

Denne artikkelserien introduserer et praktisk rammeverk for forbedringsfasen i livssyklusen for agentutvikling. Rammeverket hjelper deg med å omsette evalueringsresultater (score, mislykkede testtilfeller og regresjoner) til tydelige, prioriterte tiltak.

Bruk dette rammeverket når du har evalueringsresultater og må bestemme hva du skal gjøre videre. Vanlige scenarioer omfatter følgende:

• Et evalueringssett scorer under en forventet terskel.
• Spesifikke testtilfeller feiler, og rotårsaken er uklar.
• Resultatene forbedres på ett område, men regresserer på et annet.
• Flere evalueringssett feiler og prioriteringene er uklare.
• Agentens oppførsel endrer seg uventet etter en oppdatering.

Dette rammeverket forutsetter at du allerede har bestått- eller strykresultater for individuelle testtilfeller på tvers av ett eller flere evalueringssett.

Neste trinn

Forstå målene med triage- og saneringsrammeverket, inkludert struktur og designprinsipper.

Relatert informasjon

• Automatiser testingen med agentevaluering i Microsoft Copilot Studio
• Utforme og operasjonalisere agentevaluering
• Arkitektur av agentløsninger: Evalueringsrammeverk
• Arkitektur av agentløsninger: Vanlige evalueringsmetoder