Kör en utvärdering för en agent (förhandsversion)

[Denna artikel är en förhandsversion av dokumentationen och kan komma att ändras.]

Efter att du har skapat en testuppsättning med konversationer, kör en utvärdering för att mäta din agents prestation. Utvärderingen bearbetar varje samtal och genererar poängsatta resultat baserat på den valda testmetoden.

Förutsättningar

• En agent som skapats och sparats med GitHub Copilot harness. Se Skapa en agent (förhandsversion).
• Minst en utvärdering med konversationer. Se Skapa en testuppsättning för en agent (förhandsversion).

För att genomföra en utvärdering av en agent:

1. Öppna din agent i Copilot Studio.
2. Välj fliken Utvärdera.
3. I rullgardinsmenyn Utvärdering väljer du den utvärdering du vill genomföra.
4. Lägg till minst en konversation i testuppsättningen om du inte redan har gjort det.
5. I panelen Konfigurera testuppsättning verifierar du följande:
   • Utvärderingens Namn är satt.
   • Testmetoden är konfigurerad (till exempel allmän kvalitet).
6. Välj Utvärdera för att påbörja utvärderingen. Utvärderingen behandlar varje konversation i testuppsättningen. Beroende på antalet konversationer kan denna process ta flera minuter.

Kör om en utvärdering

Efter att du ändrat din mäklares instruktioner, kunskap eller verktyg, kör utvärderingen igen för att mäta effekten:

1. På fliken Utvärdera, välj den utvärdering du vill köra om från rullgardinsmenyn Utvärdering.
2. Under Senaste resultat väljer du Utvärdera testuppsättning igen eller väljer ikonen Utvärdera testuppsättning under pågående testuppsättning för att starta en ny körning.
3. Jämför resultaten från den nya omgången med tidigare omgångar för att se om förändringarna förbättrade eller försämrade prestandan.

Ladda ner en utvärderingssession

När fliken Utvärdera är tillgänglig för din miljö kan du ladda ner sessionsdata från en utvärderingskörning för att granska den offline eller dela den med en granskare. Nedladdningen paketerar utvärderingskörningens metadata (utvärderingsnamn, köridentifierare, agentversion och testmetod) tillsammans med resultaten per konversation (varje turs inmatning, agentsvar och poäng).

För att ladda ner en utvärderingssession:

1. På fliken Utvärdera öppnar du den utvärdering vars körning du vill ladda ned.
2. Under Senaste resultat, välj den serie du vill ladda ned.
3. Välj Ladda ner för att spara sessionsdatan.

Använd nedladdad sessionsdata för att:

• Granska agentens svar offline när du inte har tillgång till Copilot Studio.
• Dela en specifik genomgång med en recensent för feedback.
• För en anteckning över en utvärdering som körs tillsammans med dina testartefakter.

Nedladdad sessionsdata speglar tillståndet för körningen vid tidpunkten för nedladdningen. Kör om utvärderingen om du vill fånga effekten av senare ändringar på agenten.

Relaterad information

• Utvärdera en agent
• Skapa en testuppsättning för en agent
• Visa utvärderingsresultat för en agent