Een evaluatie uitvoeren voor een agent (preview)

[Dit artikel is voorlopige documentatie en kan worden gewijzigd.]

Nadat je een testset met gesprekken hebt gemaakt, voer je een evaluatie uit om de prestaties van je agent te meten. Bij de evaluatie wordt elk gesprek verwerkt en worden beoordeelde resultaten geproduceerd op basis van de geselecteerde testmethode.

Prerequisites

• Een agent die is gemaakt en opgeslagen met het GitHub Copilot-harnas. Zie Een agent aanmaken (preview).
• Minstens één evaluatie met gesprekken. Zie Een testset maken voor een agent (preview).

Om een evaluatie voor een agent uit te voeren:

1. Open uw agent in Copilot Studio.
2. Selecteer het tabblad Evalueren.
3. Selecteer in het keuzemenu Evaluatie de evaluatie die je wilt uitvoeren.
4. Voeg minstens één gesprek toe aan de testset als u dat nog niet hebt gedaan.
5. Controleer het volgende in het deelvenster Testset configureren:
   • De naam van de evaluatie is ingesteld.
   • De testmethode is geconfigureerd (bijvoorbeeld Algemene kwaliteit).
6. Selecteer Beoordelen om de evaluatie te starten. Tijdens de evaluatie wordt elk gesprek in de testset verwerkt. Afhankelijk van het aantal gesprekken kan dit proces enkele minuten duren.

Evaluatie opnieuw uitvoeren

Nadat u de instructies, kennis of tools van uw makelaar hebt gewijzigd, voer u de evaluatie opnieuw uit om de impact te meten:

1. Selecteer op het tabblad Evalueren in het keuzemenu Evaluatie de evaluatie die u opnieuw wilt uitvoeren.
2. Selecteer onder Recente resultaten de optie Testset opnieuw evalueren of selecteer het pictogram Testset evalueren in de testset om een nieuwe run te starten.
3. Vergelijk de resultaten van de nieuwe run met eerdere runs om te zien of de veranderingen de prestaties verbeterden of verslechterden.

Download een evaluatiesessie

Wanneer het tabblad Evalueren beschikbaar is voor je omgeving, kun je sessiegegevens downloaden van een evaluatie om deze offline te bekijken of delen met een reviewer. De download verpakt de metadata van de evaluatierun (evaluatienaam, run-identifier, agentversie en testmethode) samen met de resultaten per gesprek (de invoer, agentrespons en score van elke beurt).

Om een evaluatiesessie te downloaden:

1. Open in het tabblad Evalueren de evaluatie waarvan je de run wilt downloaden.
2. Selecteer onder Recente resultaten de run die je wilt downloaden.
3. Selecteer Download om de sessiegegevens op te slaan.

Gebruik gedownloade sessiegegevens om:

• Bekijk agenten die offline reageren als je geen toegang hebt tot Copilot Studio.
• Deel een specifieke run met een reviewer voor feedback.
• Houd een overzicht bij van een evaluatie die samen met je testartefacten wordt uitgevoerd.

Gedownloade sessiegegevens weerspiegelen de staat van de run op het moment dat je het downloadt. Voer de evaluatie opnieuw uit als je het effect van latere wijzigingen aan de agent wilt vastleggen.

Gerelateerde informatie

• Evalueer een agent
• Een testset maken voor een agent
• Bekijk de evaluatieresultaten voor een agent