Agentactiviteit bekijken

Het maken van een agent is een iteratief proces. Het omvat inzicht in de werking van uw agents, het aanbrengen van wijzigingen en het bekijken van de resultaten. Dit proces helpt u betere agents te bouwen. Met de activiteitenregistratie van Copilot Studio krijgt u een visuele toewijzing van de invoervolgorde, beslissingen en uitvoer van uw agents binnen een activiteit. Zo kunt u problemen en verbetermogelijkheden identificeren.

Er wordt een activiteitenoverzicht gegenereerd voor elke activiteit. Een activiteit begint wanneer een agent een gesprek start of een externe gebeurtenis een agent activeert. Een kaart vertegenwoordigt elke activiteit met een knooppunt.

Er bestaan twee manieren van activiteit bijhouden.

• Realtime activiteitenkaart van de prestaties van uw agent tijdens het testen
• Historische activiteitentoewijzingen en transcripties van eerdere activiteiten

Realtime activiteitenkaart tijdens het testen

Wanneer u uw agent een vraag stelt in het deelvenster Uw agent testen, wordt in het activiteitenoverzicht een visuele weergave weergegeven van het plan dat de agent heeft gegenereerd. De kaart markeert fouten, zoals ontbrekende of ongeldige invoer- of uitvoerparameters voor acties, en laat zien hoe lang elke stap duurt om uit te voeren. U kunt ook controleren of de informatie die uw agent verzendt of ontvangt, correct is.

Als u de activiteitenoverzicht automatisch wilt weergeven wanneer u een query naar uw agent verzendt in het deelvenster Uw agent testen, selecteert u de drie puntjes (...) en schakelt u Activiteitenoverzicht weergeven in tijdens het testen.

Hier vroeg de gebruiker: "Hoe is het weer in Toronto, Canada morgen?" U kunt de actie zien die de agent heeft geselecteerd om te reageren en de invoer en uitvoer.

Triggers voor testevenementen

Wanneer u gebeurtenistriggers test, wordt de payload van de trigger als een bericht in de test-chat weergegeven. Alleen u kunt dit bericht in Copilot Studio zien voor testdoeleinden. Gebruikers van uw agent kunnen deze niet zien. Gebruik de payload-berichten om te begrijpen wanneer en welke informatie en instructies een trigger naar uw agent verzendt.

Bijhouden tussen onderwerpen

Wanneer u uw agent test, kunt u schakelen tussen onderwerpen. Wanneer u het bijhouden inschakelt, worden in het activiteitsoverzicht de knooppunten binnen het onderwerp getoond zoals ze worden uitgevoerd wanneer een onderwerp als onderdeel van een plan wordt geactiveerd. U kunt de gespreksstroom bewaken.

Variabelen weergeven

Je kunt de variabelen bekijken die je agent gebruikt tijdens het testen. Deze variabelen kunnen globale, omgevings-, systeem- of aangepaste variabelen zijn die de agent kan benaderen.

De variabelen weergeven:

1. Open uw agent. De pagina Overzicht verschijnt.
2. Selecteer Testen om het deelvenster Uw agent testen te openen.
3. In het deelvenster Test uw agent begint u een gesprek met uw agent door een zoekopdracht of prompt in te voeren.
4. Als u variabelen wilt weergeven tijdens het testen, selecteert u Testen en selecteert u Variabelen. Het deelvenster Variabelen wordt geopend met de variabelen die tijdens het testen worden gebruikt.

Bekijk de gedachtenketen van de agent in testchat

De functie Chain of Thought (CoT) biedt inzicht in het redeneringsproces van uw agent tijdens het testen. Het toont de tussenstappen, overwegingen en beslissingen die de agent neemt terwijl hij input verwerkt en output genereert. Deze functie is handig voor het begrijpen van complexe interacties en het opsporen van fouten in agentgedrag.

Voer de volgende stappen uit om de keten van gedachte of redenering van de agent tijdens het testen weer te geven:

1. Open uw agent. De pagina Overzicht verschijnt.
2. Selecteer Testen om het deelvenster Uw agent testen te openen.
3. In het deelvenster Test uw agent begint u een gesprek met uw agent door een zoekopdracht of prompt in te voeren.
4. Voordat de agent reageert, wordt de redenering weergegeven in het deelvenster Uw agent testen, waarin de keten van gedachte wordt weergegeven voor het antwoord van de agent.

Historische activiteit

Telkens wanneer een agent een activiteit start, inclusief tests die u in Copilot Studio start, registreert de pagina Activiteit de activiteit in realtime. Ga naar de pagina Activiteit om het volgende te doen:

• Bekijk de interacties en de beslissingen die uw agent heeft genomen tijdens een activiteit.
• Zoek waar het gedrag van de agent niet overeenkomt met uw doelen.
• Bekijk hoe lang het duurt voordat uw agent elke activiteit heeft voltooid.
• Foutdetails zoeken.

Historische agent-activiteit is beschikbaar voor:

• Interacties in Copilot Studio testchat
• Agents die zijn gepubliceerd op de kanalen Microsoft Teams en Microsoft 365 Copilot
• Agents gepubliceerd in het SharePoint-kanaal
• Activiteiten die zijn gestart met een autonome trigger

Bekijk de volgende informatie op de pagina Activiteit :

• De lijst met activiteiten en hun gegevens.
• Het stapsgewijze gesprek dat binnen een activiteit plaatsvindt.

Activiteitenlijst

Een activiteit is een eenheid van agentinteractie die een gesprek met een gebruiker omvat, gebeurtenissen registreert en erop reageert, of een combinatie van deze activiteiten.

In de lijst met activiteiten ziet u het volgende:

• Naam: de naam van de gebruiker die communiceert met de agent. Als de activiteit geen gebruiker omvat, bijvoorbeeld wanneer een agent acties uitvoert zonder menselijke prompts, wordt de gebruiker weergegeven als Geautomatiseerd.
• Kanalen: het kanaal waar de interactie plaatsvond. Activiteiten die in het deelvenster Test your agent plaatsvinden, zijn voorzien van het Copilot Studio-pictogram.
• Datum: de datum waarop de eerste interactie van de activiteit begint.
• Voltooide stappen: het aantal stappen dat de agent tijdens de activiteit voltooit.
• Laatste stap: De laatste stap die is voltooid in de activiteit.
• Status: De status van de activiteit (geslaagd, mislukt, wordt uitgevoerd).

De weergave Activiteitentabel aanpassen

U kunt de weergave Activiteitentabel aanpassen om u te richten op de informatie die het meest relevant is voor u.

De weergave Activiteitentabel aanpassen:

1. Ga naar de pagina Activiteit van uw agent. Er wordt een lijst met activiteiten weergeven.
2. Selecteer Kolommen bewerken. Het deelvenster Kolommen bewerken wordt weergegeven met een lijst met beschikbare kolommen.
3. In het deelvenster Kolommen bewerken :
   • Schakel het selectievakje in naast de naam van de kolommen die u wilt weergeven.
   • Schakel het selectievakje uit naast de naam van de kolommen die u wilt verbergen.
   • Versleep de kolommen om deze in de gewenste volgorde te zetten of gebruik de pijltjes omhoog en omlaag.
4. Selecteer Opslaan om de weergave Activiteitentabel te bevestigen en bij te werken.

Sessies sorteren en filteren

Je kunt de sessies sorteren en filteren op datum, kanaal, status en fouten om ze snel te beperken voor snellere triage en beoordeling. Je kunt de weergave ook aanpassen om te focussen op wat het belangrijkst is voor je workflow.

Als u sessies wilt sorteren of filteren, gaat u naar de pagina Activiteit . Er wordt een lijst met activiteitssessies weergegeven.

• Als u sessies wilt sorteren, plaatst u de muisaanwijzer op de kolomkop waarop u wilt sorteren totdat de sorteerpijl wordt weergegeven en selecteert u deze. Selecteer deze opnieuw om de sorteervolgorde om te draaien.
• Als u de weergave wilt aanpassen om u te richten op specifieke sessies, selecteert u Filters en kiest u de criteria waarop u wilt filteren.
• Om sessies op status te beperken, selecteert u een van de volgende filterpillen bovenaan de sessielijst: Mislukt, Geblokkeerd, In uitvoering, Wacht op gebruiker, of Voltooid.

Sessieactiviteit bekijken

Op de pagina Activiteit kunt u het gesprek in een activiteit bekijken in een visuele activiteitsoverzicht of zowel een gesprektranscriptie als een kaart met visuele activiteiten. Standaard wordt de weergave Transcriptie + Kaart weergegeven.

1. Als u een gesprek binnen een activiteit wilt zien, selecteert u een activiteit.

   • Als u de transcriptie en activiteitenkaart samen wilt weergeven, selecteert u Weergave en vervolgens Transcriptie + Kaart.
   • Als u alleen de activiteitenkaart wilt weergeven, selecteert u Weergeven en vervolgens Kaartweergave.

   

2. Als u wilt terugkeren naar de lijst met activiteiten, selecteert u het pictogram Vorige .

In de weergave Transcript + Kaart wordt het gesprek weergegeven dat met de agent heeft plaatsgevonden tijdens een activiteit, samen met een kaart met visuele activiteiten. De transcriptie registreert de gebruikersinvoer, trigger nettoladingen en agentreacties. Gebruik de transcripties om te zien hoe uw agent reageert op gesprekken met gebruikers. U kunt ook de trigger-payload-berichten bekijken die uw agent van gebeurtenistriggers ontvangt.

Bekijk de keten van gedachte van de agent

De functie Chain of Thought (CoT) biedt inzicht in het redeneringsproces van uw agent tijdens een activiteit. Hierin worden de tussenliggende stappen, overwegingen en beslissingen weergegeven die door de agent worden genomen wanneer invoer wordt verwerkt en uitvoer wordt gegenereerd. Deze functie is handig voor het begrijpen van complexe interacties en het opsporen van fouten in agentgedrag. U kunt de gedachtenketen van de agent alleen voor een specifieke activiteit bekijken in de kaartweergave.

Ga als volgt te werk om de keten van gedachte of redenering van de agent voor een specifieke activiteit weer te geven:

1. Selecteer op het tabblad Activiteit de activiteit die u wilt controleren. Standaard wordt de weergave Transcript + Kaart weergegeven.
2. Onder het activiteitenoverzicht, selecteer de Redeneren chevron. De gedachtenketen van de agent wordt weergegeven.

Bekijk de interacties van je agent met andere gebruikers

Wanneer de systeembeheerder het delen van activiteitstranscripties van je agent met andere gebruikers toestaat, kun je de interacties zien die andere gebruikers met je agent hebben op de Activiteitenpagina . Je kunt beoordelen hoe je makelaar presteert in echte interacties en verbeterpunten identificeren.

Meer informatie in Agents delen met andere gebruikers.

Activiteit vastmaken of losmaken

Op de pagina Activiteit kunt u belangrijke activiteiten vastmaken aan de bovenkant van de activiteitenlijst voor eenvoudige toegang of losmaken wanneer ze niet meer nodig zijn.

• Als u een activiteit wilt vastmaken, beweegt u de muisaanwijzer over de activiteit en selecteert u het pictogram Vastmaken naast de naam.
• Als u een activiteit wilt losmaken, beweegt u de muisaanwijzer over de vastgemaakte activiteit en selecteert u het pictogram Losmaken naast de naam.

Bekijk alle agentactiviteiten in de activiteitenkaart

De kaartweergave is een visuele weergave van de stroom invoer, beslissingen en reacties die optreden tijdens een activiteit. Elke activiteit die uw agent, een gebruiker of een trigger uitvoert met een knooppunt. Selecteer tijdens het weergeven van de activiteitenkaart een knooppunt om details te bekijken over de invoer, beslissingen en uitvoer voor die activiteit.

De volgende afbeelding is een voorbeeld van wat u ziet wanneer u een kennisknooppunt selecteert. Hier ziet u het volgende:

• De query die de agent heeft gebruikt om de kennisbronnen te doorzoeken. Deze kan afwijken van de query die is geschreven door een gebruiker of van de invoer die door een trigger wordt geleverd.
• Het antwoord dat de agent heeft gemaakt op basis van de kennisbronnen.
• De bronnen waarnaar de agent heeft verwezen.
• Andere bronnen die de agent heeft doorzocht, maar niet gebruikt om het antwoord te maken. De agent heeft deze bronnen doorzocht, maar heeft geen informatie gevonden die relevant is voor de query.

In dit voorbeeld ziet u de details van een actieknooppunt voor Ontvang de voorspelling voor morgen met de invoer en uitvoer:

Selecteer Bewerken om de configuratie te bekijken en te wijzigen die is gekoppeld aan de geselecteerde activiteit.

Onderbouwing

Rationale biedt een uitleg over hoe een agent heeft besloten een bepaald hulpprogramma aan te roepen. AI genereert de logica op aanvraag en is gebaseerd op metagegevens en activiteiten van de agent. Rationale worden weergegeven voor Voltooide kennisbronnen en connectors. Selecteer Rationale weergeven om de rationale weer te geven.

Wanneer u agentactiviteit bekijkt, gebruikt u Rationale om een beter inzicht te krijgen in waarom een agent ervoor heeft gekozen om een bepaald hulpprogramma aan te roepen of parameters in te vullen. Het helpt u bij het oplossen van problemen met agentgedrag. Omdat AI echter de logica genereert, is deze mogelijk niet nauwkeurig. Gebruik uw beste oordeel bij het beoordelen van de opgegeven logica.

Agentstatus

De volgende tabel beschrijft de verschillende toestanden die een agent tijdens zijn werking kan tegenkomen:

Feedback verzenden

Als u suggesties hebt voor het verbeteren van de kwaliteit van uw agent, stuurt u uw feedback met behulp van het pictogram Feedback op het tabblad Activiteit .