Beoordeel een agent (Klantgesprek) (preview)

[Dit artikel maakt deel uit van de voorlopige documentatie en kan nog veranderen.]

Gebruik het tabblad Evalueren om de prestaties van je agent te meten over een reeks testvragen of gesprekken voordat je het publiceert.

Overzicht van het tabblad Evalueren

Wanneer je het tabblad Evalueren voor het eerst opent, verschijnt er een lege toestand: Evalueer de prestaties van je agent, met een knop Een testset maken. Nadat je één of meer testsets hebt aangemaakt, toont het tabblad in plaats daarvan een tabel Evaluatiesets met Naam, Runstatus, Testmethoden en Laatst uitgevoerd door kolommen, en een knop Nieuwe evaluatie.

Een testset maken

  1. Selecteer op het tabblad EvaluerenEen testset maken (of Nieuwe evaluatie als je al testsets hebt).

  2. Kies een datatype:

    • Enkele reactie: Controleer hoe de agent reageert op een specifieke vraag. Het beste voor gericht testen van mogelijkheden.
    • Gesprek (preview): Controleer de kwaliteit van langere interacties tussen agenten en gebruikers. Het beste voor algemene beoordelingen.

  3. Kies een gegevensbron:

    • Upload een CSV-bestand: Sleep een CSV-bestand naar het uploadgedeelte of selecteer browsen. Gebruik het meegeleverde CSV-sjabloon om te controleren of de inhoud en opmaak van het bestand correct zijn. De maximale bestandsgrootte is 5 MB.
    • Snelle vragenset: Genereer 10 vragen op basis van de beschrijving, instructies en capaciteiten van je agent.
    • Volledige vragenset: Genereer tot 100 vragen, waarbij kennis of onderwerpen als referentie worden gebruikt.
    • Gebruik je testchatgesprek: Verzamel de input en reacties van je huidige handmatige testsessie. (Weergegeven als uitgeschakeld/niet beschikbaar in de bevestigde screenshot; verifieer wanneer het beschikbaar wordt.)
    • Of schrijf zelf wat vragen: Voeg handmatig vragen toe en, optioneel, verwachte antwoorden.

  4. Bekijk je lijst met testgevallen. Gebruik Vragen toevoegen om er meer toe te voegen, bijvoorbeeld door 10 vragen genereren of Schrijf om er handmatig één toe te voegen.

De testset configureren

In het paneel 'Testset configureren':

  • Datatype: Toont het datatype dat je hebt geselecteerd (bijvoorbeeld Single response).
  • Naam: Een verplichte naam voor de testset.
  • Testmethode: De criteria die worden gebruikt om de gegevens te controleren. Kies maximaal vijf methoden. Selecteer Testmethode toevoegen om het dialoogvenster 'Selecteer een testmethode' te openen, dat biedt:
    • Algemene kwaliteit: Reacties voldoen aan kwaliteitsnormen, zoals relevantie en volledigheid. Dat is niet te vergelijken met de verwachte antwoorden.
    • Betekenis vergelijken: Antwoorden hebben dezelfde betekenis als het verwachte antwoord, ook al zijn ze anders geformuleerd.
    • Maatwerk: Controleert en labelt antwoorden van agenten volgens de instructies die jij definieert.
    • Keyword match: Zoekt naar overeenkomende woorden en woordgroepen.
    • Tekstgelijkenis: Meet hoe dicht de tekst van het antwoord van een agent ligt bij het verwachte antwoord. Deze methode kan verschillen in betekenis missen.
    • Exacte match: Agentantwoorden moeten volledig overeenkomen met het verwachte antwoord.
  • Agentversie: Kies of je het huidige concept of de gepubliceerde agent wilt evalueren (bijvoorbeeld Huidig concept).
  • Gebruikersprofiel: Selecteer Beheren om het dialoogvenster Profiel en verbindingen beheren te openen, waar je een geauthenticeerd account selecteert of toevoegt. Schakel Gebruik deze instellingen voor al mijn evaluaties in om het profiel opnieuw te gebruiken voor toekomstige testsets. We raden aan een geauthenticeerd profiel met alle benodigde verbindingen te gebruiken zodat de evaluatie alle agentmogelijkheden kan testen.

Resultaten weergeven

Bekijk na een evaluatie de resultaten om te zien hoe je agent heeft gepresteerd. Het beoordelen van evaluatieresultaten voor een agent die wordt aangedreven door de Customer Conversation harness is vergelijkbaar met het beoordelen van resultaten voor een agent die wordt aangedreven door de standaard harness. Voor meer informatie, zie Evaluaties uitvoeren en resultaten bekijken.

  • Laatst bijgewerkt om