Vurder en agent (Customer Conversation) (forhåndsvisning)

[Denne artikkelen inneholder dokumentasjon for forhåndsversjonen og kan bli endret.]

Bruk fanen Evaluer for å måle agentens prestasjoner på tvers av en serie testspørsmål eller samtaler før du publiserer den.

Oversikt over Evaluer-fanen

Når du åpner Evaluate-fanen for første gang, vises en tom tilstand: Evaluer agentens ytelse, med knappen Opprett et testsett. Etter at du har opprettet ett eller flere testsett, viser fanen i stedet en tabell for evalueringssett med kolonnene Navn, Kjørestatus, Testmetoder og Sist kjørt av, samt en Ny evaluering-knapp.

Opprett et testsett

  1. På fanen Evaluer , velg Opprett et testsett (eller Ny evaluering hvis du allerede har testsett).

  2. Velg en datatype:

    • Enkelt svar: Sjekk hvordan agenten svarer på et spesifikt spørsmål. Best for testing av målrettede funksjoner.
    • Samtale (forhåndsvisning): Sjekk kvaliteten på lengre agentinteraksjoner med brukerne. Best for generelle vurderinger.

  3. Velg en datakilde:

    • Last opp en CSV-fil: Dra en CSV-fil inn i opplastingsområdet, eller velg bla gjennom. Bruk den medfølgende CSV-malen for å sikre at filinnholdet og formateringen er korrekte. Maksimal filstørrelse er 5 MB.
    • Raskt spørsmålssett: Generer 10 spørsmål basert på agentens beskrivelse, instruksjoner og evner.
    • Fullstendig spørsmålssett: Generer opptil 100 spørsmål, og bruk kunnskap eller emner som referanse.
    • Bruk samtalen i testchatten: Samle inn input og svar fra din nåværende manuelle testøkt. (Vises som deaktivert/utilgjengelig i det bekreftede skjermbildet; verifiser når det blir tilgjengelig.)
    • Eller skriv noen spørsmål selv: Legg til spørsmål manuelt og, valgfritt, forventede svar.

  4. Gå gjennom testcaselisten din. Bruk Legg til spørsmål for å legge til flere, enten ved å velge Generer 10 spørsmål eller Skriv for å legge til ett manuelt.

Konfigurer testsettet

I panelet Konfigurer testsett:

  • Datatype: Viser datatypen du valgte (for eksempel Enkelt svar).
  • Navn: Et påkrevd navn for testsettet.
  • Testmetode: Kriteriene som brukes for å sjekke dataene. Velg opptil fem metoder. Velg Legg til testmetode for å åpne dialogen Velg en testmetode , som tilbyr:
    • Generell kvalitet: Svarene oppfyller kvalitetsstandarder, som relevans og fullstendighet. Sammenlignes ikke mot forventede svar.
    • Sammenlign betydning: Svar har samme betydning som det forventede svaret, selv om de formuleres annerledes.
    • Custom: Sjekker og merker agentsvar i henhold til instruksjonene du definerer.
    • Nøkkelordmatch: Ser etter matchende ord og fraser.
    • Tekstlikhet: Måler hvor nær teksten i agentens svar er det forventede svaret. Denne metoden kan overse forskjeller i betydning.
    • Nøyaktig match: Agentens svar må matche det forventede svaret fullstendig.
  • Agentversjon: Velg om du vil evaluere det nåværende utkastet eller den publiserte agenten (for eksempel nåværende utkast).
  • Brukerprofil: Velg Administrer for å åpne dialogen Administrer profilen og tilkoblinger , hvor du velger eller legger til en autentisert konto. Slå på Bruk disse innstillingene for alle evalueringene mine for å gjenbruke profilen for fremtidige testsett. Vi anbefaler å bruke en autentisert profil med alle nødvendige tilkoblinger slik at evalueringen kan teste alle agentens egenskaper.

Vis resultater

Etter at du har gjennomført en evaluering, gå gjennom resultatene for å se hvordan agenten din presterte. Å gjennomgå evalueringsresultater for en agent drevet av Customer Conversation-harnesset ligner på å gjennomgå resultater for en agent drevet av standardharnesset. For mer informasjon, se Kjør evalueringer og se resultater.

  • Sist oppdatert