Evaluer en agent (Kundesamtale) (forhåndsvisning)

[Denne artikel er dokumentation til en foreløbig version og er med forbehold for ændringer.]

Brug fanen Evaluer til at måle din agents præstation på tværs af en række testspørgsmål eller samtaler, før du udgiver den.

Evaluer faneoversigt

Når du åbner fanen Evaluer for første gang, vises en tom tilstand: Evaluer din agents præstation med knappen Opret et testsæt. Når du har oprettet et eller flere testsæt, viser fanen i stedet en tabel Evalueringssæt med kolonnerne Navn, Kørselsstatus, Testmetoder og Sidst kørt af samt knappen Ny evaluering.

Opret et testsæt

  1. På fanen Evaluer vælger du Opret et testsæt (eller Ny evaluering , hvis du allerede har testsæt).

  2. Vælg en datatype:

    • Enkelt svar: Tjek hvordan agenten svarer på et specifikt spørgsmål. Bedst til test af målrettede funktioner.
    • Samtale (forhåndsvisning): Tjek kvaliteten af længere agentinteraktioner med brugerne. Bedst til generelle vurderinger.

  3. Vælg en datakilde:

    • Overfør en CSV-fil: Træk en CSV-fil ind i uploadområdet, eller vælg gennemse. Brug den medfølgende CSV-skabelon for at sikre, at filens indhold og formatering er korrekte. Maksimal filstørrelse er 5 MB.
    • Hurtigt spørgsmålssæt: Generer 10 spørgsmål baseret på din agents beskrivelse, instruktioner og evner.
    • Hele spørgsmålssæt: Generer op til 100 spørgsmål ved at bruge viden eller emner som reference.
    • Brug din testchat-samtale: Indsaml input og svar fra din nuværende manuelle testsession. (Vises som deaktiveret/utilgængelig på det bekræftede screenshot; bekræft når det bliver tilgængeligt.)
    • Eller skriv selv nogle spørgsmål: Tilføj manuelt spørgsmål og eventuelt forventede svar.

  4. Gennemgå din testcaseliste. Brug Tilføj spørgsmål for at tilføje flere, enten ved at vælge Generer 10 spørgsmål eller Skriv for manuelt at tilføje ét.

Konfigurer testsættet

I panelet Konfigurer testsæt:

  • Datatype: Viser den datatype, du valgte (for eksempel Single response).
  • Navn: Et påkrævet navn til testsættet.
  • Testmetode: De kriterier, der bruges til at kontrollere dataene. Vælg op til fem metoder. Vælg Tilføj testmetode for at åbne dialogen Vælg en testmetode , som tilbyder:
    • Generel kvalitet: Svarene opfylder kvalitetsstandarder, såsom relevans og fuldstændighed. Kan ikke måle sig med de forventede svar.
    • Sammenlign betydning: Svar har samme betydning som det forventede svar, selvom de formuleres anderledes.
    • Special: Tjekker og mærker agentens svar i henhold til de instruktioner, du definerer.
    • Nøgleordsmatch: Leder efter matchende ord og sætninger.
    • Tekstsimilaritet: Måler, hvor tæt teksten i en agents svar er på det forventede svar. Denne metode kan overse forskelle i betydning.
    • Præcis match: Agentens svar skal matche det forventede svar fuldstændigt.
  • Agentversion: Vælg om du vil evaluere det aktuelle udkast eller den offentliggjorte agent (for eksempel det aktuelle udkast).
  • Brugerprofil: Vælg Administrer for at åbne dialogen Administrer profil og forbindelser, hvor du vælger eller tilføjer en autentificeret konto. Aktivér Brug disse indstillinger til alle mine evalueringer for at genbruge profilen til fremtidige testsæt. Vi anbefaler at bruge en autentificeret profil med alle nødvendige forbindelser, så evalueringen kan teste alle agentens funktioner.

Vis resultaterne

Efter du har lavet en evaluering, skal du gennemgå resultaterne for at se, hvordan din agent klarede sig. At gennemgå evalueringsresultater for en agent drevet af Customer Conversation-harnesset svarer til at gennemgå resultater for en agent drevet af standardharnesset. For at lære mere, se Kør evalueringer og se resultater.

  • Sidst opdateret den