Forhåndsvis og test en agent (Kundesamtale) (forhåndsvisning)

[Denne artikel er dokumentation til en foreløbig version og er med forbehold for ændringer.]

En agent, der ser korrekt ud i Build-fanen , kan stadig fejle i samtalen. Instruktioner er vejledning, ikke garantier: modellen fortolker dem, og forskellen mellem det, du skrev, og det, agenten gør, viser sig kun, når du rent faktisk taler med den. Brug fanen Forhåndsvisning til at teste din agent både via webchat og tale, før du udgiver den.

Testkanaler

Fanen Forhåndsvisning giver to måder at teste din agent på:

  • Webchat: En tekstbaseret chatpanel. Det er her, du bør bruge det meste af din testtid. Det er hurtigere end tale, hele transskriptionen er synlig, og du får et tankespor sammen med chatten.
  • Stemmeopkald: En live stemmesamtale med din agent. Voice har fejltilstande, som tekst aldrig afslører, så test det separat, selv når chatten går uden problemer.

Vælg Webchat eller Voice Call øverst i fanen Forhåndsvisning for at skifte mellem testkanaler. Et Live Transcript-panel vises sideløbende med samtalen.

Før du begynder

  • Gem ændringerne. Forhåndsvisningspanelet kører din gemte agent, ikke ugemte redigeringer i fanen Build.
  • Vid, hvordan "korrekt" ser ud. Skriv det forventede resultat ned, før du sender den første besked.
  • Åbn aktivitetskortet. Den ligger ved siden af chatten og viser routing, værktøjskald og emneudførelse. Det er sådan, man skelner en ræsonnementsfejl fra en VVS-fejl.
  • Start en ny testsession mellem scenarier. Konteksten overføres og vil forurene dit næste resultat.

De fem lag, der skal testes

Arbejd udad fra det simpleste lag. En fejl i et tidligt lag vil forplante sig, så ret fejl i rækkefølge.

Lag Det, du tester Hvordan man kan se, at det virker
Hilsen og omfang Agenten præsenterer sig selv og forstår sit eget job Åbningsbeskeden matcher din beskrivelse; den accepterer forespørgsler inden for scope
Routing Orkestratoren vælger den rigtige underagent Aktivitetsoversigten viser den forventede specialist, der aktiveres
Værktøjer og emner Aktioner udføres faktisk og returnerer data Faktiske værdier vender tilbage, ikke pladsholdere eller tavshed
Viden Svarene er forankret i dine kilder Citationer vises og matcher dine konfigurerede kilder
Gelændere Afvisninger, eskalering og forretningsregler i bero Agenten afviser, eskalerer eller markerer præcis som instrueret

Test i webchat

Kør standardforløbet først

Spil en realistisk bruger med et fuldstændigt mål, ikke en tester, der prøver at undersøge funktioner. For eksempel betyder det for en rejsekonsulent at booke en rigtig rejse fra start til ende i stedet for at spørge "kan du booke fly?"

  1. Åbn målsætningen naturligt, som en rigtig bruger ville gøre.
  2. Svar på agentens spørgsmål som samarbejdsvillig bruger.
  3. Følg flowet til en reel konklusion: en booking, et resumé, en afgørelse.
  4. Bed om et resumé til sidst, og verificér så alle fakta i det mod udskriften.

Så ødelæg den med vilje

Det ideelle forløb beviser, at agenten kan arbejde. Disse scenarier beviser, at det svigter sikkert.

Test Hvad der skal sendes Hvad bør der ske
Manglende detaljer Spring et obligatorisk felt over, som agenten skal udfylde Den beder kun om præcis det felt
Ændret mening Omvend en beslutning midt i flowet Den opdateres uden at miste tidligere kontekst
Ikke omfattet Spørg om noget uden for dets domæne Den afviser og omdirigerer uden at improvisere
Eskalering Udløs en dokumenteret overdragelsesregel Den overfører i stedet for at forsøge at udføre opgaven
Forretningsregel Overtræd en angivet grænse, såsom budget Den markerer konflikten eksplicit
Hukommelse i sessionen Bed den gentage en detalje fra tidligere Den husker præcist, uden at spørge igen

Læs aktivitetsoversigten, ikke kun svaret

Chatten fortæller dig, hvad agenten sagde. Aktivitetsoversigten fortæller dig, hvad der blev gjort. Når et svar ser forkert ud, fortæller kortet dig, hvor du skal rette det:

  • Forkert specialist aktiveret , → dine routinginstruktioner eller underagentbeskrivelser er tvetydige.
  • Den rette specialist, dårlig output → underagentens egne instruktioner skal forbedres.
  • Tool kørte, men returnerede intet → værktøjet eller emnet er ødelagt, ikke prompten.
  • Ingen værktøjskald overhovedet → agenten svarede ud fra modellen i stedet for dine data. Behandl alle værdier i det svar som uverificerede.

Test med stemme

Voice er ikke webchat med tilknyttet lyd. Den har fejltilstande, og tekst vil aldrig blive vist, så test den separat, selv når chatten består uden problemer.

  1. Giv adgang til mikrofonen, start derefter stemmessamtalen, og bekræft, at status er Forbundet og Lytter.
  2. Sig en fuld anmodning naturligt i stedet for at læse et manuskript ord for ord.
  3. Se live-transskriptionen. Hvis talegenkendelse misforstår dig, svarer agenten på et andet spørgsmål end det, du stillede.
  4. Afbryd agenten midt i sætningen for at bekræfte, at afbrydelse ved indgriben stopper afspilningen og begynder at lytte.
  5. Forbliv tavs i flere sekunder for at bekræfte, at systemet høfligt spørger igen i stedet for at afbryde opkaldet.
  6. Bed om en bekræftelseskode og tjek, at den staves tegn for tegn, ikke læses som et ord.

Hvad man skal lytte efter

  • Længde: Alt over cirka tre sætninger er for langt til at følge med i, når man lytter.
  • Lister og URL'er: Disse skal opsummeres, aldrig læses højt punkt for punkt.
  • Datoer og numre: "tirsdag den fireogtyvende marts" virker; "2026-03-24" gør ikke.
  • Bekræftelse af kritiske data: Navne, datoer og koder bør læses tilbage, før agenten handler på dem.

Hvis Tale opfører sig som din chatkanal, gør dine kanalspecifikke instruktioner ikke deres arbejde. Tale- og chatinstruktioner konfigureres separat på hver agent i sektionens Instruktioner- Tale- og Chat-faner. Se oversigt over tale- og chatindstillinger.

Tip

Kør dine kritiske scenarier mere end én gang, og kør mindst én lang session. Intermitterende fejl er stadig fejl, og det er dem, der når produktionen.

Når noget fejler

  1. Reproducér den. Start en ny session, og kør den samme sti igen, og notér om den fejler hver gang eller indimellem.
  2. Find den ved hjælp af aktivitetsoversigten: rute, værktøj, viden eller instruktion.
  3. Ret én ting ad gangen. At ændre flere instruktioner på én gang gør det umuligt at se, hvad der virkede.
  4. Gem, start en ny session, og kør præcis samme scenarie igen.
  5. Gennemfør dine andre beståede scenarier igen. Ændringer i instruktionen har bivirkninger.

Klar-til-afsendelses-tjekliste

  • Det ideelle scenarie fuldender fra ende til anden uden vejledning.
  • Hvert faktum i det endelige resumé kan spores tilbage til noget, som et værktøj eller en kundskabskilde faktisk returnerede.
  • Der vises ingen pladsholdertekst nogen steder i et brugersynligt svar.
  • Agenten rapporterer ærligt talt svigt, når et værktøj ikke returnerer noget.
  • Regler for eskalering og afvisning aktiveres pålideligt.
  • Stemmesvarene er korte, og koder staves ud.
  • Kritiske scenarier blev kørt mere end én gang, inklusive en lang session.
  • Sidst opdateret den