Se gjennom den forbedrede sjekklisten

Optimalisering av en agent tar ikke slutt ved lansering. Copilot Studio byr på omfattende analyser som hjelper deg å forstå hvordan brukere samhandler med agenten, hvor samtaler lykkes eller mislykkes, og hvor godt agenten bruker verktøyene og kunnskapen. Denne artikkelen inneholder en strukturert sjekkliste og anbefalte fremgangsmåter for å hjelpe deg å kontinuerlig evaluere og forbedre agenten din.

Valider forbedrings- og analyseberedskapen din

Bruk disse spørsmålene i løpet av regelmessige gjennomganger, for eksempel sprintseremonier, månedlige optimaliseringer eller beredskap før lansering.

Temaer og brukerhensiktsmønstre

Ferdig? Oppgave
✓ Ser du gjennom temaer for å identifisere klynger av brukerspørsmål og nye hensikter?
✓ Legger du til ofte forekommende temaer i gjenværende arbeid for å oppnå fremtidige forbedringer?

Samtaleresultater

Ferdig? Oppgave
✓ Analyserer du løste, eskalerte, forlatte og uengasjerte samtaler for å finne forbedringsområder?
✓ Sikrer du at samtaler slutter med emnet Slutt på samtale, slik at resultatene blir riktig registrert?
✓ Undersøker du plutselige økninger i forlatte økter for å identifisere uklare svar eller manglende logikk?
✓ Validerer du at eskaleringsbaner bare utløses når det er hensiktsmessig?

Generert svarandel og -kvalitet

Ferdig? Oppgave
✓ Ser du gjennom den genererte svarandelen for å identifisere kunnskapshull eller manglende dekning?
✓ Kontrollerer du kvalitetsmåledata for svar, for eksempel fullstendighet, faktagrunnlag og relevans?
✓ Undersøker du dårlige svar og håndterer årsakene som er flagget i analysene?

Bruk av verktøy og handlinger

Ferdig? Oppgave
✓ Følger du med på hvor ofte verktøy og handlinger aktiveres, og om de lykkes eller mislykkes?
✓ Identifiserer du lite brukte verktøy eller verktøy utsatt for feil og vurderer om du skal optimalisere eller fjerne dem?
✓ Validerer du at verktøy som brukes i generativ iverksetting, fungerer pålitelig?

Kunnskapskildeytelse

Ferdig? Oppgave
✓ Ser du gjennom bruks- og feilfrekvenser for alle kunnskapskilder?
✓ Prioriterer du oppdateringer for kunnskapskilder med mange feil eller inkonsekvente resultater?
✓ Bekrefter du at de riktige kunnskapskildene støtter de scenarioene de er ment for?

Tilfredshet og brukertilbakemelding

Ferdig? Oppgave
✓ Samler du inn brukersentiment via tommel opp/ned og CSAT-undersøkelser?
✓ Analyserer du tilbakemeldingstrender for å identifisere uklare svar eller svake samtaleflyter?
✓ Legger du til samhandlingsmønstre med lav tilfredshet i gjenværende arbeid med å endre utformingen?

Forklaringer til anbefalt fremgangsmåte

  • Behandle analyser som en gjentatt forbedringsløkke: Bruk analyser til å foreta trinnvise forbedringer. Bruk temaer, ufullstendige svar og feilmønstre til å informere sprintplanlegging og prioritere oppgaver i gjenværende arbeid.
  • Fokuser på kvaliteten på resultatene fremfor mengde: Et sunt system maksimerer løste samtaler og minimerer eskaleringer og frafall. Bruk resultatforhold som en ledende indikator på klarhet og effektivitet.
  • Styrk kunnskapskilder proaktivt: Høy feilfrekvens eller svar av lav kvalitet innebærer ofte uklare, utdaterte eller feiltilpassede kunnskapskilder. Oppdater og omstrukturer disse kildene ofte for å oppnå bedre faktagrunnlag.
  • Optimaliser verktøy for stabilitet og suksess: Upålitelige verktøyoppkall svekker tilliten. Spor suksessrater og refaktorer handlinger som ofte mislykkes eller gir inkonsekvente data.
  • Bruk temaer til å identifisere nye salgsmuligheter: Temaer fremhever nye hensikter. Bruk dem som grunnlag for nye emner, kunnskapskilder eller integreringsbehov.
  • Sikre at samtalene får en ryddig slutt: Bruk alltid emnet Slutt på samtale til å registrere løsning og CSAT. Uten dette emnet blir analyser ufullstendige og misvisende.
  • Separer evaluering av autonome og brukerstartede agenter: Autonome agenter er sterkt avhengige av utløsere og verktøykjeder. Se gjennom resultater og utløsere separat fra brukerstartede flyter.
  • Spor sentiment over tid: Isolert tilbakemelding er nyttig, men sentimentstrender over flere uker avslører systemiske problemer. Undersøk vedvarende nedgang tidlig.
  • Sist oppdatert