Parantamisen tarkistuslistan tarkistaminen

Agentin optimointi ei lopu julkaisuun. Copilot Studio tarjoaa monipuolista analytiikkaa, jonka avulla ymmärrät, miten käyttäjät ovat vuorovaikutuksessa agenttisi kanssa, missä keskustelut onnistuvat tai epäonnistuvat ja kuinka hyvin agentti hyödyntää työkalujaan ja tietolähteitään. Tämä artikkeli tarjoaa rakenteellisen tarkistuslistan ja parhaat käytännöt, joiden avulla voit jatkuvasti arvioida ja parantaa agenttiasi.

Vahvista kehitys- ja analytiikkavalmiutesi

Käytä näitä kysymyksiä säännöllisissä arvioinneissa, kuten sprinttiseremonioissa, kuukausittaisissa optimoinneissa tai julkaisua edeltävissä tarkistuksissa.

Teemat ja käyttäjän aikomusten mallit

Valmis? Tehtävä
✓ Tarkasteletko teemoja tunnistaaksesi käyttäjäkysymysten ryhmiä ja uusia aikomuksia?
✓ Lisäätkö usein esiintyviä teemoja backlogiisi tulevia parannuksia varten?

Keskustelun tulokset

Valmis? Tehtävä
✓ Analysoitko ratkaistuja, eskaloituja, hylättyjä ja osallistumattomia keskusteluja löytääksesi parannuskohtia?
✓ Varmistatko, että keskustelut päättyvät Keskustelun loppu -aiheeseen, jotta tulokset tallennetaan oikein?
✓ Tutkitko hylättyjen istuntojen piikkejä tunnistaaksesi epäselviä vastauksia tai puuttuvaa logiikkaa?
✓ Tarkistatko, että eskalaatiopolut käynnistyvät vain, kun se on tarkoituksenmukaista?

Luotujen vastausten määrä ja laatu

Valmis? Tehtävä
✓ Arvioitko tuotettujen vastausten määrää tunnistaaksesi tiedon puutteet tai puuttuvan kattavuuden?
✓ Tarkistatko vastauslaatumittarit, kuten täydellisyys, faktapohjaisuus ja relevanssi?
✓ Tutkitko huonolaatuisia vastauksia ja puututko analytiikassa osoitettuihin syihin?

Työkalujen ja toimintojen käyttö

Valmis? Tehtävä
✓ Seuraatko, kuinka usein työkaluja ja toimintoja käytetään ja onnistuvatko vai epäonnistuvatko ne?
✓ Tunnistatko alikäytettyjä tai virhealttiita työkaluja ja päätätkö, kannattaako ne optimoida vai poistaa?
✓ Varmistatko, että generatiivisessa orkestroinnissa käytetyt työkalut toimivat luotettavasti?

Tietolähteiden suorituskyky

Valmis? Tehtävä
✓ Tarkasteletko kaikkien tietolähteiden käyttöä ja virheprosentteja?
✓ Priorisoitko päivitykset tietolähteille, joilla on korkea virheprosentti tai epäjohdonmukaiset tulokset?
✓ Varmistatko, että oikeat tietolähteet tukevat niitä tilanteita, joihin ne on tarkoitettu?

Tyytyväisyys ja käyttäjäpalaute

Valmis? Tehtävä
✓ Keräätkö käyttäjien asenteen peukku ylös/alas -toiminnolla ja CSAT-kyselyillä?
✓ Analysoitko palautetrendejä havaitaksesi epäselvät vastaukset tai heikot keskusteluvirrat?
✓ Lisäätkö alhaisen tyytyväisyyden vuorovaikutusmalleja backlogiisi uudelleensuunnittelua varten?

Parhaiden käytäntöjen nostot

  • Käsittele analytiikkaa iteratiivisena parannussilmukkana: Käytä analytiikkaa vähittäisten muutosten aikaansaamiseksi. Hyödynnä teemoja, keskeneräisiä vastauksia ja epäonnistumismalleja sprinttien suunnittelussa ja backlogin priorisoinnissa.
  • Keskity tulosten laatuun, älä pelkästään määrään: Hyvin toimiva järjestelmä maksimoi ratkaistut keskustelut ja minimoi eskalaatiot sekä hylkäykset. Käytä tulosprosentteja selkeyden ja vaikuttavuuden johtavana mittarina.
  • Vahvista tietolähteitä ennakoivasti: Korkea virheprosentti tai heikkolaatuiset vastaukset viittaavat usein epäselviin, vanhentuneisiin tai epäsopiviin tietolähteisiin. Päivitä ja jäsennä näitä lähteitä säännöllisesti, jotta vastaukset perustuvat luotettavaan tietoon.
  • Optimoi työkalut vakauden ja onnistumisen varmistamiseksi: Epäluotettavat työkalukutsut heikentävät luottamusta. Seuraa onnistumisprosentteja ja refaktoroi toimintoja, jotka usein epäonnistuvat tai palauttavat epäjohdonmukaisia tietoja.
  • Käytä teemoja uusien mahdollisuuksien tunnistamiseen: Teemat korostavat nousevia aikomuksia. Hyödynnä teemoja uusien aiheiden, tietolähteiden tai integraatiotarpeiden määrittelyssä.
  • Varmista, että keskustelut päättyvät siististi: Käytä aina keskustelun lopun aihetta ratkaisun ja CSAT:n kirjaamiseen. Ilman tätä aihetta analytiikka on puutteellista ja harhaanjohtavaa.
  • Arvioi autonomiset ja käyttäjän käynnistämät agentit erikseen: Autonomiset agentit perustuvat vahvasti laukaisijoihin ja työkaluketjuihin. Käy läpi suoritustulokset ja laukaisijat erikseen käyttäjän aloittamista työnkuluista.
  • Seuraa asennetta ajan kuluessa: Erillinen palaute on hyödyllistä, mutta usean viikon asennetrendit paljastavat systeemisiä ongelmia. Tutki jatkuvia notkahduksia ajoissa.
  • Last updated on