Tehosta agentin testausta Copilot Agent Kitillä

Power CAT Copilot Agent Kit on käyttäjäystävällinen sovellus, jonka avulla voit varmistaa agenttien vastaukset. Se sisältää myös alkuperäiset ominaisuudet, kuten Excelin viennin ja tuonnin joukkoluontia ja päivityksiä varten.

Määritä, suorita ja analysoi

Määritä ja suorita testejä Copilot Studion ohjelmointirajapintoja (Direct Line API) vastaan, jotta agenttivastaukset voidaan arvioida odotettuihin tuloksiin nähden.

Jos haluat rikastaa tuloksia, nouda lisää arvopisteitä Azure Application Insightsista ja Dataversesta analysoimalla keskustelun tallennetietueita (kuten tarkka käynnistetty aiheen nimi ja aikeen tunnistamisen pisteet).

Tekoälyn luomissa vastauksissa, jotka eivät ole luonteeltaan deterministisiä, voit verrata luotua vastausta mallivastaukseen tai vahvistusohjeisiin kehotteiden avulla.

Kaavio, joka näyttää Azuren ja Power Platformin komponentit, jotka liittyvät Copilot Studio Direct Line -ohjelmointirajapintojen testaukseen ja analysointiin, mukaan lukien Azure Application Insights, AI Builder ja Dataverse.

Testityypit

Työkalu tukee seuraavantyyppisiä testejä:

  • Vastauksen yhteneväisyys
  • Liitteet, kuten Mukautuvat kortit
  • Aiheen vastaavuus (edellyttää Dataverseä)
  • Luotuja vastauksia (edellyttää AI Builderia vastausanalyysia ja Application Insightsia varten, jotta saat lisätietoja siitä, miksi vastausta ei luotu)
  • Monivaiheinen testityyppi on tietty testityyppi. Se koostuu vakiotyyppien testitapauksista, jotka suoritetaan määritetyssä järjestyksessä samassa keskustelukontekstissa. Käytä usean käännöksen testejä skenaarioiden testaamiseen päästä päähän ja mukautettujen agenttien testaukseen luontiorkestroinnilla.
  • Palvelupaketin vahvistuksen avulla tekijät voivat vahvistaa, että heidän luotua orkestrointia käyttävät mukautetut agenttinsa sisältävät odotetut työkalut. Sen sijaan, että arvioidaan, mitä agentti sanoo, tämä testityyppi tarkistaa, että agentin dynaaminen suunnitelma sisältää odotetut työkalut (työkalut, toiminnot ja yhdistetyt agentit) ennalta määritettyyn raja-arvoon.

Lue lisää testityypeistä kohdassa Configure tests in Copilot Agent Kit.

Näyttökuva testituloksen tiedoista, mukaan lukien kaavio, joka näyttää kaikkien testisuoritusten onnistumisprosentin ja viiveen.

Seuraava vaihe

Agentin määrittäminen testien automatisointia varten

  • Last updated on