Opret et testsæt for en agent (forhåndsversion)

[Denne artikel er dokumentation til en foreløbig version og er med forbehold for ændringer.]

Et testsæt er en samling af samtaler, du bruger til at evaluere din agents præstation. Hver samtale repræsenterer et scenarie, som din agent skal håndtere.

Vigtigt!

Forudsætninger

En agent oprettet og gemt med GitHub Copilot-harnesset. Lær mere i Opret en agent (forhåndsvisning).

Start en ny evaluering

For at starte en ny evaluering:

  1. Åbn din agent i Copilot Studio.
  2. Vælg fanen Evaluer.
  3. Vælg Ny evaluering.

Bemærkning

Oplevelser, der bruger Copilot Credits, viser et Uses Copilot Credits-badge , så du ved, hvilke handlinger der bruger credits, før du kører dem. Lær mere i Forstå estimeret kreditforbrug.

Vælg en af følgende muligheder:

Mulighed 1: Upload samtaler fra en CSV-fil

  1. På Evaluer-fanen, i Datakilde-sektionen, skal du trække en CSV-fil ind i uploadområdet eller vælge den for at vælge en fil.

    Tip

    Vælg CSV-linket for at downloade en skabelon, der viser det korrekte filformat. Den maksimale filstørrelse er 5 MB.

  2. Gennemgå de importerede samtaler og juster dem efter behov.

  3. I panelet Konfigurer testsæt til højre skal du indtaste et Navn for evalueringen.

  4. Vælg Evaluate for at køre evalueringen, eller vælg Save for at gemme uden at køre.

Mulighed 2: Generer samtaler med AI

  1. På Evaluer-fanen, i Flere måder at starte-sektionen, vælg Hurtigt samtalesæt.
  2. Vent mens systemet genererer 10 samtaler baseret på agentens beskrivelse, instruktioner og emner.
  3. Gennemgå de genererede samtaler i Gennemgå dine testcases-listen.
  4. I panelet Configure test set , indtast et Navn, og vælg derefter Evaluate eller Save.

Du kan også generere flere samtaler fra evalueringsvisningen. Vælg Tilføj samtaler>Generer 10 samtaler. Efter du har kørt en indledende evaluering, vælg Tilføj samtaler>Generer 25 samtaler eller Generer 50 samtaler for at generere flere.

Mulighed 3: Skriv samtaler manuelt

  1. På fanen Evaluer, i sektionen Flere måder at starte, vælg Eller, skriv nogle spørgsmål selv.
  2. I listen Oversyn dine testcases vælger du Tilføj samtaler>Skriv for manuelt at oprette et testtilfælde.
  3. Tilføj et brugerspørgsmål til hver samtale. Eventuelt kan du tilføje et forventet agent-svar.
  4. I panelet Konfigurer testsæt indtaster du et Navn og vælger Evaluer eller Gem .

Konfigurer testsættet

Når du opretter eller redigerer en evaluering, indeholder panelet Konfigurer testsæt disse muligheder:

  • Navn: Et påkrævet navn til evalueringen.
  • Testmetode: Metoden, der bedømmer svar. Generel kvalitetskontrol overlever, om svarene opfylder kvalitetsstandarder som relevans og fuldstændighed.
  • Brugerprofil: Den autentificerede profil, der kører evalueringen og forbinder til værktøjer. Evalueringerne bruger profilen for den indloggede bruger. Du kan ikke oprette forbindelse som en anden bruger, mens du er logget ind. For at køre en evaluering som en anden bruger skal du logge af, logge på med den pågældende brugers konto og derefter starte evalueringen.

Rediger samtaler i et testsæt

For at redigere samtaler i et testsæt:

  1. På Evaluate-fanen skal du åbne et eksisterende testset fra Evaluation-rullemenuen.
  2. Vælg en samtale for at redigere dens beskeder.
  3. Brug Tilføj samtaler-rullemenuen til at tilføje flere samtaler.
  4. Når du er færdig, skal du vælge Gem.

Grænser for testsæt

Følgende begrænsninger gælder under fanen Evaluer, når du opretter eller redigerer et testsæt eller kører en evaluering.

Maksimum Værdi Hvad sker der, når du når grænsen
Samtaler pr. testsæt 20 En besked fortæller dig, når du når grænsen. For at generere eller skrive flere samtaler, slet først nogle eksisterende samtaler. Hvis du genererer flere samtaler, end testsættet kan rumme, tilføjer testsættet kun så mange samtaler som nødvendigt for at nå grænsen.
Spørgsmål-og-svar-par pr. samtale 6 (12 beskeder) Du kan ikke tilføje endnu et spørgsmål til samtalen.
Spørgsmålets længde 1.000 tegn, inklusive mellemrum Du kan ikke indtaste flere karakterer.
Forventet responslængde 1.000 tegn, inklusive mellemrum Du kan ikke indtaste flere karakterer.
Testsætets navnelængde 50 tegn Du kan ikke indtaste flere karakterer.
CSV-filstørrelse 5 MB Du kan ikke uploade en fil, der er større end 5 MB.
Agentens responslængde 10.000 tegn Svaret bliver ikke scoret. Resultaterne viser, at responsen er over 10.000 tegn og ikke kan evalueres.

De samme begrænsninger gælder, når du uploader samtaler fra en CSV-fil:

  • Kun de første 20 samtaler bliver importeret.
  • Kun de første seks spørgsmål-og-svar-par i hver samtale importeres.
  • Samtaler med et spørgsmål eller forventet svar på over 1.000 tegn bliver ikke importeret. En besked fortæller dig, at importen sprang nogle samtaler over.
  • Sidst opdateret den