Nota
L'accesso a questa pagina richiede l'autorizzazione. È possibile provare ad accedere o modificare le directory.
L'accesso a questa pagina richiede l'autorizzazione. È possibile provare a modificare le directory.
[Questo articolo è una documentazione preliminare ed è soggetto a modifiche.]
Dopo aver creato un set di test con conversazioni, esegui una valutazione per misurare le prestazioni del tuo agente. La valutazione elabora ogni conversazione e produce risultati con punteggio basati sul metodo di test selezionato.
Importante
- Questa è una funzionalità di anteprima pronta per la produzione.
- Le anteprime pronte per la produzione sono soggette a condizioni per l'utilizzo supplementari.
Prerequisiti
- Un agente creato e salvato con il GitHub Copilot harness. Vedi Creare un agente (anteprima).
- Almeno una valutazione con conversazioni. Vedi Creare un set di test per un agente (anteprima).
Per eseguire una valutazione per un agente:
- Aprire l'agente in Copilot Studio.
- Seleziona la scheda Valuta.
- Nel menu a tendina Valutazione , seleziona la valutazione che vuoi eseguire.
- Aggiungi almeno una conversazione al set di test se non l'hai già fatto.
- Nel pannello Configura set di test, verifica che:
- La valutazione Name è impostata.
- Sia configurato il metodo di test (ad esempio qualità generale).
- Seleziona Valuta per avviare la valutazione. La valutazione elabora ogni conversazione nel set di test. A seconda del numero di conversazioni, questo processo potrebbe richiedere diversi minuti.
Tip
Esegui la stessa valutazione più volte. Ogni run viene salvato separatamente, così puoi confrontare i risultati tra le run e vedere come i cambiamenti del tuo agente influenzano la qualità.
Eseguire nuovamente una valutazione
Dopo aver modificato le istruzioni, le conoscenze o gli strumenti del tuo agente, rifai la valutazione per misurare l'impatto:
- Nella scheda Valuta seleziona la valutazione che vuoi eseguire nuovamente dall'elenco a discesa Valutazione.
- In Risultati recenti seleziona Valuta di nuovo il set di test oppure seleziona l'icona Valuta il set di test
all'interno del set di test per avviare una nuova esecuzione. - Confronta i risultati della nuova corsa con quelli precedenti per vedere se i cambiamenti sono migliorati o hanno degradato le prestazioni.
Scarica una sessione di valutazione
Quando la scheda Valuta è disponibile per il tuo ambiente, puoi scaricare i dati della sessione di una valutazione per rivederli offline o condividerli con un revisore. Il download include i metadati dell'esecuzione di valutazione (nome della valutazione, identificatore dell'esecuzione, versione dell'agente e metodo di test) insieme ai risultati di ciascuna conversazione (input di ogni turno, risposta dell'agente e punteggio).
Per scaricare una sessione di valutazione:
- Nella scheda Valuta, apri la valutazione di cui vuoi scaricare l'esecuzione.
- Sotto Risultati recenti, seleziona la run che vuoi scaricare.
- Seleziona Download per salvare i dati della sessione.
Usa i dati di sessione scaricati per:
- Rivedi le risposte degli agenti offline quando non hai accesso a Copilot Studio.
- Condividi una run specifica con un recensore per ricevere un feedback.
- Tieni un registro di una valutazione eseguita insieme ai tuoi artefatti di test.
I dati della sessione scaricati riflettono lo stato dell'esecuzione al momento del download. Rifai la valutazione se vuoi catturare l'effetto delle modifiche successive all'agente.