Nota
L'accesso a questa pagina richiede l'autorizzazione. È possibile provare ad accedere o modificare le directory.
L'accesso a questa pagina richiede l'autorizzazione. È possibile provare a modificare le directory.
[Questo articolo è una documentazione preliminare ed è soggetto a modifiche.]
La scheda Monitor nell'esperienza del nuovo agente offre una visuale delle attività recenti del tuo agente e dell'efficacia complessiva tra le sessioni. Le metriche chiave includono le sessioni di conversazione (come il tuo agente ha gestito le conversazioni), l'engagement degli utenti (conteggio dei messaggi e la durata delle sessioni), le stime di costi e risparmi, le reazioni totali e la qualità delle risposte.
Puoi filtrare la scheda Monitor per mostrare eventi accaduti negli ultimi 360 giorni.
Note
Le funzionalità di questo articolo sono utilizzate da agenti o flussi di lavoro alimentati dall'harness GitHub Copilot.
La fatturazione basata sull'uso si applica all'utilizzo, alla costruzione, al test e alla valutazione degli agenti. Queste azioni potrebbero consumare crediti Copilot. Scopri di più in Gestire i costi per agenti alimentati dal GitHub Copilot harness.
Note
La scheda Monitoraggio non è disponibile finché non pubblichi il tuo agente. Per renderla disponibile, seleziona Pubblica nella scheda Crea.
Overview
Il pannello Panoramica fornisce metriche chiave di performance (KPI) ad alto livello per il tuo agente e ti fornisce una visione aggregata della sua efficacia complessiva. Le metriche chiave nel pannello Panoramica sono:
- Sessioni di conversazione: Il totale include sessioni impegnate e non coinvolte.
- Reazioni totali: il numero totale di reazioni che gli utenti hanno dato ai messaggi degli agenti.
- Utenti attivi giornalieri medi: Utenti attivi giornalieri medi durante il periodo selezionato.
- Durate medie delle partite: Il tempo medio che l'agente impiega a completare una partita dall'inizio alla fine.
- Esecuzioni totali: Il numero totale di volte in cui l'agente è stato attivato ed eseguito durante il periodo selezionato.
- Tasso di successo: la percentuale di run completati con successo senza errori durante il periodo selezionato.
Utenti attivi
Le metriche degli utenti attivi forniscono una visione del grado in cui un agente conversazionale viene adottato e di come questo si evolve nel tempo. Un utente attivo è un utente univoco che ha interagito con l'agente di conversazione almeno una volta durante il periodo del report. La scheda Copilot Studio Monitor mostra il numero di utenti attivi per due periodi predefiniti: utenti attivi giornalieri (DAU) e utenti attivi mensili (MAU). Il conteggio giornaliero inizia e termina in base a un giorno completo di 24 ore nel fuso orario UTC. Il conteggio mensile segue il mese di calendario, iniziando e finendo il primo e l'ultimo giorno in base al fuso orario UTC.
Importante
La funzione Active User Metrics è supportata solo se imposti il tuo agente per richiedere l'autenticazione sotto Impostazioni>Sicurezza e Autenticazione di accesso>.
La DAU media per il periodo selezionato, più la relativa variazione percentuale rispetto al periodo precedente, viene visualizzata come indicatore di prestazioni chiave (KPI) nella sezione Panoramica .
Note
La formula per la metrica media calcolata DAU è: (sum of all full-day active user counts in the period) / (count of full days in the period).
Per visualizzare altri dettagli sui conteggi degli utenti attivi giornalieri e mensili nel corso del tempo, selezionare il pulsante Visualizza utenti attivi nell'angolo in alto a destra del pannello di panoramica.
Fatturazione
Nella pagina Monitor del tuo agente, il pannello Panoramica mostra il totale dei crediti Copilot fatturati dal tuo agente per il periodo selezionato. Per visualizzare altri dettagli sulle informazioni di fatturazione, selezionare Visualizza fatturazione. Questa selezione apre un pannello laterale del grafico delle tendenze di fatturazione che mostra le variazioni nei crediti Copilot fatturati dal tuo agente nel periodo di tempo selezionato. Passare il puntatore del mouse sui punti nel grafico per visualizzare il numero di Crediti Copilot.
I dati di analisi richiedono alcune ore per eseguire l'aggiornamento con nuovi crediti Copilot fatturati, quindi potrebbero non essere visualizzati dati sulle attività recenti.
Risparmio
Usa il pannello Risparmio per stimare quanto tempo e denaro il tuo agente risparmia. Usa il calcolatore di risparmio per stimare i risparmi per esecuzione o per calcolare i risparmi di uno o più degli strumenti che l'agente utilizza. Se c'è un pannello Risparmio vuoto senza metriche calcolate, seleziona Calcola risparmi.
Seleziona per esecuzione o per strumento.
Per stimare il risparmio per corsa, vedi Stima risparmio per corsa per un agente.
Per calcolare il tempo o i costi risparmiati per ciascuno degli strumenti del tuo agente, vedi Calcola il risparmio per ogni strumento per il tuo agente.
Reazioni
La sezione Reazioni mostra il feedback degli utenti raccolti dalle reazioni alle risposte dell'agente. Il grafico conta il numero di volte in cui gli utenti hanno selezionato i pulsanti Mi piace (positivi) o Non mi piace (negativi) disponibili per ogni risposta ricevuta dall'agente.
Note
- Gli agenti pubblicati nel canale Microsoft 365 Copilot non supportano le reazioni.
- Per visualizzare i commenti è necessario avere il ruolo di sicurezza Visualizzatore Trascrizione Bot.
La funzionalità Reazioni è Attivata per impostazione predefinita. Puoi disattivarlo se necessario. Puoi anche aggiungere o modificare una dichiarazione di non responsabilità per gli utenti su come viene utilizzato il loro feedback:
Apri il tuo agente, seleziona Impostazioni e poi seleziona la scheda Sicurezza e accesso .
Attiva o disattiva il feedback dell'utente.
Gli utenti con il privilegio Bot Transcript Viewer possono eseguire il drill-down delle risposte dell'agente per le singole reazioni e filtrare in base ai commenti dell'utente.
Per vedere le tendenze delle reazioni nel tempo, seleziona Vedi dettagli sulla casella Reazioni per aprire il pannello laterale Reazioni . Il pannello mostra la tendenza delle reazioni positive e negative (da Thumbs up e Thumbs down) nel tempo.
Utilizzo degli strumenti
La sezione Uso degli strumenti mostra un grafico e metriche che tengono traccia della frequenza con cui gli strumenti vengono avviati nel tempo e della frequenza con cui l'agente ha usato correttamente tali strumenti. Mostra anche gli indicatori di tendenza per la frequenza con cui l'agente usa ciascuno strumento e la percentuale di strumenti chiamati usati correttamente.
Il grafico mostra i primi cinque strumenti usati nell'intervallo di date definito nella parte superiore della pagina Analisi.
Nella legenda sotto il grafico passa il puntatore del mouse su uno degli strumenti per evidenziare tale strumento nel grafico.
Per aprire un pannello laterale con un elenco di tutti gli strumenti usati nel periodo di tempo specificato, insieme agli indicatori di tendenza, selezionare Visualizza dettagli nel grafico. Nel pannello Utilizzo strumento puoi visualizzare i calcoli della percentuale di domande usate per ciascuno strumento. Se l'agente dispone di agenti figlio, puoi scegliere di visualizzare i calcoli sia per l'agente principale che per gli agenti figlio (Tutti), solo Agente principale o solo Agente figlio.