Panoramica del monitoraggio

Utilizza l'analisi per capire le prestazioni del tuo agente e per identificare le aree di miglioramento.

La pagina Monitor in Copilot Studio ti mostra dati completi sul tuo agente, da una panoramica delle metriche chiave a analisi approfondite dell'utilizzo dei componenti del tuo agente. Puoi eseguire il drill-down in ogni dato per ottenere maggiori dettagli.

L'esperienza Monitor è pensata sia per agenti conversazionali che per agenti autonomi.

Il monitoraggio è disponibile in tutte le aree geografiche. I dati del monitor sono disponibili fino a 360 giorni. I dettagli della sessione e le informazioni sulla trascrizione sono disponibili per gli ultimi 28 giorni. I timestamp delle analisi sono nel Tempo Coordinato Universale (UTC). Le marcature di data e ora includono gli orari di inizio e fine giornata, gli orari delle sessioni e qualsiasi altro marcatore temporale nei dati del tuo agente.

Concedere un accesso limitato in sola visualizzazione ai dati analitici

Se sei il proprietario dell'agente e vuoi concedere accesso solo alla pagina Monitor del tuo agente, puoi farlo condividendo l'agente con il ruolo di condivisione Analytics Viewer abilitato. Se vuoi che la persona con cui condividi l'agente abbia accesso alle informazioni contenute nella trascrizione della conversazione, deve avere anche il ruolo di sicurezza Bot Transcript Viewer.

Altre informazioni sulla condivisione dell'analisi di un agente.

Per accedere alla pagina Monitor del tuo agente:

1. Aprire l'agente in Copilot Studio.
2. Seleziona Monitor nella barra del menu in alto.

Sommario

L'area Summary usa Copilot per generare un riepilogo dell'intelligenza artificiale delle informazioni di analisi chiave sull'agente. Selezionare Visualizza altro per visualizzare l'elenco riepilogato completo delle informazioni dettagliate.

Consente di comprendere rapidamente i temi e le metriche comuni e di identificare le aree per il miglioramento dell'agente riepilogandole in un elenco puntato per il periodo di report selezionato. Ciò può includere metriche di engagement, valutazione e feedback dei clienti e tendenze dall'ultimo periodo di report.

Il riepilogo dei commenti dei clienti (anteprima) consente di comprendere il sentiment generale dei clienti sull'agente, ad esempio commenti e suggerimenti. Le informazioni dettagliate sono classificate in ordine di priorità in base al volume dei commenti correlati e al relativo significato complessivo. I commenti di basso valore o irrilevanti vengono filtrati e il feedback correlato viene raggruppato.

Puoi inviare commenti e suggerimenti a Microsoft su questa sezione con le icone Mi piace e Non mi piace. Usa il pannello Invia il feedback a Microsoft per aggiungere un commento e condividere i file correlati. Tramite la fornitura di tale feedback descrittivo, possiamo collaborare per migliorare continuamente il nostro prodotto.

1. Nel riquadro Invia il feedback a Microsoft, descrivi in linguaggio naturale ciò che ti piace e ciò che non ti piace, a seconda dell'icona che hai selezionato per aprire il riquadro.
2. Scegli se condividere la richiesta, la risposta generata, gli esempi di contenuto pertinente e i file di log aggiuntivi.
3. Selezionare Invia.

È anche possibile controllare un riepilogo delle prestazioni di alto livello nell'area Panoramica , quindi approfondire le prestazioni.

Utenti attivi

Le metriche degli utenti attivi forniscono informazioni dettagliate sul grado in cui viene adottato un agente di conversazione e su come essa cambia nel tempo. Un utente attivo è un utente univoco che ha interagito con l'agente di conversazione almeno una volta durante il periodo del report. La scheda Monitor mostra il numero di utenti attivi per due periodi predefiniti: utenti attivi giornalieri (DAU) e utenti attivi mensili (MAU). Il conteggio giornaliero inizia e termina in base a un giorno completo di 24 ore nel fuso orario UTC. Il conteggio mensile segue il mese di calendario, iniziando e finendo il primo e l'ultimo giorno in base al fuso orario UTC.

La DAU media per il periodo selezionato, più la relativa variazione percentuale rispetto al periodo precedente, viene visualizzata come indicatore di prestazioni chiave (KPI) nella sezione Panoramica .

Per visualizzare altri dettagli sui conteggi degli utenti attivi giornalieri e mensili nel corso del tempo, selezionare il pulsante Visualizza utenti attivi nell'angolo in alto a destra del pannello di panoramica.

Solo sessioni conversazionali

Analisi per gli agenti conversazionali in Copilot Studio tengono traccia del coinvolgimento degli utenti con il tuo agente e cercano di catturare quanto bene l'agente gestisce le attività degli utenti.

L'analisi conversazionale utilizza i concetti e i termini seguenti:

• Le conversazioni sono un'interazione continua tra un utente specifico, o un gruppo di utenti, su un canale e il tuo agente.

• Le conversazioni possono essere messe in pausa e riprese in un secondo momento oppure essere trasferite a un rappresentante del servizio clienti. La conversazione può essere unidirezionale, sia dal cliente all'agente, sia dall'agente al cliente, ma più comunemente è un'interazione a botta e indietro tra cliente e agente.

• Si verifica il timeout di una conversazione dopo 30 minuti di inattività.

• Per gli agenti pubblicati sul canale telefonico, le conversazioni scadono 3 minuti dopo un evento Fine conversazione.

• Una singola conversazione può contenere una o più sessioni di analisi.

• Una sessione di analisi in modalità classica è associata all'ultimo argomento personalizzato attivato da un utente. Se la sessione non include argomenti personalizzati, è l'ultimo argomento di sistema attivato direttamente dall'utente.

Solo sessioni di trigger di eventi

Un agente autonomo è un agente con un trigger di evento. Questi agenti supportano solo l'analisi dei dati per gli agenti con trigger.

Una sessione di analisi per gli agenti con trigger tiene traccia del momento in cui un agente riceve un payload da un trigger attraverso le azioni che l'agente esegue in risposta. Queste sessioni di analisi registrano a cosa sta rispondendo il tuo agente e quanto bene si comporta il tuo agente.

Visualizzazione ibrida: sessioni sia conversazionali che attivate da eventi

Quando i dati del tuo agente includono sessioni per almeno una conversazione e almeno una esecuzione basata su trigger nel periodo del report, la pagina Monitor mostra una vista ibrida di metriche rilevanti sia per sessioni conversazionali che autonome. In questa visione, le sezioni Panoramica ed Efficacia mostrano le metriche affiancate sia per le sessioni conversazionali che per quelle scatenate dagli eventi. La sezione Usa consente di selezionare tra conversazioni o esecuzioni, che visualizza solo i dati pertinenti. Selezionando Tutti vengono visualizzati tutti i dati correlati all'uso. Nella sezione Soddisfazione vengono visualizzate le metriche di soddisfazione per le sessioni di conversazione.

Per altre informazioni su:

• Visualizzate metriche rilevanti per le sessioni di conversazione, vedi Monitorare l'efficacia degli agenti conversazionali.

• Metriche visualizzate rilevanti per sessioni attivate da eventi, vedi Monitorare la salute degli agenti autonomi.

Scarica le trascrizioni delle conversazioni

Puoi scaricare le trascrizioni delle conversazioni pochi minuti dopo la fine della conversazione. Puoi scaricarli in qualsiasi periodo negli ultimi 29 giorni. È possibile scaricarli in Dataverse usando il portale di Power Apps e come trascrizioni di chat session usando l'app Copilot Studio. Potrebbe volerci fino a un'ora dopo che la sessione di analisi è terminata prima che i dati correlati appaiano sul dashboard di analisi.

Analisi dell'utilizzo degli argomenti

In Copilot Studio un argomento definisce l'avanzamento di una conversazione dell'agente e rappresenta una parte di una conversazione tra un utente e un agente. Il pannello Monitor dell'argomento mostra come si comporta un singolo argomento, inclusa la frequenza con cui viene attivato, come si risolvono le sessioni che lo includono e quanto gli utenti sono soddisfatti di quelle sessioni. Puoi usare questi dati per identificare gli argomenti che più spesso richiedono un'escalation o vengono abbandonati, e quindi dare loro la priorità per il miglioramento. Per altre informazioni sugli argomenti e su come crearli, vedere Creare e modificare argomenti.

Per visualizzare l'argomento «Pannello Monitor»:

1. Vai alla pagina Topic del tuo agente in Copilot Studio.

2. Selezionare l'argomento da analizzare. Se non sono disponibili argomenti, vedere Creare e modificare argomenti.

3. Nell'angolo in alto a destra della pagina Argomenti , seleziona Altro (...) >Monitor.

Il pannello Monitor mostra:

• Risultati dell'argomento: grafico dei risultati della sessione, Escalated, Resolvede Abandonedper le sessioni in cui è stato attivato questo argomento. Usa questo grafico per valutare rapidamente lo stato dei temi. Un'elevata percentuale di esiti Escalated o Abandoned può significare che l'argomento necessita di miglioramenti.
• Utilizzo totale degli argomenti: grafico della tendenza dei risultati dell'argomento nel tempo. Usare questa opzione per rilevare le regressioni, ad esempio un picco nelle sessioni abbandonate dopo la modifica di un argomento o per confermare che le modifiche recenti migliorano le frequenze di risoluzione.
• Punteggio di soddisfazione dei clienti: punteggio basato sulle risposte del sondaggio utente dalle sessioni associate a questo argomento.
• Tendenza del punteggio di soddisfazione: grafico che mostra come cambia il punteggio di soddisfazione nel tempo. Usa questo andamento per identificare i periodi in cui il sentimento degli utenti è peggiorato o migliorato.

Per modificare l'intervallo di tempo, seleziona il menu a discesa dell'intervallo di tempo nella parte superiore del pannello Monitor dell'argomento.

Informazioni pertinenti

• Misurare il ritorno sugli investimenti (ROI) e il valore aziendale degli agenti di IA