Monitorizar agentes autónomos

A página Monitor no Copilot Studio fornece uma visão agregada da saúde geral do seu agente com gatilhos de eventos ao longo das sessões. A página também apresenta uma área de Descrição Geral que fornece métricas de indicadores chave de desempenho (KPI) de alto nível para o seu agente, uma área de Poupança que analisa poupanças de tempo e custos atribuídas ao seu agente ou às suas ferramentas, e uma área de Resumo que fornece informações analíticas chave sobre o desempenho do seu agente.

Para mais informações sobre:

• As áreas Resumo e Descrição geral, consulte Descrição geral do monitor.
• A área Poupanças, consulte Monitorizar a poupança de tempo e de custos dos agentes.

Há quatro áreas principais nas quais se concentrar ao revisar e melhorar o desempenho dos agentes autônomos:

• Resultados da execução: conhecer o resultado final de uma sessão iniciada por um acionador ajuda-o a começar a identificar onde o seu agente está a ter êxito e onde precisa de melhorar.
• Uso de gatilhos: ver quais gatilhos são usados e com que frequência ajuda você a entender o que seu agente está fazendo e por quê.
• Uso de ferramentas: Aprender com que frequência as ferramentas são usadas e com que frequência elas são bem-sucedidas pode ajudá-lo a entender se essas ferramentas são úteis e bem-sucedidas.
• Utilização da origem de conhecimento: saiba com que frequência as origens de conhecimento individuais são usadas e com que frequência o agente devolveu erros.

Para alterar o intervalo de tempo, selecione a lista pendente do intervalo na parte superior da página Monitor. Pode consultar análises das sessões que ocorreram nos últimos 360 dias.

Resultados da execução

A secção Resultados da execução mostra um gráfico que monitoriza o tipo de resultado de cada sessão.

Para baixar dados de resultados de execução (dados visualizados no gráfico), selecione o ícone do menu e selecione Baixar CSV.

Também pode ver um detalhe sobre a duração de cada sessão. Selecione Ver detalhes no gráfico Resultados da execução. Abre-se um painel lateral que exibe a duração média das execuções bem-sucedidas e das sessões falhadas, e mostra como a duração das sessões mudou ao longo do tempo.

Longas durações de sessão podem causar atrasos nos fluxos de trabalho dos quais seu agente faz parte. Você pode melhorar a velocidade do seu agente fornecendo instruções mais específicas no nível do gatilho ou do agente.

Utilização do acionador

A secção Utilização de acionadores mostra um gráfico e métricas que monitorizam com que frequência cada acionador iniciou uma sessão. O gráfico mostra a mudança no uso do gatilho ao longo do tempo.

Selecione Ver detalhes para exibir um detalhamento de todos os gatilhos usados durante o período de tempo selecionado, os eventos mais comuns que dispararam uma execução e quais eventos resultaram na maioria das execuções com falha.

Pode utilizar esta informação para concentrar-se em execuções específicas para melhorias e compreender a que tipos de eventos os seus agentes respondem mais frequentemente.

Utilização da ferramenta

A seção Uso da ferramenta mostra um gráfico e métricas que controlam a frequência com que suas ferramentas são iniciadas ao longo do tempo e com que frequência seu agente usou essas ferramentas com êxito. Também mostra indicadores de tendência sobre a frequência com que o seu agente usa cada ferramenta e a percentagem de ferramentas chamadas que são usadas com sucesso.

O gráfico apresenta as cinco principais ferramentas usadas no período de datas definido na parte superior da página Análise.

Na legenda abaixo do gráfico, faça pairar o cursor sobre qualquer uma das ferramentas para realçar essa ferramenta no gráfico.

Para abrir um painel lateral com uma lista de todas as ferramentas usadas no período especificado, juntamente com indicadores de tendência, selecione Ver detalhes no gráfico. No painel de Utilização de ferramentas, pode apresentar cálculos da percentagem de perguntas utilizadas para cada ferramenta. Se o seu agente tiver agentes subordinados, pode optar por apresentar os cálculos tanto para o agente principal como para os agentes subordinados (Tudo), apenas para o Agente principal ou apenas para o Agente subordinado.

Utilização da origem de conhecimento

A secção de uso de fontes de conhecimento fornece uma visão sobre como o seu agente utiliza as suas fontes de conhecimento e quão eficazmente essas fontes apoiam o seu agente. O painel mostra as cinco principais fontes de conhecimento utilizadas ao longo do intervalo de datas definido, incluindo o tipo de cada fonte, o total de perguntas, a qualidade das respostas e as reações. Clicar em qualquer uma das fontes listadas abre uma página com todas as perguntas dos utilizadores que referenciavam essa fonte. Selecione o botão Ver tudo no canto superior direito do painel para abrir uma página com todo o conhecimento utilizado pelo seu agente.

Selecionar Ver detalhes para abrir um painel lateral com a tendência de uso da fonte de conhecimento e as taxas de erro. Você pode usar esses gráficos para identificar quais fontes de conhecimento funcionam bem para ajudar os usuários e quais direcionar para melhorias.

No painel lateral, selecione Todos para mostrar métricas tanto para o agente principal como para agentes subordinados, Agente principal para métricas apenas sobre o agente principal, ou Agente subordinado para métricas apenas sobre agentes subordinados.

• A tendência de utilização de fontes é um gráfico de com que frequência as suas fontes de conhecimento foram usadas pelo seu agente durante o período de tempo selecionado. Na legenda abaixo do gráfico, passe o rato sobre qualquer uma das fontes de conhecimento para destacar essa fonte no gráfico, selecione as fontes de conhecimento para a ativar/desativar na vista do gráfico.
• Erros mostra a percentagem de sessões que utilizaram cada tipo de origem de conhecimento (por exemplo, SharePoint) que resultou num erro.