Visão geral do desempenho do agente do monitoramento

A guia Monitor oferece aos criadores uma visão contextual da integridade de produção de um agente. Use-o para entender o uso, resultados, feedback dos usuários, confiabilidade e consumo de crédito do Copilot, para identificar tendências e decidir onde melhorar o agente.

Note

Os recursos deste artigo são usados por agentes ou fluxos de trabalho alimentados pelo GitHub Copilot.

A cobrança por uso se aplica ao uso, criação, teste e avaliação de agentes. Essas ações podem consumir Créditos do Copilot. Saiba mais em Gerenciar os custos de agentes viabilizados pelo GitHub Copilot harness.

Note

Você pode abrir a guia Monitor antes de publicar seu agente. Os dados de uso em produção, feedback e crédito aparecem depois que você publica o agente e as pessoas começam a usá-lo.

O que você pode monitorar?

O Monitor fornece uma visão resumida de um agente individual. Ele inclui:

  • Visão geral: Total de sessões, usuários, execuções autônomas, duração média, taxa de sucesso e taxa de falha.
  • Reações: Feedback positivo e negativo sobre as respostas dos agentes.
  • Créditos estimados totais utilizados: Os créditos consumidos pelo agente durante o período selecionado.
  • Sessões: Interações individuais, onde ocorreram e os créditos consumidos.

Use o filtro de data para focar em um período específico de reporte. Indicadores percentuais comparam cada métrica com o período anterior.

Operações do monitor e do agente

O Monitor foi desenvolvido para criadores que precisam de uma visão rápida de um agente específico enquanto o criam e aprimoram. Para monitoramento em toda a frota, governança, investigação detalhada e otimização operacional entre agentes e ambientes, utilize a experiência em operações de agentes.

Visão geral das métricas

A seção de Visão Geral mostra:

  • Sessões totais: O número de sessões de conversa durante o período selecionado.
  • Total de usuários: O número de usuários que interagiram com o agente durante o período selecionado.
  • Duração média: Duração média das sessões e corridas.
  • Taxa de sucesso: Com que sucesso o agente concluiu sessões e execuções.

Total estimado de créditos utilizados

O cartão de créditos mostra o total de créditos Copilot consumidos pelo agente durante o período selecionado e a mudança em relação ao período anterior. Diferente das estimativas quase em tempo real que você vê em Pré-visualização e Avaliação, o valor mostrado no Monitor reflete todos os eventos processados até aquele ponto e é o número final, de fonte de verdade, usado para faturamento.

Quando uma análise está disponível, ela mostra uma estimativa de divisão do consumo por experiência, incluindo uso em produção, testes de prévia, avaliações e outras superfícies suportadas. Use-o para entender quais atividades ou resultados consumiram os créditos.

Saiba mais em Entenda o uso estimado do crédito e Visão geral da cobrança baseada no uso.

Reações

A seção Reações mostra o feedback dos usuários sobre as respostas dos agentes. O gráfico mostra com que frequência os usuários selecionam polegar para cima (positivo) ou polegar para baixo (negativo) em cada resposta que recebem do seu agente.

Capacidades do agente

A seção de Capacidades ajuda você a entender como os usuários interagem com seu agente e onde a confiabilidade das respostas pode melhorar. Ele inclui:

  • Uso da ferramenta: Quais ferramentas o agente invocou durante a sessão.

Acompanhamento de sessão

A lista de sessões mostra sessões individuais de conversa com seu agente. Cada sessão inclui:

  • Status: Se a sessão foi concluída, fracassada ou em andamento.
  • Duração: Quanto tempo durou a sessão.
  • Mensagens do usuário: O número de mensagens trocadas.
  • Ferramentas usadas: Quais ferramentas o agente invocou durante a sessão.

Filtre as sessões por status, como falhadas, concluídas ou em andamento, para encontrar rapidamente as sessões que precisam de atenção.

Selecione uma sessão para visualizar sua transcrição completa, incluindo as mensagens do usuário, as respostas do agente e detalhes sobre invocações de ferramentas e uso da fonte de conhecimento.

Monitoramento de erros

A aba Monitor ajuda a identificar e diagnosticar problemas:

  • Filtre as sessões por status de Falhado ou Rejeitado para encontrar interações problemáticas.
  • Revise as transcrições das sessões para entender o que deu errado.
  • Verifique o status da conexão da ferramenta e os erros de autenticação.
  • Procure padrões em sessões fracassadas que possam indicar um problema de configuração.

Para orientações passo a passo sobre como usar a aba Monitorar , veja Monitorar um agente.

Baixe as transcrições das sessões

Você pode baixar as transcrições das sessões alguns minutos após o término da sessão. Você pode baixar qualquer período dentro dos últimos 29 dias. Você pode baixá-los no Dataverse usando o portal Power Apps e como transcrições de chat de sessão usando o aplicativo Copilot Studio. Pode levar até uma hora após o término da sessão analítica até que os dados relacionados apareçam na aba Monitor.

Sessões de revisão

A lista de sessões mostra as interações recentes com seu corretor.

Note

A lista de sessões mostra apenas as sessões dos últimos 28 dias.

Dependendo da interação, a lista pode mostrar:

  • Nome: O usuário associado à interação.
  • Data: Quando a interação ocorreu.
  • Canal: O canal ou a interface do Copilot Studio em que a interação ocorreu.
  • Número de mensagens: O número de mensagens na interação.
  • Duração: A duração da interação.
  • Créditos usados: Os créditos do Copilot consumidos pela interação.

Abra a página de detalhes da sessão para revisar métricas agregadas da sessão, filtrar a lista, buscar sessões e baixar os dados das sessões.

Para outras opções de exportação de transcrições, saiba mais em Download agent session transcripts.

Para orientação passo a passo, aprenda mais em Monitorar e analisar o desempenho dos agentes.

  • Última atualização em