Acompanhe uma visão geral de um agente

A aba Monitor na experiência do novo agente oferece visibilidade sobre o desempenho e a atividade do seu agente após a implantação. Use-o para acompanhar sessões de conversa, revisar análises, identificar erros e entender como os usuários interagem com seu agente.

Note

Os recursos deste artigo são viabilizados pelo GitHub Copilot harness, que utiliza Créditos do Copilot para faturamento baseado no uso. Saiba mais na Visão Geral sobre faturamento para agentes alimentados pelo GitHub Copilot harness.

A cobrança por uso se aplica ao uso, criação, teste e avaliação de agentes. Essas ações podem consumir Créditos do Copilot. Saiba mais em Gerenciar os custos de agentes viabilizados pelo GitHub Copilot harness.

Note

A aba Monitor não fica disponível até que você publique seu agente. Para disponibilizá-lo, selecione Publicar.

O que você pode monitorar?

A aba Monitor oferece uma visão geral do desempenho do seu agente. As principais métricas incluem:

  • Sessões de conversa: O número total de conversas que seu agente conduz.
  • Engajamento do usuário: Quão ativamente os usuários interagem com o agente, incluindo a contagem de mensagens e a duração das sessões.
  • Acompanhamento de custos e faturamento: Consumo de crédito Copilot durante o período selecionado e estimativas de economia.
  • Reações totais: Respostas dos usuários, incluindo feedback com polegar para cima e para baixo e comentários sobre respostas específicas de agentes.
  • Qualidade da resposta: Indicadores de quão eficazmente o agente responde às solicitações dos usuários ao longo do tempo.

Filtre o painel por faixa de tempo para focar em atividades recentes ou tendências de longo prazo.

Resumo

A área Resumo usa o Copilot para gerar um resumo gerado por IA dos insights analíticos chave sobre seu agente. Selecione Ver Mais para ver a lista completa de insights resumidos.

Ela ajuda a identificar rapidamente temas comuns, métricas-chave e áreas a serem melhoradas para o período de relatório selecionado. Os insights podem incluir métricas de engajamento, sentimento e feedback do cliente, e tendências desde o período anterior de relatório.

Custo e cobrança

As métricas de custo e faturamento mostram o número de Créditos Copilot cobrados para o período selecionado e fornecem estimativas de economia para tempo e custo.

Saiba mais sobre Faturamento de tarifas e gerenciamento.

Reações

A seção Reações mostra o feedback dos usuários sobre as respostas dos agentes. O gráfico mostra com que frequência os usuários selecionam polegar para cima (positivo) ou polegar para baixo (negativo) em cada resposta que recebem do seu agente.

Capacidades do agente

A seção de Capacidades ajuda você a entender como os usuários interagem com seu agente e onde a confiabilidade das respostas pode melhorar. Ele inclui:

  • Uso da ferramenta: Quais ferramentas o agente invocou durante a sessão.

Acompanhamento de sessão

A lista de sessões mostra sessões individuais de conversa com seu agente. Cada sessão inclui:

  • Status: Se a sessão foi concluída, fracassada ou em andamento.
  • Duração: Quanto tempo durou a sessão.
  • Mensagens do usuário: O número de mensagens trocadas.
  • Ferramentas usadas: Quais ferramentas o agente invocou durante a sessão.

Filtre as sessões por status, como falhadas, concluídas ou em andamento, para encontrar rapidamente as sessões que precisam de atenção.

Selecione uma sessão para visualizar sua transcrição completa, incluindo as mensagens do usuário, as respostas do agente e detalhes sobre invocações de ferramentas e uso da fonte de conhecimento.

Monitoramento de erros

A aba Monitor ajuda a identificar e diagnosticar problemas:

  • Filtre as sessões por status de Falhado ou Rejeitado para encontrar interações problemáticas.
  • Revise as transcrições das sessões para entender o que deu errado.
  • Verifique o status da conexão da ferramenta e os erros de autenticação.
  • Procure padrões em sessões fracassadas que possam indicar um problema de configuração.

Para orientações passo a passo sobre como usar a aba Monitorar, veja Monitorar um agente.

Baixar transcrições de conversa

Você pode baixar as transcrições das conversas alguns minutos após o tempo da conversa terminar. Você pode baixar qualquer período nos últimos 29 dias. Você pode baixá-los no Dataverse usando o portal Power Apps e como transcrições de chat de sessão usando o aplicativo Copilot Studio. Pode levar até uma hora após o término da sessão analítica até que os dados relacionados apareçam na aba Monitor.

Note

Não é possível baixar transcrições de conversa no Dataverse no aplicativo Copilot Studio no Teams. Para examinar e exportar transcrições no Dataverse, você precisa se inscrever para o aplicativo Web Copilot Studio. Você pode baixar transcrições de chat de sessão usando o aplicativo Copilot Studio. Para obter mais informações, consulte Baixar transcrições de sessão do agente.

  • Last updated on