Observação
O acesso a essa página exige autorização. Você pode tentar entrar ou alterar diretórios.
O acesso a essa página exige autorização. Você pode tentar alterar os diretórios.
[Este artigo é uma documentação de pré-lançamento e está sujeito a alterações.]
Depois de criar um conjunto de testes com conversas, faça uma avaliação para medir o desempenho do seu agente. A avaliação processa cada conversa e produz resultados pontuados com base no método de teste selecionado.
Importante
- Esta é uma versão prévia do recurso pronta para produção.
- As versões prévias do recurso prontas para produção estão sujeitas aos termos de uso complementares.
Pré-requisitos
- Um agente criado e salvo com a estrutura do GitHub Copilot. Veja Criar um agente (versão preliminar).
- Pelo menos uma avaliação com conversas. Consulte Criar um conjunto de testes para um agente (versão preliminar).
Para realizar uma avaliação para um agente:
- Abra seu agente no Copilot Studio.
- Selecione a guia Avaliar.
- No menu suspenso Avaliação, selecione a avaliação que deseja executar.
- Adicione pelo menos uma conversa ao conjunto de testes, caso ainda não tenha feito isso.
- No painel Configurar conjunto de testes, verifique:
- O Nome da avaliação está definido.
- O método de teste está configurado (por exemplo, Qualidade geral).
- Selecione Avaliar para iniciar a avaliação. A avaliação processa cada conversa no conjunto de testes. Dependendo do número de conversas, esse processo pode levar vários minutos.
Dica
Faça a mesma avaliação várias vezes. Cada execução é salva separadamente, para que você possa comparar os resultados entre execuções e ver como as alterações no seu agente afetam a qualidade.
Executar novamente uma avaliação
Depois de alterar as instruções, conhecimentos ou ferramentas do seu agente, refaça a avaliação para medir o impacto:
- Na guia Avaliar, selecione a avaliação que deseja reexecutar no menu suspenso Avaliação.
- Em Resultados recentes, selecione Avaliar conjunto de teste novamente ou selecione o ícone Avaliar conjunto de teste dentro
do conjunto de teste para iniciar uma nova execução. - Compare os resultados da nova corrida com as anteriores para ver se as mudanças melhoraram ou degradaram o desempenho.
Baixe uma sessão de avaliação
Quando a aba Avaliar estiver disponível para o seu ambiente, você pode baixar os dados da sessão de uma execução de avaliação para revisá-los offline ou compartilhá-los com um revisor. O pacote para download reúne os metadados da execução da avaliação (nome da avaliação, identificador da execução, versão do agente e método de teste) juntamente com os resultados de cada conversa (a entrada de cada turno, a resposta do agente e a pontuação).
Para baixar uma sessão de avaliação:
- Na aba Avaliar , abra a avaliação cuja execução você quer baixar.
- Em Resultados recentes, selecione a execução que deseja baixar.
- Selecione Download para salvar os dados da sessão.
Use os dados de sessão baixados para:
- Revise as respostas dos agentes offline quando você não tem acesso ao Copilot Studio.
- Compartilhe uma execução específica com um revisor para obter feedback.
- Mantenha um registro de uma avaliação realizada junto com seus artefatos de teste.
Os dados da sessão baixados refletem o estado da execução no momento em que você os baixa. Repita a avaliação se quiser capturar o efeito de mudanças posteriores no agente.