Executar uma avaliação de um agente (pré-visualização)

[Este artigo é uma documentação de pré-lançamento e está sujeito a alterações.]

Depois de criar um conjunto de testes com conversas, faça uma avaliação para medir o desempenho do seu agente. A avaliação processa cada conversação e produz resultados pontuados com base no método de teste selecionado.

Pré-requisitos

• Um agente criado e guardado com a plataforma GitHub Copilot. Consulte Criar um agente (pré-visualização).
• Pelo menos uma avaliação com conversações. Consulte Criar um conjunto de testes para um agente (pré-visualização).

Para realizar uma avaliação para um agente:

1. Abra o seu agente no Copilot Studio.
2. Selecione o separador Avaliar.
3. No menu pendente Avaliação, selecione a avaliação que pretende executar.
4. Adicione pelo menos uma conversação ao conjunto de testes, caso ainda não o tenha feito.
5. No painel Configurar conjunto de testes, verifique:
   • O Nome da avaliação está definido.
   • O Método de teste está configurado (por exemplo, Qualidade geral).
6. Selecione Avaliar para iniciar a avaliação. A avaliação processa cada conversação no conjunto de testes. Dependendo do número de conversações, este processo pode demorar vários minutos.

Voltar a executar uma avaliação

Depois de alterar as instruções, conhecimentos ou ferramentas do seu agente, faça novamente a avaliação para medir o impacto:

1. No separador Avaliar, selecione a avaliação que pretende executar novamente na lista pendente Avaliação.
2. Em Resultados recentes, selecione Avaliar conjunto de testes novamente ou selecione o ícone Avaliar conjunto de testes no conjunto de testes para iniciar uma nova execução.
3. Compare os resultados da nova corrida com as anteriores para ver se as alterações melhoraram ou degradaram o desempenho.

Descarregue uma sessão de avaliação

Quando o separador Avaliar estiver disponível para o seu ambiente, pode descarregar os dados da sessão de uma execução de avaliação para consulta offline ou para os partilhar com um revisor. A transferência inclui os metadados da execução de avaliação (nome da avaliação, identificador da execução, versão do agente e método de teste), juntamente com os resultados de cada conversa (dados de entrada de cada turno, resposta do agente e pontuação).

Para descarregar uma sessão de avaliação:

1. No separador Avaliar, abre a avaliação cuja execução pretendes descarregar.
2. Em Resultados recentes, selecione a execução que pretende transferir.
3. Selecione Download para guardar os dados da sessão.

Utilizar os dados de sessão descarregados para:

• Revise as respostas dos agentes offline quando não tem acesso ao Copilot Studio.
• Partilhe uma série específica com um crítico para receber feedback.
• Mantém um registo de uma avaliação realizada juntamente com os teus artefactos de teste.

Os dados da sessão transferidos refletem o estado da execução no momento em que os transfere. Repete a avaliação se quiser captar o efeito das alterações posteriores ao agente.

Informações relacionadas

• Avalie um agente
• Criar um conjunto de testes para um agente
• Ver resultados de avaliação de um agente