Criar um conjunto de testes para um agente (pré-visualização)

[Este artigo é documentação de pré-lançamento e está sujeito a alterações.]

Um conjunto de testes é uma coleção de conversas que utiliza para avaliar o desempenho do seu agente. Cada conversação representa um cenário que pretende que o seu agente processe.

Importante

  • Esta é uma funcionalidade de pré-visualização pronta para produção.
  • As funcionalidades de pré-visualização prontas para a produção estão sujeitas aos termos de utilização suplementares.

Prerequisites

Um agente criado e guardado com o GitHub Copilot harness. Consulte Criar um agente (pré-visualização).

Iniciar uma nova avaliação

Para começar uma nova avaliação:

  1. Abra o seu agente no Copilot Studio.
  2. Selecione o separador Avaliar.
  3. Selecionar Nova avaliação.

Note

As experiências que consomem Créditos Copilot exibem um distintivo Usa Créditos Copilot, para saberes quais as ações que consomem créditos antes de as executares. Saiba mais em Compreender o uso estimado do crédito.

Selecione uma das seguintes opções:

Opção 1: Carregar conversações a partir de um ficheiro CSV

  1. No separador Avaliar, na secção Origem de dados, arraste um ficheiro CSV para a área de carregamento ou selecione-o para procurar um ficheiro.

    Tip

    Selecione a ligação CSV para transferir um modelo que mostre o formato de ficheiro correto. O tamanho máximo do ficheiro é de 5 MB.

  2. Revê as conversas importadas e ajusta-as conforme necessário.

  3. No painel à direita Configurar conjunto de testes, introduza um Nome para a avaliação.

  4. Selecione Avaliar para executar a avaliação, ou selecione Guardar para guardar sem ser executado.

Opção 2: Gerar conversações com IA

  1. No separador Avaliar, na secção Mais formas de iniciar, selecione Conjunto de conversações rápidas.
  2. Espere enquanto o sistema gera 10 conversas com base na descrição, instruções e tópicos do agente.
  3. Reveja as conversações geradas na lista Rever os seus casos de teste.
  4. No painel Configurar conjunto de testes , introduza um Nome e depois selecione Avaliar ou Guardar.

Também pode gerar mais conversas a partir da perspetiva de avaliação. Selecionar Adicionar conversas>Gerar 10 conversas. Depois de fazer uma avaliação inicial, selecione Adicionar conversas>Gerar 25 conversas ou Gerar 50 conversas para gerar mais.

Opção 3: Escrever conversações manualmente

  1. No separador Avaliar, na secção Mais formas de começar, selecione Ou escreva as suas próprias perguntas.
  2. Na lista Rever os seus casos de teste, selecione Adicionar conversas>Escrever para criar manualmente um caso de teste.
  3. Adicione uma pergunta de utilizador a cada conversação. Opcionalmente, adiciona uma resposta esperada do agente.
  4. No painel Configurar conjunto de testes, introduza um Nome e selecione Avaliar ou Guardar.

Configurar o conjunto de testes

Quando cria ou edita uma avaliação, o painel Configurar conjunto de testes inclui estas opções:

  • Nome: Um nome obrigatório para a avaliação.
  • Método de teste: O método que avalia as respostas. Verifica a qualidade geral se as respostas cumprem padrões de qualidade como relevância e completude.
  • Perfil de utilizador: O perfil autenticado que executa a avaliação e se liga às ferramentas. As avaliações usam o perfil do utilizador com sessão iniciada neste momento. Não te podes ligar a outro utilizador enquanto tens sessão iniciada. Para fazer uma avaliação como utilizador diferente, saia da sessão, inicie sessão com a conta desse utilizador e depois inicie a avaliação.

Editar conversações num conjunto de testes

Para editar conversas num conjunto de teste:

  1. No separador Avaliar, abra um conjunto de testes existente na lista pendente Avaliação.
  2. Selecione uma conversação para editar as mensagens.
  3. Utilize o menu suspenso Adicionar conversas para adicionar mais conversas.
  4. Quando terminar, selecione Guardar.