Aprimorar agentes usando triagem e correção baseadas em avaliação

Criar um agente eficaz vai além da criação de instruções e da conexão de dados e ferramentas. Após a implantação, as equipes devem continuamente avaliar, diagnosticar e melhorar o comportamento dos agentes para garantir que ele atenda às expectativas de negócios, qualidade e segurança.

Este conjunto de artigos apresenta uma estrutura prática para a fase de melhoria do ciclo de vida do desenvolvimento de agentes. A estrutura ajudar a transformar resultados de avaliação (pontuações, casos de teste com falha e regressões) em ações claras e priorizadas.

Usa essa estrutura quando tiver resultados de avaliação e precisar decidir o que fazer a seguir. Os cenários comuns incluem:

  • Um conjunto de avaliação apresenta a pontuação abaixo de um limite esperado.
  • Casos de teste específicos têm falha e a causa raiz não é evidente.
  • As pontuações melhoram em uma área, mas apresentam regressão em outra.
  • Vários conjuntos de avaliação têm falha e as prioridades não ficam claras.
  • O comportamento de um agente muda inesperadamente após uma atualização.

Essa estrutura pressupõe que você já tenha resultados de aprovação ou reprovação para casos de teste individuais em um ou mais conjuntos de avaliação.

Dica

Antes de usar essa estrutura de triagem e remediação, configure e execute avaliações para o seu agente. Saiba mais sobre projetar uma estrutura de avaliação iterativa.

Próxima etapa

Entenda os objetivos da estrutura de triagem e remediação, incluindo sua organização e princípios de design.

Entenda os objetivos da estrutura

  • Last updated on