Remarque
L’accès à cette page nécessite une autorisation. Vous pouvez essayer de vous connecter ou de modifier des répertoires.
L’accès à cette page nécessite une autorisation. Vous pouvez essayer de modifier des répertoires.
Créer un assistant efficace implique bien plus que la rédaction d’instructions et la connexion des données et des outils. Après le déploiement, les équipes doivent continuellement évaluer, diagnostiquer et améliorer le comportement des assistants afin de s’assurer qu’il répond aux attentes commerciales, de qualité et de sécurité.
Cet ensemble d’articles introduit un cadre pratique pour la phase d’amélioration du cycle de vie du développement de l’assistant. Le cadre vous aide à prendre les résultats d’évaluation (scores, cas de test échoués et régressions) et à les transformer en actions claires et prioritaires.
Utilisez ce cadre lorsque vous avez des résultats d’évaluation et devez décider de la marche à suivre. Les scénarios courants sont les suivants :
- Un jeu d’évaluation obtient des scores inférieurs à un seuil attendu.
- Des cas de test spécifiques échouent et la cause exacte n’est pas claire.
- Les scores s’améliorent dans un domaine, mais régressent dans un autre.
- Plusieurs ensembles d’évaluation échouent et les priorités sont floues.
- Le comportement d’un assistant change de manière inattendue après une mise à jour.
Ce cadre suppose que vous avez déjà des résultats de réussite ou d’échec pour des cas de test individuels sur un ou plusieurs ensembles d’évaluation.
Astuce
Avant d’utiliser ce cadre de triage et de remédiation, mettez en place et effectuez des évaluations pour votre assistant. En savoir plus sur la conception d’un cadre d’évaluation itératif.
Étape suivante
Comprendre les objectifs du cadre de triage et de remédiation, y compris sa structure et ses principes de conception.