Évaluer un agent (Conversation client) (aperçu)

[Cet article fait partie de la documentation en version préliminaire et peut faire l’objet de modifications.]

Utilisez l’onglet Évaluer pour mesurer la performance de votre agent à travers un lot de questions de test ou de conversations avant de le publier.

Aperçu de l’onglet Évaluer

Lorsque vous ouvrez l’onglet Évaluer pour la première fois, il affiche un état vide : Évaluez la performance de votre agent, avec un bouton Créer un jeu de test . Après avoir créé un ou plusieurs ensembles de test, l’onglet affiche à la place une table d’ensembles d’évaluation avec les colonnes Nom, statut de l’exécution, Méthodes de test et Dernière exécution par, ainsi qu’un bouton Nouvelle évaluation.

Créer un ensemble de tests

  1. Dans l’onglet Évaluer , sélectionnez Créer un ensemble de test (ou Nouvelle évaluation si vous avez déjà des ensembles de test).

  2. Choisissez un type de données :

    • Réponse unique : Vérifiez comment l’agent répond à une question précise. Idéal pour les tests de capacités ciblés.
    • Conversation (aperçu) : Vérifiez la qualité des interactions plus longues entre les agents et les utilisateurs. C’est idéal pour les évaluations générales.

  3. Choisissez une source de données :

    • Téléverser un fichier CSV : Faites glisser un fichier CSV dans la zone de téléchargement, ou sélectionnez Parcourir. Utilisez le modèle CSV fourni pour vous assurer que le contenu et la mise en forme du fichier sont corrects. La taille maximale du fichier est de 5 Mo.
    • Série rapide de questions : Générez 10 questions en fonction de la description, des instructions et des capacités de votre agent.
    • Ensemble complet de questions : Générez jusqu’à 100 questions, en utilisant des connaissances ou des sujets comme référence.
    • Utilisez votre conversation de discussion de test : Rassemblez les saisies et réponses de votre séance de test manuel en cours. (Affiché comme désactivé/indisponible dans la capture d’écran confirmée ; vérifiez quand elle sera disponible.)
    • Ou bien, rédigez vous-même quelques questions : ajoutez manuellement des questions et, éventuellement, les réponses attendues.

  4. Vérifiez votre liste de cas de test. Utilisez Ajouter des questions pour en ajouter davantage, soit en sélectionnant Générer 10 questions, soit Écrire pour en ajouter une manuellement.

Configurer l’ensemble de tests

Dans le panneau Configurer l’ensemble de tests :

  • Type de données : Affiche le type de données que vous avez sélectionné (par exemple, réponse unique).
  • Nom : Un nom obligatoire pour l’ensemble de test.
  • Méthode de test : Les critères utilisés pour vérifier les données. Choisissez jusqu’à cinq méthodes. Sélectionnez Ajouter méthode de test pour ouvrir la boîte de dialogue Sélectionner une méthode de test , qui propose :
    • Qualité générale : Les réponses respectent des normes de qualité, telles que la pertinence et l’exhaustivité. Cela ne correspond pas aux réponses attendues.
    • Comparer le sens : Les réponses ont le même sens que la réponse attendue, même si elles sont formulées différemment.
    • Personnalisé : Vérifie et étiquete les réponses de l’agent selon les instructions que vous définissez.
    • Correspondance de mots-clés : recherche des mots et expressions correspondants.
    • Similarité textuelle : mesure à quel point le texte de la réponse d’un agent est proche de la réponse attendue. Cette méthode pourrait ne pas détecter des différences de sens.
    • Correspondance exacte : Les réponses de l’agent doivent correspondre entièrement à la réponse attendue.
  • Version agent : Choisissez d’évaluer le brouillon actuel ou l’agent publié (par exemple, brouillon actuel).
  • Profil utilisateur : sélectionnez Gérer pour ouvrir la boîte de dialogue Gérer le profil et les connexions, où vous sélectionnez ou ajoutez un compte authentifié. Activez « Utiliser ces paramètres pour toutes mes évaluations » afin de réutiliser le profil pour de futurs ensembles de tests. Nous recommandons d’utiliser un profil authentifié avec toutes les connexions requises afin que l’évaluation puisse tester toutes les capacités de l’agent.

Afficher les résultats

Après avoir effectué une évaluation, examinez les résultats pour voir comment votre agent s’est comporté. La vérification des résultats d’évaluation d’un assistant avec l’environnement d’exécution de conversation client est similaire à la vérification des résultats d’un assistant avec l’environnement d’exécution de conversation client. Pour en savoir plus, consultez Exécuter des évaluations et afficher les résultats.

  • Dernière mise à jour :