Hinweis
Für den Zugriff auf diese Seite ist eine Autorisierung erforderlich. Sie können versuchen, sich anzumelden oder das Verzeichnis zu wechseln.
Für den Zugriff auf diese Seite ist eine Autorisierung erforderlich. Sie können versuchen, das Verzeichnis zu wechseln.
[Dieser Artikel ist eine Vorabdokumentation und kann geändert werden.]
Nachdem Sie ein Testset mit Gesprächen erstellt haben, führen Sie eine Bewertung durch, um die Leistung Ihres Agenten zu messen. Die Bewertung verarbeitet jedes Gespräch und liefert bewertete Ergebnisse basierend auf der gewählten Testmethode.
Important
- Dies ist eine einsatzbereite Previewfunktion.
- Für einsatzbereite Vorschauversionen gelten ergänzende Nutzungsbedingungen.
Voraussetzungen
- Ein Agent, der mit dem GitHub Copilot-Harness erstellt und gespeichert wurde. Siehe Agent erstellen (Vorschauversion).
- Mindestens eine Bewertung mit Gesprächen. Siehe Testsatz für einen Agenten erstellen (Vorschauversion).
Um eine Bewertung für einen Agenten durchzuführen:
- Öffnen Sie Ihren Agenten in Copilot Studio.
- Wählen Sie die Registerkarte Evaluate (Auswerten) aus.
- Im Dropdown-Menü Bewertung wählst du die Bewertung aus, die du durchführen möchtest.
- Fügen Sie mindestens ein Gespräch zum Testsatz hinzu, falls Sie das noch nicht getan haben.
- Im Bereich Testsatz konfigurieren überprüfen Sie:
- Der Bewertungsname ist festgelegt.
- Die Testmethode ist konfiguriert (zum Beispiel Allgemeine Qualität).
- Wählen Sie Auswerten aus, um die Auswertung zu starten. Die Auswertung bearbeitet jede Konversation im Testdatensatz. Abhängig von der Anzahl der Gespräche kann dieser Vorgang mehrere Minuten dauern.
Tip
Führe dieselbe Bewertung mehrfach durch. Jeder Durchlauf wird separat gespeichert, sodass Sie Ergebnisse zwischen den Durchläufen vergleichen und sehen können, wie Änderungen an Ihrem Agenten die Qualität beeinflussen.
Eine Auswertung erneut ausführen
Nachdem Sie die Anweisungen, das Wissen oder die Werkzeuge Ihres Maklers geändert haben, führen Sie die Bewertung erneut durch, um die Wirkung zu messen:
- Wählen Sie auf der Registerkarte Auswertung die Auswertung aus, die Sie erneut ausführen möchten, aus dem Auswertung-Dropdown-Menü.
- Unter Letzte Ergebnisse wählen Sie Testsatz erneut bewerten oder klicken Sie auf das Symbol Testsatz bewerten
innerhalb des Testsatzes, um einen neuen Durchlauf zu starten. - Vergleichen Sie die Ergebnisse des neuen Laufs mit früheren Läufen, um zu sehen, ob die Änderungen die Leistung verbessert oder verschlechtert haben.
Laden Sie eine Bewertungssitzung herunter
Wenn der Reiter "Bewerten " für Ihre Umgebung verfügbar ist, können Sie Sitzungsdaten von einem Evaluierungslauf herunterladen, um ihn offline zu überprüfen oder mit einem Prüfer zu teilen. Der Download packt die Metadaten des Evaluationslaufs (Bewertungsname, Laufkennung, Agentenversion und Testmethode) zusammen mit den Ergebnissen pro Gespräch (Eingabe, Agentantwort und Punktzahl jeder Runde).
Um eine Bewertungssitzung herunterzuladen:
- Öffne im Reiter Bewerten die Bewertung, deren Durchlauf du herunterladen möchtest.
- Unter Aktuelle Ergebnisse wählen Sie den Lauf aus, den Sie herunterladen möchten.
- Wählen Sie Download, um die Sitzungsdaten zu speichern.
Verwenden Sie heruntergeladene Sitzungsdaten, um:
- Überprüfen Sie die Antworten von Agenten offline, wenn Sie keinen Zugang zum Copilot Studio haben.
- Teile einen bestimmten Durchlauf mit einem Prüfer, um Feedback zu erhalten.
- Führen Sie ein Protokoll über eine Bewertung, die zusammen mit Ihren Testartikeln durchgeführt wurde.
Die heruntergeladenen Sitzungsdaten spiegeln den Zustand des Durchlaufs zum Zeitpunkt des Herunterladens wider. Führe die Bewertung erneut durch, wenn du die Wirkung späterer Änderungen am Agenten erfassen möchtest.