Übersicht zu Copilot Agent Kit

Copilot-Agent-Kit ist ein Toolkit, das entwickelt wurde, um Ihre Erfahrung mit Copilot Studio zu verbessern. Das Power Customer Advisory Team (Power CAT) hat das Kit entwickelt und pflegt es, um Entwickler mit Werkzeugen auszustatten, mit denen sie benutzerdefinierte Agenten erstellen, verwalten, testen und optimieren können.

Screenshot der Copilot-Agent-Kit-Startseite, auf der Werkzeuge zum Erstellen und Optimieren benutzerdefinierter Agenten angezeigt werden.

Testfunktionen

Mit dem Copilot-Agent-Kit können Ersteller Agenten, Tests und Testsätze konfigurieren und diese nutzen, um ihre benutzerdefinierten Agenten in einem Durchgang zu testen. Testläufe liefern detaillierte Ergebnisse, darunter Latenzen, beobachtete Antworten und Bestanden-oder-Nicht-Ergebnisse, um Probleme zu erkennen und die Qualität zu verbessern.

Note

Die Testautomatisierung von Copilot-Agent-Kit unterstützt nun benutzerdefinierte Rubriken für generative Antworten. Weitere Informationen finden Sie unter "Verwenden von Rubriken in Tests".

Erfahren Sie mehr in Verbessern von Agententests.

Compliance-Hub

Compliance Hub hilft Organisationen beim Definieren und Erzwingen von Governancerichtlinien für Copilot Studio-Agents im großen Maßstab. Es bewertet kontinuierlich Agentenkonfigurationen, die durch Agent-Bestand gesammelt werden, anhand konfigurierter Kontrollen, um Risiken und Richtlinienverstöße zu identifizieren.

Administratoren können Schwellenwerte, Risikostufen, SLA-Zeitvorgaben und Erzwingungsmaßnahmen (manuelle Überprüfung, Quarantäne, Löschen) konfigurieren, während Ersteller bei der Behebung von Problemen durch Benachrichtigungen in Teams oder Outlook unterstützt werden.

Erfahren Sie mehr in "Definieren und durchsetzen Sie die Einhaltung der Agenten mit dem Copilot Agent Kit Compliance Hub.

Hub für Agent-Einblicke

Agent Insights Hub hilft Administratoren und Erstellern, Microsoft Copilot Studio-Agenten mithilfe zentraler Analysen zu überwachen. Es aggregiert Telemetrie aus Azure-Anwendung Insights und Konversationstranskripten, um Transparenz in Nutzung, Qualität und Betriebstrends zu bieten.

Erfahren Sie mehr im Agent Insights Hub.

Agenten-Debugger

Agent-Debugger hilft Admins, aufgezeichnete Unterhaltungen zu untersuchen und zu verstehen, wie Agenten Antworten erzeugt haben. Es liefert Schritt-für-Schritt-Diagnosedetails zur Unterstützung der Fehlersuche und Optimierung.

Weitere Informationen unter Agent-Debugger.

Agent-Bibliothek

Agent-Bibliothek hilft Erstellern dabei, vorgefertigte Agentenvorlagen und wiederverwendbare Komponenten zu entdecken, zu installieren und zu verwalten. Es bietet einen zentralisierten Katalog, um die Entwicklung zu beschleunigen und Konsistenz zwischen den Agentenimplementierungen zu fördern.

Weitere Informationen unter Agent-Bibliothek.

Energieschild

Power Shield unterstützt Organisationen dabei, den Connector-Zugriff in Data Loss Prevention (DLP)-Richtlinien über einen genehmigungsbasierten Workflow zu verwalten. Ersteller können Connector-Zugriffsanfragen stellen, und Admins können Anfragen basierend auf Governance-Anforderungen prüfen, genehmigen oder ablehnen. Es unterstützt außerdem Compliance-Fragebögen, Benachrichtigungseinstellungen und bereichsspezifische Anfragen für Servicehierarchien und Umgebungscontainer.

Weitere Informationen finden Sie unter: Power Shield.

Verfeinerung der Rubriken

Die Verfeinerung von Rubriken ist eine leistungsstarke Funktion im Copilot-Agent-Kit, die es Ihnen ermöglicht, wiederverwendbare Bewertungsstandards (Rubriken) für KI-generierte Antworten zu erstellen, zu testen und iterativ zu verbessern. Diese Funktion unterstützt paralleles Testen, Bewertungskonsistenz und Zeitabstimmung der Rubriken.

Weitere Informationen unter Verfeinerung von Rubriken.

Konversations-KPIs

Konversations-KPIs (Key Performance Indicators) helfen Erstellern, die Leistung von benutzerdefinierten Agenten nachzuverfolgen und zu analysieren. Konversations-KPIs ergänzen die integrierten Analysen von Copilot Studio durch die Bereitstellung aggregierter Daten an einem zentralen Ort.

Mehr dazu in Agentenleistung mit Gesprächs-KPIs verfolgen.

SharePoint-Synchronisierung

Die SharePoint-Synchronisation unterstützt Ersteller, ausgewählte Inhalte von SharePoint-Standorten regelmäßig in die Wissensdatenbank der benutzerdefinierten Agenten als Dateien zu synchronisieren.

Weitere Informationen unter Verbessern von Agent-Antworten mit SharePoint-Synchronisierung.

Prompt-Berater

Prompt Advisor hilft Entscheidungsträgern, gut strukturierte Eingabeaufforderungen zu erstellen, um die Benutzereingabe zu verbessern. Nutzer geben einen Prompt ein, um einen Konfidenzwert, eine detaillierte Analyse und Vorschläge für optimierte Prompts zu erhalten, die sie verfeinern und wiederverwenden können.

Weitere Informationen unter Prompts mit Prompt Advisor verfeinern.

Webchat-Spielplatz

Webchat Playground hilft Entscheidungsträgern, das Aussehen und Verhalten des Agents Webchat anzupassen, einschließlich farben, Schriftarten, Miniaturansichten und mehr.

Weitere Informationen unter Webchat-Darstellung mit Webchat Playground anpassen.

Adaptive Karten Gallery bietet Entwicklern Vorlagen für Adaptive Karten für verschiedene Szenarien. Die Vorlagen demonstrieren die Erweiterbarkeit von adaptiven Karten-Visualisierungen und -Verhalten und enthalten Beispiele für Agent-seitige Interaktionen.

Weitere Informationen unter Verbessern der Kundenbindung mit der adaptiven Kartengalerie.

Agent-Bestand

Das Agentinventar ermöglicht Administratoren eine mandantenweite Übersicht aller benutzerdefinierten Agenten in ihrer Organisation. Es zeigt Details zu den genutzten Funktionen, dem Authentifizierungsmodus, den Wissensquellen und anderen wichtigen Metadaten.

Weitere Informationen unter Überwachen von Agenten mit Agentenbestand.

Tool zur Agentenbewertung

Das Agent Review Tool ist ein Analysewerkzeug für Lösungen, das Ihre Agenten auf potenzielle Probleme oder Anti-Muster überprüft, die sich negativ auf die Leistung oder Sicherheit auswirken könnten. Nach der Analyse gibt das Agent Review Tool Empfehlungen zur Behandlung der Befunde.

Weitere Informationen unter Agenten mit dem Agent Review Tool analysieren.

Gesprächsanalyse

Die Unterhaltungsanalyse ermöglicht es Entscheidungsträgern, die Unterhaltungstranskripte ihrer benutzerdefinierten Agenten mithilfe von angepassten Prompts zu analysieren, um ausführbare Erkenntnisse zu erhalten.

Weitere Informationen finden Sie unter Gesprächstranskripte analysieren.

Agentwert

Die Agent Value-Komponente ist ein modulares Tool zum Klassifizieren von Copilot Studio-Agents nach Typ, Verhalten und Wert. Es hilft Organisationen, die Rolle jedes Agenten zu verstehen, Agenten auf strategische Ziele auszurichten die Auswirkungen zu bewerten.

Weitere Informationen unter Agentenwert messen.

Automatisierte Tests mithilfe von Pipelines in Power Platform

Diese Funktion automatisiert das Testen und die Bereitstellung von benutzerdefinierten Copilot Studio-Agenten mithilfe von Power Platform Pipelines. Das Ziel ist sicherzustellen, dass Agenten automatisch durch Tests validiert werden, bevor sie in verschiedenen Umgebungen befördert werden.

Weitere Informationen unter Automatisieren von Tests und die Bereitstellung von Agenten mithilfe von Pipelines in Power Platform.

Nächster Schritt