モニタータブは、エージェントの生産状況をコンテキスト内で把握できるビューを提供します。 利用状況、結果、ユーザーフィードバック、信頼性、Copilotクレジット消費状況を理解し、傾向を特定し、エージェントの改善点を判断しましょう。
Note
この記事の機能は、GitHub Copilot harnessを搭載するエージェントやワークフローで使用されています。
使用率に基づく請求は、エージェントの使用、構築、テスト、評価に適用されます。 これらの行動はCopilotクレジットを消費することがあります。 詳細は「GitHub Copilot harnessで動くエージェントのコスト管理」をご覧ください。
Note
エージェントを公開する前に モニター タブを開くことができます。 制作使用状況、フィードバック、クレジットデータはエージェントを公開し、人々が使い始めてから表示されます。
何を監視できるか
Monitorは個々のエージェントの要約レベルのビューを提供します。 次の機能が含まれます。
- 概要:総セッション数、ユーザー数、自律実行数、平均持続時間、成功率、失敗率。
- 反応:エージェントの反応に対する賛成・否定のフィードバック。
- 使用された推定クレジットの総額:選択期間中にエージェントが消費したクレジット。
- セッション:個々のやり取り、その場で行われ、消費したクレジット。
日付フィルターを使って特定の報告期間に集中してください。 パーセンテージ指標は各指標を前期と比較しています。
モニターおよびエージェントの操作
Monitor は、開発者が個々のエージェントを構築・改善する際に、その状態をすばやく確認できるよう設計されています。 フリート全体の監視、ガバナンス、詳細な調査、エージェントや環境間の運用最適化のために、エージェント運用エクスペリエンスを活用してください。
概要メトリック
概要セクションには以下が示されています:
- 総セッション数:選択した期間中に行われた会話セッションの数。
- 総ユーザー数:選択した期間中にエージェントとやり取りしたユーザー数。
- 平均持続時間:セッションとランの平均持続時間。
- 成功率:エージェントがセッションやランをどれだけ成功裏に完了したか。
使用された推定クレジットの総数
クレジットカードには、選択した期間中にエージェントが消費したCopilotクレジットの合計と前期間からの変動額が表示されます。 プレビューや評価で見られるほぼリアルタイムの推定値とは異なり、Monitorに表示される値はその時点までに処理されたすべてのイベントを反映し、請求に使われる最終的な真実の出典番号です。
内訳が利用可能な場合は、本番利用、プレビュー テスト、評価、その他のサポートされているサーフェスを含む、エクスペリエンス別の使用量の推定内訳が表示されます。 どの活動や成果がクレジットを消費したのかを理解するために活用しましょう。
「 推定クレジット使用量の理解 」および 「利用率に基づく請求の概要」で詳細をご覧ください。
リアクション
リアクションセクションでは、エージェントの応答に対するユーザーフィードバックが表示されます。 このチャートは、ユーザーがエージェントからの回答ごとに親指を立てる(肯定的)または否定(否定)を選択する頻度をカウントしています。
エージェント機能
「能力」セクションでは、ユーザーがエージェントとどのようにやり取りし、回答の信頼性がどこで向上できるかを理解するのに役立ちます。 次の機能が含まれます。
- ツールの使用:セッション中にエージェントが呼び出したツール。
セッションの追跡
セッションリストにはエージェントとの個別の会話セッションが表示されます。 各セッションには以下が含まれます:
- ステータス:セッションが完了しているか、失敗しているか、進行中か。
- 持続時間:セッションの長さ。
- ユーザーメッセージ:交換されたメッセージの数。
- 使用ツール:セッション中にエージェントが呼び出したツール。
セッションを失敗、完了、進行中などのステータスでフィルタリングし、迅速に対応が必要なセッションを見つけます。
セッションを選択すると、ユーザーのメッセージ、エージェントの回答、ツール呼び出しや知識ソースの使用に関する詳細を含む完全な書き起こしを閲覧できます。
エラー監視
モニタータブは問題の特定と診断に役立ちます:
- セッションを 失敗 または 拒否 のステータスでフィルタリングし、問題のあるやり取りを見つけてください。
- セッションの記録を確認して、何が問題だったのか理解してください。
- ツールの接続状況と認証エラーを確認してください。
- 失敗したセッションのパターンを探し、設定の問題を示している可能性があります。
モニタータブの使い方に関するステップバイステップのガイダンスについては、「エージェントを監視する」をご覧ください。
セッションの書き起こしをダウンロード
セッションのタイムアウト数分後にセッションの書き起こしをダウンロードできます。過去29日以内の任意の期間をダウンロードできます。 Power Apps ポータルを使用して Dataverse でダウンロードするか、Copilot Studio アプリを使用してセッション チャットのトランスクリプトとしてダウンロードできます。 分析セッション終了後、関連データがモニタータブに表示されるまでに最大1時間かかることがあります。
レビュー セッション
セッションリストには、あなたのエージェントとの最近のやり取りが表示されます。
Note
セッション一覧には過去28日間のセッションのみが表示されます。
やり取りによって、リストは以下のように示されます:
- 名前:そのインタラクションに関連するユーザー。
- 日付:やり取りがあった日。
- チャンネル:相互作用が行われたチャンネルまたはCopilot Studioの表面。
- メッセージ数:インタラクション内のメッセージ数。
- 持続時間:相互作用の長さ。
- 使用されたクレジット:Copilotのクレジットはこの交流で消費されました。
セッション詳細ページを開き、集計されたセッション指標を確認し、リストを絞り込み、セッションを検索し、セッションデータをダウンロードしてください。
その他のトランスクリプトエクスポートオプションについては、「 エージェントのセッショントランスクリプトをダウンロード」で詳しくご覧ください。
ステップバイステップのガイダンスについては、「 エージェントのパフォーマンスの監視と分析」で詳しくご覧ください。