Wyświetl wyniki oceny agenta (wersja zapoznawcza)

[Ten artykuł jest dokumentacją w wersji wstępnej i może ulec zmianie.]

Po przeprowadzeniu oceny przeanalizuj wyniki, aby zobaczyć, jak dobrze Twój agent radził sobie w różnych rozmowach. Wyniki pokazują oceny jakości i pozwalają rozpocząć indywidualne rozmowy, aby zobaczyć odpowiedzi agenta.

Ważna

Wyświetlanie wyników przebiegu

Aby zobaczyć wyniki biegów:

  1. Otwórz agenta w programie Copilot Studio.
  2. Wybierz kartę Ewaluacja.
  3. W sekcji najnowsze wyniki wybierz ocenę z wcześniejszym testem, aby zobaczyć jej wyniki.

Wyniki zawierają następujące informacje:

  • Wynik testu: Tabela pokazująca każdą rozmowę z liczbą wiadomości między użytkownikiem a agentem oraz ogólną oceną jakości. Wybierz rozmowę, aby zobaczyć więcej szczegółów.

  • Podsumowanie oceny: Podsumowanie ogólnej oceny we wszystkich metodach testowych. Zawiera ona poniższe informacje:

    • Wynik: Ogólny wynik rozmów, które przeszły ogólną metodę testu jakości.
    • Czas trwania: Czas potrzebny na zakończenie oceny.
    • Przypadki testowe: Liczba przypadków testowych w ogólnej ewaluacji.
    • Typ danych: Typ zestawu testowego. Dostępny jest tylko typ danych Conversation.
    • Profil użytkownika: Profil użytkownika, który przeprowadził ewaluację. Tylko zalogowany profil użytkownika może przeprowadzać oceny.
    • Wykorzystane kredyty: Szacowana liczba kredytów Copilot wykorzystanych w ramach tego uruchomienia, z podziałem na kredyty użyte do generowania odpowiedzi agentów oraz kredyty użyte do punktacji i oceniania odpowiedzi. Dowiedz się więcej w Zrozum szacowane wykorzystanie kredytu.

Przejrzyj przypadek testowy

Aby przeanalizować przypadek testowy:

  1. Na stronie wyników biegu wybierz rozmowę, aby rozszerzyć szczegóły.

  2. Zapoznaj się ze szczegółami przypadku testowego:

    • Wiadomości użytkownika : Testowe wiadomości wysyłane do agenta.
    • Odpowiedzi agentów: Rzeczywiste odpowiedzi agenta.
    • Ogólna jakość: Ocena odpowiedzi według metody testowej: Zaliczone lub Niezaliczone.
    • Wykorzystane kredyty: Szacunkowa liczba Kredytów Copilot wykorzystanych w danym przypadku testowym, dzięki czemu możesz zidentyfikować, które scenariusze zużywają najwięcej zasobów.

    Wykorzystaj te informacje, aby zidentyfikować, gdzie Twój agent wymaga poprawy.

Porównaj przebiegi

Przeprowadź tę samą ocenę wielokrotnie, aby porównać wyniki, śledzić postępy i zużycie kredytów Copilot:

  1. Na stronie ze szczegółami oceny przejrzyj listę przebiegów z ich wynikami i znacznikami czasu.
  2. Porównaj wyniki poszczególnych przebiegów, aby ocenić, czy zmiany w agencie poprawiły lub pogorszyły jego wydajność.
  3. Porównaj szacowane zużycie kredytów Copilot na jeden przebieg, aby zobaczyć zużycie w różnych przebiegach i oszacować, ile kredytów możesz potrzebować na większe zestawy testowe.
  4. Poszukaj wzorców. Na przykład, jeśli kategoria rozmów konsekwentnie osiąga niskie wyniki, ta dziedzina może wymagać więcej instrukcji lub wiedzy.

Eksportowanie wyników

Wyniki oceny eksportu do dalszej analizy:

  1. Na stronie wyników uruchomienia wybierz trzy kropki (…) >Eksportuj wyniki testów. Możesz także wybrać konkretną ewaluację, a następnie wybrać trzy kropki (…) >Eksportuj wyniki testów w prawym górnym rogu.
  2. Pobierz wyniki jako plik CSV, który zawiera wszystkie rozmowy, odpowiedzi i wyniki.

Zareaguj na wyniki

Na podstawie wyników Twojej oceny:

  • Ostatnia aktualizacja o