Notatka
Dostęp do tej strony wymaga autoryzacji. Może spróbować zalogować się lub zmienić katalogi.
Dostęp do tej strony wymaga autoryzacji. Możesz spróbować zmienić katalogi.
[Ten artykuł to dokumentacja wstępna, która może ulec zmianie].
Po utworzeniu zestawu testowego z rozmowami, przeprowadź ocenę, aby zmierzyć wyniki swojego agenta. Ocena analizuje każdą rozmowę i generuje wyniki punktowane na podstawie wybranej metody testowej.
Important
- Gotowa do produkcji funkcja w wersji zapoznawczej.
- Gotowa do produkcji funkcja w wersji zapoznawczej podlega dodatkowym warunkom użytkowania.
Wymagania wstępne
- Agent utworzony i zapisany za pomocą środowiska uruchomieniowego GitHub Copilot. Zapoznaj się z Tworzenie agenta (wersja zapoznawcza).
- Co najmniej jedna ocena obejmująca rozmowy. Zobacz Utwórz zestaw testowy dla agenta (wersja zapoznawcza).
Aby przeprowadzić ocenę dla agenta:
- Otwórz agenta w programie Copilot Studio.
- Wybierz kartę Ewaluacja.
- W rozwijanym menu Ocena wybierz ocenę, którą chcesz przeprowadzić (Evaluation).
- Dodaj przynajmniej jedną rozmowę do zestawu testowego, jeśli jeszcze tego nie zrobiłeś.
- W panelu Konfiguruj zestaw testowy sprawdź:
- Ocena Name jest ustawiona.
- Metoda testowania jest skonfigurowana (np. Ogólna jakość).
- Wybierz Oceń, aby rozpocząć ocenę. Proces oceny przetwarza każdą rozmowę w zestawie testowym. W zależności od liczby rozmów, proces ten może zająć kilka minut.
Porada
Przeprowadź tę samą ocenę wielokrotnie. Każde uruchomienie jest zapisywane osobno, dzięki czemu możesz porównywać wyniki między uruchomieniami, aby zobaczyć, jak zmiany w agencie wpływają na jakość.
Ponownie przeprowadź ewaluację
Po zmianie instrukcji, wiedzy lub narzędzi agenta, ponownie przeprowadź ocenę, aby zmierzyć wpływ:
- Na karcie Ocena wybierz ocenę, którą chcesz ponownie przeprowadzić, z menu rozwijanego Ocena.
- W sekcji Ostatnie wyniki, wybierz Ponownie przeanalizuj zestaw testów lub kliknij ikonę Oceń zestaw testów
w zestawie testowym, aby rozpocząć nową ocenę. - Porównaj wyniki nowego biegu z poprzednimi, aby zobaczyć, czy zmiany poprawiły czy pogorszyły wydajność.
Pobierz sesję ewaluacyjną
Gdy zakładka Evaluate jest dostępna dla Twojego środowiska, możesz pobrać dane sesji z testu, aby przejrzeć je offline lub udostępnić recenzentowi. Pobrany pakiet zawiera metadane uruchomienia oceny (nazwę oceny, identyfikator uruchomienia, wersję agenta i metodę testowania) wraz z wynikami dla poszczególnych rozmów (dane wejściowe, odpowiedź agenta i wynik dla każdej tury).
Aby pobrać sesję ewaluacyjną:
- Na karcie Szacowanie otwórz ocenę, której uruchomienie chcesz pobrać.
- W sekcji Ostatnie wyniki wybierz run, który chcesz pobrać.
- Wybierz Pobierz, aby zapisać dane sesji.
Wykorzystaj pobrane dane sesji, aby:
- Przeglądaj odpowiedzi agentów offline, gdy nie masz dostępu do Copilot Studio.
- Udostępnij konkretne uruchomienie osobie przeglądającej, aby uzyskać jej opinię.
- Prowadź zapis z przeprowadzonej oceny obok artefaktów testowych.
Pobrane dane sesji odzwierciedlają stan uruchomienia w momencie pobrania. Przeprowadź ponowną ocenę, jeśli chcesz uchwycić wpływ późniejszych zmian na agenta.