Omówienie narzędzia Monitor

Korzystaj z analiz, aby zrozumieć, jak dobrze działa Twój agent i zidentyfikować obszary wymagające poprawy.

Strona Monitor w Copilot Studio pokazuje kompleksowe dane dotyczące Twojego agenta, od przeglądu kluczowych wskaźników po dogłębną analizę wykorzystania komponentów agenta. Możesz przejść do szczegółów każdego fragmentu danych.

Doświadczenie Monitora jest dostosowane do agentów konwersacyjnych oraz autonomicznych.

Monitoring jest dostępny we wszystkich regionach geograficznych. Dane monitorujące są dostępne do 360 dni. Szczegóły sesji i informacje o transkrypcji są dostępne przez ostatnie 28 dni. Znaczniki czasu i daty w analityce są w skoordynowanym czasie uniwersalnym (UTC). Znaczniki czasu i daty obejmują godziny rozpoczęcia i zakończenia dnia, godziny sesji oraz inne znaczniki czasu w danych Twojego agenta.

Udzielanie ograniczonego dostępu tylko do widoku do analizy

Jeśli jesteś właścicielem agenta i chcesz przyznać dostęp tylko do strony Monitora swojego agenta, możesz to zrobić, udostępniając agenta z włączoną rolą udostępniania Przeglądnika Analityki . Jeśli chcesz, aby osoba, której udostępniasz agenta, miała dostęp do informacji z transkrypcji rozmowy, musi również mieć rolę zabezpieczeń Podgląd transkrypcji botów.

Dowiedz się więcej na temat udostępniania analiz agenta.

Aby uzyskać dostęp do strony Monitor swojego agenta:

1. Otwórz agenta w programie Copilot Studio.
2. Wybierz Monitor na górnym pasku menu.

Podsumowanie

Obszar Summary wykorzystuje Copilot do generowania sztuczną inteligencją podsumowania kluczowych kwestii analitycznych dotyczących agenta. Wybierz pozycję Wyświetl więcej , aby wyświetlić pełną podsumowaną listę szczegółowych informacji.

Pomaga to szybko zrozumieć typowe motywy i metryki oraz zidentyfikować obszary poprawy dla agenta, podsumowując je na liście punktowanej dla wybranego okresu raportowania. Może to obejmować metryki zaangażowania, tonację klientów i opinie oraz trendy od ostatniego okresu raportowania.

Podsumowanie komentarzy klientów (wersja zapoznawcza) pomaga zrozumieć ogólne nastroje klientów dotyczące agenta, takie jak opinie i komentarze. Wnioski są priorytetowo traktowane na podstawie liczby powiązanych komentarzy i ich ogólnego znaczenia. Komentarze o niskiej wartości lub bez znaczenia są odfiltrowane, a powiązane opinie są grupowane razem.

Można przekazać firmie Microsoft opinię na temat tej sekcji za pomocą ikon Kciuk w górę i Kciuk w dół. Użyj panelu Prześlij opinię firmie Microsoft, aby dodać komentarz i udostępnić powiązane pliki. Przekazując w ten sposób opisową opinię, współpracujesz z nami przy ciągłym ulepszaniu naszego produktu.

1. W panelu Prześlij opinię do Microsoft opisz w naturalnym języku, co lubisz a czego nie lubisz, w zależności od ikony wybranej w celu otwarcia panelu.
2. Wybierz, czy chcesz udostępnić monit, wygenerowaną odpowiedź, odpowiednie próbki zawartości i dodatkowe pliki dziennika.
3. Wybierz Prześlij.

Możesz również sprawdzić podsumowanie wydajności wysokiego poziomu w obszarze Przegląd , a następnie dokładniej poznać jego wydajność.

Aktywni użytkownicy

Metryki aktywnych użytkowników zapewniają wgląd w stopień, w jakim agent konwersacyjny jest wdrażany i jak te trendy zmieniają się w czasie. Aktywny użytkownik to unikatowy użytkownik, który wchodził w interakcję z agentem konwersacji co najmniej raz w okresie raportu. Zakładka Monitor wyświetla liczbę aktywnych użytkowników dla dwóch wcześniej zdefiniowanych okresów: codziennych aktywnych użytkowników (DAU) i miesięcznie aktywnych użytkowników (MAU). Liczba dni rozpoczyna się i kończy się zgodnie z pełnym 24-godzinnym dniem w strefie czasowej UTC. Miesięczne zliczanie odbywa się zgodnie z miesiącem kalendarzowym, rozpoczynając się i kończąc pierwszego i ostatniego dnia zgodnie ze strefą czasową UTC.

Średnia wartość DAU dla wybranego okresu oraz jej procentowa zmiana z poprzedniego okresu jest wyświetlana jako kluczowy wskaźnik wydajności (KPI) w sekcji Przegląd .

Aby wyświetlić więcej szczegółów na temat liczby dziennych i miesięcznych aktywnych użytkowników w miarę upływu czasu, wybierz przycisk Zobacz aktywnych użytkowników w prawym górnym rogu panelu przeglądu.

Tylko sesje konwersacyjne

Analytics dla agentów konwersacyjnych w programie Copilot Studio śledź zaangażowanie użytkowników z agentem i spróbuj uchwycić, jak dobrze agent obsługuje zadania użytkownika.

Analiza konwersacyjna używa następujących pojęć i terminów:

• Rozmowy to ciągła interakcja między konkretnym użytkownikiem lub grupą użytkowników na kanale a Twoim agentem.

• Konwersacje można wstrzymywać i wznawiać później lub przekazywać do przedstawiciela działu obsługi klienta. Rozmowa może być jednostronna, zarówno od klienta do agenta, albo od agenta do klienta, ale częściej jest to wymiana zdań między klientem a agentem.

• Czas konwersacji upływa po 30 minutach braku aktywności.

• Dla agentów publikowanych na kanale Telephony rozmowy wygasają 3 minuty po zakończeniu wydarzenia .

• Jedna konwersacja może zawierać jedną lub więcej sesji analitycznych.

• Sesja analizy w trybie klasycznym jest skojarzona z ostatnim tematem niestandardowym wyzwolonym przez użytkownika. Jeśli sesja nie zawiera tematów niestandardowych, to jest to ostatni temat systemowy wywołany bezpośrednio przez użytkownika.

Tylko sesje wyzwalacza zdarzeń

Agent autonomiczny to agent z wyzwalaczem zdarzenia. Ci agenci obsługują tylko analizę agentów z wyzwalaczami.

Sesja analityki dla agentów z wyzwalaczami obejmuje cały przebieg od momentu, gdy agent otrzymuje ładunek danych z wyzwalacza, aż po wszelkie działania wykonywane przez agenta w odpowiedzi. Te sesje analityczne rejestrują, na co reaguje Twój agent i jak dobrze działa.

Widok hybrydowy — zarówno sesje konwersacyjne, jak i wyzwalane zdarzeniami

Gdy dane agenta obejmują sesje dla co najmniej jednej konwersacji oraz co najmniej jedno uruchomienie wyzwalane przez regułę w okresie objętym raportem, strona Monitor wyświetla hybrydowy widok odpowiednich metryk zarówno dla sesji konwersacyjnych, jak i autonomicznych. W tym ujęciu sekcje Przegląd i Efektywność pokazują metryki obok siebie zarówno dla sesji konwersacyjnych, jak i wywołanych wydarzeniami. Sekcja Użytkowania pozwala wybrać między Konwersacjami a Uruchomieniami, wyświetlając tylko odpowiednie dane. Wybranie pozycji Wszystkie spowoduje wyświetlenie wszystkich danych związanych z użyciem. W sekcji Satysfakcja są wyświetlane metryki satysfakcji dla sesji konwersacyjnych.

Aby uzyskać więcej informacji o:

• Wyświetlane metryki odnoszące się do sesji konwersacyjnych, zobacz Monitorowanie skuteczności agenta konwersacyjnego.

• Wyświetlane metryki istotne dla sesji wywołanych przez zdarzenia, zobacz Monitorowanie stanu autonomicznego agenta.

Pobierz transkrypcje rozmów

Transkrypcje rozmów możesz pobrać kilka minut po zakończeniu rozmowy. Możesz pobrać dowolny okres w ciągu ostatnich 29 dni. Można je pobrać w Dataverse za pomocą portalu Power Apps oraz jako transkrypty czatów sesji za pomocą aplikacji Copilot Studio. Po zakończeniu sesji analitycznej może upłynąć nie więcej niż godzina, zanim powiązane dane będą wyświetlane na pulpicie nawigacyjnym analizy.

Analiza użycia tematu

W Copilot Studio temat definiuje sposób postępu konwersacji agenta i reprezentuje część konwersacji między użytkownikiem a agentem. Panel „Monitor tematu” pokazuje, jak radzi sobie dany temat, w tym jak często jest uruchamiany, jak są rozwiązywane sesje, które go obejmują, oraz na ile użytkownicy są zadowoleni z tych sesji. Możesz użyć tych szczegółowych informacji, aby zidentyfikować tematy, które często eskalują lub są porzucone, a następnie ustalać priorytety w celu ulepszenia. Aby dowiedzieć się więcej na temat tematów i sposobu ich tworzenia, zobacz Tworzenie i edytowanie tematów.

Aby zobaczyć temat Panel monitoru:

1. Przejdź do strony Tematy agenta w Copilot Studio.

2. Wybierz temat, który chcesz przeanalizować. Jeśli tematy nie są dostępne, zobacz Tworzenie i edytowanie tematów.

3. W prawym górnym rogu strony Tematy wybierz Więcej (...) >Monitoruj.

Panel tematyczny Monitor przedstawia:

• Wyniki tematu: wykres wyników sesji, , Escalatedi Resolved, dla sesji, Abandonedw których ten temat został wyzwolony. Użyj tego wykresu, aby szybko ocenić kondycję tematu. Wysoki odsetek Escalated wyników lub Abandoned może oznaczać, że temat wymaga poprawy.
• Łączne użycie tematu: wykres trendu wyników tematu w czasie. Służy do wykrywania regresji, na przykład skok liczby porzuconych sesji po edycji tematu lub potwierdzenia, że ostatnie zmiany poprawiły współczynniki rozwiązywania.
• Wynik zadowolenia klientów: wynik oparty na odpowiedziach ankiet użytkowników z sesji skojarzonych z tym tematem.
• Trend oceny zadowolenia: wykres pokazujący, jak zmienia się wskaźnik zadowolenia w czasie. Użyj tego trendu, aby zidentyfikować okresy, w których nastroje użytkowników pogorszyły się lub poprawiły.

Aby zmienić zakres czasu, wybierz listę rozwijaną zakresu czasu u góry panelu Monitora tematu.

Informacje pokrewne

• Mierzenie zwrotu z inwestycji (ROI) i wartości biznesowej agentów sztucznej inteligencji