Eksplorowanie pytań użytkowników, sesji i danych opinii

Note

W tym artykule opisano funkcje używane w agentach lub przepływach agentów obsługiwanych przez standardowe środowisko uruchomieniowe.

Użyj funkcji analizy szczegółowej w Copilot Studio, aby uzyskać głębszy wgląd w interakcje użytkowników z agentem. Możesz eksplorować poszczególne pytania użytkowników, aby zrozumieć jakość odpowiedzi, zidentyfikować luki w wiedzy i zobaczyć, jak użytkownicy zareagowali na odpowiedzi agenta. Możesz również przejść do szczegółów sesji konwersacji, aby zbadać szczegółowe dane sesji, śledzić wyniki konwersacji i analizować wydajność między kanałami. A także analizowanie odpowiedzi użytkowników kierowanych do Twojego agenta. Te szczegółowe widoki pomagają zrozumieć podstawowe czynniki wpływające na kluczowe metryki agenta i wskazać obszary pod kątem poprawy.

Przejdź do listy pytań użytkowników

Przejdź do szczegółów, aby wyświetlić konkretne pytania, które przyczyniły się do metryki i kontekstu pomocniczego, na przykład sposobu reagowania agenta, sposobu reagowania użytkowników i zaangażowanych źródeł wiedzy. Ten widok zapewnia lepszy wgląd w jakość odpowiedzi i pomaga zidentyfikować możliwe luki w zakresie wiedzy.

Ważne

Aby wyświetlić listę i jej metryki, potrzebna jest rola zabezpieczeń Osoba przeglądająca transkrypcje botów. Tylko administratorzy mogą przyznać tę rolę , przypisując rolę zabezpieczeń Osoba przeglądająca transkrypcje botów podczas udostępniania agentów.

Aby włączyć tę rolę zabezpieczeń w środowisku indywidualnym lub grupowym, zobacz Instrukcję konfiguracji ustawień transkrypcji.

Przechodzenie do szczegółów listy pytań jest obecnie obsługiwane w przypadku następujących paneli metryk: Wygenerowany współczynnik odpowiedzi i jakość oraz użycie źródła wiedzy.

Zrzut ekranu paneli „Wskaźnik i jakość wygenerowanych odpowiedzi” oraz „Wykorzystanie źródła wiedzy” na karcie Monitor.

Aby przejść do dalszego poziomu szczegółów okna z listą pytań:

  • W panelu Generowana liczba odpowiedzi i jakość wybierz pozycję Zobacz pytania.
  • Na panelu Generowana szybkość odpowiedzi i jakość umieść wskaźnik myszy, a następnie wybierz segment paska odpowiedzi Dobra lub Słaba .
  • Na panelu Generowana liczba odpowiedzi i jakość wybierz metrykę procentową pytań "Odpowiedzi" lub "Bez odpowiedzi".
  • Na panelu Użycie źródła wiedzy kliknij dowolne z wymienionych źródeł lub wybierz pozycję Zobacz wszystko , aby otworzyć stronę wszystkich źródeł wiedzy używanych przez agenta i wybrać odpowiednie źródło.

Lista pytań użytkownika jest filtrowana na podstawie punktu danych, na który przeprowadzono analizę szczegółową. Jest to odzwierciedlone w domyślnych ustawieniach filtru powyżej listy pytań. Na przykład, wybierając segment Bez znaczenia na pasku Gorszy w kafelku Jakość wygenerowanych odpowiedzi, powoduje to ustawienie filtru jakości odpowiedzi na Irrelevant dla wymienionych pytań.

W razie potrzeby możesz wykonać następujące akcje na stronie listy:

W oknie listy pytań są wyświetlane następujące elementy:

Column Description
Question Pytanie zadane.
Odpowiedział Stan generowanej odpowiedzi sztucznej inteligencji: Udzielona lub nieudzielona.
Jakość odpowiedzi Jakość odpowiedzi dla przykładowych pytań. Możliwe wartości to Poor i Good.
Reakcja Kciuki w górę, kciuki w dół lub brak reakcji z opcjonalnym komentarzem opartym na tekście.
Data Data odpowiedzi na pytanie.
Źródło wiedzy Lista źródeł wiedzy cytowanych w odpowiedzi agenta.

Aby uzyskać więcej informacji, wybierz pozycję Pokaż szczegóły na dowolnym pytaniu, aby otworzyć panel boczny szczegółów pytania. Ten panel zawiera dodatkowe informacje na temat jakości odpowiedzi skojarzonej z każdym pytaniem.

Szczegółowy parametr na poziomie pytania Description
Sygnatura czasowa Sygnatura czasowa ostatniego wystąpienia odpowiedzi na pytanie.
Zobacz transkrypcję Otwiera transkrypcję sesji ze szczegółami sesji.
Zapytanie użytkownika Pytanie zadane.
Odpowiedź Generacyjna odpowiedź sztucznej inteligencji.
Wartość Kciuk w górę/Kciuk w dół Wartość ostatniego wystąpienia tego pytania dla parametru Thumbs up /Thumbs down .
Komentarz Opcjonalny dodatkowy komentarz tekstowy, dostarczony przez użytkownika, oprócz reakcji Kciuk w górę / Kciuk w dół .
Jakość odpowiedzi1 Odpowiedź na pytanie, jaka była jakość odpowiedzi na zapytanie użytkownika. Możliwe wartości to Poor i Good.
Przyczyna2 W przypadku, gdy jakość odpowiedzi to Poor, ten parametr wyjaśnia, dlaczego.

1 Jakość odpowiedzi nie jest zawsze dostępna i jest wyświetlana tylko wtedy, gdy pytanie zostało próbkowane na potrzeby analizy jakości.

2 Jeśli jakość odpowiedzi to Good lub jeśli pytanie nie zostało próbkowane, parametr Reason nie ma przypisanej żadnej wartości.

Przejdź do szczegółów sesji

Przejdź do szczegółów sesji, aby wyświetlić określone sesje, które miały wpływ na metrykę, i zbadać podstawowe dane sesji. Ten głębszy widok pomaga zrozumieć , dlaczego i jak występują metryki agenta najwyższego poziomu oraz umożliwiają identyfikowanie i badanie potencjalnych problemów.

Użyj listy sesji, aby przeanalizować wydajność agenta i zbadać, sprawdzając dane na poziomie sesji, które prowadzą do wyniku sesji (resolved, escalated, abandoned lub unengaged). Na przykład przefiltruj według kanału, skoncentruj się na sesjach z niskim CSAT, a następnie przejdź do szczegółów danych sesji, aby uzyskać wgląd w to, dlaczego klienci w tych kanałach mogą mieć złe doświadczenia.

Aby przejść do szczegółów okna z listą sesji:

  • W panelu Wyniki konwersacji wybierz pozycję Zobacz sesje , aby wyświetlić wszystkie sesje dla okresu analitycznego.
  • Z panelu Wyniki konwersacji wybierz pozycję Zobacz szczegóły. Spowoduje to otwarcie okienka bocznego dodatkowych metryk dotyczących wyników sesji konwersacji. Wybierz dowolny wyróżniony wykres metryki, aby wyświetlić odfiltrowaną listę sesji.

Lista sesji jest filtrowana na podstawie punktu danych, który szczegółowo przeanalizowano. Jest to odzwierciedlone w domyślnych ustawieniach filtru powyżej listy sesji. Na przykład w okienku bocznym Wyniki konwersacji wybranie segmentu paska Rozwiązane i potwierdzone kafelka paska Przyczyny rozwiązanych wyników ustawia wynik sesji i przyczynę wyniku odpowiednio na rozwiązane oraz rozwiązane i potwierdzone.

W razie potrzeby można zastosować więcej filtrów na stronie listy *Sesje, aby zawęzić listę sesji dalej przy użyciu filtrów wymiarowych listy. Kliknięcie dowolnej sesji spowoduje wyświetlenie okienka transkrypcji sesji.

Note

  • Aby wyświetlić sesje, musisz mieć rolę zabezpieczeń Osoba przeglądająca transkrypcje botów.

  • Lista sesji jest codziennie aktualizowana i wyświetla do 10 000 sesji dziennie. Tylko ostatnie 28 dni sesji są przechowywane i dostępne do wyświetlenia.

Lista okna sesji jest sortowana według następujących parametrów:

Szczegółowy parametr na poziomie sesji Description
Godzina rozpoczęcia Sygnatura czasowa wywołania sesji.
Czas trwania Długość rozmowy z agentem wyświetlana w minutach i sekundach.
Messages Liczba komunikatów wymienianych między użytkownikiem a agentem.
Wynik Wynik konwersacji agenta. Możliwe wartości to Resolved, Escalated, Abandonedlub Unengaged.
Przyczyna wyniku Dodatkowy kontekst wyjaśniający, dlaczego osiągnięto takie wyniki sesji (na przykład Błąd systemowy lub Rozwiązane w sposób dorozumiany).
Channel Kanał, w którym miała miejsce konwersacja, taki jak Teams, Microsoft 365 Copilot i SharePoint.
Stopień zadowolenia Ocena satysfakcji klienta z sesji, oparta na opiniach użytkowników, jeśli są dostępne. Możliwe wartości to Satisfied, Neutrali Dissatisfied.
Nastrój Analiza sentymentu sesji, oparta na opiniach użytkowników, jeśli jest dostępna. Możliwe wartości to Positive, Neutrali Negative.

Zrzut ekranu okna przechodzenia do szczegółów listy sesji.

Analizowanie opinii użytkowników i satysfakcji

Poza metrykami wysokiego poziomu opinie użytkowników zapewniają bezpośredni wgląd w sposób, w jaki użytkownicy postrzegają reakcje agenta poprzez reakcje, komentarze, wyniki ankiety i analizę tonacji. Przechodząc do szczegółów komentarzy i reakcji użytkowników, możesz zrozumieć, co użytkownicy lubili lub nie lubili określonych odpowiedzi agentów, identyfikować trendy zadowolenia użytkowników i odkrywać konkretne obszary, w których agent wyróżnia się lub potrzebuje ulepszeń. Jest to pomocne w zrozumieniu nastrojów użytkowników i ciągłym udoskonalaniu skuteczności działania agenta.

Przejdź do szczegółów komentarzy

Gdy użytkownik zareaguje, może zostawić komentarz. Na stronie Monitor, aby przejść do komentarzy użytkowników, wybierz ikonę Komentarze na kafelku Reakcje.

W razie potrzeby możesz wykonać następujące akcje na stronie listy Komentarze :

Zgłębianie reakcji

Aby przejść do szczegółowej listy odpowiedzi agenta, które wpływają na reakcję indywidualnego użytkownika, na wykresie kołowym Reakcje wybierz jeden z segmentów kciuk w górę lub kciuk w dół. Domyślnie lista odpowiedzi agenta (lista Reakcje) jest filtrowana według reakcji użytkownika, na której skoncentrowano uwagę.

W razie potrzeby możesz wykonać następujące akcje na stronie listy Reakcje :