Podgląd i test agenta (Rozmowa z klientem) (zapowiedź)

[Ten artykuł to dokumentacja wstępna, która może ulec zmianie].

Agent, który wygląda poprawnie w zakładce Build , nadal może ponieść porażkę w rozmowie. Instrukcje to wskazówki, a nie gwarancje: model je interpretuje, a różnica między tym, co napisałeś, a tym, co robi agent, pojawia się dopiero wtedy, gdy faktycznie z nim rozmawiasz. Użyj zakładki Podgląd, aby przetestować swojego agenta zarówno na czacie webowym, jak i głosowym, zanim go opublikujesz.

Kanały testowe

Zakładka Podgląd oferuje dwa sposoby przetestowania agenta:

  • czat internetowy: Panel czatu tekstowego. To właśnie tam powinieneś spędzać większość czasu na testowaniu. Jest szybszy niż głos, pełny zapis jest widoczny, a do czatu otrzymujesz ślad toku rozumowania.
  • Rozmowa głosowa: Rozmowa na żywo z Twoim agentem. Głos ma scenariusze awarii, których tekst nigdy nie ujawnia, więc testuj go osobno, nawet gdy czat przechodzi bez problemu.

Wybierz czat internetowy lub Voice Call na górze zakładki Podgląd, aby przełączać się między kanałami testowymi. Panel Transkrypcja na żywo pojawia się równolegle z rozmową.

Przed rozpoczęciem

  • Zapisz zmiany. Panel Podglądu uruchamia zapisanego agenta, a nie niezapisane edycje w zakładce Build.
  • Dowiedz się, jak wygląda poprawne rozwiązanie. Zapisz oczekiwany efekt przed wysłaniem pierwszej wiadomości.
  • Otwórz mapę aktywności. Znajduje się obok czatu i pokazuje trasowanie, wywołania narzędzi oraz realizację tematów. To sposób, w jaki odróżniasz błędy rozumowania od awarii infrastruktury.
  • Rozpocznij nową sesję testową między scenariuszami. Kontekst przenosi się i może zanieczyścić Twój następny wynik.

Pięć warstw do przetestowania

Pracuj od najprostszej warstwy na zewnątrz. Awaria na wczesnej warstwie spowoduje efekt kaskadowy, więc naprawiaj problemy po kolei.

Warstwa Co testujesz Jak rozpoznać, że działa
Powitanie i zakres Agent przedstawia się i rozumie swoją pracę Wiadomość otwierająca odpowiada twojemu opisowi; akceptuje prośby mieszczące się w zakresie
Routing Orkiestrator wybiera odpowiedniego subagenta Mapa aktywności pokazuje oczekiwanego uruchomionego specjalistę
Narzędzia i tematy Akcje faktycznie wykonują i zwracają dane Prawdziwe wartości wracają, a nie symbole zastępcze czy milczenie
Wiedza Odpowiedzi opierają się na twoich źródłach Cytowania pojawiają się i odpowiadają Twoim skonfigurowanym źródłom
Poręcze ochronne Odmowy, eskalacja i zasady biznesowe — wstrzymanie Agent odmawia, eskaluje lub oznacza dokładnie zgodnie z instrukcją

Testowanie na czacie internetowym

Najpierw uruchom główny scenariusz

Odgrywaj rolę realistycznego użytkownika z w pełni określonym celem, a nie testera badającego funkcje. Na przykład dla agenta turystycznego oznacza to rezerwację prawdziwej podróży od początku do końca, zamiast pytać "czy możesz zarezerwować loty?"

  1. Otwórz cel naturalnie, tak jak zrobiłby to prawdziwy użytkownik.
  2. Odpowiadaj na pytania agenta jako użytkownik współpracujący.
  3. Podążaj zgodnie z przepływem do konkretnego rezultatu: rezerwacja, podsumowanie, rozwiązanie.
  4. Poproś o podsumowanie na końcu, a następnie zweryfikuj każdy fakt z transkrypcją.

Potem celowo go zepsuj

Scenariusz podstawowy dowodzi, że agent potrafi pracować. Te scenariusze dowodzą, że ulega bezpiecznej awarii.

Test Co wysłać Co powinno się stać
Brakujący szczegół Pomiń wymagane pole potrzebne agentowi Pyta dokładnie o to pole, raz
Zmiana zdania Cofnij decyzję w toku przepływu Aktualizuje się bez utraty wcześniejszego kontekstu
Poza zakresem Zapytaj o coś poza jego zakresem Spada i przekierowuje, nie improwizując
Eskalacja Uruchom udokumentowaną regułę przekazania Zamiast próbować podjąć zadanie, przenosi
Reguła biznesowa Naruszaj określony limit, na przykład budżet Wyraźnie wskazuje na konflikt
Pamięć sesyjna Poproś, by powtórzyło jakiś szczegół z wcześniejszej części rozmowy Przywołuje dokładnie, bez ponownego pytania

Przeczytaj mapę aktywności, nie tylko odpowiedź

Na czacie widać, co powiedział agent. Mapa aktywności pokazuje, co zostało zrobione. Gdy odpowiedź wygląda źle, mapa pokazuje, gdzie ją naprawić:

  • Wywołano niewłaściwego specjalistę → Twoje instrukcje routingu lub opisy podagentów są niejednoznaczne.
  • Specjalista, nieprawidłowe wyjście → instrukcje samego subagenta wymagają poprawy.
  • Narzędzie działało, ale nic nie zwróciło → narzędzie lub temat były zepsute, nie komunikat.
  • Nie było żadnego wywołania narzędzia → agent odpowiadał na podstawie modelu zamiast z twoich danych. Traktuj każdą wartość w tej odpowiedzi jako niezweryfikowaną.

Testowanie w funkcji głosowej

Voice to nie jest czat internetowy z dołączonym dźwiękiem. Ma tryby awarii, których tekst nigdy nie ujawni, więc testuj go osobno, nawet gdy czat przebiega bez problemu.

  1. Przyznaj dostęp do mikrofonu, rozpocznij rozmowę głosową i potwierdź, że status zmieni się na połączony i nasłuchujący.
  2. Wypowiedz pełną prośbę naturalnie, zamiast czytać skrypt słowo po słowie.
  3. Obejrzyj transkrypcję na żywo. Jeśli rozpoznawanie mowy błędnie rozpoznaje Twoją wypowiedź, odpowiedź agenta odpowiada na inne pytanie niż to, które zadałeś.
  4. Przerwij agentowi wypowiedź w połowie zdania, aby upewnić się, że barge-in przerywa odtwarzanie i zaczyna nasłuchiwać.
  5. Milcz przez kilka sekund, by upewnić się, że system ponownie wyświetla uprzejmy monit, a nie przerywa połączenia.
  6. Poproś o kod potwierdzający i sprawdź, czy jest literowany znak po znaku, a nie czytany jako słowo.

Na co zwracać uwagę

  • Długość: Wszystko powyżej około trzech zdań jest zbyt długie, by zrozumieć ze słuchu.
  • Listy i adresy URL: Muszą być podsumowane, nigdy nie czytane na głos pozycja po pozycji.
  • Daty i liczby: "Wtorek, 24 marca" pasuje; "2026-03-24" nie.
  • Potwierdzenie krytycznych danych: Imiona, daty i kody należy je powtórzyć przed podjęciem działań przez agenta.

Jeśli Speech zachowuje się jak twój kanał czatu, instrukcje specyficzne dla kanału nie spełniają swojej funkcji. Instrukcje mowy i czatu są konfigurowane osobno na każdym agencie, w sekcji Instrukcje, na kartach Mowa i Czat. Zobacz przegląd ustawień mowy i czatu.

Wskazówka

Powtarzaj krytyczne scenariusze więcej niż raz i przeprowadź przynajmniej jedną dłuższą sesję. Sporadyczne awarie to nadal porażki i to właśnie one trafiają do produkcji.

Gdy coś zawodzi

  1. Odtwórz. Rozpocznij nową sesję i ponownie wykonaj tę samą sekwencję kroków, notując, czy nie działa za każdym razem, czy sporadycznie.
  2. Znajdź go za pomocą mapy aktywności: trasa, narzędzie, wiedza lub instrukcja.
  3. Naprawiaj jedną rzecz na raz. Zmiana kilku instrukcji jednocześnie uniemożliwia rozpoznanie, co zadziałało.
  4. Zapisz, rozpocznij nową sesję i uruchom ponownie dokładnie ten sam scenariusz.
  5. Uruchom ponownie inne scenariusze zakończone powodzeniem. Zmiany instrukcji mają skutki uboczne.

Lista kontrolna gotowości do wysyłki

  • Scenariusz podstawowy przebiega od początku do końca bez prowadzenia za rękę.
  • Każdy fakt w końcowym podsumowaniu można powiązać z czymś, co narzędzie lub źródło wiedzy faktycznie zwróciło.
  • W odpowiedzi widocznej przez użytkownika nie pojawia się żaden tekst zastępczy.
  • Agent szczerze zgłasza niepowodzenie, gdy narzędzie nic nie zwraca.
  • Zasady eskalacji i odmowy działają niezawodnie.
  • Odpowiedzi głosowe są krótkie, a kody są literowane.
  • Scenariusze krytyczne były przeprowadzane więcej niż raz, w tym jedną długą sesję.