Poradniki

Wybór wielojęzycznego recepcjonisty AI: test imion i nazwisk, akcentów i przełączania języka

Proszę ocenić wielojęzycznego recepcjonistę AI za pomocą praktycznych testów imion i nazwisk, numerów, akcentów, rezerwacji i przełączania języka. Artykuł zawiera kartę oceny.

Wielojęzyczny recepcjonista AI powinien rozumieć języki, którymi posługują się Państwa klienci, zachowywać podane przez nich dane i wykonywać zamierzone zadanie. Płynne powitanie to dopiero pierwsza część tej pracy.

Przed wyborem usługi proszę ją przetestować połączeniem telefonicznym w każdym wymaganym języku. Proszę podać imię i nazwisko, numer do oddzwonienia i sprawę. Następnie trzeba sprawdzić, co otrzymuje firma.

Poniższy protokół i pusta karta oceny (po angielsku) pomogą zebrać wyniki testów odpowiadających potrzebom Państwa klientów. Ten artykuł przedstawia metodę testowania; nie zawiera porównania produktów opartego na pomiarach.

Proszę zapytać, co znaczy „obsługuje ten język”

Różne części systemu telefonicznego mogą mieć różne możliwości językowe.

Element obsługi połączenia Co sprawdzić
Powitanie i menu Dzwoniący rozumie dostępne opcje.
Rozpoznawanie mowy Imiona i nazwiska, numery i sprawy są poprawnie interpretowane.
Rozmowa Asystent odpowiada właściwie i w razie potrzeby prosi o doprecyzowanie.
Generowana mowa Wymowa, tempo i odczytywanie liczb są zrozumiałe.
Dane zapisane dla firmy Zapisane zgłoszenie lub rezerwacja zachowuje potwierdzone dane.
Kontakt z pracownikiem Ścieżka awaryjna prowadzi do kogoś, kto może pomóc, lub wyjaśnia dostępną alternatywę.

Proszę poprosić dostawcę o potwierdzenie zestawu używanego na Państwa koncie i w Państwa planie. To, że głos mówi po hiszpańsku, nie oznacza, że każda inna część konfiguracji radzi sobie z hiszpańskim równie dobrze.

Dostawcy oferują wielojęzyczne usługi recepcjonisty. Przewodnik Zoom opisuje kilka obsługiwanych języków, a dokumentacja konfiguracji Retell osobno opisuje rozpoznawanie mowy i sposób działania głosu. Proszę traktować te dokumenty jako informacje o konfiguracji, a następnie przetestować własny przypadek użycia.

Proszę ustalić, jak wybierany jest język dla każdego połączenia

Są trzy przydatne podejścia.

Język wybierany numerem lub w menu. Dzwoniący dodzwania się na dedykowany numer albo wybiera język przed rozmową. Wybór jest wtedy jednoznaczny, ale powitanie musi być dla dzwoniącego zrozumiałe.

Język ustawiony podczas konfiguracji. Firma, której klienci posługują się głównie jednym językiem, może skonfigurować agenta w tym języku. Proszę sprawdzić, co się dzieje, gdy ktoś mówi w innym.

Automatyczne wykrywanie i przełączanie. System rozpoznaje język z mowy lub zmienia język w trakcie rozmowy. Może to być przydatne, gdy klienci regularnie przełączają się między językami, ale wymaga testów z faktyczną parą języków.

Retell podaje, że jego wielojęzyczne rozpoznawanie mowy może być mniej dokładne niż rozpoznawanie mowy w konfiguracji jednojęzycznej, i zaleca wybieranie tylko potrzebnych języków. To wskazówka dotycząca systemu Retell, a nie uniwersalny ranking wydajności. Dokumentacja wielojęzyczności Retell.

Jeśli dzwoniący potrzebują tylko angielskiego i hiszpańskiego, proszę zacząć od przetestowania tej pary. Dodawanie języków niezwiązanych z Państwa klientami tworzy więcej konfiguracji do sprawdzenia.

Proszę ustalić kryteria powodzenia przed rozpoczęciem testów

Proszę wybrać zadania, które recepcjonista będzie mógł wykonywać. Prośba o wizytę, potwierdzona rezerwacja i wiadomość dla osoby wymagają różnych sprawdzeń.

W przypadku prośby o oddzwonienie za poprawny wynik można uznać zapisanie właściwego imienia i nazwiska, numeru telefonu, pod którym można się skontaktować z dzwoniącym, oraz prawidłowo opisanego powodu kontaktu. Przy rezerwacji trzeba też sprawdzić datę, strefę czasową, usługę i faktyczny wpis w kalendarzu.

Proszę zdecydować, które odchylenia są dopuszczalne. Jeśli system pominie znak diakrytyczny w nazwisku, czy wpływa to na zadanie? Jeśli adres zostanie przetłumaczony, czy nadal wskazuje właściwe miejsce? Tę zasadę warto zapisać przed porównaniem wyników.

Przykładowa reguła akceptacji może brzmieć:

Potwierdzony numer do oddzwonienia musi zgadzać się z numerem przeznaczonym do testów w arkuszu testowym. Każda poprawka wprowadzona przez dzwoniącego musi pojawić się w zapisanym zgłoszeniu.

Dzięki temu dwie osoby oceniające mają coś konkretnego do sprawdzenia.

Proszę zacząć od małego, powtarzalnego zestawu testów

Proszę wybrać dwa wymagane języki i zaprosić do testów po trzy osoby posługujące się każdym z nich. Każda osoba wykonuje dziesięć połączeń według scenariuszy. Daje to 60 połączeń testowych: dwa języki × trzy osoby × dziesięć scenariuszy.

To proponowana próba początkowa, a nie standard branżowy ani dowód ogólnej dokładności. Proszę uwzględnić osoby mówiące z akcentami spotykanymi wśród Państwa klientów i udokumentować, które akcenty zostały objęte testem, a które nie. Warto wybrać uczestników, którzy swobodnie ocenią asystenta w języku, którym mówią.

Podczas pierwszej rundy konfiguracja agenta powinna pozostać niezmieniona. Proszę używać numerów telefonu przeznaczonych do testów, syntetycznych danych klientów i testowego kalendarza. Nie należy tworzyć ani zmieniać prawdziwych wizyt klientów.

Dla każdego połączenia proszę zapisać konfigurację, identyfikator uczestnika, język, rodzaj połączenia telefonicznego, rodzaj i poziom hałasu w tle i czas testu. Przed połączeniem trzeba ustalić, jakie dane zostaną podane i jakiego wyniku się oczekuje.

Dziesięć scenariuszy wartych powtarzania

# Scenariusz Przykładowe polecenie dla testującego Co sprawdzić
1 Imię i nazwisko Podać testowe imię i nazwisko naturalnie, a na prośbę przeliterować nazwisko. Imię i nazwisko spełniają ustalone kryterium akceptacji zarówno w potwierdzeniu podczas rozmowy, jak i w zapisanych danych.
2 Poprawiony numer do oddzwonienia Podać numer przeznaczony do testów, a potem poprawić jego ostatnie cyfry. Zapisany numer zawiera poprawkę.
3 Ulica i lokal Podać fikcyjny adres z numerem budynku i lokalu. Istotne dane lokalizacji przetrwały rozmowę.
4 Niejednoznaczna data Poprosić o „przyszły piątek rano”. Asystent ustala zamierzoną datę i proponuje tylko dozwolone terminy.
5 Godzina podana słownie Podać godzinę, a potem doprecyzować, czy chodzi o rano, czy po południu. Końcowa godzina i strefa czasowa zgadzają się z potwierdzeniem.
6 Zmiana prośby Zacząć od nowej rezerwacji, a potem wyjaśnić, że chodzi o zmianę testowej wizyty. Ostateczne działanie odpowiada zmienionej prośbie dzwoniącego.
7 Przerwanie Poprawić asystenta, gdy odczytuje dane. Przyjmuje poprawkę i aktualizuje wynik.
8 Realistyczne dźwięki w tle Powtórzyć rutynową sprawę przy umiarkowanym, bezpiecznym hałasie w tle. Asystent wykonuje zadanie lub zadaje przydatne pytanie doprecyzowujące.
9 Przełączenie języka W trakcie połączenia przełączyć się między skonfigurowanymi językami. Odpowiedź i zapisane dane są zgodne z udokumentowaną zasadą przełączania.
10 Nierozwiązane nieporozumienie Powtarzać szczegół, którego system nie potrafi zapisać, a potem poprosić o pomoc. Asystent zapewnia dostęp do uzgodnionej alternatywnej formy pomocy, nie wymyślając brakującej informacji.

Proszę używać tego samego zestawu scenariuszy dla każdej rozważanej usługi. Jeśli przełączanie języka wykracza poza udokumentowany zakres produktu, proszę wyraźnie zapisać to ograniczenie, zamiast oznaczać test przełączania języka jako wykonany.

Przykładowe kwestie po angielsku i hiszpańsku

Te oryginalne kwestie dotyczą fikcyjnej klientki. Proszę poprosić uczestników testu, by naturalnie dostosowali je do potrzebnej odmiany regionalnej języka.

Do testu imienia i nazwiska:

My name is Elena Muñoz. I’d like someone to call me about a service appointment.

Me llamo Elena Muñoz. Quisiera que alguien me llamara para concertar una cita de mantenimiento.

Do testu zmiany prośby:

I already have an appointment. I need to change it, not make another one.

Ya tengo una cita. Necesito cambiarla, no reservar otra.

Numer do oddzwonienia przeznaczony do testów proszę przekazać testującemu osobno. Proszę poprosić, by odczytał go w zwykły dla siebie sposób, a potem powtórzył test z poprawką.

Do testu przełączania języka proszę z góry ustalić zasadę. Można oczekiwać, że asystent będzie kontynuował po hiszpańsku, gdy dzwoniący o to poprosi. Inna konfiguracja może oferować dedykowaną ścieżkę hiszpańską. Proszę testować zachowanie, które usługa obiecuje.

Proszę odsłuchać połączenie i sprawdzić zapisany wynik

Proszę ocenić oba rezultaty. Rozmowa może brzmieć poprawnie, choć zapisany numer jest błędny. Podsumowanie może wyglądać porządnie, a ukrywać powtarzające się nieporozumienia, które frustrowały dzwoniącego.

Proszę poprosić osobę biegle znającą język o ocenę, czy asystent zrozumiał sprawę, wyjaśnił niejasności i używał zrozumiałego języka. Osoba odpowiedzialna za procesy powinna sprawdzić faktyczny zapis lub kalendarz.

Poprawność zadania proszę oceniać oddzielnie od preferencji co do głosu. Można woleć jeden akcent lub styl mówienia, a jednocześnie stwierdzić, że inna konfiguracja zapisuje dane bardziej niezawodnie.

Jeśli asystent poprawnie odczytuje numer, ale zapisuje coś innego, zadanie jest niezaliczone. Jeśli nie potrafi zapisać numeru i oferuje zatwierdzoną alternatywę z udziałem człowieka, należy to zapisać jako udaną ścieżkę awaryjną i niepowodzenie automatycznego zapisu numeru.

To różne wyniki i oba mają znaczenie.

Proszę podawać liczby razem z warunkami testu

Przydatne miary to:

  • Zgłoszenia, w których wszystkie wymagane pola zawierają poprawne dane.
  • Rezerwacje potwierdzone we właściwym terminie testowego kalendarza.
  • Połączenia zakończone bez przejęcia przez człowieka.
  • Połączenia, w których zgodnie z założeniami połączono dzwoniącego z pracownikiem lub przyjęto prośbę o oddzwonienie.
  • Połączenia z nieuprawnioną obietnicą lub wymyślonym szczegółem.
  • Połączenia przerwane podczas testu.

Dla każdej miary proszę podać licznik i mianownik. „27 z 30 próśb o oddzwonienie zawierało poprawny potwierdzony numer” daje się zinterpretować, gdy podają Państwo także język, warunki i konfigurację. Nie należy przedstawiać tego przykładowego sformułowania jako zaobserwowanego wyniku, jeśli połączenia nie zostały wykonane.

Mała próba nie pozwala ustalić dokładnego ogólnego wskaźnika błędów. Powtarzanie tego samego skryptu pomaga wykrywać regresje, ale prawdziwi dzwoniący wnoszą większą zmienność.

Po zmianach proszę powtórzyć nieudane scenariusze i zachować wcześniejsze wyniki. Jeśli zmienią Państwo głos lub dostawcę technologii mowy, należy zapisać to jako nową konfigurację.

Proszę zadbać, by ścieżka awaryjna działała w języku dzwoniącego

Droga do pomocy wymaga tej samej uwagi co powitanie.

Proszę sprawdzić, czy osoba przejmująca połączenie może pomóc w języku dzwoniącego. Jeśli nie, trzeba rzetelnie wyjaśnić alternatywę. Nie należy obiecywać współpracownika mówiącego po hiszpańsku, jeśli w obecnym grafiku nikogo takiego nie ma.

Proszę sprawdzić, czy podsumowanie po angielsku zachowuje imiona i nazwiska oraz numery z rozmowy po hiszpańsku, a także wskazuje, które informacje pozostały niepewne. Oryginalne informacje warto zachować tam, gdzie pozwalają na to Państwa polityka prywatności i system.

W przypadku wdrożeń w Europie proszę sprawdzić komunikat informujący, że rozmowę prowadzi AI, i obowiązujące informacje o prywatności w każdym obsługiwanym języku. Przewodnik po prywatności i informowaniu o AI omawia kwestie do rozstrzygnięcia.

Do testowania sytuacji, gdy pracownicy są niedostępni lub nie udaje się przekazać połączenia, proszę użyć listy kontrolnej przekazania do człowieka.

Proszę wybrać usługę na podstawie testów w obu językach

Proszę zacząć od potrzeb osób, które już dzwonią do Państwa firmy, i zadań, które firma obecnie wykonuje. Warto porównać dowody z tej konfiguracji, a zakres rozszerzać, gdy pojawi się taka potrzeba.

W przypadku Double Menu języki, głosy i planowaną ścieżkę proszę omówić przed uruchomieniem. Strona demo zawiera przygotowane przykłady menu, a nie wyniki pomiarów jakości rozmów wielojęzycznych. Proszę odsłuchać przykłady i przetestować faktyczną ścieżkę telefoniczną.

Na rozmowę o konfiguracji proszę przynieść krótki skrypt testowy i reguły akceptacji. Warto poprosić o demonstrację rozmowy w językach używanych przez Państwa klientów, podczas której asystent uwzględni poprawkę w imieniu lub nazwisku, doprecyzuje datę i skutecznie zapewni alternatywną formę pomocy.

Czytaj dalej

Państwa kolejne nieodebrane połączenie to utracona rezerwacja.

Proszę skonfigurować menu już dziś. Można je uruchomić jeszcze przed końcem dnia.

Zobacz plany
Bez opłat za połączenieBez minimalnej liczby stanowiskAnuluj w dowolnej chwili