Krátka odpoveď: Hlasový agent je presne taký dobrý, aké sú jeho podklady. Potrebuje šesť okruhov: čo firma robí, cenník, časté otázky, pravidlá termínov, pravidlá prepájania a hranice toho, čo povedať nesmie. Dlhšie zadanie nie je lepšie, naše produkčné zadania držíme pod približne päťtisíc znakov. A detaily rozhodujú viac, než sa zdá: jediná zle zvolená úvodná veta nám v meraní pokazila 17 z 28 hovorov.

O promptoch pre hlasových agentov sa píše veľa teórie. My máme namiesto teórie prepisy vlastných hovorov a analýzy toho, čo v nich zlyhalo. Tento článok je návod poskladaný z toho, čo sme si na vlastných agentoch nabili a namerali.

Šesť okruhov, z ktorých sa skladá zadanie

Okruh Čo obsahuje Typická chyba
Firma čo robí, čo nerobí, pre koho, kde chýba to, čo firma NErobí
Cenník ceny s presnými formuláciami, čo je v cene agent dostane len čísla bez viet
Časté otázky 15 až 30 reálnych otázok s odpoveďami odpovede písané ako pre web, nie do reči
Termíny ako sa objednáva, presúva, ruší; napojenie na kalendár pravidlá výnimiek ostanú v hlave majiteľa
Prepájanie ktoré témy idú na človeka, na koho, kedy chýba scenár pre nedostupného človeka
Hranice čo agent nesmie sľúbiť ani komentovať nikto ich nespíše, agent improvizuje

Dobrá správa: firma tie odpovede už má, roky ich hovorí do telefónu. Práca je vytiahnuť ich z hláv a dať im tvar, ktorý znie prirodzene v reči. Odpoveď do telefónu je kratšia a hovorovejšia než odpoveď na webe; keď agent číta marketingový text, počuť to na prvú vetu.

Čo sme si namerali na vlastných hovoroch

Pri ladení všeobecnej asistentky na tomto webe sme analyzovali prepisy hovorov a tri zistenia stoja za zdieľanie, pretože sa týkajú každého nasadenia.

Zatvorená otvárka zabíja rozhovor. Keď asistentka začínala otázkou, na ktorú sa dá odpovedať áno alebo nie, dostali sme jednoslovnú odpoveď v 17 z 28 hovorov a rozhovor sa rozbiehal ťažko. Otvorená otvárka, napríklad „ako vám pomôžem", vedie volajúceho k tomu, aby povedal celú svoju situáciu. Jedna veta, merateľný rozdiel.

Bez limitov hovor nemá ako skončiť. V dávke 38 hovorov bolo 10 bez jedinej repliky človeka: pustený mikrofón, ticho, odídený návštevník. Tri z tých hovorov bežali až do stropu 600 sekúnd, pretože limit ticha bol vypnutý. Odvtedy majú naši agenti nastavené rozumné ukončenie pri tichu aj maximálnu dĺžku hovoru; sú to dve čísla v konfigurácii, ktoré šetria minúty aj štatistiky.

Dlhšie zadanie nie je lepšie zadanie. Naše produkčné zadania držíme pod hranicou približne päťtisíc znakov, overenou na agentovi, ktorý obsluhuje reálnu linku. Nad ňou rastie latencia odpovede a správanie sa rozostruje, pretože príliš veľa pravidiel si začne konkurovať. Keď treba viac vedomostí, patria do znalostnej bázy a nástrojov, nie do nekonečného zadania.

Pravidlo, ktoré musí byť napísané: neviem je správna odpoveď

Jazykový model má prirodzený sklon odpovedať vždy, aj keď nevie. Preto musí zadanie výslovne obsahovať pravidlo: na otázku mimo podkladov agent povie, že to nevie, a ponúkne cestu ďalej, odkaz, prepojenie alebo spätné zavolanie. Vymyslená cena, vymyslený termín alebo vymyslená kompetencia je najdrahšia chyba hlasového agenta, pretože sa na ňu príde až vtedy, keď ju zákazník príde vymáhať.

S tým súvisia hranice: zoznam vecí, ktoré agent nekomentuje a nesľubuje. Zľavy, právne otázky, diagnózy, výnimky z pravidiel. Každá vertikála ich má inde, ako vidno v článkoch o nasadeniach pre stavebnú firmu, autoservis či realitnú kanceláriu, ale vždy musia byť spísané.

Ako sa zadanie testuje

Zadanie sa netestuje čítaním, ale hovormi. Náš postup pred spustením:

  1. Vlastné meno, adresa, dátum, telefónne číslo. Najkrehkejšie miesta slovenčiny; prečo, sme rozpísali v článku Hovorí to po slovensky.
  2. Otázky mimo tém. Agent má priznať, že nevie, nie improvizovať.
  3. Prerušovanie a skákanie do reči. Ako sa správa, keď volajúci nečaká na koniec vety.
  4. Nepríjemný volajúci. Náhlenie, frustrácia, tri otázky naraz.
  5. Čítanie prepisov. Po každej dávke testov sa prepisy čítajú a zadanie sa upravuje. Toto je tá skutočná práca.

A po spustení sa nekončí: prvé stovky ostrých hovorov vždy prinesú situácie, na ktoré nikto nemyslel. Preto sa pri výbere dodávateľa pýtajte, či číta prepisy z prevádzky a koľko stojí úprava zadania; je to jedna z otázok z článku Cena AI hlasového agenta.

Kto čo robí

Deľba práce je jednoduchá: obsah dáva firma, tvar dáva dodávateľ. Nikto nepozná ceny a zákazníkov lepšie než firma; premeniť podklady na zadanie, ktoré v hovore funguje, je remeslo. V praxi od klienta pýtame surové podklady, pokojne aj neučesané, a dopytujeme sa dovtedy, kým agent nevie zodpovedať otázky jeho zákazníkov. Časovo je to pre firmu popoludnie práce, celý priebeh je v článku Nasadenie AI agenta od podkladov po prevádzku.

Súvisiace články

Zdroje