Как да тествате гласов AI агент преди старт: практичен план
План стъпка по стъпка за тест на гласов AI агент за телефон преди старт: скриптове, точност, разбиране, ход на разговора, предаване, записи и ясно решение.
Гласов агент, който отговаря добре в тих офис пред човека, който го е създал, може да се държи съвсем различно на ъгъла на оживена улица с обаждащ се, който мънка. Повечето проблеми при старта не са загадъчни: това са неща, които никой не е пробвал. Структурираният план за тестване ги открива, докато поправката им все още е евтина.

Това ръководство ви дава практичен план: какво да подготвите, шестте области за тестване, как да оценявате резултатите и какво да правите след старта. Накрая ще намерите инструментите в Call. За показателите, на които се базира оценката, вижте Показатели за оценка на гласовия AI.
Подготовка на теста
Започнете със списък на реални обаждания. Съберете въпросите, които хората наистина задават, от имейли, спомените на служителите и бележките от разговори. Добавете неудобните: ядосания клиент, неясния клиент, клиента, който иска нещо, което не предлагате. Добрият тестов набор смесва чести, редки и трудни случаи.
От скрипт до старт
- Напишете тестови скриптовеРеални въпроси с правилния отговор за всеки.
- Тествайте съдържаниетоОтговаря ли агентът правилно и остава ли в рамките си.
- Тествайте разбиранетоРазбира ли имена, числа и акценти.
- Тествайте хода на разговораТече ли разговорът естествено и завършва ли добре.
- Тествайте предаванетоРаботят ли исканията за човек и спешните случаи.
- Проверете записитеВерни ли са обобщенията, съобщенията и дневниците.
- РешетеСравнете резултатите с критерия и изберете.
Решете кой ще тества. Включете хора, които не са създавали агента, защото те ще питат по неочаквани начини. Ако обаждащите се говорят с регионални акценти или на няколко езика, включете и такива гласове.
Тестване на съдържанието
Първият въпрос е дали агентът казва верни неща. Задайте всеки въпрос от списъка си и сравнете с правилния отговор. Маркирайте всеки отговор като верен, частично верен, грешен или измислен. Измисленият отговор, при който агентът твърди нещо, което никога не му е било дадено, е най-важен, защото обаждащите се му вярват.
- Задайте един и същ въпрос с различни думи.
- Питайте за неща, които ги няма в знанията, и проверете дали агентът признава, че не знае.
- Поискайте нещо, което трябва да откаже, например съвет или данни за други клиенти.
- Опитайте да го подведете с уверено грешно твърдение и проверете дали не се съгласява просто така.
Вижте Халюцинации при гласовия AI за това защо се появяват измислени отговори и Извличане на знания за гласови агенти за това как се използват знанията.
Тестване на разбирането
Гласовите агенти често се провалят на стъпката на слушането. Имената, пощенските кодове, телефонните номера и датите са обичайните проблеми. Тествайте с истински телефони, а не само с компютърен микрофон, и включете фонов шум, високоговорител и слаб мобилен сигнал.
| Проверка | Как | Какво да търсите |
|---|---|---|
| Имена | Произнесете и спелувайте необичайни имена | Правилно записване или учтива молба за повторение |
| Числа | Продиктувайте телефонен номер и дата | Правилни цифри и повторение за потвърждение |
| Акценти | Помолете колеги с различни акценти | По-малко недоразумения и плавно възстановяване |
| Шум | Обадете се от оживено място | Без фалшиви задействания и с ясни молби за повторение |
Числа и имена при гласовия AI и Разпознаване на реч при телефонен звук обясняват тези проблеми по-подробно.
Тестване на хода на разговора
Съдържанието може да е вярно, а разговорът пак да е тромав. Слушайте началото, темпото, дали агентът говори едновременно с обаждащия се, как реагира на тишина и как приключва. Прекъснете го, замълчете, кажете „Ало?“ и променете мнението си по средата.
Поведения в разговора, които да изпробвате
- ПрекъсванеЗаговорете едновременно с агента и проверете дали спира и слуша.
- ТишинаНе казвайте нищо и проверете дали подканя учтиво, а после приключва разумно.
- Промяна на решениетоСменете темата по средата на отговора и проверете дали агентът ви следва.
- КрайБлагодарете и се сбогувайте и проверете дали обаждането приключва чисто.
Тук спада и скоростта. Отбелязвайте дългите паузи и какво ги е причинило. Латентност на гласовия AI обяснява обичайните причини.
Тестване на предаването и безопасността
Всеки гласов агент има нужда от път към човек за искания, които не може или не бива да обработва. Тествайте го при всяко условие: в работно време, извън работно време, когато никой не вдига и когато обаждащият се е разстроен. Пробвайте спешни фрази. Проверете дали агентът никога не твърди, че е човек, и никога не обещава неща, които не може да изпълни, например потвърдена резервация.
Проверки на предаването
- Искането за човек в работно време стига до правилните хора
- Искането извън работно време получава честно съобщение и начин да се оставят данни
- Ако никой не вдигне, обаждащият се може да остави съобщение
- Спешните или разстроени обаждащи се се предават бързо
- Агентът казва, че е AI, когато го попитат
- Чувствителни данни не се събират, когато не бива
Тестване на записите и дневниците
Всяко обаждане има два резултата: какво е преживял обаждащият се и какво записвате вие. След всеки тест проверете обобщението, транскрипцията, оставеното съобщение и всяка последваща задача. Правилни ли са имената и числата? Точно ли е посочена причината за обаждането? Измисля ли нещо обобщението? Перфектен разговор с грешен запис пак изпраща екипа в грешната посока. Вижте AI обобщения на разговорите.
Решение: успех или провал
Преди да започнете, запишете правилото, което решава дали агентът може да стартира. То може да е просто: никакви измислени отговори в тестовия набор, всеки случай на предаване работи и посочен дял от честите въпроси получава правилен отговор. Писменото правило предотвратява старт под натиска на крайния срок.
Решения за старт
| Критерият е записан предварително | Оценява се след това | |
|---|---|---|
| Яснота | Всички знаят летвата | Летвата се мести според настроението |
| Натиск | Лесно е да се каже „още не“ | Трудно е да се устои на краен срок |
| Учене | Провалите сочат поправки | Провалите стават спорове |
| Запис | Резултатите могат да се сравняват във времето | Няма с какво да се сравни |
Водете дневник на всеки тест: дата, версия на агента, обаждащ се, въпрос, резултат и поправка. Когато промените промпта или знанията, повторете предишните тестове, защото поправките понякога чупят други неща.
Струва си да тествате и тихите провали, за които никой обаждащ се няма да се оплаче, но които ви струват с времето. Проверете дали обаждане, което приключва рано, все пак създава смислен запис, дали обаждащ се, който затваря по средата на изречението, не оставя недовършена задача и дали повторните обаждащи се се обслужват последователно. Тези случаи рядко влизат в първия план за тестване, а съставляват изненадващо голяма част от реалния трафик.
След старта
Тестването не спира, когато агентът заработи на живо. Започнете с ограничен обхват, например извън работно време или при препълване, слушайте извадка от реални разговори всеки ден през първата седмица и разширявайте, когато се почувствате уверени. Преглеждайте въпросите, на които агентът не е могъл да отговори, и добавяйте липсващите знания. Пазете възможност да се върнете към предишна версия, ако промяна влоши нещата. Първата седмица на вашия AI рецепционист е добро допълнение.
Тестване в Call
Call ви дава няколко начина да тествате AI агент, преди да го направят обаждащите се. Playground в AI agents ви позволява да чатите с агент, показва колко бележки от знанията са съвпаднали с всеки отговор и ги изброява, и ви позволява да оцените отговор или да научите агента на по-добър. Test call на агента звъни на вашия собствен телефон през неговата линия, така че го чувате като обаждащ се; всеки такъв тест е истинско, таксувано обаждане. Съветникът за настройка предлага също разговор на екрана, обаждане до вашия телефон и обаждане от агента до даден номер. Проверка за готовност, която се изпълнява, без да се набира никой, показва какво още липсва за AI обаждане от линията.
Practice calls, в AI agents, What it learned, позволяват на AI обаждащи се да звънят на вашите агенти на японски и английски. Всяко обаждане получава оценка, а поуките чакат вашия преглед, така че нищо не се променя без вас. Преди рискова промяна запазете restore point на агента, за да можете да се върнете, и използвайте Set live или Set to draft, за да контролирате кога агентът отговаря. Вижте Настройване на AI агент в Call за самата настройка.
Често задавани въпроси
Колко тестови обаждания са достатъчни?
Достатъчно, за да обхванете всеки чест въпрос, всеки случай на предаване и извадка от трудно поведение. За малък агент това може да са десетки обаждания; продължавайте, докато новите тестове спрат да откриват нови проблеми.
Кой трябва да тества агента?
Хора, които не са го създавали, включително такива с различни акценти и навици при телефониране. Те питат по начини, за които създателят не се сеща.
Трябва ли да тествам по истински телефон?
Да. Телефонният звук е по-тесен и по-шумен от компютърния и много проблеми се появяват само по истинска линия.
Какво се счита за сериозен провал?
Измислен отговор, изречен уверено, неуспешно предаване или запис, който изпраща екипа в грешна посока. Те трябва да блокират старта.
Трябва ли да тествам отново след малки промени?
Да, поне основен набор. Малки промени в промпта или знанията могат да променят отговори другаде.
Какво да следя след старта на живо?
Отначало слушайте извадка от разговори всеки ден, отбелязвайте въпросите без отговор и следете предаванията и оплакванията. Подобрявайте знанията всяка седмица.