Технологии за гласов AI

Как да тествате гласов AI агент преди старт: практичен план

План стъпка по стъпка за тест на гласов AI агент за телефон преди старт: скриптове, точност, разбиране, ход на разговора, предаване, записи и ясно решение.

Редакционен екип на Call · Публикувано · 6 мин четене

Гласов агент, който отговаря добре в тих офис пред човека, който го е създал, може да се държи съвсем различно на ъгъла на оживена улица с обаждащ се, който мънка. Повечето проблеми при старта не са загадъчни: това са неща, които никой не е пробвал. Структурираният план за тестване ги открива, докато поправката им все още е евтина.

Тестер по качеството със слушалки проверява скрипт за разговор на лаптоп
Илюстративно изображение

Това ръководство ви дава практичен план: какво да подготвите, шестте области за тестване, как да оценявате резултатите и какво да правите след старта. Накрая ще намерите инструментите в Call. За показателите, на които се базира оценката, вижте Показатели за оценка на гласовия AI.

Подготовка на теста

Започнете със списък на реални обаждания. Съберете въпросите, които хората наистина задават, от имейли, спомените на служителите и бележките от разговори. Добавете неудобните: ядосания клиент, неясния клиент, клиента, който иска нещо, което не предлагате. Добрият тестов набор смесва чести, редки и трудни случаи.

От скрипт до старт

  1. Напишете тестови скриптовеРеални въпроси с правилния отговор за всеки.
  2. Тествайте съдържаниетоОтговаря ли агентът правилно и остава ли в рамките си.
  3. Тествайте разбиранетоРазбира ли имена, числа и акценти.
  4. Тествайте хода на разговораТече ли разговорът естествено и завършва ли добре.
  5. Тествайте предаванетоРаботят ли исканията за човек и спешните случаи.
  6. Проверете записитеВерни ли са обобщенията, съобщенията и дневниците.
  7. РешетеСравнете резултатите с критерия и изберете.

Решете кой ще тества. Включете хора, които не са създавали агента, защото те ще питат по неочаквани начини. Ако обаждащите се говорят с регионални акценти или на няколко езика, включете и такива гласове.

Тестване на съдържанието

Първият въпрос е дали агентът казва верни неща. Задайте всеки въпрос от списъка си и сравнете с правилния отговор. Маркирайте всеки отговор като верен, частично верен, грешен или измислен. Измисленият отговор, при който агентът твърди нещо, което никога не му е било дадено, е най-важен, защото обаждащите се му вярват.

Вижте Халюцинации при гласовия AI за това защо се появяват измислени отговори и Извличане на знания за гласови агенти за това как се използват знанията.

Тестване на разбирането

Гласовите агенти често се провалят на стъпката на слушането. Имената, пощенските кодове, телефонните номера и датите са обичайните проблеми. Тествайте с истински телефони, а не само с компютърен микрофон, и включете фонов шум, високоговорител и слаб мобилен сигнал.

ПроверкаКакКакво да търсите
ИменаПроизнесете и спелувайте необичайни именаПравилно записване или учтива молба за повторение
ЧислаПродиктувайте телефонен номер и датаПравилни цифри и повторение за потвърждение
АкцентиПомолете колеги с различни акцентиПо-малко недоразумения и плавно възстановяване
ШумОбадете се от оживено мястоБез фалшиви задействания и с ясни молби за повторение

Числа и имена при гласовия AI и Разпознаване на реч при телефонен звук обясняват тези проблеми по-подробно.

Тестване на хода на разговора

Съдържанието може да е вярно, а разговорът пак да е тромав. Слушайте началото, темпото, дали агентът говори едновременно с обаждащия се, как реагира на тишина и как приключва. Прекъснете го, замълчете, кажете „Ало?“ и променете мнението си по средата.

Поведения в разговора, които да изпробвате

  • ПрекъсванеЗаговорете едновременно с агента и проверете дали спира и слуша.
  • ТишинаНе казвайте нищо и проверете дали подканя учтиво, а после приключва разумно.
  • Промяна на решениетоСменете темата по средата на отговора и проверете дали агентът ви следва.
  • КрайБлагодарете и се сбогувайте и проверете дали обаждането приключва чисто.

Тук спада и скоростта. Отбелязвайте дългите паузи и какво ги е причинило. Латентност на гласовия AI обяснява обичайните причини.

Тестване на предаването и безопасността

Всеки гласов агент има нужда от път към човек за искания, които не може или не бива да обработва. Тествайте го при всяко условие: в работно време, извън работно време, когато никой не вдига и когато обаждащият се е разстроен. Пробвайте спешни фрази. Проверете дали агентът никога не твърди, че е човек, и никога не обещава неща, които не може да изпълни, например потвърдена резервация.

Проверки на предаването

  • Искането за човек в работно време стига до правилните хора
  • Искането извън работно време получава честно съобщение и начин да се оставят данни
  • Ако никой не вдигне, обаждащият се може да остави съобщение
  • Спешните или разстроени обаждащи се се предават бързо
  • Агентът казва, че е AI, когато го попитат
  • Чувствителни данни не се събират, когато не бива

Тестване на записите и дневниците

Всяко обаждане има два резултата: какво е преживял обаждащият се и какво записвате вие. След всеки тест проверете обобщението, транскрипцията, оставеното съобщение и всяка последваща задача. Правилни ли са имената и числата? Точно ли е посочена причината за обаждането? Измисля ли нещо обобщението? Перфектен разговор с грешен запис пак изпраща екипа в грешната посока. Вижте AI обобщения на разговорите.

Решение: успех или провал

Преди да започнете, запишете правилото, което решава дали агентът може да стартира. То може да е просто: никакви измислени отговори в тестовия набор, всеки случай на предаване работи и посочен дял от честите въпроси получава правилен отговор. Писменото правило предотвратява старт под натиска на крайния срок.

Решения за старт

Критерият е записан предварителноОценява се след това
ЯснотаВсички знаят летватаЛетвата се мести според настроението
НатискЛесно е да се каже „още не“Трудно е да се устои на краен срок
УченеПровалите сочат поправкиПровалите стават спорове
ЗаписРезултатите могат да се сравняват във времетоНяма с какво да се сравни

Водете дневник на всеки тест: дата, версия на агента, обаждащ се, въпрос, резултат и поправка. Когато промените промпта или знанията, повторете предишните тестове, защото поправките понякога чупят други неща.

Струва си да тествате и тихите провали, за които никой обаждащ се няма да се оплаче, но които ви струват с времето. Проверете дали обаждане, което приключва рано, все пак създава смислен запис, дали обаждащ се, който затваря по средата на изречението, не оставя недовършена задача и дали повторните обаждащи се се обслужват последователно. Тези случаи рядко влизат в първия план за тестване, а съставляват изненадващо голяма част от реалния трафик.

След старта

Тестването не спира, когато агентът заработи на живо. Започнете с ограничен обхват, например извън работно време или при препълване, слушайте извадка от реални разговори всеки ден през първата седмица и разширявайте, когато се почувствате уверени. Преглеждайте въпросите, на които агентът не е могъл да отговори, и добавяйте липсващите знания. Пазете възможност да се върнете към предишна версия, ако промяна влоши нещата. Първата седмица на вашия AI рецепционист е добро допълнение.

Тестване в Call

Call ви дава няколко начина да тествате AI агент, преди да го направят обаждащите се. Playground в AI agents ви позволява да чатите с агент, показва колко бележки от знанията са съвпаднали с всеки отговор и ги изброява, и ви позволява да оцените отговор или да научите агента на по-добър. Test call на агента звъни на вашия собствен телефон през неговата линия, така че го чувате като обаждащ се; всеки такъв тест е истинско, таксувано обаждане. Съветникът за настройка предлага също разговор на екрана, обаждане до вашия телефон и обаждане от агента до даден номер. Проверка за готовност, която се изпълнява, без да се набира никой, показва какво още липсва за AI обаждане от линията.

Practice calls, в AI agents, What it learned, позволяват на AI обаждащи се да звънят на вашите агенти на японски и английски. Всяко обаждане получава оценка, а поуките чакат вашия преглед, така че нищо не се променя без вас. Преди рискова промяна запазете restore point на агента, за да можете да се върнете, и използвайте Set live или Set to draft, за да контролирате кога агентът отговаря. Вижте Настройване на AI агент в Call за самата настройка.

Често задавани въпроси

Колко тестови обаждания са достатъчни?

Достатъчно, за да обхванете всеки чест въпрос, всеки случай на предаване и извадка от трудно поведение. За малък агент това може да са десетки обаждания; продължавайте, докато новите тестове спрат да откриват нови проблеми.

Кой трябва да тества агента?

Хора, които не са го създавали, включително такива с различни акценти и навици при телефониране. Те питат по начини, за които създателят не се сеща.

Трябва ли да тествам по истински телефон?

Да. Телефонният звук е по-тесен и по-шумен от компютърния и много проблеми се появяват само по истинска линия.

Какво се счита за сериозен провал?

Измислен отговор, изречен уверено, неуспешно предаване или запис, който изпраща екипа в грешна посока. Те трябва да блокират старта.

Трябва ли да тествам отново след малки промени?

Да, поне основен набор. Малки промени в промпта или знанията могат да променят отговори другаде.

Какво да следя след старта на живо?

Отначало слушайте извадка от разговори всеки ден, отбелязвайте въпросите без отговор и следете предаванията и оплакванията. Подобрявайте знанията всяка седмица.

Правете тестови и тренировъчни обаждания с AI агента си в Call

В демо конзолата можете да изпробвате входящи обаждания в симулация.

Свързани ръководства

Технологии за гласов AI

Промптове за по-добри обобщения на обажданията

Как да напишете промпт, който превръща транскрипцията на обаждане в кратка, точна бележка: за кого е, какво да включва, правила срещу измислици и как да го тествате.

Редакционен екип на Call ·
Технологии за гласов AI

Анализ на настроението при обаждания: ползи и граници

Какво измерва анализът на настроението при обажданията, кога помага за сортиране и тенденции, кога подвежда и как да го ползвате без несправедливи решения.

Редакционен екип на Call ·
Технологии за гласов AI

SIP транк: как бизнес обажданията преминават през интернет

Какво е SIP транк, с какво се различава от традиционните телефонни линии, какво да проверите за кодеци, канали и резервиране и как да изберете доставчик.

Редакционен екип на Call ·
Технологии за гласов AI

Модели „реч към реч“ срещу каскадни гласови вериги

Два начина за изграждане на телефонен гласов агент: модели „реч към реч“ и каскадни вериги. В какво е силен всеки, къде е слаб и как да изберете чрез тестване.

Редакционен екип на Call ·