Технологии голосового ИИ

Barge-in: как голосовой ИИ реагирует на перебивание звонящим

Что такое barge-in, почему перебивания на телефонной линии сложны и как писать реплики, задавать настройки и тестировать, чтобы голосовой агент звучал живо.

Редакция Call · Опубликовано · Читать 5 мин

В обычном разговоре люди постоянно перебивают друг друга: чтобы поправить деталь, сказать «да, вот это» или просто потому, что уже всё поняли. Телефонная система, настаивающая на том, чтобы договорить фразу, кажется деревянной, и звонящие вскоре начинают говорить поверх неё или сдаются. Barge-in — функция, которая позволяет голосовому агенту справляться с этим правильно.

Человек говорит в телефонную гарнитуру во время звонка
Иллюстрация

В статье объясняется, что такое barge-in, почему это сложнее, чем кажется, как писать реплики и настраивать параметры, чтобы всё работало, и как это тестировать. Она входит в цикл руководств по голосовому ИИ; более широкую картину см. в статьях Как работает голосовой ИИ и Очерёдность реплик в голосовых агентах.

Что означает barge-in

Голосовой агент обычно работает в цикле: слушает, понимает, отвечает, говорит. Без barge-in агент перестаёт слушать, пока говорит, поэтому всё, что звонящий произносит во время ответа, теряется. С barge-in система продолжает слушать и во время собственной речи. Обнаружив, что звонящий начал говорить, она останавливает звук, отбрасывает остаток запланированного ответа и воспринимает перебивание как следующую реплику.

Что происходит, когда звонящий перебивает

  1. Агент говоритОтвет звучит, а система продолжает слушать.
  2. Речь обнаруженаСистема решает, что звук на линии — это говорящий человек.
  3. Воспроизведение останавливаетсяАгент быстро замолкает, чтобы два голоса не накладывались надолго.
  4. Перебивание записаноСказанное звонящим расшифровывается как новая реплика.
  5. Новый ответАгент отвечает на перебивание, а не на фразу, в середине которой был.

Почему это важно по телефону

Перебивания — не просто невежливость. Они несут информацию. Звонящий, вклинившийся с «нет, во вторник», исправляет ошибку. Тот, кто говорит «да, да», хочет, чтобы вы поторопились. Тот, кто молчит, но вздыхает, вероятно, теряет терпение. Система, игнорирующая эти сигналы, порождает затянутые звонки с плохим концом.

Частые причины перебиваний

  • ИсправитьАгент неверно понял дату, имя или номер.
  • Ответить раньшеЗвонящий знает вопрос и отвечает, не дожидаясь конца.
  • ПропуститьАгент повторяет то, что им уже известно.
  • ПеренаправитьЗвонящему нужно совсем другое.
  • ПодтвердитьБыстрое «да» или «нет», для которого не нужна вся фраза.

Разрешение перебиваний ещё и позволяет писать более короткие реплики, поскольку не нужно бояться, что длинный ответ запрёт звонящего. Это хорошо сочетается с тем, как люди слушают по телефону.

Почему это сложнее, чем кажется

Идея проста, но телефонная линия — шумный и несовершенный канал. Нужно решить сразу несколько задач.

Эти задачи тянут в разные стороны. Очень чувствительный детектор реагирует быстро, но даёт ложные срабатывания. Осторожный спокоен, но кажется нерасторопным. Хорошие системы сочетают акустическое обнаружение с проверкой длительности и содержания звука. Два из составных блоков объясняют статьи Определение голосовой активности и Качество звука в телефонии.

Как писать реплики, подходящие для перебивания

Одни настройки не сделают разговор естественным. Написание реплик агента не менее важно.

Писать с учётом перебивания

Плохо поддаётся перебиваниюХорошо поддаётся перебиванию
ДлинаДлинные абзацы с несколькими мыслямиОдно-два коротких предложения
ПорядокСначала предыстория, ответ в концеСначала ответ, потом подробности
ВариантыЗачитывается длинный списокПредлагает два-три и спрашивает, какой
ПодтвержденияПовторяет всё в концеПодтверждает ключевую деталь сразу, как только она названа
ТонОфициальный и витиеватыйПростой и разговорный

Когда агент подтверждает информацию, делайте это допускающим перебивание. Например, «Ваша запись на вторник в десять. Верно?» приглашает к быстрому «да» ещё до конца вопроса. Избегайте фраз, где важное слово стоит последним.

Настройки и компромиссы

В большинстве голосовых систем есть параметр, разрешающий или запрещающий перебивания, а в некоторых — более тонкие настройки чувствительности обнаружения. Отключение перебиваний может иметь смысл в узких случаях, например для юридически обязательного заявления, которое нужно выслушать целиком. В остальных случаях для звонящих лучше оставлять их включёнными.

Связанный параметр — сколько длится тишина до завершения звонка. Слишком мало — и звонящего, ищущего документ, отключат. Слишком много — и оборвавшийся звонок занимает линию. Подгоните под поведение ваших звонящих: тому, кто проверяет номер заказа, нужно больше времени, чем тому, кто говорит «да».

СитуацияРекомендуемый подход
Обязательное раскрытие или текстЗапретите перебивание только для этой части и сделайте её короткой
Быстрые вопросы «да» или «нет»Разрешите перебивания и принимайте ответ раньше
Звонящие с шумных мобильных линийТщательно проверьте ложные срабатывания; делайте реплики короткими
Пожилые или медленнее говорящиеДопускайте щедрые паузы, прежде чем система решит, что реплика закончена
Исходящие звонкиПроверьте эхо самого агента и автоответчики

Пожилые звонящие и люди с особенностями речи заслуживают особого внимания. Они могут дольше молчать, говорить медленнее или повторяться. Если система вступает слишком рано, она будет говорить поверх них. Идеи см. в статье ИИ-администратор и пожилые звонящие.

Тестирование barge-in

Тестируйте на настоящих звонках, а не только на чистых записях. Составьте набор сценариев и прогоняйте их после каждого изменения настроек или промптов.

Тестовые случаи для barge-in

  • Перебейте в первую секунду реплики и проверьте, что начало ваших слов записано
  • Перебейте ближе к концу и убедитесь, что агент не повторяет уже законченную фразу
  • Скажите тихое «угу» во время длинной реплики и посмотрите, продолжит ли агент
  • Покашляйте, постучите по телефону или дайте собаке залаять и посмотрите, остановится ли агент
  • Позвоните из машины, с улицы и по громкой связи
  • Промолчите и проверьте, как долго звонок ждёт
  • Исправьте деталь посреди фразы, например дату, и проверьте, что поправка учтена

Фиксируйте, как быстро агент останавливается и не потеряны ли слова. Более широкий метод тестирования описан в статье Тестирование голосового ИИ, а о задержке между последним словом звонящего и ответом агента — в статье Задержка голосового ИИ.

Barge-in в Call

В Call голосовые настройки агента включают переключатель «Разрешить перебивания», позволяющий звонящим говорить поверх агента. По умолчанию он включён. Рядом — параметр, сколько секунд тишины завершают звонок, а также лимиты одновременных звонков и самого длинного звонка. Всё это находится на странице «Голос агента» вместе с голосом и промптом.

В исходящих ИИ-звонках фоновый шум фильтруется, и агент перестаёт говорить, только когда человек действительно что-то говорит; возвращающийся на линию голос самого агента не принимается за речь человека. Сами реплики следуют правилу одного-двух коротких разговорных предложений, что подходит для перебивания. Проверьте агента тестовым звонком на своём телефоне, а затем прочитайте детали звонка: сколько говорила каждая сторона и как часто говорили одновременно.

Частые вопросы

Что такое barge-in в голосовом агенте?

Это возможность звонящего перебить агента, пока тот говорит. Агент останавливается, слушает и отвечает на сказанное звонящим.

Почему мой голосовой агент иногда останавливается без причины?

Фоновый шум, эхо собственного голоса или кашель могут быть приняты за речь. Более короткие реплики, лучший звук и аккуратные настройки чувствительности уменьшают это.

Стоит ли отключить перебивания?

Редко. Они полезны для естественных звонков. Отключение может подойти для короткого обязательного заявления, которое нужно выслушать целиком.

Что такое поддакивание?

Небольшой звук вроде «угу» или «ага», показывающий, что слушающий следит за разговором. Хороший агент не считает его просьбой остановиться.

Как сделать реплики более удобными для перебивания?

Делайте их короткими, ставьте ответ первым и задавайте быстрые подтверждающие вопросы. Избегайте длинных списков и ключевого слова в конце.

Как правильно тестировать barge-in?

Делайте настоящие звонки из разных мест, перебивайте в разные моменты, добавляйте шум и тишину и проверяйте, не потеряны ли слова. Повторяйте после каждого изменения.

Настройте перебивание в Call

В демо-консоли можно попробовать входящие звонки в режиме симуляции.

Похожие руководства

Технологии голосового ИИ

Промпты для качественных резюме звонков: шаблоны и проверка

Как написать промпт, превращающий расшифровку звонка в короткую точную заметку: для кого она, что в неё включать, правила против выдумок и как её проверить.

Редакция Call ·
Технологии голосового ИИ

Анализ тональности звонков: применение, ограничения, ответственность

Что измеряет анализ тональности звонков, где он помогает с сортировкой и трендами, где вводит в заблуждение и как избежать несправедливых автоматических решений.

Редакция Call ·
Технологии голосового ИИ

SIP-транк: как деловые звонки идут через интернет

Что такое SIP-транк, чем он отличается от обычных телефонных линий, что проверить по кодекам, каналам и резервированию и как выбрать провайдера.

Редакция Call ·
Технологии голосового ИИ

Модели speech-to-speech и каскадные голосовые конвейеры: сравнение

Два способа построить телефонного голосового агента: модели speech-to-speech и каскадные конвейеры. Сильные и слабые стороны и как выбрать по результатам тестов.

Редакция Call ·