惠州网站建设翻译,罗店网站建设,WordPress百家号同步插件,phpcms做网站页面开发文章目录1. 智能呼叫流程2. 细节处理1. 呼叫字符串指定拨号计划2. 外呼的拨号计划3. 语音打断的支持1. 智能呼叫流程
用户与机器人对话通常都是以文本的形式进行#xff0c;但是借助 ASR 和 TTS 技术#xff0c;以语音电话为载体的智能呼叫系统成为可能。智能呼叫系统涉及到…
文章目录1. 智能呼叫流程2. 细节处理1. 呼叫字符串指定拨号计划2. 外呼的拨号计划3. 语音打断的支持1. 智能呼叫流程
用户与机器人对话通常都是以文本的形式进行但是借助 ASR 和 TTS 技术以语音电话为载体的智能呼叫系统成为可能。智能呼叫系统涉及到多种不同类型的应用以 FreeSWITCH 为交互核心的一种简要实现如下图所示关键点为以下几个步骤 esl 客户端通过内连向 FreeSWITCH 实例下发 originate 命令呼叫目标用户FreeSWITCH 进行呼叫动作等待用户接通呼叫后会话状态流转FreeSWITCH 根据呼叫字符串确定这个 channel 上路由命中的拨号计划执行拨号计划上配置的 socket APP 外连目标服务器esl 客户端接收 FreeSWITCH 外连连接后订阅该 channel 上的相应事件并与 AI 机器人对话获取开场白获得开场白文本后 esl 客户端下发命令在用户 channel 上执行 play_and_detect_speech APP实现开场白放音并开启 ASR 识别用户语音FreeSWITCH 与外部集成的 MRCP 服务器交互使用其 TTS 和 ASR 功能用户说话后esl 客户端监听相应事件获取 ASR 的识别结果然后使用识别到的文本与 AI 机器人进行对话得到响应后从步骤5重新开始执行直到用户挂机 2. 细节处理
1. 呼叫字符串指定拨号计划
呼叫外部用户的命令示例如下该例子中通过拨号字符串指定了以下信息 通过网关 10086 呼叫目标用户 1008611在用户会话 CS_ROUTING 阶段使用 10008611 作为 destination_number 去路由匹配 XML 拨号计划配置进而确定在这个 channel 上的执行动作 originate {originate_timeout10,origination_uuid888888,origination_caller_id_number1008611,origination_caller_id_name1008611}sofia/gateway/10086/1008611 1008611 XML default2. 外呼的拨号计划
呼叫用户的拨号计划配置示例如下需注意以下几点 通过 tts_engine 指定默认使用的 tts 引擎该参数候选值为安装目录下 conf/mrcp_profiles 文件夹中的 XML 文件配置的 profile 名称使用 tts_voice 指定默认音色通过 play_and_detect_speech_close_asr 参数指定 play_and_detect_speech APP 执行完毕后自动关闭 ASR extension nameoutboundcondition fielddestination_number expression^1008611action applicationring_ready/action applicationanswer/action applicationset datatts_engineunimrcp:unimrcp-mrcp2/action applicationset datatts_voiceaixia/action applicationset dataplay_and_detect_speech_close_asrtrue/action applicationsocket data127.0.0.1:9000 async full//condition
/extension3. 语音打断的支持
play_and_detect_speech APP 会先打开 ASR 识别用户语音然后才放音放音时会被用户的语音流打断。如果要实现不可打断的特性可通过将放音和 ASR 识别拆成两个步骤达到目的具体处理如下 与用户交互时不使用 play_and_detect_speech而是在 channel 上直接调用 speak 等 APP 放音esl 监听到放音 APP 执行完毕再下发 detect_speech APP 打开 ASR 识别用户语音
