← 返回列表

一种对话机器人的对话方法及其对话系统

申请号: CN202410016504.6
申请人: 四川中电启明星信息技术有限公司; 国网信息通信产业集团有限公司
申请日期: 2024/1/5

摘要文本

本发明公开了一种对话机器人的对话方法及其对话系统,涉及对话机器人技术领域,本发明通过不断监听服务大厅内的环境信息来捕获唤醒口令,并对说出唤醒口令且出现在对话机器人摄像头视窗范围内的对话用户的数据进行采集,通过比对采集的数据内多个对话用户面部图像数据和唤醒音频数据,对对话用户进行锁定,避免同一时刻出现多个需要对话的对话用户导致对话机器人锁定服务对象不准确或无法锁定情况的发生,噪声传感器周期性对服务大厅内所有区域进行分析,结合当前区域内所在人数选定当前时刻最适对话区域,由服务引导单元引导服务对象到该区域进行对话,降低了从环境中识别服务对象语音难度的同时加快对话服务的速率,保障了对话服务的质量。

专利详细信息

项目 内容
专利名称 一种对话机器人的对话方法及其对话系统
专利类型 发明授权
申请号 CN202410016504.6
申请日 2024/1/5
公告号 CN117519488B
公开日 2024/3/29
IPC主分类号 G06F3/01
权利人 四川中电启明星信息技术有限公司; 国网信息通信产业集团有限公司
发明人 李强; 赵峰; 叶林峰; 高攀; 李欢欢
地址 四川省成都市郫都区现代工业港(南片区)西源大道2688号; 北京市昌平区北七家未来科技城国家电网园区

专利主权项内容

1.一种对话机器人的对话方法,所述对话机器人搭载有高清摄像头、语音接收设备和噪声传感器;其特征在于,所述对话方法包括以下步骤:步骤一:对话机器人在服务大厅内通过语音接收设备不断监听环境信息,捕获唤醒口令;当捕获到唤醒口令时,将当前时刻高清摄像头采集到的用户的面部图像数据、语音接收设备采集到的唤醒音频数据汇总,生成当前时刻的唤醒信息数据;步骤二:比对当前时刻的唤醒信息数据中,每个对话用户的面部图像数据内人脸面部占据其面部图形数据的面积以及人脸与对话机器人搭载的高清摄像头、语音接收设备的间隔距离,确定当前对话机器人的锁定对象,并生成当前对话机器人的锁定对象数据,具体如下:步骤S11:获取当前时刻唤醒信息数据中包含的所有对话用户,依次标记为A1、A2、...、Aa,a≥1;步骤S12:基于对话用户A1的面部图像数据获取采集到的对话用户A1的人脸面部的面积B1,并计算获取采集对话用户A1面部图像数据时其脸部与对话机器人搭载的高清摄像头的间隔距离C1;步骤S13:基于对话用户A1唤醒音频数据,通过分析音频信号在不同频率上的能量分布,计算获取对话用户A1与对话机器人搭载的语音接收设备的间隔距离D1;步骤S14:利用公式 计算获取对话用户A1的锁定评估指数E1,锁定评估指数E1用于衡量对话用户A1是否具备跟踪锁定的条件评估指数,所述α1和α2为预设的占比系数;步骤S15:按照步骤S11到步骤S14计算获取对话用户A1、A2、...、Aa的锁定评估指数E1、E2、...、Ea并获取其中最大值Emax,将Emax对应的对话用户确定为当前对话机器人的锁定对象;并获取Emax对应的对话用户的面部图像数据、服装特征数据和唤醒音频数据后依据其生成当前对话机器人的锁定对象数据;步骤三:将服务大厅内为对话用户划分的等候区域等分割成若干个区域,针对每个区域,周期性对区域内噪声和其相邻多个区域内的噪声大小进行分析得到每个区域的噪声筛选量,并结合每个区域内当前时刻所存在的人数来对区域进行筛选,确定当前时刻最适对话区域;步骤四:引导当前对话机器人的锁定对象前往当前时刻最适对话区域进行对话。