(19)国家知识产权局 (12)发明 专利申请 (10)申请公布号 (43)申请公布日 (21)申请 号 202211137804.7 (22)申请日 2022.09.19 (71)申请人 深圳市北 科瑞声科技股份有限公司 地址 518036 广东省深圳市福田区梅林街 道梅都社区中康路136号深圳新一代 产业园3栋1201-6 (72)发明人 黄石磊　刘轶　廖晨　程刚　 蒋志燕　 (74)专利代理 机构 深圳智汇远见知识产权代理 有限公司 4 4481 专利代理师 蒋学超 (51)Int.Cl. G06F 40/174(2020.01) G06F 40/295(2020.01) G06F 40/35(2020.01)G06V 20/40(2022.01) G06V 40/16(2022.01) (54)发明名称 基于远程流调的表单填写方法、 装置、 设备 及介质 (57)摘要 本申请涉及基于远程流调的表单填写 方法、 装置、 设备及存储介质。 通过将第二终端基于待 填写表单生成的第一语音询问信息发送至第一 终端， 实时获取第一终端对应的第一用户的脸部 实时视频， 并获取第一用户基于第一语音询问信 息反馈的语音回复信息， 基于识别语音回复信息 及脸部实时视频， 得到第一用户的实时情绪参 数， 提取语音回复信息对应的关键词信息， 将语 音回复信息、 关键词信息及实时情绪参数发送至 第二终端， 以供第二终端对应的第二用户填写待 填写表单。 本申请第二用户可以根据语音回复信 息及关键词的提示更准确地完成表单填写， 并根 据实时情绪参数判断被调查用户的语音回复信 息的可信度， 从而提高流调表单填写的准确性。 权利要求书2页 说明书11页 附图3页 CN 115204127 A 2022.10.18 CN 115204127 A 1.一种基于远程 流调的表单填写方法， 其特 征在于， 所述方法包括： 响应第一终端或第 二终端发起的表单填写请求， 将所述第 二终端基于待填写表单生成 的第一语音询问信息发送至所述第一终端； 实时获取所述第 一终端对应的第 一用户的第 一脸部实时视频， 并获取所述第 一用户基 于所述第一语音询问信息反馈的第一语音回复信息； 识别所述第 一语音回复信 息及所述第 一脸部实时视频， 得到所述第 一用户的第 一实时 情绪参数； 提取所述第一语音回复信息对应的第一关键词信息， 将所述第一语音回复信息、 所述 第一关键词信息及所述第一 实时情绪参数发送至所述第二终端， 以供所述第二终端对应的 第二用户填写所述待填写表单。 2.如权利要求1所述的基于远程流调的表单填写方法， 其特征在于， 在得到所述第 一用 户的第一实时情绪 参数之后， 所述方法还 包括： 监测所述第 一实时情绪参数， 当监测到所述第 一实时情绪参数的变化幅度大于预设值 时， 向所述第二终端发送第一 提示信息。 3.如权利要求2所述的基于远程流调的表单填写方法， 其特征在于， 在向所述第 二终端 发送第一 提示信息之后， 所述方法还 包括： 对所述第一语音回复信息执 行预设的标记处 理； 及/或 将所述第二终端基于所述第一提示信息重新生成的第二语音询问信息发送至所述第 一终端， 以供 所述第一用户基于所述第二语音询问信息反馈第二语音回复信息； 获取所述第 二语音回复信 息对应的第 二脸部实时视频， 识别所述第 二语音回复信 息及 所述第二 脸部实时视频， 得到所述第一用户的第二实时情绪 参数； 提取所述第二语音回复信息对应的第二关键词信息， 将所述第二语音回复信息、 所述 第二关键词信息及所述第二 实时情绪参数发送至所述第二终端， 以供所述第二终端对应的 第二用户填写所述待填写表单。 4.如权利要求1所述的基于远程流调的表单填写方法， 其特征在于， 在提取所述第 一语 音回复信息对应的第一关键词信息之后， 所述方法还 包括： 判断所述第一关键词信息中是否包 含地理关键词； 若是， 从预设数据库获取所述第一用户在预设时间段的地理位置信息， 并将所述地理 位置信息发送至所述第二 终端进行显示， 以供所述第二用户校验所述地理关键词 与所述地 理位置信息是否匹配。 5.如权利要求 4所述的基于远程 流调的表单填写方法， 其特 征在于， 所述方法还 包括： 当所述地理关键词与所述地理位置信息匹配时， 执行将所述第一语音回复信息、 所述 第一关键词信息及所述第一实时情绪 参数发送至所述第二终端的步骤； 当所述地理关键词与所述地理位置信息不匹配时， 生成第二提示信息， 将所述第二提 示信息、 所述第一语音回复信息、 所述第一关键词信息及所述第一实时情绪参数发送至所 述第二终端。 6.如权利要求1所述的基于远程流调的表单填写方法， 其特征在于， 所述识别所述第 一 语音回复信息及所述第一 脸部实时视频， 得到所述第一用户的第一实时情绪 参数， 包括： 将所述第一语音回复信息 输入预先训练的语音情绪分析模型， 得到语音情绪 参数；权　利　要　求　书 1/2 页 2 CN 115204127 A 2将所述第一 脸部实时视频输入预 先训练的视频情绪分析模型， 得到 视频情绪 参数； 融合所述语音情绪 参数及所述视频情绪 参数， 得到所述第一实时情绪 参数。 7.如权利要求1所述的基于远程流调的表单填写方法， 其特征在于， 所述提取所述第 一 语音回复信息对应的第一关键词信息， 包括： 将所述第一语音回复信息转换为文本信息； 利用关键词提取算法提取 出所述文本信息对应的第一关键词信息 。 8.一种基于远程 流调的表单填写装置， 其特 征在于， 所述装置包括： 发送模块： 用于响应第一终端或第二终端发起的表单填写请求， 将所述第二终端基于 待填写表单生成的第一语音询问信息发送至所述第一终端； 获取模块： 用于实时获取所述第一终端对应的第一用户的第一脸部实时视频， 并获取 所述第一用户基于所述第一语音询问信息反馈的第一语音回复信息； 识别模块： 用于识别所述第一语音回复信息及所述第一脸部实时视频， 得到所述第一 用户的第一实时情绪 参数； 填写模块： 用于提取所述第一语音回复信息对应的第一关键词信息， 将所述第一语音 回复信息、 所述第一关键词信息及所述第一实时情绪参数发送至所述第二终端， 以供所述 第二终端对应的第二用户填写所述待填写表单。 9.一种电子设备， 其特征在于， 包括处理器、 通信接口、 存储器和通信总线， 其中， 处理 器， 通信接口， 存 储器通过通信总线完成相互间的通信； 存储器， 用于存放计算机程序； 处理器， 用于执行存储器上所存放的程序时， 实现权利要求1至7中任一项所述的基于 远程流调的表单填写方法。 10.一种计算机可读存储介质， 其上存储有计算机程序， 其特征在于， 所述计算机程序 被处理器执行时实现如权利要求1至7中任一项所述基于远程 流调的表单填写方法。权　利　要　求　书 2/2 页 3 CN 115204127 A 3