(19)国家知识产权局 (12)发明 专利申请 (10)申请公布号 (43)申请公布日 (21)申请 号 202210872864.7 (22)申请日 2022.07.21 (71)申请人 中国平安人寿保险股份有限公司 地址 518000 广东省深圳市福田区福田街 道益田路5033号平安金融中心14、 15、 16、 37、 41、 4 4、 45、 46、 54、 58、 59层 (72)发明人 王彪　 (74)专利代理 机构 广州嘉权专利商标事务所有 限公司 4 4205 专利代理师 余凯欢 (51)Int.Cl. G06F 9/451(2018.01) G06F 3/01(2006.01) G06F 3/0484(2022.01) G06F 40/30(2020.01)G06V 30/10(2022.01) G10L 15/22(2006.01) (54)发明名称 问题反馈方法和装置、 电子设备及存 储介质 (57)摘要 本申请实施例提供了一种问题反馈方法和 装置、 电子设备及存储介质， 属于计算机技术领 域。 该方法包括： 响应于终端的第一交互事件， 展 示与第一交互事件对应的问题反馈界面； 响应于 在问题反馈界面上触发的第二交互事件， 获取反 馈语音信息， 对反馈语音信息进行语音识别得到 第一文本信息； 对第一文本信息进行语义分析得 到语义分析结果， 根据语义分析结果回调对应的 应用界面， 并对应用界面进行图像截 取得到第一 图像信息； 根据第一文本信息和第一图像信息生 成问题反馈文件， 并将问题反馈文件 上传至服务 器。 本申请实施例能够提高问题反馈的效率。 权利要求书2页 说明书13页 附图6页 CN 115113967 A 2022.09.27 CN 115113967 A 1.一种问题反馈方法， 其特 征在于， 所述方法包括： 响应于终端的第一交 互事件， 展示与所述第一交 互事件对应的问题反馈界面； 响应于在所述问题反馈界面上触发的第二交互事件， 获取反馈语音信息， 对所述反馈 语音信息进行语音识别得到第一文本信息； 对所述第一文本信 息进行语义分析得到语义分析结果， 根据所述语义分析结果回调对 应的应用界面， 并对所述应用界面进行图像截取 得到第一图像信息； 根据所述第 一文本信 息和所述第 一图像信 息生成问题反馈文件， 并将所述问题反馈文 件上传至服 务器。 2.根据权利要求1所述的问题反馈方法， 其特征在于， 所述响应于终端的第一交互事 件， 展示与所述第一交 互事件对应的问题反馈界面， 包括： 确定所述第一交 互事件的交互标识； 根据所述交 互标识在预设的问题反馈界面库中匹配对应的问题反馈界面； 通过所述终端 展示所述问题反馈界面。 3.根据权利要求1所述的问题反馈方法， 其特征在于， 所述响应于在所述问题反馈界面 上触发的第二交互事件， 获取反馈语音信息， 对所述反馈语音信息进行语音识别得到第一 文本信息， 包括： 当检测到第一区域触发的第一触控操作， 通过 所述终端对当前环境进行语音录制； 当检测到所述第一区域触发的第二触控操作， 通过所述终端停止语音录制， 得到所述 反馈语音信息； 将所述反馈语音信息输入预先训练好的语音识别模型， 得到候选文本信息， 并通过所 述问题反馈界面展示所述 候选文本信息； 当检测到第 二区域触发的第 三触控操作， 返回通过所述终端对当前环境进行语音录制 的步骤； 当检测到所述第 二区域触发的第四触控操作， 确定所述候选文本信 息为所述第 一文本 信息； 其中， 所述第一区域和所述第二区域均位于所述问题反馈界面上。 4.根据权利要求1所述的问题反馈方法， 其特征在于， 所述对所述第 一文本信 息进行语 义分析得到语义分析结果， 根据所述语义分析结果回调对应的应用界面， 并对所述应用界 面进行图像截取 得到第一图像信息， 包括： 将所述第一文本信息 输入预先训练好的语义分析模型， 得到语义分析 结果； 获取所述终端的当前进程列表， 根据 所述语义分析结果在所述当前进程列表中进行遍 历， 确定对应的第一应用进程； 通过所述终端展示所述第 一应用进程的应用界面， 并根据 预设的图像截取模板对所述 应用界面进行截取， 得到第一图像信息； 其中， 所述图像截取模板包括预先设置的图像截取边框、 遮挡区域尺寸以及遮挡区域 位置。 5.根据权利要求1所述的问题反馈方法， 其特征在于， 所述根据 所述第一文本信 息和所 述第一图像信息生成问题反馈文件， 包括： 根据所述语义分析 结果对所述第一文本信息进行信息抽取， 得到若干个关键词；权　利　要　求　书 1/2 页 2 CN 115113967 A 2对所述第一图像信息进行OCR文字识别， 并根据文字识别结果和所述关键词对所述第 一图像信息进行 标注， 得到第二图像信息； 对所述第一文本信息和所述第二图像信息进行打包处 理生成问题反馈文件。 6.根据权利要求1所述的问题反馈方法， 其特征在于， 所述根据 所述第一文本信 息和所 述第一图像信息生成问题反馈文件， 包括： 根据所述语义分析 结果对所述第一文本信息进行信息抽取， 得到若干个关键词； 对所述第一图像信息进行OCR文字识别， 并根据文字识别结果和所述关键词对所述第 一图像信息进行 标注， 得到第二图像信息； 获取所述终端的系统日志信息； 对所述第一文本信 息、 所述第 二图像信 息以及所述系统日志信 息进行打包处理生成问 题反馈文件； 其中， 所述系统日志信息包括用户操作路径、 CPU利用率、 内存利用率、 磁盘空间利用率 以及网络状态中的至少一种。 7.根据权利要求1至 6中任一项所述的问题反馈方法， 其特 征在于： 所述第一交互事件包括抖动事件、 旋转事件、 按压事件、 抬腕事件、 翻腕事件、 低头事 件、 抬头事 件、 摇头事 件、 语音输入 事件以及体感事 件中的至少一种； 所述第二交互事件包括单击事件、 长按事件、 缩放事件、 滑动事件以及拖拽事件中的至 少一种。 8.一种问题反馈装置， 其特 征在于， 所述装置包括： 界面展示模块， 被配置为响应于终端的第一交互事件， 展示与所述第一交互事件对应 的问题反馈界面； 语音识别模块， 被配置为响应于在所述问题反馈界面上触发的第二交互事件， 获取反 馈语音信息， 对所述反馈语音信息进行语音识别得到第一文本信息； 图像截取模块， 被配置为对所述第一文本信息进行语义分析得到语义分析结果， 根据 所述语义分析结果回调对应的应用界面， 并对所述应用界面进行图像截取得到第一图像信 息； 文件上传模块， 被配置为根据 所述第一文本信 息和所述第 一图像信 息生成问题反馈文 件， 并将所述问题反馈文件上传至服 务器。 9.一种电子设备， 其特征在于， 所述电子设备包括存储器、 处理器、 存储在所述存储器 上并可在所述处理器上运行的程序以及用于实现所述处理器和所述存储器之间的连接通 信的数据总线， 所述程序被所述处理器执行时实现如权利要求1至7中任一项 所述的问题反 馈方法的步骤。 10.一种存储介质， 所述存储介质为计算机可读存储介质， 用于计算机可读存储， 其特 征在于， 所述存储介质存储有一个或者多个程序， 所述一个或者多个程序可被一个或者多 个处理器执行， 以实现如权利要求1至7中任一项所述的问题反馈方法的步骤。权　利　要　求　书 2/2 页 3 CN 115113967 A 3