(19)国家知识产权局 (12)发明 专利申请 (10)申请公布号 (43)申请公布日 (21)申请 号 202210679850.3 (22)申请日 2022.06.15 (71)申请人 京东方科技 集团股份有限公司 地址 100015 北京市朝阳区酒仙桥路10号 (72)发明人 周立强　夏友祥　沈艳　王之旭　 (74)专利代理 机构 北京律智知识产权代理有限 公司 11438 专利代理师 王辉 (51)Int.Cl. G06F 9/451(2018.01) G06F 3/0481(2022.01) G06F 3/04845(2022.01) G06F 3/04883(2022.01) G06N 3/00(2006.01) G06V 40/10(2022.01)G06V 10/75(2022.01) G06V 10/774(2022.01) (54)发明名称 用户协议的处理方法及 装置、 存储介质以及 电子设备 (57)摘要 本公开是关于一种用户协议的处理方法及 装置、 存储介质以及电子设备， 涉及人机交互技 术领域， 该方法包括： 响应于作用于显示终端的 显示界面上的预设坐标点的触控事件， 得到输入 图像信息； 根据预设图像信息与预设应用场景之 间的第一关联关系， 确定与所述输入图像信息对 应的待切换应用场景； 根据所述预设应用场景与 预设用户协议之间的第二关联关系， 确定与所述 待切换应用场景对应的待切换用户协议； 在所述 显示界面上对 所述待切换用户协议进行显示。 该 方法实现了多用户协议的自动切换。 权利要求书3页 说明书18页 附图7页 CN 115033327 A 2022.09.09 CN 115033327 A 1.一种用户协议的处 理方法， 其特 征在于， 包括： 响应于作用于 显示终端的显示界面上的预设坐标点的触控 事件， 得到输入图像信息； 根据预设图像信 息与预设应用场景之间的第 一关联关系， 确定与所述输入图像信 息对 应的待切换应用场景； 根据所述预设应用场景与 预设用户协议之间的第 二关联关系， 确定与 所述待切换应用 场景对应的待切换用户协议； 在所述显示界面上对所述待切换用户协议进行显示。 2.根据权利要求1所述的用户协议的处理方法， 其特征在于， 响应于作用于显示终端的 显示界面上的预设坐标点的触控 事件， 得到输入图像信息， 包括： 响应于当前用户作用于所述显示终端的显示面板上包括的预设坐标点的触控事件， 确 定输入图像信息的起始位置节点、 中间位置节点以及终止位置节点； 根据所述起始位置节点、 中间位置节点、 终止位置节点以及所述起始位置节点、 中间位 置节点、 终止位置节点之间的轨 迹点序列， 生成所述输入图像信息 。 3.根据权利要求1所述的用户协议的处理方法， 其特征在于， 所述待切换应用场景包括 普通模式场景、 办公模式场景、 儿童/老人模式场景、 安全模式场景以及自定义模式场景中 的至少一种； 所以待切换用户协议包括与普通模式场景对应的第 一用户协议、 与 所述办公模式场景 对应的第二用户协 议、 与所述儿童/ 老人模式场景对应的第三用户协 议、 与所述安全模式场 景对应的第四用户协议以及与所述自定义模式场景对应的第五用户协议中的至少一种。 4.根据权利要求3所述的用户协议的处理方法， 其特征在于， 对所述待切换用户协议进 行显示， 包括： 当所述待切换应用场景为普通模式场景， 所述待切换用户协议为第一用户协议时， 在 所述显示界面的第一预设区域以第一预设显示方式对所述第一用户协议进 行显示， 并在所 述显示界面的第二预设区域对预览所述第一用户协议所需的第一预设时间进行计时显示； 当所述待切换应用场景为办公模式场景， 所述待切换用户协议为第二用户协议时， 在 所述显示界面的第一预设区域以第二预设显示方式对所述第二用户协议进 行显示， 并在所 述显示界面的第二预设区域对预览所述第二用户协议所需的第二预设时间进行计时显示； 当所述待切换应用场景为儿童/老人模式场景， 所述待切换用户协议为第三用户协议 时， 在所述显示界面的第一预设区域以第三预设方式对所述第三用户协议进行显示， 并对 所述第三用户协议进行播报； 当所述待切换应用场景为安全模式场景， 所述待切换用户协议为第 四用户协议时， 在 所述显示界面的第一预设区域以第四预设显示方式对所述第四用户协议进行显示。 5.根据权利要求1所述的用户协议的处理方法， 其特征在于， 在响应于作用于显示终端 的显示界面上 的预设坐标点的触控事件， 得到输入图像信息之前， 所述用户协议的处理方 法还包括： 获取待检测手势 的手势深度图， 并根据所述手势深度图， 计算所述待检测手势所具有 的当前点云数据； 根据所述当前点云数据在预设的手势搜索空间中为所述待检测手势匹配目标几何手 势；权　利　要　求　书 1/3 页 2 CN 115033327 A 2在确定所述预设的手势搜索空间中存在与 所述待检测手势对应的目标几何手势时， 在 所述显示终端的显示界面上显示所述预设坐标点。 6.根据权利要求5所述的用户协议的处理方法， 其特征在于， 在所述在确定所述预设的 手势搜索空间中存在与所述待检测手势对应的目标几何手势时之后， 所述用户协议的处理 方法还包括： 根据预设图像信 息与预设应用场景之间的第 一关联关系， 确定与所述目标几何手势对 应的当前应用场景； 获取与所述当前应用场景对应的当前用户协议， 并对所述当前用户协议进行显示。 7.根据权利要求5所述的用户协议的处理方法， 其特征在于， 根据 所述当前点云数据在 预设的手势搜索空间中为所述待检测手势匹配目标几何手势， 包括： 基于预设的图像处理模型， 计算所述当前点云数据中的三维点坐标到所述预设的手势 搜索空间中所包括的标准几何手势的模型表面的距离 差值； 从所述距离差值中取出最小值， 并将最小值对应的标准几何手势作为所述目标几何手 势。 8.根据权利要求7所述的用户协议的处理方法， 其特征在于， 所述标准几何手势包括当 前帧标准几何手势、 与当前帧标准几何手势对应的上一帧标准几何手势以及与当前帧标准 几何手势对应的下一帧标准几何手势； 其中， 基于预设的图像处理模型， 计算所述当前点云数据中的三维点坐标到所述预设 的手势搜索空间中所包括的标准几何手势的模型表面的距离 差值， 包括： 对待训练 的图像处理模型进行初始化， 得到待训练 的图像处理模型中包括的待优化参 数； 将所述手势深度图的当前点云数据以及上一帧标准几何手势的手部位姿参数输入至 待训练的图像处 理模型中， 得到所述手势深度图与上一帧标准几何手势之间的预测距离； 根据所述手势深度图与上一帧标准几何手势之间的实际距离以及预测距离构建损失 函数， 并根据预设的优化 算法以及所述损失函数对待优化 参数进行优化； 根据优化后的参数对待训练的图像处理模型进行更新， 得到训练完成的图像处理模 型， 并利用训练完成的图像处理模型分别计算所述当前帧标准几何手势和/或下一帧标准 几何手势与所述深手势深度图之间的距离 差值。 9.根据权利要求8所述的用户协议的处理方法， 其特征在于， 所述预设的优化算法包括 粒子群优化 算法和/或最近点优化 算法； 其中， 当所述预设的优化算法为粒子群优化算法时， 根据预设的优化算法 以及所述损 失函数对待优化 参数进行优化， 包括： 根据所述待优化参数生成粒子种群， 并随机设置所述粒子种群中各粒子的起始位置以 及起始速度； 其中， 每一个待优化 参数分别对应一个粒子； 根据所述损失函数计算各所述粒子的适应度， 并对各所述粒子在 当前位置的适应度以 及其在最好位置的适应度进行比较， 如果所述粒子在当前位置的适应度优于其在最好位置 的适应度， 则将当前位置作为个 体最好位置， 若否， 则不变； 对各所述粒子在 当前位置的适应度以及种群最好位置的适应度进行比较， 如果所述粒 子在当前位置的适应度优于种群最好位置的适应度， 则将当前位置作为全局 最好位置， 若权　利　要　求　书 2/3 页 3 CN 115033327 A 3