(19)国家知识产权局 (12)发明 专利 (10)授权公告 号 (45)授权公告日 (21)申请 号 202210933855.4 (22)申请日 2022.08.04 (65)同一申请的已公布的文献号 申请公布号 CN 115019240 A (43)申请公布日 2022.09.06 (73)专利权人 成都西交智汇大 数据科技有限公 司 地址 611731 四川省成 都市高新区西芯大 道3号3栋6层602室 (72)发明人 张志鸿　周永乐　陈博　 (74)专利代理 机构 北京集智东方知识产权代理 有限公司 1 1578 专利代理师 刘林　陈攀 (51)Int.Cl. G06V 20/40(2022.01) G06V 40/20(2022.01) G06V 10/764(2022.01) G06N 20/00(2019.01) G06N 3/08(2006.01) (56)对比文件 CN 114627407 A,202 2.06.14CN 114419736 A,2022.04.29 CN 111753635 A,2020.10.09 CN 114743270 A,202 2.07.12 CN 10934 4692 A,2019.02.15 CN 113239797 A,2021.08.10 CN 112295617 A,2021.02.02 CN 113935361 A,202 2.01.14 CN 110781777 A,2020.02.1 1 CN 107273857 A,2017.10.20 US 2021089761 A1,2021.0 3.25 帅桃等.基 于三维影 像后处理可视化平台的 实验教学模式探讨. 《医学影 像学杂志》 .2021,第 31卷(第08 期), Chengming Ma等.Multimodal Art Pose Recognition and Interacti on With Human Intelligence Enhancement. 《Fro nt Psychol》 .2021,第12卷 (续) 审查员 罗倩 (54)发明名称 化学实验操作 的评分方法、 装置、 设备及可 读存储介质 (57)摘要 本发明提供了一种化学实验操作的评分方 法、 装置、 设备及可读 存储介质， 涉及信息技术领 域， 包括： 获取待评分视频， 待评分视频包括化学 实验中操作人员的上半身动作视频； 根据待评分 视频得到轨迹信息， 轨迹信息包括手部关节运动 轨迹和实验器材运动轨迹； 根据轨迹信息输入至 操作识别数学模 型中计算得到识别结果； 根据 识 别结果和预设评分规则计算得到评分结果。 本发 明通过将待评分视频进行处理得到手部关节运 动轨迹和实验器材运动轨迹， 同时将历史视频集 合进行特征提取， 通过K近邻算法训练后建立操作识别数学模 型， 进而实现对化学实验操作自动 识别和评分， 具有识别速度快、 评分准确度高的 优点。 [转续页] 权利要求书2页 说明书7页 附图3页 CN 115019240 B 2022.11.11 CN 115019240 B (56)对比文件 Wafaa S.Sayed等.AI-based adaptive personalized content presentati on and exercises navig ation for an ef fective and engaging E-learning platform. 《Multimedia Tools and Ap plications》 .2022,2/2 页 2[接上页] CN 115019240 B1.一种化学实验操作的评分方法， 其特 征在于， 包括： 获取待评分视频， 所述待评分视频包括 化学实验中操作人员的上半身动作视频； 根据所述待评分视频计算得到轨迹信 息， 所述轨迹信 息包括手部关节运动轨迹和实验 器材运动轨 迹； 根据所述轨迹信 息输入至操作识别数学模型中计算得到识别结果， 所述操作识别数学 模型为通过历史视频集合通过机器学习训练得出， 所述历史视频集合中的一个元素为一个 操作名称及对应的实验操作视频集； 根据识别结果和预设评分规则计算得到 评分结果； 其中， 所述 根据识别结果和预设评分规则计算得到 评分结果， 包括： 根据所述识别结果得到 至少一个评分点和所述评分点对应的分值； 根据所有所述评分点按照评分点的时序关系建立评分模板； 根据所述评分模板、 所述分值和预设的权 重计算得到 评分结果。 2.根据权利要求1所述的化学实验操作的评分方法， 其特征在于,根据 所述待评分视频 计算得到 轨迹信息， 包括： 将所述待评分视频内的每一帧进行动作提取 得到待识别图像序列； 将所述待识别图像序列通过背景减除得到上半身图像序列和实验器材图像序列； 根据所述上半身图像序列和预设的关节标注数 学模型计算得到手部关节运动轨 迹； 根据所述实验器材图像序列得到实验器材运动轨 迹。 3.根据权利要求1所述的化学实验操作的评分方法， 其特征在于， 根据 所述轨迹信 息输 入至操作识别数 学模型中计算得到识别结果， 包括： 根据所述历史视频集合得到轨迹信 息集合， 所述轨迹信 息集合内一个元素为一个视频 标签及对应的关节轨 迹信息集 合； 将每一个所述关节轨迹信 息集合基于带拒 绝的K近邻算法计算得到标准关节运动轨迹 集合； 将标准关节运动轨 迹集合得到进行 特征提取得到标准特 征数据集； 根据所述标准特征数据集合预设的相似度阈值建立操作识别数学模型， 将所述轨迹信 息作为输入值， 求 解所述操作识别数 学模型得到识别结果。 4.一种化学实验操作的评分装置， 其特 征在于， 包括： 获取模块， 用于获取待评分视频， 所述待评分视频包括化学实验中操作人员的上半身 动作视频； 提取模块， 用于根据所述待评分视频计算得到轨迹信息， 所述轨迹信息包括手部关节 运动轨迹和实验器材运动轨 迹； 分析模块， 用于根据所述轨 迹信息输入至操作识别数 学模型中计算得到识别结果； 评分模块， 用于根据识别结果和预设评分规则计算得到 评分结果； 所述评分模块， 包括： 第十三处理单元， 用于根据 所述识别结果得到至少一个评分点和所述评分点对应的分 值； 第十四处 理单元， 用于根据所有所述评分点按照评分点的时序关系建立评分模板； 第五计算单元， 用于根据所述评分模板、 用于所述分值和预设的权重计算得到评分结权　利　要　求　书 1/2 页 2 CN 115019240 B 3