(19)国家知识产权局 (12)发明 专利申请 (10)申请公布号 (43)申请公布日 (21)申请 号 202111646551.1 (22)申请日 2021.12.2 9 (71)申请人 浙江大华 技术股份有限公司 地址 310051 浙江省杭州市滨江区滨安路 1187号 (72)发明人 吕辰　张兴明　殷俊　潘华东　 孙鹤　 (74)专利代理 机构 杭州华进联浙知识产权代理 有限公司 3 3250 专利代理师 成荣强 (51)Int.Cl. G06V 40/20(2022.01) G06K 9/62(2022.01) G06N 3/04(2006.01) G06N 3/08(2006.01)G06V 10/764(2022.01) G06V 10/82(2022.01) (54)发明名称 人体行为识别方法、 系统、 电子装置和存储 介质 (57)摘要 本申请涉及一种人体行为识别方法、 系统、 电子装置和存储介质， 其中， 该人体行为识别方 法包括： 获取扶梯场景下的待检测图像， 根据该 待检测图像确定位于扶梯上的各个人体目标； 获 取该扶梯场景下的人体运动检测角度， 基于该人 体运动检测角度计算该人体目标对应的当前行 为特征， 从该人体目标中筛选出该当前行为特征 符合预设倒地特征的目标作为待检测目标； 其 中， 该预设倒地特征用于指示该人体目标在倒地 状态下的行为特征； 获取该待检测目标的姿态信 息， 根据该姿态信息确定该待检测目标是否存在 倒地行为。 通过本申请， 解决了扶梯场景下倒地 行为识别的准确性和效率低的问题。 权利要求书3页 说明书14页 附图3页 CN 114463838 A 2022.05.10 CN 114463838 A 1.一种人体行为识别方法， 其特 征在于， 所述方法包括： 获取扶梯场景下的待检测图像， 根据所述待检测图像确定位于扶梯上的各个人体目 标； 获取所述扶梯场景下的人体运动检测角度， 基于所述人体运动检测角度计算所述人体 目标对应的当前行为特征， 从所述人体目标中筛选出所述当前行为特征符合预设倒地特征 的目标作为待检测目标； 其中， 所述预设倒地特征用于指示所述人体目标在倒地状态下 的 行为特征； 获取所述待检测目标的姿态信 息， 根据所述姿态信 息确定所述待检测目标是否存在倒 地行为。 2.根据权利要求1所述的人体行为识别方法， 其特征在于， 所述根据所述待检测图像确 定位于扶梯上的各个人体目标包括： 获取至少一帧历史图像， 并将所述历史图像和所述待检测图像依次输入至预先训练 的 人体检测模型， 以输出 人体部位信息； 利用目标跟踪算法， 针对所述历史图像和所述待检测图像中的所述人体部位信 息分别 进行深度特征信息提取， 以得到每帧所述历史图像和所述待检测图像中对应于所述人体部 位信息的 的目标框结果； 根据所有所述目标框结果之间的关联信息， 确定所述人体目标。 3.根据权利要求2所述的人体行为识别方法， 其特征在于， 所述根据所有所述目标框结 果之间的关联信息， 确定所述人体目标包括： 获取所有所述深度特征信 息之间的两两匹配结果， 在所述两两匹配结果指示匹配成功 的情况下， 检测所述深度特 征信息对应的目标框之间的交并比信息； 在所述交并比信 息达到预设的交并比阈值的情况下， 利用所述目标跟踪算法生成所述 目标框结果对应的唯一标识， 并根据所述目标框结果和所述唯一标识确定所述人体目标。 4.根据权利要求1所述的人体行为识别方法， 其特征在于， 在所述人体运动检测角度包 括人体比例的情况下， 所述基于所述人体运动检测角度计算所述人体目标对应的当前行为 特征， 从所述人体目标中筛选出所述当前行为特征符合预设倒地特征的目标作为待检测目 标包括： 获取至少一帧历史图像； 根据所述人体运动检测角度计算所述待检测图像中用于表征每个所述人体目标对应 的人体比例的第一当前 行为特征； 在所述历史图像的帧数小于预设的第 一帧数阈值的情况下， 将预设的第 一人体比例阈 值作为对应于所述当前 行为特征的第一预设倒地特 征； 在所述历史图像的帧数大于或等于所述第 一帧数阈值的情况下， 计算每帧所述历史图 像中每个人体目标对应的人体比例的历史行为特征， 根据所有所述历史行为特征的均值统 计结果获取第二人体比例阈值， 将所述第二人体比例阈值作为所述第一预设倒地特 征； 根据所述第 一当前行为特征与所述第 一预设倒 地特征之间的比较结果， 得到人体比例 筛选结果； 根据所述人体比例筛 选结果得到所述待检测目标。 5.根据权利要求4所述的人体行为识别方法， 其特征在于， 在所述人体运动检测角度还权　利　要　求　书 1/3 页 2 CN 114463838 A 2包括运动轨迹的情况 下， 所述根据所述人体比例筛 选结果得到所述待检测目标包括： 根据所述人体运动检测角度计算所述待检测图像中所述人体目标在预设特征方向上 的实时坐标以得到第二当前 行为特征； 获取所述历史图像中各个所述人体目标在所述预设特征方向上的运动轨迹， 并根据 所 述运动轨迹获取对应于所述第二当前 行为特征的第二预设倒地特 征； 根据所述第 二当前行为特征与所述第 二预设倒 地特征之间的距离计算结果， 得到运动 轨迹筛选结果； 根据所述人体比例筛 选结果和所述 运动轨迹筛选结果得到所述待检测目标。 6.根据权利要求5所述的人体行为识别方法， 其特征在于， 在所述人体运动检测角度还 包括人体特征直线的情况下， 所述根据所述人体比例筛选结果和所述运动轨迹筛选结果得 到所述待检测目标包括： 根据所述人体运动检测角度计算所述人体目标中至少两条中心特征直线之间的角度 以得到第三当前行为特征， 将预设的角度阈值作为对应于所述第三当前行为特征的第三预 设倒地特征， 并根据所述第三当前行为特征与所述第三预设倒地特征之间的比较结果， 得 到特征直线筛 选结果； 根据所述人体比例筛选结果、 所述运动轨迹筛选结果和所述特征直线筛选结果得到所 述待检测目标。 7.根据权利要求1所述的人体行为识别方法， 其特征在于， 所述获取所述待检测目标的 姿态信息包括： 将所述待检测目标输入至预先训练 的姿态估计模型， 以输出人体关键点和姿态分类结 果； 根据所述人体关键点得到人体特征直线信 息， 并根据所述人体特征直线信 息以及预设 的特征阈值确定关键点检测结果； 根据所述姿态分类结果和所述关键点检测结果确定所述姿态信息 。 8.根据权利要求1至7任一项所述的人体行为识别方法， 其特征在于， 所述确定所述待 检测目标 是否存在倒地行为之后， 所述方法还 包括： 获取至少一帧历史图像； 获取在预设时间范围内的所述历史图像和所述待检测图像中确定存在所述倒地行为 的数量； 在所述数量达到预设的第 二帧数阈值的情况下判断倒 地事件发生， 并响应于所述倒地 事件， 发送报警信息 至报警设备进行报警。 9.一种人体行为识别系统， 其特征在于， 所述系统包括： 图像采集设备和主控装置； 其 中， 所述图像采集设备和所述主控 装置连接； 所述图像采集设备用于采集扶梯场景下的待检测图像， 并将所述待检测图像发送至所 述主控装置； 所述主控 装置用于执 行如权利要求1至8中任一项所述的人体行为识别方法。 10.一种电子装置， 包括存储器和 处理器， 其特征在于， 所述存储器中存储有计算机程 序， 所述处理器被设置为运行所述计算机程序以执行权利要求1至8中任一项 所述的人体行 为识别方法。权　利　要　求　书 2/3 页 3 CN 114463838 A 3