(19)国家知识产权局 (12)发明 专利申请 (10)申请公布号 (43)申请公布日 (21)申请 号 202210967239.0 (22)申请日 2022.08.12 (71)申请人 南京邮电大 学 地址 210037 江苏省南京市 鼓楼区新模范 马路66号 (72)发明人 明峥　成孝刚　宋丽敏　许立环　 周阳　朱家祥　胡斐　张艳彬　 (74)专利代理 机构 南京纵横知识产权代理有限 公司 32224 专利代理师 邓东旭 (51)Int.Cl. G06V 40/10(2022.01) G06V 10/80(2022.01) G06V 10/764(2022.01) G06V 10/82(2022.01)G06N 3/04(2006.01) G06N 3/08(2006.01) G01V 8/10(2006.01) (54)发明名称 一种工业级应用的危险禁区人员检测系统 及方法 (57)摘要 本发明公开了目标检测技术领域的一种工 业级应用的危险禁区人员检测系统及方法， 包 括： 获取判定区域的可见光图像、 红外图像与温 度反馈数据； 对 可见光图像和红外图像通过深度 学习网络进行特征提取； 对特征提取后的可见光 图像通过可见光人员识别算法 处理后， 将可见光 人员识别结果导入可见光人员识别模块进行人 员判定； 对 特征提取后的红外图像通过红外人员 识别算法 处理后， 利用温度模块对温度反馈数据 进行处理， 再将红外人员识别结果与测温结果导 入红外人员识别模块进行人员判定。 本发明大大 提高了危险区域人员检测的准确性与可靠性， 提 高程序对人的整体或者躯干的检出能力， 防止程 序发生漏检与误检 。 权利要求书2页 说明书12页 附图4页 CN 115331258 A 2022.11.11 CN 115331258 A 1.一种工业级应用的危险禁区人员检测方法， 其特 征是， 包括： 获取判定区域的可 见光图像、 红外图像与温度反馈数据； 对可见光图像和红外图像通过深度学习网络进行 特征提取； 对特征提取后的可见光图像通过可见光人员识别算法处理后， 将可见光人员识别结果 导入可见光人员识别模块进行 人员判定； 对特征提取后的红外图像通过红外人员识别算法处理后， 利用温度模块对温度反馈数 据进行处 理， 再将红外人员识别结果与测温结果 导入红外人员识别模块进行 人员判定； 响应于可见光人员识别 模块/红外人员识别 模块判定有人的信号， 将可见光识别结果/ 红外人员识别结果与判定区域的温度进行可见光温度坐标匹配后， 进 行多模态综合特征融 合； 基于多模态综合特 征融合结果判定是否有人。 2.根据权利要求1所述的工业级应用的危险禁区人员检测方法， 其特征是， 所述可见光 图像由至少两台可见光相机对判定区域共同进 行识别得到， 所述红外图像和温度反馈数据 由至少一台红外热成像相机对判定区域识别得到， 所述可见光相机和红外热成像相机进 行 校准处理后对判定区域进行识别。 3.根据权利要求2所述的工业级应用的危险禁区人员检测方法， 其特征是， 所述多模态 综合特征融合包括： 将测温结果与两台可见光相机的可见光人员判定结果进行特征融合， 分别得到融合 Ⅰ 与融合Ⅱ； 将两台可 见光相机的可 见光人员判定结果进行 特征融合， 得到融合 Ⅲ； 将测温结果与红外人员判定结果进行 特征融合， 得到融合 Ⅳ。 4.根据权利要求3所述的工业级应用的危险禁区人员检测方法， 其特征是， 基于多模态 综合特征融合结果判定是否有 人， 包括： 响应于融合 Ⅰ、 融合Ⅱ、 融合Ⅲ和融合Ⅳ中存在至少 两个融合结果判定有人的信号， 则判定有人， 否则判定没人。 5.根据权利要求1所述的工业级应用的危险禁区人员检测方法， 其特征是， 所述深度 学 习网络采用CIOU_L oss+DIOU_nm s的方式对可 见光图像和红外图像进行 特征提取。 6.一种工业级应用的危险禁区人员检测系统， 其特 征是， 包括： 区域识别模块： 用于获取判定区域的可 见光图像、 红外图像与温度反馈数据； 特征提取模块： 用于对可 见光图像和红外图像通过深度学习网络进行 特征提取； 可见光识别处理模块： 用于对特征提取后的可见光图像通过可见光人员识别算法处理 后， 将可见光人员识别结果 导入可见光人员识别模块进行 人员判定； 红外识别处理模块： 用于对特征提取后的红外 图像通过红外人员识别算法处理后， 利 用温度模块对温度反馈数据进 行处理， 再将红外人员识别结果与测温结果导入红外人员识 别模块进行 人员判定； 特征融合模块： 用于响应于可见光人员识别 模块/红外人员识别模块判定有人的信号， 将可见光识别结果/红外人员识别结果与判定区域的温度进行可见光温度坐标匹配后， 进 行多模态综合特 征融合； 多模态综合判定模块： 用于基于多模态综合特 征融合结果判定是否有人。 7.一种工业级应用的危险禁区人员检测装置， 其特 征是， 包括处 理器及存 储介质；权　利　要　求　书 1/2 页 2 CN 115331258 A 2所述存储介质用于存 储指令； 所述处理器用于根据所述指令进行操作以执行根据权利要求1～5任一项所述方法的 步骤。 8.计算机可读存储介质， 其上存储有计算机程序， 其特征是， 该程序被处理器执行时实 现权利要求1～5任一项所述方法的步骤。权　利　要　求　书 2/2 页 3 CN 115331258 A 3