(19)国家知识产权局 (12)发明 专利申请 (10)申请公布号 (43)申请公布日 (21)申请 号 20221042421 1.2 (22)申请日 2022.04.22 (71)申请人 国网江苏省电力有限公司 地址 210024 江苏省南京市 鼓楼区上海路 215号 申请人 国网江苏省电力有限公司超高压分 公司　 南京邮电大 学 (72)发明人 丁俊峰　王昊　刘丰　陈轩　 顾德扬　陈蕾　王磊　周健　 吴德勇　戴挈军　鞠保兴　陶双柱　 张龙　高锋　俞海燕　郎伊紫禾　 赵翔飞　 (74)专利代理 机构 南京纵横知识产权代理有限 公司 32224 专利代理师 董建林(51)Int.Cl. G06V 20/40(2022.01) G06V 20/52(2022.01) G06V 40/10(2022.01) G06V 40/20(2022.01) G06V 10/82(2022.01) G06N 3/04(2006.01) G06N 3/08(2006.01) G06T 7/60(2017.01) G06Q 50/06(2012.01) (54)发明名称 一种变电站现场作业的越界违章 监测方法 (57)摘要 本发明公开了一种变电站现场作业的越界 违章监测方法， 包括： 通过移动端摄像头获取变 电站作业现场的图像数据； 根据预构建的移动端 检测模型对图像数据进行识别， 获取图像数据中 的三角锥、 作业人员以及安全帽的检测框； 根据 三角锥和作业人员的检测框进行周界越界监测； 基于RTK定位技术获取安全帽的真实高度； 根据 安全帽的真实高度和检测框以及作业人员的检 测框进行高程越界监测； 本发明不仅能有效识别 地面违章行为， 还能识别高程越界违章行为， 且 部署灵活， 操作简单， 实时性强， 可重用性 好。 权利要求书4页 说明书9页 附图2页 CN 114764900 A 2022.07.19 CN 114764900 A 1.一种变电站现场作业的越界违章 监测方法， 其特 征在于， 包括： 通过移动端摄 像头获取变电站作业现场的图像数据； 根据预构建的移动端检测模型对图像数据进行识别， 获取图像数据中的三角锥、 作业 人员以及安全帽的检测框； 根据三角锥和作业人员的检测框进行周界越界监测； 基于RTK定位 技术获取安全帽的真实高度； 根据安全帽的真实高度和检测框以及作业人员的检测框进行高程越界监测。 2.根据权利要求1所述的一种变电站现场作业的越 界违章监测方法， 其特征在于， 所述 移动端监测模型的构建包括： 将PyTorc h框架下训练好的YOLOv5模型转 为ONNX模型； 将ONNX模型转 为NCNN模型并作为移动端监测模型； 其中， 所述YOLOv5模型的训练包括： 获取变电站作业现场的图像信息并添加三角锥和作业人员的检测框标签； 根据添加检测框标签的图像信息生成样本图像并构建样本集； 将样本集划分为训练集和验证集； 初始化YOLOv5模型， 并将训练集中样本图像输入YOLOv5模型进行训练； 将验证集中样本图像输入训练后的YOLOv5模型进行验证， 若达到预设需求， 则训练完 成。 3.根据权利要求1所述的一种变电站现场作业的越 界违章监测方法， 其特征在于， 所述 根据三角锥和作业人员的检测框进行周界越界监测包括： 以三角锥检测框底部 内侧端点连线围成的多边形区域作为安全区域， 多边形区域以外 为危险区域； 以作业人员检测框左下角和右下角坐标作为检测点， 获取检测点在地 面的投影点； 基于PNpoly算法判断两个投影点位于安全区域或多边形区域， 若两个投影点均 位于安 全区域， 则所述工作人员未地面越界； 若两个投影点均位于危险区域， 则所述工作人员地面 越界； 若两个投影点分别位于安全区域和危险区域， 则所述工作人员正在地 面越界。 4.根据权利要求3所述的一种变电站现场作业的越 界违章监测方法， 其特征在于， 所述 三角锥设置有四个， 分别记为A、 B、 C、 D； 以三角锥A、 B、 C、 D的检测框底部内侧端点连线围成 的长方形区域ABCD作为 安全区域。 5.根据权利要求4所述的一种变电站现场作业的越 界违章监测方法， 其特征在于， 所述 获取检测点在地 面的投影点包括： 获取AC连线侧图像数据中的三角锥和作业人员的检测框； 以作业人员p检测框底部中点向地面做投影线以及投影线的延长线， 投影线与AC连线 的交点记为M， 延长线与BD连线的交点记为 N； 根据AC连线侧图像数据中的三角锥和作业人员的检测框计算AC连线侧图像数据中M和 N点在AC连线和BD连线上的位置比例； 获取AB连线侧图像数据中的三角锥和作业人员的检测框； 根据AC连线侧图像数据中M和N点在AC连线和BD连线上的位置比例， 获取AB 连线侧图像 数据中M和N 点在AC连线和BD连线上的位置；权　利　要　求　书 1/4 页 2 CN 114764900 A 2以AB连线侧图像数据中M和N点在AC连线和BD连线上的位置设置虚拟三角锥E、 F， 且虚 拟三角锥E检测框的右下角横坐标与M点重合， 虚拟三角锥F检测框的左下角横坐标与N点重 合； 根据AB连线侧图像数据中的三角锥和作业人员的检测框计算AB连线侧图像数据中M、 N 点的坐标； 将AB连线侧图像数据中作业人员p检测框底部中点在地 面的投影点记为H点； 根据AB连线侧图像数据中M、 N 点的坐标计算AB连线侧图像数据中H点的坐标； 根据AB连线侧图像数据中H点的坐标计算AB连线侧图像数据中作业人员p检测框左下 角和右下角在地 面的投影点 坐标。 6.根据权利要求5所示的一种变电站现场作业的越 界违章监测方法， 其特征在于， 所述 计算AC连线侧图像数据中M和N 点在AC连线和BD连线上的位置比例包括： 获取AC连线侧图像数据中作业人员p检测框的左上角和右下角的横坐标 确定 AC连线侧图像数据中M和N 点的横坐标xM、 xN： 获取AC连线侧图像数据中三角锥A、 B的检测框的左上角的横坐 标 三角锥C、 D的 检测框的右下角的横坐标 确定AC连线侧图像数据中M和N点在AC连线和BD连线上 的位置比例K1和K2： 7.根据权利要求6所示的一种变电站现场作业的越 界违章监测方法， 其特征在于， 所述 计算AB连线侧图像数据中M、 N 点的坐标包括： 获取AB连线侧图像数据中三角锥A、 C的检测框的左上角的纵坐标 三角锥A、 C 的检测框的右下角的纵坐标 确定三角锥E的检测框的高度hE： 获取AB连线侧图像数据中三角锥B、 D的检测框的左上角的纵坐标 三角锥B、 D 的检测框的右下角的纵坐标 确定三角锥F的检测框的高度hF： 权　利　要　求　书 2/4 页 3 CN 114764900 A 3