(19)国家知识产权局 (12)发明 专利申请 (10)申请公布号 (43)申请公布日 (21)申请 号 202111629007.6 (22)申请日 2021.12.2 9 (71)申请人 南京东奇智能制造 研究院有限公司 地址 210008 江苏省南京市雨 花台区宁双 路19号云密城10号楼 9层 (72)发明人 费树岷　黄晓晖　费然　夏兴岩　 (74)专利代理 机构 北京德崇智捷知识产权代理 有限公司 1 1467 专利代理师 黄雪 (51)Int.Cl. G06V 20/40(2022.01) G06V 40/16(2022.01) G06K 9/62(2022.01) G06T 7/246(2017.01) G06T 7/73(2017.01)G06N 3/04(2006.01) G06V 10/80(2022.01) G06V 10/82(2022.01) (54)发明名称 一种设备定位信号与视频定位信息的融合 方法 (57)摘要 本发明公开了一种设备定位信号与视频定 位信息的融合方法， 包括如下步骤： 采集当前视 频图像的目标信息， 并采集当前视频图像的目标 特征图像信息； 接收目标信息数据和目标特征图 像信息数据， 同时， 获取视频图像中目标的中心 点位置， 依据中心点位置和目标的尺 寸信息获得 目标的位置信息； 对采集到的目标信息数据和目 标特征图像信息数据进行过滤除杂整合处理； 对 处理后的数据信息进行识别， 根据人脸识别技术 对实时脸部信息和预先存储的个人信息进行识 别匹配处理， 得到确定的目标。 本发明保证了特 征提取的最大化， 有助于后续目标人物视频和实 时位置跟踪关联匹配的准确性提升， 跟踪处理速 度更快， 精度更高。 权利要求书1页 说明书3页 附图1页 CN 114463666 A 2022.05.10 CN 114463666 A 1.一种设备定位信号与视频定位信息的融合方法， 其特 征在于， 包括如下步骤： S1采集当前视频图像的目标信息， 并采集当前视频图像的目标 特征图像信息； S2接收目标信息数据和目标特征图像信息数据， 同时， 获取视频图像中目标的中心点 位置， 依据中心点 位置和目标的尺寸信息获得目标的位置信息； S3对采集到的目标信息数据和目标 特征图像信息数据进行 过滤除杂整合处 理； S4对处理后的数据信 息进行识别， 根据 人脸识别技术对实时脸部信 息和预先存储的个 人信息进行识别匹配处 理， 得到确定的目标； S5基于特征提取网络获取视频图像 中确定后的目标特征信 息， 关联目标的特征信 息和 位置信息实现跟踪； S6通过定位终端设备发送实时位置信 息进行人员位置的确定， 根据 人员信息与人员位 置信息对人员位置在地图上进行 标记； S7根据标记的人员位置信息在地图上进行 人员位置标记， 并显示。 2.根据权利要求1所述的一种设备定位信号与视频定位信 息的融合方法， 其特征在于， 所述步骤S5的特 征提取网络包括依次连接的RFB模块、 至少两组卷积层、 池化层和残差块。 3.根据权利要求1所述的一种设备定位信号与视频定位信 息的融合方法， 其特征在于， 所述步骤S 5的视频图像经过RFB模块， 再进入 卷积层和池化层来降低向量 维度， 最后经残差 块输出提取到的目标 特征信息。 4.根据权利要求2所述的一种设备定位信号与视频定位信 息的融合方法， 其特征在于， 所述RFB模块包括分别连接的至少三个卷积层和三个空洞卷积层， 图像经卷积层和空洞卷 积层实现特 征融合， 融合的特 征通过激活函数输出 特征图像。 5.根据权利要求1所述的一种设备定位信号与视频定位信 息的融合方法， 其特征在于， 所述步骤S1之前， 对视频图像进 行预处理， 得到视频图像的二值连通图， 二值连通图中包含 至少一个连通区域， 每个连通区域对应视频图像中的至少一个目标对 象， 获取二值连通图 中各个连通区域的位置信息 。 6.根据权利要求5所述的一种设备定位信号与视频定位信 息的融合方法， 其特征在于， 对视频图像进行预处理具体为： 从视频图像提取前景图像， 将前景图像进行二值化处理得 到视频图像的二值图像， 依次对视频图像的二值图像进 行闭运算、 膨胀运算、 连通运算得到 视频图像的二 值连通图。 7.根据权利要求1所述的一种设备定位信号与视频定位信 息的融合方法， 其特征在于， 所述步骤S3过滤除杂整合处理具体为： 将接 收的数据信息进行拆分， 将拆分后的数据信息 中无用数据信息进行 过滤， 得到有用的数据信息， 将有用的数据信息进行合并处 理。 8.根据权利要求1所述的一种设备定位信号与视频定位信 息的融合方法， 其特征在于， 所述步骤S5目标跟踪方法包括， 如边角跟踪法、 双边缘跟踪算法、 区域平衡算法、 形心跟踪 算法。权　利　要　求　书 1/1 页 2 CN 114463666 A 2一种设备定位信号与视频定位信息的融合 方法 技术领域 [0001]本发明涉及图像处理技术领域， 尤其涉及 一种设备定位信号与视频定位信息的融 合方法。 背景技术 [0002]目标跟踪是指对视频图像中的目标进行检测， 提取， 识别， 预测和跟踪的过程， 通 过其目标的运动位置的变化， 使人们 更好的掌握和了解 目标的运动情况。 目前应用到的领 域越来越广泛。 例如： 汽车安全驾驶领域中， 以车辆前方道路上的行人和车辆作为目标， 通过目标跟踪 获取行人和车辆的位置以及速度进行 预估和判断， 从而提高驾驶 安全性； 在一些安防领域， 需要实时根据监控视频图像确认特殊目标(人、 车辆或物体)的 运行轨迹以及特定区域人员的流动变化情况(例如人员聚集的路口、 学 校等路段的监控)； 在医疗分析 领域， 可以通过多目标跟踪对人体内的目标细胞运动情况进行监控。 [0003]然而， 现有的目标定位处理速度慢， 且不能与目标人物进行视频和实时位置关联 定位， 定位精度不高。 发明内容 [0004]基于背景技术存在的技术问题， 本发明提出了一种设备定位信号与视频定位信息 的融合方法。 [0005]本发明提出的一种设备定位信号与视频定位信息的融合方法， 包括如下步骤： S1采集当前视频图像的目标信息， 并采集当前视频图像的目标 特征图像信息； S2接收目标信息数据和目标特征图像信息数据， 同时， 获取视频图像中目标的中 心点位置， 依据中心点 位置和目标的尺寸信息获得目标的位置信息； S3对采集到的目标信息数据和目标 特征图像信息数据进行 过滤除杂整合处 理； S4对处理后的数据信息进行识别， 根据人脸识别技术对实时脸部信息和预先存储 的个人信息进行识别匹配处 理， 得到确定的目标； S5基于特征提取网络获取视频图像中确定后的目标特征信息， 关联目标的特征信 息和位置信息实现跟踪； S6通过定位终端 设备发送实时位置信息进行人员位置的确定， 根据人员信息与人 员位置信息对人员位置在地图上进行 标记； S7根据标记的人员位置信息在地图上进行 人员位置标记， 并显示。 [0006]优选的， 所述步骤S5的特征提取网络包括依次连接的RFB模块、 至少两组卷积层、 池化层和残差块。 [0007]优选的， 所述步骤S5的视频图像经过RFB模块， 再进入卷积层和池化层来降低向量 维度， 最后经残差块输出提取到的目标 特征信息。 [0008]优选的， 所述RFB模块包括分别连接的至少三个卷积层和三个空洞卷积层， 图像经说　明　书 1/3 页 3 CN 114463666 A 3