(19)国家知识产权局 (12)发明 专利申请 (10)申请公布号 (43)申请公布日 (21)申请 号 202111617512.9 (22)申请日 2021.12.27 (71)申请人 天翼云科技有限公司 地址 100007 北京市东城区青龙胡同甲1 号、 3号2幢2层20 5-32室 (72)发明人 袁畅　陈丽君　王革委　 (51)Int.Cl. G06T 7/00(2017.01) G06T 7/136(2017.01) G06T 7/73(2017.01) G06T 5/00(2006.01) G06N 3/08(2006.01) (54)发明名称 一种螺栓检测模型构建及螺栓松动检测方 法 (57)摘要 本发明公开了一种螺栓检测模型构建及螺 栓松动检测方法， 获取包含目标螺栓的图像集进 行标注并确定对应的标签信息； 将所述图像集中 包含的图像输入至预设神经网络进行处理与训 练直至得到满足条件的螺栓检测模 型； 利用该训 练好的模型检测螺栓具体位置， 并对待检测螺栓 的图像进行处理得到去噪后的图像， 然后计算待 检测螺栓的螺母与裸露部分的螺柱的比例 并与 预设松动阈值进行比对， 最后确定螺栓松动检测 结果。 该方法提高了在复杂检图像下螺栓松动检 测的精度和效率。 权利要求书2页 说明书9页 附图6页 CN 114581365 A 2022.06.03 CN 114581365 A 1.一种螺 栓检测模型构建方法， 其特 征在于， 包括如下步骤： 获取包含目标螺栓的图像集进行标注并确定对应的标签信 息， 所述标签信 息包括所述 目标螺栓所在边界框的中心点 坐标、 所述 边界框的宽度与高度； 将所述图像集中包含的图像输入至预设神经网络进行归一化处理并输出对应的特征 图； 在所述特征图的每个网格中预测先验框并根据预设置信度阈值对所述先验框进行处 理得到目标预测框及预测值， 所述预测 值包括所述 目标预测框中心点坐标、 所述 目标预测 框的宽度与高度； 将所述标签信息与所述预测值的误差反向输入至所述预设神经网络进行训练直至得 到满足条件的螺 栓检测模型。 2.根据权利要求1所述的方法， 其特征在于， 所述将所述标签信 息与所述预测值的误差 反向输入至所述预设神经网络进行训练直至得到满足条件的螺 栓检测模型， 包括： 将所述图像集的验证集输入所述预设神经网络并根据所述目标螺栓的精确率和召回 率验证所述预设神经网络的性能； 当所述精确率和所述召回率不满足预设要求， 扩充所述图像集的训练集并重复训练直 至得到满足条件的螺 栓检测模型。 3.一种螺 栓松动检测方法， 其特 征在于， 包括如下步骤： 获取待检测螺 栓的图像； 将所述待检测螺栓的图像输入至如权利要求1所述的螺栓检测模型构建方法得到的螺 栓检测模型并得到所述待检测螺 栓的具体位置； 根据所述具体位置对包含所述待检测螺栓的图像进行分割并对所述分割后的图像进 行处理得到对应的二 值化图像； 对所述二值化图像进行去噪处理并计算去噪后的二值化图像的水平累积直方图的局 部最大值和最小值； 根据所述最大值和所述最小值计算所述待检测螺栓的螺母与裸露部分的螺柱的比例 并将所述比例与预设松动阈值进行比对； 根据比对结果确定 螺栓松动检测结果。 4.根据权利要求3所述的方法， 其特征在于， 所述根据所述最大值和所述最小值计算所 述待检测螺栓的螺母与裸露部 分的螺柱的比例并将所述比例与预设松动阈值进行比对， 包 括： 对所述待检测螺栓的图像进行解析得到所述待检测螺栓的拍摄时间、 经度、 纬度以及 高度信息； 根据所述经度信息和所述纬度信息确定所述待检测螺 栓的型号； 根据所述待检测螺 栓的型号确定所述待检测螺 栓的松动阈值。 5.根据权利要求4所述的方法， 其特征在于， 所述根据比对结果确定螺栓松动检测结果 之后， 所述方法还 包括： 根据所述经度信息和所述纬度信息确定所述待检测螺 栓所在地 点信息； 将所述螺 栓松动检测结果与所述 地点信息传输 至后台。 6.一种螺 栓检测模型构建装置， 其特 征在于， 包括：权　利　要　求　书 1/2 页 2 CN 114581365 A 2第一获取模块， 用于获取包含目标螺栓的图像集进行标注并确定对应的标签信息， 所 述标签信息包括所述目标螺 栓所在边界框的中心点 坐标、 所述 边界框的宽度与高度； 第一处理模块， 用于将所述图像集中包含的图像输入至预设神经网络进行归一化处理 并输出对应的特 征图； 第二处理模块， 用于在所述特征图的每个网格中预测先验框并根据预设置信度阈值对 所述先验框进 行处理得到目标预测框及预测值， 所述预测值包括所述目标预测框中心点坐 标、 所述目标 预测框的宽度与高度； 训练模块， 用于将所述标签信 息与所述预测值的误差反向输入至所述预设神经网络进 行训练直至得到满足条件的螺 栓检测模型。 7.一种螺 栓松动检测装置， 其特 征在于， 包括： 第二获取模块， 用于获取待检测螺 栓的图像； 第一确定模块， 用于将所述待检测螺栓的图像输入至如权利要求1所述的螺栓检测模 型构建方法得到的螺 栓检测模型并得到所述待检测螺 栓的具体位置； 分割模块， 用于根据 所述具体位置对包含所述待检测螺栓的图像进行分割并对所述分 割后的图像进行处 理得到对应的二 值化图像； 第三处理模块， 用于对所述二值化图像进行去噪处理并计算去噪后的二值化图像的水 平累积直方图的局部最大值和最小值； 比对模块， 用于根据 所述最大值和所述最小值计算所述待检测螺栓的螺母与裸露部分 的螺柱的比例并将所述比例与预设松动阈值进行比对； 第二确定模块， 用于根据比对结果确定 螺栓松动检测结果。 8.根据权利要求7 所述的装置， 其特 征在于， 所述装置还 包括： 解析模块， 用于对所述待检测螺栓的图像进行解析得到所述待检测螺栓的拍摄时间、 经度、 纬度以及高度信息； 第三确定模块， 用于根据所述经度信息和所述纬度信息确定所述待检测螺 栓的型号； 第四确定模块， 用于根据所述待检测螺 栓的型号确定所述待检测螺 栓的松动阈值。 9.一种计算机可读存储介质， 其特征在于， 所述计算机可读存储介质存储有计算机指 令， 所述计算机指令用于使所述计算机执行如权利要求1或2所述的螺栓检测模型构建方 法， 或如权利要求3－5任一项所述的螺 栓松动检测方法。 10.一种电子设备， 其特征在于， 包括： 存储器和处理器， 所述存储器和所述处理器之间 互相通信连接， 所述存储器存储有计算机指 令， 所述处理器通过执行所述计算机指令， 从而 执行如权利要求 1或2所述的螺栓检测模型构建方法， 或如权利要求3－5任一项 所述的螺栓 松动检测方法。权　利　要　求　书 2/2 页 3 CN 114581365 A 3