(19)中华 人民共和国 国家知识产权局 (12)发明 专利 (10)授权公告 号 (45)授权公告日 (21)申请 号 202111622123.5 (22)申请日 2021.12.28 (65)同一申请的已公布的文献号 申请公布号 CN 113989510 A (43)申请公布日 2022.01.28 (73)专利权人 深圳市万物云科技有限公司 地址 518000 广东省深圳市前海深港合作 区前湾一路1号A栋201室 (72)发明人 姚钊盈　苏红梅　 (74)专利代理 机构 深圳市精英专利事务所 44242 代理人 冯筠 (51)Int.Cl. G06V 10/26(2022.01) G06V 10/774(2022.01) G06V 10/82(2022.01) G06K 9/62(2022.01) G06T 7/62(2017.01) G06N 3/04(2006.01)(56)对比文件 CN 111568207 A,2020.08.25 CN 113569819 A,2021.10.2 9 CN 111950470 A,2020.1 1.17 CN 108535269 A,2018.09.14 CN 111568243 A,2020.08.25 CN 112070049 A,2020.12.1 1 CN 104079798 A,2014.10.01 CN 113226190 A,2021.08.0 6 US 2016088918 A1,2016.0 3.31 M.， Konik等.Object-oriented ap proach to oil spill detecti on using ENVISAT ASAR images. 《Isprs Journal of Photogram metry & Remote Sensi ng》 .2016,第1 18卷 赵露露等.图像修复研究进 展综述. 《计算机 科学》 .2021,第48卷(第3期), (续) 审查员 罗秀英 (54)发明名称 一种河道 排水口溢流检测方法、 装置及相关 设备 (57)摘要 本发明公开了河道 排水口溢流检测方法、 装 置及相关设备， 河道排水口溢流检测方法包括对 摄像机采集的图像进行清洗和标注； 将图像划分 为训练集、 验证集和测试集， 并通过BiSeNet模型 对图像进行训练， 把训练好的BiSeNet模型部署 到平台； 将摄像机接入平台， 使用训练好的 BiSeNet模型对摄像机的抽帧图像进行图像语义 分割处理； 使用图像处理方法 处理语义分割后的 图像， 计算出其中掩膜区域的面积和掩膜区域中 的水体面积， 计算水体在掩膜区域中的面积占 比； 判断连续多帧图像中水体在掩膜区域中的面 积占比是否达到预设阈值。 克服了传统检测的不 足之处， 通过图像分割和设定预选区域结合， 并进一步计算预选区域中水体面积占比的方法， 可 以检测各种场景 下排水口溢流情况。 [转续页] 权利要求书3页 说明书5页 附图1页 CN 113989510 B 2022.03.11 CN 113989510 B (56)对比文件 叶永东.基 于流量-面积比值的小流 域设计 洪水计算方法对比研究. 《中国水能及电气化》 .2018,(第5期),宋肖依.基 于FloodArea模型的城市积涝数 值模拟研究. 《中国优秀硕士学位 论文全文数据 库 (工程科技 Ⅱ辑)》 .2021,(第6期),2/2 页 2[接上页] CN 113989510 B1.一种河道排水口溢流检测方法， 其特 征在于， 包括： 对摄像机采集的图像进行清洗和标注； 将所述图像划分为训练集、 验证集和测试集， 并通过BiSeNet模型对所述图像进行训 练， 把训练好的所述BiSeNet模型部署到平台； 将所述摄像机接入所述平台， 使用训练好的所述BiSeNet模型对所述摄像机的抽帧图 像进行图像 语义分割处 理； 使用图像处理方法处理语义分割后的所述图像， 计算出其中掩膜区域的面积和掩膜区 域中的水体面积， 计算所述水体在掩膜区域中的面积占比； 判断连续多帧图像中所述水体在掩膜区域中的面积占比是否大于或等于预设阈值； 若是， 则排水口发生了溢流， 并发送告警提 示； 若否， 则排水口不溢流； 其中， 所述将所述摄像机接入所述平台， 使用训练好的所述BiSeNet模型对所述摄像机 的抽帧图像进行图像 语义分割处 理， 包括： 将所述摄 像机接入所述平台； 在所述摄 像机画面中的排水口位置设定预选 框； 对所述摄 像机进行抽帧得到抽帧图像； 将所述抽帧图像输入训练好的BiSeNet模型进行推理， 并对所述抽帧图像中的每一个 像素点进行分类， 得到图像 语义分割后的第一图像数据； 其中， 所述第一图像数据中的背景用0像素表示， 水体用设定像素表示； 其中， 所述使用图像处理方法处理语义分割后的所述图像， 计算出其中掩膜区域的面 积和掩膜区域中的水体面积， 计算所述水体在掩膜区域中的面积占比， 包括： 创建空白图像模板， 根据 预选框的坐标， 在所述空白图像模板上生成掩膜， 得到第二图 像数据； 使用opencv对图像语义分割后的所述第一图像数据和所述第二图像数据执行与操作， 得到第三图像数据； 将所述第三图像数据中大于 0的像素设置为1得到第四图像数据； 计算所述第四图像数据中掩膜区域中的水体面积； 根据预选 框的坐标， 通过opencv计算出掩膜区域的面积； 计算出掩膜区域中的水体面积占比； 其中， 第二图像数据中掩膜区域的像素设置为255， 其他区域像素设置为0； 第三图像数 据只保留第一图像数据中预选 框区域的像素值， 其 他区域的像素设置为0 。 2.根据权利要求1所述的河道排水口溢流检测方法， 其特征在于， 所述对摄像机采集的 图像进行清洗和标注， 包括： 通过视频抽帧的方式采集 不同河道的图像； 对所述图像进行 数据清洗， 保留包 含排水口 的图像； 对清洗后的所述图像中的水体进行图像语义分割的标注， 记录所述图像中水体的多边 形坐标以及标签， 得到标注信息， 并将所述标注信息存 入数据交换格式文件中。 3.根据权利要求1所述的河道排水口溢流检测方法， 其特征在于， 所述将所述图像划分 为训练集、 验证集和测试集， 并通过BiSeNet模型对所述图像进行训练， 把训练好的所述权　利　要　求　书 1/3 页 2 CN 113989510 B 3