(19)中华 人民共和国 国家知识产权局 (12)发明 专利申请 (10)申请公布号 (43)申请公布日 (21)申请 号 202111183783.8 (22)申请日 2021.10.1 1 (71)申请人 北京百度网讯科技有限公司 地址 100085 北京市海淀区上地十街10号 百度大厦2层 (72)发明人 安容巧　 (74)专利代理 机构 北京同立钧成知识产权代理 有限公司 1 1205 代理人 刘丹　刘芳 (51)Int.Cl. G06V 10/25(2022.01) G06V 10/44(2022.01) G06V 10/75(2022.01) G06K 9/62(2022.01) G06N 20/00(2019.01) (54)发明名称 图像处理方法、 装置和电子设备 (57)摘要 本公开提供了一种图像处理方法、 装置和电 子设备， 涉及计算机视觉、 深度学习等人工智能 技术领域。 具体实现方案为： 在前端引导用户拍 摄图像时， 可以先获取捕获的第一图像对应的第 一特征向量、 以及在捕获第一图像 之前拍摄的第 二图像对应的第二特征向量， 并将这两个特征向 量进行匹配， 得到第二图像相对于第一图像的投 影矩阵， 再在该投影矩阵上的基础上， 结合第一 图像和在第一图像 之前捕获的第三图像， 共同确 定目标标记框， 这样可以通过目标标记框准确地 引导用户拍摄捕获到的 图像， 且在前端引导过程 中， 减少了标记框严重抖动的发生。 权利要求书4页 说明书14页 附图4页 CN 113902905 A 2022.01.07 CN 113902905 A 1.一种图像处 理方法， 包括： 获取捕获的第一图像对应的第 一特征向量、 以及在捕 获所述第 一图像之前拍摄的第 二 图像对应的第二特 征向量； 将所述第一特征向量和所述第 二特征向量进行匹配， 得到所述第 二图像相对于所述第 一图像的投影矩阵； 根据所述第一图像、 在所述第一图像之前捕获的第三图像以及所述投影矩阵， 确定所 述第一图像相对于所述第二图像的重叠区域对应的目标标记框； 其中， 所述第一图像和所 述第三图像为相邻的两帧图像。 2.根据权利要求1所述的方法， 其中， 所述根据所述第一图像、 在所述第一图像之前捕 获的第三图像以及所述投影矩阵， 确定所述第一图像相对于所述第二图像的重叠区域对应 的目标标记框， 包括： 根据所述投影矩阵， 确定所述第 一图像相对于所述第 二图像的重叠区域对应的初始标 记框； 基于所述第三图像和所述初始标记框确定所述投影矩阵是否满足预设条件； 根据所述初始标记框和判断结果， 确定所述目标 标记框。 3.根据权利要求2所述的方法， 其中， 所述基于所述第 三图像和所述初始标记框确定所 述投影矩阵是否满足预设条件， 包括： 对所述第三图像进行角点检测， 并根据检测得到的多个角点确定第一矢量移动距离； 根据所述初始标记框中的边界点和所述第三图像， 确定第二矢量移动距离； 根据所述第 一矢量移动距离和所述第 二矢量移动距离， 确定所述投影矩阵是否满足预 设条件。 4.根据权利要求3所述的方法， 其中， 所述根据所述初始标记框和判断结果， 确定所述 目标标记框， 包括： 若判断结果指示所述投影矩阵满足预设条件， 则将所述初始标记框确定为所述目标标 记框； 若判断结果指示所述投影矩阵不满足预设条件， 则根据 所述初始标记框 中的边界点的 位置和所述第一矢量移动距离， 确定所述目标 标记框。 5.根据权利要求3或4所述的方法， 其中， 所述根据所述第一矢量移动距离和所述第二 矢量移动距离， 确定所述投影矩阵是否满足预设条件， 包括： 若所述第二矢量移动距离小于或等于预设倍的所述第 一矢量移动距离， 则确定所述投 影矩阵满足预设条件； 若所述第二矢量移动距离大于预设倍的所述第 一矢量移动距离， 则确定所述投影矩阵 不满足预设条件。 6.根据权利要求3 ‑5任一项所述的方法， 其中， 所述根据检测得到的多个角点确定第一 矢量移动距离， 包括： 对所述多个角点进行光 流跟踪， 得到多个目标光 流点； 针对各目标光流点， 确定所述目标光流点在所述第三图像中对应的第一关键点； 并确 定所述目标光 流点相对于所述第一关键点的矢量移动距离； 根据多个矢量移动距离， 确定所述第一矢量移动距离 。权　利　要　求　书 1/4 页 2 CN 113902905 A 27.根据权利要求6所述的方法， 其中， 所述对所述多个角点进行光流跟踪， 得到多个目 标光流点， 包括： 对所述多个角点进行光 流跟踪， 得到多个光 流点； 分别确定所述多个光流点各自对应的置信度， 并将大于置信度阈值的置信度对应的光 流点确定为所述多个目标光 流点。 8.根据权利要求3 ‑7任一项所述的方法， 其中， 所述根据所述初始标记框 中的边界点和 所述第三图像， 确定第二矢量移动距离， 包括： 针对所述初始标记框中的各边界点， 确定所述边界点在所述第 三图像中对应的第 二关 键点； 并确定所述 边界点相对于所述第二关键点的矢量移动距离； 根据多个矢量移动距离， 确定所述第二矢量移动距离 。 9.根据权利要求1 ‑8任一项所述的方法， 其中， 所述获取捕获的第一图像对应的第一特 征向量， 包括： 确定所述第一图像中是否存在高斯响应最大的目标对象； 若存在所述目标对象， 则获取 所述第一图像对应的所述第一特 征向量。 10.根据权利要求1 ‑9任一项所述的方法， 其中， 所述获取捕获的第一图像对应的第一 特征向量， 包括： 采用深度特 征提取模型， 提取 所述第一图像对应的第一初始特 征向量； 采用特征提取算法， 提取 所述第一图像对应的第二初始特 征向量； 将所述第一初始特征向量和所述第 二初始特征向量进行特征融合， 得到所述第 一特征 向量。 11.根据权利要求1 ‑10任一项所述的方法， 其中， 所述方法还 包括： 若所述目标标记框在所述第 二图像中的占比处于预设范围内， 则拍摄第四图像； 其中， 所述第四图像为对捕获的所述第一图像执 行拍摄操作得到的图像； 根据所述目标 标记框对应的区域， 对所述第四图像和所述第二图像进行拼接 。 12.根据权利要求11所述的方法， 其中， 所述根据所述目标标记框对应的区域， 对所述 第四图像和所述第二图像进行拼接， 包括： 将所述目标标记框对应的区域划分为多个子区域， 并分别确定各子区域与 所述第二图 像的重叠区域的面积； 根据所述各子区域与所述第二图像的重 叠区域的面积， 确定摄 像机的移动方向； 根据所述摄 像机的移动方向， 对所述第四图像和所述第二图像进行拼接 。 13.一种图像处 理装置， 包括： 获取单元， 用于获取捕获的第一图像对应的第一特征向量、 以及在捕获所述第一图像 之前拍摄的第二图像对应的第二特 征向量； 匹配单元， 用于将所述第一特征向量和所述第二特征向量进行匹配， 得到所述第二图 像相对于所述第一图像的投影矩阵； 处理单元， 用于根据所述第一图像、 在所述第一图像之前捕获的第三图像以及所述投 影矩阵， 确定所述第一图像相对于所述第二图像的重叠区域对应的目标标记框； 其中， 所述 第一图像和所述第三图像为相邻的两帧图像。 14.根据权利要求13所述的装置， 其中， 所述处理单元包括第一处理模块、 第二处理模权　利　要　求　书 2/4 页 3 CN 113902905 A 3