(19)中华 人民共和国 国家知识产权局 (12)发明 专利申请 (10)申请公布号 (43)申请公布日 (21)申请 号 202111601630.0 (22)申请日 2021.12.24 (71)申请人 上海商汤智能科技有限公司 地址 200233 上海市徐汇区桂平路391号3 号楼1605A室 (72)发明人 黄烨翀　陈翼男　 (74)专利代理 机构 深圳市威世博知识产权代理 事务所(普通 合伙) 44280 代理人 李申 (51)Int.Cl. G06T 7/11(2017.01) G06T 5/00(2006.01) G06N 3/08(2006.01) (54)发明名称 图像优化方法、 装置、 设备及存 储介质 (57)摘要 本申请公开了一种图像优化方法、 装置、 设 备及存储介质。 该图像优化方法包括： 获取原始 图像中目标的初始分割结果， 其中， 初始分割结 果包括原始 图像中至少一个目标的初始位置信 息； 基于原始图像以及初始分割结果， 得到若干 局部图像的数据， 其中， 各局部图像的数据包含 原始图像中对应的局部区域的图像信息、 以及局 部区域在原始图像中的全局位置信息， 各局部区 域是基于 各目标的初始位置信息确定的； 分别对 若干局部图像进行分割， 对应得到若干第一分割 结果； 利用若干第一分割结果， 得到原始图像中 目标的最终分割结果。 上述方案， 能够提高目标 分割的准确性。 权利要求书4页 说明书18页 附图5页 CN 114299087 A 2022.04.08 CN 114299087 A 1.一种图像优化方法， 其特 征在于， 包括： 获取原始图像中目标的初始分割结果， 其中， 所述初始分割结果包括所述原始图像中 至少一个目标的初始位置信息； 基于所述原始图像以及所述初始分割结果， 得到若干局部图像的数据， 其中， 各所述局 部图像的数据包含所述原始图像中对应的局部区域的图像信息、 以及所述局部区域在所述 原始图像中的全局位置信息， 各所述局部区域是基于不同的所述目标的初始 位置信息确定 的； 分别对所述若干局部图像进行分割， 对应得到若干第一分割结果； 利用所述若干第一分割结果， 得到所述原 始图像中目标的最终分割结果。 2.根据权利要求所述的方法， 其特征在于， 所述基于所述原始图像以及所述初始分割 结果， 得到若干局部图像的数据， 包括： 将所述原始图像、 初始分割结果以及至少一种图像参考信息组合得到全局图像数据， 其中， 所述至少一种图像参考信息包括所述原始图像的空间编码信息， 所述空间编码信息 用于表示所述原 始图像中各位置点的全局位置信息； 基于所述目标的初始位置信 息， 从所述全局图像数据提取得到所述若干局部图像的数 据。 3.根据权利要求2所述的方法， 其特征在于， 所述至少一种图像参考信 息还包括所述原 始图像的对 象分割结果， 所述对 象分割结果包括所述原始图像中各对 象对应的位置信息， 所述目标位于各对象中的预设对象上； 和/或， 所述将所述原始图像、 初始分割结果以及至少一种图像参考信 息组合得到全局图像数 据， 包括： 将所述原始图像、 初始分割结果以及至少一种图像参考信 息组成多通道的全局图像数 据， 其中， 所述原 始图像、 初始分割结果和每种所述图像参 考信息分别对应不同通道。 4.根据权利要求2或3所述的方法， 其特征在于， 在所述将所述原始图像、 初始分割结果 以及至少一种图像参 考信息组合得到全局图像数据之前， 所述方法还 包括： 从所述原 始图像中确定可 行区域； 采用第一编码方式对所述可行区域进行空间编码， 以及采用第 二编码方式对所述原始 图像中除可 行区域以外的剩余区域进行空间编码， 以得到所述原 始图像的空间编码信息 。 5.根据权利要求4所述的方法， 其特征在于， 所述第 一编码方式为所述可行区域中的各 位置点的编 码值为第一数值范围， 所述可行区域中按照预设方向排列的各位置点的编 码值 依序增大； 所述第二编码方式为所述剩余区域中的各位置点的编码值为第二数值范围， 其 中， 所述第一数值范围与所述第二数值范围不重 叠； 和/或， 所述从所述原 始图像中确定可 行区域， 包括： 在满足第一条件的情况 下， 将所述预设对象对应的区域作为所述可 行区域； 在不满足所述第一条件的情况 下， 将所述原 始图像的所有区域作为所述可 行区域； 其中， 所述第 一条件包含： 所述图像参考信 息包括所述原始图像的对象分割结果、 或所 述初始分割结果包括所述原始图像中预设对象的位置信息， 所述对象分割结果包括所述原 始图像中各对 象对应的位置信息， 各对 象包括所述预设对 象， 所述目标位于所述预设对 象 上。权　利　要　求　书 1/4 页 2 CN 114299087 A 26.根据权利要求2至5任一项所述的方法， 其特征在于， 所述基于所述目标的初始位置 信息， 从所述全局图像数据提取 得到所述若干局部图像的数据， 包括： 将所述至少一个目标划分为若干个目标组； 对于每个所述目标组， 基于所述目标组的初始位置信息， 从所述全局图像数据提取得 到与所述目标组对应的局部图像的数据。 7.根据权利要求6所述的方法， 其特征在于， 所述基于所述目标组的初始位置信息， 从 所述全局图像数据提取 得到与所述目标组对应的局部图像的数据， 包括： 以所述目标组的预设位置为中心， 在所述全局图像数据中裁切预设大小的区域作为与 所述目标组对应的所述局部图像的数据； 和/或， 在基于所述目标组的初始位置信 息， 从所述全局图像数据提取得到与所述目标 组对应的局部图像的数据之前， 所述方法还 包括： 基于所述目标组的初始位置信息， 对所述全局图像数据进行重采样， 以得到新的所述 全局图像数据， 其中， 所述新的所述全局图像数据用于提取与所述 目标组对应的局部图像 的数据。 8.根据权利要求7所述的方法， 其特征在于， 所述基于所述目标组的初始位置信息， 对 所述全局图像数据进行重采样， 包括： 基于所述目标组 的初始位置信 息， 得到所述原始图像中所述目标组对应的第 一目标区 域； 利用与所述第一目标区域的尺寸匹配的重采样方式对所述全局图像数据进行重采样。 9.根据权利要求8所述的方法， 其特征在于， 所述利用与 所述第一目标区域的尺寸匹配 的重采样方式对所述全局图像数据进行重采样， 包括： 获取所述第一目标区域在至少一个预设方向的投影尺寸； 检测所述第一目标区域的投影尺寸是否满足第二条件或第三条件； 在所述第一目标区域的投影尺寸满足第 二条件的情况下， 按照第 一比例对所述全局图 像数据进行降采样； 在所述第一目标区域的投影尺寸满足第 三条件的情况下， 按照第 二比例对所述全局图 像数据进行升采样； 在所述第一目标区域的投影尺寸均不满足所述第 二条件和第 三条件的情况下， 使用预 设比例对所述全局图像数据进行重采样。 10.根据权利要求9所述的方法， 其特征在于， 所述第二条件为所述第一目标区域存在 至少一个所述投影尺 寸大于第一尺寸， 所述第一比例大于或等于存在的所述投影尺寸与所 述第一尺寸的比值； 所述第三条件为所述第一目标区域的所有所述投影尺寸均小于第二尺 寸， 所述第二比例大于或等于所述第二尺寸与所述第一目标区域最小的所述投影尺寸之间 的比值， 所述第二尺寸小于或等于所述第一尺寸； 和/或， 所述检测所述第一目标区域的投影尺寸是否满足第二条件或第三条件， 包括： 分别对所述第一目标区域的每个投影尺寸进行扩充， 得到扩充后的所述投影尺寸， 其 中， 所述扩充后的所述投影尺寸用于检测是否满足第二条件或第三条件； 检测扩充后的所述投影尺寸是否满足第二条件或第三条件。 11.根据权利要求1 ‑10任一项所述的方法， 其特征在于， 对所述若干局部图像进行分割权　利　要　求　书 2/4 页 3 CN 114299087 A 3