(19)中华 人民共和国 国家知识产权局 (12)发明 专利申请 (10)申请公布号 (43)申请公布日 (21)申请 号 202111644063.7 (22)申请日 2021.12.2 9 (71)申请人 北京字跳网络技 术有限公司 地址 100190 北京市海淀区紫金 数码园4号 楼2层0207 (72)发明人 黄佳斌　 (74)专利代理 机构 北京远智汇知识产权代理有 限公司 1 1659 代理人 刘欣 (51)Int.Cl. G06T 3/00(2006.01) G06T 7/11(2017.01) G06K 9/62(2022.01) G06V 10/774(2022.01) G06V 10/82(2022.01)G06N 3/04(2006.01) G06N 3/08(2006.01) (54)发明名称 图像处理方法、 装置、 电子设备及存 储介质 (57)摘要 本公开实施例提供了一种图像处理方法、 装 置、 电子设备及存储介质， 该方法包括： 获取待处 理视频帧， 并确定待处理视频帧的目标法向图； 根据目标法向图和预先设置的光源属性信息， 确 定待处理视频帧中至少一个像素点的目标光照 强度信息； 基于至少一个目标光照强度信息， 确 定相应像素点的显示信息， 以基于显示信息确定 与待处理视频帧相对应的目标视频帧。 本公开实 施例的技术方案， 可以采用法向估计的算法确定 待处理视频帧的法向图， 进而可以根据特效所对 应的光源与法向图中各像素点之间的关系， 确定 各像素点的目标光照强度信息， 以便基于目标光 照强度信息显示相应的像素点， 不仅提高了法向 图确定的高效性， 还提高特效添加的准确性和普 适性的效果。 权利要求书2页 说明书13页 附图3页 CN 114331823 A 2022.04.12 CN 114331823 A 1.一种图像处 理方法， 其特 征在于， 包括： 获取待处 理视频帧， 并确定所述待处 理视频帧的目标法向图； 根据所述目标法 向图和预先设置的光源属性信 息， 确定待处理视频帧中至少一个像素 点的目标光照强度信息； 基于至少一个目标光照强度信息， 确定相应像素点的显示信息， 以基于所述显示信息 确定与所述待处 理视频帧相对应的目标视频帧。 2.根据权利要求1所述的方法， 其特征在于， 所述获取待处理视频帧， 并确定所述待处 理视频帧的目标法向图， 包括： 依次获取目标视频中的各待处 理视频帧； 确定所述待处理视频帧中至少一个像素点在第 一方向和第 二方向上的梯度信 息， 得到 所述至少一个 像素点的法向信息； 基于所述至少一个 像素点的法向信息， 得到所述目标法向图。 3.根据权利要求1所述的方法， 其特征在于， 所述获取待处理视频帧， 并确定所述待处 理视频帧的目标法向图， 包括： 获取待处理视频帧， 并基于预先训练好的图像分割 模型确定与 所述待处理视频帧相对 应的目标分割区域； 确定所述目标分割区域中至少一个像素点在第 一方向和第 二方向上的梯度信 息， 得到 至少一个 像素点的法向信息， 并基于所述法向信息确定所述待处 理视频帧的目标法向图。 4.根据权利要求2或3所述的方法， 其特征在于， 确定至少一个像素点在第一方向和第 二方向上的梯度信息， 得到 至少一个 像素点的法向信息， 包括： 通过联合双边滤波对所述待处 理视频帧进行 滤波处理， 得到待 使用视频帧； 采用索贝尔算子确定待使用视频帧中每个像素点在第一方向上和第二方向上的梯度 信息， 确定 至少一个 像素点的法向信息 。 5.根据权利要求1所述的方法， 其特征在于， 所述根据所述目标法 向图和预先设置的光 源属性信息， 确定待处 理视频帧中至少一个 像素点的目标光照强度信息， 包括： 针对各像素点， 确定当前像素点在所述目标法向图中所对应的目标法向信息， 并根据 所述目标法向信息、 光源属 性信息以及所述当前像素点所属视频帧的拍摄角度信息， 确定 所述当前像素点的目标光照强度信息 。 6.根据权利要求5所述的方法， 其特征在于， 所述光源属性信息中包括光源位置信息， 所述根据所述目标法向信息、 光源属性信息以及所述当前像素点所属视频帧的拍摄角度信 息， 确定所述当前像素点的目标光照强度信息， 包括： 根据所述 光源位置信息， 确定当前像素点的光照方向信息； 根据所述光照方向信息、 所述目标法向信息以及预先设置的漫反射系数值， 确定所述 当前像素点的漫反射 值； 根据所述光照方向信息以及所述目标法向信息， 确定目标反射角， 并根据所述目标反 射角度、 所述拍摄角度信息以及预先设置的反射系 数值， 确定所述当前像素点的反射强度 值； 根据所述漫反射值、 所述反射强度值以及所述光源属性信息所对应的环境光强度值， 确定所述目标光照强度信息 。权　利　要　求　书 1/2 页 2 CN 114331823 A 27.根据权利要求6所述的方法， 其特征在于， 所述根据所述漫反射值、 所述反射强度值 以及所述 光源属性信息所对应的环境 光强度值， 确定所述目标光照强度信息， 包括： 将所述漫反射值、 所述反射强度值以及所述环境光强度值中最大的值作为所述目标光 照强度信息 。 8.根据权利要求1所述的方法， 其特征在于， 所述基于至少一个目标光照强度信息， 确 定相应像素点的显示信息， 包括： 根据至少一个像素点的目标光照强度信 息和相应的像素值信 息， 更新相应像素点的显 示信息。 9.一种图像处 理装置， 其特 征在于， 包括： 法向图确定模块， 用于获取待处 理视频帧， 并确定所述待处 理视频帧的目标法向图； 光照强度确定模块， 用于根据所述目标法向图和预先设置的光源属性信息， 确定待处 理视频帧中至少一个 像素点的目标光照强度信息； 目标视频帧显示模块， 用于基于至少一个目标光照强度信息， 确定相应像素点的显示 信息， 以基于所述显示信息确定与所述待处 理视频帧相对应的目标视频帧。 10.一种电子设备， 其特 征在于， 所述电子设备包括： 一个或多个处 理器； 存储装置， 用于存 储一个或多个程序， 当所述一个或多个程序被所述一个或多个处理器执行， 使得所述一个或多个处理器实 现如权利要求1 ‑8中任一所述图像处 理方法。 11.一种包含计算机可执行指令的存储介质， 所述计算机可执行指令在由计算机处理 器执行时用于执 行如权利要求1 ‑8中任一所述图像处 理方法。权　利　要　求　书 2/2 页 3 CN 114331823 A 3